python中urlparse模块介绍与使用示例_Python

简介

urlparse 模块主要是用于解析url中的参数对url按照一定格式进行拆分或拼接。urlparse库用于把url解析为各个组件，支持file,ftp,http,https, imap, mailto, mms, news, nntp, prospero, rsync, rtsp, rtspu, sftp, shttp, sip, sips, snews, svn, svn+ssh, telnet等几乎所有的形式。

注意：根据其官网的说明，在Python3.0中，此库已经更名为urllib.parse了。

使用说明

1.urlparse.urlparse

将url分为6个部分，返回一个包含6个字符串项目的元组：协议、位置、路径、参数、查询、片段。

									import urlparse

									url_change = urlparse.urlparse('https://i.cnblogs.com/EditPosts.aspx?opt=1')

									print url_change

输出结果为：

1	`ParseResult(scheme='https', netloc='i.cnblogs.com', path='/EditPosts.aspx', params='', query='opt=1', fragment='')`

其中 scheme 是协议 netloc 是域名服务器 path 相对路径 params是参数，query是查询的条件

1	`urlparse.parse_qs(urlparse.urlparse(url).query)`

这个是获取urlparse分割后元祖中的某一项 urlparse.urlparse(url).query 获取查询条件

parse_qs 有几种实现

urlparse.parse_qs 返回字典
urlparse.parse_qsl 返回列表

2. urlparse.urlsplit

和urlparse差不多，将url分为5部分，返回一个包含5个字符串项目的元组：协议、位置、路径、查询、片段。

									import urlparse

									url_change = urlparse.urlsplit('https://i.cnblogs.com/EditPosts.aspx?opt=1')

									print url_change

1	`SplitResult(scheme='https', netloc='i.cnblogs.com', path='/EditPosts.aspx', query='opt=1', fragment='')`

其中 scheme 是协议 netloc 是域名服务器 path 相对路径 query是查询的条件

3.urlparse.urljoin

将相对的地址组合成一个url，对于输入没有限制，开头必须是http://，否则将不组合前面。

									import urlparse

									new_url = urlparse.urljoin('https://baidu.com/ssss/','88888')

									print new_url

输出 https://baidu.com/ssss/88888

如果输入错误信息如 new_url = urlparse.urljoin('122','88888') 并不会将两者合并输出‘88888'

urlparse获取url后面的参数

如果给定你一个URL，比如： http://url/api?param=2&param2=4 我们需要获取参数名和参数值的话，那可以用到 python标准库urlparse

									import urlparse

									def qs(url):

									  query = urlparse.urlparse(url).query

									  return dict([(k,v[0]) for k,v in urlparse.parse_qs(query).items()])