建站
咨詢
售后
建站咨詢
新聞中心
Python 中的 urllib.parse 模塊提供了很多解析和組建 URL 的函數(shù)。
成都創(chuàng)新互聯(lián)是一家集網(wǎng)站建設(shè),禹城企業(yè)網(wǎng)站建設(shè),禹城品牌網(wǎng)站建設(shè),網(wǎng)站定制,禹城網(wǎng)站建設(shè)報(bào)價(jià),網(wǎng)絡(luò)營(yíng)銷,網(wǎng)絡(luò)優(yōu)化,禹城網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè)，幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競(jìng)爭(zhēng)力?？沙浞譂M足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時(shí)我們時(shí)刻保持專業(yè)、時(shí)尚、前沿，時(shí)刻以成就客戶成長(zhǎng)自我，堅(jiān)持不斷學(xué)習(xí)、思考、沉淀、凈化自己，讓我們?yōu)楦嗟钠髽I(yè)打造出實(shí)用型網(wǎng)站。
解析url
urlparse() 函數(shù)可以將 URL 解析成 ParseResult 對(duì)象。對(duì)象中包含了六個(gè)元素，分別為：
- 協(xié)議（scheme）
- 域名（netloc）
- 路徑（path）
- 路徑參數(shù)（params）
- 查詢參數(shù)（query）
- 片段（fragment）
from urllib.parse import urlparseurl='http://user:pwd@domain:80/path;params?query=queryarg#fragment'parsed_result=urlparse(url)print('parsed_result 包含了',len(parsed_result),'個(gè)元素')print(parsed_result)
結(jié)果為:
parsed_result 包含了 6 個(gè)元素ParseResult(scheme='http', netloc='user:pwd@domain:80', path='/path', params='params', query='query=queryarg', fragment='fragment')
ParseResult 繼承于 namedtuple，因此可以同時(shí)通過索引和命名屬性來獲取 URL 中各部分的值。
為了方便起見， ParseResult 還提供了 username、 password、 hostname、 port 對(duì) netloc 進(jìn)一步進(jìn)行拆分。
print('scheme :', parsed_result.scheme)print('netloc :', parsed_result.netloc)print('path :', parsed_result.path)print('params :', parsed_result.params)print('query :', parsed_result.query)print('fragment:', parsed_result.fragment)print('username:', parsed_result.username)print('password:', parsed_result.password)print('hostname:', parsed_result.hostname)print('port :', parsed_result.port)
結(jié)果為：
scheme : httpnetloc : user:pwd@domain:80path : /pathparams : paramsquery : query=queryargfragment: fragmentusername: userpassword: pwdhostname: domainport : 80
除了 urlparse() 之外，還有一個(gè)類似的 urlsplit() 函數(shù)也能對(duì) URL 進(jìn)行拆分，所不同的是， urlsplit() 并不會(huì)把 路徑參數(shù)(params) 從 路徑(path) 中分離出來。
當(dāng) URL 中路徑部分包含多個(gè)參數(shù)時(shí)，使用 urlparse() 解析是有問題的：
url='http://user:pwd@domain:80/path1;params1/path2;params2?query=queryarg#fragment'parsed_result=urlparse(url)print(parsed_result)print('parsed.path :', parsed_result.path)print('parsed.params :', parsed_result.params)
結(jié)果為：
ParseResult(scheme='http', netloc='user:pwd@domain:80', path='/path1;params1/path2', params='params2', query='query=queryarg', fragment='fragment')parsed.path : /path1;params1/path2parsed.params : params2
這時(shí)可以使用 urlsplit() 來解析：
from urllib.parse import urlsplitsplit_result=urlsplit(url)print(split_result)print('split.path :', split_result.path)# SplitResult 沒有 params 屬性
結(jié)果為：
SplitResult(scheme='http', netloc='user:pwd@domain:80', path='/path1;params1/path2;params2', query='query=queryarg', fragment='fragment')split.path : /path1;params1/path2;params2
若只是要將 URL 后的 fragment 標(biāo)識(shí)拆分出來，可以使用 urldefrag() 函數(shù)：
from urllib.parse import urldefragurl = 'http://user:pwd@domain:80/path1;params1/path2;params2?query=queryarg#fragment'd = urldefrag(url)print(d)print('url :', d.url)print('fragment:', d.fragment)
結(jié)果為：
DefragResult(url='http://user:pwd@domain:80/path1;params1/path2;params2?query=queryarg', fragment='fragment')url : http://user:pwd@domain:80/path1;params1/path2;params2?query=queryargfragment: fragment
組建URL
ParsedResult 對(duì)象和 SplitResult 對(duì)象都有一個(gè) geturl() 方法，可以返回一個(gè)完整的 URL 字符串。
print(parsed_result.geturl())print(split_result.geturl())
結(jié)果為：
http://user:pwd@domain:80/path1;params1/path2;params2?query=queryarg#fragmenthttp://user:pwd@domain:80/path1;params1/path2;params2?query=queryarg#fragment
但是 geturl() 只在 ParsedResult 和 SplitResult 對(duì)象中有，若想將一個(gè)普通的元組組成 URL，則需要使用 urlunparse() 函數(shù)：
from urllib.parse import urlunparseurl_compos = ('http', 'user:pwd@domain:80', '/path1;params1/path2', 'params2', 'query=queryarg', 'fragment')print(urlunparse(url_compos))
結(jié)果為：
http://user:pwd@domain:80/path1;params1/path2;params2?query=queryarg#fragment
相對(duì)路徑轉(zhuǎn)換絕對(duì)路徑
除此之外，urllib.parse 還提供了一個(gè) urljoin() 函數(shù)，來將相對(duì)路徑轉(zhuǎn)換成絕對(duì)路徑的 URL。
from urllib.parse import urljoinprint(urljoin('http://www.example.com/path/file.html', 'anotherfile.html'))print(urljoin('http://www.example.com/path/', 'anotherfile.html'))print(urljoin('http://www.example.com/path/file.html', '../anotherfile.html'))print(urljoin('http://www.example.com/path/file.html', '/anotherfile.html'))
結(jié)果為：
http://www.example.com/path/anotherfile.htmlhttp://www.example.com/path/anotherfile.htmlhttp://www.example.com/anotherfile.htmlhttp://www.example.com/anotherfile.html
查詢參數(shù)的構(gòu)造和解析
使用 urlencode() 函數(shù)可以將一個(gè) dict 轉(zhuǎn)換成合法的查詢參數(shù)：
from urllib.parse import urlencodequery_args = {'name': 'dark sun','country': '中國(guó)'}query_args = urlencode(query_args)print(query_args)
結(jié)果為：
name=dark+sun&country=%E4%B8%AD%E5%9B%BD
可以看到特殊字符也被正確地轉(zhuǎn)義了。
相對(duì)的，可以使用 parse_qs() 來將查詢參數(shù)解析成 dict。
from urllib.parse import parse_qsprint(parse_qs(query_args))
結(jié)果為：
{'name': ['dark sun'], 'country': ['中國(guó)']}
如果只是希望對(duì)特殊字符進(jìn)行轉(zhuǎn)義，那么可以使用 quote 或 quote_plus 函數(shù)，其中 quote_plus 比 quote 更激進(jìn)一些，會(huì)把 :、/ 一類的符號(hào)也給轉(zhuǎn)義了。
from urllib.parse import quote, quote_plus, urlencodeurl = 'http://localhost:1080/~hello!/'print('urlencode :', urlencode({'url': url}))print('quote :', quote(url))print('quote_plus:', quote_plus(url))
結(jié)果為：
urlencode : url=http%3A%2F%2Flocalhost%3A1080%2F%7Ehello%21%2Fquote : http%3A//localhost%3A1080/%7Ehello%21/quote_plus: http%3A%2F%2Flocalhost%3A1080%2F%7Ehello%21%2F
可以看到 urlencode 中應(yīng)該是調(diào)用 quote_plus 來進(jìn)行轉(zhuǎn)義的。
逆向操作則使用 unquote 或 unquote_plus 函數(shù)：
from urllib.parse import unquote, unquote_plusencoded_url = 'http%3A%2F%2Flocalhost%3A1080%2F%7Ehello%21%2F'print(unquote(encoded_url))print(unquote_plus(encoded_url))
結(jié)果為：
http://localhost:1080/~hello!/http://localhost:1080/~hello!/
你會(huì)發(fā)現(xiàn) unquote 函數(shù)居然能正確地將 quote_plus 的結(jié)果轉(zhuǎn)換回來。
標(biāo)題名稱：使用Python的urlliib.parse庫(kù)解析URL
鏈接地址：http://www.5511xx.com/article/djedhie.html
