Python怎么設置User-Agent和代理IP

本篇內容介紹了“Python怎么設置User-Agent和代理IP”的有關知識,在實際案例的操作過程中,不少人都會遇到這樣的困境,接下來就讓小編帶領大家學習一下如何處理這些情況吧!希望大家仔細閱讀,能夠學有所成!

成都創(chuàng)新互聯(lián)公司專業(yè)為企業(yè)提供濮陽網(wǎng)站建設、濮陽做網(wǎng)站、濮陽網(wǎng)站設計、濮陽網(wǎng)站制作等企業(yè)網(wǎng)站建設、網(wǎng)頁設計與制作、濮陽企業(yè)網(wǎng)站模板建站服務,十載濮陽做網(wǎng)站經(jīng)驗,不只是建網(wǎng)站,更提供有價值的思路和整體網(wǎng)絡服務。

一、設置User-Agent

1、創(chuàng)建Request對象時指定headers

url = 'http://ip.zdaye.com/'

head = {}

head['User-Agent'] = 'Mozilla/5.0 (Linux; Android 4.1.1; Nexus 7 Build/JRO03D) AppleWebKit/535.19 (KHTML,  like Gecko) Chrome/18.0.1025.166  Safari/535.19'

req = request.Request(url, headers=head)

#傳入創(chuàng)建好的Request對象

response = request.urlopen(req)

html = response.read().decode('utf-8')

print(html)

2、創(chuàng)建Request對象后使用add_header

req.add_header('User-Agent', 'Mozilla/5.0 (Linux; Android 4.1.1; Nexus 7 Build/JRO03D) AppleWebKit/535.19 (KHTML, like Gecko) Chrome/18.0.1025.166  Safari/535.19')

# 參數(shù)為 (key, value)

二、設置代理IP

使用install_opener方法之后,會將程序默認的urlopen方法替換掉。也就是說,如果使用install_opener之后,在該文件中,再次調用urlopen會使用自己創(chuàng)建好的opener。如果不想替換掉,只是想臨時使用一下,可以使用opener.open(url),這樣就不會對程序默認的urlopen有影響。

from urllib import request

if __name__ == "__main__":

url = 'http://ip.zdaye.com/'

#這是代理IP

proxy = {'http':'168.68.8.88:66666'}

#創(chuàng)建ProxyHandler

proxy_support = request.ProxyHandler(proxy)

#創(chuàng)建Opener

opener = request.build_opener(proxy_support)

#添加User Angent

opener.addheaders = [('User-Agent','Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36')]

#安裝OPener

request.install_opener(opener)

#使用自己安裝好的Opener

response = request.urlopen(url)

html = response.read().decode("utf-8")

print(html)

“Python怎么設置User-Agent和代理IP”的內容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關的知識可以關注創(chuàng)新互聯(lián)網(wǎng)站,小編將為大家輸出更多高質量的實用文章!

本文名稱:Python怎么設置User-Agent和代理IP
分享網(wǎng)址:http://bm7419.com/article16/gijsdg.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供域名注冊網(wǎng)站改版、網(wǎng)站設計公司、小程序開發(fā)、網(wǎng)站維護、做網(wǎng)站

廣告

聲明:本網(wǎng)站發(fā)布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經(jīng)允許不得轉載,或轉載時需注明來源: 創(chuàng)新互聯(lián)

商城網(wǎng)站建設