python爬蟲中正則表達(dá)式怎么用-創(chuàng)新互聯(lián)

小編給大家分享一下python爬蟲中正則表達(dá)式怎么用，希望大家閱讀完這篇文章之后都有所收獲，下面讓我們一起去探討吧！

成都創(chuàng)新互聯(lián)公司主營西藏網(wǎng)站建設(shè)的網(wǎng)絡(luò)公司,主營網(wǎng)站建設(shè)方案,重慶App定制開發(fā),西藏h5小程序開發(fā)搭建,西藏網(wǎng)站營銷推廣歡迎西藏等地區(qū)企業(yè)咨詢

- re.I # 忽略大小寫
- re.M # 多行匹配，將正則作用到源數(shù)據(jù)的每一行
- re.S # 單行匹配，將正則作用到整個(gè)源數(shù)據(jù)，輸出一個(gè)整體字符串（包括換行符也打?。?/p>

string = '''fall in love with you
i love you very much
i love she
i love her'''
# 去除以i開頭的每一行數(shù)據(jù)
re.findall('^i.*',string,re.M)

['i love you very much', 'i love she', 'i love her']

#匹配全部行
string1 = """細(xì)思極恐
你的隊(duì)友在看書
你的敵人在磨刀
你的閨蜜在減肥
隔壁老王在練腰
"""
re.findall('.*',string1,re.S)

['細(xì)思極恐\n你的隊(duì)友在看書\n你的敵人在磨刀\n你的閨蜜在減肥\n隔壁老王在練腰\n', '']

爬取糗事百科中所有的圖片進(jìn)行保存

import requests
import re
import urllib
import os

url = 'https://www.qiushibaike.com/pic/page/%d/?s=5170552'
# 自定義請(qǐng)求頭信息
headers = {
  'User-Agent':'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.119 Safari/537.36'
}
# 判斷是否存在名為qiutu的文件夾，如果不存在則創(chuàng)建文件夾
if not os.path.exists('./qiutu'):
  os.mkdir('./qiutu')
# 手動(dòng)輸入開始頁，結(jié)束頁
start_page = int(input('start>>>'))
end_page = int(input('end>>>'))

for page in range(start_page,end_page+1):
　　# 按照每頁url形式拼接指定url
  new_url = format(url%page)
　　# 發(fā)起請(qǐng)求
  page_text = requests.get(url=new_url,headers=headers).text
　　# 使用正則找出page_text頁面中所有圖片url
  img_url_list = re.findall('<div class="thumb">.*?<img src="(.*?)" alt=.*?</div>',page_text,re.S)
　　# 給每一個(gè)圖片url添加https協(xié)議頭
  for img_url in img_url_list:
    img_url = 'https:' + img_url
　　　　　# 將圖片url切割去除圖片名稱，作為存儲(chǔ)時(shí)圖片的名稱
    img_name = img_url.split('/')[-1]
    img_path = 'qiutu/' + img_name、
　　　　　# 對(duì)圖片做持久化存儲(chǔ)
    urllib.request.urlretrieve(url=img_url,filename=img_path)
    print(img_path,'下載成功')
print('over')

看完了這篇文章，相信你對(duì)“python爬蟲中正則表達(dá)式怎么用”有了一定的了解，如果想了解更多相關(guān)知識(shí)，歡迎關(guān)注創(chuàng)新互聯(lián)成都網(wǎng)站設(shè)計(jì)公司行業(yè)資訊頻道，感謝各位的閱讀！

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內(nèi)外云服務(wù)器15元起步，三天無理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì)，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。

分享名稱：python爬蟲中正則表達(dá)式怎么用-創(chuàng)新互聯(lián)
當(dāng)前網(wǎng)址：http://bm7419.com/article34/hdgpe.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供App設(shè)計(jì)、Google、網(wǎng)站策劃、用戶體驗(yàn)、網(wǎng)站排名、小程序開發(fā)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)