小編給大家分享一下python爬蟲中正則表達式怎么用,希望大家閱讀完這篇文章之后都有所收獲,下面讓我們一起去探討吧!
成都創新互聯公司主營西藏網站建設的網絡公司,主營網站建設方案,重慶App定制開發,西藏h5小程序開發搭建,西藏網站營銷推廣歡迎西藏等地區企業咨詢- re.I # 忽略大小寫
- re.M # 多行匹配,將正則作用到源數據的每一行
- re.S # 單行匹配,將正則作用到整個源數據,輸出一個整體字符串(包括換行符也打印)
string = '''fall in love with you i love you very much i love she i love her''' # 去除以i開頭的每一行數據 re.findall('^i.*',string,re.M)
['i love you very much', 'i love she', 'i love her']
#匹配全部行 string1 = """細思極恐 你的隊友在看書 你的敵人在磨刀 你的閨蜜在減肥 隔壁老王在練腰 """ re.findall('.*',string1,re.S)
['細思極恐\n你的隊友在看書\n你的敵人在磨刀\n你的閨蜜在減肥\n隔壁老王在練腰\n', '']
爬取糗事百科中所有的圖片進行保存
import requests import re import urllib import os url = 'https://www.qiushibaike.com/pic/page/%d/?s=5170552' # 自定義請求頭信息 headers = { 'User-Agent':'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.119 Safari/537.36' } # 判斷是否存在名為qiutu的文件夾,如果不存在則創建文件夾 if not os.path.exists('./qiutu'): os.mkdir('./qiutu') # 手動輸入開始頁,結束頁 start_page = int(input('start>>>')) end_page = int(input('end>>>')) for page in range(start_page,end_page+1): # 按照每頁url形式拼接指定url new_url = format(url%page) # 發起請求 page_text = requests.get(url=new_url,headers=headers).text # 使用正則找出page_text頁面中所有圖片url img_url_list = re.findall('<div class="thumb">.*?<img src="(.*?)" alt=.*?</div>',page_text,re.S) # 給每一個圖片url添加https協議頭 for img_url in img_url_list: img_url = 'https:' + img_url # 將圖片url切割去除圖片名稱,作為存儲時圖片的名稱 img_name = img_url.split('/')[-1] img_path = 'qiutu/' + img_name、 # 對圖片做持久化存儲 urllib.request.urlretrieve(url=img_url,filename=img_path) print(img_path,'下載成功') print('over')
看完了這篇文章,相信你對“python爬蟲中正則表達式怎么用”有了一定的了解,如果想了解更多相關知識,歡迎關注創新互聯成都網站設計公司行業資訊頻道,感謝各位的閱讀!
另外有需要云服務器可以了解下創新互聯scvps.cn,海內外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業上云的綜合解決方案,具有“安全穩定、簡單易用、服務可用性高、性價比高”等特點與優勢,專為企業上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
分享名稱:python爬蟲中正則表達式怎么用-創新互聯
當前網址:http://vcdvsql.cn/article34/hdgpe.html
成都網站建設公司_創新互聯,為您提供App設計、Google、網站策劃、用戶體驗、網站排名、小程序開發
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯