bl双性强迫侵犯h_国产在线观看人成激情视频_蜜芽188_被诱拐的少孩全彩啪啪漫画

Python中CSS選擇器如何爬取京東網(wǎng)商品信息-創(chuàng)新互聯(lián)

這篇文章主要為大家展示了Python中CSS選擇器如何爬取京東網(wǎng)商品信息,內(nèi)容簡而易懂,希望大家可以學(xué)習(xí)一下,學(xué)習(xí)完之后肯定會有收獲的,下面讓小編帶大家一起來看看吧。

在網(wǎng)站制作、網(wǎng)站設(shè)計中從網(wǎng)站色彩、結(jié)構(gòu)布局、欄目設(shè)置、關(guān)鍵詞群組等細微處著手,突出企業(yè)的產(chǎn)品/服務(wù)/品牌,幫助企業(yè)鎖定精準(zhǔn)用戶,提高在線咨詢和轉(zhuǎn)化,使成都網(wǎng)站營銷成為有效果、有回報的無錫營銷推廣。創(chuàng)新互聯(lián)建站專業(yè)成都網(wǎng)站建設(shè)10年了,客戶滿意度97.8%,歡迎成都創(chuàng)新互聯(lián)客戶聯(lián)系。

CSS選擇器

目前,除了官方文檔之外,市面上及網(wǎng)絡(luò)詳細介紹BeautifulSoup使用的技術(shù)書籍和博客軟文并不多,而在這僅有的資料中介紹CSS選擇器的少之又少。在網(wǎng)絡(luò)爬蟲的頁面解析中,CCS選擇器實際上是一把效率甚高的利器。雖然資料不多,但官方文檔卻十分詳細,然而美中不足的是需要一定的基礎(chǔ)才能看懂,而且沒有小而精的演示實例。

Python中CSS選擇器如何爬取京東網(wǎng)商品信息

京東商品圖

首先進入京東網(wǎng),輸入自己想要查詢的商品,向服務(wù)器發(fā)送網(wǎng)頁請求。在這里小編仍以關(guān)鍵詞“狗糧”作為搜索對象,之后得到后面這一串網(wǎng)址:
https://search.jd.com/Search?keyword=%E7%8B%97%E7%B2%AE&enc=utf-8,其中參數(shù)的意思就是我們輸入的keyword,在本例中該參數(shù)代表“狗糧”,具體詳情可以參考Python大神用正則表達式教你搞定京東商品信息。所以,只要輸入keyword這個參數(shù)之后,將其進行編碼,就可以獲取到目標(biāo)URL。之后請求網(wǎng)頁,得到響應(yīng),爾后利用CSS選擇器進行下一步的數(shù)據(jù)采集。

商品信息在京東官網(wǎng)上的部分網(wǎng)頁源碼如下圖所示:

Python中CSS選擇器如何爬取京東網(wǎng)商品信息

部分網(wǎng)頁源碼

仔細觀察源碼,可以發(fā)現(xiàn)我們所需的目標(biāo)信息在紅色框框的下面,那么接下來我們就要一層一層的去獲取想要的信息。

在Python的urllib庫中提供了quote方法,可以實現(xiàn)對URL的字符串進行編碼,從而可以進入到對應(yīng)的網(wǎng)頁中去。

Python中CSS選擇器如何爬取京東網(wǎng)商品信息

CSS選擇器在線復(fù)制

很多小伙伴都覺得CSS表達式很難寫,其實掌握了基本的用法也就不難了。在線復(fù)制CSS表達式如上圖所示,可以很方便的復(fù)制CSS表達式。但是通過該方法得到的CSS表達式放在程序中一般不能用,而且長的沒法看。所以CSS表達式一般還是要自己親自上手。

直接上代碼,利用CSS去提取目標(biāo)信息,如商品的名字、鏈接、圖片和價格,具體的代碼如下圖所示:

Python中CSS選擇器如何爬取京東網(wǎng)商品信息

代碼實現(xiàn)

如果你想快速的實現(xiàn)功能更強大的網(wǎng)絡(luò)爬蟲,那么BeautifulSoupCSS選擇器將是你必備的利器之一。BeautifulSoup整合了CSS選擇器的語法和自身方便使用API。在網(wǎng)絡(luò)爬蟲的開發(fā)過程中,對于熟悉CSS選擇器語法的人,使用CSS選擇器是個非常方便的方法。

最后得到的效果圖如下所示:

Python中CSS選擇器如何爬取京東網(wǎng)商品信息

最終效果圖

新鮮的狗糧再一次出爐咯~~~

Python中CSS選擇器如何爬取京東網(wǎng)商品信息

CSS選擇器

關(guān)于CSS選擇器的簡單介紹:

BeautifulSoup支持大部分的CSS選擇器。其語法為:向tag對象或BeautifulSoup對象的.select()方法中傳入字符串參數(shù),選擇的結(jié)果以列表形式返回,即返回類型為list。

tag.select("string")

BeautifulSoup.select("string")

注意:在取得含有特定CSS屬性的元素時,標(biāo)簽名不加任何修飾,如class類名前加點,id名前加 /#。

以上就是關(guān)于Python中CSS選擇器如何爬取京東網(wǎng)商品信息的內(nèi)容,如果你們有學(xué)習(xí)到知識或者技能,可以把它分享出去讓更多的人看到。

本文題目:Python中CSS選擇器如何爬取京東網(wǎng)商品信息-創(chuàng)新互聯(lián)
URL標(biāo)題:http://vcdvsql.cn/article46/ishhg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站收錄搜索引擎優(yōu)化動態(tài)網(wǎng)站電子商務(wù)虛擬主機營銷型網(wǎng)站建設(shè)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

手機網(wǎng)站建設(shè)