python應(yīng)掌握的爬蟲(chóng)所有技能
查看網(wǎng)頁(yè)源代碼和檢查元素
不要覺(jué)得很簡(jiǎn)單,這兩招是爬蟲(chóng)的根底。假如你熟習(xí)這兩招,簡(jiǎn)單網(wǎng)站的爬蟲(chóng),你就學(xué)會(huì)了一半。
普通來(lái)說(shuō),檢查元素中看到的內(nèi)容都會(huì)在網(wǎng)頁(yè)源代碼中呈現(xiàn)。今天我選取的這個(gè)例子,狀況特殊,檢查元素中看到的內(nèi)容局部會(huì)在網(wǎng)頁(yè)源代碼中呈現(xiàn)。

爬北京的白天和夜間溫度
下面是源代碼,我會(huì)有注釋的,跟著一起讀一讀
Talk is cheap. Show you the code

簡(jiǎn)單點(diǎn)解釋就是檢查元素看到的樣子和Soup對(duì)象中元素的樣子差不多
爬多個(gè)城市的白天和夜間溫度
搜索不同的城市天氣,觀察網(wǎng)址的變化。
觀察網(wǎng)址的變化是爬蟲(chóng)中最重要的本領(lǐng)之一

有了requests+bs4兩大利器,簡(jiǎn)單網(wǎng)站的爬蟲(chóng)你就學(xué)的差不多了。
馬哥學(xué)習(xí)交流群
馬哥教育-Python開(kāi)發(fā)-1群 335068227
馬哥教育-Python開(kāi)發(fā)-2群 608459685