網(wǎng)絡(luò )爬蟲(chóng)（又被稱(chēng)為網(wǎng)頁(yè)蜘蛛，網(wǎng)絡(luò )機器人），是一種根據一定的規則，自動(dòng)地抓取萬(wàn)維網(wǎng)信息的程序或則腳本。我們可以使用爬蟲(chóng)手動(dòng)抓取互聯(lián)網(wǎng)信息的程序，從互聯(lián)網(wǎng)上抓取對于我們有價(jià)值的信息。但是須要注意網(wǎng)絡(luò )爬蟲(chóng) 作用，爬蟲(chóng)不會(huì )創(chuàng )造數據，也不會(huì )生產(chǎn)數據。他只能爬取網(wǎng)路上輸出的信息。

　　目前好多語(yǔ)言都支持爬蟲(chóng)，除了我們這兒介紹Python爬蟲(chóng)，還有php，javascript,java,php，go等等都可以實(shí)現爬蟲(chóng)，但是Python爬蟲(chóng)由于使用發(fā)布并且有很多好用的拓展包，讓python爬蟲(chóng)十分有效并且受歡迎。

　　在我們?yōu)g覽網(wǎng)頁(yè),瀏覽器會(huì )渲染輸出HTML、JS、CSS等信息；通過(guò)這種元素，我們就可以看見(jiàn)我們想要查看的新聞,圖片,電影,評論,商品等等。一般情況下我們看見(jiàn)自己須要的內容，圖片可能會(huì )復制文字而且下載圖片保存，但是假如面對大量的文字和圖片，我們人工是處理不過(guò)來(lái)的，同時(shí)例如類(lèi)似百度須要每晚定時(shí)獲取大量網(wǎng)站最新文章并且收錄網(wǎng)絡(luò )爬蟲(chóng) 作用，這些大量數據與每晚的定時(shí)的工作我們是難以通過(guò)人工去處理的，這時(shí)候爬蟲(chóng)的作用就彰顯下來(lái)了。

　　爬蟲(chóng)可以抓取網(wǎng)頁(yè)信息,APP以及客戶(hù)端信息；我們可以訪(fǎng)問(wèn)保存新聞,圖片,電影,評論,商品等等。理論上來(lái)說(shuō),只要我們可以訪(fǎng)問(wèn)到的數據，我們能夠通過(guò)爬蟲(chóng)抓取到，同時(shí)若果你了解編程基礎，你也可以抓取到你在網(wǎng)頁(yè)中看不到的數據。