querylist采集微信公眾號文章(rjava采集微信公眾號文章的有效性)

　　querylist采集微信公眾號文章，大文本、小文本都可以，按詞抓取，點(diǎn)擊率高，方便。

　　樓上的沒(méi)有提及全面！有人提到wordtab:

　　目前幾個(gè)平臺中，微博爬蟲(chóng)你可以用scrapy，

　　既然你那么肯定有效，不妨把數據轉接一下，非對稱(chēng)加密，或者使用hashify、密碼管理。

　　推薦你看看rjava博客提到的nodejs微信爬蟲(chóng)

　　wordtab，爬取微信公眾號的文章，不限文本類(lèi)型，

　　可以使用公眾號熱文爬蟲(chóng)的spider.py，請看博文，自己改動(dòng)注釋和模板功能，

　　沒(méi)有人說(shuō)wordtab嗎？-python

　　lxml+xpath

　　大部分都是需要導入數據庫查詢(xún)的，

　　最適合中文的爬蟲(chóng)網(wǎng)站lxml+xpath

　　wordtab不錯

　　有人說(shuō)wordtab？

　　最大的還是lxml+xpath，htmlfield，關(guān)鍵詞，tag，openpyxl如果后端功能都有比較全了，可以考慮beautifulsoup。

　　wordtab可以抓取javascript各種網(wǎng)頁(yè)

　　wordtab最合適了，beautifulsoup框架，然后直接轉word，

　　數據庫操作必須有book_field_tag_meta字段，否則爬到的基本都是有機體。