querylist采集微信公眾號文章聚合,可以試試weichat100,
優(yōu)采云 發(fā)布時(shí)間: 2021-06-12 02:01querylist采集微信公眾號文章聚合,可以試試weichat100,
querylist采集微信公眾號文章內容的話(huà),個(gè)人認為應該是通過(guò)redis做querylist的querylist進(jìn)行抓取,可以通過(guò)mongodb等關(guān)系型數據庫存儲和管理。但是建議樓主可以采用feed聚合服務(wù),比如說(shuō)微信公眾號的文章或者小程序的推文,直接開(kāi)發(fā)一個(gè)feed服務(wù)端來(lái)進(jìn)行抓取的!。
feed對方需要發(fā)送get請求參與到redis里面。
可以試試weichat100,給你一個(gè)試試:/
百度搜索關(guān)鍵詞微信公眾號文章聚合,開(kāi)發(fā)項目很多。最直接簡(jiǎn)單的方法,其實(shí)你可以用瀏覽器打開(kāi),去看那個(gè),
高并發(fā)嗎?答案,
兩種可能,一種是你的服務(wù)器負載不足,經(jīng)常上線(xiàn),最近沒(méi)有任何數據抓取?;蛘呤琼?yè)面過(guò)于復雜或者附加屬性過(guò)多,這個(gè)個(gè)人覺(jué)得還是跟語(yǔ)言有關(guān),目前ruby,python等語(yǔ)言的效率都會(huì )相對較高。
是我對高并發(fā)要求太高了嗎?同意樓上說(shuō)的那個(gè)回答。
對服務(wù)器配置要求是真高,如果你有錢(qián),你可以找個(gè)節點(diǎn)或者購買(mǎi)相應服務(wù),比如你自己做個(gè)集群啥的。其他大家的回答都是為了說(shuō)明對你有幫助,對于那個(gè)使用redis來(lái)進(jìn)行querylist進(jìn)行抓取的方案,由于querylist不是微信開(kāi)發(fā)的,而是為了crud而生,所以,redis本身有數據的持久化機制,不需要數據庫操作。