免費網(wǎng)頁(yè)采集器(v1.5.4改善：修改了采集網(wǎng)址隊列數超過(guò)5000，自動(dòng)重啟時(shí)無(wú)法停止的問(wèn)題)

　　v1.5.4

　　改進(jìn)：修改采集URL隊列數超過(guò)5000，自動(dòng)重啟時(shí)無(wú)法停止的問(wèn)題2008-2-29

　　改進(jìn)：采集 可以替換高級過(guò)濾器設置。格式為在原過(guò)濾規則2008-2-29后加“[to]”

　　新增：增加采集時(shí)間間隔的設置，避免對采集站服務(wù)器造成較大壓力

　　補充：增加采集需要登錄驗證的網(wǎng)址，需要設置登錄和驗證地址2008-3-1

　　添加：列表JS提交方式（Post）分頁(yè)。使用方法：在提交地址后附加參數“?fc_action=post&parameter1={$pageid}”，如果提交頁(yè)面已經(jīng)收錄“?”，則為：“&fc_action=post&parameter1={$pageid}” 2008-3 - 1

　　特點(diǎn)：

　　**************************************************

　　1、在IIS下開(kāi)發(fā)和運行。

　　2、可根據存儲設置自動(dòng)連接現有網(wǎng)站系統，與現有系統無(wú)縫集成，補充或替換現有系統的采集程序。

　　3、采集調度，即定時(shí)任務(wù)，可以為每個(gè)采集規則設置一個(gè)時(shí)間重復采集，多個(gè)采集任務(wù)可以同時(shí)進(jìn)行的時(shí)候運行后，采集程序會(huì )在到達設定時(shí)間后自動(dòng)在web服務(wù)器后臺執行，真正實(shí)現了無(wú)需人工干預的自動(dòng)更新。

　　4、可以自動(dòng)分類(lèi)，采集的信息可以自動(dòng)分類(lèi)。當目標分類(lèi)不存在時(shí)，可以自動(dòng)創(chuàng )建分類(lèi)，也可以通過(guò)分類(lèi)映射將目標分類(lèi)與當前的網(wǎng)站內容分類(lèi)進(jìn)行合并。無(wú)需為每個(gè)類(lèi)別創(chuàng )建 采集 任務(wù)。

　　5、采集規則設置簡(jiǎn)單易懂，程序有兩種運行模式，前臺運行或后臺定時(shí)運行。

　　6、可以實(shí)現多層次的網(wǎng)頁(yè)深度采集，如內容分頁(yè)、其他頁(yè)面的部分信息、小說(shuō)連載等與主從表相關(guān)的信息類(lèi)型采集.

　　7、的原斷點(diǎn)延續，目標網(wǎng)站被更新，采集程序會(huì )是采集，只有采集更新的部分， 高效率 。此功能對采集連載網(wǎng)站特別有用，例如小說(shuō)、系列等。

　　8、自動(dòng)將相關(guān)外部文件下載到本地服務(wù)器或替換為遠程路徑，如圖片、FLASH、下載文件等，無(wú)需手動(dòng)上傳到服務(wù)器。

　　9、支持采集模型的定義，可以根據需要定義任何要成為采集的數據項，每個(gè)模型還可以收錄子模型。

　　10、自動(dòng)識別大多數采集網(wǎng)站的網(wǎng)頁(yè)代碼。比如常見(jiàn)的：GB2312、GBK、UTF-8、windows-1252、iso646-us等

　　11、支持列表頁(yè)面中的縮略圖和其他附加信息采集。

　　12、多線(xiàn)程異步采集，采集效率高，占用服務(wù)器資源少。