系統之家 - 系統光盤(pán)下載網(wǎng)站!

  • 大。33.92 MB
  • 語(yǔ)言:簡(jiǎn)體中文
  • 授權:免費軟件
  • 星級評價(jià) :
  • 軟件分類(lèi):瀏覽輔助
  • 更新:2022-01-10
  • 支持系統:Win8,Win7,WinXP,Win2003,Win2000
  • 安全檢測: 360安全衛士 360殺毒 電腦管家
  • 標簽 : 數據采集器
  • 軟件介紹
  • 相關(guān)教程
  • 下載地址
  • 特色推薦
  • 網(wǎng)友評論

  火車(chē)采集器是一款功能強大的數據采集軟件,用戶(hù)可以通過(guò)軟件進(jìn)行數據各式各樣的數據采集,用戶(hù)還可以自行設置時(shí)間及參數,隨后一鍵啟動(dòng)即可,操作十分簡(jiǎn)單,對于提高我們的工作效率非常有幫助 ,如果有需要的用戶(hù)就快來(lái)下載吧。

火車(chē)采集器

 

功能介紹

  1、通用性強

  無(wú)論新聞、論壇、視頻、黃頁(yè)、圖片、下載類(lèi)網(wǎng)站,只要通過(guò)瀏覽器能看到的結構化的內容,通過(guò)指定匹配規則,都能采集到您所需要的內容。

  2、穩定、高效

  五年磨一劍,軟件不斷更新進(jìn)步,采集速度快,性能穩定,占用資源少。

  3、擴展性強、適用范圍廣

  自定義web發(fā)布,自定義主流的數據庫的保存和發(fā)布,自定義本地php及。net外部編程接口處理數據,讓數據都能為你所用。

  4、支持所有網(wǎng)站編碼

  完美支持采集所有編碼格式的網(wǎng)頁(yè),程序還可以自動(dòng)識別網(wǎng)頁(yè)編碼。

  5、多種發(fā)布方式

  支持目前所有主流和非主流的CMS,BBS等網(wǎng)站程序,通過(guò)系統的發(fā)布模塊能實(shí)現采集器和網(wǎng)站程序間的完美結合。

  6、全自動(dòng)

  無(wú)人值守工作,配置好程序后,程序將依據您的設置自動(dòng)運行,完全無(wú)需人工干預。

  7、本地編輯

  本地可視化編輯已采集的數據。

  8、采集測試

  這是其它任何同類(lèi)采集軟件所不能比的,程序支持直接查看采集結果并測試發(fā)布。

  9、管理方便

  使用站點(diǎn)+任務(wù)方式管理采集節點(diǎn),任務(wù)支持批量操作,再多的數據管理也很輕松。

軟件特色

  1、規則自定義

  通過(guò)采集規則的定義,可以搜索所有網(wǎng)站采集幾乎任何類(lèi)型的信息。

  2、多任務(wù),多線(xiàn)程

  可以同時(shí)進(jìn)行多個(gè)信息采集任務(wù),每個(gè)任務(wù)可以使用多個(gè)線(xiàn)程。

  3、所見(jiàn)即所得

  任務(wù)采集過(guò)程所見(jiàn)即所得,過(guò)程中遍歷的鏈接信息、采集信息、錯誤信息等都會(huì )及時(shí)的反映在軟件界面中。

  4、數據保存

  數據邊采集邊自動(dòng)保存到關(guān)系數據庫中,并且數據結構能夠自動(dòng)適應,軟件可以根據采集規則自動(dòng)創(chuàng )建數據庫,以及其中的表和字段,也可以通過(guò)導庫方式靈活的將數據保存到客戶(hù)已有的數據庫結構中。

  5、斷點(diǎn)續采

  信息采集任務(wù)可以在停止后從斷點(diǎn)開(kāi)始繼續采集,從此你用不再擔心你的采集任務(wù)意外中斷了。

  6、網(wǎng)站登錄

  支持網(wǎng)站Cookie,支持網(wǎng)站可視化登錄,即使登錄時(shí)需要驗證碼的網(wǎng)站也能采集。

  7、計劃任務(wù)

  通過(guò)這個(gè)功能可以讓你的采集任務(wù)定時(shí)、定量或者一直循環(huán)執行。

  8、采集范圍限制

  可以根據采集的深度和網(wǎng)址的標識來(lái)限制采集的范圍。

  9、文件下載

  可以將采集到的二進(jìn)制文件(諸如:圖片、音樂(lè )、軟件、文檔等等)下載到本地磁盤(pán)或者采集結果數據庫中。

  10、結果替換

  可以將采集的結果根據規則替換成你定義的內容。

  11、條件保存

  可以根據某個(gè)條件來(lái)決定那些信息保存,那些信息過(guò)濾。

  12、過(guò)濾重復內容

  軟件可根據用戶(hù)設置和實(shí)際情況對重復內容和重復網(wǎng)址自動(dòng)刪除重復內容。

  13、特殊鏈接識別

  運用此功能可以將用JavaScript動(dòng)態(tài)生成的鏈接或其他更古怪的連接識別出來(lái)。

  14、數據發(fā)布

  可以通過(guò)自定義接口,將已采集的結果數據發(fā)布到任意的內容管理系統和指定數據庫中,F在已支持的目標發(fā)布媒體包括:數據庫(access, sql server,my sql,oracle) ,靜態(tài)htm文件。

  15、預留編程接口

  定義多個(gè)編程接口,用戶(hù)可以在事件中利用PHP,C#語(yǔ)言進(jìn)行編程,擴充采集功能。

菜單功能

  1、新建分組

  新建一個(gè)任務(wù)分組,選擇所屬分組,確定分組名稱(chēng)和備注。

  2、新建任務(wù)

  確定所屬分組,新建一個(gè)任務(wù),填寫(xiě)任務(wù)名稱(chēng)并保存。

  3、Web發(fā)布配置

  Web發(fā)布配置定義了如何登陸一個(gè)網(wǎng)站以及向該網(wǎng)站提交數據。

  主要涉及到登錄信息的獲取,網(wǎng)站編碼設定,欄目列表的獲取,以及使用數據測試發(fā)布效果。

  4、Web發(fā)布模塊

  可以定義網(wǎng)站登錄,獲取欄目列表,獲取網(wǎng)頁(yè)隨機值,內容發(fā)布參數,以及上傳文件,構造發(fā)布數據等高級功能。

  5、數據庫發(fā)布配置

  數據庫發(fā)布配置定義了數據庫鏈接信息的設置以及數據庫模塊的選擇。

  6、數據庫發(fā)布模塊

  用于編輯數據庫的發(fā)布模塊,方便我們將數據發(fā)布到配置好的數據庫中。

  火車(chē)采集器可選mysql、sqlserver、oracle、access四種數據庫類(lèi)型,在文本輸入框中填寫(xiě)sql語(yǔ)句

 。ㄐ栌袛祿䦷煜嚓P(guān)知識),并可使用標簽替換相應數據。也可在采集器模塊文件夾中加載某一模塊進(jìn)行編輯。

  7、計劃任務(wù)

  設置列表中采集任務(wù)的啟動(dòng)計劃,可每間隔、每天、每周、僅一次、或自定義Cron表達式,

 。–ron表達式的寫(xiě)法可參考相關(guān)術(shù)語(yǔ)中的介紹)。保存設置后,任務(wù)即可按照設置執行。

  8、插件管理

  插件是可以用來(lái)擴展火車(chē)采集器功能的程序

  火車(chē)采集器V9支持PHP源碼、C#源碼、C#類(lèi)庫三種類(lèi)型的插件,

  可用于擴展http請求、內容處理和文件下載的功能,并可以分別進(jìn)行測試。

  9、http二級代理

  網(wǎng)絡(luò )中的服務(wù)器,可以讓網(wǎng)絡(luò )用戶(hù)去取得所需要的網(wǎng)絡(luò )信息。

  代理的功能有可以突破自身ip的訪(fǎng)問(wèn)限制訪(fǎng)問(wèn)國外站點(diǎn),訪(fǎng)問(wèn)一些單位或團體內部資源,

  突破電信的ip封鎖和隱藏真實(shí)的ip等。

  火車(chē)采集器V9支持http代理、socket4和socket5代理。

  10、http模擬請求

  可以設置如何發(fā)起一個(gè)http請求,包括設置請求信息,返回頭信息。并具有自動(dòng)提交的功能。

更新日志

  火車(chē)采集器V9.21版

  1、自動(dòng)獲取cookie功能優(yōu)化。

  2、數據庫發(fā)布增加事務(wù),優(yōu)化數據庫發(fā)布速度。

  3、數據轉換速度優(yōu)化(針對Mysql和SqlServer數據庫的導入), 同時(shí)去除網(wǎng)址庫的清空邏輯。

  4、html標簽處理錯誤問(wèn)題處理。

  5、json提取關(guān)于數字轉換為科學(xué)計數法問(wèn)題處理。

  6、發(fā)布測試時(shí),圖片上傳無(wú)效的問(wèn)題處理。

  7、采集內容頁(yè)處理錯誤時(shí),增加對于當前出錯標簽的提示,以便快速定位出錯標簽。

  8、任務(wù)批量編輯,增加可操作范圍。

  9、循環(huán)匹配匹配空格問(wèn)題處理。

  10、刷新分組中增加統計數據的刷新。

  11、post分頁(yè)處理。

  12、部分功能邏輯優(yōu)化。

  火車(chē)采集器V9.9版

  1、優(yōu)化效率修復運行大量任務(wù)時(shí)運行卡頓問(wèn)題。

  2、修復大量代理時(shí)配置文件鎖死程序退出問(wèn)題。

  3、修復部分情況下mysql鏈接不上問(wèn)題。

  4、其它界面和功能優(yōu)化。

  火車(chē)采集器V9.8版

  1、“遠程管理” 正式升級為 “私有云”,全面優(yōu)化調整。

  2、布模塊增加自定義頭信息的增加。

  3、采集線(xiàn)程間隔調整,增加自定義區間設置。

  4、長(cháng)時(shí)間使用后的運行卡頓問(wèn)題修復。

  5、二級代理,IP輸入框修改為普通TextBox。增加代理免驗證的功能。

  6、分組丟失、死循環(huán)問(wèn)題修復。

  7、ftp上傳,增加超時(shí)處理。

下載地址

  • PC版

特色推薦

廠(chǎng)商其他下載

  • 電腦版
  • 安卓版
  • iOS版

發(fā)表評論

0

沒(méi)有更多評論了

評論就這些咯,讓大家也知道你的獨特見(jiàn)解

立即評論

以上留言?xún)H代表用戶(hù)個(gè)人觀(guān)點(diǎn),不代表系統之家立場(chǎng)

其他版本

更多+

最新軟件

熱門(mén)系統推薦

官方交流群 軟件收錄

火車(chē)采集器正在下載,用戶(hù)還下載了

關(guān)閉

火車(chē)采集器正在下載,用戶(hù)還下載了

關(guān)閉