返回頂部

系統天堂:打造安全軟件,免費軟件下載基地!

位置: 首頁>下載中心>網絡軟件>下載工具>火車采集器(LocoySpider)
火車采集器(LocoySpider) v9.11.20191126免費版

軟件簡介

火車采集器(LocoySpider)是一款專業的功能強大的網絡數據/信息挖掘軟件,通過靈活的配置,您可以很輕松的從網頁上抓取文字、圖片、文件等任何資源。

火車采集器(LocoySpider)

  程序支持遠程下載圖片文件,支持網站登陸后的信息獲取,支持探測文件真實地址,支持代理,支持防盜鏈的采集,支持采集數據直接入庫和模仿人手工發布等許多功能特點。

  火車采集器支持從任何類型的網站采集獲取您所需要的信息,如各種新聞類網站、論壇、電子商務網站、求職招聘網站等。

  同時具有強大的網站登錄采集、多頁和分頁的采集、網站跨層采集、POST采集、腳本頁面采集、動態頁面采集等高級采集功能。

  強大的php和c#插件支持,讓您可以通過二次開發實現您所想要的任何更強大的功能。

軟件特色

  1、通用性強

  無論新聞、論壇、視頻、黃頁、圖片、下載類網站,只要通過瀏覽器能看到的結構化的內容,通過指定匹配規則,都能采集到您所需要的內容。

  2、穩定、高效

  五年磨一劍,軟件不斷更新進步,采集速度快,性能穩定,占用資源少。

  3、擴展性強、適用范圍廣

  自定義web發布,自定義主流的數據庫的保存和發布,自定義本地php及.net外部編程接口處理數據,讓數據都能為你所用。

菜單功能

火車采集器v9破解版

  1.新建分組

  新建一個任務分組,選擇所屬分組,確定分組名稱和備注。

  2.新建任務

  確定所屬分組,新建一個任務,填寫任務名稱并保存。

  3.Web發布配置

  Web發布配置定義了如何登陸一個網站以及向該網站提交數據。

  主要涉及到登錄信息的獲取,網站編碼設定,欄目列表的獲取,以及使用數據測試發布效果。

火車采集器(LocoySpider)

  4.Web發布模塊

  可以定義網站登錄,獲取欄目列表,獲取網頁隨機值,內容發布參數,以及上傳文件,構造發布數據等高級功能。

火車采集器v9破解版

  5.數據庫發布配置

  數據庫發布配置定義了數據庫鏈接信息的設置以及數據庫模塊的選擇。

  6.數據庫發布模塊

  用于編輯數據庫的發布模塊,方便我們將數據發布到配置好的數據庫中。

  火車采集器可選mysql、sqlserver、oracle、access四種數據庫類型,在文本輸入框中填寫sql語句

  (需有數據庫相關知識),并可使用標簽替換相應數據。也可在采集器模塊文件夾中加載某一模塊進行編輯。

火車采集器(LocoySpider)

  7.計劃任務

  設置列表中采集任務的啟動計劃,可每間隔、每天、每周、僅一次、或自定義Cron表達式,

  (Cron表達式的寫法可參考相關術語中的介紹)。保存設置后,任務即可按照設置執行。

火車采集器v9破解版

  8.插件管理

  插件是可以用來擴展火車采集器功能的程序

  火車采集器V9支持PHP源碼、C#源碼、C#類庫三種類型的插件,

  可用于擴展http請求、內容處理和文件下載的功能,并可以分別進行測試。

  9.http二級代理

  網絡中的服務器,可以讓網絡用戶去取得所需要的網絡信息。

  代理的功能有可以突破自身ip的訪問限制訪問國外站點,訪問一些單位或團體內部資源,

  突破電信的ip封鎖和隱藏真實的ip等。

  火車采集器V9支持http代理、socket4和socket5代理。

火車采集器(LocoySpider)

  10.http模擬請求

  可以設置如何發起一個http請求,包括設置請求信息,返回頭信息。并具有自動提交的功能。

基本功能

  1、規則自定義 - 通過采集規則的定義,可以搜索所有網站采集幾乎任何類型的信息。

  2、多任務,多線程 - 可以同時進行多個信息獲取任務,每個任務可以使用多個線程。

  3、所見即所得 - 任務采集過程所見即所得,過程中遍歷的鏈接信息、采集信息、錯誤信息等都會及時的反映在軟件界面中。

  4、數據保存 - 數據邊采集邊自動保存到關系數據庫中,并且數據結構能夠自動適應,軟件可以根據采集規則自動創建數據庫,以及其中的表和字段,也可以通過導庫方式靈活的將數據保存到客戶已有的數據庫結構中。

  5、斷點續采 - 信息收集任務可以在停止后從斷點開始繼續采集,從此你用不再擔心你的采集任務意外中斷了。

  6、網站登錄 - 支持網站Cookie,支持網站可視化登錄,即使登錄時需要驗證碼的網站也能采集。

  7、計劃任務 - 通過這個功能可以讓你的采集任務定時、定量或者一直循環執行。

  8、采集范圍限制 - 可以根據采集的深度和網址的標識來限制采集的范圍。

  9、文件下載 - 可以將采集到的二進制文件(諸如:圖片、音樂、軟件、文檔等等)下載到本地磁盤或者采集結果數據庫中。

  10、結果替換 - 可以將采集的結果根據規則替換成你定義的內容。

  11、條件保存 - 可以根據某個條件來決定那些信息保存,那些信息過濾。

  12、過濾重復內容 - 軟件可根據用戶設置和實際情況對重復內容和重復網址自動刪除重復內容。

  13、特殊鏈接識別 - 運用此功能可以將用JavaScript動態生成的鏈接或其他更古怪的連接識別出來。

  14、數據發布 - 可以通過自定義接口,將已采集的結果數據發布到任意的內容管理系統和指定數據庫中。現在已支持的目標發布媒體包括:數據庫(access, sql server,my sql,oracle) ,靜態htm文件。

  15、預留編程接口 - 定義多個編程接口,用戶可以在事件中利用PHP,C#語言進行編程,擴充采集功能。

特色功能

  1、支持所有網站編碼:完美支持采集所有編碼格式的網頁,程序還可以自動識別網頁編碼。

  2、多種發布方式:支持目前所有主流和非主流的CMS,BBS等網站程序,通過系統的發布模塊能實現采集器和網站程序間的完美結合。

  3、全自動:無人值守工作,配置好程序后,程序將依據您的設置自動運行,完全無需人工干預。

  4、本地編輯:本地可視化編輯已采集的數據。

  5、采集測試:這是其它任何同類采集軟件所不能比的,程序支持直接查看采集結果并測試發布。

  6、管理方便:使用站點+任務方式管理采集節點,任務支持批量操作,再多的數據管理也很輕松。

更新日志

  1、★ 列表頁新增“地址處理”功能★

  內容替換/排重

  可以對網址中內容進行替換,且替換完成后,重復的網址會自動去重。

  純正則替換

  可以使用正則表達式進行匹配,和內容替換功能類似

  字符編碼處理

  網址中有需要轉碼的內容,比如采到的鏈接里有 & 可以進行解碼

  2、★新增“請求失敗數”的預警條件設置★

  3、★下載圖片命名,新增[記錄自增Id]格式★

  記錄自增ID:同一個內容頁中,多個標簽設置記錄自增ID,那么多個標簽都是從1開始自增,再次測試運行又會重新開始從1自增,更換個內容頁測試運行,也是從1開始自增。

  自增ID:設置自增ID是采集器啟動后運行,開始一個自增ID,從1開始自增,之后就是自增。重啟采集器后,又會重新開始自增ID,從1開始自增。

  4、★修復圖片下載誤判斷問題★

  5、★修復計劃任務中“每天調度”,起始運行時間配置未生效的問題★

  6、★ 修復PHP插件,對于循環記錄的處理報錯的問題★

  7、★修復拼音首字母對于一些錯誤字符的判斷問題★

  8、★任務批量編輯,修復“發布”中“多網站亂序發布”未能復制的問題★

  9、★修改“循環添加新記錄”配置后,修復數據格式選擇錯誤的問題★

  10、★修復循環記錄中列表頁標簽被多次處理的問題★

  11、★修復對于一些302跳轉地址,無法正確跳轉的問題★

  12、★修復一些網址無法正確請求的問題★

軟件截圖

相關文章
我的世界巖漿怎么采集 巖漿采集攻略

我的世界巖漿怎么采集 巖漿采集攻略

2016-12-07

我的世界巖漿怎么采集?我的世界巖漿通常出現在地表深處的熔巖湖中,巖漿還是有用的呢,那么這個巖漿要怎么采集呢?和小編一起看看吧。
分類導航
換一批 熱門下載
換一批 手游推薦
本類排行
  • 冰點文庫下載器 冰點文庫下載器 更新于2019-11-28 點擊下載

    百度文庫沒有積分怎么下載?這里pc6向你推薦一款免積分就能下載百度文庫的軟件-冰點文庫,冰點文庫不僅可以自由下載百度的文檔資料,也通吃豆丁、暢享網、mbalib、hp009、mab.book118等文庫的文檔資料。

  • 迅雷9.0無限期高速通道加速免費版 迅雷9.0無限期高速通道加速免費版 更新于2019-11-28 點擊下載

    本站提供迅雷9.0無限期高速版下載2017,迅雷9.0無限期高速通道加速免費版是一款可以無限期高速通道加速的免費版本,而且還去除了廣告,給您一個干凈的環境下載資源;迅雷9.0帶給您從容流暢的下載體驗。

  • 道客巴巴文檔下載器2017免費版 道客巴巴文檔下載器2017免費版 更新于2019-11-28 點擊下載

    道客巴巴免費下載器是一款功能強大免費的文檔下載工具,道客巴巴免費下載器可以自由設置下載文件輸出位置,道客巴巴文檔下載器支持道客巴巴,百度文庫,豆丁,新浪共享,book118,暢享,mabalib,維庫收費文檔免費下載

  • 迅雷看看播放器2018官方免費版 迅雷看看播放器2018官方免費版 更新于2019-11-28 點擊下載

    迅雷看看播放器2018官方免費版更好地整合了迅雷網頁看看的特性,下載迅雷看看播放器支持本地播放與在線視頻點播,不斷完善的用戶交互和在線播放功能,軟件天堂為您提供官方免費下載···

  • 海納百川下載器2018最新版 海納百川下載器2018最新版 更新于2019-11-28 點擊下載

    本站提供海納百川下載器最新版下載,海納百川下載器2018是一款功能強大的文檔下載器,一個針對百度云、道客巴巴網電子文檔內容進免費下載的一個下載工具,道客巴巴是一個專注于電子文檔的在線分享平臺,想要免費下載文檔的朋友,可以使用該下載器即可直接下載。

二肖中特碼黄大仙