后羿采集器官方版 v4.0.2 電腦版

軟件介紹

后羿采集器官方版是一款由前谷歌技術(shù)團(tuán)隊(duì)傾力打造的網(wǎng)頁數(shù)據(jù)采集軟件，全新版本加入了人工智能AI算法，只需輸入網(wǎng)址就能智能識別列表數(shù)據(jù)、表格數(shù)據(jù)和分頁按鈕，無需網(wǎng)友進(jìn)行復(fù)雜設(shè)置，一鍵便可幫助用戶采集到網(wǎng)頁數(shù)據(jù)，支持全網(wǎng)通用。軟件使用方法簡單易上手，還可以進(jìn)行后臺運(yùn)行，系統(tǒng)占用量非常小。

后羿采集器最新版擁有可視化點(diǎn)選，以及豐富的實(shí)用性功能以及簡單化操作，能夠在全平臺，Win/Mac/Linux等系統(tǒng)上使用，采集和導(dǎo)出全免費(fèi)，結(jié)合智能識別算法，任何網(wǎng)頁的數(shù)據(jù)都能輕松采集，感興趣的網(wǎng)友快來下載體驗(yàn)吧！

軟件特色

小白神器！免費(fèi)導(dǎo)出采集結(jié)果

前谷歌技術(shù)團(tuán)隊(duì)傾力打造，基于人工智能技術(shù)，只需輸入網(wǎng)址就能自動識別采集內(nèi)容

智能識別數(shù)據(jù)，小白神器

智能模式：基于人工智能算法，只需輸入網(wǎng)址就能智能識別列表數(shù)據(jù)、表格數(shù)據(jù)和分頁按鈕，不需要配置任何采集規(guī)則，一鍵采集。

自動識別：列表、表格、鏈接、圖片、價(jià)格等

可視化點(diǎn)擊，簡單上手

流程圖模式：只需根據(jù)軟件提示在頁面中進(jìn)行點(diǎn)擊操作，完全符合人為瀏覽網(wǎng)頁的思維方式，簡單幾步即可生成復(fù)雜的采集規(guī)則，結(jié)合智能識別算法，任何網(wǎng)頁的數(shù)據(jù)都能輕松采集。

可模擬操作： 輸入文本、點(diǎn)擊、移動鼠標(biāo)、下拉框、滾動頁面、等待加載、循環(huán)操作和判斷條件等。

支持多種數(shù)據(jù)導(dǎo)出方式

采集結(jié)果可以導(dǎo)出到本地，支持TXT、EXCEL、CSV和HTML文件格式，也可以直接發(fā)布到數(shù)據(jù)庫(MySQL、MongoDB、SQL Server、PostgreSQL)供您使用。

功能強(qiáng)大，提供企業(yè)級服務(wù)

后羿采集器提供豐富的采集功能，無論是采集穩(wěn)定性或是采集效率，都能夠滿足個(gè)人、團(tuán)隊(duì)和企業(yè)級采集需求。

豐富的功能： 定時(shí)采集，自動導(dǎo)出，文件下載，加速引擎，按組啟動和導(dǎo)出，Webhook，RESTful API，智能識別SKU和大圖等。

云端賬號，方便快捷

創(chuàng)建后羿采集器賬號并登錄，您的所有采集任務(wù)設(shè)置都將自動加密保存到后羿的云端服務(wù)器，無需擔(dān)心采集任務(wù)丟失，任務(wù)運(yùn)行及采集的數(shù)據(jù)均在您本地，而且非常安全，只有您自己在本地登錄客戶端后才能查看。后羿采集器對賬號沒有終端綁定限制，您切換終端時(shí)采集任務(wù)也會同步更新，任務(wù)管理方便快捷。

全平臺支持，無縫切換

同時(shí)支持Windows、Mac和Linux全操作系統(tǒng)的采集軟件，各平臺版本完全相同，無縫切換。

軟件功能

1、可視化自定義采集流程

全程問答式引導(dǎo)、可視化操作、自定義采集流程

自動記錄和模擬網(wǎng)頁操作順序

高級設(shè)置滿足更多采集需求

2、點(diǎn)選抽取網(wǎng)頁數(shù)據(jù)

鼠標(biāo)點(diǎn)擊選擇要爬取的網(wǎng)頁內(nèi)容、操作簡單

可選擇抽取文本、鏈接、屬性、html標(biāo)簽等

3、運(yùn)行批量采集數(shù)據(jù)

軟件按照采集流程和抽取規(guī)則自動批量采集

快速穩(wěn)定，實(shí)時(shí)顯示采集速度和過程

可切換軟件后臺運(yùn)行，不打擾前臺工作

4、導(dǎo)出和發(fā)布采集的數(shù)據(jù)

采集的數(shù)據(jù)自動表格化，自由配置字段

支持?jǐn)?shù)據(jù)導(dǎo)出到Excel等本地文件

和一鍵發(fā)布到CMS網(wǎng)站/數(shù)據(jù)庫/微信公眾號等媒體

后羿采集器自定義采集百度搜索結(jié)果數(shù)據(jù)的方法

步驟1：創(chuàng)建采集任務(wù)

1)啟動后羿采集器，進(jìn)入主界面，選擇自定義采集并點(diǎn)擊創(chuàng)建任務(wù)按鈕創(chuàng)建 "自定義采集任務(wù)"

2)輸入百度搜索的URL，包括三種方式

1、手動輸入：在輸入框中直接輸入U(xiǎn)RL,多個(gè)URL時(shí)須要換行分割

2、點(diǎn)擊從文件中讀取方式：用戶選擇一個(gè)存放URL的文件，文件中可以有多個(gè)URL地址，地址須要換行分割。

3、批量添加方式：通過添加并調(diào)整地址參數(shù)生成多個(gè)有規(guī)律的地址

步驟2：自定義采集流程

1)點(diǎn)擊創(chuàng)建后自動打開第一個(gè)URL進(jìn)而進(jìn)入自定義設(shè)置頁面，默認(rèn)已經(jīng)創(chuàng)建了開始、打開網(wǎng)頁、結(jié)束的流程塊。底部模板區(qū)用于拖拽到畫布中生成新的流程塊;點(diǎn)擊打開網(wǎng)頁中的屬性按鈕，可修改打開的網(wǎng)址

2)添加輸入文字流程塊：在底部模板區(qū)中拖拽輸入文字塊到打開網(wǎng)頁塊后面附近，當(dāng)出現(xiàn)陰影區(qū)域的時(shí)候可以松開鼠標(biāo)，此時(shí)會自動連接，添加完成

3)生成完整流程圖：仿照上面添加輸入文字流程塊的拖拽流程添加新塊：如下圖所示：

關(guān)鍵步驟塊設(shè)置介紹

步驟2：定時(shí)等待用于等待前面打開網(wǎng)頁完成

步驟3：點(diǎn)擊輸入框Xpath屬性按鈕，在屬性菜單中點(diǎn)擊圖標(biāo)進(jìn)行點(diǎn)選網(wǎng)頁中的輸入框，點(diǎn)擊輸入文本屬性按鈕，在菜單中輸入要搜索的文本。

步驟4：用于設(shè)置點(diǎn)擊開始搜索按鈕，點(diǎn)擊元素的xpath屬性按鈕，在菜單中點(diǎn)擊點(diǎn)選圖標(biāo)，然后點(diǎn)擊網(wǎng)頁中的百度一下按鈕即可。

步驟5：用于設(shè)置循環(huán)加載下一列表頁。在循環(huán)塊內(nèi)部的循環(huán)條件塊中設(shè)置詳細(xì)條件，此處點(diǎn)擊操作按鈕，選擇單個(gè)元素，然后在屬性菜單中點(diǎn)擊元素的xpath屬性按鈕，同上進(jìn)行點(diǎn)選網(wǎng)頁中的下一頁按鈕。循環(huán)次數(shù)屬性按鈕可默認(rèn)為0，即不限制點(diǎn)擊下一頁的次數(shù)。

步驟6：用于設(shè)置循環(huán)抽取列表頁中的數(shù)據(jù)。在循環(huán)塊內(nèi)部的循環(huán)條件塊中設(shè)置詳細(xì)條件，此處點(diǎn)擊操作按鈕，選擇不固定元素列表，然后在屬性菜單中點(diǎn)擊元素的xpath屬性按鈕，然后在網(wǎng)頁中連續(xù)點(diǎn)選兩次抽取第一塊和第二塊元素。循環(huán)次數(shù)屬性按鈕可默認(rèn)為0，即不限制列表中收取字段的數(shù)量。

步驟7：用于執(zhí)行點(diǎn)擊下一頁按鈕操作，點(diǎn)擊元素xpath屬性按鈕，選擇使用當(dāng)前循環(huán)中元素的xpath選項(xiàng)。

步驟8：同理用于設(shè)置網(wǎng)頁加載等待時(shí)間。

步驟9：用于設(shè)置在列表頁抽取的字段規(guī)則，點(diǎn)擊屬性按鈕中使用循環(huán)中的元素按鈕，選擇使用循環(huán)中的元素選項(xiàng)。點(diǎn)擊元素模板屬性按鈕在字段表格中點(diǎn)擊加減進(jìn)行添加刪除字段，添加字段使用點(diǎn)選操作，即點(diǎn)擊加號后鼠標(biāo)移動到網(wǎng)頁元素上點(diǎn)擊選擇。

4)點(diǎn)擊開始采集，啟動采集

步驟3：數(shù)據(jù)采集及導(dǎo)出

1)采集任務(wù)運(yùn)行中

2)采集完成后，選擇“導(dǎo)出數(shù)據(jù)”可以把數(shù)據(jù)都導(dǎo)出到本地文件

3)選擇“導(dǎo)出方式”，將采集好的數(shù)據(jù)導(dǎo)出，這里可以選擇excel作為導(dǎo)出為格式

4)采集數(shù)據(jù)導(dǎo)出后如下圖

后羿采集器是是原Google技術(shù)團(tuán)隊(duì)傾力打造的一款網(wǎng)頁數(shù)據(jù)采集軟件，可視化點(diǎn)選，一鍵采集網(wǎng)頁數(shù)據(jù)，全平臺，Win/Mac/Linux都可用，采集和導(dǎo)出全免費(fèi)，無限制放心用，可后臺運(yùn)行，速度實(shí)時(shí)顯示。

后羿采集器官方版常見問題