爬山虎采集器官方版專為采集數(shù)據(jù)一個(gè)軟件，通過(guò)它用戶們能夠進(jìn)行更加便捷的采集，同時(shí)具有多種格式的輸出，還能夠自動(dòng)生成腳本，支持大部分的網(wǎng)站。

爬山虎采集器教學(xué)說(shuō)明

一：輸入采集網(wǎng)址

打開(kāi)軟件，新建任務(wù)，輸入需要采集的網(wǎng)站地址。

二：智能分析，全程自動(dòng)化提取數(shù)據(jù)

進(jìn)入到第二步后，爬山虎采集器全自動(dòng)智能分析網(wǎng)頁(yè)，并且從中提取出列表數(shù)據(jù)。

三：導(dǎo)出數(shù)據(jù)到表格、數(shù)據(jù)庫(kù)、網(wǎng)站等

運(yùn)行任務(wù)，將采集到的數(shù)據(jù)導(dǎo)出為表格、網(wǎng)站以及各種數(shù)據(jù)庫(kù)，支持api導(dǎo)出。

爬山虎采集器軟件特色

腳本定時(shí)運(yùn)行

可按照計(jì)劃定時(shí)運(yùn)行，無(wú)需人工

向?qū)Ｊ?/strong>

簡(jiǎn)單易用，輕松通過(guò)鼠標(biāo)點(diǎn)擊自動(dòng)生成

獨(dú)創(chuàng)高速內(nèi)核

自研的瀏覽器內(nèi)核，速度飛快，遠(yuǎn)超對(duì)手

廣告屏蔽

定制的廣告屏蔽模塊，兼容adblockPlus語(yǔ)法，可添加自定義規(guī)則

智能識(shí)別

對(duì)于網(wǎng)頁(yè)中的列表、表單結(jié)構(gòu)（多選框下拉列表等）能夠智能識(shí)別

多種數(shù)據(jù)導(dǎo)出

支持Txt 、excel、mysql、SQLServer、SQlite、access、網(wǎng)站等

應(yīng)用優(yōu)勢(shì)

簡(jiǎn)單易學(xué)，通過(guò)可視化界面，鼠標(biāo)點(diǎn)擊即可抓取數(shù)據(jù)

內(nèi)置一套高速瀏覽器內(nèi)核，加上HTTP引擎模式，實(shí)現(xiàn)快速采集數(shù)據(jù)

能夠采集互聯(lián)網(wǎng)99%的網(wǎng)站，包括單頁(yè)應(yīng)用Ajax加載等等動(dòng)態(tài)類型網(wǎng)站

常見(jiàn)問(wèn)題

問(wèn)：如何抓包獲取Cookie，并且手動(dòng)設(shè)置？

1.首先，使用谷歌瀏覽器打開(kāi)要采集的網(wǎng)站，并且登陸。

2.然后按下 F12,會(huì)出現(xiàn)開(kāi)發(fā)者工具，選擇 Network

3.然后按下F5，刷新下頁(yè)面， 選擇其中一個(gè)請(qǐng)求。

4.復(fù)制完成后，在爬山虎采集器中，編輯任務(wù)，進(jìn)入第三步，指定HTTP Header。

問(wèn)：如何過(guò)濾列表中的前N個(gè)數(shù)據(jù)？

1.有時(shí)我們需要對(duì)采集到的列表進(jìn)行過(guò)濾，比如過(guò)濾掉第一組數(shù)據(jù)（在采集表格時(shí)，過(guò)濾掉表格列名）

2.點(diǎn)擊列表模式菜單中的，設(shè)置列表xpath