時間:2018-03-29 17:06:17 作者:不思議游戲 瀏覽量:104
步驟1:創(chuàng)建采集任務(wù)
1)打開后羿采集器,進入主界面,點擊創(chuàng)建任務(wù)按鈕創(chuàng)建 "向?qū)Р杉蝿?wù)"
2)輸入58二手房網(wǎng)站的URL,包括三種方式
1、手動輸入:在輸入框中直接輸入URL,多個URL時須要換行分割
2、點擊從文件中讀取方式:用戶選擇一個存放URL的文件,文件中可以有多個URL地址,地址須要換行分割。
3、批量添加方式:通過添加并調(diào)整地址參數(shù)生成多個有規(guī)律的地址
步驟2:定制采集過程
1)點擊創(chuàng)建后自動打開第一個URL進而進入向?qū)гO(shè)置,點擊下一步進入列表頁
2)在想要采集的元素所在的列表塊中挑選一塊,并點擊塊內(nèi)想要抽取的元素
3)再點擊列表中的其他一塊,可以自動選中整個列表,點擊下一步
4)選擇下一頁按鈕,選中選擇下一頁選項,然后點擊頁面中的下一頁按鈕填充第一個輸入框,第二個數(shù)據(jù)框可以調(diào)節(jié)任務(wù)運行中點擊下一頁按鈕的次數(shù)。理論上次數(shù)越多,采集到的數(shù)據(jù)結(jié)果越多。點擊下一步
5)在焦點框中點擊選擇要采集的字段。下方會顯示采集到的結(jié)果,針對每個字段的結(jié)果可以設(shè)置抽取的方式,雙擊字段可編輯。點擊下一步。
6)選擇是否進入詳情頁面,進入詳情頁須要點擊焦點框中可以點擊進入詳情頁的元素,輸入框中會得到該元素的xpath,點擊下一步
7)在詳情頁中可以繼續(xù)點擊添加字段,此處添加二手房價格、*室*衛(wèi)*廳、房源面積、樓層號,所在小區(qū)位置,點擊保存或保存并運行
步驟3:數(shù)據(jù)采集及導(dǎo)出
1)采集任務(wù)運行中
2)采集完成后,選擇“導(dǎo)出數(shù)據(jù)”可以把數(shù)據(jù)都導(dǎo)出到本地文件
3)選擇“導(dǎo)出方式”,將采集好的數(shù)據(jù)導(dǎo)出,這里可以選擇excel作為導(dǎo)出為格式
4)采集數(shù)據(jù)導(dǎo)出后如下圖