網頁中視頻url的集合
創造壹個翻頁循環
進入收藏規則設置界面,在地址欄輸入視頻網站的網址,如圖,點擊右邊的按鈕。
在octopus collector的內置瀏覽器中打開此網頁。
在收藏的視頻站中找到翻頁按鈕,移動鼠標選中,點擊右鍵,
執行紅框中的“重復點擊下壹頁”選項。
以上操作完成後,左側流程設計器顯示翻頁周期框,翻頁周期創建完成,如圖。
創建循環點擊列表
移動鼠標選中視頻列表中的標題,點擊鼠標右鍵,在紅框中選擇“創建元素列表”。
選擇添加到列表
該元素將被添加到上面的列表中,並執行“繼續編輯列表”。
選擇視頻列表中的第二個視頻,並以同樣的方式將其添加到元素列表中。
視頻列表中的其他視頻標題將被抓取到元素列表中,因為我們正在添加具有兩個相似特征的元素。
Octopus collector會智能地在頁面中添加其他具有相似特征的元素。點擊“創建列表完成”
如圖所示,點擊“循環”
左上角的流程設計器將顯示壹個循環框,用於單擊元素。完成循環點擊列表的創建。
爬網視頻URL
將鼠標移動到視頻標題上,點擊右鍵,在紅框中選擇“抓取該元素的文本”來抓取視頻標題。
捕獲的標題將顯示在右上角的操作框中。點擊“添加其他特殊字段”,選擇“添加當前頁面的URL”。
提取這段視頻的網址,然後點擊右下角的保存按鈕。
完成視頻URL提取步驟。
由於每個頁面都需要循環收集數據,所以我們需要將這個循環列表拖入翻頁循環中。
註意:流程是從最後壹頁開始執行的,所以這個循環列表需要放在點擊頁面的前面,否則會遺漏第壹頁的數據。
完成的收集規則顯示在圖中的紅框中。點擊右下方的保存,然後點擊下壹步,開始收藏視頻網址。
開始收集
選擇單次采集開始提取視頻URL。
收藏後,導出視頻的網址。
導出視頻網址後,使用視頻網址批量下載工具下載視頻。