基于自動化測試的定向網絡爬蟲的設計與實現
朱麗英; 吳錦晶 公安部第三研究所物聯網技術研發中心; 上海201204
- 網絡爬蟲
- 自動化測試
- selenium
- 車輛品牌
摘要：為了快速地獲取精準的車輛品牌對應圖片數據,提出了一種基于自動化測試的定向網絡爬蟲程序設計方法。通過自動化測試技術模擬人瀏覽網頁的方式,自動采集指定網頁的車輛品牌外觀圖片,按品牌、款系、年代分類別存儲,引入了增量更新爬蟲策略,提高了爬行效率。利用該爬蟲對汽車之家產品庫進行車輛品牌圖片爬取,取得了較好的效果。
注：因版權方要求，不能公開全文，如需全文，請咨詢雜志社
