網絡爬蟲是一種按照一定的規則，自動地抓取萬維網信息的程序或者腳本 。
拓展資料：
它們被廣泛用于互聯網搜索引擎或其他類似網站，可以自動采集所有其能夠訪問到的頁面內容，以獲取或更新這些網站的內容和檢索方式 。從功能上來講，爬蟲一般分為數據采集，處理，儲存三個部分 。傳統爬蟲從一個或若干初始網頁的URL開始，獲得初始網頁上的URL，在抓取網頁的過程中，不斷從當前頁面上抽取新的URL放入隊列，直到滿足系統的一定停止條件 。聚焦爬蟲的工作流程較為復雜，需要根據一定的網頁分析算法過濾與主題無關的鏈接，保留有用的鏈接并將其放入等待抓取的URL隊列 。

【爬蟲技術是什么】

猜你喜歡

• 苦蕎是什么植物 苦蕎屬于植物嗎
• 我國消防工作的方針和原則是什么？
• 紅的不一定都甜告訴我們什么道理 紅的不一定都甜告訴我們的道理是什么
• 藥士證有什么用 藥士證的作用是什么
• 告訴我們勤奮道理的是什么 勤奮對人生的意義
• 居住證回執有什么用 居住證回執是什么意思
• 審計師證有什么用 審計師證的作用是什么
• 堂而皇之的意思 堂而皇之是什么意思
• 考編是什么 考編制的意思解析
• 聽聰視明是什么意思 聽聰視明的含義