🎋 竹子日誌

[定期短文]網路爬蟲

很多人說,網路爬蟲是什麼?真的在網路上活動的蟲嗎?還是病毒呢?其實這些答案都不太明確。

網路爬蟲並不是真的生物,而是一支程式。

其實網路所有的資料都存在現實中的伺服器裡面,而搜尋引擎的資料庫記載了有登記的所有網站的連結。

而這個叫網路爬蟲的程式就會針對你所想搜尋的「關鍵字」把所有有關的網站連結撈出來給你,這就是你平常用的google搜尋引擎。

網路爬蟲(web crawle)又常常被稱之spider,其實就是個名稱。

網路上其實有非常多的規範,不過這點這邊我不細談,這些爬蟲在訪問這些網站其實也是有一定的禮貌和規則的。

除了規範,當爬蟲將這些網路資料回饋給使用者時,其實還是有一定的排序。然而這些排序其實是經過這些爬蟲篩選並整理後它們認為優質的內容呈現給您。

這些內容排序,其實就是我們常常談的SEO排名了!

留言