Crawler

Crawler是搜尋引擎的重要功能,主要是全文檢索和網頁蒐集,Crawler的設計原理,簡單來說是更新網路上的連結資訊,然後不斷的向外擴張,直到全部的網頁都蒐集到,這也是Google和Yahoo背後重要的程式!!