搜尋引擎抓取策略
大站優先:
多半的大型網站比小型網站更有可能提供更多更有價值的內容,所以,如果搜尋引擎抓取常理上會優先抓取大型網站網頁,就可以在短時間內提供用戶有價值資訊。
大型網站識別~
1.前期人工整理大站種子資源,通過大站發現其他的大站。
2.對已經索引的網站進行系統的分析(包含內容、規模、資訊更新等等)判別。
完成大站識別後,搜尋引擎就會對URL資源清單中大站的頁面進行優先抓取。
目的:知道網站方向一定要朝向大型網站慢慢前進!
每天學一點快樂輕鬆學~
「往上走的人沒時間往後看,因為你不會發現你們正在拉開差距。」
沒有留言:
張貼留言