搜索引擎收錄原理
搜索引擎收錄原理
1.頁面收錄流程
在互聯網中,URL是每個頁面的入口地址,搜索引擎蜘蛛程序就是通過URL抓取到頁面的。搜索引擎蜘蛛程序從URL列表出發,通過URL抓取并存儲頁面;同時,提取原始頁面中的URL資源并加入到URL列表中。如此不斷地循環,就可以從互聯網中獲取足夠多的頁面。
URL是頁面的入口,而域名則是網站的入口。搜索引擎蜘蛛程序通過域名進入網站,從而展開對網站頁面的抓取。換而言之,搜索引擎要在互聯網上抓取到頁面的首要任務就是建立一個足夠大的域名列表,再通過域名進入相應的網站,從而抓取網站中的頁面。
而對于網站來說,如果想要被搜索引擎收錄,首要條件就是加入搜索引擎的域名列表。下面向讀者介紹兩種常用的加入搜索引擎域名列表的方法。
第一,利用搜索引擎提供的網站登錄入口,向搜索引擎提交網站域名,例如Google的網站登錄地址是https://www.google.com/intl/zh-CN/webmasters/#?modal_active=none,可在此提交自己的網站域名。對于提交的域名列表,搜索引擎只會定期進行更新。因此,這種做法比較被動,從域名提交到網站被收錄花費的時間也比較長。
第二,通過與外部網站建立鏈接關系,使搜索引擎可以通過外部網站發現我們的網站,從而實現對網站的收錄。這種做法的主動權掌握在我們自己的手里(只要我們擁有足夠多高質量的鏈接即可),縣域收錄速度也比向搜索引擎主動提交要快得多。根據外部鏈接的數量、質量及相關性,一般情況下,2-7天左右就會被搜索引擎收錄。
2.頁面收錄原理
通過上面的介紹,相信讀者已經掌握了網站被搜索引擎收錄的方法。然而,怎樣才能提高網站中頁面被收錄的數量呢?要回答這個問題,就要先了解搜索引擎收錄頁面的工作原理。
如果把網站頁面組成的集合看作是一個有向圖,從指定的頁面出發,沿著頁面中的鏈接,按照某種特定的策略對網站中的頁面進行遍歷。不停地從URL列表中移出已經訪問過的URL,并存儲原始頁面,同時提取原始頁面中的URL信息;再將URL分為域名及部URL兩大類,同時判斷資源為止。經過這些工作,搜索引擎就可以建立龐大的域名列表、頁面URL列表并存儲足夠多的原始頁面。
3.頁面收錄方式
上面已經介紹了搜索引擎收錄頁面的流程及原理。然而,在互聯網數以億計的頁面中,搜索引擎怎樣才能從中抓取到相對重要的頁面呢?這就是涉及搜索引擎的頁面收錄方式。
頁面收錄方式是指搜索引擎抓取頁面時所使用的策略,是為了能在互聯網中篩選出相對重要的信息。頁面收錄方式的制定取決于搜索引擎對網站結構的理解。如果使用相冊的抓取策略,搜索引擎在同樣的時間內可以在某一網站中抓取到更多的頁面資源,則會在該網站上停留更長的時間,收錄的頁面數自然也就更多。因此,加深對搜索引擎頁面收錄方式的認識,有利于為網站建立友好的結構,提高頁面被收錄的數量。
>>廣度優先
如果把整個網站看作是一棵樹,首頁就是根,每個頁面就是葉子。廣度優先是一種橫向的頁面抓取方式,先從樹的較淺層開始抓取頁面,直至抓取完同層次的所有頁面后才進入下一層。因此,在對網站進行優化時,我們應該把網站中相對重要的信息展示在層次較淺的頁面上(例如,在首頁上推薦一些熱門產品或者內容)。反過來,通過廣度優先的抓取方式,搜索引擎就可以優先抓取到網站中相對重要的頁面。(高端網站建設)
首先,搜索引擎從網站首頁出發,抓取首頁上所有鏈接指向的頁面,形成頁面集合A,并解析出集合A中所有頁面的鏈接;再跟蹤這些鏈接抓取下一層的頁面,形成頁面集合B;就這樣遞歸地從線層頁面中解析出鏈接,從而抓取深層頁面,直至滿足了某個設定的條件才停止抓取進程。
>>深度優先
與廣度優先的抓取方式相反,深度優先首先跟蹤線層頁面中的某一鏈接逐步抓取深層頁面,直至抓取完最深層的頁面后才返回淺層頁面再跟蹤其另一鏈接,繼續向深層頁面抓取,這是一種頁面,這樣就能滿足更多用戶的需求。
推薦新聞
更多行業-
建設企業網站需要注意什么?
越來越多的公司逐漸進入互聯網,網站作為互聯網的主要服務平臺,自然會得到...
2020-12-29 -
網站超鏈接什么是絕對路徑和相對路徑
了解從作為鏈接起點的文檔到作為鏈接目標的文檔之間的文件路徑對于創建鏈接...
2015-07-22 -
友情鏈接中的幾個應該注意的小問題
最重要的就是看對方網站建設的整體情況了看是不是對方的資源站,說了上邊基...
2012-06-19 -
有幾種辦法可以提高網站的權重?
一.網站內容規劃 內容這塊比較重要,現在百度比較看重網站內容建設,說...
2019-08-13 -
營銷網站建設有哪些價值?
如今網絡營銷大行其道,但很多中小企業依然停留在以前的網絡營銷模式前面,...
2021-02-18 -
網絡營銷之如何選擇目標市場
選擇目標市場,明確企業應為哪一類用戶服務,滿足他們的哪一種需求,是企業...
2014-06-13
預約專業咨詢顧問溝通!
免責聲明
非常感謝您訪問我們的網站。在您使用本網站之前,請您仔細閱讀本聲明的所有條款。
1、本站部分內容來源自網絡,涉及到的部分文章和圖片版權屬于原作者,本站轉載僅供大家學習和交流,切勿用于任何商業活動。
2、本站不承擔用戶因使用這些資源對自己和他人造成任何形式的損失或傷害。
3、本聲明未涉及的問題參見國家有關法律法規,當本聲明與國家法律法規沖突時,以國家法律法規為準。
4、如果侵害了您的合法權益,請您及時與我們,我們會在第一時間刪除相關內容!
聯系方式:010-60259772
電子郵件:394588593@qq.com