看了很多SEO參考書，總覺得這些書對搜索引擎收錄的原則太籠統(tǒng)了，不能很好的理解，今天我花了一天的時間來明確搜索引擎收錄的原則，如果有問題，希望各位SEO高手指正，我非常感謝。

什么是搜索引擎，爬蟲，蜘蛛，機器人？-搜索引擎收錄原則搜索引擎為了使自己的數(shù)據(jù)庫足夠強大，足夠全面，日夜在網(wǎng)絡中尋找新的、更可靠的信息，但是隨著網(wǎng)絡時代的到來，網(wǎng)絡信息爆炸的整體性，人工不可能完成這樣的任務，因此，搜索引擎擁有者開發(fā)了一套程序，用來日夜分割掌握信息，然后對信息進行整理、分類，最后將這些信息索引到自己的數(shù)據(jù)庫中。這種日夜抓取網(wǎng)站信息的程序有很多種，如蜘蛛、爬蟲、機器人、探測器等。通用搜索引擎可以同時發(fā)送n個以上的爬蟲程序，它們通過URL逐頁抓取網(wǎng)站的標題、描述、圖片、網(wǎng)站內容等，然后將抓取的信息放入專用倉庫，等待索引。

但網(wǎng)站設計者不能保證自己設計的網(wǎng)站是無縫的。會出現(xiàn)很多問題，如網(wǎng)頁出現(xiàn)死鏈接、網(wǎng)頁內容過多等，導致爬蟲程序無法正確抓取整個網(wǎng)頁的內容?？赡芘老x只抓取了頁面的頭部，在抓取我不得不離開的主體時發(fā)現(xiàn)沒有足夠的空間來存儲信息。所以我們在網(wǎng)站設計中應該注意這些問題。建議網(wǎng)站設計者能使網(wǎng)頁設計更容易被爬蟲接受。介紹了googlecrawler程序的兩個基本原理。讓我們以的Google搜索引擎為例來分析搜索引擎是如何獲取和處理信息的。Google爬蟲有兩種：刷新爬蟲和深度檢測爬蟲。刷新爬蟲日夜將抓取的信息放入特定的數(shù)據(jù)庫中。

由于刷新爬蟲程序與主索引程序一起提供搜索結果，有時您會發(fā)現(xiàn)頁面更新突然出現(xiàn)在搜索結果頁面上，但過了一段時間后突然消失。怎么了，因為刷新爬蟲不斷地抓取信息并重寫，這讓我覺得刷新爬蟲的存儲機制更像是數(shù)據(jù)結構中的堆棧。先進，后出，后進，先出。不要擔心SEO的消失。還是那樣。更新將在1月份慢慢出現(xiàn)在搜索結果中，但等待的時間可能不會那么長。如果你的頁面已經(jīng)出現(xiàn)在搜索引擎的索引中，一旦刷新爬蟲找到你的更新，爬蟲會很快顯示你的更新，但不夠穩(wěn)定。你必須等到深度爬蟲更新主索引之后，你的頁面才能足夠穩(wěn)定。

搜索引擎提供多少結果？搜索結果提供兩種搜索結果，我建議你SEOER應該做的，我正在學習，希望得到的建議。三種搜索結果1內容索引結果2特殊索引結果。前者是對網(wǎng)頁的關鍵詞、標題、描述、鏈接、源文本等文本形式的索引和壓縮。后者收錄圖像索引、PDF文件索引等特殊索引。建議SEOER不要低估第二類搜索結果，這也會帶來可觀的流量。