通過《SEO新手入門系列2022（二）：SEO 101》這篇文章已經簡單的介紹了什么是SEO，和搜索引擎，這一篇文章來詳細的介紹下搜索引擎的工作原理，搜索引擎的工作順序大致是：抓取網頁（Crawing），建立索引（Indexing），排名顯示（Ranking）。

就像在前一篇文章提到的，搜索引擎就是一個問答機器，他們去挖掘，理解，組織網上能發現的任何信息，然后把他們以相關的方式組織起來，再返回給使用者，為了能把你的網站展現給用戶之前，最重要的一件事就是你的網站能夠被搜索引擎發現 ，否則在SEPRs（搜索引擎結果頁）是不會有你網站信息的。

搜索引擎是怎么工作的？

就如SEO小也開頭說的，搜索引擎想把網站信息提供給用戶，需要完成三個主要任務：

• 爬取網站（Crawing）會有很多蜘蛛程序，順著URL一個網站一個網站的爬取網站內容。
• 創建索引（Indexing）對蜘蛛爬取的內容進行分類，創建相關索引，并儲存在數據庫中。
• 建立排名（Ranking）為可能的問題建立相關性排名，相關性最高的內容排在靠前的位置。

當然其中的技術實現是非常復雜的，作一名SEO新人，可能占時不需要深究這些問題，SEO小也在大學畢業的時候，作的畢業設計就是搜索引擎，當然那時候是使用第三方的索引分詞庫，我們大部分時間只要配置規則就可以，更深入的內容我會另寫些篇文章來分享。

搜索引擎抓取（Crawing）

搜索引擎要想把相關內容展示給用戶，第一步做的就是派出他的小弟——搜索引擎爬蟲（蜘蛛），他們會不停的抓取互聯網上新的內容，或者更新數據庫中舊的內容，內容的形式多種多樣，有可能是網頁，PDF文件，MP3音頻文件，什么形式都有，但是他們都是通過URL去找到這些內容的。

搜索引擎一開始會有一些種子URL，這些URL都是一些質量比較高的鏈接地址，而且蜘蛛們就會順著這些地址不斷的往下抓取，在這個過程中，新發現的鏈接又會被作為新一輪爬取任務的種子URL，直到沒有新的鏈接可以爬取。

搜索引擎索引（Indexing）

建立索引是一個非常復雜的過程，這個過程涉及的內容比較多的是計算機方面的內容，有算法，有地理環境，有社會學研究等等因素，搜索引擎會根據很多參數去控制這些內容的分類，但是最重要的一點，就是這些內容的相關性，相關性越高，被分在同一個分類的可能性就越高，建立索引是為了后期能快速展現給用戶作準備，也是為排名提供數據基礎。

搜索引擎排名（Ranking)

用戶在搜索引擎輸入框輸入他的關鍵詞，搜索引擎會用驚人的效率在他龐大的索引數據庫中找到相關的內容，并按內容的相關性和一些其它的參數來對內容進行排序，這個過程就是搜索引擎排名，靠前的內容，在搜索引擎看來就是和用戶的問題相關性越高的回答。

如果我們不想讓搜索引擎把一些內容展示給用戶，這也是可以辦到的，但是大多數情況下我們不會這么做，搜索引擎優化的目的就是為了讓用戶看到我們，并能讓搜索引擎優先展示我們想給用戶看的內容。

搜索引擎能找到你么？

就像前面說的，如果要讓自己的網站出現在SERPs中，那前提就是讓網站被搜索引擎蜘蛛爬取和索引，如果你已經有了網站，你可以使用site命令來查看自己網站被收錄的情況，就拿SEO小也為例，在谷歌搜索框輸入site:www.seozen.top你可以看到如下類似的結果：

可以看到SEO小也已經有135個網頁已經被谷歌收錄，這個結果是經常會變動的，能看到一個大概的數據，并不是特別的精準，還有很多沒有顯示的網頁，用一些關鍵詞也是能搜索到。如果想看更精準的結果，可以使用Google Search Console在收錄功能中查看，這就相當于我們百度的站長平臺，但是SEO小也個人覺得比百度站長的作用要大的多，所以SEO小也一般只會看GSC的數據，很少去看百度站長平臺的數據，以后也會專門寫幾篇文章來介紹。

如果你使用site命令找不到網站的收錄，那有可能是下面幾種原因：

• 網站是新站，搜索引擎還沒有收錄。
• 網站沒有外部導入鏈接，可以到一些平臺發一些外鏈。
• 網站目錄結構太深，太復雜，讓搜索引擎爬蟲抓取的效率太低。
• 網站可能包含一些阻止搜索引擎爬蟲的代碼，如noindex，nofollow
• 網站可能被搜索引擎處罰，因為一些作弊或者垃圾廣告等。

我們有時候把精力太多的放在如何讓搜索引擎抓取內容，卻忽略如何不讓搜索引擎不要爬取一些內容，比如說一些重復的頁面，一些搜索參數，還有比如說公司的聯系方式，留言等，這些內容被收錄意義并不大，而且還會讓搜索引擎不知道具體哪個界面是你最想展示給用戶的，所以這時候我們就要告訴搜索引擎，哪些資源他不要花時間去爬取，這就要robots.txt文件出場了，這篇SEO教程先到這。