查找引擎面臨的應戰

查找引擎體系是最雜亂的核算體系之一，當今干流查找引擎服務商都是有財力、人力的大公司。即便有技能、人力、財力的確保，查找引擎仍是面臨許多技能應戰。查找引擎誕生后的十多年中，技能現已得到了長足的進步。咱們今天看到的查找成果質量與10年前相比現已好得太多了。不過這還只是一個開始，查找引擎必定還會有更多創新，供給更多、更精確的內容。

整體來說，查找引擎主要會面臨以下幾方面的應戰。

1．頁面抓取需求快而全面

互聯網是一個動態的內容網絡，每天有許多頁面被更新、創立，許多用戶在網站上發布內容、交流聯系。要回來最有用的內容，查找引擎就要抓取最新的頁面?？墒且驗轫撁鏀盗烤薮?，查找引擎蜘蛛更新一次數據庫中的頁面要花很長時間。查找引擎剛誕生時，這個抓取周期往往以幾個月核算。

現在干流查找引擎都現已能在幾天之內更新重要頁面，權重高的網站上的新文件幾小時乃至幾分鐘之內就會被錄入。不過，這種快速錄入和更新也只能局限于高權重網站。許多頁面幾個月不被從頭抓取和更新，也是十分常見的。

要回來最好的成果，查找引擎也有必要抓取盡量全面的頁面，這就需求處理許多技能問題。一些網站并不利于查找引擎蜘蛛匍匐和抓取，比方網站鏈接結構的缺點、很多運用Flash、JavaScript腳本，或許把內容放在用戶有必要登錄今后才干拜訪的部分，都增大了查找引擎抓取內容的難度。

2．海量數據存儲

一些大型網站單是一個網站就有百萬千萬個頁面，可以幻想網上一切網站的頁面加起來是一個什么數據量。查找引擎蜘蛛抓取頁面后，還有必要有用存儲這些數據，數據結構有必要合理，具有極高的擴展性，寫入及拜訪速度要求也很高。

除了頁面數據，查找引擎還需求存儲頁面之間的鏈接聯系及很多歷史數據，這樣的數據量是用戶無法幻想的。聽說Google有幾十個數據中心，上百萬臺服務器。這樣大規模的數據存儲和拜訪必定存在許多技能應戰。

咱們經常在查找成果中看到，排名會沒有明顯原因地上下動搖，乃至可能改寫一下頁面，就看到不同的排名，有的時分網站數據也可能丟失。這些都可能與大規模數據存儲的技能難題有關。

3．索引處理快速有用，具可擴展性

查找引擎將頁面數據抓取和存儲后，還要進行索引處理，包括鏈接聯系的核算、正向索引、倒排索引等。因為數據庫中頁面數量大，進行PR之類的迭代核算也是耗時吃力的。要想及時供給相關又及時的查找成果，只是抓取沒有用，還有必要進行很多索引核算。因為隨時都有新數據、新頁面參加，因而索引處理也要具有很好的擴展性。

4．查詢處理快速精確

查詢是普通用戶唯一能看到的查找引擎作業進程。用戶在查找框輸入關鍵詞，單擊”查找“按鈕后，一般不到一秒鐘就會看到查找成果。外表最簡略的進程，實際上觸及十分雜亂的后臺處理。在最終的查詢階段，最重要的難題是怎樣在不到一秒鐘的時間內，快速從幾十萬、幾百萬，乃至幾千萬包括查找詞的頁面中，找到最合理、最相關的1000個頁面，而且按照相關性、權威性擺放。

5．判別用戶意圖及人工智能

應該說前4個應戰現在的查找引擎都現已可以比較好地處理，但判別用戶意圖還處在初級階段。不同用戶查找相同的關鍵詞，很可能是在尋找不同的東西。比方查找”蘋果“，用戶到底是想了解蘋果這個生果，仍是蘋果電腦？仍是電影《蘋果》的信息？沒有上下文，沒有對用戶個人查找習氣的了解，就完全無從判別。

查找引擎目前正在致力于根據用戶查找習氣及歷史數據的了解上，判別查找意圖，回來更相關的成果。今后查找引擎是否能達到人工智能水平，真實了解用戶查找詞的含義和意圖，讓咱們拭目而待。

查找成果顯示格局

讓咱們先略微深化地了解一下查找成果的展示方式。