不卡AV在线|网页在线观看无码高清|亚洲国产亚洲国产|国产伦精品一区二区三区免费视频

學習啦>論文大全>技術論文>

搜索引擎技術論文

時間: 家文952 分享

  搜索引擎是伴隨互聯(lián)網(wǎng)的發(fā)展而產(chǎn)生和發(fā)展的,互聯(lián)網(wǎng)已成為人們學習、工作和生活中不可缺少的平臺,幾乎每個人上網(wǎng)都會使用搜索引擎。下面是學習啦小編整理的搜索引擎技術論文,希望你能從中得到感悟!

  搜索引擎技術論文篇一

  中文智能搜索引擎技術研究

  引言

  隨著互聯(lián)網(wǎng)的快速發(fā)展,網(wǎng)絡信息量不斷增加。面對數(shù)量龐大,種類多樣的信息,一般搜索引擎無法為用戶提供準確的檢索結果,開發(fā)新的搜索引擎勢在必行。智能搜索引擎不僅要提高信息檢索準確性和全面性,還要滿足用戶個性等搜索信息需求。搜索引擎與智能代理相結合的智能化搜索引擎技術能夠比較好的實現(xiàn)這一目標。

  1 搜索引擎

  1.1 搜索引擎基本原理

  搜索引擎由信息搜集系統(tǒng)、文件處理系統(tǒng)、索引系統(tǒng)和檢索系統(tǒng)組成。

  信息搜集系統(tǒng)通過網(wǎng)頁抓取程序(spider)在網(wǎng)絡中順著網(wǎng)頁的超鏈接抓取網(wǎng)頁,搜集文檔的基本信息并下載至搜索引擎本地,然后將文檔和其基本信息分開,并保存到原始文檔數(shù)據(jù)庫和文檔信息數(shù)據(jù)庫中。

  文件處理系統(tǒng)負責將需要索引的文件轉換成具有統(tǒng)一編碼格式的文本文件。信息搜集系統(tǒng)從網(wǎng)絡上下載文件,保存到本地供索引器索引。文件文本格式種類繁多,如純文本文件、html格式文件、word文件、pdf文檔等,文本格式相同的文件,字符編碼方式也不盡相同。文件的異構性要求文件處理系統(tǒng)將各種不同格式的類文本文件轉換成純文本文件。

  索引系統(tǒng)將程序收集到的文件進行處理,建立索引庫和索引。相關處理還包括去除重復網(wǎng)頁、分詞(中文)、判斷網(wǎng)頁類型、分析超鏈接,計算網(wǎng)頁的重要度、豐富度等。

  檢索系統(tǒng)通過用戶輸入的關鍵詞從索引數(shù)據(jù)庫中找到與關鍵詞匹配的網(wǎng)頁,并按照文檔得分的高低依次顯示在用戶瀏覽器中。

  1.2 傳統(tǒng)搜索引擎的局限性

  面對浩如煙海的網(wǎng)絡信息,用戶想要通過一般搜索引擎獲取準確和全面的信息較困難。其局限性表現(xiàn)在:

  (1)信息檢索方式單一。搜索引擎一般提供網(wǎng)站分類查詢和關鍵詞全文檢索兩種方式,這兩種方法均容易造成信息丟失,不能全面檢索用戶需要的信息;不能對用戶輸入的關鍵詞進行詞意分析和詞意擴展。如今信息的多樣化要求搜索引擎不僅要檢索出文檔,還要檢索需要的圖片、視頻、音頻等。

  (2)不能個性化制定。傳統(tǒng)搜索引擎提供相同的界面和檢索策略,不能提供用戶信息定制,不同用戶輸入相同的查詢條件返回的結果相同。不同領域的用戶對同一個關鍵詞的搜索返回的檢索結果應該不一樣,智能搜索引擎能根據(jù)用戶專業(yè)背景和網(wǎng)頁瀏覽歷史檢索出用戶需求的信息。

  (3)對信息的標引深度不夠。搜索引擎檢索的結果往往只提供線形的網(wǎng)址和包括關鍵詞的網(wǎng)頁信息,或者返回過多的無用信息,特別是對特定文獻數(shù)據(jù)庫的檢索更顯得無能為力[1]。

  (4)信息更新能力低。搜索引擎信息收集和查詢是兩個分離的過程,缺少有機結合。網(wǎng)絡信息資源呈分布式、動態(tài)、快速增長,搜索引擎的集中化架構不能跟上文檔的擴張速度,也就不能有規(guī)律地及時更新數(shù)據(jù)庫,用戶檢索到的結果可能不是最新信息。

  2 智能搜索引擎

  智能搜索引擎應擺脫傳統(tǒng)搜索引擎的局限性,更加智能化,更具主動性,提供多元化的檢索方式,為用戶提供個性化制定,檢索出滿足用戶個性需求。

  2.1 智能搜索引擎主要特征

  (1)智能性。智能化搜索引擎網(wǎng)絡蜘蛛通過自主啟發(fā)式學習選擇最有效的搜索策略和最佳時機,在特定站點或者整個因特網(wǎng)搜集和整理信息。智能化搜索引擎可以將多個引擎的搜索結果進行整合,作為一個整體存放到數(shù)據(jù)庫中。

  (2)個性化。智能化搜索引擎提供個性化制定服務,用戶注冊基本信息,如年齡、專業(yè)背景、工作方向等,通過分析用戶基本信息及平時瀏覽網(wǎng)頁的記錄制定出用戶興趣模塊,檢索出來的信息和用戶興趣相關,不同興趣的用戶輸入同一個關鍵詞返回的結果可能不同。

  (3)多元化。智能化搜索引擎有多元化的檢索方式,提供基于大眾的搜索分析,基于自然語言、關鍵詞、概念和上下文,通過相關反饋技術檢索可選擇查詢路徑。對關鍵詞進行詞意擴展和詞意派生,實現(xiàn)準確的分詞,從而更加準確地把握用戶的搜索需求。

  (4)協(xié)作性。智能化搜索引擎能通過各種通信協(xié)議和其它智能代理進行信息交流 ,并可以相互協(xié)調(diào)共同完成復雜任務[2]。

  2.2 智能搜索引擎技術

  要實現(xiàn)智能化搜索引擎,當前要特別加強對漢語分詞技術、短語識別技術、同義詞處理技術、知識庫與推理機應有技術和人機對話智能技術的研究。

  智能化搜索引擎對語義的理解主要體現(xiàn)在以下兩個方面:一是對用戶輸入的關鍵詞的理解;二是對網(wǎng)頁信息內(nèi)容的理解。傳統(tǒng)搜索引擎對關鍵字的識別是較機械的匹配方式,容易造成信息不準確和丟失。智能化搜索引擎可對用戶輸入的關鍵詞進行語義理解,并返回用戶想要的信息。自然語言語義理解的技術主要有4種:①漢語分詞技術。中國文化博大精深,語句是由各種詞語按照一定的語序組成的。漢語對詞語的劃分相對英文來說復雜得多,漢語詞語可以是由一個字或者多個字組成。漢語分詞技術主要有基于字典、詞庫匹配的分詞、基于詞頻度和基于知識理解的分詞,通過這些方法準確把握用戶輸入關鍵詞的含義;②短語識別技術。短語是由詞語所構成的,是句子中基本的識別單位,在漢語句法分析和語義分析中具有重大意義。用戶搜索有時需要對關鍵詞加一定的修飾詞,例如關鍵字為“搜索”,加入修飾詞可為“個性化的搜索”,前者就是詞語,后者為短語。需要通過短語識別技術對關鍵詞進行正確的分詞,從而準確理解用戶的查詢需求;③同義詞處理技術。包括基于詞匯字面相似度算法、基于詞素的語義相似度算法以及基于《同義詞詞林》、《知網(wǎng)》等語義詞典的語義相似度算法。主要依靠人工方式構造同義詞庫等輔助詞庫,利用搜索引擎主動聯(lián)想技術實現(xiàn)對同義詞的聯(lián)想,準確把握用戶關鍵詞語義;④知識庫構建技術。知識庫包含各種詞典,詞典按其功能不同可分成定義詞詞典、同名詞詞典、派生詞詞典等,詞典按詞的確定性又可分成系統(tǒng)詞典與用戶詞典。這些詞典構成了一個龐大而復雜的知識庫。

  人機接口智能化主要有以下技術: ①人機交互界面技術。智能化搜索引擎界面具有智能化、多元化、個性化等特點。其技術主要包括搜索請求提交技術、搜索結果表現(xiàn)技術、搜索向導技術、搜索行為分析技術。其中,搜索行為分析技術是個性化搜索的關鍵技術,它通過分析用戶的瀏覽記錄和搜索習慣來提高搜索效率;②關聯(lián)式綜合搜索。將圖片、新聞等各種有關聯(lián)的信息呈現(xiàn)在同一界面上,用戶搜索時只需查詢一次,即可在同一界面得到各種有關聯(lián)的查詢結果。

  隨著云技術的出現(xiàn),智能搜索引擎將全球服務器當作一個云系統(tǒng),從而極大提升從數(shù)據(jù)庫中提取信息速度。云技術的成熟能夠有效提升搜索引擎的算法速度,提高智能搜索引擎的運行速度[3]。

  3 結語

  智能化搜索引擎技術的發(fā)展首先應該解決目前搜索引擎的局限性,然后再添加智能搜索。智能搜索引擎應該在以下幾個方面尋求發(fā)展:提供友好的查詢界面;多元化的檢索方式;強大的自然語言理解技術;豐富的知識庫;考慮按時間、地域順序輸出檢索結果,以便用戶選擇所需的最新信息;查詢結果文摘動態(tài)生成;結果自動綜合分析和評分[4]。

  隨著搜索引擎技術的發(fā)展,智能化搜索引擎變得更多元化、親切、個性化,廣泛融入進人們的生活,為用戶提供更準確、符合需求的搜索信息。

點擊下頁還有更多>>>搜索引擎技術論文

2751913