-
當(dāng)前位置:首頁 > 創(chuàng)意學(xué)院 > 營銷推廣 > 專題列表 > 正文
搜索引擎(Search Engine)是指根據(jù)一定的策略、運(yùn)用特定的計(jì)算機(jī)程序從互聯(lián)網(wǎng)上搜集信息,。
在對信息進(jìn)行組織和處理后,為用戶提供檢索服務(wù),將用戶檢索相關(guān)的信息展示給用戶的系統(tǒng)。
搜索引擎包括全文索引、目錄索引、元搜索引擎、垂直搜索引擎、集合式搜索引擎、門戶搜索引擎與免費(fèi)鏈接列表等。
各個(gè)搜索引擎都提供一些方法來幫我們精確地查詢內(nèi)容,使之符合我們的要求。不同的搜索引擎,提供的查找技巧和實(shí)現(xiàn)的方法各有不同,但一些常見的技巧是差不多的。
(一)簡單信息查找 簡單查找是最常用的方法,當(dāng)我們輸入一個(gè)關(guān)鍵詞時(shí),搜索引擎就把包括關(guān)鍵詞的網(wǎng)址和與關(guān)鍵詞意義相近的網(wǎng)址一起反饋給我們。例如,查找“科技”一詞時(shí),模糊查找就會把“科學(xué)”、“科委”、“技術(shù)”等內(nèi)容的網(wǎng)址一起反饋回來。
(二)使用雙引號進(jìn)行精確查找 簡單查找往往會反饋回大量不需要的信息,如果查找的是一個(gè)詞組或多個(gè)漢字,最好的辦法就是將它們用雙引號括起來(即在英文輸入狀態(tài)下的雙引號),這樣得到的結(jié)果最少、最精確。例如在搜索引擎的Search(查詢)框中輸入"電腦技術(shù)",就等于告訴搜索引擎只反饋回網(wǎng)頁中有“電腦技術(shù)”這幾個(gè)關(guān)鍵字的網(wǎng)址,這會比輸入電腦技術(shù)得到更少、更好的結(jié)果。
(三)使用加減號限定查找 很多搜索引擎都支持在搜索詞前冠以加號(+)限定搜索結(jié)果中必須包含的詞匯,用減號(-) 限定搜索結(jié)果不能包含的詞匯。 例如:要查找的內(nèi)容必須同時(shí)包括“鹽城、信息、網(wǎng)絡(luò)”3個(gè)關(guān)鍵詞時(shí),就可用“鹽城+信息+網(wǎng)絡(luò)”來表示;再例如:要查找“電腦”,但必須沒有“技術(shù)”字樣,就可以用“電腦-技術(shù)”來表示。
(四)使用邏輯詞輔助查找 比較著名的搜索引擎都支持使用邏輯詞進(jìn)行更復(fù)雜的搜索設(shè)定,常用的有:AND(和)、OR( 或)、NOT(否, 有些是AND NOT)及NEAR(兩個(gè)單詞的靠近程度),恰當(dāng)應(yīng)用它們可以使結(jié)果非常精確, 另外, 也可以使用括號將搜索詞分別組合,如要查找的內(nèi)容必須同時(shí)包括“yancheng、infomation、network”3個(gè)關(guān)鍵詞時(shí),就可用yancheng AND infomation AND network來表示(注意:輸入代表邏輯關(guān)系的字符時(shí),一定要用半角)。
門戶搜索引擎(門戶搜索引擎有哪些)
大家好!今天讓創(chuàng)意嶺的小編來大家介紹下關(guān)于門戶搜索引擎的問題,以下是小編對此問題的歸納整理,讓我們一起來看看吧。
創(chuàng)意嶺作為行業(yè)內(nèi)優(yōu)秀的企業(yè),服務(wù)客戶遍布全球各地,相關(guān)業(yè)務(wù)請撥打電話:175-8598-2043,或添加微信:1454722008
本文目錄:
一、搜索引擎網(wǎng)站與門戶網(wǎng)站的區(qū)別
門戶原意是指正門、入口,現(xiàn)多用于互聯(lián)網(wǎng)的門戶網(wǎng)站和企業(yè)應(yīng)用系統(tǒng)的門戶系統(tǒng)。說白了就是什么都做,這在營銷上應(yīng)該是一種貪婪的定位策略,企圖以此而不放過任何一類目標(biāo)群體,不放過涉足或抽身任何一個(gè)領(lǐng)域的資格或可能。有體育,有經(jīng)濟(jì),有新聞之類
也有說:所謂門戶網(wǎng)站,是指通向某類綜合性互聯(lián)網(wǎng)信息資源并提供有關(guān)信息服務(wù)的應(yīng)用系統(tǒng)。門戶網(wǎng)站最初提供搜索引擎、目錄服務(wù),后來由于市場競爭日益激烈,門戶網(wǎng)站不得不快速地拓展各種新的業(yè)務(wù)類型,希望通過門類眾多的業(yè)務(wù)來吸引和留駐互聯(lián)網(wǎng)用戶,
通俗地來說,門戶網(wǎng)站就像晚報(bào),大而全,搜索引擎則是一種功能化的網(wǎng)站。
還有一種說法叫做搜索門戶,是指只做搜索的一些瀏覽量比較大的搜索網(wǎng)站
英文最大的搜索引擎是Google,最大的門戶網(wǎng)站是Yahoo!
中文最大搜索引擎是Baidu,最大的門戶是Sina
不過百度大有走向搜索門戶的趨勢
二、搜索引擎從使用特點(diǎn)和用途上可分為哪幾項(xiàng)
可以分為7類,
第一類,全文索引,是目前比較主流的搜索引擎,數(shù)據(jù)庫非常強(qiáng)大,
第二類,目錄索引,也就是分類檢索,根據(jù)目錄層層點(diǎn)擊找到所需要的信息,而不需要進(jìn)行輸入搜索?!?/p>
第三類,元搜索引擎 在點(diǎn)擊搜索之后,自動同時(shí)字啊在多個(gè)搜索引擎上搜索,并將結(jié)果返回給用戶。
第四類,垂直搜索引擎 這是針對特定的一些領(lǐng)域進(jìn)行搜索,數(shù)據(jù)庫相對于全文類較為狹窄,但是速度要快很多,準(zhǔn)確性也更高,如搜索機(jī)票、旅游等等。
第五類,集合式搜索引擎 與元搜索引擎相似,但是并不是同時(shí)進(jìn)行搜索。
第六類,門戶搜索引擎 沒有自身的數(shù)據(jù)庫,也沒有分類目錄,就是完全來自其他搜索引擎。
第七類,免費(fèi)鏈接列表 有簡單的分類目錄,規(guī)模小很多。
希望可以幫助到你
三、搜索引擎其實(shí)也是一個(gè)什么?
搜索引擎其實(shí)也是網(wǎng)站。
四、搜索引擎是如何搜索到信息
隨著互聯(lián)網(wǎng)的迅猛發(fā)展、WEB信息的增加,用戶要在信息海洋里查找自己所需的信息,就象大海撈針一樣,搜索引擎技術(shù)恰好解決了這一難題(它可以為用戶提供信息檢索服務(wù))。搜索引擎是指互聯(lián)網(wǎng)上專門提供檢索服務(wù)的一類網(wǎng)站,這些站點(diǎn)的服務(wù)器通過網(wǎng)絡(luò)搜索軟件(例如網(wǎng)絡(luò)搜索機(jī)器人)或網(wǎng)絡(luò)登錄等方式,將Intemet上大量網(wǎng)站的頁面信息收集到本地,經(jīng)過加工處理建立信息數(shù)據(jù)庫和索引數(shù)據(jù)庫,從而對用戶提出的各種檢索作出響應(yīng),提供用戶所需的信息或相關(guān)指針。用戶的檢索途徑主要包括自由詞全文檢索、關(guān)鍵詞檢索、分類檢索及其他特殊信息的檢索(如企業(yè)、人名、電話黃頁等)。下面以網(wǎng)絡(luò)搜索機(jī)器人為例來說明搜索引擎技術(shù)。
1.網(wǎng)絡(luò)機(jī)器人技術(shù)
網(wǎng)絡(luò)機(jī)器人(Robot)又被稱作Spider、Worm或Random,核心目的是為獲取Intemet上的信息。一般定義為“一個(gè)在網(wǎng)絡(luò)上檢索文件且自動跟蹤該文件的超文本結(jié)構(gòu)并循環(huán)檢索被參照的所有文件的軟件”。機(jī)器人利用主頁中的超文本鏈接遍歷WWW,通過U趾引用從一個(gè)HT2LIL文檔爬行到另一個(gè)HTML文檔。網(wǎng)上機(jī)器人收集到的信息可有多種用途,如建立索引、HIML文件合法性的驗(yàn)證、uRL鏈接點(diǎn)驗(yàn)證與確認(rèn)、監(jiān)控與獲取更新信息、站點(diǎn)鏡像等。
機(jī)器人安在網(wǎng)上爬行,因此需要建立一個(gè)URL列表來記錄訪問的軌跡。它使用超文本,指向其他文檔的URL是隱藏在文檔中,需要從中分析提取URL,機(jī)器人一般都用于生成索引數(shù)據(jù)庫。所有WWW的搜索程序都有如下的工作步驟:
(1)機(jī)器人從起始URL列表中取出URL并從網(wǎng)上讀取其指向的內(nèi)容;
(2)從每一個(gè)文檔中提取某些信息(如關(guān)鍵字)并放入索引數(shù)據(jù)庫中;
(3)從文檔中提取指向其他文檔的URL,并加入到URL列表中;
(4)重復(fù)上述3個(gè)步驟,直到再沒有新的URL出現(xiàn)或超出了某些限制(時(shí)間或磁盤空間);
(5)給索引數(shù)據(jù)庫加上檢索接口,向網(wǎng)上用戶發(fā)布或提供給用戶檢索。
搜索算法一般有深度優(yōu)先和廣度優(yōu)先兩種基本的搜索策略。機(jī)器人以URL列表存取的方式?jīng)Q定搜索策略:先進(jìn)先出,則形成廣度優(yōu)先搜索,當(dāng)起始列表包含有大量的WWW服務(wù)器地址時(shí),廣度優(yōu)先搜索將產(chǎn)生一個(gè)很好的初始結(jié)果,但很難深入到服務(wù)器中去;先進(jìn)后出,則形成深度優(yōu)先搜索,這樣能產(chǎn)生較好的文檔分布,更容易發(fā)現(xiàn)文檔的結(jié)構(gòu),即找到最大數(shù)目的交叉引用。也可以采用遍歷搜索的方法,就是直接將32位的IP地址變化,逐個(gè)搜索整個(gè)Intemet。
搜索引擎是一個(gè)技術(shù)含量很高的網(wǎng)絡(luò)應(yīng)用系統(tǒng)。它包括網(wǎng)絡(luò)技術(shù)、數(shù)據(jù)庫技術(shù)動標(biāo)引技術(shù)、檢索技術(shù)、自動分類技術(shù),機(jī)器學(xué)習(xí)等人工智能技術(shù)。
2.索引技術(shù)
索引技術(shù)是搜索引擎的核心技術(shù)之一。搜索引擎要對所收集到的信息進(jìn)行整理、分類、索引以產(chǎn)生索引庫,而中文搜索引擎的核心是分詞技術(shù)。分詞技術(shù)是利用一定的規(guī)則和詞庫,切分出一個(gè)句子中的詞,為自動索引做好準(zhǔn)備。目前的索引多采用Non—clustered方法,該技術(shù)和語言文字的學(xué)問有很大的關(guān)系,具體有如下幾點(diǎn):
(1)存儲語法庫,和詞匯庫配合分出句子中的詞匯;
(2)存儲詞匯庫,要同時(shí)存儲詞匯的使用頻率和常見搭配方式;
(3)詞匯寬,應(yīng)可劃分為不同的專業(yè)庫,以便于處理專業(yè)文獻(xiàn);
(4)對無法分詞的句子,把每個(gè)字當(dāng)作詞來處理。
索引器生成從關(guān)鍵詞到URL的關(guān)系索引表。索引表一般使用某種形式的倒排表(1nversionUst),即由索引項(xiàng)查找相應(yīng)的URL。索引表也要記錄索引項(xiàng)在文檔中出現(xiàn)的位置,以便檢索器計(jì)算索引項(xiàng)之間的相鄰關(guān)系或接近關(guān)系,并以特定的數(shù)據(jù)結(jié)構(gòu)存儲在硬盤上。
不同的搜索引擎系統(tǒng)可能采用不盡相同的標(biāo)引方法。例如Webcrawler利用全文檢索技術(shù),對網(wǎng)頁中每一個(gè)單詞進(jìn)行索引;Lycos只對頁名、標(biāo)題以及最重要的100個(gè)注釋詞等選擇性詞語進(jìn)行索引;Infoseek則提供概念檢索和詞組檢索,支持and、or、near、not等布爾運(yùn)算。檢索引擎的索引方法大致可分為自動索引、手工索引和用戶登錄三類。
3. 檢索器與結(jié)果處理技術(shù)
檢索器的主要功能是根據(jù)用戶輸入的關(guān)鍵詞在索引器形成的倒排表中進(jìn)行檢索,同時(shí)完成頁面與檢索之間的相關(guān)度評價(jià),對將要輸出的結(jié)果進(jìn)行排序,并實(shí)現(xiàn)某種用戶相關(guān)性反饋機(jī)制。
通過搜索引擎獲得的檢索結(jié)果往往成百上千,為了得到有用的信息,常用的方法是按網(wǎng)頁的重要性或相關(guān)性給網(wǎng)頁評級,進(jìn)行相關(guān)性排序。這里的相關(guān)度是指搜索關(guān)鍵字在文檔中出現(xiàn)的額度。當(dāng)額度越高時(shí),則認(rèn)為該文檔的相關(guān)程度越高。能見度也是常用的衡量標(biāo)準(zhǔn)之一。一個(gè)網(wǎng)頁的能見度是指該網(wǎng)頁入口超級鏈接的數(shù)目。能見度方法是基于這樣的觀點(diǎn):一個(gè)網(wǎng)頁被其他網(wǎng)頁引用得越多,則該網(wǎng)頁就越有價(jià)值。特別地,一個(gè)網(wǎng)頁被越重要的網(wǎng)頁所引用,則該網(wǎng)頁的重要程度也就越高。結(jié)果處理技術(shù)可歸納為:
(1)按頻次排定次序 通常,如果一個(gè)頁面包含了越多的關(guān)鍵詞,其搜索目標(biāo)的相關(guān)性應(yīng)該越好,這是非常合平常理的解決方案。
(2)按頁面被訪問度排序 在這種方法中,搜索引擎會記錄它所搜索到的頁面被訪問的頻率。人們訪問較多的頁面通常應(yīng)該包含比較多的信息,或者有其他吸引入的長處。這種解決方案適合一般的搜索用戶,而因?yàn)榇蟛糠值乃阉饕娑疾皇菍I(yè)性用戶,所以這種方案也比較適合一般搜索引擎使用。
(3)二次檢索 進(jìn)一步凈化(比flne)結(jié)果,按照一定的條件對搜索結(jié)果進(jìn)行優(yōu)化,可以再選擇類別、相關(guān)詞進(jìn)行二次搜索等。
由于目前的搜索引擎還不具備智能,除非知道要查找的文檔的標(biāo)題,否則排列第一的結(jié)果未必是“最好”的結(jié)果。所以有些文檔盡管相關(guān)程度高,但并不一定是用戶最需要的文檔。
搜索引擎技術(shù)的行業(yè)應(yīng)用:
搜索引擎的行業(yè)應(yīng)用一般指類似于千瓦通信提供的多種搜索引擎行業(yè)與產(chǎn)品應(yīng)用模式,大體上分為如下幾種形式:
1、 政府機(jī)關(guān)行業(yè)應(yīng)用
n 實(shí)時(shí)跟蹤、采集與業(yè)務(wù)工作相關(guān)的信息來源。
n 全面滿足內(nèi)部工作人員對互聯(lián)網(wǎng)信息的全局觀測需求。
n 及時(shí)解決政務(wù)外網(wǎng)、政務(wù)內(nèi)網(wǎng)的信息源問題,實(shí)現(xiàn)動態(tài)發(fā)布。
n 快速解決政府主網(wǎng)站對各地級子網(wǎng)站的信息獲取需求。
n 全面整合信息,實(shí)現(xiàn)政府內(nèi)部跨地區(qū)、跨部門的信息資源共享與有效溝通。
n 節(jié)約信息采集的人力、物力、時(shí)間,提高辦公效率。
2、企業(yè)行業(yè)應(yīng)用
n 實(shí)時(shí)準(zhǔn)確地監(jiān)控、追蹤競爭對手動態(tài),是企業(yè)獲取競爭情報(bào)的利器。
n 及時(shí)獲取競爭對手的公開信息以便研究同行業(yè)的發(fā)展與市場需求。
n 為企業(yè)決策部門和管理層提供便捷、多途徑的企業(yè)戰(zhàn)略決策工具。
n 大幅度地提高企業(yè)獲取、利用情報(bào)的效率,節(jié)省情報(bào)信息收集、存儲、挖掘的相關(guān)費(fèi)用,是提高企業(yè)核心競爭力的關(guān)鍵。
n 提高企業(yè)整體分析研究能力、市場快速反應(yīng)能力,建立起以知識管理為核心的競爭情報(bào)數(shù)據(jù)倉庫,是提高企業(yè)核心競爭力的神經(jīng)中樞。
3、新聞媒體行業(yè)應(yīng)用
n 快速準(zhǔn)確地自動跟蹤、采集數(shù)千家網(wǎng)絡(luò)媒體信息,擴(kuò)大新聞線索,提高采集速度。
n 支持每天對數(shù)萬條新聞進(jìn)行有效抓取。監(jiān)控范圍的深度、廣度可以自行設(shè)定。
n 支持對所需內(nèi)容智能提取、審核。
n 實(shí)現(xiàn)互聯(lián)網(wǎng)信息內(nèi)容采集、瀏覽、編輯、管理、發(fā)布的一體化。
4、 行業(yè)網(wǎng)站應(yīng)用
n 實(shí)時(shí)跟蹤、采集與網(wǎng)站相關(guān)的信息來源。
n 及時(shí)跟蹤行業(yè)的信息來源網(wǎng)站,自動,快速更新網(wǎng)站信息。動態(tài)更新信息。
n 實(shí)現(xiàn)互聯(lián)網(wǎng)信息內(nèi)容采集、瀏覽、編輯、管理、發(fā)布的一體化。
n 針對商務(wù)網(wǎng)站提出商務(wù)管理模式,大大提高行業(yè)網(wǎng)站的商務(wù)應(yīng)用需求。
n 針對資訊網(wǎng)站分類目錄生成,提出用戶生成網(wǎng)站分類結(jié)構(gòu)。并可以實(shí)時(shí)增加與更新分類結(jié)構(gòu)。不受級數(shù)限制。從而大大利高行業(yè)的應(yīng)用性。
n 提供搜索引擎SEO優(yōu)化專業(yè)服務(wù),快速提高行業(yè)網(wǎng)站的推廣。
n 提供與CCDC呼叫搜索引擎的廣告合作。建立行業(yè)網(wǎng)站聯(lián)盟,提高行業(yè)網(wǎng)站知名度。
5) 網(wǎng)絡(luò)信息監(jiān)察與監(jiān)控
n 網(wǎng)絡(luò)輿情系統(tǒng)。如“千瓦通信-網(wǎng)絡(luò)輿情雷達(dá)監(jiān)測系統(tǒng)”
n 網(wǎng)站信息與內(nèi)容監(jiān)察與監(jiān)控系統(tǒng),如“千瓦通信-網(wǎng)站信息與內(nèi)容監(jiān)測與監(jiān)察系統(tǒng)(站內(nèi)神探)”
隨著因特網(wǎng)的迅猛發(fā)展、WEB信息的增加,用戶要在信息海洋里查找信息,就象大海撈
針一樣,搜索引擎技術(shù)恰好解決了這一難題(它可以為用戶提供信息檢索服務(wù))。目前,
搜索引擎技術(shù)正成為計(jì)算機(jī)工業(yè)界和學(xué)術(shù)界爭相研究、開發(fā)的對象。
搜索引擎(Search Engine)是隨著WEB信息的迅速增加,從1995年開始逐漸發(fā)展起來
的技術(shù)。據(jù)發(fā)表在《科學(xué)》雜志1999年7月的文章《WEB信息的可訪問性》估計(jì),全球目前
的網(wǎng)頁超過8億,有效數(shù)據(jù)超過9T,并且仍以每4個(gè)月翻一番的速度增長。用戶要在如此浩
瀚的信息海洋里尋找信息,必然會"大海撈針"無功而返。搜索引擎正是為了解決這個(gè)"迷航
"問題而出現(xiàn)的技術(shù)。搜索引擎以一定的策略在互聯(lián)網(wǎng)中搜集、發(fā)現(xiàn)信息,對信息進(jìn)行理解
、提取、組織和處理,并為用戶提供檢索服務(wù),從而起到信息導(dǎo)航的目的。搜索引擎提供
的導(dǎo)航服務(wù)已經(jīng)成為互聯(lián)網(wǎng)上非常重要的網(wǎng)絡(luò)服務(wù),搜索引擎站點(diǎn)也被美譽(yù)為"網(wǎng)絡(luò)門戶"
。搜索引擎技術(shù)因而成為計(jì)算機(jī)工業(yè)界和學(xué)術(shù)界爭相研究、開發(fā)的對象。本文旨在對搜索
引擎的關(guān)鍵技術(shù)進(jìn)行簡單的介紹,以起到拋磚引玉的作用。
分 類
按照信息搜集方法和服務(wù)提供方式的不同,搜索引擎系統(tǒng)可以分為三大類:
1.目錄式搜索引擎:以人工方式或半自動方式搜集信息,由編輯員查看信息之后,人
工形成信息摘要,并將信息置于事先確定的分類框架中。信息大多面向網(wǎng)站,提供目錄瀏
覽服務(wù)和直接檢索服務(wù)。該類搜索引擎因?yàn)榧尤肓巳说闹悄?,所以信息?zhǔn)確、導(dǎo)航質(zhì)量高
,缺點(diǎn)是需要人工介入、維護(hù)量大、信息量少、信息更新不及時(shí)。這類搜索引擎的代表是
:Yahoo、LookSmart、Open Directory、Go Guide等。
2.機(jī)器人搜索引擎:由一個(gè)稱為蜘蛛(Spider)的機(jī)器人程序以某種策略自動地在互
聯(lián)網(wǎng)中搜集和發(fā)現(xiàn)信息,由索引器為搜集到的信息建立索引,由檢索器根據(jù)用戶的查詢輸
入檢索索引庫,并將查詢結(jié)果返回給用戶。服務(wù)方式是面向網(wǎng)頁的全文檢索服務(wù)。該類搜
索引擎的優(yōu)點(diǎn)是信息量大、更新及時(shí)、毋需人工干預(yù),缺點(diǎn)是返回信息過多,有很多無關(guān)
信息,用戶必須從結(jié)果中進(jìn)行篩選。這類搜索引擎的代表是:AltaVista、Northern Ligh
t、Excite、Infoseek、Inktomi、FAST、Lycos、Google;國內(nèi)代表為:"天網(wǎng)"、悠游、O
penFind等。
3.元搜索引擎:這類搜索引擎沒有自己的數(shù)據(jù),而是將用戶的查詢請求同時(shí)向多個(gè)搜
索引擎遞交,將返回的結(jié)果進(jìn)行重復(fù)排除、重新排序等處理后,作為自己的結(jié)果返回給用
戶。服務(wù)方式為面向網(wǎng)頁的全文檢索。這類搜索引擎的優(yōu)點(diǎn)是返回結(jié)果的信息量更大、更
全,缺點(diǎn)是不能夠充分使用所使用搜索引擎的功能,用戶需要做更多的篩選。這類搜索引
擎的代表是WebCrawler、InfoMarket等。
性 能 指 標(biāo)
我們可以將WEB信息的搜索看作一個(gè)信息檢索問題,即在由WEB網(wǎng)頁組成的文檔庫中檢索
出與用戶查詢相關(guān)的文檔。所以我們可以用衡量傳統(tǒng)信息檢索系統(tǒng)的性能參數(shù)-召回率(R
ecall)和精度(Pricision)衡量一個(gè)搜索引擎的性能。
召回率是檢索出的相關(guān)文檔數(shù)和文檔庫中所有的相關(guān)文檔數(shù)的比率,衡量的是檢索系
統(tǒng)(搜索引擎)的查全率;精度是檢索出的相關(guān)文檔數(shù)與檢索出的文檔總數(shù)的比率,衡量
的是檢索系統(tǒng)(搜索引擎)的查準(zhǔn)率。對于一個(gè)檢索系統(tǒng)來講,召回率和精度不可能兩全
其美:召回率高時(shí),精度低,精度高時(shí),召回率低。所以常常用11種召回率下11種精度的
平均值(即11點(diǎn)平均精度)來衡量一個(gè)檢索系統(tǒng)的精度。對于搜索引擎系統(tǒng)來講,因?yàn)闆]
有一個(gè)搜索引擎系統(tǒng)能夠搜集到所有的WEB網(wǎng)頁,所以召回率很難計(jì)算。目前的搜索引擎系
統(tǒng)都非常關(guān)心精度。
影響一個(gè)搜索引擎系統(tǒng)的性能有很多因素,最主要的是信息檢索模型,包括文檔和查詢
的表示方法、評價(jià)文檔和用戶查詢相關(guān)性的匹配策略、查詢結(jié)果的排序方法和用戶進(jìn)行相
關(guān)度反饋的機(jī)制。
主 要 技 術(shù)
一個(gè)搜索引擎由搜索器、索引器、檢索器和用戶接口等四個(gè)部分組成。
1.搜索器
搜索器的功能是在互聯(lián)網(wǎng)中漫游,發(fā)現(xiàn)和搜集信息。它常常是一個(gè)計(jì)算機(jī)程序,日夜
不停地運(yùn)行。它要盡可能多、盡可能快地搜集各種類型的新信息,同時(shí)因?yàn)榛ヂ?lián)網(wǎng)上的信
息更新很快,所以還要定期更新已經(jīng)搜集過的舊信息,以避免死連接和無效連接。目前有
兩種搜集信息的策略:
● 從一個(gè)起始URL集合開始,順著這些URL中的超鏈(Hyperlink),以寬度優(yōu)先、深
度優(yōu)先或啟發(fā)式方式循環(huán)地在互聯(lián)網(wǎng)中發(fā)現(xiàn)信息。這些起始URL可以是任意的URL,但常常
是一些非常流行、包含很多鏈接的站點(diǎn)(如Yahoo?。?
● 將Web空間按照域名、IP地址或國家域名劃分,每個(gè)搜索器負(fù)責(zé)一個(gè)子空間的窮盡
搜索。 搜索器搜集的信息類型多種多樣,包括HTML、XML、Newsgroup文章、FTP文件、
字處理文檔、多媒體信息。 搜索器的實(shí)現(xiàn)常常用分布式、并行計(jì)算技術(shù),以提高信息
發(fā)現(xiàn)和更新的速度。商業(yè)搜索引擎的信息發(fā)現(xiàn)可以達(dá)到每天幾百萬網(wǎng)頁。
2.索引器
索引器的功能是理解搜索器所搜索的信息,從中抽取出索引項(xiàng),用于表示文檔以及生
成文檔庫的索引表。
索引項(xiàng)有客觀索引項(xiàng)和內(nèi)容索引項(xiàng)兩種:客觀項(xiàng)與文檔的語意內(nèi)容無關(guān),如作者名、
URL、更新時(shí)間、編碼、長度、鏈接流行度(Link Popularity)等等;內(nèi)容索引項(xiàng)是用來
反映文檔內(nèi)容的,如關(guān)鍵詞及其權(quán)重、短語、單字等等。內(nèi)容索引項(xiàng)可以分為單索引項(xiàng)和
多索引項(xiàng)(或稱短語索引項(xiàng))兩種。單索引項(xiàng)對于英文來講是英語單詞,比較容易提取,
因?yàn)閱卧~之間有天然的分隔符(空格);對于中文等連續(xù)書寫的語言,必須進(jìn)行詞語的切
分。 在搜索引擎中,一般要給單索引項(xiàng)賦與一個(gè)權(quán)值,以表示該索引項(xiàng)對文檔的區(qū)分
度,同時(shí)用來計(jì)算查詢結(jié)果的相關(guān)度。使用的方法一般有統(tǒng)計(jì)法、信息論法和概率法。短
語索引項(xiàng)的提取方法有統(tǒng)計(jì)法、概率法和語言學(xué)法。
索引表一般使用某種形式的倒排表(Inversion List),即由索引項(xiàng)查找相應(yīng)的文檔
。索引表也可能要記錄索引項(xiàng)在文檔中出現(xiàn)的位置,以便檢索器計(jì)算索引項(xiàng)之間的相鄰或
接近關(guān)系(proximity)。
索引器可以使用集中式索引算法或分布式索引算法。當(dāng)數(shù)據(jù)量很大時(shí),必須實(shí)現(xiàn)即時(shí)
索引(Instant Indexing),否則不能夠跟上信息量急劇增加的速度。索引算法對索引器
的性能(如大規(guī)模峰值查詢時(shí)的響應(yīng)速度)有很大的影響。一個(gè)搜索引擎的有效性在很大
程度上取決于索引的質(zhì)量。
3.檢索器 檢索器的功能是根據(jù)用戶的查詢在索引庫中快速檢出文檔,進(jìn)行文檔與
查詢的相關(guān)度評價(jià),對將要輸出的結(jié)果進(jìn)行排序,并實(shí)現(xiàn)某種用戶相關(guān)性反饋機(jī)制。
檢索器常用的信息檢索模型有集合理論模型、代數(shù)模型、概率模型和混合模型四種。
4.用戶接口
用戶接口的作用是輸入用戶查詢、顯示查詢結(jié)果、提供用戶相關(guān)性反饋機(jī)制。主要的
目的是方便用戶使用搜索引擎,高效率、多方式地從搜索引擎中得到有效、及時(shí)的信息。
用戶接口的設(shè)計(jì)和實(shí)現(xiàn)使用人機(jī)交互的理論和方法,以充分適應(yīng)人類的思維習(xí)慣。
用戶輸入接口可以分為簡單接口和復(fù)雜接口兩種。
簡單接口只提供用戶輸入查詢串的文本框;復(fù)雜接口可以讓用戶對查詢進(jìn)行限制,如
邏輯運(yùn)算(與、或、非;+、-)、相近關(guān)系(相鄰、NEAR)、域名范圍(如.edu、.com)
、出現(xiàn)位置(如標(biāo)題、內(nèi)容)、信息時(shí)間、長度等等。目前一些公司和機(jī)構(gòu)正在考慮制定
查詢選項(xiàng)的標(biāo)準(zhǔn)。
未 來 動 向
搜索引擎已成為一個(gè)新的研究、開發(fā)領(lǐng)域。因?yàn)樗玫叫畔z索、人工智能、計(jì)算
機(jī)網(wǎng)絡(luò)、分布式處理、數(shù)據(jù)庫、數(shù)據(jù)挖掘、數(shù)字圖書館、自然語言處理等多領(lǐng)域的理論和
技術(shù),所以具有綜合性和挑戰(zhàn)性。又由于搜索引擎有大量的用戶,有很好的經(jīng)濟(jì)價(jià)值,所
以引起了世界各國計(jì)算機(jī)科學(xué)界和信息產(chǎn)業(yè)界的高度關(guān)注,目前的研究、開發(fā)十分活躍,
并出現(xiàn)了很多值得注意的動向。
1.十分注意提高信息查詢結(jié)果的精度,提高檢索的有效性 用戶在搜索引擎上進(jìn)行
信息查詢時(shí),并不十分關(guān)注返回結(jié)果的多少,而是看結(jié)果是否和自己的需求吻合。對于一
個(gè)查詢,傳統(tǒng)的搜索引擎動輒返回幾十萬、幾百萬篇文檔,用戶不得不在結(jié)果中篩選。解
決查詢結(jié)果過多的現(xiàn)象目前出現(xiàn)了幾種方法:一是通過各種方法獲得用戶沒有在查詢語句
中表達(dá)出來的真正用途,包括使用智能代理跟蹤用戶檢索行為,分析用戶模型;使用相關(guān)
度反饋機(jī)制,使用戶告訴搜索引擎哪些文檔和自己的需求相關(guān)(及其相關(guān)的程度),哪些
不相關(guān),通過多次交互逐步求精。二是用正文分類(Text Categorization)技術(shù)將結(jié)果分
類,使用可視化技術(shù)顯示分類結(jié)構(gòu),用戶可以只瀏覽自己感興趣的類別。三是進(jìn)行站點(diǎn)類
聚或內(nèi)容類聚,減少信息的總量。
2.基于智能代理的信息過濾和個(gè)性化服務(wù)
信息智能代理是另外一種利用互聯(lián)網(wǎng)信息的機(jī)制。它使用自動獲得的領(lǐng)域模型(如We
b知識、信息處理、與用戶興趣相關(guān)的信息資源、領(lǐng)域組織結(jié)構(gòu))、用戶模型(如用戶背景
、興趣、行為、風(fēng)格)知識進(jìn)行信息搜集、索引、過濾(包括興趣過濾和不良信息過濾)
,并自動地將用戶感興趣的、對用戶有用的信息提交給用戶。智能代理具有不斷學(xué)習(xí)、適
應(yīng)信息和用戶興趣動態(tài)變化的能力,從而提供個(gè)性化的服務(wù)。智能代理可以在用戶端進(jìn)行
,也可以在服務(wù)器端運(yùn)行。
3.采用分布式體系結(jié)構(gòu)提高系統(tǒng)規(guī)模和性能
搜索引擎的實(shí)現(xiàn)可以采用集中式體系結(jié)構(gòu)和分布式體系結(jié)構(gòu),兩種方法各有千秋。但
當(dāng)系統(tǒng)規(guī)模到達(dá)一定程度(如網(wǎng)頁數(shù)達(dá)到億級)時(shí),必然要采用某種分布式方法,以提高
系統(tǒng)性能。搜索引擎的各個(gè)組成部分,除了用戶接口之外,都可以進(jìn)行分布:搜索器可以
在多臺機(jī)器上相互合作、相互分工進(jìn)行信息發(fā)現(xiàn),以提高信息發(fā)現(xiàn)和更新速度;索引器可
以將索引分布在不同的機(jī)器上,以減小索引對機(jī)器的要求;檢索器可以在不同的機(jī)器上.
以上就是關(guān)于門戶搜索引擎相關(guān)問題的回答。希望能幫到你,如有更多相關(guān)問題,您也可以聯(lián)系我們的客服進(jìn)行咨詢,客服也會為您講解更多精彩的知識和內(nèi)容。
推薦閱讀:
城市門戶大道景觀設(shè)計(jì)(城市門戶大道景觀設(shè)計(jì)圖)
德清門戶景觀設(shè)計(jì)公司(德清門戶景觀設(shè)計(jì)公司招聘)
崇州私家庭院景觀設(shè)計(jì)(崇州私家庭院景觀設(shè)計(jì)招聘)
浙江省比較有名的設(shè)計(jì)院(浙江省比較好的設(shè)計(jì)院)
猜你喜歡
電子商務(wù)專業(yè)是什么大類(電子商務(wù)專業(yè)是什么大類學(xué)科)
電子商務(wù)物流構(gòu)成要素包括(電子商務(wù)物流構(gòu)成要素包括什么)
店鋪的管理運(yùn)營包括什么(店鋪的管理運(yùn)營包括什么項(xiàng)目)
電商和會計(jì)哪個(gè)難度更高(電商和會計(jì)哪個(gè)難度更高一些)
電子商務(wù)對口專業(yè)有哪些(電子商務(wù)說白了就是干什么的)
二十四個(gè)關(guān)鍵詞你爸爸推文(二十四個(gè)關(guān)鍵詞你爸爸推文)