天堂啪啪 I 欧美一区二区三区日本 I 亚洲资源在线播放 I 午夜色综合 I 岛国a级影片 I 美女看a上一区 I 美女张开腿让人捅 I 欧美亚一区 I 99国产网站 I av超碰在线 I 亚色在线视频 I 亚洲成av人片高潮喷水 I 黄色91免费版 I 日韩伦理片 I 精品三级毛片 I 青青草短视频 I 香蕉视频一级 I 91精品99 I 91黄色高清视频 I 黄色网页免费进入 I 欧美一区三区四区 I 欧美影音 I 亚洲色图60p I 中国少妇大p毛茸茸 I 日日av拍夜夜添久久免费老牛 I 远古野人粗壮h灌满3p I japanxxxxhd videos日韩 I 日韩 国产 变态另类 欧美 I 色吧亚洲视频 I 亚洲岛国片 I www.一区二区 I 亚洲一区二区图片 I 在线免费观看毛片 I 精品国产一区a I 日韩av午夜在线观看 I 熟女人妇 成熟妇女系列视频 I 高清在线谜片101 I 日韩av视屏 I 少爷和秒书双男主漫画免费观看 I 一个人看的免费视频www中文字幕 I 欧美亚洲精品suv一区 I 500福利精品导航爱站网 I 成片免费网站 I 国产在线韩国 I 亚洲999 I 四虎永久在线精品视频免费观看 I 国产精品久久自在自线 I 欧美亚洲一级 I 久久精品国产99久久久 I 91精品免费视频 I 一级香蕉视频在线看 I 亚洲一级在线观看 I 金梅瓶在线观看 I 性另类交性另类交 I 欧美一级片免费在线观看 I 黄色特级网站 I 中文字幕人妻熟在线影院 I 靠逼视频免费网站 I 黑人伦理 I 亚洲一区动漫 I 免费福利视频一区二区三区 I 91日日夜夜 I 男人和女人日皮的视频

通常對于文本信息之間得相關(guān)性得計算都是采用向量的辦法，我在以前的PPT里曾經(jīng)提到過。然而對于文本信息更深層次的分析不能單純從字面上分析一篇文章的關(guān)鍵詞，更重要的是它隱含的擴展的意義。

傳統(tǒng)的關(guān)于計算文本相關(guān)度和【網(wǎng)頁和查詢的相關(guān)性】的計算都是采用匹配的方式進行的，然而這只能是基于字面意義上的統(tǒng)計計算。這里介紹的做法是采用關(guān)鍵詞相關(guān)性擴展的做法從而得到更加精確的相關(guān)度計算。

例子：
文章 A: 談?wù)摰氖谴髮W(xué)教育，最高頻的關(guān)鍵詞是：學(xué)生[3]，學(xué)習(xí)[2]，大學(xué)[2]
文章 B: 談?wù)摰氖瞧胀ń逃?，最高頻的關(guān)鍵詞是：教育[5]，教師[1]，進修[1]
[]里是相對的權(quán)重，可以理解成 TF*IDF

根據(jù)傳統(tǒng)的相關(guān)性計算，我們會得到如下的結(jié)果：

1. 文章A 與 文章B 不相關(guān)
2. 查詢 學(xué)生，學(xué)習(xí)，大學(xué)只能返回文章A，不能返回文章B
3. 查詢 教育，教師，進修只能返回文章B，不能返回文章A

分析：
這個顯然是有一定的問題的，問題的出現(xiàn)在于我們通常將“字面”的意思做為分析的來源而且依靠和僅僅依靠這些“字面”的關(guān)鍵詞做為文章相關(guān)性和查詢相關(guān)性判斷的唯一要素。

如何避免？
我在以前的文章中提到過【關(guān)鍵詞相關(guān)度】的概念，舉例說明：
當出現(xiàn)：｛學(xué)習(xí)｝這個詞匯的時候，真實的表達的意義往往是這樣的：
｛W1*學(xué)習(xí)，W2*教育，W3*教師，W4*大學(xué)。。。。。。｝
其中W1，W2...是學(xué)習(xí)和相關(guān)詞匯的相關(guān)權(quán)重。

基于這樣一個矩陣，我們就能夠?qū)⒁粋€詞擴展成為一組詞匯，因而也同時可以將文章所對應(yīng)的向量擴展成一個更多詞匯的集合。

這里的計算需廣州網(wǎng)站設(shè)計要一個完整的相關(guān)度矩陣:M

M(i,j) = {關(guān)鍵詞i,j的相關(guān)度}
而兩篇文章的相關(guān)度的計算，也由簡單的
R= Sigma Vi*Vi
變?yōu)?br>R= Sigma Vi*M(i,j)*Vj

查詢關(guān)鍵詞和文章的相關(guān)度也由簡單的
R(i)=TF(i)*IDF(i)
變?yōu)?br>R(i)=Sigma TF(j)*IDF(j)*M(i,j)

下面碰到一個核心問題就是：關(guān)鍵詞之間的相關(guān)度如何計算？
例如：學(xué)校和學(xué)生的相關(guān)度是多少？
計算方法：
假設(shè)一個文章集合 {C}，總文章數(shù)目為N，其中含有單詞A的文章總數(shù)為Na，含有單詞B的文章總數(shù)是Nb，含有｛A+B｝的文章總數(shù)是 Nab，那么相關(guān)性這么計算

CorrAB= Nab/(Na+Nb-Nab)-(Na*Nb)/(N*N)

本計算中可能會得到負相關(guān)，如果考慮到Na,Nb都是小量，可以忽略，那么

CorrAB= Nab/(Na+Nb-Nab)

至此，要計算相關(guān)度之間的全部要素都獲得了。

思考，那么到底 學(xué)校 和學(xué)生 之間的相關(guān)度是多少呢？
我們利用google來回答這個問題吧：

約有91,700,000項符合學(xué)校的查詢結(jié)果
約有88,200,000項符合學(xué)生的查詢結(jié)果
約有48,900,000項符合學(xué)廣州網(wǎng)站設(shè)計生 學(xué)校的查詢結(jié)果

Corr{學(xué)校，學(xué)生}＝48,900,000/(91,700,000+88,200,000-48,900,000)=0.37

這個原理我以前應(yīng)用在了計算【網(wǎng)頁信噪比】上，和網(wǎng)頁信噪比一起成為衡量一個網(wǎng)頁的關(guān)鍵詞的核心算法。
這也就是為什么6e的網(wǎng)頁信噪比能夠不依靠網(wǎng)頁上現(xiàn)有的關(guān)鍵詞而準確的判斷網(wǎng)頁的分類和相關(guān)度，是因為除了TF和IDF之外，我們能夠從已有的文本集合里學(xué)到更多的“知識”。

那么百度和google的相關(guān)度應(yīng)該不難計算了:

利用 google計算得到：2,950,000/(61,800,000+6,370,000-2,950,000)=0.03

利用 baidu計算得到：2,760,000/(21,700,000+12,200,000-2,760,000)=0.08

看來基本上相關(guān)度小于10%。