|
|
要實現自動獲取關鍵詞的功能，大概可以分成三步
1，通過分詞算法將標題和內容分別進行分割，提取出關鍵詞和頻度。當前主要的兩個算法是中科院的ICTCLAS和隱馬爾可夫模型。但這兩個都太高端，有一定的門檻，且都是只支持C++/Java。基于php的當前有兩個是值得推薦的PSCWS和HTTPCWS。 SCWS于2008-03-08發布1.0.0 正式版，到現在最新版本已經到了1.0.4。PSCWS是它的php版。而HTTPCWS是張宴開發的，之前叫phpCWS。phpCWS 先使用“ICTCLAS 3.0 共享版中文分詞算法”的API進行初次分詞處理，再使用自行編寫的“逆向最大匹配算法”對分詞和進行詞語合并處理，并增加標點符號過濾功能，得出分詞結果。不過很遺憾目前僅支持Linux系統，尚未移植到win平臺上。
2，將提取結果與現有詞庫進行比較，處理，去除無用的詞得到最符合規則的關鍵詞。這里主要就是要看詞庫了，我們可以自己定義詞庫，也可以使用現有的成熟詞庫。比如新浪和網易博客都有這個功能,。他們分詞應該有不錯的詞庫，因為他們都是大網站，而我呢，區區一個小程序員，不可能搞到什么權威的詞庫，所以只能從現有的開源程序上入手，看看他們的詞庫。
3，在處理后的提取結果中選擇適當的作為最終的關鍵詞，得到最符合當前內容的關鍵詞，在這個階段就是具體情況具體分析了，無論如何也不可能達到人的那種智能化。最多是。當前php類CMS都自有自己的提取關鍵詞系統。
目前在網絡上流傳最廣的是DEDECMS的分詞源碼，我做了測試，發現相當的呆，效果很不好。它先設置一個關鍵詞長度，確定獲取關鍵詞的數量，然后取詞，它認為標題分好的詞就是所需關鍵詞，在加上從正文中讀取關鍵詞只到達到這個所設置的長度，就是最終關鍵詞了。另外類似“我們”等無意義的詞也沒有去除掉提取并被列為關鍵詞的頻率太高，甚至有時候還會把空格的HTML提出來做為關鍵詞，亟待改進。不過如果作為輔助功能，它已經很好了。而discuz的稍微好一些，但是discuz并沒有提供源碼，只是提供了一個在線api。
而dede的分詞也有好幾個版本，最好的應該是最新版的吧，出現頻率什么都有了，下面就以dede5.7的分詞和discuz的api的結果對比下
測試例子：
$title="THINKphp官方即將停止對2.0版本的支持";
$body="了更好地做好Thinkphp框架的開發、維護和支持工作，官方宣布從2012年5月1日起s對2.0及之前版本的維護和支持，為了節能低碳考慮，同時也取消官網的相應版本和文檔下載。
就此緬懷那些年，曾經一起開發的Thinkphp版本吧！
關于Thinkphp 2.0版本
Thinkphp誕生于2006年，致力于WEB應用的快速開發，其2.0版本發布于2009年10月1日 ，在之前的1.*版本上完成新的重構和飛躍，當時是一次劃時代的版本，為新版奠定了基礎，同時也積累了較多的用戶群和網站，隨著框架的快速更新，和新版2.1、2.2和3.0版本的陸續發布，預示著Thinkphp的3.0時代到來了，2.0的生命周期宣告結束。但基本上2.0的很多功能都延續或者完善到2.1版本中了，從2.0版本升級到2.1和2.2版本也相對輕松。2.2版本是2.*版本的最終版本，不再更新功能，僅做BUG修復。";
一、dede分詞
將結果排序后如下
主站蜘蛛池模板： 国产成人精品视频频 | 麻豆免费观看高清完整视频 | 2018久久视频在线视频观看 | 亚洲人成www在线播放 | 国产精品亚洲一区二区三区久久 | 亚洲精品久久久久久偷窥 | 四虎亚洲中文字幕永久在线 | 草莓视频cm.888tw | 一本道手机无码在线看 | 国产成人精品视频免费大全 | 学生小泬无遮挡女HD | 色欲人妻AAAAAAA无码 | 国产色精品久久人妻无码看片软件 | 亚洲精品嫩草研究院久久 | 久久青青草原综合伊人 | 办公室里呻吟的丰满老师电影 | 麻豆国产自制在线观看 | 国精产品一区二区三区 | 亚洲人成影院在线播放 | 100国产精品人妻无码 | 国产精品 中文字幕 亚洲 欧美 | 伊人久久综合热青草 | 在线不卡日本v二区到六区 在线不卡日本v二区 | 无修肉动漫在线观看影片 | 打开双腿狠狠蹂躏蜜桃臀 | 古代又黄又肉到湿的爽文 | 人人超碰97caoporen国产 | 日韩亚洲不卡在线视频 | 亚洲国产三级在线观看 | 亚洲XXX午休国产熟女屁 | 国产情侣真实露脸在线 | 欧美尤物射精集锦 | 亚洲免费在线 | 6080yy 久久 亚洲 日本 | 亚洲 成人网 | 涩涩999| 伊人久久五月丁婷婷 | 久青草国产97香蕉在线视频 | 色四房播播| 伊人久久大香线蕉观看 | 亚洲一日韩欧美中文字幕在线 |