資源簡介
格式: 序號 單詞 詞頻 詞性
詞性請參考:http://ictclas.org/ictclas_docs_003.html
http://hi.baidu.com/drkevinzhang/blog/category/ictclas%B7%D6%B4%CA/index/1
自己做畢設(shè)整理的分詞詞庫,使用中科院的標(biāo)注集合北大標(biāo)注集,也就是兩種標(biāo)注混合用的。每個詞一個詞性,也有詞頻。由于使用多個詞典整合的,詞頻不是特別準(zhǔn)。但是能滿足一般的需求。
容量為29.8w.
包含了三級地名、名勝、重要山川河流、一萬左右的成語。由于一部分詞來自搜狗互聯(lián)網(wǎng)詞庫,有些詞明顯是拼寫時常連著拼而不是詞。對詞庫要求高的用戶需要另尋良方。
推薦一個對我做分詞幫助很大的網(wǎng)站 www.52nlp.cn
代碼片段和文件信息
評論
共有 條評論