go中文分詞：cwsharp-go

fm3d 9年前發布 | 13K 次閱讀 Google Go/Golang開發 cwsharp-go

Go中文分詞庫，支持中英文，混合詞組，自定義字典。

安裝&運行

go get github.com/zhengchun/cwsharp-go

go run test.go

說明

  • StandardTokenizer.go - 基于詞典的分詞類

  • BigramTokenizer.go - 二元分詞類

  • StopwordTokenizer.go - 擴展類，提供過濾詞的分詞

  • WordUtil.go - 提供字典管理幫助類

使用幫助可以查看對應的測試用例。

項目主頁：http://www.baiduhome.net/lib/view/home/1439132977754

 本文由用戶 fm3d 自行上傳分享，僅供網友學習交流。所有權歸原作者，若您的權利被侵害，請聯系管理員。
 轉載本站原創文章，請注明出處，并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺，歡迎各類分享！