中文在线分词

功能: 中文在线分词,提取正文核心词,tfidf分词结果。

介绍

功能: 通过开源分词库对正文内容进行分词,提取正文核心词,根据tfidf算法获取正文的有效词。

功能

1 从搜索引擎角度对正文进行分词。
2 获取核心词和tfidf的分词结果。

百度分词算法

1).逐词遍历法。
2).基于字典、词库匹配的分词方法(机械分词法)