jieba

jieba 是一个广泛使用的 Python 中文分词库，用于将连续的中文文本切分为有意义的词语序列。它支持精确模式、全模式、搜索引擎模式及基于 PaddlePaddle 的深度学习模式（含词性标注），结合前缀词典、DAG 图构建、动态规划与 HMM/Viterbi 算法实现高效准确的分词；支持繁体中文、自定义词典加载和多种编码输入。适用于文本分析、信息检索、自然语言处理预处理等场景，尤其在搜索系统、舆情分析、内容推荐等需高质量中文切词的业务中被广泛应用。