python 分词

作者：°妮可罗宾发布日期:2025-12-19 浏览:39

# 使用 jieba 分词库进行中文分词的示例代码

import jieba

# 示例文本
text = "我喜欢用Python进行自然语言处理"

# 使用 jieba 进行分词
seg_list = jieba.cut(text, cut_all=False)

# 将分词结果转换为列表并打印
print("精确模式:", "/ ".join(seg_list))

# 如果需要使用全模式分词，可以将 cut_all 参数设置为 True
seg_list_full = jieba.cut(text, cut_all=True)
print("全模式:", "/ ".join(seg_list_full))

解释说明：

导入 jieba 库：jieba 是一个非常流行的中文分词库，支持多种分词模式。
定义文本：text 变量中存储了我们要进行分词的中文句子。
分词操作：jieba.cut() 函数用于对文本进行分词。cut_all=False 表示使用精确模式，返回最有可能的分词结果；cut_all=True 表示使用全模式，尝试进行更多的分词组合。
输出结果：使用 join() 方法将分词结果拼接成字符串，并打印出来。

如果你没有安装 jieba，可以通过以下命令安装：

pip install jieba

上一篇：split python

下一篇：python读取json并解析