课程内容
我有话说
1/1 Python Jieba 中文分词工具
面向中文文本处理的入门需求,介绍一款使用广泛的分词工具,解决中文没有空格分隔、难以直接切词的痛点。文章讲解几种不同粒度的切分模式各自适合什么场景,如何加入自定义词典修正专名,并顺带提及词性标注与关键词抽取等延伸能力。读完能把一段中文顺利切成可供后续分析的词语序列,为各类文本任务打好预处理基础。
本课程通过分词、词性标注与关键词抽取示例讲解 jieba,解决中文无空格难处理,帮助学习者掌握分词与关键词提取,提升预处理能力。
面向中文文本处理的入门需求,介绍一款使用广泛的分词工具,解决中文没有空格分隔、难以直接切词的痛点。文章讲解几种不同粒度的切分模式各自适合什么场景,如何加入自定义词典修正专名,并顺带提及词性标注与关键词抽取等延伸能力。读完能把一段中文顺利切成可供后续分析的词语序列,为各类文本任务打好预处理基础。
本课程通过解释器、包管理与虚拟环境配置,讲解 Python 隔离环境搭建,解决多版本依赖冲突,帮助学习者搭建可复现开发环境。
本课程通过解释器加锁剖析,讲解 Python GIL 机制与影响,解决多线程多进程选型混淆,帮助学习者按 IO/CPU 密集选型。
本课程通过中文语料示例,讲解词袋模型分词建词表与词频TF-IDF向量化,解决文本无法直接被算法处理,帮助学习者完成文本特征工程。