文本预处理

post_img
发布于 2024-11-16
1504 热度 无~ NLP

文本清洗
摘要

文本清洗啊，就好像是你家里有一大堆旧书和笔记，里头有些字看不清了，有些页被涂画得乱七八糟，还有些地方写着无关紧要的东西。你想要把这 …

post_img
发布于 2024-11-16
2274 热度 无~ NLP

词形还原与词干提取
摘要

词形还原 想象一下，你有一个魔法棒，轻轻一挥，就能把各种变形了的单词变回它们最原始、最基本的样子。这个魔法棒就是“词形还原”。 在 …

post_img
发布于 2024-11-16
40 热度 1 评论 NLP

去停用词
摘要

去停用词，这个概念听起来可能有点专业，但其实意思很简单。想象一下，你写了一篇文章或者一段话，里面有很多“的”、“了”、“在”、“是 …

post_img
发布于 2024-11-16
44 热度 1 评论 NLP

分词
摘要

学习内容：分词的原理和算法（如基于规则、基于统计）。 工具：NLTK、jieba、SpaCy。 分词：就像是给一段长长的文字做“拆 …