词形还原
-
NMF vs. LDA: 谁是文本分析的王者？优缺点深度剖析
嘿，小伙伴们，咱们今天来聊点技术干货，不过别担心，我会用大白话给你讲明白。咱们今天要 PK 的是文本分析领域里的两位大佬——NMF（非负矩阵分解）和 LDA（潜在狄利克雷分配）。这两个家伙经常被用来从海量文本数据中挖宝，比如新闻文章、用户...
-
KL散度在NMF中的应用: 文本主题提取的实践
嘿，技术爱好者们，大家好！今天我们来聊聊一个在机器学习领域挺有意思的话题——KL散度在非负矩阵分解（NMF）中的应用，以及如何用它来玩转文本主题提取。准备好你的咖啡，让我们开始吧！ 1. NMF是什么？ 首先，我们得先搞清楚NMF...
-
文本聚类前的“ சுத்தம்”工作：预处理步骤及影响
“喂，哥们儿，你知道文本聚类是啥不？” “听起来挺玄乎，大概就是把一堆文字按某种相似度归堆儿吧？” “没错！但你知道吗，在让机器‘归堆儿’之前，咱们得先给这些文字做个‘大扫除’，也就是文本预处理。这就像炒菜前得洗菜切菜一样，是至关...
-
中文词形还原方法大揭秘：规则、词典与代码实战
“词形还原”这个词，听起来有点儿学术，但其实它就在我们身边。想想你平时用搜索引擎的时候，输入“苹果的功效”和“苹果功效”，得到的结果是不是差不多？这就是词形还原在起作用。简单来说，词形还原就是把一个词的不同形态，比如“吃”、“吃了”、“正...
-
中文词形还原告别“变形记”：深度学习模型大比拼（RNN/LSTM/Transformer）
“哎呀，这词儿咋又变样了？” 你是不是也经常在处理中文文本时，被各种“变形”的词汇搞得晕头转向？别担心，今天咱们就来聊聊中文 NLP 的一项关键技术—— 词形还原 ，帮你彻底告别中文词汇的“变形记”！ 1. 啥是词形还原？跟你有啥关系...
-
中文词形还原那些事儿：古文、网络用语和专业领域的处理之道
不知道你有没有遇到过这种情况：读古文的时候，明明每个字都认识，连在一起就不知道啥意思了？刷微博、逛论坛的时候，满屏的“yyds”、“zqsg”，看得一脸懵？或者，在处理一些专业领域的文本时，各种缩写、术语满天飞，让人头大？ 其实，这背...
-
古文通假字、异体字怎么破？一文教你辨识还原！
“哎，这古文里头，一会儿‘说’通‘悦’，一会儿‘女’通‘汝’，还有各种奇奇怪怪的写法，看得我头都大了！” 相信不少小伙伴在读古文的时候，都会遇到这样的困扰。别急，今天咱们就来好好聊聊古文中的通假字和异体字，帮你扫清阅读障碍，轻松读懂古...
