先简单地介绍下什么是TF-IDF(词频-逆文档频率)，它可以反映出语料库中某篇文档中某个词的重要性。假设t表示某个词，d表示一篇文档，则词频TF(t,d)是某个词t在文档d中出现的次数，而文档DF(t,D)是包含词t的文档数目。为了过滤掉常用的词组，如"the" "a" "of" "that",我们使用逆文档频率来度量一个词能提供多少信息的数值： 先简单地介绍下什么是TF-IDF(词频-逆文档频率)，它可以反映出语料库中某篇文档中某个词的重
阅读背景：
Spark机器学习：TF-IDF实现原理
来源：互联网
分享到：
