用sklearn求大文本的tfidf特征?

依依雨柔
  • 233

clipboard.png
上面的数据是从reuters数据集中取得7303个训练集,用sklearn对其取tfidf特征,得到的结果都是0,这是怎么回事?
clipboard.png

当我从这些数据中取一部分时,对于这些少部分数据能够得到正确的tfidf结果。
clipboard.png

clipboard.png

回复
阅读 4.5k
1 个回答

上代码,可能是你精度太低或者min_count导致的

比如词频是1,总词数1e9,对应的tf就是1e-9,被忽略了。

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
宣传栏