楼主: 万人往LVR
11867 13

[问答] 如何解决内存不够的问题? [推广有奖]

11
jack_1988 学生认证  发表于 2016-5-24 09:30:03
文本矩阵真的好大呀,楼主有什么好的方法?

12
万人往LVR 在职认证  发表于 2016-5-24 09:59:20
jack_1988 发表于 2016-5-24 09:30
文本矩阵真的好大呀,楼主有什么好的方法?
可以考虑设置停用词、删除一些无用词、根据词频或者TF-IDF进行筛选,减少词语数量。
如果是简单的算法,可以不用tm的矩阵,自己建立矩阵,自己写算法的代码,普通的矩阵会小一些。

13
soccy 发表于 2016-5-24 11:55:23
SparkR是个好办法

14
myohmy88 发表于 2017-2-2 22:32:44
想问楼主,最后问题是怎么解决的?

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群
GMT+8, 2025-12-31 03:01