R运行大数据的过程中遇到的问题:不能有负长度矢量


解决办法:

  只能通过一些trick来减小生成的中间矩阵的大小。比如我所遇到的问题是:

我要运行(W%*%H%*%t(H)) 这句话,(W的规模是5000000*10,而H的规模是10*100000)

解释执行W%*%H的时候报错:不能有负长度矢量。

坑爹的中文报错,google发现,和中文有关的R文档、记录真是少得可怜,终于通过英文“negative length vectors are not allowed”这句话,

看到老外们的解释,才知道了,简而言之就是因为数据规模太大,而R系统不允许生成生成数据规模超过2^31的结果。

  改成(W%*%(H%*%t(H)))后,问题就解决了。。。


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM