MemoryError: Unable to allocate array with shape (430949, 430949) and data type float64

系统环境

  1. Ubuntu 18.04
  2. Python 3.6

错误信息

MemoryError: Unable to allocate array with shape (430949, 430949) and data type float64

原因分析

据传 [1] 是因为触发了系统的 overcommit handing 模式。

解决办法

1.首先检查系统的内存过载处理模式
$ cat /proc/sys/vm/overcommit_memory
2.然后切换到 root 用户(否则权限不够)
$ sudo passwd root
    然后输入当前用户密码,再给 root 设定一个新密码,再切换到 root:
    $su root
    你会发现$变成了#
3.现在我们拥有了 root 权限,输入下面的命令将内存过载处理模式更改为1:
$ echo 1 > /proc/sys/vm/overcommit_memory
然后不出意外的话,就可以成功创建该矩阵啦!

 

你可能感兴趣的:(kaggle)