在不同的 linux 帐户上使用 ipython:命令卡住
Using ipython on a different linux account: command gets stuck
我在一个 linux 帐户上安装了 miniconda3
,然后我创建了一个环境 py37
,安装了所有需要的包并能够从第二个帐户启动 ipython
帐户并导入我要导入的包:hail
。为此,我将 miniconda3
文件夹中的所有权限更改为 777
。不知何故,命令 when 运行 在第二个帐户上卡住了,但是在安装了 miniconda3
的初始帐户上执行时,它 运行s 成功:
import hail as hl
---> mt = hl.balding_nichols_model(n_populations=3, n_samples=50, n_variants=100)
mt.count()
中间的命令卡住了。没有错误,只是没有返回。当我在原账号上运行hl.balding_nichols_model
时,它也给我一个警告(但是运行成功了,结果在mt.count()
):
WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
问题是,在命令失败的另一个帐户上,我安装了 Hadoop。所以,我有点怀疑它在某种程度上是相关的。我完全被困住了,所以会很感激任何建议。我需要这样做 - 在一个帐户上安装 miniconda3
,然后从另一个帐户访问它 - 因为在第一个帐户上我有数 TB 的免费数据,但在第二个帐户上 - 4Gb 而且不能再多了不幸的是扩大了。使用 miniconda3
我会很快超越限制。
有关实际软件的其他信息可在此处找到:
https://hail.is/docs/0.2/getting_started.html#installation
Update
我在节点上的conda
上单独安装了python37
,不知何故它也不起作用,所以这不是权限问题,现在问题仅限于那个特定的linux 帐户。我安装了 spark2.4
但这并没有解决问题。因此,python 脚本中的中间命令被卡住了,我什至不知道如何获得 log
输出,那里发生了什么。
'stuck' 问题的答案可以在这里找到:
https://discuss.hail.is/t/spark-2-4-4-gets-stuck-in-initialization-phase/1178
我在 Hail 论坛上提问,然后在我们解决问题后在那里回复了我自己。原来是 space 问题:hadoop 和 spark 当你没有足够的 space 在您正在处理的分区上。
我在一个 linux 帐户上安装了 miniconda3
,然后我创建了一个环境 py37
,安装了所有需要的包并能够从第二个帐户启动 ipython
帐户并导入我要导入的包:hail
。为此,我将 miniconda3
文件夹中的所有权限更改为 777
。不知何故,命令 when 运行 在第二个帐户上卡住了,但是在安装了 miniconda3
的初始帐户上执行时,它 运行s 成功:
import hail as hl
---> mt = hl.balding_nichols_model(n_populations=3, n_samples=50, n_variants=100)
mt.count()
中间的命令卡住了。没有错误,只是没有返回。当我在原账号上运行hl.balding_nichols_model
时,它也给我一个警告(但是运行成功了,结果在mt.count()
):
WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
问题是,在命令失败的另一个帐户上,我安装了 Hadoop。所以,我有点怀疑它在某种程度上是相关的。我完全被困住了,所以会很感激任何建议。我需要这样做 - 在一个帐户上安装 miniconda3
,然后从另一个帐户访问它 - 因为在第一个帐户上我有数 TB 的免费数据,但在第二个帐户上 - 4Gb 而且不能再多了不幸的是扩大了。使用 miniconda3
我会很快超越限制。
有关实际软件的其他信息可在此处找到:
https://hail.is/docs/0.2/getting_started.html#installation
Update
我在节点上的conda
上单独安装了python37
,不知何故它也不起作用,所以这不是权限问题,现在问题仅限于那个特定的linux 帐户。我安装了 spark2.4
但这并没有解决问题。因此,python 脚本中的中间命令被卡住了,我什至不知道如何获得 log
输出,那里发生了什么。
'stuck' 问题的答案可以在这里找到:
https://discuss.hail.is/t/spark-2-4-4-gets-stuck-in-initialization-phase/1178
我在 Hail 论坛上提问,然后在我们解决问题后在那里回复了我自己。原来是 space 问题:hadoop 和 spark 当你没有足够的 space 在您正在处理的分区上。