如何在超级计算机中升级Python库

Question

我正在使用Tinaroo（昆士兰大学）超级计算机

当我调用运行我的代码时使用

qsub 70my_01_140239.sh

我收到此错误

autosklearn.util.dependencies.IncorrectPackageVersionError: found 'dask' version 2021.11.2 but requires dask version >=2021.12

显然我需要升级 dask 库

但我无权升级它

这是

qsub 70my_01_140239.sh

的实际代码

#!/bin/bash
#
#PBS -A qris-jcu
#
#PBS -l select=1:ncpus=24:mem=120GB
#PBS -l walltime=06:00:00
#PBS -N 70my_01_140239


shopt -s expand_aliases
source /etc/profile.d/modules.sh
cd ${PBS_O_WORKDIR}
module load python
module load anaconda
python 70myb.py 8000 3 "E&V" 2 1 15 10000 120 24

我尝试在

70my_01_140239.sh

中添加 conda install dask 但它不起作用，因为我没有升级库的权限。

有谁知道如何在超级计算机中升级Python库

Answer 1

我建议在这里使用miniconda，因为你可以更好地控制你的Python环境，并且还能够在你认为合适的时候（在合理范围内）进行升级，而不必依赖系统的构建。