最好选择cuda>=12.3

pytorch版本和本机装的cuda版本一致,我装的是12.4

虚拟环境有要有cudnn和cudatoolkit

pip install packaging ninja
pip install flash-attn --no-build-isolation

安装本地的cuda和cudnn

anaconda虚拟环境中报错:OSError: CUDA_HOME environment variable is not set. Please set it to your CUDA-CSDN博客

Logo

有“AI”的1024 = 2048,欢迎大家加入2048 AI社区

更多推荐