xtuner微调llama模型，出现异常情况退出 #395

New Issue

12432450368cs · 2024-11-25T07:47:45+08:00

12432450368cs commented

2024-11-25 07:47:45 +08:00

1、xtuner微调Llama-2-7b-chat-hf，数据集为tatsu-lab-alpaca，配置文件为llama2_7b_chat_qlora_alpaca_e3_copy，
在启动xtuner train llama2_7b_chat_qlora_alpaca_e3_copy.py指令时，出现异常警告退出微调，未查找到原因(第二个warning说是xtuner语法错误，没看出来具体是哪里的问题)。
2、文件都是下载到autodl-tmp文件夹下，为什么显示基本都使用的是系统盘而不是数据盘。

1、xtuner微调Llama-2-7b-chat-hf，数据集为tatsu-lab-alpaca，配置文件为llama2_7b_chat_qlora_alpaca_e3_copy，在启动xtuner train llama2_7b_chat_qlora_alpaca_e3_copy.py指令时，出现异常警告退出微调，未查找到原因(第二个warning说是xtuner语法错误，没看出来具体是哪里的问题)。 2、文件都是下载到autodl-tmp文件夹下，为什么显示基本都使用的是系统盘而不是数据盘。

image.png

97 KiB

2d4d9215dac9732c2b48115ebc1f1a0.png

69 KiB

7753a7abcd0e63f9360cecdc6532e55.png

196 KiB

64dde90b03b111693378a959cd40fc9.png

217 KiB

89a168d69ed700d8030b6937c071d88.png

248 KiB

21970855250cs commented

2024-11-25 22:54:52 +08:00

问题1 应该是安装上有点问题，可以参考下这个mmdetection issue
问题2可以用du -h /root/autodl-tmp/ --max-depth=1看下实际占用存储的文件有哪些。

问题1 应该是安装上有点问题，可以参考下这个[mmdetection issue](https://github.com/open-mmlab/mmdetection/issues/12008) 问题2可以用`du -h /root/autodl-tmp/ --max-depth=1`看下实际占用存储的文件有哪些。

bruce commented

2024-12-01 17:16:18 +08:00

老师，参考了那篇文章，环境版本更改后，还是没有起到作用，还有其他办法吗