关于AutoDL平台系统内盘不足支撑起模型文件大小的解决方法

[LuoFanA595]

众所周知AutoDL平台的系统盘不可以选择扩容，然初次train需要transformers库预下载书生LLM至.cache缓存文件下，然.cache文件目录在系统盘上，所以LLM文件过大导致系统盘不足，从而导致模型下载中断报错。解决方法如下：

1. 删除缓存文件
   执行命令：rm -rf ~/.cache

2. 将数据盘文件夹路径与系统盘上.cache文件建立软连接（这样就可以将数据盘路径/root/autodl-tmp下的内容引入到~/.cache中，从而更好地管理缓存文件，模型文件则会下载至/root/autodl-tmp路径下）
   执行命令：ln -s /root/autodl-tmp ~/.cache

3. 验证软连接是否成功（如未出现以下内容则重新操作步骤1、2）
   依次执行命令：cd ~ 和 ll 有如下显示则说明软连接建立成功
   .cache -> /root/autodl-tmp/

4. 以上操作结束后就可以开始train
   xtuner train internlm_20b_qlora_oasst1_512_e3