llamafactory大模型微调单卡转多卡出现SignalException: Process 3232810 got signal: 1错误

问题分析：nohup后台不灵光，如果非正常exit终端的话，会将Signal信号送给进程，最终导致全部中止。我是用的llamafactory微调，我的大模型微调之前使用的单卡，切换到双卡并行训练后，首先出现报错。这个问题解决后命令启动后正常运行，但一个小时内总是会出现，中断错误。是退出终端不马上关，使用exit退出;这样就算断开连接，命令也会继续运行。本人尝试第一种方法，问题解决。解决方案查看我的

whywhyhh

882人浏览 · 2024-10-31 16:23:42

whywhyhh · 2024-10-31 16:23:42 发布

错误内容如下：
我是用的llamafactory微调，我的大模型微调之前使用的单卡，切换到双卡并行训练后，首先出现报错
llamafactory单卡转多卡出现ModuleNotFoundError: No module named ‘llamafactory‘问题解决方案查看我的博客
这个问题解决后命令启动后正常运行，但一个小时内总是会出现，中断错误
torch.distributed.elastic.multiprocessing.api.SignalException: Process 3232810 got signal: 1
在这里插入图片描述
问题分析：nohup后台不灵光，如果非正常exit终端的话，会将Signal信号送给进程，最终导致全部中止。

解决方案：

是退出终端不马上关，使用exit退出;
看试试这个指令。
```
$ nohup bash train.sh > train.log 2>&1 &
$ disown
```
这样就算断开连接，命令也会继续运行。

本人尝试第一种方法，问题解决

AI Agent技术社区

Agent 垂直技术社区，欢迎活跃、内容共建。

更多推荐

【免费下载】 index-tts-vllm：高性能文本转语音解决方案

`index-tts-vllm` 是一款开源的文本转语音（TTS）项目，基于 `index-tts` 进行了优化，通过引入 `vllm` 库重新实现了 GPT 模型的推理过程，大幅提升了推理速度和并发处理能力。项目旨在为开发者提供一个高效、稳定、易于集成的 TTS 解决方案。## 项目技术分析`index-tts-vllm` 采用了以下核心技术：- **vllm 库**：用于加速 GP

AI Agent技术社区

AgentScope示例应用：多智能体对话

在人工智能快速发展的今天，单一智能体已经难以满足复杂任务的需求。想象一下这样的场景：一个项目团队需要讨论技术方案，不同专业背景的成员各抒己见，最终达成共识。这正是多智能体对话要解决的问题——让多个AI智能体像真实团队成员一样进行有意义的交流。AgentScope作为面向开发者的多智能体编程框架，提供了强大的多智能体对话能力。本文将深入探讨如何使用AgentScope构建高效的多智能体对话系统。..