[Bug]: (VllmWorkerProcess pid=3253) 警告 08-13 11:31:37 shm_broadcast.py:386] 在60秒内未找到可用的块

7fhtutme  于 2个月前  发布在  其他
关注(0)|答案(1)|浏览(34)

当前环境

vllm已更新至最新版本,但出现了以下问题:(VllmWorkerProcess pid=3253) 警告 08-13 11:31:37 shm_broadcast.py:386] 在60秒内未找到可用的块,任务被暂停,等待其他操作,似乎无法正常工作。

🐛 描述bug

(VllmWorkerProcess pid=3253) 警告 08-13 11:31:37 shm_broadcast.py:386] 在60秒内未找到可用的块。

xvw2m8pv

xvw2m8pv1#

这个错误通常是因为vLLM引擎在某个地方挂起,导致其他进程无法从vLLM引擎获取新的输入。请按照https://docs.vllm.ai/en/latest/getting_started/debugging.html中的调试提示来确定vLLM引擎挂起的位置,这样我们才能更好地帮助您。

相关问题