qwen2Vl+vllm框架如何添加视频内容

[zhangzhiyuan303]

QWen2VL是支持这个type调用视频，但是我用vllm框架+qwen2vl 7b 权重，那边返回报错。
{'object': 'error', 'message': 'Unknown part type: video_url', 'type': 'BadRequestError', 'param': None, 'code': 400}
{'object': 'error', 'message': 'Unknown part type: video', 'type': 'BadRequestError', 'param': None, 'code': 400}
messages = [
{
"role": "user",
"content": [
{
"type": "video",
"video": [
"file:///path/to/frame1.jpg",
"file:///path/to/frame2.jpg",
"file:///path/to/frame3.jpg",
"file:///path/to/frame4.jpg",
],
},
{"type": "text", "text": "Describe this video."},
],
}
]

[Wiselnn570]

@zhangzhiyuan303 我也遇到了同样的问题，请问解决了吗

[DarkLight1337]

vLLM現在還不支持file:///視頻，請在vLLM那邊開一個新的請求。

已經透過 vllm-project/vllm#11620 支持file:///視頻。