Qwen-Agent icon indicating copy to clipboard operation
Qwen-Agent copied to clipboard

qwenvl_oai 无法兼容 gpt4o 多模态功能

Open jameslian87v5 opened this issue 1 year ago • 2 comments

按道理讲 oai 应该能支持多模态,然后不行。然后使用qwen_oai 仍然支持多模态功能 ,在这个问题上困扰很久才发现 是不支持的

jameslian87v5 avatar Nov 08 '24 12:11 jameslian87v5

您好,如果想使用vl模型的oai接口,请在llm参数中设置'model_type': 'qwenvl_oai',qwenvl_oai是可以调用vl的。不知您说的gpt4o 多模态功能具体是指什么功能呢?

tuhahaha avatar Nov 22 '24 08:11 tuhahaha

@tuhahaha 国外的模型,如gpt、claude、gemini都是用多模态模型作为基础模型,例如gpt-4o系列,claud系列,gemini1.5系列。 但是国内的模型似乎都是把LLM和VLM做了分离,请问这是为什么呢。

Halflifefa avatar Dec 04 '24 09:12 Halflifefa