FastGPT icon indicating copy to clipboard operation
FastGPT copied to clipboard

请教,如何让fastgpt可以识别图片链接?

Open kevinkayhu opened this issue 1 year ago • 7 comments

本地上传的图片可以识别,但是我的场景无法上传,是发送图片链接给gpt。

现在发送链接,他说他无法访问外部链接。头大

WX20240520-105728@2x

kevinkayhu avatar May 20 '24 03:05 kevinkayhu

实际上你可以点击查看详情,你就知道上传图片的转过程了

参考下面例子的格式

https://github.com/labring/FastGPT/blob/8e8ceb74396c4333e63d4a5ef209eb7af928e9b7/packages/service/core/chat/utils.ts#L124

把格式输入会被转换成相应的api参数发送给模型服务

例如 image

nongmo677 avatar May 20 '24 04:05 nongmo677

实际上你可以点击查看详情,你就知道上传图片的转过程了

参考下面例子的格式

https://github.com/labring/FastGPT/blob/8e8ceb74396c4333e63d4a5ef209eb7af928e9b7/packages/service/core/chat/utils.ts#L124

把格式输入会被转换成相应的api参数发送给模型服务

例如 image

我是代码小白,请问可以定制吗?

kevinkayhu avatar May 20 '24 04:05 kevinkayhu

我还有别的需求,方便加你吗?

kevinkayhu avatar May 20 '24 04:05 kevinkayhu

我还有别的需求,方便加你吗?

实际上你可以点击查看详情,你就知道上传图片的转过程了

参考下面例子的格式

https://github.com/labring/FastGPT/blob/8e8ceb74396c4333e63d4a5ef209eb7af928e9b7/packages/service/core/chat/utils.ts#L124

把格式输入会被转换成相应的api参数发送给模型服务

例如 image

你好大佬,能加你吗,求救

ifkd111 avatar May 20 '24 04:05 ifkd111

实际上你可以点击查看详情,你就知道上传图片的转过程了

参考下面例子的格式

https://github.com/labring/FastGPT/blob/8e8ceb74396c4333e63d4a5ef209eb7af928e9b7/packages/service/core/chat/utils.ts#L124

把格式输入会被转换成相应的api参数发送给模型服务

例如 image 123123123123123 求救,大佬加加

ifkd111 avatar May 20 '24 05:05 ifkd111

我还有别的需求,方便加你吗?

建议加群,大家一起讨论,或者遇到问题可以提issue

nongmo677 avatar May 20 '24 05:05 nongmo677

我还有别的需求,方便加你吗?

建议加群,大家一起讨论,或者遇到问题可以提issue 我在第28群啊,我们不在一个群吧。没法一起讨论

kevinkayhu avatar May 20 '24 10:05 kevinkayhu

我还有别的需求,方便加你吗?

建议加群,大家一起讨论,或者遇到问题可以提issue 我在第28群啊,我们不在一个群吧。没法一起讨论

你好,我有个问题想请教你,可以加个联系方式一起学习讨论吗,我的微信号是wxid_dikdogpmpzpm22

swallowMuzi avatar May 31 '24 01:05 swallowMuzi

实际上你可以点击查看详情,你就知道上传图片的转过程了 参考下面例子的格式 https://github.com/labring/FastGPT/blob/8e8ceb74396c4333e63d4a5ef209eb7af928e9b7/packages/service/core/chat/utils.ts#L124

把格式输入会被转换成相应的api参数发送给模型服务 例如 image

我是代码小白,请问可以定制吗?

试了一下你这个格式还是不行……完全没有效果

slot181 avatar Jun 26 '24 17:06 slot181

@slot181

属实是硬控了我几分钟,方法原理给了,而且源码引用也给出来了

首先声明这个回答已经很久之前的了,我部署的版本也一直没有更新,保持稳定状态,我起一个容器给你试一下

image: fastgpt:v4.6.9

image

image

如果不行那就是版本更新了,机制改变了 像我的版本手动输入那样格式的内容,是会自动转成图片显示在界面上的,就和图1一样 我在线上新版试了一下,直接输入会被当作文本,不进行转换 这个是一个输入框文本转成api参数的问题,从源码上找规则逻辑然后更改一下也应该能达到目的,可以自己尝试

nongmo677 avatar Jun 27 '24 03:06 nongmo677

4.8.9 可直接读取链接

c121914yu avatar Aug 21 '24 13:08 c121914yu