jmal-cloud-view icon indicating copy to clipboard operation
jmal-cloud-view copied to clipboard

关于图像内容以及文档内容的AI智能 tag识别的优化建议

Open death4444 opened this issue 1 year ago • 4 comments

  1. 传统网盘:大多不支持或仅提供基础的标签管理功能。 支持自动获取图片的颜色、形状等属性,以及音视频的时长等信息,并允许用户添加二级标签、文件描述和评分。 通过调用第三方API(例如:https://ai.baidu.com/tech/imagerecognition)的方式,实现对图像内容的识别,并最终输出为tag标签,从而实现多维度、深度的文件管理。当然,如果能进一步实现本地化识别,从而白嫖,fans们肯定会感动流涕的!

  2. AI辅助管理:智能化文件标注与管理 文件的分类和标注一直是文件管理中的挑战,需要投入大量时间和精力。可以考虑用AI大模型为这项工作提供解决方案。 文档类型的文件(office、markdown、PDF、txt) AI打标签:根据文件内容自动添加标签,帮助分类和检索文件。 AI写描述:智能生成文件描述,无需手动编辑。 AI批量标注:监测网盘文件,一次性对多个文件进行标注,自动操作。 这点目前很多项目是使用本地LLM server或者调用基于OpenAI 接口规范的AI服务来实现的。

death4444 avatar Jun 17 '24 14:06 death4444

好想法

jamebal avatar Jun 17 '24 15:06 jamebal

既然被翻牌子了,那咱就再细说一些。 借助AI能力,大规模创建标签之后,现在显示标签的位置肯定要做对应的修改,目前的位置如下: image 这里很显然放不下几个标签。建议改到一个独立的标签检索内容的页面,标签可能还要按名称排个序什么的,不然多了也不好找。 然后搜索栏,支持搜索关键字命中标签 image

AI大模型多模态的好像都要收费,我再找找有没有能白嫖的。 标签的Prompt我都想好了: 请根据图片、文档内容给出5到10个关键词作为文件标签,每个标签词的长度不能超过5个字,且标签词之间不能重复。标签尽量简洁少字。请确保你的标签中包含主要元素、可能的主题或情感表达

death4444 avatar Jun 18 '24 15:06 death4444

@jamebal 可以参考pichome这个项目,提供了AI智能识别智能标签 https://github.com/zyx0814/Pichome

kokojacket avatar Jun 19 '24 07:06 kokojacket

@jamebal 可以参考pichome这个项目,提供了AI智能识别智能标签 https://github.com/zyx0814/Pichome

可以的

jamebal avatar Jun 19 '24 07:06 jamebal