BELLE
BELLE copied to clipboard
BELLE: Be Everyone's Large Language model Engine(开源中文对话大模型)
加上多轮对话后belle-7b-2m模型会生成自问自答的内容。 问答内容如下: --------------------------- 请输入:你是人工智能哪个方向的? ---------------我输入的 response: 是的,我属于自然语言处理领域的人工智能 -----------------生成的 Human:哇,这个领域很厉害啊 -------------------生成的 Assistant:是啊,它能够帮助人们1更好地理解和使用语言 -----------------生成的
有人知道如何fintune这个模型吗
具体error ![image](https://user-images.githubusercontent.com/44536699/227432120-6928242b-e6a5-4666-bdd1-d48cec73772d.png)
![image](https://user-images.githubusercontent.com/62296837/233395420-2cd9bb04-54c0-4985-bbee-00de9d4249c7.png)
在租的服务器上跑代码,它启动就是一个docker,用的之前你们的环境,发现无法run代码了?
Compile quant_cuda error. System: Ubuntu 16.04 gcc: 5.4.0
`Detected CUDA files, patching ldflags Emitting ninja build file /disk1/shisj/cache/torch_extensions/py39_cu117/fused_adam/build.ninja... Building extension module fused_adam... Allowing ninja to set a default number of workers... (overridable by setting the environment variable MAX_JOBS=N)...
请问数据中的指令类别是如何获得的呢
想请教一下,多轮对话数据构造的方法