Langchain-Chatchat
Langchain-Chatchat copied to clipboard
如何分批进行数万个文件知识库初始化?
我现在有7万多个文件,需要进行知识库的初始化。由于机器性能限制,只能分批进行。第一批,把一个文件夹,5千个文件,执行python init_database.py --recreate-vs或是在webui界面,“知识库管理”中,点击“依据源文件重建向量库”。第一批是可以成功的。但第二批,该如何进行呢?python init_database.py --recreate-vs会把第一批的文件,也再次初始化。