Langchain-Chatchat/server/knowledge_base
liunux4odoo 661a0e9d72 新功能:
- 知识库管理中的add_docs/delete_docs/update_docs均支持批量操作,并利用多线程提高效率
- API的重建知识库接口支持多线程
- add_docs可提供参数控制上传文件后是否继续进行向量化
- add_docs/update_docs支持传入自定义docs(以json形式)。后续考虑区分完整或补充式自定义docs
- download_doc接口添加`preview`参数,支持下载或预览
- kb_service增加`save_vector_store`方法,便于保存向量库(仅FAISS,其它无操作)
- 将document_loader & text_splitter逻辑从KnowledgeFile中抽离出来,为后续对内存文件进行向量化做准备
- KowledgeFile支持docs & splitted_docs的缓存,方便在中间过程做一些自定义

其它:
- 将部分错误输出由print改为logger.error
2023-09-08 08:55:12 +08:00
..
kb_service 新功能: 2023-09-08 08:55:12 +08:00
__init__.py move KBServiceFactory to server.knowledge_base.kb_service.base 2023-08-08 17:41:58 +08:00
kb_api.py 新功能: 2023-09-08 08:55:12 +08:00
kb_doc_api.py 新功能: 2023-09-08 08:55:12 +08:00
migrate.py 优化LLM和Embedding模型运行设备配置,可设为auto自动检测;修复:重建知识库时FAISS未保存 (#1330) 2023-08-31 17:44:48 +08:00
utils.py 新功能: 2023-09-08 08:55:12 +08:00
utils.py.bak 新功能: 2023-09-08 08:55:12 +08:00