weiweiw
/
Langchain-Chatchat
1
0
Fork 0
Code Issues Pull Requests Packages Projects Releases Wiki Activity
1,722 Commits 1 Branch 0 Tags 72 MiB
Commit Graph

1722 Commits

Author SHA1 Message Date
wvivi2023 9f327e71e4 enhance splitter algorithm 2023-12-26 15:40:45 +08:00
liunux4odoo 9ff7bef2c2
新功能：知识库管理界面支持查看、编辑、删除向量库文档 (#2471) 
* 新功能：
- 知识库管理界面支持查看、编辑、删除向量库文档。暂不支持增加（aggrid添加新行比较麻烦，需要另外实现）
- 去除知识库管理界面中重建知识库和删除知识库按钮，建议用户到终端命令操作

修复：
- 所有与知识库名称、文件名称有关的数据库操作函数都改成大小写不敏感，所有路径统一为 posix 风格，避免因路径文本不一致导致数据重复和操作失效 （close #2232）

开发者：
- 添加 update_docs_by_id 函数与 API 接口。当前仅支持 FAISS，暂时未用到，未将来对知识库做更细致的修改做准备
- 统一 DocumentWithScore 与 DocumentWithVsId
- FAISS 返回的 Document.metadata 中包含 ID， 方便后续查找比对
- /knowledge_base/search_docs 接口支持 file_name, metadata 参数，可以据此检索文档

* fix bug
 2023-12-26 13:44:36 +08:00
zR 2e1442a5c1 修复 Langchain 更新之后OpenAI在线embed无法正常使用问题 2023-12-23 11:36:11 +08:00
liunux4odoo 4e5bc8b399 修复： zhipu-api 请求出错时返回准确的错误信息 2023-12-22 10:17:00 +08:00
imClumsyPanda 4e69033d33
Update README.md 2023-12-21 22:19:41 +08:00
imClumsyPanda 778d2d906a
Add files via upload 2023-12-21 22:19:12 +08:00
Zhi-guo Huang d77f778e0d
Merge pull request #2435 from chatchat-space/reranker 
新增特性：使用Reranker模型对召回语句进行重排
 2023-12-21 19:06:59 +08:00
hzg0601 129c765a74 新增特性:reranker对向量召回文本进行重排 2023-12-21 19:05:11 +08:00
hzg0601 5891f94c88 temporarily add reranker 2023-12-21 16:05:16 +08:00
Zhi-guo Huang 60510ff2f0
Update model_config.py.example 2023-12-20 13:33:00 +08:00
Funkeke c1a32d9f1a
fix:使用在线embedding模型时 报错 There is no current event loop in thread 'Any… (#2393) 
* fix:使用在线embedding模型时 报错 There is no current event loop in thread 'AnyIO worker thread'

* 动态配置在线embbding模型

---------

Co-authored-by: fangkeke <3339698829@qq.com>
 2023-12-20 08:40:53 +08:00
liunux4odoo fdea406101 update requirements: 统一各文件依赖顺序，便于比对；移出streamlit-antd-components; jq默认安装 2023-12-19 15:59:41 +08:00
imClumsyPanda bba4754994
Update README.md 2023-12-18 15:21:27 +08:00
imClumsyPanda 9fdeb475e9
Add files via upload 2023-12-18 15:20:58 +08:00
huangzhiguo a870076051 在model_config.py.example中增加qwen量化模型启动的说明 2023-12-15 14:23:34 +08:00
wvivi2023 540ff09486 enhance 2023-12-15 10:28:11 +08:00
wvivi2023 33dc60df5e commit log 2023-12-15 09:48:42 +08:00
wvivi2023 2ac52147d3 fix merging issue 2023-12-15 09:48:22 +08:00
wvivi2023 77bc5891c8 manually split 2023-12-15 08:59:13 +08:00
Astlvk 7e01e82470
fixed 迭代器参数传递错误，知识库问答报错TypeError: unhashable type: 'list' (#2383) 
Co-authored-by: liunux4odoo <41217877+liunux4odoo@users.noreply.github.com>
 2023-12-15 07:54:36 +08:00
xldistance 7e8391eb55
修复knowledge_base_chat_iterator传参错误 (#2386) 2023-12-15 07:53:36 +08:00
xldistance 332e1ccfaa
更新self.dims_length赋值错误 (#2380) 2023-12-14 19:56:39 +08:00
jaluik e7410e40df
fix: 文档错误 (#2384) 2023-12-14 16:32:05 +08:00
imClumsyPanda 1cbad32b6e
Update README.md 2023-12-13 18:56:43 +08:00
imClumsyPanda f45d6ab49c
Add files via upload 2023-12-13 18:56:20 +08:00
wvivi2023 bf21b8f116 merge single line to the next content 2023-12-13 18:06:49 +08:00
lookou 9c5b81cb2b
优化EventSource回包 (#1200) 
通过 sse_startllete 支持 JS 前端 SSE 协议 （Close #2333） 

Co-authored-by: liunux4odoo <41217877+liunux4odoo@users.noreply.github.com>
 2023-12-13 17:02:27 +08:00
liunux4odoo 472a97a616 所有 chat 接口都改为 EventSourceResponse；ApiRequest 作对应修改 2023-12-13 16:53:24 +08:00
liunux4odoo c8fef3380c merge from dev 2023-12-13 16:52:40 +08:00
hzg0601 db008c1af8 为milvus增加额外索引与搜索配置 2023-12-13 15:52:11 +08:00
wvivi2023 8c367eb460 add log 2023-12-13 09:51:59 +08:00
wvivi2023 9fa7a1fbbf title enhancement and remove the logic of query scope 2023-12-13 09:51:17 +08:00
liunux4odoo 2604c9e761
fix: prompt template name error in file_chat (#2366) 2023-12-12 21:12:33 +08:00
hzg0601 95c09981a6 给出chatglm3-6b输出角色标签<|user|>等及自问自答的解决方案 2023-12-11 11:22:39 +08:00
hzg0601 db1c1e2ee4 解决多次调用es创建索引失败的问题 2023-12-11 10:39:59 +08:00
liunux4odoo 2e9319846e support .xls files 2023-12-08 15:04:08 +08:00
liunux4odoo 7b70776810 fix: doc ext name error in LOADER_DICT 2023-12-08 13:59:55 +08:00
imClumsyPanda fdd6eb5f6d
Update README.md 2023-12-07 16:07:24 +08:00
imClumsyPanda bcbeb9d8ac
Add files via upload 2023-12-07 16:07:00 +08:00
wvivi2023 b1abafeb50 commit 0.2.6 config 2023-12-07 14:37:55 +08:00
hzg0601 ad0b133ac8 解决faiss相似度阈值不在0-1之间的问题 2023-12-06 21:57:59 +08:00
hzg0601 4c2fda7200 Merge branch 'dev' of https://github.com/chatchat-space/Langchain-Chatchat into dev 2023-12-06 20:42:32 +08:00
hzg0601 d1f94c2846 temporarily add reranker 2023-12-06 20:42:27 +08:00
hzg0601 1fac51fe35 temporarily save faiss_cache 2023-12-06 09:45:56 +00:00
wvivi2023 c936f040e4 优化第一级目录分款 2023-12-05 16:51:45 +08:00
imClumsyPanda 6547005073
Update README.md 2023-12-04 22:43:20 +08:00
imClumsyPanda 5fe933fa44
Add files via upload 2023-12-04 22:42:49 +08:00
liunux4odoo 67b7c99d03
ocr 支持 GPU 加速（需要手动安装 rapidocr_paddle[gpu])；知识库支持 MHTML 和 Evernote 文件。 (#2265) 
在 requirements 和 Wiki 中增加对可选文档加载器 SDK 的说明 ( close #2264 )
 2023-12-04 09:39:56 +08:00
Ean Yang cf65f44eb6
更新默认模型下载链接 (#2259) 2023-12-03 11:59:48 +08:00
liunux4odoo 7d2de47bcf
文件对话和知识库对话 API 接口实现全异步操作，防止阻塞 (#2256) 
* EmbeddingFunAdapter 支持异步操作；文件对话和知识库对话 API 接口实现全异步操作，防止阻塞

* 修复： 使 list_files_from_folder 返回相对路径
 2023-12-02 19:22:44 +08:00