Commit Graph

336 Commits

Author SHA1 Message Date
wxg0103
32e5c8195a fix: fix the defect of empty line to speech error
--bug=1050760 --user=王孝刚 【应用】文本转语音使用豆包模型时,用户问题文本中间有空行,会报错 https://www.tapd.cn/57709429/s/1636230
2024-12-24 16:29:46 +08:00
wxg0103
f9548dd7f2 fix: fix audio frame rate 2024-12-23 10:30:42 +08:00
shaohuzhang1
832b0dbd63
feat: Knowledge base import supports zip, xls, xlsx, and csv formats, while knowledge base export supports zip format (#1869) 2024-12-18 18:00:19 +08:00
wxg0103
b2829963ab fix: remove audio channels 2024-12-18 11:24:31 +08:00
wxg0103
0724fde7da fix: set audio channels 2024-12-18 10:20:03 +08:00
wxg0103
b819e6634e refactor: Support uploading multiple audio files 2024-12-17 18:24:10 +08:00
shaohuzhang1
64443ee136
feat: Application import and export (#1836) 2024-12-16 14:19:57 +08:00
wxg0103
5b969ef861 feat: add speech_to_text node and text_to_speech node 2024-12-13 15:02:06 +08:00
CaptainB
8b33c99235 feat: Image understanding and image generation models support configuring model parameters 2024-12-13 14:42:14 +08:00
CaptainB
add99fabc6 feat: Support image generate model 2024-12-13 14:42:14 +08:00
CaptainB
fb8b96779c fix: 处理某些pdf中不包括目录和内部链接不能完整导入的问题 2024-12-06 10:49:37 +08:00
wxg0103
d6a7a5f92e refactor: 优化大量数据批量入库 2024-12-04 18:23:39 +08:00
CaptainB
7346ef6a2c fix: 过滤空白的sheet
--bug=1049943 --user=刘瑞斌 【文档内容提取】-上传的excel中sheet为空时报错 https://www.tapd.cn/57709429/s/1625062
2024-12-04 16:30:43 +08:00
shaohuzhang1
fd35ef281c
refactor: 修改默认worker计算方法 (#1761) 2024-12-04 15:48:55 +08:00
shaohuzhang1
6b4cee1412
fix: 修复对话使用api调用无法响应数据 (#1755) 2024-12-04 14:19:37 +08:00
shaohuzhang1
c4c4b6e9cd
fix: 修复项目重启后文档状态不正确 (#1754) 2024-12-04 12:01:09 +08:00
CaptainB
695576bfbd fix: 修复字符集不匹配的情况提取web的问题
--bug=1048607 --user=刘瑞斌 【github#1577】有个网站导入web知识库报错 https://www.tapd.cn/57709429/s/1623295
2024-12-03 15:48:26 +08:00
shaohuzhang1
b6c65154c5
fix: 修复子应用表单调用无法调用问题 (#1741) 2024-12-03 15:23:53 +08:00
wxg0103
be0b407cf1 refactor: 钉钉扫码认证设置优化
--bug=1048604 --user=王孝刚 【系统管理】钉钉扫码认证设置优化 https://www.tapd.cn/57709429/s/1622777
2024-12-02 18:21:51 +08:00
wxg0103
5d4f35da2e fix: 修复应用日志清除后,对话中的文件在file表中没删掉的缺陷
--bug=1049852 --user=王孝刚 【应用编排】应用日志清除后,对话中的文件在file表中没删掉 https://www.tapd.cn/57709429/s/1622739
2024-12-02 18:00:59 +08:00
shaohuzhang1
b8aa4756c5
fix: 修复工作流节点输出等问题 (#1716) 2024-11-29 19:26:16 +08:00
CaptainB
78cd949f43 fix: 修复上传xlsx里的图片没在文档提取中显示的问题 2024-11-29 16:28:34 +08:00
wxg0103
f0fecf455f fix: 修复清除日志报错的缺陷
--bug=1049704 --user=王孝刚 【应用】日志清除策略没生效 https://www.tapd.cn/57709429/s/1620515
2024-11-28 17:52:47 +08:00
CaptainB
2a07a50a60 fix: 修复文档提取doc图片没有保存和展示的问题 2024-11-28 16:17:23 +08:00
CaptainB
f638abdea2 fix: 修复文档提取doc图片没有保存和展示的问题 2024-11-28 15:07:21 +08:00
CaptainB
59f5c8ac76 fix: 修复文档提取报错没有显示的问题 2024-11-27 12:20:16 +08:00
shaohuzhang1
da7e9b1460
fix: 修复文档状态部分问题 (#1699) 2024-11-26 19:40:26 +08:00
shaohuzhang1
93a5c6eb2d
fix: 修复文档状态数据数据错误问题 (#1697) 2024-11-26 16:24:03 +08:00
shaohuzhang1
98f25c99f2
fix: 处理历史数据 (#1692) 2024-11-26 13:29:46 +08:00
shaohuzhang1
e978c83f02
feat: 文档状态 2024-11-26 12:08:13 +08:00
CaptainB
64e8f4dc9f chore: 文档内容无法提取的时候输出错误信息 2024-11-22 17:56:07 +08:00
CaptainB
e1df4b2857 fix: 处理PDF中出现 \0 字符报 Null characters are not allowed
--bug=1048190 --user=刘瑞斌 【知识库】- 上传PDF文档 报错  ,关联issue #1468 https://www.tapd.cn/57709429/s/1611070
2024-11-18 12:46:37 +08:00
CaptainB
832d2a2e7f refactor: 处理历史会话中图片的问题 2024-11-14 21:44:31 +08:00
CaptainB
10e53f08e2 feat: 高级编排支持文件上传(WIP) 2024-11-14 14:24:36 +08:00
CaptainB
b57a619bdb feat: 高级编排支持文件上传(WIP) 2024-11-14 13:36:16 +08:00
liqiang-fit2cloud
6f84239e8b fix: 修复swagger接口文档中schema不正确的问题 2024-11-13 15:16:16 +08:00
CaptainB
869295b532 refactor: 定时清理数据库中没关联应用的图片 2024-11-13 13:06:27 +08:00
CaptainB
8a8305e75b feat: 高级编排支持文件上传(WIP) 2024-11-12 13:29:40 +08:00
shaohuzhang1
22d9fdc42f fix: 修复旧word文档图片无法正常识别 #1533 2024-11-06 14:20:10 +08:00
shaohuzhang1
5285745321 fix: 修复应用发布后无法使用最新的应用设置 2024-11-06 11:08:58 +08:00
shaohuzhang1
6f284420d6 fix: 修复多work导致数据不同步问题 2024-10-30 18:09:33 +08:00
wxg0103
da38621d1d refactor: 优化代码 2024-10-29 19:22:20 +08:00
CaptainB
834ccaa35b refactor: PDF分段强制按字数限制
--bug=1047568 --user=刘瑞斌 【github#1363】pdf 文件高级分段默认分段长度为500,但生成的段落长度超过29000字符 https://www.tapd.cn/57709429/s/1600183
2024-10-29 11:44:37 +08:00
shaohuzhang1
80415c9372
fix: 修复知识库文档中若图片不存在,前端对话闪烁问题 (#1483) 2024-10-28 19:05:21 +08:00
shaohuzhang1
83d97439e4 fix: 修复导入word文档,有的图片导入不进去 2024-10-28 17:44:11 +08:00
wxg0103
76f3afbc7a fix: 修复双击ldap结果跳转到oidc的缺陷
--bug=1048233 --user=王孝刚 【用户登录】登录首页-点击LDAP两下,会提示跳转至认证源页面登录 https://www.tapd.cn/57709429/s/1599607
2024-10-28 17:22:13 +08:00
CaptainB
76f63642e5 fix: 修复导入csv空行没有过滤的问题
--bug=1047841 --user=刘瑞斌 【知识库】上传csv格式的表格模版,第一行标题导入后分段显示不全 https://www.tapd.cn/57709429/s/1597113
2024-10-24 11:13:26 +08:00
shaohuzhang1
434db5a900 fix: 修复参数设置页面,回显问题 2024-10-23 19:20:09 +08:00
shaohuzhang1
0440d68bf2
fix: 修复对话框秘钥校验无法弹出 (#1431) 2024-10-22 18:40:24 +08:00
shaohuzhang1
23c7269231
refactor: 对话秘钥校验 (#1430) 2024-10-22 18:29:13 +08:00
wxg0103
5973957037 fix: 修复license校验问题 2024-10-22 17:55:08 +08:00
shaohuzhang1
c211702c4c fix: 修复文件缓存timeout错误 2024-10-21 15:22:11 +08:00
shaohuzhang1
ad6d617caa refactor: 重构校验 2024-10-18 18:42:59 +08:00
wxg0103
d5bbf48d01 style: 优化样式 2024-10-18 15:51:03 +08:00
shaohuzhang1
01e775d579 feat: 支持阿里云百炼向量模型 2024-10-17 15:12:37 +08:00
wxg0103
60cccf01a3 feat: 对话日志增加定时清理 2024-10-16 16:49:48 +08:00
Henry-Shaw
33d63c8efe
fix: 修复知识库上传旧版本docx文件后,图片未正常识别导入的问题 (#1382) 2024-10-16 14:39:52 +08:00
CaptainB
67f3ec34a1 refactor: 模型设置支持配置参数 2024-10-15 21:22:34 +08:00
zhangshaohu
2e7b31dc3c feat: 新增动态表单收集器 2024-10-13 20:05:50 +08:00
shaohuzhang1
677ce46b49 build: 屏蔽敏感环境变量 2024-09-26 16:23:39 +08:00
CaptainB
e16e827028 fix: 处理文本前后的空白字符 2024-09-25 16:00:30 +08:00
CaptainB
6cacb5be71 fix: 处理不规范的pdf中前言部分没在目录中标识出来,导致不能正常识别的问题 2024-09-24 12:06:51 +08:00
shaohuzhang1
885ab5410a fix: 修复【知识库】语雀导出的word,导入知识库是空白的 #1148 2024-09-20 19:37:22 +08:00
shaohuzhang1
49efb185e0 fix: 修复【模型设置】使用应用baseurl创建模型报错 2024-09-20 18:48:10 +08:00
shaohuzhang1
1f26744cef
feat: 批量关联问题 (#1235) 2024-09-20 17:07:52 +08:00
shaohuzhang1
d975ee6027 fix: 修复忘记密码、修改密码邮件里MaxKB相关字样 2024-09-20 16:27:14 +08:00
shaohuzhang1
fda0bcb5d6 fix: 修复知识库导出后再导入,有一部分内容会丢失 2024-09-20 16:20:08 +08:00
shaohuzhang1
6d39cd8aff fix: 修复项目重启后,文档状态错误 2024-09-20 11:06:52 +08:00
CaptainB
3e3b77e34d refactor: 处理纵向合并的单元格 2024-09-18 12:37:33 +08:00
shaohuzhang1
989d0848c0 fix: 修复工作流中,函数库使用知识库检索参数错误 2024-09-12 14:14:16 +08:00
CaptainB
746f587698 fix: 表格数据区分xls和xlsx 2024-09-12 10:49:31 +08:00
shaohuzhang1
b924958176 feat: 上传文档表格对支持xlsx文件单元格图片 2024-09-11 18:27:44 +08:00
shaohuzhang1
37445762b2 feat: 上传文档qa问答对支持xlsx文件单元格图片 2024-09-11 15:55:29 +08:00
wangdan-fit2cloud
689e74af4b perf: 更新slogan文案 2024-09-10 10:39:22 +08:00
shaohuzhang1
f9a76d7948
feat: 支持openai接口 #353 (#1128) 2024-09-09 14:47:25 +08:00
CaptainB
70f44b990c refactor: 格式规范的pdf通过目录来分段 2024-09-06 10:56:27 +08:00
CaptainB
57b15a8a7f feat: 知识库支持上传csv和excel
--story=1016154 --user=刘瑞斌 【知识库】-支持上传表格类型文档(Excel/CSV)按行分段 https://www.tapd.cn/57709429/s/1567910
2024-08-30 15:46:20 +08:00
zhangshaohu
cfb6307293 fix: 修复新增段落迁移文档未索引 2024-08-28 00:30:18 +08:00
shaohuzhang1
a9443a638c fix: 修复上传文档中后缀为PDF 不识别 2024-08-27 14:16:03 +08:00
shaohuzhang1
b40b4e5305 fix: 修改swagger文档初始化 2024-08-27 11:44:31 +08:00
shaohuzhang1
df172b530c fix: 修复上传PDF文件智能分段时提示 分段内容不能超过102400个字符 #998 2024-08-26 14:17:25 +08:00
shaohuzhang1
bb6f5d6096 fix: 修复应用保存报错 2024-08-26 13:38:38 +08:00
shaohuzhang1
9e0ac81f1d refactor: 重构模型参数代码 2024-08-23 17:47:23 +08:00
wxg0103
228f913d9b fix: 修复知识库手动添加分段报错的缺陷
--bug=1045628 --user=王孝刚 【知识库】手动添加分段报错 https://www.tapd.cn/57709429/s/1568695
2024-08-23 16:58:02 +08:00
shaohuzhang1
bee832994b fix: 修复函数库输入参数校验,搜索函数失败,编辑函数描述为空校验 2024-08-22 11:50:37 +08:00
shaohuzhang1
d315c01133 fix: 修复dev 无法启动celery 2024-08-22 10:49:22 +08:00
CaptainB
2a87af6172 chore: 解析错误时输出错误原因 2024-08-22 10:43:48 +08:00
shaohuzhang1
ec4fe833b1 fix: 修复无法启动问题 2024-08-21 18:39:18 +08:00
shaohuzhang1
63e7e52a35 fix: 解决local_model服务端口冲突问题 2024-08-21 16:26:56 +08:00
zhangshaohu
7c5957e0a3 feat: 分离任务 2024-08-21 14:46:38 +08:00
shaohuzhang1
00af530d27
chore: 解析错误时输出错误原因 (#996)
Co-authored-by: CaptainB <bin@fit2cloud.com>
2024-08-20 22:03:58 +08:00
CaptainB
17af603397 refactor: 优化pdf加载,修复部分pdf中文乱码的问题 2024-08-20 16:58:04 +08:00
CaptainB
01d8204cb5 refactor: 逐页加载pdf, 图片类型单独保存成文件加载 2024-08-16 15:08:22 +08:00
CaptainB
0d59ab2be9 refactor: 使用lazy_load方式加载pdf 2024-08-16 10:43:20 +08:00
CaptainB
e266dd9d99 refactor: 支持解析pdf中的图片 2024-08-15 20:53:44 +08:00
shaohuzhang1
f421d1975d feat: 函数库功能 2024-08-15 17:17:25 +08:00
shaohuzhang1
0ad5a76598
fix: 修复分段时,特殊情况会丢失数据 #938 (#946) 2024-08-07 19:52:05 +08:00
shaohuzhang1
864bca6450
fix: 修复索引中的文档,知识库删除后依然再执行 (#934) 2024-08-06 16:22:53 +08:00
shaohuzhang1
b3c7120372
fix: 修复QA文件解析失败 (#933) 2024-08-06 14:47:28 +08:00
shaohuzhang1
d33bf6a8e8
fix: 修复知识库问题管理修改问题报错 (#929) 2024-08-06 10:13:52 +08:00
shaohuzhang1
76c1acbabb
fix: 修复讯飞星火模型多用户同时提问后,回答内容会错乱 #917 (#920) 2024-08-02 10:39:54 +08:00
shaohuzhang1
16d7316dca
feat: 段落分块设置最小分块字数 (#898) 2024-07-30 11:08:53 +08:00
shaohuzhang1
6aa2a682bc
fix: 修复向量化失败,缓存未被删除 (#887) 2024-07-29 16:17:30 +08:00
shaohuzhang1
3c7142ed7c
feat: 文档添加排队中状态 (#886) 2024-07-29 15:51:33 +08:00
shaohuzhang1
d935e9a836
fix: 修复上传文档,高级分段设置分段长度为10w字符,生成预览还是4096个字符一段 (#884) 2024-07-29 14:08:40 +08:00
shaohuzhang1
1979cf12c4
feat: gunicorn启动使用gthread (#882) 2024-07-26 18:58:01 +08:00
shaohuzhang1
c76bc0f2c2
refactor: 重构部分代码 (#865) 2024-07-25 11:54:41 +08:00
shaohuzhang1
0d2524df1d
refactor: 重构部分代码 (#864) 2024-07-25 10:41:38 +08:00
shaohuzhang1
0131f46e37
fix: 修改启动方式 (#860) 2024-07-24 16:55:00 +08:00
shaohuzhang1
53434f9d24
feat: 细分段落chunk增加召回命中率 (#841) 2024-07-23 18:19:41 +08:00
shaohuzhang1
5f3f1dd2ca
feat: 显示设置功能 2024-07-22 18:52:56 +08:00
shaohuzhang1
c465ddff19
fix: 修复无法流式输出 (#820) 2024-07-19 21:34:17 +08:00
shaohuzhang1
16851592c3
feat: 添加web服务器gunicorn 2024-07-19 18:23:56 +08:00
gcalgoz
4d8ac28674
fix: 优化文档分割处理 (#814) 2024-07-19 17:33:18 +08:00
shaohuzhang1
a9b8bdd365 feat: 支持向量模型 2024-07-19 16:44:53 +08:00
shaohuzhang1
b14a799350 feat: 支持向量模型 2024-07-19 10:34:47 +08:00
wangdan-fit2cloud
57aade8d62 feat 外观设置 2024-07-19 10:15:24 +08:00
shaohuzhang1
9e76cd97de feat: 支持向量模型 2024-07-18 16:36:34 +08:00
shaohuzhang1
dcf5892b96 feat: 支持向量模型 2024-07-18 15:44:48 +08:00
shaohuzhang1
75b9b17e2e feat: 支持向量模型 2024-07-18 10:26:16 +08:00
shaohuzhang1
bd4303aee7 feat: 支持向量模型 2024-07-17 17:01:57 +08:00
shaohuzhang1
fd6aa4fb39
fix: 优化认证逻辑 (#724) 2024-07-09 18:59:15 +08:00
shaohuzhang1
60e65a8b17
feat: 接口校验 (#721)
feat: 接口校验
2024-07-09 13:44:27 +08:00
shaohuzhang1
c1e1a19a42
feat: 添加文件上传接口 (#712) 2024-07-05 19:02:20 +08:00
gcalgoz
d152f441ff
fix: 对模型嵌入归一化,提升检索速度 (#710) 2024-07-05 18:14:58 +08:00
wangdan-fit2cloud
b902bf153e feat: 规范字体 2024-07-05 15:32:13 +08:00
shaohuzhang1
00f2a8bbd4
fix: 修复【知识库】高级分段 自动清洗,把所有换行被去除 (#684) 2024-07-02 11:32:20 +08:00
RatishT
6c67b65e6a
Fix pylint warning no-else-return (#678) 2024-07-02 10:55:26 +08:00
shaohuzhang1
2f2f74fdab
feat: 支持工作流 (#671) 2024-07-01 09:45:59 +08:00
Evan
726ba2a8e2
fix:知识库上传文档操作报异常,错误发生在 ts_vecto_util.py 文件的 replace_word 函数中:错误的原因是正则表达式模式在某个位置缺少一个右括号,使得子模式未完全结束。该提交修复了这个问题。 (#667) 2024-06-27 09:51:14 +08:00
shaohuzhang1
7a5bfa2673
fix: 修复导入带有表格样式的md文件分段后表格格式丢失 #615 (#630) 2024-06-13 10:41:52 +08:00
evilstar
3a7c4d3568
修复:关键词提取的bug (#621) 2024-06-11 18:25:12 +08:00
shaohuzhang1
cdc7e13415
feat: 升级langchain版本到2.2.3 (#617) 2024-06-07 11:08:32 +08:00
shaohuzhang1
11a8df151e
fix: 修复通过API进行对话的API文档接口错误 #587 (#593) 2024-06-03 10:53:03 +08:00
shaohuzhang1
ed7ddfbc59
fix: 修复分段超过分段长度限制 (#577) 2024-05-29 12:00:56 +08:00
shaohuzhang1
dd22fa0868
perf: 优化向量化文档后修改更新时间 (#571) 2024-05-28 18:12:45 +08:00
shaohuzhang1
22e192ed11
fix: 修复文档导入解析错误 (#570) 2024-05-28 17:32:29 +08:00
shaohuzhang1
efe5a2b021
fix: 修复excel导入失败问题 (#554) 2024-05-27 16:06:14 +08:00
shaohuzhang1
e9a05b1255
fix: 修复qa知识库导入失败错误 (#536) 2024-05-24 17:59:02 +08:00
shaohuzhang1
7953706895
perf: 优化错误提示 (#533) 2024-05-24 16:18:33 +08:00
shaohuzhang1
2da31997e5
perf: 优化API_KEY调用对话文档 (#532) 2024-05-24 15:57:43 +08:00
shaohuzhang1
a3af104ef0
feat: 知识库增加重新向量化功能 2024-05-24 11:27:59 +08:00
shaohuzhang1
28938104c0
* feat: 支持上传 Excel/CSV 类型的问答对 (#430) 2024-05-23 18:57:49 +08:00
shaohuzhang1
86f500208f
feat: 支持上传html格式的文档 #364 (#518) 2024-05-23 14:19:18 +08:00
shaohuzhang1
84c7728d00
fix: 修复应用修改模型后,历史对话未使用最新模型 (#487) 2024-05-20 20:21:45 +08:00
shaohuzhang1
7f30d03abd
fix: 修复分词超过数据库最大限制 (#401) 2024-05-09 15:55:35 +08:00
shaohuzhang1
3fb6192021
fix: 跨域失效 (#394) 2024-05-08 18:46:58 +08:00
shaohuzhang1
267be441e3
feat: 跨域设置(#276) 2024-05-08 17:13:13 +08:00
shaohuzhang1
d4e742f7c6
feat: 分段管理支持批量迁移,删除分段 #113,#103 2024-05-08 10:40:15 +08:00
shaohuzhang1
c1b6ec630c
fix: 导入文档中含有特殊字符时,导入失败。 #363 (#372) 2024-05-07 12:18:03 +08:00