Skip to content
项目
群组
代码片段
帮助
当前项目
正在载入...
登录 / 注册
切换导航面板
J
jinchat-server
概览
概览
详情
活动
周期分析
版本库
存储库
文件
提交
分支
标签
贡献者
分支图
比较
统计图
问题
0
议题
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
CI / CD
CI / CD
流水线
作业
日程表
图表
维基
Wiki
代码片段
代码片段
成员
成员
折叠边栏
关闭边栏
活动
图像
聊天
创建新问题
作业
提交
问题看板
Open sidebar
aigc-pioneer
jinchat-server
Commits
3f7e8158
Unverified
提交
3f7e8158
authored
6月 17, 2023
作者:
fxjhello
提交者:
GitHub
6月 17, 2023
浏览文件
操作
浏览文件
下载
差异文件
Merge pull request #657 from imClumsyPanda/revert-653-dev-1
Revert 653 dev 1
上级
5eab13c9
409a302f
隐藏空白字符变更
内嵌
并排
正在显示
3 个修改的文件
包含
9 行增加
和
3 行删除
+9
-3
README.md
README.md
+1
-1
qr_code_33.jpg
img/qr_code_33.jpg
+0
-0
MyFAISS.py
vectorstores/MyFAISS.py
+8
-2
没有找到文件。
README.md
浏览文件 @
3f7e8158
...
...
@@ -229,7 +229,7 @@ Web UI 可以实现如下功能:
-
[
x
]
VUE 前端
## 项目交流群
<img
src=
"img/qr_code_3
2
.jpg"
alt=
"二维码"
width=
"300"
height=
"300"
/>
<img
src=
"img/qr_code_3
3
.jpg"
alt=
"二维码"
width=
"300"
height=
"300"
/>
🎉 langchain-ChatGLM 项目微信交流群,如果你也对本项目感兴趣,欢迎加入群聊参与讨论交流。
img/qr_code_33.jpg
0 → 100644
浏览文件 @
3f7e8158
154.5 KB
vectorstores/MyFAISS.py
浏览文件 @
3f7e8158
...
...
@@ -6,6 +6,7 @@ from langchain.docstore.base import Docstore
from
langchain.docstore.document
import
Document
import
numpy
as
np
import
copy
import
os
class
MyFAISS
(
FAISS
,
VectorStore
):
...
...
@@ -53,10 +54,10 @@ class MyFAISS(FAISS, VectorStore):
# This happens when not enough docs are returned.
continue
if
i
in
self
.
index_to_docstore_id
:
_id
=
self
.
index_to_docstore_id
[
i
]
_id
=
self
.
index_to_docstore_id
[
i
]
# 执行接下来的操作
else
:
continue
continue
doc
=
self
.
docstore
.
search
(
_id
)
if
(
not
self
.
chunk_conent
)
or
(
"context_expand"
in
doc
.
metadata
and
not
doc
.
metadata
[
"context_expand"
]):
# 匹配出的文本如果不需要扩展上下文则执行如下代码
...
...
@@ -117,8 +118,10 @@ class MyFAISS(FAISS, VectorStore):
try
:
if
isinstance
(
source
,
str
):
ids
=
[
k
for
k
,
v
in
self
.
docstore
.
_dict
.
items
()
if
v
.
metadata
[
"source"
]
==
source
]
vs_path
=
os
.
path
.
join
(
os
.
path
.
split
(
os
.
path
.
split
(
source
)[
0
])[
0
],
"vector_store"
)
else
:
ids
=
[
k
for
k
,
v
in
self
.
docstore
.
_dict
.
items
()
if
v
.
metadata
[
"source"
]
in
source
]
vs_path
=
os
.
path
.
join
(
os
.
path
.
split
(
os
.
path
.
split
(
source
[
0
])[
0
])[
0
],
"vector_store"
)
if
len
(
ids
)
==
0
:
return
f
"docs delete fail"
else
:
...
...
@@ -126,6 +129,9 @@ class MyFAISS(FAISS, VectorStore):
index
=
list
(
self
.
index_to_docstore_id
.
keys
())[
list
(
self
.
index_to_docstore_id
.
values
())
.
index
(
id
)]
self
.
index_to_docstore_id
.
pop
(
index
)
self
.
docstore
.
_dict
.
pop
(
id
)
# TODO: 从 self.index 中删除对应id
# self.index.reset()
self
.
save_local
(
vs_path
)
return
f
"docs delete success"
except
Exception
as
e
:
print
(
e
)
...
...
编写
预览
Markdown
格式
0%
重试
或
添加新文件
添加附件
取消
您添加了
0
人
到此讨论。请谨慎行事。
请先完成此评论的编辑!
取消
请
注册
或者
登录
后发表评论