- 
- 
- 
- 
-
-🎉 Langchain-Chatchat 项目微信交流群，如果你也对本项目感兴趣，欢迎加入群聊参与讨论交流。
-
-### 公众号
-
-
-
-🎉 Langchain-Chatchat 项目官方公众号，欢迎扫码关注。
diff --git a/chatchat/chatchat/data/knowledge_base/samples/content/webui2.py b/chatchat/chatchat/data/knowledge_base/samples/content/webui2.py
deleted file mode 100644
index b2637adc..00000000
--- a/chatchat/chatchat/data/knowledge_base/samples/content/webui2.py
+++ /dev/null
@@ -1,237 +0,0 @@
-from nicegui import ui, Client, app, run
-from nicegui.events import ValueChangeEventArguments
-from configs import (VERSION, LLM_MODELS, TEMPERATURE, HISTORY_LEN,
- VECTOR_SEARCH_TOP_K, SEARCH_ENGINE_TOP_K)
-from webui_pages.utils import AsyncApiRequest
-import asyncio
-from typing import Any, List, Dict, Any
-
-
-app.add_static_files("/image", "img")
-
-
-class Session:
- def __init__(self) -> None:
- user = app.storage.user
- for k, v in self._attrs().items():
- user.setdefault(k, v)
-
- def _attrs(self) -> Dict[str, Any]:
- return {
- "messages": [],
- "query": "",
- "thinking": False,
- "cur_kb": "",
- "cur_temperature": TEMPERATURE,
- "chat_list": [],
- "cur_chat": "",
- }
-
- @property
- def user(self):
- return app.storage.user
-
- def __getattr__(self, attr: str) -> Any:
- if attr in self._attrs():
- return self.user[attr]
- else:
- raise AttributeError(attr)
-
- def __setattr__(self, attr: str, val: Any) -> None:
- if attr in self._attrs():
- self.user[attr] = val
- else:
- raise AttributeError(attr)
-
-
-def make_header(left_drawer, right_drawer):
- with ui.header().classes("bg-black p-2") as header:
- with ui.link():
- ui.icon("menu", size="md").on("click", lambda: left_drawer.toggle())
- ui.image("img/logo-long-chatchat-trans-v2.png").props("fit=scale-down").classes("h-8 w-48 float-left")
- left_header = ui.row().props('id="left-header"')
- ui.element("q-space")
- right_header = ui.row().props('id="right-header"')
- ui.label(f"(Version: {VERSION})").classes("text-grey text-xs pt-4")
- with ui.link():
- ui.icon("menu", size="md").on("click", lambda: right_drawer.toggle())
- return left_header, right_header
-
-
-def make_left_drawer(links: List, current: str):
- with ui.left_drawer(bordered=True, elevated=True) as drawer:
- return drawer
-
-
-@ui.refreshable
-async def output_messages():
- session = Session()
-
- for msg in session.messages:
- is_user = msg["role"] == "user"
- if is_user:
- name = "User"
- avatar = "/image/user_avatar.png"
- else:
- name = "AI"
- avatar = "/image/chatchat_icon_blue_square_v2.png"
- ele = ui.chat_message([], sent=False, name=None, avatar=avatar)
- with ele.add_slot("default"):
- ui.markdown(msg["content"])
-
- ui.query("img.q-message-avatar").classes("self-start")
- (ui.query("div.q-message-text--received")
- .classes("bg-green-100")
- .style("border-radius: 5px;"))
- # (ui.query("div.q-message-text--received")
- # .run_method("remove_classes", ["q-message-text--received"]))
- # await ui.run_javascript("window.sc")
-
-
-@ui.page("/", title="Langchain-Chatchat WebUI")
-async def index(client: Client):
- ui.add_head_html('''''')
-
- async def send():
- question = query.value.strip()
- query.value = ""
-
- if not question:
- return
-
- if question == "/clear":
- session.messages = []
- output_messages.refresh()
- return
-
- session.thinking = True
- session.messages.append({"role": "user", "content": question})
- session.messages.append({"role": "assistant", "content": "Thinking..."})
- output_messages.refresh()
- await asyncio.sleep(0.1)
-
- text = ""
- async for chunk in api.chat_chat(question,
- stream=True,
- conversation_id=None,
- model=cur_llm_model.value,
- temperature=temperature.value):
- text += chunk.get("text", "")
- tail = " ▌"
- if text.count("```") % 2 == 1:
- if text[-1] != "`":
- tail += "\n```\n"
- elif text[-2:] == "``":
- tail += "`\n"
- elif text[-1:] == "`":
- tail += "``\n"
- session.messages[-1]["content"] = text + tail
- output_messages.refresh()
- await asyncio.sleep(0.1)
-
- session.messages[-1]["content"] = text
- output_messages.refresh()
- await asyncio.sleep(0.1)
- session.thinking = False
-
- session = Session()
- api = AsyncApiRequest()
-
- left_drawer = make_left_drawer([], "")
-
- with ui.right_drawer(bordered=True, elevated=True) as right_drawer:
- ui.markdown("### 灵感大全")
- user_name = ui.input("用户名称", value="用户")
- system_message = (ui.input("AI系统消息",
- value="你是一个聪明的人工智能助手，可以回答用户提出的问题。")
- .props("autogrow"))
- chat_image = ui.upload(label="上传图片").classes("w-full mt-5")
- chat_file = ui.upload(label="上传文件").classes("w-full mt-5")
-
- left_header, right_header = make_header(left_drawer, right_drawer)
-
- with left_header:
- chat_session = (ui.radio(["会话1", "会话2"], value="会话1")
- .props("inline")
- .classes("p-0"))
-
- with left_drawer:
- ui.markdown("### 配置项")
-
- def on_chat_mode_change(e: ValueChangeEventArguments):
- if e.value == "Agent对话":
- session.cur_temperature = temperature.value
- temperature.set_value(0.01)
- else:
- temperature.set_value(session.cur_temperature)
-
- chat_mode = ui.select(["LLM 对话", "知识库问答", "搜索引擎问答", "Agent对话"],
- label="对话模式",
- value="LLM 对话",
- on_change=on_chat_mode_change,
- )
- ui.separator()
-
- with ui.expansion("模型配置", icon="psychology", value=True):
- running_models = await api.list_running_models()
- config_models = await api.list_config_models()
- models = {x: f"{x}(running)" for x in running_models}
- for v in config_models.values():
- for m in v:
- if m not in running_models:
- models.update({m: m})
- cur_llm_model = ui.select(models, label="LLM模型", value=LLM_MODELS[0], with_input=True, clearable=True)
- temperature = ui.number("Temperature", value=TEMPERATURE, min=0, max=1, step=0.01)
- history_len = ui.number("历史对话轮数", value=HISTORY_LEN, min=0, max=10)
-
- with (ui.expansion("知识库配置", icon="book", value=True)
- .bind_visibility_from(chat_mode, "value", value="知识库问答")):
- def on_kb_change(e: ValueChangeEventArguments):
- session.cur_kb = e.value
-
- kb_names = await api.list_knowledge_bases()
- kb_name = ui.select(kb_names,
- label="知识库",
- value=session.cur_kb or kb_names[0],
- on_change=on_kb_change,
- )
- vector_top_k = ui.number("Top K", value=VECTOR_SEARCH_TOP_K, min=1, max=10)
-
- with (ui.expansion("搜索引擎配置", icon="travel_explore", value=True)
- .bind_visibility_from(chat_mode, "value", value="搜索引擎问答")):
- search_engine = ui.select(["Bing", "Duckduckgo"], value="Bing")
- search_top_k = ui.number("Top K", value=SEARCH_ENGINE_TOP_K, min=1, max=10)
-
- await client.connected()
- with ui.column():
- await output_messages()
-
- with ui.row().classes("absolute bottom-2 left-20 right-20"):
- # command = ui.select(["/clear", "/upload"]).classes("w-1/4")
- query = (ui.input(autocomplete=["/clear", "/upload"],
- placeholder="input your question here.")
- .classes("flex-grow")
- .props('autogrow outlined autofocus counter dense clearable')
- .bind_value(session, "query")
- .on("keydown.enter.prevent", send)
- )
- with query.add_slot("after"):
- ui.button(icon="send", on_click=send).classes("self-center").props("small dense p-0 m-0")
- # query._props["autofocus"] = True
- # query._props["autogrow"] = True
- # query._props["placeholder"] = "input your question here."
- # query._props[":list"] = '["/clear", "/upload"]'
- # query._props["shadow-text"] = ["/clear", "/upload"]
- # ui.input(autocomplete=["/clear", "/upload"])
-
-
-
-# TODO:
-# 右侧栏上下文：system_message, picture, file, 知识库文档预览
-
-
-if __name__ in {"__main__", "__mp_main__"}:
- ui.run(port=5000, storage_secret="111111", reload=True)
diff --git a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/Home.md b/chatchat/chatchat/data/knowledge_base/samples/content/wiki/Home.md
deleted file mode 100644
index 71a324cb..00000000
--- a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/Home.md
+++ /dev/null
@@ -1,74 +0,0 @@
-
-
-
-> 欢迎来到 Langchain‐Chatchat 的 Wiki , 在这里开启 Langchain 与大模型的邂逅!
-
-
-## 项目简介
-
-📃 **LangChain-Chatchat** (原 Langchain-ChatGLM): 基于 Langchain 与 ChatGLM 等大语言模型的本地知识库问答应用实现。
-
-🤖️ 一种利用 [langchain](https://github.com/hwchase17/langchain) 思想实现的基于本地知识库的问答应用，目标期望建立一套对中文场景与开源模型支持友好、可离线运行的知识库问答解决方案。
-
-💡 受 [GanymedeNil](https://github.com/GanymedeNil) 的项目 [document.ai](https://github.com/GanymedeNil/document.ai) 和 [AlexZhangji](https://github.com/AlexZhangji) 创建的 [ChatGLM-6B Pull Request](https://github.com/THUDM/ChatGLM-6B/pull/216) 启发，建立了全流程可使用开源模型实现的本地知识库问答应用。本项目的最新版本中通过使用 [FastChat](https://github.com/lm-sys/FastChat) 接入 Vicuna, Alpaca, LLaMA, Koala, RWKV 等模型，依托于 [langchain](https://github.com/langchain-ai/langchain) 框架支持通过基于 [FastAPI](https://github.com/tiangolo/fastapi) 提供的 API 调用服务，或使用基于 [Streamlit](https://github.com/streamlit/streamlit) 的 WebUI 进行操作。
-
-✅ 依托于本项目支持的开源 LLM 与 Embedding 模型，本项目可实现全部使用**开源**模型**离线私有部署**。与此同时，本项目也支持 OpenAI GPT API 的调用，并将在后续持续扩充对各类模型及模型 API 的接入。
-
-⛓️ 本项目实现原理如下图所示，过程包括加载文件 -> 读取文本 -> 文本分割 -> 文本向量化 -> 问句向量化 -> 在文本向量中匹配出与问句向量最相似的 `top k`个 -> 匹配出的文本作为上下文和问题一起添加到 `prompt`中 -> 提交给 `LLM`生成回答。
-
-
-## 算法流程
-
-大家可以前往Bilibili平台查看原理介绍视频：
-
-📺 [原理介绍视频](https://www.bilibili.com/video/BV13M4y1e7cN/?share_source=copy_web&vd_source=e6c5aafe684f30fbe41925d61ca6d514)
-
-开发组也为大家绘制了一张实现原理图，效果如下：
-
-
-
-从文档处理角度来看，实现流程如下：
-
-
-
-
-## 技术路线图（截止0.2.10）
-
-- [X] Langchain 应用
- - [X] 本地数据接入
- - [X] 接入非结构化文档
- - [X] .txt, .rtf, .epub, .srt
- - [X] .eml, .msg
- - [X] .html, .xml, .toml, .mhtml
- - [X] .json, .jsonl
- - [X] .md, .rst
- - [X] .docx, .doc, .pptx, .ppt, .odt
- - [X] .enex
- - [X] .pdf
- - [X] .jpg, .jpeg, .png, .bmp
- - [X] .py, .ipynb
- - [X] 结构化数据接入
- - [X] .csv, .tsv
- - [X] .xlsx, .xls, .xlsd
- - [X] 分词及召回
- - [X] 接入不同类型 TextSplitter
- - [X] 优化依据中文标点符号设计的 ChineseTextSplitter
- - [X] 搜索引擎接入
- - [X] Bing 搜索
- - [X] DuckDuckGo 搜索
- - [X] Metaphor 搜索
- - [X] Agent 实现
- - [X] 基础React形式的Agent实现，包括调用计算器等
- - [X] Langchain 自带的Agent实现和调用
- - [X] 智能调用不同的数据库和联网知识
-- [X] LLM 模型接入
- - [X] 支持通过调用 [FastChat](https://github.com/lm-sys/fastchat) api 调用 llm
- - [X] 支持 ChatGLM API 等 LLM API 的接入
- - [X] 支持 Langchain 框架支持的LLM API 接入
-- [X] Embedding 模型接入
- - [X] 支持调用 HuggingFace 中各开源 Emebdding 模型
- - [X] 支持 OpenAI Embedding API 等 Embedding API 的接入
- - [X] 支持 智谱AI、百度千帆、千问、MiniMax 等在线 Embedding API 的接入
-- [X] 基于 FastAPI 的 API 方式调用
-- [X] Web UI
- - [X] 基于 Streamlit 的 Web UI
\ No newline at end of file
diff --git a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/_Sidebar.md b/chatchat/chatchat/data/knowledge_base/samples/content/wiki/_Sidebar.md
deleted file mode 100644
index 6d7fb6f6..00000000
--- a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/_Sidebar.md
+++ /dev/null
@@ -1,58 +0,0 @@
-__导航栏，一切从这里出发__
-## [Home](https://github.com/chatchat-space/Langchain-Chatchat/wiki)
-## [支持列表](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8)
-* [LLM 模型支持列表](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8#llm-%E6%A8%A1%E5%9E%8B%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8)
-* [Embedding 模型支持列表](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8#embedding-%E6%A8%A1%E5%9E%8B%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8)
-* [分词器支持列表](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8#%E5%88%86%E8%AF%8D%E5%99%A8%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8)
-* [向量数据库支持列表](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8#%E5%90%91%E9%87%8F%E6%95%B0%E6%8D%AE%E5%BA%93%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8)
-* [工具支持列表](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8#%E5%B7%A5%E5%85%B7%E6%94%AF%E6%8C%81%E5%88%97%E8%A1%A8)
-
-## [开发环境部署](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2)
-
-### 前期准备
- * [软件要求](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E8%BD%AF%E4%BB%B6%E8%A6%81%E6%B1%82)
- * [硬件要求](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E7%A1%AC%E4%BB%B6%E8%A6%81%E6%B1%82)
- * [VPN](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#vpn)
-
-### 部署代码
- * [Docker 部署](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#docker-%E9%83%A8%E7%BD%B2)
- * [最轻模式部署方案](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E6%9C%80%E8%BD%BB%E6%A8%A1%E5%BC%8F%E6%9C%AC%E5%9C%B0%E9%83%A8%E7%BD%B2%E6%96%B9%E6%A1%88)
- * [常规模式本地部署方案](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E5%B8%B8%E8%A7%84%E6%A8%A1%E5%BC%8F%E6%9C%AC%E5%9C%B0%E9%83%A8%E7%BD%B2%E6%96%B9%E6%A1%88)
- + [环境安装](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E6%9C%AC%E5%9C%B0%E9%83%A8%E7%BD%B2%E7%8E%AF%E5%A2%83%E5%AE%89%E8%A3%85)
- + [模型下载](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E6%A8%A1%E5%9E%8B%E4%B8%8B%E8%BD%BD)
- + [初始化知识库](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E5%88%9D%E5%A7%8B%E5%8C%96%E7%9F%A5%E8%AF%86%E5%BA%93)
- + [一键启动](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E4%B8%80%E9%94%AE%E5%90%AF%E5%8A%A8)
- + [多卡加载](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%BC%80%E5%8F%91%E7%8E%AF%E5%A2%83%E9%83%A8%E7%BD%B2#%E5%A4%9A%E5%8D%A1%E5%8A%A0%E8%BD%BD)
-
-## [参数配置](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%8F%82%E6%95%B0%E9%85%8D%E7%BD%AE)
-
-* [基础配置项 basic_config.py](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%8F%82%E6%95%B0%E9%85%8D%E7%BD%AE#%E5%9F%BA%E7%A1%80%E9%85%8D%E7%BD%AE%E9%A1%B9-basic_configpy)
-* [模型配置项 model_config.py](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%8F%82%E6%95%B0%E9%85%8D%E7%BD%AE#%E6%A8%A1%E5%9E%8B%E9%85%8D%E7%BD%AE%E9%A1%B9-model_configpy)
-* [提示词配置项 prompt_config.py](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%8F%82%E6%95%B0%E9%85%8D%E7%BD%AE#%E6%8F%90%E7%A4%BA%E8%AF%8D%E9%85%8D%E7%BD%AE%E9%A1%B9-prompt_configpy)
-* [数据库配置 kb_config.py](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%8F%82%E6%95%B0%E9%85%8D%E7%BD%AE#%E6%95%B0%E6%8D%AE%E5%BA%93%E9%85%8D%E7%BD%AE-kb_configpy)
-* [服务和端口配置项 server_config.py](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%8F%82%E6%95%B0%E9%85%8D%E7%BD%AE#%E6%9C%8D%E5%8A%A1%E5%92%8C%E7%AB%AF%E5%8F%A3%E9%85%8D%E7%BD%AE%E9%A1%B9-server_configpy)
-* [覆盖配置文件 或者配置 startup.py](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%8F%82%E6%95%B0%E9%85%8D%E7%BD%AE#%E8%A6%86%E7%9B%96%E9%85%8D%E7%BD%AE%E6%96%87%E4%BB%B6-%E6%88%96%E8%80%85%E9%85%8D%E7%BD%AE-startuppy)
-
-## [自定义](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E8%87%AA%E5%AE%9A%E4%B9%89)
-
-* [使用自定义的分词器](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E8%87%AA%E5%AE%9A%E4%B9%89#%E4%BD%BF%E7%94%A8%E8%87%AA%E5%AE%9A%E4%B9%89%E7%9A%84%E5%88%86%E8%AF%8D%E5%99%A8)
-* [使用自定义的 Agent 工具](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E8%87%AA%E5%AE%9A%E4%B9%89#%E4%BD%BF%E7%94%A8%E8%87%AA%E5%AE%9A%E4%B9%89%E7%9A%84-agent-%E5%B7%A5%E5%85%B7)
-* [使用自定义的微调模型](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E8%87%AA%E5%AE%9A%E4%B9%89#%E4%BD%BF%E7%94%A8%E8%87%AA%E5%AE%9A%E4%B9%89%E7%9A%84%E5%BE%AE%E8%B0%83%E6%A8%A1%E5%9E%8B)
-* [使用自定义的嵌入模型](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E8%87%AA%E5%AE%9A%E4%B9%89#%E4%BD%BF%E7%94%A8%E8%87%AA%E5%AE%9A%E4%B9%89%E7%9A%84%E5%B5%8C%E5%85%A5%E6%A8%A1%E5%9E%8B)
-* [日志功能](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%9C%80%E4%BD%B3%E5%AE%9E%E8%B7%B5#%E6%97%A5%E5%BF%97%E5%8A%9F%E8%83%BD)
-
-## [最佳实践](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%9C%80%E4%BD%B3%E5%AE%9E%E8%B7%B5)
-* [推荐的模型组合](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%9C%80%E4%BD%B3%E5%AE%9E%E8%B7%B5#%E6%8E%A8%E8%8D%90%E7%9A%84%E6%A8%A1%E5%9E%8B%E7%BB%84%E5%90%88)
-* [微调模型加载实操](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%9C%80%E4%BD%B3%E5%AE%9E%E8%B7%B5#%E5%BE%AE%E8%B0%83%E6%A8%A1%E5%9E%8B%E5%8A%A0%E8%BD%BD%E5%AE%9E%E6%93%8D)
-* [预处理知识库文件](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%9C%80%E4%BD%B3%E5%AE%9E%E8%B7%B5#%E9%A2%84%E5%A4%84%E7%90%86%E7%9F%A5%E8%AF%86%E5%BA%93%E6%96%87%E4%BB%B6)
-* [自定义的关键词调整Embedding模型](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%9C%80%E4%BD%B3%E5%AE%9E%E8%B7%B5#%E8%87%AA%E5%AE%9A%E4%B9%89%E7%9A%84%E5%85%B3%E9%94%AE%E8%AF%8D%E8%B0%83%E6%95%B4embedding%E6%A8%A1%E5%9E%8B)
-* [实际使用效果](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E6%9C%80%E4%BD%B3%E5%AE%9E%E8%B7%B5#%E5%AE%9E%E9%99%85%E4%BD%BF%E7%94%A8%E6%95%88%E6%9E%9C)
-
-## [做出贡献](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%81%9A%E5%87%BA%E8%B4%A1%E7%8C%AE)
-
-* [Issue 规范](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%81%9A%E5%87%BA%E8%B4%A1%E7%8C%AE#issue-%E8%A7%84%E8%8C%83)
-* [PR 规范](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%81%9A%E5%87%BA%E8%B4%A1%E7%8C%AE#pr-%E8%A7%84%E8%8C%83)
-
-## [合作伙伴](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%90%88%E4%BD%9C%E4%BC%99%E4%BC%B4)
-
-## [常见问题](https://github.com/chatchat-space/Langchain-Chatchat/wiki/%E5%B8%B8%E8%A7%81%E9%97%AE%E9%A2%98)
\ No newline at end of file
diff --git a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/做出贡献.md b/chatchat/chatchat/data/knowledge_base/samples/content/wiki/做出贡献.md
deleted file mode 100644
index 50d73b7f..00000000
--- a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/做出贡献.md
+++ /dev/null
@@ -1,51 +0,0 @@
-## Issue 规范
-> 什么样的 issue 是不会被回复的
-
-1. 在提出issue前，请查看您的提出的问题是否已经在 issue 列表或者 discussion 内出现，提出重复的问题将 **被关闭** 。
-2. 非项目推荐配置的任何关于环境配置问题的 issue 通常将 **不会由官方回复**，请您在微信沟通群内咨询。
-3. 与项目无关的 issue 将 **不会被回复** 。
-4. 超过30天没有更新动态的 issue 将 **被关闭** 。
-5. 语言非中文和英语的 issue 将 **被关闭** 。
-6. 没有尝试过解决方案的 issue 将 **被关闭** 。
-7. 没有提出任何贡献（例如PR，论文）的 feature / enhancement 将会 **被关闭** 。您可以在 discussion 中的 **希望开发的功能** 讨论区中留言，我们开发组会进行回复。
-8. 不按照 Issue 规范提出的 issue 可能将 **被关闭** 。
-
-> 如何提 issue
-
-1. 简要阐述你的问题
-2. 配上报错日志以(运行报错)或者运行不理想的效果图(原本期望和现实的)
-3. 配上对应的配置文件以你的环境
-4. 你尝试过的解决方法。（非常重要）
-5. 按照模板提出Issue
-
-## PR 规范
-
-> 什么样的 PR 是不会被接受的
-1. 非紧急bug修复的PR并直接提交到```master```的PR。
-2. 仅仅修改```Readme.md```和```配置文件```的。
-3. 跟项目组已经开发的内容冲突的(dev版本)，将可能被拒绝。
-
-首先请注意所有的PR需要以dev分支为基准，master分支仅用来发行与紧急bug修复。
-
-> 提出新的通用自定义分词器
-
-1. 将您的分词器所在的代码文件放在```text_splitter```文件夹下，文件名为您的分词器名字`my_splitter.py`，然后在`__init__.py`中导入您的分词器。
-2. 发起PR，并说明您的分词器面向的场景或者改进之处。我们非常期待您能举例一个具体的应用场景。
-
-> 提出新的 Agent 工具
-
-1. 将您的Agent工具所在的代码放在 ```server/agent```文件夹下，文件名为您的工具名字`my_tools.py`，然后在`tools.py`中导入您的工具。
-2. 发起PR，说明您的工具面向的场景或改进之处，并说明如何进行测试和调用。我们非常期待您能举例一个具体的应用场景。
-
-> 提出新的自定义模型
-
-1. 将您的模型贡献到huggingface平台上，并开放给开发人员下载。
-2. 发起PR，说明您的工具面向的场景或改进之处，并说明如何进行测试和调用。我们非常期待您能举例一个具体的应用场景。
-3. 由开发人员测试通过后，将您的模型添加到合作模型名单中。
-
-
-> 修复 Bug & 增加其他新功能
-
-1. 一个 PR 中必须 **只有一个或者一类功能增加，或者修复一个bug** ，多个功能混合的 PR 将 **不会被接受** 。
-2. 说明您增加的功能或者改进之处，并说明如何进行测试和调用。我们非常期待您能举例一个具体的应用场景。
-
diff --git a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/参数配置.md b/chatchat/chatchat/data/knowledge_base/samples/content/wiki/参数配置.md
deleted file mode 100644
index 23408613..00000000
--- a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/参数配置.md
+++ /dev/null
@@ -1,156 +0,0 @@
-在开始参数配置之前，先执行以下脚本
-```shell
-python copy_config_example.py
-```
-该脚本将会将所有```config```目录下的配置文件样例复制一份到```config```目录下，方便开发者进行配置。
-接着，开发者可以根据自己的需求，对配置文件进行修改。
-
-## 基础配置项 basic_config.py
-该配置基负责记录日志的格式和储存路径，通常不需要修改。
-
-## 模型配置项 model_config.py
-本文件包含本地LLM模型、本地Embeddings模型、在线LLM模型API的相关配置。
-
-- 本地模型路径配置。建议将所有下载的模型放到一个统一的目录下，然后将`MODEL_ROOT_PATH`指定为该目录，只要模型目录名称符合下列情况之一（以text2vec为例），即可自动识别加载：
- - text2vec，即MODEL_PATH中的键
- - GanymedeNil/text2vec-large-chinese，即MODEL_PATH中的值
- - text2vec-large-chinese，即MODEL_PATH中的值的简写形式
-
-- 在线模型API配置。在`ONLINE_LLM_MODEL`已经预先写好了所有支持的在线API服务，通常只需要把申请的API_KEY等填入即可。
-有些在线API服务需要安装额外的依赖：
- - zhipu-api: zhipuai
- - fangzhou-api: volcengine>=1.0.106
- - qianfan-api: qianfan
- - qwen-api: dashscope
-
-- HISTORY_LEN。历史对话轮数通常不建议设置超过10，因为这可能导致以下问题
- 1. 显存占用过高：尤其是部分模型，本身就已经要占用满显存的情况下，保留太多历史，一次传入token太多，可能会爆显存。
- 2. 速度处理很慢：还是因为一次传入了太多token，导致速度很慢。
-
-- TEMPERATURE。通常不建议设置过高。
-在Agent对话模式和知识库问答中，我们强烈建议将要其设置成0或者接近于0。
-
-- Agent_MODEL = None
-我们支持用户使用“模型接力赛”的用法，即：
-选择的大模型仅能调用工具，但是在工具中表现较差，则这个工具作为 “模型调用工具”
-如果用户设置了Agent_MODEL，则在 Agent 中，使用Agent_MODEL来执行任务，否则，使用LLM_MODEL
-
-
-## 提示词配置项 prompt_config.py
-
-提示词配置分为三个板块，分别对应三种聊天类型。
-- llm_chat: 基础的对话提示词， 通常来说，直接是用户输入的内容，没有系统提示词。
-- knowledge_base_chat: 与知识库对话的提示词，在模板中，我们为开发者设计了一个系统提示词，开发者可以自行更改。
-- agent_chat: 与Agent对话的提示词，同样，我们为开发者设计了一个系统提示词，开发者可以自行更改。
-
-prompt模板使用Jinja2语法，简单点就是用双大括号代替f-string的单大括号
-请注意，本配置文件支持热加载，修改prompt模板后无需重启服务。
-
-## 数据库配置 kb_config.py
-请确认本地分词器路径是否已经填写，如：
-
-```
-text_splitter_dict = {
- "ChineseRecursiveTextSplitter": {
- "source":"huggingface", # 选择tiktoken则使用openai的方法,不填写则默认为字符长度切割方法。
- "tokenizer_name_or_path":"", # 空格不填则默认使用大模型的分词器。
- }
-}
-```
-设置好的分词器需要再```TEXT_SPLITTER_NAME```中指定并应用。
-
-在这里，通常使用```huggingface```的方法，并且，我们推荐使用大模型自带的分词器来完成任务。
-
-请注意，使用```gpt2```分词器将要访问huggingface官网下载权重。
-
-我们还支持使用```tiktoken``` 和传统的 按照长度分词的方式，开发者可以自行配置。
-
-如果希望调用自己的分词器，请参考[最佳实践]部分。
-
-```kbs_config```设置了使用的向量数据库，目前可以选择
-- ```faiss```: 使用faiss数据库，需要安装faiss-gpu
-- ```milvus```: 使用milvus数据库，需要安装milvus并进行端口配置
-- ```pg```: 使用pg数据库，需要配置connection_uri
-
-## 服务和端口配置项 server_config.py
-
-通常，这个页面并不需要进行大量的修改，仅需确保对应的端口打开，并不互相冲突即可。
-
-如果你是Linux系统推荐设置
-
-```
-DEFAULT_BIND_HOST ="0.0.0.0"
-```
-如果使用联网模型，则需要关注联网模型的端口。
-
-这些模型必须是在model_config.MODEL_PATH或ONLINE_MODEL中正确配置的。
-
-#在启动startup.py时，可用通过`--model-worker --model-name xxxx`指定模型，不指定则为LLM_MODEL
-
-
-## 覆盖配置文件 或者配置 startup.py
-
-在 ```server_config.py```中有以下配置文件被注释了
-
-```
-"gpus": None, # 使用的GPU，以str的格式指定，如"0,1"，如失效请使用CUDA_VISIBLE_DEVICES="0,1"等形式指定
-"num_gpus": 1, # 使用GPU的数量
-"max_gpu_memory":"20GiB", # 每个GPU占用的最大显存
-
- 以下为model_worker非常用参数，可根据需要配置
-"load_8bit": False, # 开启8bit量化
-"cpu_offloading": None,
-"gptq_ckpt": None,
-"gptq_wbits": 16,
-"gptq_groupsize": -1,
-"gptq_act_order": False,
-"awq_ckpt": None,
-"awq_wbits": 16,
-"awq_groupsize": -1,
-"model_names": [LLM_MODEL],
-"conv_template": None,
-"limit_worker_concurrency": 5,
-"stream_interval": 2,
-"no_register": False,
-"embed_in_truncate": False,
-
- 以下为vllm_woker配置参数,注意使用vllm必须有gpu，仅在Linux测试通过
-
- tokenizer = model_path # 如果tokenizer与model_path不一致在此处添加
- 'tokenizer_mode':'auto',
- 'trust_remote_code':True,
- 'download_dir':None,
- 'load_format':'auto',
- 'dtype':'auto',
- 'seed':0,
- 'worker_use_ray':False,
- 'pipeline_parallel_size':1,
- 'tensor_parallel_size':1,
- 'block_size':16,
- 'swap_space':4 , # GiB
- 'gpu_memory_utilization':0.90,
- 'max_num_batched_tokens':2560,
- 'max_num_seqs':256,
- 'disable_log_stats':False,
- 'conv_template':None,
- 'limit_worker_concurrency':5,
- 'no_register':False,
- 'num_gpus': 1
- 'engine_use_ray': False,
- 'disable_log_requests': False
-```
-
-在这些参数中，如果没有设置，则使用```startup.py```中的默认值，如果设置了，则使用设置的值。
-因此，强烈建议开发不要在```startup.py```中进行配置，而应该在```server_config.py```中进行配置。避免配置文件覆盖。
-
-## 选择使用的模型
-在```model_config.py```完成模型配置后，还不能直接使用，需要在该文件下配置本地模型的运行方式或在线模型的API，例如
-```
- "agentlm-7b": { # 使用default中的IP和端口
- "device": "cuda",
- },
- "zhipu-api": { # 请为每个要运行的在线API设置不同的端口
- "port": 21001,
- },
-```
-本地模型使用default中的IP和端口，在线模型可以自己选择端口
\ No newline at end of file
diff --git a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/合作伙伴.md b/chatchat/chatchat/data/knowledge_base/samples/content/wiki/合作伙伴.md
deleted file mode 100644
index e84b59c8..00000000
--- a/chatchat/chatchat/data/knowledge_base/samples/content/wiki/合作伙伴.md
+++ /dev/null
@@ -1,37 +0,0 @@
-## 合作伙伴名单
-🎉 Langchain-Chatchat 项目合作伙伴，感谢以下合作伙伴对本项目的支持。
-
-|
-
- |
- - ChatGLM: 国内最早的开源中文大模型之一 - | -
|
-
- |
- - AutoDL 提供弹性、好用、省钱的云GPU租用服务。缺显卡就上 AutoDL.com - | -
|
-
- |
- - 全球云计算领导者 - | -
|
-
- |
- - 我们相信预测未来的最好方式是自己来创造。我们在这里等你。 - | -
-
-🎉 Langchain-Chatchat 项目微信交流群，如果你也对本项目感兴趣，欢迎加入群聊参与讨论交流。
-
-### 公众号
-
-
-
-🎉 Langchain-Chatchat 项目官方公众号，欢迎扫码关注。
diff --git a/chatchat/chatchat/data/knowledge_base/test/vector_store/bge-large-zh-v1.5/index.faiss b/chatchat/chatchat/data/knowledge_base/test/vector_store/bge-large-zh-v1.5/index.faiss
deleted file mode 100644
index 700502e6..00000000
Binary files a/chatchat/chatchat/data/knowledge_base/test/vector_store/bge-large-zh-v1.5/index.faiss and /dev/null differ
diff --git a/chatchat/chatchat/data/knowledge_base/test/vector_store/bge-large-zh-v1.5/index.pkl b/chatchat/chatchat/data/knowledge_base/test/vector_store/bge-large-zh-v1.5/index.pkl
deleted file mode 100644
index 1f7ca5b7..00000000
Binary files a/chatchat/chatchat/data/knowledge_base/test/vector_store/bge-large-zh-v1.5/index.pkl and /dev/null differ
diff --git a/chatchat/chatchat/data/knowledge_base/test/vector_store/bge/index.faiss b/chatchat/chatchat/data/knowledge_base/test/vector_store/bge/index.faiss
deleted file mode 100644
index ba31968e..00000000
Binary files a/chatchat/chatchat/data/knowledge_base/test/vector_store/bge/index.faiss and /dev/null differ
diff --git a/chatchat/chatchat/data/knowledge_base/test/vector_store/bge/index.pkl b/chatchat/chatchat/data/knowledge_base/test/vector_store/bge/index.pkl
deleted file mode 100644
index b731580d..00000000
Binary files a/chatchat/chatchat/data/knowledge_base/test/vector_store/bge/index.pkl and /dev/null differ
diff --git a/chatchat/chatchat/data/knowledge_base/test/vector_store/qwen-api/index.faiss b/chatchat/chatchat/data/knowledge_base/test/vector_store/qwen-api/index.faiss
deleted file mode 100644
index bb938827..00000000
Binary files a/chatchat/chatchat/data/knowledge_base/test/vector_store/qwen-api/index.faiss and /dev/null differ
diff --git a/chatchat/chatchat/data/knowledge_base/test/vector_store/qwen-api/index.pkl b/chatchat/chatchat/data/knowledge_base/test/vector_store/qwen-api/index.pkl
deleted file mode 100644
index 3d9d7560..00000000
Binary files a/chatchat/chatchat/data/knowledge_base/test/vector_store/qwen-api/index.pkl and /dev/null differ