DeepSearcher是什么？

DeepSearcher 是一個開源的深度搜索工具，結合了大型語言模型和向量數據庫，用于在私有數據上進行搜索、評估和推理。DeepSearcher 適用于需要高效處理私有數據、生成智能內容和提供數據分析的場景，尤其適合企業、研究機構和金融、醫療、法律等行業。

DeepSearcher功能特征

• 私有數據搜索：在企業內部數據中安全地進行搜索，支持本地文件和網頁爬取。

• 向量數據庫支持：集成 Milvus 和 Zilliz Cloud，實現高效數據檢索。

• 多 LLM 支持：兼容 Openai、DeepSeek、Claude 等多種語言模型，用于智能問答和內容生成。

• 靈活的嵌入模型：支持 OpenAI、Milvus 內置模型、VoyageAI 等，用于數據向量化。

• 文檔加載器：支持本地 PDF、TXT 等文件加載，以及網頁內容爬取。

• 高效推理：結合 LLM 和向量數據庫，快速生成準確答案和全面報告。

• 靈活配置：通過代碼或配置文件動態調整模塊，支持 RESTful API 接口。

• CLI 模式：支持命令行加載數據和查詢，方便快速上手。

• 部署為服務：可通過 FastAPI 部署為 Web 服務，便于集成。

DeepSearcher 的應用場景

• 企業知識管理：快速檢索內部文檔和知識庫。

• 智能問答系統：構建企業內部智能客服或問答助手。

• 報告生成：自動生成市場、技術或行業報告。

• 信息檢索：在海量數據中快速定位關鍵信息。

• 內容創作輔助：生成文案、新聞稿等文本內容。

• 數據分析：提供商業智能分析和市場趨勢洞察。

• 教育與研究：輔助學術研究和文獻綜述。

• 醫療健康：檢索醫學文獻和分析病歷。

• 金融行業：生成投資報告和風險評估。

• 法律行業：檢索法律條文和案例分析。

• 多語言內容處理：支持跨國企業多語言數據處理。

DeepSearcher安裝使用

安裝步驟：

1. 克隆倉庫：

git clone https://github.com/zilliztech/deep-searcher.git
cd deep-searcher

2. 創建虛擬環境：

python3 -m venv .venv
source .venv/bin/activate

3. 安裝依賴：

pip install -e .

4. 配置環境變量：

根據使用的 LLM，設置對應的 API 密鑰（如 OPENAI_API_KEY）。

使用方法：

1. 配置 LLM 和嵌入模型：

from deepsearcher.configuration import Configuration, init_config
config = Configuration()
config.set_provider_config("llm", "OpenAI", {"model": "o1-mini"})
config.set_provider_config("embedding", "OpenAIEmbedding", {"model": "text-embedding-ada-002"})
init_config(config=config)

2. 加載數據：

from deepsearcher.offline_loading import load_from_local_files
load_from_local_files(paths_or_directory="your_local_path")

3. 執行查詢：

from deepsearcher.online_query import query
result = query("Write a report about xxx.")
print(result)

GitHub倉庫：https://github.com/zilliztech/deep-searcher