我爱我色成人网,欧美日韩国产色,欧美亚视频在线中文字幕免费,亚洲国产影院

DevDocs:一款專為程序員打造的開源文檔爬取和處理工具

DevDocs是什么?

DevDocs 是一款由 CyberAGI Inc專為程序員設計的開源技術文檔管理工具。它支持智能爬取技術文檔,可自定義爬取深度,自動發現并分類相關內容,提取純凈信息并支持導出為 MD 或 JSON 格式,將以往需要花數周理解文檔的時間縮短至幾個小時。除此之外,DevDocs還內置 MCP 服務器,支持集成到 Claude、Cursor、Cline 等 ai 應用,實現聊天對話查詢文檔。

DevDocs:一款專為程序員打造的開源文檔爬取和處理工具.webp

DevDocs功能特征

智能爬取:

  • 支持選擇爬取深度(1-5 級)。

  • 自動發現并分類所有相關頁面。

  • 可選擇性爬取,精確提取所需內容。

  • 自動檢測并映射網站結構中的子 URL。

性能與速度:

  • 支持并行處理,可同時爬取多個頁面。

  • 智能緩存,避免重復爬取內容。

  • 支持懶加載,可處理現代 Web 應用。

  • 尊重服務器,設置了爬取速率限制。

內容處理:

  • 提取純凈內容,去除無關信息。

  • 支持導出為 MD 或 JSON 格式,方便用于 LLM 微調。

  • 邏輯化組織內容,便于理解和使用。

  • 與 MCP 服務器集成,可直接用于 AI 處理。

企業級功能:

  • 爬取失敗時自動重試。

  • 全面記錄操作日志。

  • 提供 API 接口,方便與其他工具集成。

  • 支持團隊管理,可設置多個席位和角色。

DevDocs:一款專為程序員打造的開源文檔爬取和處理工具.webp

DevDocs使用教程方法

啟動服務:

  • 使用 Docker(推薦):

  • 克隆項目倉庫:git clone https://github.com/cyberagiinc/DevDocs.git

  • 進入項目目錄:cd DevDocs

  • 根據操作系統運行啟動腳本:

  • Mac/Linux:./docker-start.sh

  • Windows:docker-start.bat

  • 手動設置權限(Windows 用戶可能需要):

  • 通過 Windows 資源管理器:

  1. 右鍵單擊 logs、storage、crawl_results 目錄。

  2. 選擇“屬性”。

  3. 切換到“安全”選項卡。

  4. 點擊“編輯”以更改權限。

  5. 點擊“添加”以添加用戶或組。

  6. 輸入“Everyone”,并點擊“檢查名稱”。

  7. 點擊“確定”。

  8. 在列表中選擇“Everyone”。

  9. 勾選“允許”下的“完全控制”。

  10. 點擊“應用”和“確定”。

通過命令提示符(以管理員身份運行):

icacls logs /grant Everyone:F /T
icacls storage /grant Everyone:F /T
icacls crawl_results /grant Everyone:F /T

訪問 DevDocs:

  • 前端 UI:http://localhost:3001

  • 后端 API:http://localhost:24125

  • Crawl4AI 服務:http://localhost:11235

查看日志:

  • 使用 Docker 時,可以通過以下命令查看容器日志:

  • 查看特定容器的日志:docker logs devdocs-frontend、docker logs devdocs-backend、docker logs devdocs-mcp、docker logs devdocs-crawl4ai

  • 實時跟蹤日志:docker logs -f devdocs-backend

停止服務:

在運行 docker-start 的終端中按下 Ctrl+C。

如何集成Cline/Roo

1. 創建模式:

  • 在Roo Code中打開“模式”界面,點擊+號創建一個新的模式特定提示。

2. 命名模式(例如,Research_MCP)。

3. 定義角色:

  • 專業知識:開發者文檔檢索、技術綜合和文檔搜索。

  • 個性:系統化、注重細節、精確。

  • 行為指令:始終使用目錄和章節訪問工具來回答關于MCP文檔的查詢。

4. 自定義指令:

  • 目錄工具:返回完整的或過濾后的文檔主題列表。

  • 章節訪問工具:檢索特定文檔章節的詳細內容。

5. 工作流程:

  • 解析用戶查詢以提取關鍵主題、關鍵詞和上下文。

  • 使用目錄工具搜索文檔索引以找到相關章節。

  • 對于每個識別出的相關文檔或章節,使用章節訪問工具檢索其內容。

  • 合并檢索到的內容,確保包含所有必要的細節,并清晰引用。

Github:https://github.com/cyberagiinc/DevDocs

官網:https://www.cyberagi.ai/

收藏
最新工具
Custom Cursor
Custom Cursor

一個能讓你擁有個性化光標的網站。Custom Cursor網站有...

橙子8設計
橙子8設計

一站式AI電商圖片制作平臺,專為電商和跨境賣家服務。不用專業設計...

Sandspiel
Sandspiel

一款基于細胞自動機和實時物理的開源像素沙盤游戲,玩家可以在虛擬沙...

印象地圖
印象地圖

這是個可以幫你記住全國省市位置的測試工具。打開網站就能用,選個模...

Sandtris
Sandtris

一款把經典俄羅斯方塊和流沙物理效果結合的休閑游戲。玩家需要利用沙...

Maze Toys
Maze Toys

一個以迷宮游戲為主的網站,提供多種類型的迷宮玩法,包括Mini、...

AiPyApp
AiPyApp

一款以Python為核心的開源新人工智能體助手,結合大模型和 P...

Adobe Express
Adobe Express

Adobe推出的一站式設計工具,整合了圖像、視頻、文檔/PDF、...

Intangible AI
Intangible AI

創意行業空間智能AI平臺,通過簡潔的3D界面與空間智能技術解決A...

法大大iTerms
法大大iTerms

法大大推出的一站式法律AI工作臺,基于自研法律大模型的AI智能體...

主站蜘蛛池模板: 大冶市| 南充市| 华坪县| 盐边县| 曲阜市| 江源县| 靖西县| 远安县| 平安县| 宁陵县| 正安县| 江永县| 彰化市| 康平县| 庆云县| 方山县| 会东县| 凯里市| 安平县| 南投市| 军事| 西城区| 花莲县| 海兴县| 彰化县| 玉门市| 金寨县| 鄂州市| 普洱| 宽甸| 朝阳市| 克什克腾旗| 龙山县| 舟曲县| 大竹县| 屏东县| 铁岭县| 平原县| 龙泉市| 平遥县| 本溪市|