我爱我色成人网,欧美日韩国产色,欧美亚视频在线中文字幕免费,亚洲国产影院

DevDocs:一款專為程序員打造的開源文檔爬取和處理工具

DevDocs是什么?

DevDocs 是一款由 CyberAGI Inc專為程序員設計的開源技術文檔管理工具。它支持智能爬取技術文檔,可自定義爬取深度,自動發現并分類相關內容,提取純凈信息并支持導出為 MD 或 JSON 格式,將以往需要花數周理解文檔的時間縮短至幾個小時。除此之外,DevDocs還內置 MCP 服務器,支持集成到 Claude、Cursor、Cline 等 ai 應用,實現聊天對話查詢文檔。

DevDocs:一款專為程序員打造的開源文檔爬取和處理工具.webp

DevDocs功能特征

智能爬取:

  • 支持選擇爬取深度(1-5 級)。

  • 自動發現并分類所有相關頁面。

  • 可選擇性爬取,精確提取所需內容。

  • 自動檢測并映射網站結構中的子 URL。

性能與速度:

  • 支持并行處理,可同時爬取多個頁面。

  • 智能緩存,避免重復爬取內容。

  • 支持懶加載,可處理現代 Web 應用。

  • 尊重服務器,設置了爬取速率限制。

內容處理:

  • 提取純凈內容,去除無關信息。

  • 支持導出為 MD 或 JSON 格式,方便用于 LLM 微調。

  • 邏輯化組織內容,便于理解和使用。

  • 與 MCP 服務器集成,可直接用于 AI 處理。

企業級功能:

  • 爬取失敗時自動重試。

  • 全面記錄操作日志。

  • 提供 API 接口,方便與其他工具集成。

  • 支持團隊管理,可設置多個席位和角色。

DevDocs:一款專為程序員打造的開源文檔爬取和處理工具.webp

DevDocs使用教程方法

啟動服務:

  • 使用 Docker(推薦):

  • 克隆項目倉庫:git clone https://github.com/cyberagiinc/DevDocs.git

  • 進入項目目錄:cd DevDocs

  • 根據操作系統運行啟動腳本:

  • Mac/Linux:./docker-start.sh

  • Windows:docker-start.bat

  • 手動設置權限(Windows 用戶可能需要):

  • 通過 Windows 資源管理器:

  1. 右鍵單擊 logs、storage、crawl_results 目錄。

  2. 選擇“屬性”。

  3. 切換到“安全”選項卡。

  4. 點擊“編輯”以更改權限。

  5. 點擊“添加”以添加用戶或組。

  6. 輸入“Everyone”,并點擊“檢查名稱”。

  7. 點擊“確定”。

  8. 在列表中選擇“Everyone”。

  9. 勾選“允許”下的“完全控制”。

  10. 點擊“應用”和“確定”。

通過命令提示符(以管理員身份運行):

icacls logs /grant Everyone:F /T
icacls storage /grant Everyone:F /T
icacls crawl_results /grant Everyone:F /T

訪問 DevDocs:

  • 前端 UI:http://localhost:3001

  • 后端 API:http://localhost:24125

  • Crawl4AI 服務:http://localhost:11235

查看日志:

  • 使用 Docker 時,可以通過以下命令查看容器日志:

  • 查看特定容器的日志:docker logs devdocs-frontend、docker logs devdocs-backend、docker logs devdocs-mcp、docker logs devdocs-crawl4ai

  • 實時跟蹤日志:docker logs -f devdocs-backend

停止服務:

在運行 docker-start 的終端中按下 Ctrl+C。

如何集成Cline/Roo

1. 創建模式:

  • 在Roo Code中打開“模式”界面,點擊+號創建一個新的模式特定提示。

2. 命名模式(例如,Research_MCP)。

3. 定義角色:

  • 專業知識:開發者文檔檢索、技術綜合和文檔搜索。

  • 個性:系統化、注重細節、精確。

  • 行為指令:始終使用目錄和章節訪問工具來回答關于MCP文檔的查詢。

4. 自定義指令:

  • 目錄工具:返回完整的或過濾后的文檔主題列表。

  • 章節訪問工具:檢索特定文檔章節的詳細內容。

5. 工作流程:

  • 解析用戶查詢以提取關鍵主題、關鍵詞和上下文。

  • 使用目錄工具搜索文檔索引以找到相關章節。

  • 對于每個識別出的相關文檔或章節,使用章節訪問工具檢索其內容。

  • 合并檢索到的內容,確保包含所有必要的細節,并清晰引用。

Github:https://github.com/cyberagiinc/DevDocs

官網:https://www.cyberagi.ai/

收藏
最新工具
PrettyScale
PrettyScale

一個在線面部分析及顏值打分網站,用戶通過上傳照片或直接用攝像頭參...

圓周旅跡
圓周旅跡

一款旅游出行AI智能規劃APP,它可以直接從小紅書這些平臺導入別...

Wonderplan AI
Wonderplan AI

一個免費的AI旅游規劃工具,能根據你的喜好、需求生成專屬行程,支...

智寫流程
智寫流程

一個能自動記錄網頁操作并生成操作指南的工具。它能捕捉鼠標點擊、鍵...

ReactBits
ReactBits

一個免費開源的動畫化、可交互React組件庫,里面有好多動畫化、...

電視眼
電視眼

也叫TV眼,是一個在線網絡電視直播網站,提供全國5000+個電視...

Excel Dashboard Ai
Excel Dashboard Ai

一款能自動把 Excel 或 CSV 文件變成帶交互功能的儀表盤...

ByRutor
ByRutor

俄羅斯的一個免費游戲資源下載網站,提供超23,000多款游戲,涵...

RandomStreetView
RandomStreetView

一個可以隨機展示全球谷歌街景照片的網站,每次點按鈕,系統會隨機選...

ZType
ZType

官網:zty.pe,一個把打字練習和射擊游戲結合的在線工具。玩家...

主站蜘蛛池模板: 威信县| 汝城县| 鄂伦春自治旗| 丰都县| 囊谦县| 北川| 无锡市| 凤庆县| 乐亭县| 建始县| 永靖县| 黑龙江省| 含山县| 邵阳县| 亚东县| 新乡县| 江源县| 合作市| 阳新县| 肥乡县| 文山县| 凌海市| 陆川县| 叶城县| 农安县| 宝丰县| 肥东县| 四川省| 阳东县| 黄梅县| 汨罗市| 磐安县| 阿拉善右旗| 高雄县| 丰镇市| 峨眉山市| 满洲里市| 卓尼县| 正定县| 沙坪坝区| 锡林郭勒盟|