Skip to main content
Glama
Sign In
enesjakozh

Doc Scraper MCP Server

by askjohngeorge
GitHub
Python
2
  • Linux
  • Apple
OverviewInspectNewSchemaRelated ServersReviewsScore
Need Help?View Source CodeReport Issue

Integrations

  • Converts HTML documentation to markdown format and saves the converted documentation to a specified output path

Doc Scraper MCP 服务器

提供文档抓取功能的模型上下文协议 (MCP) 服务器。该服务器使用 jina.ai 的转换服务将基于 Web 的文档转换为 Markdown 格式。

特征

  • 从任何网址抓取文档
  • 将 HTML 文档转换为 markdown 格式
  • 将转换后的文档保存到指定的输出路径
  • 与模型上下文协议 (MCP) 集成

安装

通过 Smithery 安装

要通过Smithery自动安装适用于 Claude Desktop 的 Doc Scraper：

npx -y @smithery/cli install @askjohngeorge/mcp-doc-scraper --client claude
  1. 克隆存储库：
git clone https://github.com/askjohngeorge/mcp-doc-scraper.git cd mcp-doc-scraper
  1. 创建并激活虚拟环境：
python -m venv venv source venv/bin/activate # On Windows, use: venv\Scripts\activate
  1. 安装依赖项：
pip install -e .

用法

可以使用 Python 运行服务器：

python -m mcp_doc_scraper

工具描述

服务器提供一个单一工具：

  • 名称： scrape_docs
  • 描述：从 URL 抓取文档并保存为 markdown
  • 输入参数：
    • url ：要抓取的文档的 URL
    • output_path ：markdown 文件的保存路径

项目结构

doc_scraper/ ├── __init__.py ├── __main__.py └── server.py

依赖项

  • aiohttp
  • 甲基氯丙烯
  • 派丹蒂克

发展

设置开发环境：

  1. 安装开发依赖项：
pip install -r requirements.txt
  1. 服务器使用模型上下文协议 (MCP)。请务必熟悉MCP 文档。

执照

MIT 许可证

This server cannot be installed

-
security - not tested
F
license - not found
-
quality - not tested

local-only server

The server can only run on the client's local machine because it depends on local resources.

使用 jina.ai 的转换服务将基于 Web 的文档转换为 markdown 格式，允许用户从任何 URL 抓取文档并将其保存为 markdown 文件。

  1. Features
    1. Installation
      1. Installing via Smithery
    2. Usage
      1. Tool Description
    3. Project Structure
      1. Dependencies
        1. Development
          1. License

            Related Resources

            Related MCP Servers

            • MCP JinaAI Reader Server

              spences10
              A
              security
              A
              license
              A
              quality
              Integrates Jina.ai's Reader API with LLMs for efficient and structured web content extraction, optimized for documentation and web content analysis.
              Last updated -
              1
              24
              24
              JavaScript
              MIT License
              • Linux

            • Markdownify MCP Server

              zcaceres
              A
              security
              A
              license
              A
              quality
              Converts various file types and web content to Markdown format. It provides a set of tools to transform PDFs, images, audio files, web pages, and more into easily readable and shareable Markdown text.
              Last updated -
              10
              16
              987
              TypeScript
              MIT License

            • MarkItDown MCP Server

              KorigamiK
              A
              security
              A
              license
              A
              quality
              Converts various file formats to Markdown using the MarkItDown utility and can be integrated with MCP clients for seamless document processing and conversion.
              Last updated -
              26
              Python
              MIT License

            • Markdown Downloader

              dazeb
              A
              security
              A
              license
              A
              quality
              An MCP server that enables users to download webpages as markdown files using r.jina.ai service, with features for configurable download directories and automatic date-stamped filenames.
              Last updated -
              5
              1
              10
              JavaScript
              MIT License

            View all related MCP servers

            Appeared in Searches

            ID: a5s4bbasd2