Doc Scraper MCP Server

local-only server

The server can only run on the client’s local machine because it depends on local resources.

Integrations

  • Converts HTML documentation to markdown format and saves the converted documentation to a specified output path

ドキュメントスクレーパーMCPサーバー

ドキュメントスクレイピング機能を提供するModel Context Protocol(MCP)サーバー。このサーバーは、jina.aiの変換サービスを使用して、WebベースのドキュメントをMarkdown形式に変換します。

特徴

  • 任意のWeb URLからドキュメントをスクレイピングします
  • HTMLドキュメントをマークダウン形式に変換します
  • 変換されたドキュメントを指定された出力パスに保存します
  • モデルコンテキストプロトコル(MCP)と統合

インストール

Smithery経由でインストール

Smithery経由で Claude Desktop 用の Doc Scraper を自動的にインストールするには:

npx -y @smithery/cli install @askjohngeorge/mcp-doc-scraper --client claude
  1. リポジトリをクローンします。
git clone https://github.com/askjohngeorge/mcp-doc-scraper.git cd mcp-doc-scraper
  1. 仮想環境を作成してアクティブ化します。
python -m venv venv source venv/bin/activate # On Windows, use: venv\Scripts\activate
  1. 依存関係をインストールします。
pip install -e .

使用法

サーバーは Python を使用して実行できます。

python -m mcp_doc_scraper

ツールの説明

サーバーは次の単一のツールを提供します:

  • 名前: scrape_docs
  • 説明: URLからドキュメントをスクレイピングし、マークダウンとして保存します
  • 入力パラメータ:
    • url : スクレイピングするドキュメントのURL
    • output_path : マークダウンファイルを保存するパス

プロジェクト構造

doc_scraper/ ├── __init__.py ├── __main__.py └── server.py

依存関係

  • aiohttp
  • マクピー
  • ピダンティック

発達

開発環境をセットアップするには:

  1. 開発依存関係をインストールします。
pip install -r requirements.txt
  1. サーバーはモデルコンテキストプロトコル( MCP)を使用します。MCPのドキュメントをよくお読みください。

ライセンス

MITライセンス

-
security - not tested
F
license - not found
-
quality - not tested

jina.ai の変換サービスを使用して Web ベースのドキュメントをマークダウン形式に変換し、ユーザーが任意の URL からドキュメントをスクレイピングしてマークダウン ファイルとして保存できるようにします。

  1. Features
    1. Installation
      1. Installing via Smithery
    2. Usage
      1. Tool Description
    3. Project Structure
      1. Dependencies
        1. Development
          1. License
            ID: a5s4bbasd2