Doc Scraper MCP Server
ドキュメントスクレーパー MCP サーバー
ドキュメントスクレイピング機能を提供するModel Context Protocol(MCP)サーバー。このサーバーは、jina.aiの変換サービスを使用して、WebベースのドキュメントをMarkdown形式に変換します。
特徴
任意のWeb URLからドキュメントをスクレイピングします
HTMLドキュメントをマークダウン形式に変換します
変換されたドキュメントを指定された出力パスに保存します
モデルコンテキストプロトコル(MCP)と統合
Related MCP server: Deepwiki MCP Server
インストール
Smithery経由でインストール
Smithery経由で Claude Desktop 用の Doc Scraper を自動的にインストールするには:
npx -y @smithery/cli install @askjohngeorge/mcp-doc-scraper --client claudeリポジトリをクローンします。
git clone https://github.com/askjohngeorge/mcp-doc-scraper.git
cd mcp-doc-scraper仮想環境を作成してアクティブ化します。
python -m venv venv
source venv/bin/activate # On Windows, use: venv\Scripts\activate依存関係をインストールします。
pip install -e .使用法
サーバーは Python を使用して実行できます。
python -m mcp_doc_scraperツールの説明
サーバーは次の単一のツールを提供します:
名前:
scrape_docs説明: URLからドキュメントをスクレイピングし、マークダウンとして保存します
入力パラメータ:
url: スクレイピングするドキュメントのURLoutput_path: マークダウンファイルを保存するパス
プロジェクト構造
doc_scraper/
├── __init__.py
├── __main__.py
└── server.py依存関係
aiohttp
マクピー
ピダンティック
発達
開発環境をセットアップするには:
開発依存関係をインストールします。
pip install -r requirements.txtサーバーはモデルコンテキストプロトコル( MCP)を使用します。MCPのドキュメントをよくお読みください。
ライセンス
MITライセンス
This server cannot be deployed
Maintenance
Related MCP Connectors
Web scraping for AI agents. Converts URLs to clean, LLM-ready Markdown with anti-bot bypass.
Convert files, URLs, and documents to clean, AI-ready Markdown via MCP.
Converts any URL to clean, LLM-ready Markdown using real Chrome browsers
Convert PDF, DOCX, HTML, and URLs to clean, LLM-ready markdown with tables preserved
Related MCP Servers
- AlicenseAqualityDmaintenanceConverts various file types and web content to Markdown format. It provides a set of tools to transform PDFs, images, audio files, web pages, and more into easily readable and shareable Markdown text.10288 npm3,002MIT
- AlicenseBqualityDmaintenanceCrawls and converts DeepWiki documentation pages into Markdown format, enabling retrieval of complete documentation or specific pages from repositories. Note: Currently not functional due to DeepWiki scraping restrictions.18 npmMIT
- FlicenseNot gradedqualityDmaintenanceScrapes webpages and converts them to clean Markdown using browser automation, ideal for creating READMEs, documentation, or processing dynamic web content.-
- FlicenseAqualityDmaintenanceConverts files (PDF, DOCX, PPTX, XLSX, images via OCR) and URLs to Markdown, enabling AI clients to read them via a single MCP tool.1-