Crawlee MCP
Crawlee MCP
ローカルで動作する Model Context Protocol サーバーで、Crawlee を使用したウェブの取得、クローリング、スクリーンショットを提供します。stdio 上で動作するため、Claude Code、Claude Desktop、Codex、Cursor、および MCP 互換のクライアントで使用できます。
ツール
ツール | 説明 |
| 単一のURLを取得し、クリーンなマークダウンを返します |
| 複数のURLを並行して取得します |
| サイトをクロールし、リンクを発見してページコンテンツを返します |
| ページのPNGスクリーンショットを撮影します |
| ヘルスチェック |
Related MCP server: Crawl4AI MCP
インストール
Node.js 20 以降が必要です。JavaScript レンダリングまたはスクリーンショットを初めて使用する際には、Chromium ブラウザも必要です:
npx playwright install chromiumnpm に公開されると、すべてのクライアントで次のように起動できます:
npx -y @patrikmichi/crawlee-mcpnpm パッケージが公開されるまでは、GitHub から直接インストールしてください:
npx -y github:patrikmichi/crawlee-mcpクライアント設定
Claude Code
claude mcp add --transport stdio crawlee -- npx -y @patrikmichi/crawlee-mcpClaude Desktop
Claude Desktop の設定ファイルに以下を追加します:
{
"mcpServers": {
"crawlee": {
"command": "npx",
"args": ["-y", "@patrikmichi/crawlee-mcp"]
}
}
}Codex
~/.codex/config.toml に以下を追加します:
[mcp_servers.crawlee]
command = "npx"
args = ["-y", "@patrikmichi/crawlee-mcp"]その他の MCP クライアント
同じコマンドと引数を使用します:npx -y @patrikmichi/crawlee-mcp。
設定
cp env.example .env変数 | 必須 | 説明 |
| いいえ | ローテーション用のカンマ区切りプロキシURL |
| いいえ | リクエストタイムアウト(ミリ秒、デフォルト: |
| いいえ |
|
開発
npm install
npm start # Run with tsx (no build needed)
npm run build # Compile TypeScript
npm run typecheck # Type check onlyこのサーバーは意図的にローカルかつ stdio 専用です。JavaScript レンダリングとスクリーンショットにはローカルの Playwright ブラウザが必要なためです。
Maintenance
Resources
Unclaimed servers have limited discoverability.
Looking for Admin?
If you are the server author, to access and configure the admin panel.
Related MCP Servers
- Alicense-qualityCmaintenanceEnables web scraping and crawling capabilities for LLM clients, supporting single-page scraping, multi-page website crawling, and web search with multiple engines (Playwright, Cheerio, Puppeteer) and flexible output formats including markdown, HTML, text, and screenshots.186MIT
- AlicenseBqualityAmaintenanceEnables AI assistants to crawl websites, extract dynamic content, navigate links, and save structured Markdown files via the MCP protocol, with support for anti-bot bypass, CSS selectors, and custom JavaScript execution.142MIT
- AlicenseAqualityBmaintenanceEnables web scraping of URLs, including extracting text, links, images, metadata, taking screenshots, and using CSS selectors for structured data extraction.611MIT
- Alicense-qualityCmaintenanceEnables AI agents to fetch and render web pages (including JavaScript-heavy SPAs) with headless Chromium, extract readable content with Mozilla Readability, capture navigation links, download images, and return a clean markdown file path.12ISC
Related MCP Connectors
Read a URL as clean markdown, screenshot a website, url to PDF. Web access for agents, no signup.
Screenshots, PDFs and Markdown from any URL or HTML for AI agents, via the SnapForge API
Web tools for agents: fetch URL as markdown (free MCP) + x402 scrape, links, AI JSON, snapshot.
Latest Blog Posts
- Who's Calling? MCP Hosts Are an Identity Blind Spot (And the Spec Knows It)By Om-Shree-0709 on .mcpAgent IdentityOAuth 2.1
- Your AI Chatbot Just Exposed Your CEO's Salary to an InternBy Om-Shree-0709 on .Agent IdentityMCP SecurityOAuth Delegation
- Why MCP Servers Need Execution Sandboxing (And Why Your Current Stack Isn't Enough)By Om-Shree-0709 on .Agentic AiPrompt InjectionWebAssembly
MCP directory API
We provide all the information about MCP servers via our MCP API.
curl -X GET 'https://glama.ai/api/mcp/v1/servers/patrikmichi/crawlee-mcp'
If you have feedback or need assistance with the MCP directory API, please join our Discord server