Crawlee MCP
Crawlee MCP
Ein lokaler Model Context Protocol-Server zum Abrufen von Webseiten, Crawlen und Erstellen von Screenshots mit Crawlee. Er läuft über stdio und funktioniert daher mit Claude Code, Claude Desktop, Codex, Cursor und jedem MCP-kompatiblen Client.
Werkzeuge
Werkzeug | Beschreibung |
| Ruft eine einzelne URL ab und gibt sauberes Markdown zurück |
| Ruft mehrere URLs parallel ab |
| Durchsucht eine Website, entdeckt Links und gibt Seiteninhalte zurück |
| Erstellt einen PNG-Screenshot einer Seite |
| Gesundheitscheck |
Related MCP server: Crawl4AI MCP
Installation
Erfordert Node.js 20 oder neuer. Die erste Verwendung von JavaScript-Rendering oder Screenshots erfordert außerdem den Chromium-Browser:
npx playwright install chromiumSobald das Paket auf npm veröffentlicht ist, kann jeder Client es mit folgendem Befehl starten:
npx -y @patrikmichi/crawlee-mcpBis das npm-Paket veröffentlicht ist, installieren Sie es direkt von GitHub:
npx -y github:patrikmichi/crawlee-mcpClient-Konfiguration
Claude Code
claude mcp add --transport stdio crawlee -- npx -y @patrikmichi/crawlee-mcpClaude Desktop
Fügen Sie dies zu Ihrer Claude Desktop-Konfigurationsdatei hinzu:
{
"mcpServers": {
"crawlee": {
"command": "npx",
"args": ["-y", "@patrikmichi/crawlee-mcp"]
}
}
}Codex
Fügen Sie dies zu ~/.codex/config.toml hinzu:
[mcp_servers.crawlee]
command = "npx"
args = ["-y", "@patrikmichi/crawlee-mcp"]Andere MCP-Clients
Verwenden Sie denselben Befehl und dieselben Argumente: npx -y @patrikmichi/crawlee-mcp.
Konfiguration
cp env.example .envVariable | Erforderlich | Beschreibung |
| Nein | Kommagetrennte Proxy-URLs für Rotation |
| Nein | Request-Timeout in ms (Standard: |
| Nein | Auf |
Entwicklung
npm install
npm start # Run with tsx (no build needed)
npm run build # Compile TypeScript
npm run typecheck # Type check onlyDieser Server ist bewusst lokal und nur über stdio nutzbar, da JavaScript-Rendering und Screenshots einen lokalen Playwright-Browser erfordern.
Maintenance
Resources
Unclaimed servers have limited discoverability.
Looking for Admin?
If you are the server author, to access and configure the admin panel.
Related MCP Servers
- Alicense-qualityCmaintenanceEnables web scraping and crawling capabilities for LLM clients, supporting single-page scraping, multi-page website crawling, and web search with multiple engines (Playwright, Cheerio, Puppeteer) and flexible output formats including markdown, HTML, text, and screenshots.186MIT
- AlicenseBqualityAmaintenanceEnables AI assistants to crawl websites, extract dynamic content, navigate links, and save structured Markdown files via the MCP protocol, with support for anti-bot bypass, CSS selectors, and custom JavaScript execution.142MIT
- AlicenseAqualityBmaintenanceEnables web scraping of URLs, including extracting text, links, images, metadata, taking screenshots, and using CSS selectors for structured data extraction.611MIT
- Alicense-qualityCmaintenanceEnables AI agents to fetch and render web pages (including JavaScript-heavy SPAs) with headless Chromium, extract readable content with Mozilla Readability, capture navigation links, download images, and return a clean markdown file path.12ISC
Related MCP Connectors
Read a URL as clean markdown, screenshot a website, url to PDF. Web access for agents, no signup.
Screenshots, PDFs and Markdown from any URL or HTML for AI agents, via the SnapForge API
Web tools for agents: fetch URL as markdown (free MCP) + x402 scrape, links, AI JSON, snapshot.
Latest Blog Posts
- Who's Calling? MCP Hosts Are an Identity Blind Spot (And the Spec Knows It)By Om-Shree-0709 on .mcpAgent IdentityOAuth 2.1
- Your AI Chatbot Just Exposed Your CEO's Salary to an InternBy Om-Shree-0709 on .Agent IdentityMCP SecurityOAuth Delegation
- Why MCP Servers Need Execution Sandboxing (And Why Your Current Stack Isn't Enough)By Om-Shree-0709 on .Agentic AiPrompt InjectionWebAssembly
MCP directory API
We provide all the information about MCP servers via our MCP API.
curl -X GET 'https://glama.ai/api/mcp/v1/servers/patrikmichi/crawlee-mcp'
If you have feedback or need assistance with the MCP directory API, please join our Discord server