Skip to main content
Glama

Crawlee MCP

Ein lokaler Model Context Protocol-Server zum Abrufen von Webseiten, Crawlen und Erstellen von Screenshots mit Crawlee. Er läuft über stdio und funktioniert daher mit Claude Code, Claude Desktop, Codex, Cursor und jedem MCP-kompatiblen Client.

Werkzeuge

Werkzeug

Beschreibung

fetch_url

Ruft eine einzelne URL ab und gibt sauberes Markdown zurück

fetch_multiple

Ruft mehrere URLs parallel ab

crawl

Durchsucht eine Website, entdeckt Links und gibt Seiteninhalte zurück

screenshot

Erstellt einen PNG-Screenshot einer Seite

ping

Gesundheitscheck

Related MCP server: Crawl4AI MCP

Installation

Erfordert Node.js 20 oder neuer. Die erste Verwendung von JavaScript-Rendering oder Screenshots erfordert außerdem den Chromium-Browser:

npx playwright install chromium

Sobald das Paket auf npm veröffentlicht ist, kann jeder Client es mit folgendem Befehl starten:

npx -y @patrikmichi/crawlee-mcp

Bis das npm-Paket veröffentlicht ist, installieren Sie es direkt von GitHub:

npx -y github:patrikmichi/crawlee-mcp

Client-Konfiguration

Claude Code

claude mcp add --transport stdio crawlee -- npx -y @patrikmichi/crawlee-mcp

Claude Desktop

Fügen Sie dies zu Ihrer Claude Desktop-Konfigurationsdatei hinzu:

{
  "mcpServers": {
    "crawlee": {
      "command": "npx",
      "args": ["-y", "@patrikmichi/crawlee-mcp"]
    }
  }
}

Codex

Fügen Sie dies zu ~/.codex/config.toml hinzu:

[mcp_servers.crawlee]
command = "npx"
args = ["-y", "@patrikmichi/crawlee-mcp"]

Andere MCP-Clients

Verwenden Sie denselben Befehl und dieselben Argumente: npx -y @patrikmichi/crawlee-mcp.

Konfiguration

cp env.example .env

Variable

Erforderlich

Beschreibung

CRAWLEE_PROXY_URLS

Nein

Kommagetrennte Proxy-URLs für Rotation

CRAWLEE_TIMEOUT_MS

Nein

Request-Timeout in ms (Standard: 30000)

CRAWLEE_STEALTH

Nein

Auf false setzen, um den Stealth-Modus zu deaktivieren (Standard: true)

Entwicklung

npm install
npm start          # Run with tsx (no build needed)
npm run build      # Compile TypeScript
npm run typecheck  # Type check only

Dieser Server ist bewusst lokal und nur über stdio nutzbar, da JavaScript-Rendering und Screenshots einen lokalen Playwright-Browser erfordern.

Install Server
A
license - permissive license
A
quality
C
maintenance

Maintenance

Maintainers
Response time
Release cycle
Releases (12mo)
Commit activity

Resources

Unclaimed servers have limited discoverability.

Looking for Admin?

If you are the server author, to access and configure the admin panel.

Related MCP Servers

  • A
    license
    -
    quality
    C
    maintenance
    Enables web scraping and crawling capabilities for LLM clients, supporting single-page scraping, multi-page website crawling, and web search with multiple engines (Playwright, Cheerio, Puppeteer) and flexible output formats including markdown, HTML, text, and screenshots.
    18
    6
    MIT
  • A
    license
    B
    quality
    A
    maintenance
    Enables AI assistants to crawl websites, extract dynamic content, navigate links, and save structured Markdown files via the MCP protocol, with support for anti-bot bypass, CSS selectors, and custom JavaScript execution.
    1
    42
    MIT
  • A
    license
    -
    quality
    C
    maintenance
    Enables AI agents to fetch and render web pages (including JavaScript-heavy SPAs) with headless Chromium, extract readable content with Mozilla Readability, capture navigation links, download images, and return a clean markdown file path.
    12
    ISC

View all related MCP servers

Related MCP Connectors

  • Read a URL as clean markdown, screenshot a website, url to PDF. Web access for agents, no signup.

  • Screenshots, PDFs and Markdown from any URL or HTML for AI agents, via the SnapForge API

  • Web tools for agents: fetch URL as markdown (free MCP) + x402 scrape, links, AI JSON, snapshot.

View all MCP Connectors

Latest Blog Posts

MCP directory API

We provide all the information about MCP servers via our MCP API.

curl -X GET 'https://glama.ai/api/mcp/v1/servers/patrikmichi/crawlee-mcp'

If you have feedback or need assistance with the MCP directory API, please join our Discord server