scrapling-fetch-mcp

Hilft KI-Assistenten dabei, Inhalte von bot-geschützten Websites abzurufen. Verwendet Scrapling (patchright + curl-cffi), um Anti-Automatisierungsmaßnahmen zu umgehen und sauberes HTML oder Markdown zurückzugeben.

Optimiert für den Abruf von Dokumentationen und Referenzmaterialien in geringem Umfang. Nicht für hochvolumiges Scraping oder Datenerfassung konzipiert.

Anforderungen: Python 3.10+, uv

Claude Code Skill

Der einfachste Weg, dies zu nutzen, ist als Claude Code Skill. Sobald es installiert ist, ruft Claude automatisch bot-geschützte URLs ab, wenn Sie danach fragen – es sind keine manuellen Befehle erforderlich.

In Ihr Projekt installieren (empfohlen – wird nur im Kontext dieses Projekts geladen):

git clone --depth=1 https://github.com/cyberchitta/scrapling-fetch-mcp /tmp/scrapling-fetch-mcp
cp -r /tmp/scrapling-fetch-mcp/skills/s-fetch .claude/skills/
cp -r /tmp/scrapling-fetch-mcp/skills/s-fetch-setup .claude/skills/
rm -rf /tmp/scrapling-fetch-mcp

Oder für alle Projekte installieren (wird überall in den Kontext geladen):

git clone --depth=1 https://github.com/cyberchitta/scrapling-fetch-mcp /tmp/scrapling-fetch-mcp
cp -r /tmp/scrapling-fetch-mcp/skills/s-fetch ~/.claude/skills/
cp -r /tmp/scrapling-fetch-mcp/skills/s-fetch-setup ~/.claude/skills/
rm -rf /tmp/scrapling-fetch-mcp

Bitten Sie Claude dann, /s-fetch-setup auszuführen – es installiert das Tool und die Browser-Binärdateien (großer Download) und entfernt sich dann selbst. Danach fragen Sie einfach ganz natürlich:

"Fetch the docs at https://example.com/api"
"Find all mentions of 'authentication' on that page"
"Get me the installation instructions from their homepage"

Related MCP server: mult-fetch-mcp-server

Claude Desktop (MCP-Server)

Wenn Sie /s-fetch-setup bereits ausgeführt haben, ist das Tool installiert – überspringen Sie dies und gehen Sie zur untenstehenden Konfiguration.

Andernfalls zuerst installieren:

uv tool install git+https://github.com/cyberchitta/scrapling-fetch-mcp
uvx --from git+https://github.com/cyberchitta/scrapling-fetch-mcp scrapling install

Hinweis: Die Browser-Installation lädt Hunderte von MB herunter und muss vor der ersten Verwendung abgeschlossen sein. Wenn der Server anfangs eine Zeitüberschreitung meldet, warten Sie einige Minuten und versuchen Sie es erneut.

Fügen Sie dies zu Ihren Claude Desktop MCP-Einstellungen hinzu und starten Sie neu:

MacOS: ~/Library/Application Support/Claude/claude_desktop_config.json
Windows: %APPDATA%\Claude\claude_desktop_config.json

{
  "mcpServers": {
    "scrapling-fetch": {
      "command": "uvx",
      "args": ["scrapling-fetch-mcp"]
    }
  }
}

Funktionsweise

Zwei Tools, die automatisch von Claude verwendet werden:

• Seitenabruf — ruft vollständige Seiten mit Unterstützung für Paginierung ab

• Musterextraktion — findet Inhalte, die einem Regex entsprechen

Drei Schutzstufen, die automatisch eskaliert werden:

• basic — schnell (1-2s), funktioniert für die meisten Websites

• stealth — moderat (3-8s), Headless Chromium

• max-stealth — gründlich (10s+), vollständiger Browser-Fingerabdruck

Einschränkungen

• Nur Textinhalte (Dokumentationen, Artikel, Referenzen)

• Nicht für hochvolumiges Scraping oder Websites, die eine Authentifizierung erfordern

• Die Leistung variiert je nach Komplexität der Website und Schutzstufe

Lizenz

Apache 2.0