@robot-resources/scraper-mcp

⚠️ VERALTET — integriert in @robot-resources/scraper. Dieser MCP-Server wird jetzt als integrierte scraper-mcp-Binärdatei innerhalb des Haupt-Scraper-Pakets ausgeliefert. Installieren Sie ein Paket und erhalten Sie das MCP. Automatische Konfiguration über npx robot-resources --for=cursor oder npx robot-resources --for=claude-code. Die Tools (scraper_compress_url, scraper_crawl_url) und die unten aufgeführten Parameter sind unverändert.

MCP-Server für Scraper — Kontextkompression für KI-Agenten.

Was ist Robot Resources?

Human Resources, aber für Ihre KI-Agenten.

Robot Resources verleiht KI-Agenten zwei Superkräfte:

• Router — Leitet jeden LLM-Aufruf an das günstigste fähige Modell weiter. 60-90 % Kosteneinsparungen bei OpenAI, Anthropic und Google.

• Scraper — Komprimiert Webseiten zu sauberem Markdown. 70-80 % weniger Token pro Seite.

Beides läuft lokal. Ihre API-Schlüssel verlassen niemals Ihren Rechner. Kostenlos, unbegrenzt, keine Stufen.

Installieren Sie die komplette Suite

npx robot-resources

Ein Befehl richtet alles ein. Erfahren Sie mehr unter robotresources.ai

Über diesen MCP-Server

Dieses Paket stellt KI-Agenten zwei Tools zur Verfügung, um Webinhalte über das Model Context Protocol in token-effizientes Markdown zu komprimieren: Einzelseiten-Kompression und mehrseitiges BFS-Crawling.

Installation

npx @robot-resources/scraper-mcp

Oder global installieren:

npm install -g @robot-resources/scraper-mcp

Claude Desktop-Konfiguration

Fügen Sie dies zu Ihrer claude_desktop_config.json hinzu:

{
  "mcpServers": {
    "scraper": {
      "command": "npx",
      "args": ["-y", "@robot-resources/scraper-mcp"]
    }
  }
}

Tools

scraper_compress_url

Komprimieren Sie eine einzelne Webseite in Markdown mit 70-90 % weniger Token.

Parameter:

Beispiel-Prompt: "Komprimiere https://docs.example.com/getting-started"

scraper_crawl_url

Crawlen Sie mehrere Seiten von einer Start-URL aus unter Verwendung der BFS-Link-Erkennung.

Parameter:

Beispiel-Prompt: "Crawle die Dokumentation unter https://docs.example.com mit maximal 20 Seiten"

Abrufmodi

Stealth erfordert impit und Render erfordert playwright als Peer-Abhängigkeiten von @robot-resources/scraper.

Anforderungen

• Node.js 18+

Verwandtes

• @robot-resources/scraper - Kern-Kompressionsbibliothek

• @robot-resources/router-mcp - MCP-Server für LLM-Kostenoptimierung

• Robot Resources - Human Resources, aber für Ihre KI-Agenten

Lizenz

MIT