Website Content Crawler

Rastrea una lista de URLs y devuelve el contenido de las páginas como JSON estructurado. Se ejecuta como un Apify Actor y como un servidor MCP para que los agentes puedan llamarlo directamente.

Demo en vivo: https://website-content-crawler.vercel.app

Lo que cuesta ejecutarlo

Pago por evento en Apify:

La computación de la plataforma se descuenta antes del pago; consulta PRICING.md para conocer la economía unitaria.

Related MCP server: web-reader-mcp

Salida

Cada ejecución devuelve exactamente esta forma. El esquema de salida la exige.

{
  "url": "https://example.com",
  "status": 200,
  "title": "Example Domain",
  "description": null,
  "h1": "Example Domain",
  "markdown": "# Example Domain\n\nThis domain is for use in documentation examples without needing permission. Avoid use in operations.\n\nLearn more\n\nLearn more (https://iana.org/domains/example)",
  "links": [
    "https://iana.org/domains/example"
  ],
  "wordCount": 23,
  "crawledAt": "2026-08-23T09:55:20.140Z",
  "error": null
}

Estructura

• src/ — código fuente del actor (rastreador Crawlee Cheerio)

• .actor/ — especificación del actor de Apify: actor.json, INPUT_SCHEMA.json, output_schema.json, dataset_schema.json, Dockerfile

• mcp-server/ — wrapper MCP que expone el actor como la herramienta crawl_website

• site/ + tools/ — construyen la página de demo en vivo a partir de un registro de ejecución real

Ejecutar en local

npm install
npm test

Servidor MCP:

cd mcp-server && npm install && node smoke.mjs

Publicar en Apify Store

Cuando la cuenta esté activa: apify push, precio como Pago por evento, y el listado usa este README.