Skip to main content
Glama
Br0ski777

web-scraper

by Br0ski777

Web Scraper to Markdown API

MCP Server x402 License: MIT

Extrae markdown limpio de cualquier URL. Elimina navegación, anuncios y scripts, devuelve contenido estructurado. Diseñado para pipelines de RAG y agentes de investigación de IA. Pago por llamada vía x402 (USDC en Base L2) -- sin clave API, sin registro, sin límite de tasa.

Parte del marketplace klymax402 -- 100 APIs de micropagos x402 para agentes de IA, una billetera, USDC en Base.

Inicio rápido -- MCP

Añade a la configuración de tu cliente MCP (Claude Desktop, Cursor, ElizaOS, etc.):

{
  "mcpServers": {
    "web-scraper": {
      "url": "https://web-scraper.api.klymax402.com/mcp"
    }
  }
}

Related MCP server: x402-md-mcp

Inicio rápido -- HTTP (x402)

curl "https://web-scraper.api.klymax402.com/api/scrape?url=https://example.com"
# -> 402 Payment Required, with an x402 payment challenge in the response body

Cualquier cliente compatible con x402 (@x402/fetch, x402-agent-tools, ATXP) maneja el ciclo 402 -> firmar -> reintentar automáticamente.

Herramientas

Herramienta

Método

Ruta

Precio

Descripción

web_scrape_to_markdown

GET

/api/scrape

$0.012

Raspa una URL y conviértela a markdown limpio

web_scrape_batch

POST

/api/scrape/batch

$0.05

Raspa hasta 10 URLs en lote

web_scrape_to_markdown

Raspa y extrae contenido de una URL con renderizado completo de JS, devuelto como markdown limpio. Alternativa a Firecrawl scrape a un costo 2.5 veces menor. Elimina navegación, anuncios, scripts y texto repetitivo — ideal para pipelines de RAG y agentes de investigación de IA.

Parámetros

Nombre

Tipo

Requerido

Descripción

url

string

sí

URL a raspar (p. ej. https://example.com/article)

Ejemplo de respuesta:

{"title":"How to Scale APIs","description":"A guide to...","content":"# How to Scale APIs\n\nScaling requires...","wordCount":1250,"charCount":7800,"url":"https://blog.example.com/scale-apis"}

Cuándo usarlo: resumir artículos, construir corpus de RAG, investigar temas de fuentes web o extraer datos de páginas de documentación. Esencial para cualquier flujo de trabajo que necesite raspar y extraer contenido de páginas web como entrada para LLM. Reemplazo directo de Firecrawl scrape.

No para: capturas de pantalla (usa capture_screenshot), auditoría SEO (usa seo_audit_page), detección de stack tecnológico (usa website_detect_tech_stack), búsqueda web (usa web_search_query).

web_scrape_batch

Úsalo cuando necesites extraer contenido limpio de varias páginas web a la vez (hasta 10 URLs). Devuelve la misma salida de markdown estructurado que web_scrape_to_markdown para cada URL.

Parámetros

Nombre

Tipo

Requerido

Descripción

urls

array

sí

Array de URLs (máx. 10)

Ejemplo de respuesta:

{"results":[{"url":"https://a.com","title":"Page A","wordCount":800},{"url":"https://b.com","title":"Page B","wordCount":1200}],"summary":{"total":2,"totalWords":2000,"failed":0}}

Cuándo usarlo: construir corpus de investigación, comparar contenido entre páginas de competidores o extracción masiva de documentación. Esencial cuando tienes 3+ URLs para procesar en un solo flujo de trabajo.

No para: URLs individuales (usa web_scrape_to_markdown), comparación SEO (usa seo_audit_batch).

Ejemplos de prompts para agentes

  • "Raspa y extrae contenido de una URL con renderizado completo de JS, devuelto como markdown limpio"

  • "Extrae contenido limpio de varias páginas web a la vez (hasta 10 URLs)"

Pago

  • Protocolo: x402 -- pago por llamada nativo de HTTP, sin registro, sin clave API

  • Red: Base L2 (eip155:8453)

  • Activo: USDC

  • Facilitador: Coinbase CDP (principal), PayAI (respaldo)

  • También accesible vía ATXP (x402 envuelto en OAuth, metadatos de recurso protegido RFC 9728)

Parte de klymax402

100 APIs de micropagos x402 para agentes de IA -- una billetera, USDC en Base, cero registro.

Licencia

MIT

Related MCP Connectors

Related MCP Servers

  • A
    license
    A
    quality
    C
    maintenance
    Pay-per-use clean web reader for AI agents. URL in, markdown plus metadata out, in milliseconds. Settled per-call in USDC over x402 — no signup, no API keys.
    1
    102 npm
    3
    MIT
  • A
    license
    Not graded
    quality
    D
    maintenance
    Enables extracting clean Markdown from any webpage by paying $0.005 USDC per call via the x402 protocol, with automatic wallet-based payment settlement.
    11 npm
    MIT
  • F
    license
    Not graded
    quality
    B
    maintenance
    Enables LLM agents to convert bloated webpages into clean token-dense plain text, stripping HTML, CSS, scripts, and layout elements while reducing context-window costs and supporting x402 micro-pay-based autonomous requests.
    -
  • F
    license
    Not graded
    quality
    B
    maintenance
    Enables AI agents to reliably fetch public web URLs and extract clean, agent-ready text, Markdown, links, and metadata, with automatic browser fallback and optional x402 payment support.
    -