qwen-web-research-mcp

Servidor MCP para investigación web: dada una URL (o un sitio + frase para buscar), obtiene el contenido completo de la página y utiliza un modelo Qwen local (a través de Ollama) para extraer/responder una pregunta sobre ella. Las páginas largas se dividen automáticamente en fragmentos y se analizan con una estrategia de map-reduce, de modo que no se omite nada.

La extracción de contenido utiliza trafilatura, que elimina navegación/anuncios/plantillas basándose en heurísticas de contenido en lugar de selectores CSS específicos del sitio, por lo que sigue funcionando si el diseño de un sitio cambia. La búsqueda por sitio utiliza el operador site: de DuckDuckGo, por lo que cualquier dominio funciona sin código de scraping personalizado por sitio.

Herramientas

• analyze_page(url, question) — obtiene una página y responde question sobre su contenido completo.

• search_site_and_analyze(site, phrase, question, max_results) — encuentra páginas en site que contengan phrase, y luego ejecuta la extracción estilo analyze_page en cada coincidencia.

• list_available_models() — lista los modelos Qwen/Ollama disponibles en el servidor Ollama configurado.

Related MCP server: searxng-mcp

Requisitos

• Python 3.11+

• Un servidor Ollama con al menos un modelo Qwen descargado (por defecto qwen3:14b)

Configuración (variables de entorno)

Ejecutar localmente

python3 -m venv .venv
.venv/bin/pip install -e .
.venv/bin/python -m qwen_web_research.server

Ejecutar con Docker

docker build -t qwen-web-research-mcp .
docker run -p 8001:8000 \
  -e MCP_TRANSPORT=streamable-http \
  -e MCP_HOST=0.0.0.0 \
  -e OLLAMA_HOST_IP=host.docker.internal \
  qwen-web-research-mcp

O como servicio en un docker-compose.yml junto a otras herramientas (por ejemplo, Open WebUI):

qwen-web-research:
  build: ./qwen-web-research-mcp
  ports:
    - "8001:8000"
  extra_hosts:
    - "host.docker.internal:host-gateway"
  environment:
    - MCP_TRANSPORT=streamable-http
    - MCP_HOST=0.0.0.0
    - MCP_PORT=8000
    - OLLAMA_HOST_IP=host.docker.internal
    - QWEN_MODEL=qwen3:14b

Luego apunta tu cliente MCP (por ejemplo, la configuración de Herramientas/Conexiones de Open WebUI) a http://qwen-web-research:8000/mcp (red interna de Docker) o http://localhost:8001/mcp (desde el host).