qwen-web-research-mcp

MCP-Server für Websuche: Bei Angabe einer URL (oder einer Website + Suchphrase) wird der vollständige Seiteninhalt abgerufen und ein lokales Qwen-Modell (über Ollama) verwendet, um eine Frage dazu zu beantworten. Lange Seiten werden automatisch in Abschnitte aufgeteilt und mit einer Map-Reduce-Strategie analysiert, sodass nichts übersprungen wird.

Die Inhaltsextraktion verwendet trafilatura, das Navigation/Werbung/Boilerplate basierend auf Inhaltsheuristiken entfernt, statt auf seiten-spezifische CSS-Selektoren zu setzen – so funktioniert es auch, wenn sich das Layout einer Website ändert. Die seitenbezogene Suche nutzt DuckDuckGos site:-Operator, sodass jede Domain ohne benutzerdefinierten Scraping-Code funktioniert.

Werkzeuge

• analyze_page(url, question) – ruft eine Seite ab und beantwortet question über deren vollständigen Inhalt.

• search_site_and_analyze(site, phrase, question, max_results) – findet Seiten auf site, die phrase enthalten, und führt dann eine Extraktion im Stil von analyze_page für jeden Treffer durch.

• list_available_models() – listet die verfügbaren Qwen/Ollama-Modelle auf dem konfigurierten Ollama-Server auf.

Related MCP server: searxng-mcp

Voraussetzungen

• Python 3.11+

• Ein Ollama-Server mit mindestens einem Qwen-Modell (Standard: qwen3:14b)

Konfiguration (Umgebungsvariablen)

Lokal ausführen

python3 -m venv .venv
.venv/bin/pip install -e .
.venv/bin/python -m qwen_web_research.server

Mit Docker ausführen

docker build -t qwen-web-research-mcp .
docker run -p 8001:8000 \
  -e MCP_TRANSPORT=streamable-http \
  -e MCP_HOST=0.0.0.0 \
  -e OLLAMA_HOST_IP=host.docker.internal \
  qwen-web-research-mcp

Oder als Dienst in einer docker-compose.yml zusammen mit anderen Tools (z. B. Open WebUI):

qwen-web-research:
  build: ./qwen-web-research-mcp
  ports:
    - "8001:8000"
  extra_hosts:
    - "host.docker.internal:host-gateway"
  environment:
    - MCP_TRANSPORT=streamable-http
    - MCP_HOST=0.0.0.0
    - MCP_PORT=8000
    - OLLAMA_HOST_IP=host.docker.internal
    - QWEN_MODEL=qwen3:14b

Richten Sie dann Ihren MCP-Client (z. B. Open WebUIs Einstellungen unter Tools/Verbindungen) auf http://qwen-web-research:8000/mcp (internes Docker-Netzwerk) oder http://localhost:8001/mcp (vom Host aus) aus.