Реализация MCP для симулятора HUTB

Взаимодействие больших языковых моделей с воплощенными людьми, беспилотными автомобилями и дронами на основе реализации MCP.

🏗️ Архитектура проекта

graph LR
    A[用户] --> B[人机界面：语音对话/键盘交互]
    B --> C[FastMCP 工具层]
    C --> D[HUTB 模拟器 API 客户端]
    C --> E[Deepseek AI]
    
    style B fill:#e1f5fe
    style C fill:#ccffcc
    style D fill:#fff3e0
    style E fill:#f3e5f5

1. Развертывание и запуск

Рекомендуемое аппаратное и программное обеспечение

Intel i7 9-го - 11-го поколения+ / AMD Ryzen 9+
+16 ГБ оперативной памяти
NVIDIA RTX 3070+
Windows 10/11

Дважды щелкните mcp.bat, чтобы запустить симулятор (при первом запуске будут загружены соответствующие зависимости, потребуется некоторое время).

1.1 Часто используемые диалоги

连接服务器
设置雨天天气条件
生成车辆
开启自动驾驶
生成行人（默认开启自由移动）
切换视角
切换第三人称视角ID
切换第一人称视角ID
切换旁观者视角
开启录制
结束录制

2. Реализация

2.1 Большая языковая модель

Интеллектуальный помощник HUTB на базе фреймворка FastMCP .

2.2 Улучшение взаимодействия

(В разработке) Весь рабочий процесс с добавлением распознавания и синтеза речи включает в себя: микрофон / веб-браузер, распознавание речи (диалекты, речь пожилых людей: PaddleSpeech), большую языковую модель QWen/DeepSeek, потоковый синтез речи PP-TTS (голосовое оповещение/управление моделями симулятора или физическими роботами).