HUTB 的 MCP 实现

基于 MCP 实现和具身人、无人车、无人机的大模型交互。

🏗️ 项目架构

graph LR
    A[用户] --> B[人机界面：语音对话/键盘交互]
    B --> C[FastMCP 工具层]
    C --> D[HUTB 模拟器 API 客户端]
    C --> E[Deepseek AI]
    
    style B fill:#e1f5fe
    style C fill:#ccffcc
    style D fill:#fff3e0
    style E fill:#f3e5f5

Loading

1、实现

集成版

能够在未安装Python和UE4的情况下启动

1. 下载 发布页面 中的对应的文件并解压
2. 下载 虚拟环境、启动脚本及MCP文件中的env.UE4-hutb_v1.0.zip文件，解压到WindowsNoEditor文件夹下，确认项目结构如下所示

WindowsNoEditor/  
├── env.UE4-hutb/                        
├── llm/ 
│   └── .env
├── CarlaUE4.exe            
└── hutb.bat      

3. 检查 llm/.env 文件中的Github和Deepseek API密钥已配置
4. 双击 hutb.bat 启动模拟器

1.1 大模型

基于FastMCP框架的 HUTB 智能助手 。

1.2 流程

加上语音识别和合成的整个工作流依次包括：麦克风 /Web浏览器、 语音 识别（方言、老人言： PaddleSpeech ）、QWen/DeepSeek 大模型、流式语音合成 PP-TTS （语音播报/控制模拟器的模型或实体机器人）。

1.3 其他：人形机器人模拟环境搭建

参考

• 基于FastMCP框架的 Github 助手

• carla-mcp

• 网易云音乐 MCP 控制器

• 机器人本体的仿真环境使用教程

• 机器人本体三维模型

• 基于虚幻引擎的PR2机器人集成和调试（根据 OpenSim 建模）

• 训练MuJoCo和真实人形机器人行走