响应延迟
缓慢响应会打断语音、视觉和设备交互。
挑战
让设备交互更灵敏、更实用,也更易于集成。
缓慢响应会打断语音、视觉和设备交互。
设备需要理解用户意图,并将请求转化为适当行动。
硬件、媒体服务和 AI 模型需要相互协调的接口与数据流。
演示
观看聊天机器人演示语音识别、生动响应和设备控制。

核心能力
将传感器、音频和视觉输入连接至 AI 理解、语音和设备行动。
采集环境、位置与运动传感器的读数。
将麦克风输入连接至语音识别服务。
将摄像头输入发送至应用,进行图像、物体或手势识别。
使用语言与视觉模型理解请求和上下文。
通过文本转语音服务与设备扬声器输出生成的语音。
通过 MCP 工具暴露设备功能,供应用调用。
技术
为消息通信、实时媒体、模型推理和工具访问分别选择技术。
设备数据
MQTT 以低消息开销在设备与应用间传输传感器读数、事件和指令。
实时音视频
WebRTC 传输实时音视频。将媒体服务连接至语音识别、语音合成和视觉应用。
理解
语言与视觉模型理解文本、图像和其他输入,生成响应或选择行动。
工具访问
模型上下文协议(MCP)为 AI 应用提供统一工具接口,包括互联设备暴露的功能。
架构
通过模块化架构连接设备消息通信、媒体服务和 AI 应用。
连接设备
MQTT 消息通信
EMQX Cluster
EMQX 节点 1
EMQX 节点 2
EMQX 节点 3
EMQX 节点 N
应用与服务
通过应用组件接入
实时音视频路径
应用协调两条路径。EMQX 传输设备事件、指令和 MCP 工具调用;实时音视频通过 WebRTC 媒体服务器传输。
为什么选择 EMQX
通过可扩展 MQTT 消息层交换设备事件与指令。
通过 MQTT 与 WebRTC 连接兼容设备、应用和媒体服务。
连接所选的语言、语音识别和文本转语音服务。
根据需求组合私有 AI 服务、托管云服务和开发组件。
使用 TLS、客户端身份认证和主题权限,并在需要时选择私有部署。
使用 SDK、文档和专业服务,开展集成与部署。
产品与服务
汇集项目所需的消息平台、媒体服务、工具与专业知识。
为互联设备与应用提供 MQTT 消息通信和高可用集群。
探索 EMQX面向嵌入式与服务端应用的开源 MCP SDK、文档和示例。
MCP over MQTT 指南为设备与应用间的实时音视频通信提供 WebRTC 服务。
阅读解决方案指南技术咨询、架构设计、定制开发和全天候技术支持。
联系专家生态系统
资源
常见问题
EMQX 在设备与应用间提供 MQTT 消息通信。在智能硬件架构中,它与媒体服务、AI 模型和 MCP 工具协作,连接感知、交互与设备行动。
MQTT 支持紧凑消息和双向发布订阅通信,适合传输传感器读数、设备状态与指令;WebRTC 可与其配合处理实时音视频。
它将设备消息通信、媒体处理、模型推理和工具访问拆分为互联组件。团队可集成并迭代各组件,无需重新构建设备连接。
该方案汇集 EMQX MQTT 消息通信、WebRTC 媒体服务、开发工具和专业支持。可根据设备与应用需求选择组件和部署模式。
可以。通过应用组件集成所选的语言或视觉模型、自动语音识别(ASR)和文本转语音(TTS)服务。