实时音视频
LiveKit 入口:等待获取
正在自动申请 Viewer Token
Viewer Token、房间和权限由平台网关自动取得
ID: 020000000001020000000002
正在自动进入机器狗房间
连接成功后等待机器狗发布云台音视频
尚未连接 LiveKit
连接与视频指标
视频发送端 → 浏览器收包—
浏览器缓冲 / 排队—
浏览器视频解码—
视频显示帧率—
测得的视频链路合计—
实际抖动缓冲—
最近丢帧 / 丢包0 / 0
远端音频轨道无音频
指标为浏览器最近数秒的实时观测。“视频发送端 → 收包”依赖发送端、服务器和浏览器时钟同步;Viewer Token 只保留在本页内存。
远程底盘遥操
获得控制权后可发送摄像头指令
连接后显示 Token 中的 LiveKit 身份
实时画面未就绪,底盘遥操已锁定
DataChannel:尚未发送控制消息
Bumi 控制
连接后读取摄像头状态
监控 720p · 每秒 5 帧,视频不烧录检测框
选择RGB · 人体感知 查看前端检测叠加
距离色标:近(暖色)→ 远(冷色),显示范围 0–5 米
ND 局部避障方向
选中人物即可观察。绿线:ND 建议方向;红色:障碍;浅色:已观测;深色:未知。点击行走跟随后执行;当前为前方视野内的避障试验。
自主跟随
固定使用 RGB+深度,点击下方 ID 选择目标。目标长期保留,离开画面后持续寻回;只有取消或重新选人才会替换。
等待本体感知状态…
实际运动输出:关闭;相机到身体外参:待补齐
行走跟随:超过 2 米开始靠近,到 1.5 米停止。行走中同步修正方向;2.5 米内偏角超过 20° 时原地转向。出画时停步寻回。站在身体正前方时可点“设为正前方”。
转向跟随未启动
跟随语音:开始靠近、到达、绕路和无路时播报
机器人状态控制
等待机器人状态…
按官方流程逐步切换。
手势与舞蹈
示教录制与播放
保存会覆盖同编号示教。
卸力后仍可使用 Wi-Fi 和画面。
全部状态编号
0:伺服使能;1:准备姿态;2:走路 / 平衡站立;5:舞蹈;8:打招呼;9:握手;10:欢呼;11:示教录制;12:退出示教;14:保存示教阶段1;23:示教播放;26:保护模式;27:正在起身;28:正在躺下;29:保存示教阶段2;30:关节失能;31:舞蹈1;32:舞蹈2;33:擦眼泪。
过渡状态自动完成。
Bumi 官方状态切换流程
起身流程:失能 → 伺服 → 准备 → 起身 → 平衡站立。
点击流程图查看原图 · 来源:松延动力官方开发文档。