第一视角视频数据采集,破解家居收纳场景数据难题

2026-07-13 11:15

VIRDYN - VDEGO - DATA



要让机器人真正学会像人一样,将上衣、裤子、内衣按类别区分,再依据颜色深浅有序摆放,关键在于获取足够精准的第一人称操作数据。VDEgo-C2定制化数据采集服务,正是为此类场景提供标准化数据支撑的专业解决方案。



在企业实际项目推进中,衣柜整理场景面临着动作精细度高、物品种类繁杂、光照条件多变等挑战。VDEgo-C2依托自研的第一视角采集设备,能够同步采集RGB视频、IMU传感信号、同步时间戳以及位姿与标定参数,确保多模态数据的时序严格对齐。采集人员佩戴重量不足300克的设备,即可按照标准化任务卡执行操作,从开柜门、识别衣物类别,到抓取、折叠、悬挂、归位,每个环节的动作数据都被完整记录。

项目团队会根据企业模型的训练目标,评估所需的衣物品类数量、场景复杂度及标注规范,输出专属采集方案与精细化排期计划。随后搭建真实的居家衣柜场景,建立结构化任务卡,清晰涵盖操作指令与关键动作要点,确保现场执行精准可控。


离线独立采集模式下,设备自带物理控制按钮,一键启停并有提示音反馈,数据实时写入本地SD卡并支持加密存储;在线远程控制模式下,同网段的PC或移动端Web页面可实时监控采集状态、控制启停。数据采集完成后,进入清洗与标注环节,包括相机轨迹重建解算、视频畸变矫正、AI预标注加人工协同标注、视频人脸打码处理,以及骨骼关键点和手部动作3D位姿标注、动作分类与行为语义标注,最后经过多轮质检复核。


最终交付的数据集支持avi、csv、json等多种主流格式,可直接对接企业的训练框架。