多模态生成
2 条- 01梦到接触之声:利用视频与音频生成实现零样本力感知操控及数据生成
通过生成接触声音响度调控期望力曲线,为机器人操控视频生成注入力觉先验,解决接触密集任务失败问题。
- 02CMA-OT:面向舞蹈到音乐生成的分层专家监督方法
提出 CMA-OT 框架,通过分层专家监督解决舞蹈视频到音乐生成中的语义粒度不匹配问题
通过生成接触声音响度调控期望力曲线,为机器人操控视频生成注入力觉先验,解决接触密集任务失败问题。
提出 CMA-OT 框架,通过分层专家监督解决舞蹈视频到音乐生成中的语义粒度不匹配问题