基于路径引导的果蝇幼虫运动合成

2023年第24卷第10期

摘要

关键词

相关研究

回顶部

《信息与电子工程前沿（英文）》 >> 2023年第24卷第10期 doi: 10.1631/FITEE.2200529

基于路径引导的果蝇幼虫运动合成

1之江实验室基础理论研究院，中国杭州市，311121；2康复大学康复科学与工程学院，中国青岛市，266114；3浙江大学求是高等研究院，中国杭州市，310027；4浙江大学医学院附属精神卫生中心附属第二医院神经生物学与神经病学系，中国杭州市，310058；5浙江大学脑科学与脑医学学院教育部脑与脑机融合前沿科学中心，医学神经生物学卫生部重点实验室，中国杭州市，310058

收稿日期： 2022-10-31 录用日期： 2023-10-27 发布日期： 2023-10-27

HTML7 PDF 22 收藏 0

摘要

软体动物身体可变形性和高自由度的特点为数学建模和运动合成带来很大挑战。受限于刚体骨骼假设或模型容量，传统解析模型和统计模型难以生成逼真和多模态的软体动物运动。本文建立一个大规模果蝇幼虫动态姿态数据集，并提出一个运动合成模型（Path2Pose），通过给定一段幼虫初始运动姿态序列和引导路径生成后续运动姿态序列。进一步地，通过循环生成的方式，Path2Pose模型可以合成长时间、多模态的果蝇幼虫运动姿态序列。运动评估实验表明，Path2Pose模型可以生成高度真实的软体动物运动，并在现有同类型模型中取得最好生成效果。本文的工作证明了深度神经网络在软体动物运动合成任务中的良好性能以及通过定制软体动物体型和引导路径生成长时间运动姿态的可行性。

关键词

软体动物运动合成 ; 动态姿态数据集 ; 形态学分析 ; 长时间姿态序列生成