—— 青亭网
虚拟化身动作不协调?Meta开源肌肉骨骼动力学模型MyoSuite
Esther | 编辑
Quest手势识别功能,让人们看到VR与手部交互结合的潜力,尤其是在虚拟社交场景,人们可以通过手势来操控虚拟化身,用身体语言来完善对话或文字的社交体验。
然而Meta并未就此止步,最近又公布了一种可模拟肌肉骨骼运动的AI模型:MyoSuite,该研究为Meta AI特温特大学合作开发,目前可模拟用手转笔或健身球等细致的动作。这意味着,未来Meta可通过该平台生成模拟的手势或姿态数据,用于训练手势或姿态识别算法,进一步提升算法的准确性。
细节方面,MyoSuite是一个具身AI平台,该平台通过统一的运动和神经智能,将机器学习技术应用于解决生物力学控制问题。其特点是可模拟肌肉骨骼模型运动,同样可满足现有ML算法对于数据的要求,MyoSuite比其他模拟器要快4000倍。
模拟复杂的人体运动
Meta表示:有机体越智能,它表现出的运动行为就越复杂。比如人体生物力学就相当复杂,由多关节、多启动器的肌肉骨骼系统组成。肌肉每次收缩,会造成多个关节弯曲,而每个关节的运动,都由多块肌肉控制。
在这样复杂的生物力学系统中,人类通过协调中枢神经系统和外围肌肉骨骼系统,来合成和表现智能运动。其中,每个决策由数十亿神经元网络合成,而外围肌肉骨骼系统的作用是将神经意图转化为动作。
那么问题来了,是什么驱动了如此复杂的决策和动作控制,并执行这些决策?
为了探索上述问题,Meta开发了MyoSuite,其中包含一组肌肉骨骼模型和任务,可帮助机器学习模型来解决生物力学控制问题。
细节方面,MyoSuite统一了智能体运动的两大要素:运动和神经。通过MyoSuite,Meta进一步了解到感觉运动控制的细节,发现感觉运动控制依赖于不同的本体感受信号,来协调全身运动控制,在交互场景中展现智能行为。
通常,人工智能领域利用神经结构或神经网络,来模拟智能行为。相比之下,MyoSuite方案模拟肌肉骨骼模型逼真的生理机能,比市面上其他同类模型的计算效率和可扩展性更高(几个数量级),甚至可合成人体内大部分肌肉运动。
此外,MyoSuite实现了此前未实现的一些精细的手部运动,比如转笔、扭转钥匙、单手玩健身球等等。
机器学习生成肌肉骨骼运动
机器学习算法的优势在于,利用计算机的数据和可扩展性,效率更高,可解决一些人力不能解决的问题。但是,机器学习算法很少用于学习肌肉骨骼控制等复杂的运动,其原因是:虽然现有的计算机框架(OpenSim)包含生理结构细致的肌肉骨骼模型,但这些模型缺乏允许AI代理与物理世界交互的复杂能力。而这种能力,对于具身AI很重要,因为具身AI的定义就是一种可与周围环境互动的智能体。
此外,现有的计算机框架未嵌入到复杂、熟练的运动任务中,也没有足够的效率和扩展性,因此不能满足机器学习算法的数据需求。与此同时,MyoSuite填补了这方面的缺失。
现实应用场景
MyoSuite不仅可以合成行为,还可以用于医疗场景。比如用于修复肌腱撕裂伤时,MyoSuite可生成肌腱移植模型,或是模拟外科手术的结果(灵活性),以及术后受伤部位功能康复的影响。
此外,MyoSuite还可以模拟肌肉运动,来优化设计夹板的支撑结构和复健流程。
MyoSuite的目标是,成为将运动和神经智能统一的首选平台,并应用于多个不同领域,优化AI驱动的谷歌运动模拟方案。潜在的应用场景包括:开发智能假肢、伤后复健、人体工程学等领域,可模拟准确的物理动作,比如转笔或盘健身球。
此外,MyoSuite也可以用于元宇宙场景,比如帮助开发者构建更逼真的虚拟化身运动,使虚拟社交体验更具表现力和沉浸感。
提供大量参考模型+基准
产品定位方面,MyoSuite是一个从头设计的综合平台,其目的是用来研究肌肉骨骼运动背后的生理机能细节。
MyoSuite生态系统包括一整套肌肉骨骼模型,并提供了大量的参考模型和一套综合基准。其特点是经过细致调整,可准确模拟人体生理机能,且支持时间相关的交互式肌肉骨骼运动,比如肌肉疲劳、肌肉衰减等等。此外,也可以模拟精细、复杂的行为,用于研究日常运动、损伤复健、假肢和外骨骼辅助等领域。
接下来,Meta也将开源MyoSuite,此外还推出MyoChallenge,挑战开发者和科研人员,模拟掷骰子和双保健球旋转两个灵巧的动作,进一步鼓励大家继续对这一方向展开研究。
参考:
https://tech.fb.com/artificial-intelligence/2022/05/myosuite/
( END)
—— 青亭网
关注公众号:拾黑(shiheibook)了解更多
赞助链接:
关注数据与安全,洞悉企业级服务市场:https://www.ijiandao.com/
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
让资讯触达的更精准有趣:https://www.0xu.cn/
随时掌握互联网精彩
- 澳元兑换人民币汇率2024年2月5日
- 社区精选|花了半个小时基于 ChatGPT 搭建了一个微信机器人
- 社区精选|万能的 CSS 渐变!单标签绘制一个足球场
- 敲黑板!这10大行业,将开展虚拟现实规模化应用试点
- 以技术驱动品牌,专访沃普思智能集成厨电COO叶敬民
- 周礼栋博士升任微软亚洲研究院院长
- 我以为是5刀买一款,想不到是5刀买全部
- 有微信号就能查到聊天记录?真的吗?
- 一文读懂人工智能产业最新发展趋势
- 【大公司创新情报】阿里巴巴将取消强制“361”制度,不强制10%员工无年终奖
- 万达体育:董事会同意从纳斯达克退市;厦门2021年将实现5G信号全域覆盖|Do早报
- 虾米音乐,阿里大文娱倒下的第一名战士