Meta开发触感皮肤ReSkin 创造逼真虚拟「实感」
2021-11-12 05:30
(星岛日报报道)前facebook行政总裁朱克伯格上月尾宣布将公司改名Meta,以配合「元宇宙」(Metaverse)概念产品和服务的方针后,未几即在网志透露正与卡耐基梅隆大学(Carnegie Mellon University)共同研发关键未来「元宇宙」人工智能(AI)的物料ReSkin。
朱克伯格本月初形容,该公司与卡内基梅隆大学人工智能科学家研发新触感器和弹性可变形的超薄数码「皮肤」ReSkin,可望支持未来元宇宙相关产品的开发。
根据Meta旗下AI部门发表有关ReSkin的文章,介绍ReSkin是可用于研究人工智能触觉感知、多工能、可替换和相对低成本的机械人「皮肤」物料,其厚度少于3毫米。
当Reskin皮肤与另一表面接触时,其内置粒子的磁场会产生变化,传感器会记录磁通量(magnetic flux)的变化,向接收分析所受力度或触感的特定AI软件反馈数据。
朱克伯格表示,Meta设计高解析度的传感器,并与卡耐基梅隆大学合作开发薄质的机械人皮肤,是向元宇宙内逼真的虚拟物体和物理互动跨进一大步。
机械人通过这层数码皮肤的灵敏反馈,可以拿起例如葡萄和蓝莓等柔软易破损的水果,甚至测量人类或动物的触感。Meta的这个AI系统经过100种人类触觉的训练,确保系统收集足够的数据以了解触觉与磁场变化之间的关系,有关成果尚需检讨,稍后亦会在学术期刊发表。
Meta研究部门的科学家古普塔(Abhinav Gupta)表示,鉴于要得到可靠的触觉传感器数据成本太昂贵或太匮乏,AI研究人员往往会忽略触感的研究。纵观近10年AI的发展,在电脑影像的画质、声音例如声频、语言等方面都有重大的进步,唯独非常关键的触感无甚发展。
然而,正如人类从婴孩时期通过视觉、声音、触感、味觉、嗅觉等多种模式的数据收集,来建立全面的世界经验,这也是学习了解世界万事万物的重要手段。
古普塔补充,帮助机器和机械人助手建立触感数据,能令它们理解人类的工作。ReSkin这种物料能感应来自细微至不足1毫米物件的0.1牛顿力量,让机械人通过厚度2毫米至3毫米的ReSkin皮肤,准确感知触觉,并将触感数据输入AI模式,未来可望创建几可乱真的虚拟表面。
由于研究需要大量数据,Meta对触觉传感器需求大,这也是ReSkin制造成本相对低的原因。据悉,生产100张ReSkin时每件成本低于6美元。
纽约大学助理教授平托(Lerrel Pinto)提到,触觉传感器是机械人技术的樽颈,指现时的传感器不但价格高、分辨率低,对于订制机械人而言过于笨重。ReSkin轻巧的外形可兼容不同大小机械手,有潜力解决其中几个问题。
像ReSkin这样的触感皮肤将能提供丰富接触数据源,有助透过广泛的触摸任务来推进AI,包括对象分类、主体感觉和机械人取物。接受过触觉感知技能训练的AI模型可望完成多种认知,包括需要更高灵敏度的工作,例如医疗环境工作、操纵小型、柔软或敏感的物体等。ReSkin亦可以与其他传感器组合,在实验室和在非固定、不可控的非结构化环境中收集视觉、声音和触感数据。
Meta AI表示,除了ReSkin,该公司同时在进行面向触感处理的开源生态系统研究,包括高分辨率触感硬件(DIGIT)、模拟器(TACTO)、基准测试(PyTouch)和数据集等。
最新回应