中、外文名:动作捕捉,Motion capture
特点:机械性,灵活性,实时性,
支持平台:pc,Linux等
技术简介
常用的运动捕捉技术从原理上说可分为机械式、声学式、电磁式、主动光学式和被动光学式。不同原理的设备各有其优缺点,一般可从以下几个方面进行评价:定位精度;实时性;使用方便程度;可捕捉运动范围大小;抗干扰性;多目标捕捉能力;以及与相应领域专业分析软件连接程度。此外,还有惯性导航运动捕捉
为何使用动作捕捉设备
以往的建模方式一般采用3dmax或者Maya这样的建模工具实现。制作周期长,实现难度大。比如在模型制作中我们需要对虚拟人物的动作进行一祯一祯的制作(而一秒的动作则需要24祯,一般的一个动作约为1-2秒),传统方式只能采取原始的手工方式,在软件中一帧一帧的去调整人物的骨骼数据,同时由于调整骨骼动作对技术人员的要求很高,很难在短时间里做出满意的结果,动作常常是古怪变形,所以大量的时间都耗费在了骨骼动作调整上,直接造成了所有涉及到骨骼动作的作品进度严重缓慢的结果;通知由于耗费的时间过长,影响了制作的进度周期。
根据科学的统计:一秒钟的高品质动画制作的市场价超过150美元,一秒钟的劳力消耗约为8人/小时,其中5.5个单位是动画人的关键桢制作。而使用惯性动作捕捉,1秒钟的劳力消耗少于1人/小时,这在节省4.5个小时的同时,仍可以再制作超过4.5秒的动画。
运动捕捉设备
随着计算机软硬件技术的飞速发展和动画制作要求的提高,在发达国家,运动捕捉已经进入了实用化阶段,有多家厂商相继推出了多种商品化的运动捕捉设备,如 MotionAnalysis 、 Polhemus 、 Sega Interactive 、 MAC 、 X-Ist 、 FilmBox 等,成功地用于虚拟现实、游戏、人体工程学研究、模拟训练、生物力学研究等许多方面。
从技术的角度来说,运动捕捉的实质就是要测量、跟踪、记录物体在三维空间中的运动轨迹。典型的运动捕捉设备一般由以下几个部分组成:
· 传感器。所谓传感器是固定在运动物体特定部位的跟踪装置,它将向 Motion capture 系统提供运动物体运动的位置信息,一般会随着捕捉的细致程度确定跟踪器的数目。
· 信号捕捉设备。这种设备会因 Motion capture 系统的类型不同而有所区别,它们负责位置信号的捕捉。对于机械系统来说是一块捕捉电信号的线路板,对于光学 Motion capture 系统则是高分辨率红外摄像机。
· 数据传输设备。 Motion capture 系统,特别是需要实时效果的 Motion capture 系统需要将大量的运动数据从信号捕捉设备快速准确地传输到计算机系统进行处理,而数据传输设备就是用来完成此项工作的。
· 数据处理设备。经过 Motion capture 系统捕捉到的数据需要修正、处理后还要有三维模型向结合才能完成计算机动画制作的工作,这就需要我们应用数据处理软件或硬件来完成此项工作。软件也好硬件也罢它们都是借助计算机对数据高速的运算能力来完成数据的处理,使三维模型真正、自然地运动起来。
技术之一:机械式运动捕捉
机械式运动捕捉依靠机械装置来跟踪和测量运动轨迹。典型的系统由多个关节和刚性连杆组成,在可转动的关节中装有角度传感器,可以测得关节转动角度的变化情况。装置运动时,根据角度传感器所测得的角度变化和连杆的长度,可以得出杆件末端点在空间中的位置和运动轨迹。实际上,装置上任何一点的运动轨迹都可以求出,刚性连杆也可以换成长度可变的伸缩杆,用位移传感器测量其长度的变化。
早期的一种机械式运动捕捉装置是用带角度传感器的关节和连杆构成一个 " 可调姿态的数字模型 " ,其形状可以模拟人体,也可以模拟其他动物或物体。使用者可根据剧情的需要调整模型的姿态,然后锁定。角度传感器测量并记录关节的转动角度,依据这些角度和模型的机械尺寸,可计算出模型的姿态,并将这些姿态数据传给动画软件,使其中的角色模型也做出一样的姿态。这是一种较早出现的运动捕捉装置,但直到现在仍有一定的市场。国外给这种装置起了个很形象的名字: " 猴子 " 。
机械式运动捕捉的一种应用形式是将欲捕捉的运动物体与机械结构相连,物体运动带动机械装置,从而被传感器实时记录下来。
这种方法的优点是成本低,精度也较高,可以做到实时测量,还可容许多个角色同时表演。但其缺点也非常明显,主要是使用起来非常不方便,机械结构对表演者的动作阻碍和限制很大。而 " 猴子 " 较难用于连续动作的实时捕捉,需要操作者不断根据剧情要求调整 " 猴子 " 的姿势,很麻烦,主要用于静态造型捕捉和关键帧的确定。
技术之二:声学式运动捕捉
常用的声学式运动捕捉装置由发送器、接收器和处理单元组成。发送器是一个固定的超声波发生器,接收器一般由呈三角形排列的三个超声探头组成。通过测量声波从发送器到接收器的时间或者相位差,系统可以计算并确定接收器的位置和方向。
这类装置成本较低,但对运动的捕捉有较大延迟和滞后,实时性较差,精度一般不很高,声源和接收器间不能有大的遮挡物体,受噪声和多次反射等干扰较大。由于空气中声波的速度与气压、湿度、温度有关,所以还必须在算法中做出相应的补偿。
技术之三:电磁式运动捕捉
电磁式运动捕捉系统是比较常用的运动捕捉设备。一般由发射源、接收传感器和数据处理单元组成。发射源在空间产生按一定时空规律分布的电磁场;接收传感器(通常有 10 ~ 20 个)安置在表演者身体的关键位置,随着表演者的动作在电磁场中运动 , 通过电缆或无线方式与数据处理单元相连。
表演者在电磁场内表演时,接收传感器将接收到的信号通过电缆传送给处理单元,根据这些信号可以解算出每个传感器的空间位置和方向。 Polhemus 公司和 Ascension 公司均以生产电磁式运动捕捉设备而著称。这类系统的采样速率一般为每秒 15 ~ 120 次(依赖于模型和传感器的数量),为了消除抖动和干扰,采样速率一般在 15Hz 以下。对于一些高速运动,如拳击、篮球比赛等,该采样速度还不能满足要求。电磁式运动捕捉的优点首先在于它记录的是六维信息,即不仅能得到空间位置,还能得到方向信息,这一点对某些特殊的应用场合很有价值。其次是速度快,实时性好,表演者表演时,动画系统中的角色模型可以同时反应,便于排演、调整和修改。装置的定标比较简单,技术较成熟,鲁棒性好,成本相对低廉。
它的缺点在于对环境要求严格,在表演场地附近不能有金属物品,否则会造成电磁场畸变,影响精度。系统的允许表演范围比光学式要小,特别是电缆对表演者的活动限制比较大,对于比较剧烈的运动和表演则不适用。
技术之四:光学式运动捕捉
光学式运动捕捉通过对目标上特定光点的监视和跟踪来完成运动捕捉的任务。常见的光学式运动捕捉大多基于计算机视觉原理。从理论上说,对于空间中的一个点,只要它能同时为两部相机所见,则根据同一时刻两部相机所拍摄的图像和相机参数,可以确定这一时刻该点在空间中的位置。当相机以足够高的速率连续拍摄时,从图像序列中就可以得到该点的运动轨迹。
典型的光学式运动捕捉系统通常使用 6 ~ 8 个相机环绕表演场地排列,这些相机的视野重叠区域就是表演者的动作范围。为了便于处理,通常要求表演者穿上单色的服装,在身体的关键部位,如关节、髋部、肘、腕等位置贴上一些特制的标志或发光点,称为 "Marker" ,视觉系统将识别和处理这些标志,如图 4 所示。系统定标后,相机连续拍摄表演者的动作,并将图像序列保存下来,然后再进行分析和处理,识别其中的标志点,并计算其在每一瞬间的空间位置,进而得到其运动轨迹。为了得到准确的运动轨迹,相机应有较高的拍摄速率,一般要达到每秒 60 帧以上。
如果在表演者的脸部表情关键点贴上 Marker ,则可以实现表情捕捉,大部分表情捕捉都采用光学式。
有些光学运动捕捉系统不依靠Marker 作为识别标志,例如根据目标的侧影来提取其运动信息,或者利用有网格的背景简化处理过程等。研究人员正在研究不依靠 Marker而应用图像识别、分析技术,由视觉系统直接识别表演者身体关键部位并测量其运动轨迹的技术,估计将很快投入实用。
光学式运动捕捉的优点是表演者活动范围大,无电缆、机械装置的限制,表演者可以自由地表演,使用很方便。其采样速率较高,可以满足多数高速运动测量的需要。Marker 数量可根据实际应用购置添加,便于系统扩充。
这种方法的缺点是系统价格昂贵,它可以捕捉实时运动,但后处理(包括 Marker 的识别、跟踪、空间坐标的计算)的工作量较大,适合科研类应用。
技术之五:惯性导航式动作捕捉
通过惯性导航传感器AHRS(航姿参考系统)、IMU(惯性测量单元)测量表演者运动加速度、方位、倾斜角等特性。不受环境干扰影响,不怕遮挡。捕捉精确度高,采样速度高,达到每秒1000次或更高。由于采用高集成芯片、模块,体积小、尺寸小,重量轻,性价比高。惯导传感器佩戴在表演者头上,或通过17个传感器组成数据服穿戴,通过USB线、蓝牙、2.4Gzh DSSS无线等与主机相联,分别可以跟踪头部、全身动作,实时显示完整的动作。
中国市场优势
目前国内的动画制作系统普遍价格昂贵,操作复杂,制作周期过长,而且动作捕捉系统成本需要几十万元到上百万元。所有的这些因素,限制了动作捕捉技术在中国市场的广泛应用。只能被用在寥寥无几的大型工作室或事业单位,使得大多数中小型动画工作室和自由动画人望洋兴叹,使他们失去了公平参与市场竞争的机会,对产业而言,或许许多更好的创意来自大多数中小型动画工作室和自由动画人,但因为一些技术的限制而无法实现,限制了产业的发展。正打破传统束缚,与光学动做捕捉系统要求专业人员操作不同,它可以适合任何人使用,甚至可以称为个人动画制作系统。解决了长期以来中国工作者不得不以手工制作动画的问题,可以快速制作高品质动画角色,提高10倍工作效率,最少节约了75%的时间,同时在经济上也缓解了负担。
性价比高,捕捉数据精度高,可用于全身追踪或部分肢体追踪,提供物体自然运动,可以达到手绘的动画效果。不同与光学系统,演员的运动身体部分遮挡并不影响惯性动作捕捉的性能。其维护简便,可在任何地方使用,无需特殊工作室。
惯性传感器
多用途超微型3D方向传感器,由三种传感元件组成,分别为:三轴MEMS陀螺仪、三轴MEMS加速度计以及三轴磁电阻磁强计,适用于动作捕捉、载人/无人设备稳定等应用领域。可以输出以下数据:四元数据、原始惯性传感数据、欧拉角数据等。
模块可进行独立校准,校准时使用专门的无磁实验室,可以设置特定温度下设备的加速度、角速率以及磁场数据。此外,客户还可以对设备进行自行校准,从而有效避免实际使用环境中的软硬铁干扰。
特点
灵活性:您无论何时何地都能操作使用,不再需要动作捕捉工作室
高性价比:行业内性价比最高的动作捕捉解决方案——Noitom
携带方便:多部件集成,尺寸小巧,可装在笔记本电脑包大小的手提箱中轻松携带,能够胜任多人动作捕捉需
强大功能:具有温度补偿性能,可浸在水中使用,广泛适用于多种的工作环境下的动作捕捉解决方案
可选套装样式
系带套装:
使用者的每个身体部位单独安装捕捉装置,提高了灵活性,适合不同体型的人士使用。
内置式套装:
全身套装:定制式全身套装的传感器和线缆均为嵌入式。捕捉服可水洗,使用极其方便,可以快速安装并且开始工作。
全身套装
定制式全身套装的传感器和线缆均为嵌入式。捕捉服可水洗,使用极其方便,可以快速安装并且开始工作。
简要技术说明
动作捕捉系统采用17个惯性传感器,可以对人体主要骨骼部位的运动进行实时测量。系统可根据反向运动学原理测算出人体关节的位置,并将数据施加到相应的骨骼上。由于惯性传感器主要依赖无处不在的地球重力和磁场,所以捕捉服在任何地点都可以正常使用,无需事先作任何准备工作。传感器和连接线的外壳具有温度补偿和防水的特性,适合在水下、雨中、或冷热气候中使用,只要是有生物的地方,捕捉服都可以正常使用。
动作捕捉系统的软件开发工具包为用户提供了高性价比的人体动作追踪解决方案。客户可以在任何实际的追踪应用需要中使用业内最热门的惯性跟踪装置。
SDK
◆直接打开和监控所有传感器数据
◆可与用户自己的运动分析应用直接集成
◆可实现深度动作分析,包括运动速度、加速度监控等
◆将输出数据与商业游戏引擎集成,适用于虚拟现实和增强现实领域
◆创建自己的惯性运动跟踪系统
用户群
院校用户
给各大专院校提供了高性价比的解决方案,您能够直接在课堂中使用,不需要事先进行任何安装和设置。可以用手提箱带到使用地点,几分钟内即可开始使用。
游戏开发者
不仅仅为您提供了动作捕捉解决方案,更能够让您在任何地点轻松完成动作捕捉。假如您在研发一款足球网络游戏,您可以带到球场上进行动作捕捉,非常方便。
动画制作者
用户甚至可以在自己的家里进行动作捕捉,完全无需使用专业的工作室。让您足不出户便可轻松完成动作捕捉项目。
二次开发用户
用户可以将更深层次的扩展其应用领域,甚至可以将动作捕捉变成跟踪交互设备。
动作捕捉组件
1个系带全身套装,或内置式套装,带有
3dsuit动作捕捉组件
3dsuit动作捕捉组件图册
动作捕捉组件
20个传感器
20条传感器连接线
1个无线控制元件
1个USB软件狗
2个电池组(可充电)
2个传感器线分配器
1个动作捕捉系统手提箱
可选动作捕捉系统配件
传感器总线扩展器
USB转换器
发展现状
上世纪七、八十年代,动作捕捉开始是作为生物力学研究中的摄影图像分析工具,随着技术的日渐成熟,该技术开始拓展到教育、训练、运动、电脑动画、电视、电影、视频游戏等领域。使用者在各个关节处配备有标记点(Marker),通过标记点间位置和角度的变化来识别动作。
动作捕捉系统有机械链接、磁传感器、光传感器、声传感器和惯性传感器。每种技术各有优点,但不论何种技术,用户都会受到某些限制。
● 光学式使用光学感知来确定对象的实时位置和方向。光学式设备主要包括感光设备(接收器)、光源(发射器)以及用于信号处理的控制器。感光设备多种多样,例如普通摄像机、光敏二极管等。光源可以是环境光,也可以是结构光。为了防止可见光的干扰,通常采用红外线、激光等作为光源。由于光的传播速度很快,因此光学式设备最显著的优点是速度快、具有较高的更新率和较低的延迟,较适合实时性强的场合,在小范围内工作效果好。红外被动光学式动捕工作原理:多个相机组成的捕捉空间,相机上的近红外LED照射目标物上的反射标记点(上图中周围的一圈光源就是近红外光源),相机对标记点进行红外成像,提取标记点的二维信息,通过多个相机对同一标记点反馈的空间数据,计算出Marker点的三维位置信息,动捕系统将完成对表演者的动作连续拍摄、图像存储、分析、处理,完成对运动轨迹的实时记录。
● 惯性式通过盲推得出被跟踪物体的位置,也就是说完全通过运动系统内部的推算。优点是不存在发射源、不怕遮挡、没有外界干扰,有无限大的工作空间。缺点是快速积累误差。
● 机械式是比较古老的跟踪方式,使用连杆装置组成。是价格比较便宜、精确度较高和响应时间短的系统。它可以测量物体整个身体运动,没有延迟,而且不受声、光、电磁波等外界干扰。另外,它能够与力反馈装置组合在一起。缺点是比较笨重,不灵活,而且有惯性。由于机械连接的限制,其工作空间也受到一定的限制,而且工作空间中还有一块中心地带是不能进入的,俗称机械系统死角,使机械设备不能进入。
● 电磁式利用磁场的强度进行位置和方位跟踪。一般包括发射器、接收器、接口和计算机。优点是不存在遮挡问题,接收器与发射器之间允许有其他物体,也就允许用户走动。相对于其他运动捕捉设备,它的价格较低、精度适中、采样率高(可达120次/秒)、工作范围大(可达60m),允许多个磁跟踪器跟踪整个身体运动,并且增加了跟踪运动的范围。缺点是易受电子设备、铁磁场材料的干扰,可能导致磁场变形引起误差。测量距离加大时误差增加,时间延迟交大(33ms),有小的抖动。
应用领域
提供新的人机交互手段 表情和动作是人类情绪、愿望的重要表达形式,运动捕捉技术完成了将表情和动作数字化的工作,提供了新的人机交互手段,比传统的键盘、鼠标更直接方便,不仅可以实现 " 三维鼠标 " 和 " 手势识别 " ,还使操作者能以自然的动作和表情直接控制计算机,并为最终实现可以理解人类表情、动作的计算机系统和机器人提供了技术基础。
虚拟现实系统 为实现人与虚拟环境及系统的交互,必须确定参与者的头部、手、身体等的位置与方向,准确地跟踪测量参与者的动作,将这些动作实时检测出来,以便将这些数据反馈给显示和控制系统。这些工作对虚拟现实系统是必不可少的,这也正是运动捕捉技术的研究内容。
机器人遥控 机器人将危险环境的信息传送给控制者,控制者根据信息做出各种动作,运动捕捉系统将动作捕捉下来,实时传送给机器人并控制其完成同样的动作。与传统的遥控方式相比,这种系统可以实现更为直观、细致、复杂、灵活而快速的动作控制,大大提高机器人应付复杂情况的能力。在当前机器人全自主控制尚未成熟的情况下,这一技术有着特别重要的意义。
互动式游戏 可利用运动捕捉技术捕捉游戏者的各种动作,用以驱动游戏环境中角色的动作,给游戏者以一种全新的参与感受,加强游戏的真实感和互动性。
体育训练 运动捕捉技术可以捕捉运动员的动作,便于进行量化分析,结合人体生理学、物理学原理,研究改进的方法,使体育训练摆脱纯粹的依靠经验的状态,进入理论化、数字化的时代。还可以把成绩差的运动员的动作捕捉下来,将其与优秀运动员的动作进行对比分析,从而帮助其训练。
另外,在人体工程学研究、模拟训练、生物力学研究等领域,运动捕捉技术同样大有可为。
可以预计,随着技术本身的发展和相关应用领域技术水平的提高,运动捕捉技术将会得到越来越广泛的应用。
via:互动百科
相关报道
手机扫描左侧二维码
或微信搜索公众号VR日报,每日获取精彩的VR资讯
关注VR日报 完整你的虚拟现实梦!
十大热词
- 1.小米VR眼镜
- 2.PSVR
- 3.百度VR浏览器IOS版本
- 4.最终幻想15
- 5.Oculus Rift
- 6.《极品飞车》VR版
- 7.黄晓明的易星传媒与VR有什么关系
- 8.虚拟现实
- 9.视场角
- 10.HTC Vive