简介
运动捕捉系统是一种用于准确测量运动物体在三维空间运动状况的高技术设备.它基于计算机图形学原理,通过排布在空间中的数个视频捕捉设备将运动物体(跟踪器)的运动状况以图像的形式记录下来,然后使用计算机对该图象数据进行处理,得到不同时间计量单位上不同物体(跟踪器)的空间坐标(X,Y,Z)。
动作捕捉设备
动作捕捉设备一般由以下几个部分组成:
a) 传感器。所谓传感器是固定在运动物体特定部位的跟踪装置,它将向Motion capture系统提供运动物体运动的位置信息,一般会随着捕捉的细致程度确定跟踪器的数目。
b) 信号捕捉设备。这种设备会因Motion capture系统的类型不同而有所区别,它们负责位置信号的捕捉。对于机械系统来说是一块捕捉电信号的线路板,对于光学Motion capture系统则是高分辨率红外摄像机。
c) 数据传输设备。Motion capture系统,特别是需要实时效果的Motion capture系统需要将大量的运动数据从信号捕捉设备快速准确地传输到计算机系统进行处理,而数据传输设备就是用来完成此项工作的。
d) 数据处理设备。经过Motion capture系统捕捉到的数据需要修正、处理后还要有三维模型相结合才能完成相应的工作,这就需要我们应用数据处理软件或硬件来完成此项工作。
技术分类
技术之一:机械式运动捕捉
机械式运动捕捉依靠机械装置来跟踪和测量运动轨迹。典型的系统由多个关节和刚性连杆组成,在可转动的关节中装有角度传感器,可以测得关节转动角度的变化情况。装置运动时,根据角度传感器所测得的角度变化和连杆的长度,可以得出杆件末端点在空间中的位置和运动轨迹。实际上,装置上任何一点的运动轨迹都可以求出,刚性连杆也可以换成长度可变的伸缩杆,用位移传感器测量其长度的变化。
机械式运动捕捉的一种应用形式是将欲捕捉的运动物体与机械结构相连,物体运动带动机械装置,从而被传感器实时记录下来。X-ist的FullBodyTracker是一种颇具代表性的机械式运动捕捉产品。
这种方法的优点是成本低,精度也较高,可以做到实时测量,还可容许多个角色同时表演。但其缺点也非常明显,主要是使用起来非常不方便,机械结构对表演者的动作阻碍和限制很大。而"猴子"较难用于连续动作的实时捕捉,需要操作者不断根据剧情要求调整"猴子"的姿势,很麻烦,主要用于静态造型捕捉和关键帧的确定。
技术之二:声学式运动捕捉
常用的声学式运动捕捉装置由发送器、接收器和处理单元组成。发送器是一个固定的超声波发生器,接收器一般由呈三角形排列的三个超声探头组成。通过测量声波从发送器到接收器的时间或者相位差,系统可以计算并确定接收器的位置和方向。Logitech、SAC等公司都生产超声波运动捕捉设备。
这类装置成本较低,但对运动的捕捉有较大延迟和滞后,实时性较差,精度一般不很高,声源和接收器间不能有大的遮挡物体,受噪声和多次反射等干扰较大。由于空气中声波的速度与气压、湿度、温度有关,所以还必须在算法中做出相应的补偿。
技术之三:电磁式运动捕捉
电磁式运动捕捉系统是目前比较常用的运动捕捉设备。一般由发射源、接收传感器和数据处理单元组成。发射源在空间产生按一定时空规律分布的电磁场;接收传感器(通常有10~20个)安置在表演者身体的关键位置,随着表演者的动作在电磁场中运动,通过电缆或无线方式与数据处理单元相连。
它的缺点在于对环境要求严格,在表演场地附近不能有金属物品,否则会造成电磁场畸变,影响精度。系统的允许表演范围比光学式要小,特别是电缆对表演者的活动限制比较大,对于比较剧烈的运动和表演则不适用。
技术之四:光学式运动捕捉
光学式运动捕捉通过对目标上特定光点的监视和跟踪来完成运动捕捉的任务。目前常见的光学式运动捕捉大多基于计算机视觉原理。从理论上说,对于空间中的一个点,只要它能同时为两部相机所见,则根据同一时刻两部相机所拍摄的图像和相机参数,可以确定这一时刻该点在空间中的位置。当相机以足够高的速率连续拍摄时,从图像序列中就可以得到该点的运动轨迹。 MotionAnalysis公司是该领域的佼佼者。
典型的光学式运动捕捉系统通常使用6~8个相机环绕表演场地排列,这些相机的视野重叠区域就是表演者的动作范围。为了便于处理,通常要求表演者穿上单色的服装,在身体的关键部位,如关节、髋部、肘、腕等位置贴上一些特制的标志或发光点,称为"Marker",视觉系统将识别和处理这些标志,如图4所示。系统定标后,相机连续拍摄表演者的动作,并将图像序列保存下来,然后再进行分析和处理,识别其中的标志点,并计算其在每一瞬间的空间位置,进而得到其运动轨迹。为了得到准确的运动轨迹,相机应有较高的拍摄速率,一般要达到每秒60帧以上。
如果在表演者的脸部表情关键点贴上Marker,则可以实现表情捕捉,如图5所示。目前大部分表情捕捉都采用光学式。
有些光学运动捕捉系统不依靠Marker作为识别标志,例如根据目标的侧影来提取其运动信息,或者利用有网格的背景简化处理过程等。目前研究人员正在研究不依靠Marker,而应用图像识别、分析技术,由视觉系统直接识别表演者身体关键部位并测量其运动轨迹的技术,估计将很快投入实用。
光学式运动捕捉的优点是表演者活动范围大,无电缆、机械装置的限制,表演者可以自由地表演,使用很方便。其采样速率较高,可以满足多数高速运动测量的需要。Marker的价格便宜,便于扩充。
这种方法的缺点是系统价格昂贵,虽然它可以捕捉实时运动,但后处理(包括Marker的识别、跟踪、空间坐标的计算)的工作量较大,对于表演场地的光照、反射情况有一定的要求,装置定标也较为烦琐。特别是当运动复杂时,不同部位的Marker有可能发生混淆、遮挡,产生错误结果,这时需要人工干预后处理过程。
主要代表品牌
Motion、IS-1200、ReActor2、Vicon Organic、A.R.T.等等。