运动扫描技术是如何工作的乐动-软件

由:内森金德勒

MotionScan致力于改善游戏中的面部表情。演员们坐在演播室里,那里有几十台摄像机捕捉每个面部细节的3d视频。“width=
MotionScan致力于改善游戏中的面部表情。演员们坐在演播室里,那里有几十台摄像机捕捉每个面部细节的3d视频。
图像由深度分析提供

狂热的电子游戏玩家很熟悉自己喜欢的游戏所引发的情绪波动。在《超级马里奥赛车》(Super Mario Kart)中获胜让人头晕目眩,在《坦克世界大战》(World of Tanks battle)中被敌乐动体育网站5.0人攻击让人沮丧。

但玩家通常不会在他们的动画屏幕上看到同样的狂喜和沮丧字符。一般来说,这些数字渲染的英雄都有粗糙的特征,只有同样畸形的、电脑生成的母亲才会喜欢。

广告

这完全即将改变。通过Motionscan面部动画技术,由澳大利亚科技公司致为深入分乐动-软件析,游戏玩家将看到比以往任何时候都栩栩如生的角色面部表情。

面部动画技术乐动-软件是一个专门的版本动作捕捉技术乐动-软件,多年来已被用于为电影添加各种特殊动画效果。如果您曾经关注过幕后的动画电影或电影,则将动画字符与实时动作混合,例如“戒指的主”,您可能会识别出的一部分运动捕获过程。在空白的蓝色或绿色背景前的演员,戴着紧密的西装镶嵌着摄像机识别的小标记(通常类似的高尔夫球)。

这些标记帮助摄像机跟踪和记录演员在背景前的动作,这被称为蓝色屏幕或绿色屏幕。背景是空白的,这样摄像机就可以记录演员的表演,而不会有任何分散注意力的外来物体干扰记录或打乱运动跟踪过程。

稍后,动画乐动体育网站5.0师可以使用这些录音来创建与演员类似的数字骨架或木偶。在强大的软件的帮助下,动画师将这个木偶覆盖,无论他们喜欢的任何古怪和乐动体育网站5.0想象力的动画人物。实际上,动画师成为各种类型的木偶,通过脚本的场景移动角色。但这些动画通常缺乏准确的人体语言和面部表情。

对于游戏设计师来说,这是一个大问题,因为人类是由肢体语言驱动的。我们能够识别大约25万个面部表情,并且依赖于视觉肢体语言来进行65%的与他人的互动。皮斯]。

MotionScan技术于2010年初首次向公众推出,旨在创造能够传达可读肢体语言的动画角色。乐动-软件它通过捕捉表演演员的面部特征来清楚地显示出不同,例如,厌恶和高兴,好奇和不感兴趣,以及其他反映角色情绪状态的指标。乐动体育网站5.0正如你将在下一页看到的,这不是一个简单的任务。

广告

革命的面孔

这几乎是真的。这里有一个MotionScan可以捕捉到的高级别细节的例子。“width=
这几乎是真的。这里有一个MotionScan可以捕捉到的高级别细节的例子。
图像由深度分析提供

我们在平面的二维电视屏幕上玩电子游戏电脑监视器。但我们的真实世界是三维的,就像居住在其中的人们的脸一样。乐动体育网站5.0所以,游戏制作者面临的主要挑战之一就是创造出具有3d吸引力的人脸。这就是为什么MotionScan需要一个复杂的光和声音的工作室设置,充满了大量的硬件和软件。

游戏设计者首先记录真实的真人演员坐在演播室里表演,演播室被平滑的光线照亮,没有留下会影响系统准确性的黑暗区域或阴影。在演员的胸部和脖子上做记号;在后期的制作过程中,这基本上给了软件一个参考点,可以用演员的头部代替他或她的动画角色的头部。

广告

Motionscan与常规运动捕获技术不同,因为它同时记录了这么多的角度,每次采取3-D图像。乐动-软件生产者使用32个高清(2百万像素)相机,每次售价约为6,000美元;事实上,它们是美国宇航局使用的相同摄像头来记录空间班车推出[资料来源:Gizmodo]。的相机在演员的上下,为了捕捉人类头部和面部运动的所有细微差别,每秒钟可达30帧。乐动体育网站5.0这加起来大约是每秒十亿字节的数据。

这些摄像头将数据发送到九台强大的计算机服务器上,每台服务器每秒可处理约300兆字节。这些服务器为动画软件提供动力,该软件可以解释视频,立即创建动画纹理和形状,与演员的动作相对应,同时保持图像和声音完美同步。乐动体育网站5.0

这些经过处理的数据可以应用到动画师可以非常精确地操作的数字木偶上。所有这些加起来就是一项重大的技术成就,而且,正如您将看到的,它乐动-软件需要大量的工作来建立。乐动体育网站5.0

广告

灯光,摄像机,3d动作!

MotionScan的设置和它看起来一样复杂,由大约1000台设备组成。“width=
MotionScan的设置和它看起来一样复杂,由大约1000台设备组成。
图像由深度分析提供

在运动扫描系统中使用的齿轮超过1000件。技术人员需要花费近3个工乐动-软件作日的时间来安装所有这些设备,这些设备必须符合严格的规格,才能正常工作。

除了这16双相机为了记录面部细节,还有一个第33相机提供了工作室的概览场景。最后一台摄像机将视频传送到附近的一个房间,导演可以从那里监控录制过程,并向演员提供反馈。

广告

导演有时会提醒演员保持相对静止。太多的动作使得运动扫描更难检测到细微的面部细节。

在演员完成表演后,游戏制作人可以选择许多摄像机在不同角度生成的视图。有了这些视觉数据,动画师可以复制栩栩如生的面部动作和情绪乐动体育网站5.0。在紧张的游戏场景中,这些面部特征可能会向玩家透露关键信息。

由于演员正在从这么多的角度拍摄,因此动画师可以选择并选择他们想要用于特定场景的角度。乐动体育网站5.0此外,动画仪可以添加或减去不同的灯光效果,如强度和角度,使人的脸与黑暗和沙砾酒吧或阳光明媚的夏日田野相匹配。

撒谎的角色可能无法与玩家进行眼神交流,他的眉毛和嘴唇可能会表现出明显的不适。乐动体育网站5.0同样地,如果角色很乐意与玩家交谈,那么友好、开放的微笑和睁大的眼睛便能够传达这一信息。乐动体育网站5.0

接下来,你将看到一家公司如何使用MotionScan生成一些最像人类的角色,为动画视频游戏增添光彩。

广告

在你的脸上,电影!

《黑色洛城》是一款黑暗犯罪游戏,玩家在游戏中需要进行大量审讯。访谈对象的面部表情揭示了重要的线索。“width=
《黑色洛城》是一款黑暗犯罪游戏,玩家在游戏中需要进行大量审讯。访谈对象的面部表情揭示了重要的线索。
图片来自Rockstar

强大的计算机马力驱动运动(driving MotionScan)可以自动调整每个序列的细节,这意味着动画师不需要花几个小时来使每个面部表情看起来更像人类。

那意味着更短的拍摄编程过程,更低的拍摄预算和更快的从概念到市场的进程,这些都为开发者节省了资金,并有可能创造或打破游戏的利润空间。乐动体育网站5.0

广告

Now, all that's left is to see how much gamers notice and appreciate MotionScan's breakthroughs.The game L.A. Noire, which will officially be released in May 2011, is the first type of media to use MotionScan, which was integrated into the game to add lifelike facial animation. Noire is an ominous, mature crime game for adults set in 1940s-era Los Angeles that's designed to play like an interactive movie. In keeping with its film-like aspirations, the game casts Aaron Staton (from television series "Mad Men") in the lead character's role.

这款游戏很大程度上依赖于角色发展和对话,因此,准确的面部表情非常重要——如果没有这些细微差别,玩家将很难阅读角色并在情节中乐动体育网站5.0移动。例如,由于这是一部犯罪乐动体育网站5.0剧,一些角色的脸提供了明显的线索,表明他们在撒谎。讯问并证明问题是有助于向前移动情节的关键元素,因此肢体语言和面部表情是关键。

在未来,开发这项开创性技术的深度分析公司可能会将其授权给其他视频游戏开发商和电影制片人。乐动-软件所以,有一天,你可能会在动画电影中看到这项技术。乐动-软件

目前,公司正致力于完善和扩展MotionScan的功能。最终,MotionScan的制作者想要捕捉全身的图像,这对电影制片人来说特别有用。然而,这是MotionScan目前还无乐动-软件法克服的一个技术障碍,这在很大程度上是由于其强大的计算机能力和更复杂的演播室建设所需要的。

MotionScan的全身亮相还需等待。与此同时,一些公司已经开始挑战深度分析的动作捕捉技术。乐动-软件请继续阅读,看看竞争对手是如何找到一种方法,以更好的图形取代MotionScan——或者甚至使用不那么复杂的动画。

广告

运动的演变

有些人认为游戏设计师应该使用不太现实的角色,这可能会让电子游戏更吸引玩家。“width=
有些人认为游戏设计师应该使用不太现实的角色,这可能会让电子游戏更吸引玩家。
Hemera /思想库

现在你知道肢体语言和面部表情如何让游戏角色更加迷恋。但是将模拟面部抽搐变为数字情绪并不容易。人类面临大约19个肌肉,并复制所有情绪杂技采用创新的编程和一个复杂的尖端技术,如Moti乐动体育网站5.0onscan。乐动-软件

其他开发者也很乐意接受MotionScan的目标,并且希望能够比深度分析更好地实现这些目标。一家名为Remedy的公司正在研究面部表情技术,该技术可以记录大约64种面部姿势;乐动-软件从这个基本集合中,动画师可以实时地创乐动体育网站5.0建表达式,而不需要额外的演员表演。据说这项乐动-软件技术甚至可以解释面部血液流动和肌肉运动时皮肤皱褶时皮肤颜色的细微变化。

广告

如果他们成功,补救措施和深度分析将产生可以为非常引人入胜的游戏制作的超现实动画字符。这些人类人类的角色是弥合所谓的“的努力之一”恐怖谷这一理论最初与机器人

当游戏设计师提到不可思议的谷时,他们指的是我们对真实人的看法与动画的陈述之间的差距。我们的数字Doppelgangers越逼真,我们可能会发现它们的令人不安。人们愿意接受人类的卡通漫画 - 甚至相当现实的漫画 - 但过于现实的讲话往往被视为令人毛骨悚然和令人不安。

所以乐动体育网站5.0,随着人类角色变得越来越逼真,恐怖谷效应开始占据主导地位,并开始破坏乐趣。这似乎是违反直觉的,但出于这个原因,这些复杂的细节动画实际上可能会削弱游戏捕捉和催眠玩家的能力。

动画师和游戏制作者都很清楚恐怖谷现象,所以他们努力让自己的动画变得更好。但一些批评人士说,游戏开发者应该改变方向,少把注意力放在制作人类动作的精确复制上,而把更多精力放在保持令人着迷的游戏玩法上。他们坚持认为,只有这样,游戏才能真正变得更加丰富让人上瘾对于制作这些游戏的公司来说,它们会更有趣,也更有利可图。

不管MotionScan的表现如何,动画师们似乎都决心要创造出有史以来最像人类的数字角色。动画技术的这些新发展可能会使游戏在视觉上更加吸引人,但它们也可能将游戏带乐动-软件到一个全新的水平,产生比以往任何时候都更令人兴奋的更高的艺术形式。

广告

更多信息

相关文章

更大的链接

  • Broughall,尼克。"黑色洛杉矶如何用运动扫描技术征服恐怖谷"乐动-软件Gizmodo.com。2010年12月17日。(2011年4月17日).北京:/ / gizmodo.com/ # !5714436 / how-la-noire-conquered-the-uncanny-valley-with-乐动-软件a-tech-called-motionscan
  • 考恩,尼克。“《LA Noire预览:最终的电子游戏感觉像一部电影。”《每日电讯报》。2010年12月15日。(2011年4月17日).北京:/ / www.telegraph.co.uk /技术/乐动-软件游戏/ 8204296 / L-A-Noire-preview-finally-the-videogame-that-feels-like-a-film.html ? utm_source = tmg&utm_medium = TD_8204296&utm_campaign = Tech2901
  • 戴维森,约翰。“我在E3看到的最令人印象深刻的事情。”gamepro.com。2010年6月25日。(2011年4月17日).http://www.gamepro.com/article/news/2156667/the-most-impressive-thing-i-saw-at-e3/
  • 深度分析新闻稿。“突破性的新动作扫描技术将重新定义3D CGI表演。”乐动-软件Depthanalysis.com。2010年3月1日。(2011年4月17日).北京:/ / depthanalysis.com/downloads/pr/depth_analysis_announcement_20100301.pdf
  • 盖洛,胭脂。“肢体语言:职场成功的关键。”Businessweek.com。2007年2月14日。(2011年4月17日).北京:/ / finance.yahoo.com/career-work/article/102425/Body_Language: _A_Key_to_Success_in_the_Workplace
  • 戈斯,帕特里克。“黑色LA乐动-软件的技术。”乐动-软件Techradar.com。2011年1月19日。(2011年4月17日).北京:/ / www.tech乐动-软件radar.com/news/gaming/the -技术- la -角- 922086 ? artc_pg = 1
  • 哈达利哈丹。乐动体育网站5.0“Max Payne开发人员倾向于不可思议的山谷。”乐动-软件Techradar.com。2011年4月11日。(2011年4月17日).http://www.techradar乐动-软件.com/news/gaming/max-payne-developer-leaps-over-the-uncanny-valley-942208
  • IGN娱乐网站。《安迪·瑟金斯的采访》Movies.ign.com。2003年1月27日。(2011年4月17日).北京:/ / movies.ign.com/articles/383/383888p4.html
  • 英,蒂姆。“大卫·凯奇:《黑色洛杉矶》技术是‘有趣的死胡同乐动-软件’,Quantic的新方法才是未来。”Computerandvideogames.com。2011年3月31日。(2011年4月17日).北京:/ / www.computerandvideogames.com/296388/news/david-cage-la-noire-tech乐动-软件-is-interesting-dead-end-quantics-new-approach-is-the-future/
  • 《指环王》的采访。“超越特殊效果。”Lordoftherings.net。(2011年4月17日).北京:/ / www.lordoftherings.net/film/exclusives/editorial/beyondeffects.html
  • 《新闻周刊》的视频。“电子游戏:有机运动。”Newsweek.com。2007年3月6日。(2011年4月17日).北京:/ / www.newsweek.com/video/2007/03/06/videogames-organic-motion.html
  • 纳特基督徒。《访谈:赋予黑色洛杉矶表演生命的乐动-软件技术》Gamasutra.com。2010年7月22日。(2011年4月17日).北京:/ / www.gamasutra.com/view/news/29345/Interview_The_Tech乐动-软件_Designed_To_Give_LA_Noires_Performances_Life.php
  • 奥坎尼斯,凯文。“游戏面部:L.A.Noire将演员充分表现给游戏。”fastcompany.com。2011年2月4日。(2011年4月17日).http://www.fastcompany.com/1724050/la-noire-brendan-mcamnara-team-bondi-rockstar-games-motionscan
  • 暂停,艾伦乐动体育网站5.0和芭芭拉。“肢体语言的明确书。”矮脚。2006年。
  • 理查兹,乔纳森。栩栩如生的动画预示着电脑游戏的新时代。《纽约时报》。2008年8月18日。(2011年4月17日).北京:/ / tech乐动-软件nology.timesonline.co.uk tol /新闻/ tech_and_web / article4557935.ece
  • 科学日报。“运动捕捉技术前进。”乐动-软件ScienceDaily.com。2009年6月4日。(2011年4月17日).http://www.sciencedaily.com/releases/2009/06/090602083356.htm
  • 科学日报。《从死亡中学习:面部肌肉可以告诉我们关于情绪的什么》ScienceDaily.com。2008年6月17日。(2011年4月17日).北京:/ / www.sciencedaily.com/releases/2008/06/080616205044.htm
  • 鞋匠,娜塔莉。“Rockstar的《黑色洛杉矶》得到了MotionScan的处理。”Pcmag.com。2010年12月16日。(2011年4月17日).北京:/ / www.pcmag.com/article2/0, 2817年,2374423,00. asp
  • 歌手,格雷戈里。“两座塔:面对脸上的胶质。”awn.com。2003年3月27日。(2011年4月17日).http://www.awn.com/articles/technolog乐动-软件y/two-towers-face-face-gollum
  • 战略信息人员。“补救措施拥有他们的面部动画将使La Noire出来。”StrategyInformer.com。2011年4月11日。(2011年4月17日).http://www. strightyinformer.com/news/11835/remedy-boasts-their-facial-animation-will-outclass-la-noire
  • 高桥,院长。“Xsens科乐动-软件技通过紧身衣捕捉人类的每一个动作。”Venturebeat.com。8月4日,2009年。(2011年4月17日).北京:/ / venturebeat.com/2009/08/04/xsens-tech乐动-软件nologies-captures-every-human-motion-with-body-suit/
  • 汤普森,克莱夫。“亡灵区。”slate.com。2004年6月9日。(2011年4月28日)。
  • 《今日美国》。“托尔金三部曲:把一切加起来。”USAtoday.com。2003年12月15日。(2011年4月17日).北京:/ / www.usatoday.com/life/movies/news/2003-12-12-lotr-adding_x.htm