研究人员使用AI为电影添加4-D效果

詹姆斯·卡梅隆(James Cameron)的3D影戏“阿凡达(Avatar)”在2009年初次上映时试图刷新影戏寓目体验，为观众营造了一个身临其境的天下。可是，假如您还想直接在影戏院座位上乘坐女妖航行时感觉到热和风，该怎么办?

固然已经存在少量添加物理元素的所谓“ 4-D” 影戏，但多伦多大学的研究职员正在研究一种更普及地应用该成果的要领。

“凡是，椅子会摇摆，寓目影戏时也许会溅起水花或举办其他情势的互动，”新兴电子与计较机工程学系Edward Edward S.Roger四年级本科生Yuyu Zhou说道。娱乐。“今朝，全部这些结果都是在建造的第一阶段就建设的。对付那些并非最初为4D影戏院建设的影戏，我们但愿实现这种进程的自动化。”

周正与美国密苏里州大学计较机科学系博士后研究员Makarand Tapaswi和密西沙加大学数学与计较科学系以及三校区计较机科学研究生系的助理传授Sanja Fidler相助。他们最近完成了他们的作品《此刻摇了我：走向自动4-D影戏》，该影戏在犹他州盐湖城的计较机视觉和模式辨认(CVPR)集会会议上成为核心。

周说，凡是是从第一人称视角或摄影机来感知4D影戏。假如“加勒比海盗”中的威尔·特纳(Will Turner)感受到风在吹拂，而看影戏的人想体验成为特纳的经验，那么他们也必需在本身的脸上经验风。

“我们但愿拥有一种成果，您只需轻按一下开关即可体验脚色的感觉，” Zhou说。

为了将通例或3-D影戏转换为4-D，研究职员行使了一个自由网站为其4-D猜测模子注释了影戏的结果。

“譬喻，在《指环王》中，弗罗多将山姆从水中拉了出来，但同时产生了几种影响。”周小刚开始在菲德勒进修的三年级时代就开始事变。 。“起首，他拉扯他-用手举办物理交互。当Sam回到水中时，他拉扯Frodo，船摇了晃。

Tapaswi增补说：“相机就是您的输入。” “可是在这种环境下，您不只要体验相机看到的对象，并且要体验个中的一个脚色-重温脚色感受到的晃动等等。”

尽量4-D技能仍不在物理交互浸染(即手拉)的范畴内，但Tapaswi假想跟着技能的成长，压力传感器可以模仿触摸。该模子也许在其他规模(如假造实际或加强实际)中很有效。

“我们正在网络这些范例的注释以供未来研究，” Zhou说。

对付他们的数据集，他们同时应用告终果分类和检测。对付结果分类，Zhou说他们的神经收集是一种呆板进修成果，可以对数据举办深度说明和进修，并从短片断中提取特性，包罗行为和音频。他说，为了举办检测，神经收集可以猜测长视频剪辑中的影响以及产生的位置。

“您不只要知道特定镜头中的脚色会产生什么。您想说，'[ 结果 ]此刻是风，不只是由于我此刻看到风了，并且是由于早年也许是起风的，”“塔帕斯威说。

研究职员发明，某些范例的影戏每每具有相似的结果-譬喻，在星际或重力等太空中拍摄的影戏。Tapaswi说，这可以看作是一种新奇的集群要领。

“凡是在寓目3D影戏时，影戏观众戴着眼镜坐在椅子上，”周说。“行使自动4D影戏院，神经收集将处理赏罚2D和3D影戏信息，将其输入到椅子上，并模仿结果。”

（编辑：湖南网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!