瑞文科技创始人重新开始“rct工作室”使用人工智能引擎进行沉浸式全互动娱乐

2020-01-17 16:38 来源:科创网

原创标题:瑞文科技创始人开创新事业,“rct工作室”使用人工智能引擎进行沉浸式全互动娱乐

2018年12月,互动电影《黑镜:潘达斯奈基》(黑镜:抢乐队)在网飞推出,允许玩家在不同事件中替代主角选择不同的故事线。

新颖的互动模式吸引了观众的极大兴趣,飙升的用户流量甚至导致网飞服务器一度瘫痪。自2019年以来,谷歌、亚马逊和英国广播公司已经宣布制作和推出自己的互动作品。在中国,互联网巨头如iQiyi、腾讯和BStation也开始推出互动游戏。

rct工作室是36氪星最近联系的一家新的创意娱乐工作室。成立于2018年,致力于通过人工智能开发下一代沉浸式互动娱乐体验。公司曾入选美国最大创业孵化器 Y combinator, 同时是YC China第一批学员。

从互动的角度来看,rct工作室创始人鲁成认为,拿着遥控器在仅有的几个选项中选择一个剧情并不是互动电影这对观众体验而言,是割裂的的最终形式。

在rct工作室的视野中,用户需要完全沉浸在故事环境中,自然语言和动作成为影视画面的连接点,参与者可以自由进行决策,每一次动作都能被即时绘制成相应的3D视图,推动故事发展。不能从形式上具体定义为电影或游戏。rct工作室将其统称为沉浸式全互动娱乐。

那么,怎么做?

rct studio自主开发了一款基于人工智能的语素引擎,其核心功能是机器学习、自然语言程序(NLP)、文本到3D渲染以及基于深度神经网络计算的运动预测生成系统。

通过研究大量的脚本,莫斐斯可以将输入的单个故事情节扩展到一个开放的世界,从文本中理解情节和人物之间的内在逻辑和关系,并据此丰富每个人物的思维和行动方式。这相当于每个角色都有一个独特的人工智能模型。这些算法将理解他们应该在这个故事线中做什么,然后他们将在角色之间交叉检查,最后可视化所有可能的结果。

这可以提供的价值是,在观众参与剧情之后,其他NPC人将开始对所做的每一个选择做出回应,只要它符合故事环境的逻辑。换句话说,人工智能可以自动完成故事线的构建,解决了互动戏剧早期大量手工作家的故事分支工作。

50d74068b7e9480ea749a487af291fc4.gif

Story Branch

通过输入字符,实时文本到3D图像程序可以快速实时生成人和物体的物理表达和运动关系。

84684cc4675a4844bca9c62bc69e1756.gif

使用实时流式传输方法。该算法预测字符运动的每一帧,并推导出下一帧的预渲染结果,从而实现实时动态处理,无需在计算机侧进行局部操作或额外渲染。

以步行为例,利用运动预测生成一条可以在步行过程中任意规划和调整的路径。假设一块石头突然被放在道路上,人们将直接避开动态过程中的障碍,然后重新规划道路。

7376c15d7ad04b3c8cfc821b9d27fbb3.png

的左侧可以自动避开障碍物

这是一种新的数字内容生产方式,吕骋称,可以将制作周期大幅缩减。还是以走路为例,在传统的制作流程中,需要先做三维建模、骨骼绑定、以及动态调整。利用这个程序,原本可能需要8-9月完成的工作,只需要3-4天就可以完成。

并且该程序可以支持多个对象之间的移动关系,同时考虑到物理级别的重要性。例如,如果杯子被扔在沙发或桌子上,后者会打碎,而前者不会。在互动娱乐环境中,这可以为即时角色反馈提供物理支持。

一般来说,使用莫斐斯引擎(Morpheus engine)制作互动娱乐产品的过程,机器只需输入好莱坞标准脚本或描述足够清晰的场景,就可以自动扩展故事节点,完善人物决策模型,生成场景的物理表达以及人与物之间的运动关系。

用户戴上带有麦克风和体感设备的虚拟现实眼镜来扮演自己的角色,然后他们就可以开始与剧中的角色进行语音对话互动和动作互动。

吕骋称,rct studio核心希望解决的是如何将文字快速生成有内部逻辑的开放世界以及如何变成实时的动作,无论墨菲斯还是其他技术手段,它们都只是最终提高虚拟数字内容生产效率的工具。rct工作室希望成为虚拟数字世界的“水电网络”。

与南京大学人工智能创新研究所合作推出用户级体验产品

据rct工作室联合创始人马新杰介绍,rct工作室现已与南京大学人工智能创新研究所达成战略合作。双方将围绕强化学习开展项目合作,研究结果将有助于rct工作室优化决策

2020年,rct studio会推出一款用户级别的娱乐体验产品,以银行抢劫案作为情景主题,主要面向海外市场。

在内容方面,鲁成表示,rct工作室更愿意先与成熟的知识产权合作。目前,它已与科幻内容发行商未来事务管理局达成合作,后者已签约约200名作家,其中包括《三体》作者刘慈欣。稍后,两人将共同推出互动电影。

商业模式上,吕骋称,比起面向B端直接提供工具,rct studio对C端市场更加感兴趣。除了整体产品售卖, 在体验的过程中的增值服务也在想象空间内。

目前,rct工作室拥有10多人的团队,总部位于美国洛杉矶,向百度集团总裁兼首席运营官齐鲁汇报工作。Rct工作室从星际争霸资本和Y Combinator获得了数百万美元的种子回合融资,从制造商基金获得了数千万美元的首轮投资。

来源:rctsudio

标签: studio rct 互动