探索人机交互技术,MetaCon大会游戏与AI交互专场成功举办
如果说电子游戏技术是元宇宙的底层基础设施，灵动之魂，那么AI则是通往元宇宙的关键入口、核心技术。在实现虚拟世界和现实世界的融合和互动中，如何让电子游戏技术在元宇宙中更好地落地？如何实现元宇宙与现实间的“穿梭机”AI数字人？在51CTO举办的「MetaCon元宇宙技术大会」上，答案一一揭晓。
2022年4月23日，「MetaCon元宇宙技术大会」通过线上直播的形式正式召开。在下午的《游戏与AI交互的沉浸式体验》分会场中，来自小冰公司技术副总裁周力、中国首位游戏设计博士/中国传媒大学副教授黄石、商汤科技数字空间（元宇宙）事业群产品总监高瑞声、Unity大中华区平台技术总监杨栋、触角科技有限公司联合创始人/大有不言文化有限公司创始人谷强五位业界专家，围绕元宇宙中的游戏技术、人工智能技术进行了精彩的主题分享。
AI+AI对谈技术的探索和应用
在通往元宇宙的路上，不仅需要人与人之间的对话，人与机器之间的对话，还需要机器与机器之间的对话。关于AI与AI之间是如何进行对话的，业界几乎没有研究和探索。那么，AI和AI之间的对话到底有什么价值？有哪些应用的场景？在小冰公司技术副总裁周力的《AI+AI对谈技术的探索和应用》的主题演讲中，进行了详细的介绍。
周力首先分享了人与机器在对话中存在的主要问题，并基于问题提出了破冰的诀窍。他表示，在元宇宙的世界中，除了人之外，还有AI生活在其中，人与AI共同搭建起了各种交互，这就要求AI和AI之间要建立一个复杂的交互关系和对话。
人与人之间的对话，要比传统的人和机器之间的一问一答的对话模式更加复杂。因此，解决AI和AI之间如何进行对话成为了核心问题。周力表示，在AI和AI的对谈中，由于用户可以同时去控制两个AI的双方，他们之间是透明的。那么，我们就可以像模仿人一样，引入更加复杂的交互模式。同时，在AI和AI的对谈中，把控整体节奏也会变得非常重要。
据周力介绍，小冰通过三种不同的方式实现AI对谈。一是从搜索引擎中爬取结构化的文档，并利用BERT等技术将内容串联，变成AI自己的内容。二是将小冰与网易、新浪等媒体合作的新闻以及评论数据进行整理，抽取高质量的内容变成AI对话。三是利用GPT-3等大型模型来生成流畅的文本，生成AI对话。在接下来的时间里，周力对三种技术的实现方法和应用场景等进行了详细的解读。
周力表示，有了AI和AI之间的对话，能够让人和人之间更快地融入到AI环境中，变成一堆人和一堆AI的沉浸式社交体验，这就是小冰在元宇宙领域的主要探索方向。
人工智能技术驱动元宇宙迈向新台阶
元宇宙的雏形，来源于网络游戏。电子游戏中所采用的渲染技术，也是元宇宙当中最为常用的技术。
中国首位游戏设计博士、中国传媒大学副教授黄石在《未来已来：元宇宙游戏技术展望》的主题分享中提出，Unity、Unreal、WebGPU这些常用的游戏渲染引擎，远没有达到目前能够达到的最高层级，即便是最新的UE5虚幻引擎技术，渲染已经高达160亿个多边形，仍然不是我们能够想象的极限。随着人工智能技术的引进，渲染技术将会再往上提升一个等级。
在接下来的分享中，黄石详细分享了NeRF渲染技术。该技术采用一个神经网络表示一个体塑结构，只需要拍几张照片就能够通过人工神经网络形成多视角的3D场景。因此，NeRF渲染技术被称之为神经辐射场，开创了一个全新的渲染技术领域。
在NeRF渲染技术的发展过程中，产生了很多分支。其中，mip-NeRF 技术可以360度的渲染一个没有边界的空间；Plenoxels 只需要8.8分钟就能够完成整个神经网络的训练；Point-NeRF能够直接从点云的数据中提取、训练，训练速度提高了30倍；微软FastNeRF能够将神经辐射场的渲染速度达到实时的200FPS。
黄石表示，人类科技发展变得越来越快，未来将会在无限短的时间内爆发出无限多的智能，我们称之为“奇点”。因此，技术的发展是不以人们的主观意志为转移的，未来已经来到了，元宇宙还会远吗？
利用 AI技术打造成熟的 Software agent 数字人
在元宇宙的世界中，构建社交、办公协作等应用，成为摆在非专业内容面前的主要挑战。商汤科技通过精心打造的AI引擎层，帮助更多的用户创造并生成内容。
商汤科技数字空间（元宇宙）事业群产品总监高瑞声在《元宇宙虚实世界的人工智能技术》的主题分享中指出，AI 引擎层是专注于人物生成的数字人生成引擎和专注于场景生成的数字重建平台，不仅能够让用户轻松拥有数字人，快速生成千人千面的虚拟形象，而且还能够利用 AI技术 打造成熟的 Software agent 数字人。此外，通过输入外界环境信息，在NLP大脑中进行处理，还能够实现与人进行交互，为人们提供服务。
在演讲过程中，高瑞声详细介绍了SenseMARS MetaHuman数字人的核心技术、应用场景以及落地案例。
据介绍，SenseMARS MetaHuman主要由管理能力平台、算法能力平台和应用拓展平台三部分组成。管理能力平台主要对数字人进行知识体系的管理、形象配置，并对一体机产品进行远程控制、OTA升级，监控报警等信息管理。算法能力平台包含渲染、CV、语音、语义、对话等商汤科技最新的算法模型技术。应用层拓展平台主要用来探索应用场景的落地，包括在地产、商超、园区、酒店等场景的落地，在手机端、PC端、平板电脑、一体端、大屏、AR、VR眼镜、车机等等进行展示和交互，以此来替代各种各样的角色。
SenseMARS MetaHuman数字人已经通过一体机和数字人大屏，在诸如酒店大堂经理等线下场景中落地，通过在app、H5、小程序中嵌入数字人，完成了线上智能助手的场景落地。
高瑞声表示，借助 AI 技术在元宇宙中构建的数字人，能够部分或者全部替代人为操作，降低人力成本，助力于企业加速进行数字化转型。
基于Unity技术打造栩栩如生的动态数字人
作为构建元宇宙内容的基石，数字人是最早可落地且可持续发展的元宇宙细分成熟场景，目前，虚拟偶像、电商带货、电视主持、虚拟主播等商业应用已被大众认可。
众所周知，创建和渲染逼真的数字人类角色是计算机图形学中最困难的问题之一。在《Unity数字人技术—开启元宇宙之旅》的主题分享中，Unity大中华区平台技术总监杨栋通过一系列的Demo演示，详细介绍了Unity高清渲染管线技术。
在Spaceship Demo的演示中，Unity使用了VFX Graph技术，它基于GPU加速的粒子系统，在GPU上喷射出几百万个粒子来模拟非常复杂的效果。在《异教徒》Demo演示中，Unity采用4D扫描数据保留了角色表演的真实感，并通过3D扫描获得微观表面细节、皱纹和毛孔等进行补充，再利用专用粘附工具粘附睫毛、眉毛、胡茬和毛发等细节，而所有的渲染均由高清渲染管线完成。
杨栋表示，《异教徒》的Demo中有两个关键点，一是眼睛渲染，二是皮肤渲染。为了提升皮肤质量，Unity采用了Detail Map细节贴图、Secondary Specular Lobe高光、Cavity Specular Occlusion凹陷高光和Screen Space Subsurface Scattering屏幕空间次表面散射四项技术。据介绍，《异教徒》采用的各项技术，已经落地到具体的项目当中。
在接下来的时间里，杨栋还详细介绍了Unity最新制作的电影预告《Enemies》。《Enemies》使用了Unity高清晰度渲染管道（HDRP）、屏幕空间全局照明（SSGI）、新的自适应探头体积、光线跟踪、NVIDIA的深度学习超级采样（DLSS）的整个功能集，以及与目标相关的所有其他功能，使得影片中的数字人具有照片般逼真的眼睛、头发、皮肤，而所有这些都以4K分辨率实时渲染和运行。
杨栋表示，我们看到了许多技术领域的重大进步，这也进一步激发了开发人员对这一领域未来的憧憬。Unity的核心技术一直在不断发展，以满足创作者对高视觉质量和真实感日益增长的需求。
元宇宙在艺术行业的探索
当元宇宙与艺术交织在一起，又会碰出什么样的火花？
在触角科技有限公司联合创始人、大有不言文化有限公司创始人谷强看来，被元宇宙吞掉的艺术，亦或是吞掉了艺术的元宇宙，虽然时至今日仍然没有找到问题的标准答案，但仍然是一项非常值得探索的话题。为此，谷强还创造性的发明了“元艺术”这一新词。
谈到“元艺术”，就不得不提NFT。谷强认为，现阶段最核心的问题是内容仍然做得不够理想，市场上流传的NFT要么以图片为主，要么是视频。除此之外，目前的玩法相对单一，大部分人都是盲买，离真正规范和真正产生价值还差得很远。
谷强表示，人工智能技术的发展让过去单纯依靠人力无法完成的作品变成了可能，因此可以利用人工智能来实现一些过去的不可能。除此之外，随着“元艺术”的发展，我们也可以探索在三维空间中作画，而不是建模。
看艺术和了解艺术的方式，正在从贵族阶级普及到平民阶级，再从平民阶级普及到全世界所有人。谷强强调，元宇宙能够把艺术蔓延到一个非常大的领域中，让过去对艺术完全不了解的人也可以非常近距离的去接触到艺术，这是一个非常令人激动的事情。
写在最后：电子游戏技术是元宇宙的底层基础设施，为创作者提供方便、快捷的操作工具，让元宇宙的生态建设者们更多地参与进来；AI交互技术对于元宇宙是最重要的入口，数字人技术给用户带来了超好的体验，为元宇宙的数字场景以及数字内容提供了重要的技术支撑。此次《游戏与AI交互的沉浸式体验》专场的成功举办，为行业探索AI与游戏技术在元宇宙中的应用指明了方向，为各行各业开发基于元宇宙的各项应用，提供了有力参考。
正如51CTO副总裁兼总编辑、MetaCon元宇宙技术大会总策划崔康指出，元宇宙的时代已经来临，希望大家能够和 51CTO社区的2000万开发者一起拥抱元宇宙技术，希望MetaCon元宇宙技术大会能够成为中国元宇宙技术发展的一个里程碑。
作为中国第一个以元宇宙技术为主题的大会，「MetaCon元宇宙技术大会」的成功举行，也将不同行业、不同技术领域的元宇宙爱好者与探索者汇聚在一起，共同探索元宇宙核心技术，把脉行业未来发展趋势，是一场业界不可多得的技术盛会。
