网易布局AR应用的技术挑战和方案.doc

《网易布局AR应用的技术挑战和方案.doc》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、网易布局AR应用的技术挑战和方案　　你怎么看网易？快公司？慢公司？或者总能令人耳目一新的神奇公司。　　1997年创立，至今已有21年，是中国最早的科技互联网代表。靠邮箱起步，其后又在门户厮杀中争得一方格局，再以游戏安身立命，近些年还能在教育、音乐和垂直电商中竖起鲜明大旗。　　而且颇为神奇的是，在唯快不破的中国互联网竞争里，网易近几年的新业务往往不是最快的那一个，但却总能是以慢打快的那一个。　　结果也有目共睹：业务版图从邮箱、游戏、新闻扩展至电商、娱乐等领域，在每个领域都做得风生水起。　　网易布局AR应用

2、的技术挑战和方案　　你怎么看网易？快公司？慢公司？或者总能令人耳目一新的神奇公司。　　1997年创立，至今已有21年，是中国最早的科技互联网代表。靠邮箱起步，其后又在门户厮杀中争得一方格局，再以游戏安身立命，近些年还能在教育、音乐和垂直电商中竖起鲜明大旗。　　而且颇为神奇的是，在唯快不破的中国互联网竞争里，网易近几年的新业务往往不是最快的那一个，但却总能是以慢打快的那一个。　　结果也有目共睹：业务版图从邮箱、游戏、新闻扩展至电商、娱乐等领域，在每个领域都做得风生水起。　　　　网易AI路线　　那AI呢？依

3、然延续这个路数吗？　　在BAT和各大公司纷纷把AI喊得响亮的当前，网易公司层面的AI声量显得克制。　　不过，这种克制也将成为过去时。　　没错，网易即将在AI方面搞出更大动作——依然会延续以慢打快的网易传统。　　网易AI其实布局不算晚。　　2011年，网易就在内部储备相关技术和团队，由浙江大学计算机博士李晓燕牵头。不过当时深度学习方兴未艾，AI也还没狂飙突进。所以网易AI更多扮演赋能网易内部各业务的角色，为游戏、邮箱、音乐、云服务和电商等业务持续提供AI技术加持，通过新交互形式的赋能，提升网易集团全线业务

4、的产品竞争力和用户体验。　　具体到技术方向层面，也先从更接近内部业务的CV开始，逐步切入语音语言、模式识别、人机交互、数据智能等领域并且在打造一个深度学习+机器学习平台。　　于是2017年，风向标事件发生：网易的AI团队升级为人工智能事业部，并成为网易一级事业部，李晓燕出任总经理。可见网易在人工智能上的决心。　　成立事业部后，网易AI继续内外并举。打法上同样点线面齐备，希望探索出更多落地场景。　　在业务思路上，在3条战线上分别展开，分别是：基于视觉的网易AR、语音识别和NLP方向上的语音交互业务，以及A

5、I平台。　　其中，网易AR的商业化落地是网易AI的核心战略之一。　　　　△网易洞见是网易AR基于移动端的AR平台　　AI加持下的AR　　为什么是AR？　　有网易基因的原因，靠游戏安身立命，3D视觉原本就是网易一直以来的技术储备。　　而且在AR游戏方面也已经真刀真枪上阵，推出了《悠梦》、《破晓唤龙者》2款游戏，甚至在GoogleAR开发者介绍案例中，网易的AR游戏也被拿来举例。　　网易AR负责人赵辰认为，AR不仅是AI视觉技术的重要应用形式，也是打通虚拟世界和现实世界的重要手段，如果从信息承载和人机交互层

6、面来看，意义更加不言而喻。　　借助计算机视觉技术和可视化技术，可以实现在物理世界叠加虚拟信息，并将虚拟信息准确“放置”在物理世界中。　　如此一来，AR将改变人们获取信息、理解信息、应用信息的方式，是万物互联时代的信息入口，是人机交互的重要形态，也在承担网易AI探索“下一代终端用户交互形态”的使命。　　技术挑战和方案　　技术方面也长期为此准备。　　网易AR算法负责人丛林介绍，网易洞见AR平台核心覆盖3个部分：一是AR内容浏览器，以客户端为载体；二是互联网应用引擎，为互联网应用提供AR平台能力；最后是游戏引

7、擎，表现为ARGamePlugin。　　其中互联网应用引擎，已具体涵盖了AR底层的定位、AR云端的服务，甚至多人联机、基于图片的跟踪识别、3D内容渲染等。特别在渲染部分，网易的SDK可以实现复杂精细的3D内容，比如用粒子特效来呈现风、水、火的效果。这些都得保证其互联网应用合作方的“终端用户”拥有“友好用户体验”，与网易产品的思路保持一致。　　谈到网易洞见AR平台的优势，网易AR对三个方面引以为豪：　　一是算法能力，结合计算机视觉、深度学习、人机交互和计算机图形学技术，实现系统级的算法优化，提供AR应用所

8、需的基本场景内容理解能力，将虚拟物体精准注册于现实场景，并实现3D内容的精准展示：　　丛林以光照恢复算法为例，具体做了解释。依托于深度学习和计算机视觉算法技术，光照恢复算法对当前环境的环境贴图、主光源方向、环境光亮度以及色温等参数进行恢复及预测。　　具体而言，即：通过场景图像输入，利用深度神经网络预测出环境光的参数（SH系数）和周围的环境贴图，其中SH提供光照；环境贴图作为反射贴图可以让光滑物体映射的纹理更准确。由于学习得到的反射贴图准确性