咪咕元宇宙分会场助力全民阅读大会,数智人技术赋能数字化转型
中国移动咪咕公司作为第二届全民阅读大会承办单位之一,发挥自身平台、内容和技术优势,打造‘云上大会元宇宙分会场’,助力大会数字化转型。
跨空间形象互通,比特形象统一贯穿 元宇宙比特空间基于不同引擎平台承载实现,跨引擎平台实时互通一直是业界难题。本次大会,咪咕公司首次成功探索多场馆比特数智人形象的实时互通机制。用户进入元宇宙分会场后,可选择在咪咕系产品中创建形象进入空间,也可根据自己喜好,创建一个全新形象。形象互通的背后是咪咕元宇宙用户融合互通形象机制技术的实现,形象的跨空间延续使用,实现了从传统APP产品到元宇宙空间‘同一人’的连续体验。
除了跨APP与空间使用数智人形象,用户也可使用同一形象在元宇宙分会场与元宇宙会议之间往返穿梭。统一的比特形象使用户的空间感知更加连贯,让用户享受更连续完整的宇宙空间沉浸体验。
数智人技术创新,探索业务发展新模式 本次国家级年度阅读盛会的举办具有行业‘风向标’意义。无论是活动预热传播阶段,还是在会议正式举办阶段,都能看到中国移动咪咕公司在数智人领域的不断探索。
在签名接力活动期间,用户进入‘全民阅读·月读好书’活动专区后,即可选择自己喜爱的数智人形象,通过选择‘阅读倡议’和所在地区,生成个性化海报并抽取名家大咖签名实体书、数字权益产品等书香盲盒好礼。与此同时,作为具有强大社交传播功能的视频彩铃也参与助力了本次月读好书活动,用户登录‘月读好书’活动页面即可使用阅读大会模板,带入自己的数智人形象,选择喜爱的装扮及动作来制作DIY数智人视频彩铃。
深耕MIGU发展路线,构建消费级用户数智分身能力 本次阅读大会多种优质玩法的背后,是咪咕遵循元宇宙MIGU演进路线,对5G+算力网络的元宇宙新技术+数字阅读的思考,也是对元宇宙世界的积极探索的阶段性应用示范。基于端侧渲染引擎、深度学习技术,打造开箱即用的多模态数智人能力,为消费级用户提供丰富形象素材内容及低成本制作专属个性化数智分身的优质体验。
在形象生成渲染方面,通过PBR材质渲染、菲涅尔效应对布料、金属、皮革等提供不同材质效果, 对皮肤采用次表面散射模型, 结合环境光照还原真实世界多样材质的服饰效果和真实通透的皮肤质感;在动作驱动方面,基于弹簧动力学、刚性碰撞算法实现数智人流畅动作及物理仿真,达到动作相似度>=80%, 关节误差<=70mm;在面部驱动方面,利用深度摄像头、单目摄像头AI推理FACS编码驱动面部微表情组合,还原用户真实面部表情效果,连接虚实世界,打造具有丰富形象、流畅运动效果的数智人。
在接入应用方面,由于数智人渲染需要基于3D引擎实现, 导致移动端APP增长较大体积。针对这一问题,咪咕自研了动态加载与反射调用的插件化技术, 将数智人引擎能力与宿主程序剥离将数智人功能插件化,使包体缩小到原有1/10, 这让数智人走出了3D游戏场景, 可轻量化接入各种宿主APP, 大大拓展了数智人的应用范围。在3D空间场景下提供可插拔的数智人Unity SDK,引入GPU instance特性大幅提升多人场景下加载性能,满足千人同屏业务需求,实现人、景、物三者深度融合。
咪咕公司通过PBR材质渲染和菲涅尔效应等技术,实现了对不同材质的服饰和皮肤真实效果的还原;基于弹簧动力学和刚性碰撞算法,实现数智人流畅动作及物理仿真;利用深度摄像头和AI推理驱动面部微表情组合,还原用户真实面部表情效果;通过动态加载与反射调用的插件化技术,将数智人功能插件化,使包体缩小到原有1/10,拓展了数智人的应用范围;提供可插拔的数智人Unity SDK,引入GPU instance特性大幅提升多人场景下加载性能,实现人、景、物三者深度融合。
未来,中国移动咪咕公司将持续致力于通过创新技术应用,加速元宇宙与数字阅读的融合,推动数字经济发展,助力数字阅读普及,为用户打造极致体验的好产品。
原文地址: https://www.cveoy.top/t/topic/nDAH 著作权归作者所有。请勿转载和采集!