观点

元宇宙的核心要素就是创建虚实融合的数字世界

在元宇宙场景构建过程中,相芯科技在虚拟数字人、数字物方面拥有自研核心技术,“虚拟数字人引擎”和“超写实数字物平台”,并在众多领域投入实际应用。

进入二十一世纪,传统产业经过“互联网+”的改造,完成一次革新与提升。近年,数字经济的大势扑面而来,孕育着新的机遇与挑战,在这个重要阶段,元宇宙应运而生。元宇宙概念对于产业的意义是多方面的,其中最为直观的就是“虚拟化”“3D化”改造。

元宇宙是运用数字技术构建的,由现实世界映射或超越现实世界,可与现实世界交互的虚拟世界。在此过程中,元宇宙需要重建物理世界的“人、物、场”,这一过程极具挑战性。作为国内知名的技术和方案提供商,相芯科技正在这条道路上深度探索。

愿景:“元宇宙搭建者”

杭州相芯科技有限公司创立于2016年,深耕计算机图形和人工智能核心技术的融合与创新,

用技术刻画人的音容笑貌,描绘物的流光溢彩,致力于为人类创造更真实的数字世界。

在元宇宙场景构建过程中,相芯科技在虚拟数字人、数字物方面拥有自研核心技术,“虚拟数字人引擎”和“超写实数字物平台”,并在众多领域投入实际应用,比如文物数字化、AI虚拟助手、虚拟直播带货,以及汽车、面部、金融、手机等行业。

正是凭借着在这些技术和应用,支撑起相芯科技“元宇宙搭建者”的发展愿景,同时公司还提出以“创造更真实的数字世界”为企业使命。

核心技术:虚拟“人+物”

作为元宇宙搭建者,相芯科技的技术支撑在于虚拟人和虚拟物。

在虚拟人方面,相芯科技自研的虚拟数字人引擎。

通过将计算机图形学、语音识别、语义理解等AI技术深度融合,由形象创建能力、表达能力、智能交互能力组成,覆盖从虚拟人建模、内容生产到多场景互动沟通等各环节。

依托于虚拟数字人引擎,相芯科技可为娱乐、服务、社交等多领域提供包括算法、平台及应用软件和技术服务在内的全栈式虚拟人解决方案。

因此,虚拟人广泛应用在元宇宙新生态中,担任着信息制造、传递的责任,是元宇宙“人-物-场”链接的新介质,创造广泛的应用价值。

首先,在重构内容生产模式,提升数字内容生产效率和质量方面,基于更成熟的虚拟人技术,从建模、驱动、渲染、剪辑、合片等流程逐步实现自动化、实时化和智能化,相比真人表演有更自由的发挥空间,创作内容和延展空间得到释放,大幅提升内容制作效率,极大地降低生产成本。

其次,是重新定义粉丝经济,助力品牌传播快速出圈。虚拟偶像的人设、言行等由品牌方掌握,比真人明星的可控性、安全性更强,还可以延展应用在元宇宙中更多元的虚拟场景,实现多圈层传播,虚拟偶像IP化将成为流行趋势,粉丝经济在快速崛起。

再次,作为数字化转型核心抓手,助力企业生产经营提质增效。虚拟数字人在传媒、教育、金融、医疗、体育等领域将得到愈加广泛的应用,为企业数字化转型发展提供了新的路径,并将发挥越来越重要的作用,有助于企业生产经营提质增效。

最后,虚拟数字人是元宇宙的核心数字资产,承载“第二人生”的无限想象。虚拟数字人将成为元宇宙最核心的交互载体和入口,每个人都可能用虚拟分身进入元宇宙,沉浸式体验游戏、娱乐、社交、教育、运动等数字化内容,开启“第二人生”,追求更真实、更理想的自我。

在虚拟物方面,相芯科技拥有高保真全栈式三维技术能力。

可以实现3D重建智能高效海量多形态数据迅捷处理,最快3分钟可实现图像重建,比传统建模效率提升2000%;微米级效果还原真彩1:1纹理,实现超高精度微米级细节呈现;软件操作简单易用系统全自动一键开启,可以实现“傻瓜式”操作即学即用。

因此,相芯科技可以实现全自动三维扫描、三维几何重建、智能纹理贴图。

采用高质量的蓝光投影技术,数据质量最高精度达到0.007mm,最小点间距达到0.029mm。拥有单次扫描出点数更多,更容易捕捉文物细小纹理等技术优势。

采用先进的多视图立体视觉匹配与三维重建技术,结合摄影测量、计算机视觉、计算机图形学等技术、融入深度学习技术,通过对采集的高分辨率图像进行特征匹配、估算深度,完成三维重建,为后期纹理贴图提供更加精准的相机参数。

依靠在视觉图像感知识别、先验知识指导等技术积累,为适应大部分器物场合,系统性地设计开发了智能纹理贴图技术,采用基于纹理映射的方式,能够从照片中恢复高清保真纹理。

核心方案:AvatarX

相芯科技的虚拟数字人平台AvatarX,依托独创的“虚拟数字人引擎”,为各行各业提供虚拟形象生成、定制、驱动等服务,帮助企业客户打造更面向未来的、更具差异化的虚拟人应用产品和数字资产,赋能企业布局元宇宙生态。

在功能上,可以实现一键生成千人千面的专属虚拟形象。

比如拍照即可生成与真人相似且美观的3D虚拟形象,支持DIY捏脸,可进行多维度的模型捏脸,支持个性化换装,可自由组合服饰装扮。

另外,还可实现多种丰富的玩法,1个SDK支持多种驱动模式。

通过实时人脸跟踪技术,实现真人和虚拟形象的表情同步;身体驱动通过普通摄像头输入,即可实时驱动虚拟形象进行同步动作;手势识别通过手势识别,可以驱动虚拟形象完成相关动作;语音驱动只需要输入文本或音频,即可实时驱动虚拟形象脸部口型。

相芯科技还提供了元宇宙虚拟人开发解决方案AvatarX SDK,可供客户自由开发各类元宇宙虚拟人应用,解决客户从端到云的虚拟人需求,打造更具前瞻且差异化的虚拟人应用产品与数字资产,赋能元宇宙生态布局。

核心应用:“无所不能”

相芯科技的执行总裁兼CTO秦昊曾在一次采访中表示,“坚持不断探索数字人技术和应用的边界,一方面,我们认为数字人一定是神形兼备的,需要团队对技术的坚守和突破;另一方面,我们相信数字人行业的未来发展会坚定不移地向前推进。”

凭借着技术与方案优势,相芯科技已将方案应用于众多领域,其中最为典型的是虚拟直播带货。

相芯科技依托独创的智能虚拟人技术,自研虚拟直播带货助手解决方案,为商家品牌、MCN机构、广告营销、电子商务等行业提供低成本、高转化、高趣味的24小时全天候虚拟人直播带货解决方案。

功能上,虚拟人直播带货方案可以实现高效精准的内容制作。包括文字/图片/视频素材的快速导入,一键生成直播,轨道化编辑界面,逐字逐句配置素材,1:1时长导出视频,边制作边预览,还有内置丰富背景、动效、动作库等各类素材与布局模板。

另外,方案提供高质量3D形象模型,支持多维度形象捏脸DIY,海量的妆发服饰资源随心搭配从五官到肤色。在口型语音上高度匹配,形象、动作生动自然,有30余种音色可供选择和调节,有潮酷、卡通、二次元、仿真等多风格随意切换。

在直播互动方面,可智能识别观众问题,实时精准回复丰富的自动互动功能,及时反馈活跃直播气氛,支持人工实时插播互动、支持自定义添加背景音乐。同时,不再依赖电脑本身,云端随时开播,设备门槛极低,无需额外调试支持长时间连续直播,开播稳定性大大提升手机也可开播操作,更加灵活便捷。

整体上看,相芯科技虚拟直播带货方案能为客户提高直播转化,降低直播成本,提升闲时流量,打造趣味体验。

相芯科技秦昊介绍,“相对于真人主播一场直播成本动辄两三万,我们的数字人主播几乎一天只要一杯奶茶钱就可以开播了,而且还可以支持定制,可以协同真人主播,实现互动串场、介绍产品、回答问题,有着非常不错的直播效果。”

据介绍,相芯科技的数字人产品已经在二十多个行业成功落地商业化应用,而金融、汽车、手机和直播是相芯科技在广度之外深入发展的行业。

以智能汽车行业解决方案为例,相芯科技可以为汽车用户提供更加个性化、可视化、有温度的服务体验,覆盖多维度行业场景,助力车企智能化转型升级。

如今随着新能源的迅速崛起,汽车正在从传统形态向智能转变,这其中既包括车主的使用体验,也包括汽车的营销售卖领域。

相芯科技智能汽车行业解决方案,可以实现车载虚拟人助手、虚拟代言人、虚拟员工、虚拟展厅服务 。

针对用户方面,车载虚拟助手可以打造爱车的拟人化分身,支持虚拟形象个性生成,多端互联,覆盖多种用车场景。针对汽车厂商,可以定制高精度数字代言人,助力线上发布会、营销、媒体宣传等场景应用,也可以在线下门店入驻虚拟员工,助力品牌营销,或在线上24小时为车主提供咨询、购买等服务。同时构建虚拟展厅,让用户足不出户即可在虚拟世界享受看车、购车、社交、娱乐等服务。

通过以上方案的介绍,我们能感受到虚拟数字人在实际应用中的价值与魅力。

来自资本与市场的肯定

相芯科技由全球图形学领军人物创立,研发团队成员不仅有来自微软、苹果等名企,还有来自浙江大学、清华大学、耶鲁大学等顶级科研机构,在3D图形、计算机视觉等领域深耕。还在计算机图形学顶级会议ACM SIGGRAPH发表论文60余篇,获得发明专利和软件著作权40余项。

自成立以来,先后相芯科技完成多次融资。2018年获得1.2亿元A轮融资;2020年获普华资本投资;2021年完成新一轮7000万元人民币融资,由赛智伯乐领投,凌霄资本提供财务顾问服务,此轮融资将用于相芯虚拟数字人引擎升级和超写实数字物平台研发。

赛智伯乐投资合伙人袁智勇表示:“相芯科技产品在人机交互、数字展示、虚拟偶像、新一代社交等领域有着广阔应用场景。凭借领先的三维建模、动画和渲染技术,公司获得了国内众多知名客户的认可,营业收入持续稳定增长,连续四年保持盈利。团队简单、务实、求真的作风给我们留下了深刻印象,我们相信公司令人艳羡的技术积淀会让相芯发展成为未来元宇宙世界的搭建者。”

截止目前,相芯科技已经与2000多家客户合作,在全球200多个国家和地区开展业务。

我们的观点

作为下一代互联网形态的元宇宙将为用户带来革命性、沉浸式的交互体验,为生活、娱乐、社交和工作提供全新方式,而元宇宙的核心要素就是创建虚实融合的数字世界。

而虚拟数字人、虚拟物是元宇宙场景中重要的交互载体、基本单元,相芯科技作为元宇宙搭建者,必将在其中发挥重要作用,也将因此得到快速成长。

我们期待未来有更多如相芯科技的企业,共同搭建元宇宙,创造数字世界,从而推动下一代互联网的到来,与此同时升级社会生产生活方式。

更多XR&元宇宙厂商,请关注新浪VR大巡礼,让我们共同见证下一个时代的到来。最后,你还知道哪些厂商同样在搭建元宇宙的道路上行进,欢迎留言~

24快报
JSON抓取失败