题图来自虚拟模特Imma的SK-II广告
全文共6413字,阅读需要13分钟
– – -/ 开始 / – – –
他们可能是你温暖的朋友、贴心的助手,也可能是平行时空的另一个你……
如果说虚拟宇宙充满神秘与奇幻,将用户带入数字技术改造的平行时空,那么虚拟人无疑是每个用户进入虚拟宇宙大门的门票。
毫无疑问,数字时代的未来将是虚拟宇宙; 但虚拟宇宙的走向本身就充满了不确定性——人们无法在定义上达成共识,有些事情总会发生,但以何种方式发生,却没有人能给出明确的答案。
与一些厂商希望打造的宏大的虚拟场景相比头像转换卡通形象软件手机,手机移动端似乎更接地气、更务实表情包设计,产品种类也更加丰富、新颖。
随着移动虚拟人产品的推出,连接两个平行时空的大门正在慢慢打开。
手机厂商纷纷进军虚拟人类
根据 QuestMobile 数据,Z 世代平均每月在智能手机上花费 174.9 小时。 作为数字原住民,Z世代消费者展现出与前辈完全不同的消费特征。
对于大多数 Z 世代来说,虚拟体验已经成为开辟新社交圈的一种方式,也是与志趣相投的人互动的工具。 体验丰富、有趣的虚拟场景成为Z世代青睐的产品。
随着先进技术的不断突破,元宇宙的概念正在兴起。 Z世代消费群体的崛起也为虚拟人带来了良好的市场。
得益于深度学习算法的突破,近年来,虚拟偶像主播、虚拟助理等虚拟人物进入大众视野,智能驱动的虚拟人产业逐渐达到良好状态。
基于当前移动互联网时代的发展趋势,未来国内外手机厂商不仅要随时抓住市场热点,还要不断巩固自身的品牌文化个性和产品核心力量。 他们不仅针对Z世代的年轻人,也不忽视上一代和下一代年轻人的感受。 进入虚拟人领域是必然选择。
虚拟人技术概述
作为虚拟形象在移动端的落地产品,移动虚拟形象与传统虚拟形象有着类似的技术架构,其总体系统框架可分为图像生成、图像驱动、图像渲染、识别理解+分析决策模块。
1. 图像生成
图像生成的过程就是建立数字资产的过程。 通常,原画师负责虚拟人的外观设计,绘制平面图像,然后3D建模师将原画转换为三维模型; 模型设计师的经验尤为重要。 通过合理的叠加和纹理选择以及精度选择,虚拟人可以在系统可承载的范围内达到最佳的效果。
接下来,通过骨骼绑定和PC渲染,虚拟人可以像真人一样“活”起来,打造出有血有肉的饱满视觉效果。
2.图像驱动
图像驱动的类型有很多种,主要是让虚拟人根据人类指令做出不同的动作和反应,完成与用户的交互过程。
常见的驾驶形式包括:语音驾驶、面部驾驶、姿势驾驶和手语驾驶。
语音驱动:根据音频特征控制面部(口型)驱动动画; 该过程主要包括音频特征提取、音素-唇形同步和情感表达对齐。
人脸驱动:基于摄像头捕捉人脸特征,实时驱动驱动模型。
通过定义人脸关键点,利用摄像头捕捉关键点,最后根据实时跟踪数据生成贴图动画。
姿态驱动:基于相机捕捉姿态关键点信息,驱动模型实现姿态控制。
在进行姿势驾驶时,通常需要在关键位置(如手指、关节)佩戴专业的跟踪设备,进行骨骼绑定,最终通过实时同步的运动映射完成真实的运动记录。
手语驱动:以《国家通用手语词典》为基础,通过手语翻译引擎和自然动作引擎,赋予虚拟人手语翻译和表达的能力,克服信息障碍,更好地服务于大众。听力障碍。
根据是否需要实时动作捕捉,虚拟人驾驶方式也可以分为两类:人工智能驾驶和真实驾驶。
AI驱动:自动读取、分析、识别外部输入信息,智能驱动虚拟人产生相应的声音和动作。
真实驾驶:通过动作捕捉设备或摄像机实时捕捉面部表情和动作。
3. 图像渲染
计算机图形学中的渲染是指使用软件从模型生成图像的过程。
模型是用严格定义的语言或数据结构对三维对象的描述,包括几何、视点、纹理和光照信息。
核心功能包括:物理系统、光影计算、图形渲染。
在手机上渲染的难点在于性能、功耗、内存的平衡和优化,以及尽可能还原设计模型的真实感。
通过物理渲染创建的角色和场景效果:
下图左侧为重光技术渲染,右侧为实际拍摄情况。 两种效果几乎没有明显区别:
4、互动模块
交互模块是识别、理解、分析和决策模块的统称; 它是一个扩展项,仅存在于交互式虚拟人中。
其核心功能主要包括:
首先通过语音识别模块将自然语言转换为文本,然后将文本处理为词向量或句子向量。 进入对话管理系统后,进行模型匹配和生成,根据问题生成答案句子,然后通过语音合成用户将文本转换为输出。
固定IP VS 千人面
需要指出的是,手机上的虚拟人产品受移动设备的限制,很难实现高方位虚拟人的设计,尤其是需要AI驱动或者真人驱动时,高方位的虚拟人设计很难实现。脸部娇嫩的形状容易引起消耗。 流量过多和页面冻结的问题。
因此,虚拟人的建模选择和实现可以分为两种主要类型:一种是“多脸固定IP+视频流推送”,另一种是“低级别千人千面+视频流推送”。人工智能或现实生活中的驱动器”。
固定IP是指虚拟人的形象是固定的形象,通常具有精美的外观,可以作为公司品牌代言的一部分,或者出现在相对简单或没有互动的短视频或移动应用中; 固定IP的调用方式通常是推送特定的短视频流或者根据关键词随机播放短视频流。
千人千面通常是数字世界中用户的替身。 用户可以根据自己的喜好定制虚拟人的外观,例如捏脸、搭配衣服等。 成千上万的人和面孔通常需要伴随虚拟人动作库的记录和相应数字资产的设计。
数字资产通常是指可替换的虚拟形象的外观特征,如发型、发色、眼睛、脸型、服装和配饰。
千人千面的驱动方式主要是真人驱动,即虚拟人根据用户的面部表情和动作做出相应的映射,与用户保持一致。
千人千面虚拟人服装道具库:
千人千面虚拟人动作库:
虚拟人外貌分类
根据虚拟人的外观特征,可分为2D二维、3D卡通、3D美颜、超写实、仿真人六大类。
以上六种头像的外观差异主要由精度和人脸数量决定。 人脸数量越多,准确度越高,越接近真人的长相。
人脸数量越多,所需的数据量和空间就越大。 不同类型的头像外观适合不同的平台或终端。
面数:是指3D建模中的三维形状是以最基本的三角形平面为单位组成的,一个单位就是一条边。 面数越多,建模精度越高,图形效果越精细。
手机使用场景
移动终端的使用场景通常是交互方式和驾驶方式综合影响的结果。 按照交互/非交互、人驱动/AI驱动; 移动端的使用场景可分为:语音助手、桌面互动壁纸、电商直播、新闻联播、视频通话、视频会议、短视频、拍照、相册等。
接下来,本文将根据主要使用场景分类,介绍目前具有代表性的移动虚拟形象产品:
1.语音助手
1)OPPO小布虚拟人(布美美)
上线时间:2020年09月29日
交互类型:关键词视频流推送、语音交互
外观:固定IP+3D卡通
小步虚拟人是一款基于虚拟人多模态交互的手机智能助手,涵盖视觉、语音、自然语言处理等多模态融合算法。 内容服务和实时交互。
目前的功能有AI新闻播报和天气播报。
未来,小步虚拟人定制平台也将同步开放。 未来,可以根据每个开发者的需求,演化出不同的个性化虚拟形象,比如智能客服、虚拟助理、配送主播等,可以搭载在多个智能终端设备上,进一步推动OPPO的发展在个人物联网行业。
2)小米小爱同学定制
上线时间:2021.09.27 与civi手机一起发布
交互类型:关键词视频流推送、语音交互
外观: 千面,3D卡通
小爱同学的升级版,用户可以定制自己喜欢的小爱同学形象,然后配合小爱同学现有的定制语音和唤醒词功能,轻松打造自己心目中的智能助手。
支持语音定制,并与他人分享定制的语音包。
独家AI存在。
未来,希望性格也可以定制头像转换卡通形象软件手机,成为网络世界里最懂你的人。
3)百度潇潇
上线时间:2021年1月17日
交互类型:具有视觉识别和语音识别能力,包括AI驱动和视频流推送
外观:固定IP,3D精美卡通
基于语音的虚拟开发助手可以通过语音或文字输入完成寻人或天气新闻广播,还可以进行装扮、房间布置等开发游戏。
杜潇潇拥有二维虚拟角色形象和独特的情感互动系统。 面对不同的用户性格和爱好,杜潇潇的理解和反馈也会有所不同。
每个用户的“杜晓晓”自然都会有不同的进化,你将拥有一个专属于你的“杜晓晓”。
4)百度公军数字人
上线时间:2021年11月29日
交互类型:关键词视频流推送、语音识别
外观:固定IP、模拟器
它是国内首个互动超写实明星数字虚拟人。 注重实用功能,能够满足用户多场景下的搜索需求。 例如,当用户说“今天天气怎么样”时,虚拟人可以快速识别并自动广播第一条搜索结果。
除了广播搜索结果外,还可以控制终端功能,实现直接访问夜间模式、书架、游戏等功能。
在外观呈现方面,百度引入4D扫描技术,捕捉真人言语、日常面部表情的细微变化,从而实现对龚俊真人的超真实还原。
2.桌面互动壁纸
1) 黑鲨鲨鱼酱
上线时间:2021年3月23日。 与黑鲨游戏手机4一同发布
交互方式:语音识别、触摸感知等。
外观:固定IP、3D动画角色
平时可以作为动态桌面背景,可以帮助用户在玩游戏时了解如何使用各种游戏功能。 玩游戏时也可以作为战斗播报器使用。
造型精美,拥有一批忠实的游戏迷。 您可以根据皮肤改变鲨鱼酱的外观,并定义鲨鱼酱的动作和声音。
充电时,鲨鱼酱也会一起充电,呈现精美的动画。
此外,杀杀酱还具有闹钟功能,以拟人化的形式唤醒用户。
2)Mihayou仿真桌面(yoyo)
上线时间:2020.12.01
交互方式:触摸感知
外观:固定IP,3D精美动画
yoyo是米哈游开发的仿真桌面中的固定IP角色。 画风精美,桌面开发游戏可以以动态桌面的形式驻留在用户的手机中,并可以根据用户的触摸感知做出相应的反应,还可以根据用户的喜好改变虚拟人的着装和居住空间。不同的主题皮肤,扮演情感陪伴和心灵治愈的角色,感受专属陪伴和沉浸式体验的乐趣。
3.视频通话
1) OPPO表情符号
上线时间:2021.9。 作为ColorOS 12新功能发布
交互方式:真人驾驶、实时地图
外观:定制3D卡通千面
用户可以根据自己的形象和喜好捏出自己的Omoji虚拟形象,包括肤色、发型、帽子、眼镜等,包括五官,都可以自己定义。
设计的图像可以连接到视频会议、有趣的照片拍摄和其他活动。 面对突发的会议,无需化妆,完美解决了社会恐怖问题。
从技术角度来看,通过引入业界先进的人脸捕捉算法,Omoji基于50个核心表情库创建了高精度3D模型,将虚拟化带入生活。 目前仅支持头像定义,不支持下半身。
2) 苹果拟我表情
上线时间:2018.09.18 随iOS 12正式版上线
交互方式: 实时驾驶实时建图
外观:定制3D千面卡通半身像
该功能使用苹果的 Face ID 摄像头系统,将流行的表情符号映射到您的脸上,以便它们在现场录音中模仿您的面部表情。
核心技术是利用结构光3D建模技术,实时捕捉用户面部表情的变化卡通形象,并进行实时建图。 甚至可以检测并同步诸如伸舌头之类的细节变化。
国际化、多样化的材料可供用户DIY自己的头像和下半身(腰部以上)。 该功能与facetime和iMassage连接,将为视频通话和短信增添更多互动和乐趣。
4.相机胶卷
1)三星AR萌拍
发布时间:2018.02.25 与三星Galaxy S9一起发布
交互方式:全身动作捕捉、面部驱动、实时建图
外观:定制3D卡通千人千面
该功能位于三星手机内置摄像头的AR体验区。 它是一种简单的一站式商店模式,允许用户在一个地方使用其全部基于现实的功能。
用户可以通过“动漫表情相机”功能创建与自己相似的数字图像; 然后通过Amoe Emoji Studio制作带有定制图案的服装; 彩信等; 它还支持舞蹈录制等有趣的创作方式。
2)小米Mimoji萌拍
发布时间:2019.07.02
交互方式:真人脸部捕捉、表情映射
外观:千人千面3D卡通
通过Mimoji,用户可以对自己的脸部进行建模,一键生成与自己相似的3D图像。
如果您对自动生成的风格不满意,可以对其进行修改,包括发型、脸型、眼睛、眉毛、鼻子和嘴唇、胡须、雀斑、眼镜、配饰等。
相册模块添加Mimoji后,拍照和视频有了更多新的方式。 用户可以用虚拟人物头像录制短视频,制作成表情包并分享到社交平台或微信朋友圈。
5.虚拟社交平台
1)仔仔ZEPETO中文版
上线时间:2018年12月下旬
交互方式:按键操作,根据操作推送短视频流
外观:定制3D卡通千人千面
由韩国SNOW公司出品,是一款主要面向Z世代用户的社交软件。 用户进入软件后,第一步就是捏脸。
系统首先会帮助用户拍照生成一张大致相似的脸,然后用户可以在这张“基本脸”上进行任何改变。
捏脸后,践行了“我的美应该让全世界看到”的理念,用户可以在网上与其他用户合影。
仔仔的用户既有针对脸型、服装的高端时尚流,也有根据场景捏出最合适造型的技术流,甚至还用仔仔在小红书试口红、搭配衣服。
2)腾讯超级QQ秀
上线时间:2022年2月10日。
交互方式:多模态交互
外观:定制3D卡通千人千面
升级版QQ秀完成了传统QQ秀虚拟形象从2D静态到3D动态的转变。
在超级QQ秀中,不仅有服装,还有头像发型、脸型、五官等细节的定制。 此外,还有更加精致的服装,用户可以塑造更加完整的形象。
该产品新增了可供用户定制的小巢系统和可以走动聊天的户外场景,为QQ带来了传统在线社交模式所缺乏的存在感。
场景化让超级QQ秀的社交有了更多的想象空间。
6、电商直播
1)阿里云淘宝智能直播间
上线时间:2020年夏季
交互方式:文字识别、多模态智能交互
外观:千人千面定制
阿里云推出智能产品,利用智能技术驱动虚拟形象在前台进行自动播报和个性化推荐。
商家付费打开后,可以通过捏脸选择不同的服装,添加品牌标志服装,选择合适的声音和口音,一键生成脚本。 利用品牌智慧直播间24*7实现无人直播。
虚拟人会自动筛选识别买家留言给出正确答案,并穿插关键词特效,如买一送一、最低折扣等,吸引买家注意力。
以上是小编对移动虚拟人产品从技术端到应用端的探讨和总结,希望能够给对虚拟人产品感兴趣的朋友提供帮助和指导。
参考:
QuestMobile2020“Z世代”洞察报告
搜狐:中国Z世代虚拟数字人的感受:开拓新社交圈的方式与可能性
CNbeta 百度发布虚拟助手“杜晓晓”:开启创新搜索方式
搜狐:百度APP推出“公军数字人”:可语音交互并提供搜索服务
搜狐:ColorOS 12 Omoji功能体验:定制属于你的虚拟形象
IT之家:苹果升级 Animoji 推出 Memoji:可以模仿舌头
三星官网:Galaxy Z Flip的AR区域提供哪些功能?
新浪网:小米CC9拥有东方人专属发型和造型
界面新闻:仔仔,你还在玩ZEPETO吗?
APP找到:Zepeto中文版介绍
21世纪经济报道:腾讯推出超级QQ秀,引领在线虚拟社交新时代
新浪创世纪:超级QQ秀背后:腾讯对在线虚拟社交新时代的思考
阿里云:品牌智慧直播间
– – – / 结尾 / – – –
—————— / 好课程推荐/ ——————
如果我不愿意躺着,想成为一名优秀的操作员,但能力不够怎么办?
起点课堂和腾讯课堂打造的“90天运营实战课”可以帮助你~
▶ 大厂资深导师直播讲座前沿操作知识;
▶ 6个实战项目,老师1v1点评,学以致用,查漏补缺;
▶ 班委陪伴、监督学生,及时回应,提供放心服务;
现在扫描二维码,添加顾问老师,发送“666”即可领取限量课程折扣~
- 本文固定链接: https://wen.nuanque.com/katong/6854.html
- 转载请注明: nuanquewen 于 吉祥物设计/卡通ip设计/卡通人物设计/卡通形象设计/表情包设计 发表
- 文章或作品为作者独立观点不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。本文之内容为用户主动投稿和用户分享产生,如发现内容涉嫌抄袭侵权,请联系在线客服举报,一经查实,本站将立刻删除。本站转载之内容为资源共享、学习交流之目的,请勿使用于商业用途。