川大智胜同时拥有高精度三维照相机和数字人建模技术,并且这项技术还是公司独有,打破国外垄断,未来想象空间巨大,公司完全具备打造数字人建模iPhone的软硬件条件。
超写实数字人+生成式AI,构筑元宇宙中的“阿凡达”。数字人输出文字、图像、音视频,甚至细微到情绪表达(需要高精度三维照相机,川大智胜石锤突破)。伴随着超写实数字人+AI生成算法和包括GPT4 以内的多模态的进步,数字人的灵魂将被点燃。
超写实数字人的制作一般会经历六个阶段,包括角色设定、资产准备、模型制作、身体表情绑定、动画制作、渲染输出。超写实数字人的制作流程上其实和普通数字人没有太大的差别。但是另一方面,在人物角色皮肤毛发五官等表现的渲染上则有着天壤之别!
在建模渲染完成后,还有非常重要的一步就是赋予超写实数字人生命——让人物活起来。我们可以通过高精度摄像机矩阵扫描模特的表情细节,通过后期建模,创建了数字人的表情库;然后再用数字骨架组成了数字人的整体运动框架。必要时还可以通过面部捕捉和动作捕捉技术让人物活起来,简化建模和运动动态制作的工序,达到智能高效地生产影视级超写实数字人的表演内容。拿英伟达CEO黄仁勋的“虚拟替身”来说,为了打造这段时长仅14秒的虚拟影片,英伟达使用数百台数码相机从多个角度为黄仁勋拍摄了数千张照片,并雇佣一名专业演员模仿黄仁勋的演讲动作,进行8小时的动作捕捉。据英伟达方面透露,这场虚拟发布会他们总共动用了34位3D设计师和15位软件工程师。
如今生成式AI的蓬勃发展,让赋予超写实数字人灵魂成为可能。我们不但可以用输入不同文本加语种合成,去训练语音驱动表情和口型,还能接入对话式大型语言模型如ChatGPT或即将上线的百度文心一言,非常简单地就让数字人通过交互式语音对话拥有和人自主交流的能力。如果需要培育拥有各自独特个性的虚拟数字人,那么自主训练的语言模型必不可少。总之目前有了超写实数字人和人工智能生成式AI,加上一系列成熟的数字资产生产流程,如果未来再叠加一个超写实人物建模生成式AI,也许超写实虚拟数字人就能走进千行百业!
川大智胜已经和华西医院附一院心理科的专家团队合作,在该团队多年对心理疾病如抑郁、狂躁、谎言等诊断治疗知识积淀基础上结合国际最新用面部三维微表情诊断心理疾病的研究,开发基于高速高精度三维人脸摄像机“三维微表情抓拍分析仪”。目前已取得重要的实质性进展,列入国家重大研发计划,有望形成应用广泛的心理疾病普查和临床诊断设备。川大智胜三维微表情抓拍分析技术
若要实现科幻电影中,未来机器人与人类的真实互动,需要给无情的机器赋予理解人类感情的手段,需要察言观色,每个机器人都需要一双带有“三维微表情抓拍分析仪”的眼睛。
不仅如此,高精度高速三维摄像头几乎是未来元宇宙世界必不可少的硬件产品,现在我们看动画CG感觉假,最主要的就是面部表情僵硬,而解决这一难题的唯一技术,就是高精度高速三维摄像头,虚拟人表情与真人表情实时同步。
又如,新技术不再使用进口组件和芯片,完全自主,产品可进一 步小型化,形成可搭载在智能手机上的三维人脸照相机,助力国产智能手机厂商填补这一空白。
川大智胜同时拥有高精度三维照相机和数字人建模技术,并且这项技术还是公司独有,打破国外垄断,未来想象空间巨大,公司完全具备打造数字人建模iPhone的软硬件条件。
数字人将是一个重要的交互载体,应用场景广泛,而 AI 驱动的数字人将使其 真正拥有“灵魂”。短短两年,AIGC 发展超出了我们的想象。伴随着 AI 生 成算法和包括 GPT4 以内的多模态的进步,数字人的灵魂将被点燃。