2023-07-06
7月4日，尊龙时凯人生就是搏官网z6mg（002354.SZ）与专注3D视觉+AI的高科技半导体企业银牛微电子签署战略合作协议，并宣布配合投资4000万建设合资公司。尊龙时凯人生就是搏官网z6mg总司理徐德伟出席签约仪式并揭晓讲话，提到：“将以合资公司为主体，把尊龙时凯人生就是搏官网z6mg在元宇宙、虚拟数字人领域的应用场景优势与银牛微电子在3D视觉芯片领域的手艺优势与相团结，配合研发面向元宇宙应用场景的3D深度视觉模组，实现虚拟数字人低本钱、短周期、批量化生产制作与低延迟、高精度、陶醉式互动体验，一直降低元宇宙进入门槛，一直富厚元宇宙应用场景。”
为进一步相识尊龙时凯人生就是搏官网z6mg与银牛微电子建设合资公司后的产品妄想，记者与徐德伟举行了深入交流。
Q：您在签约仪式上提到，与银牛配合建设的合资公司将配合研发3D视觉感知产品，讨教详细的产品妄想是什么 ？
A：现在，我们妄想了3款产品，包括便携式3D深度相机、桌面式3D摄像机和数字人3D数据收罗系统，划分应用在虚拟数字人扫描与自动化建模、虚拟数字人全身深度视觉捕获驱动、人体行动3D数据收罗3个领域。
Q：合作开发的第一款产品会是什么呢 ？
A：第一款产品，我们会把研发重点放在便携式3D深度相机这个产品上，主要应用于虚拟数字人扫描与自动化建模。
尊龙时凯人生就是搏官网z6mg在虚拟人的打造和运营上有富厚的履历，以往行业内要完成一个虚拟人的构建从扫描到建模，需要很长的周期和很高的本钱，很难实现大规模的批量化生产。在2020年我们决议切入虚拟数字人赛道时，我们和许多企业、科研机构交流、合作过，其时大部分需要2到3个月的周期才华完成一个超写实的虚拟数字人，建模本钱更是从几十万到上百万不等。
在已往1年多时间里，我们基于自研的Meta-Surfing元享智能云平台，通过对数字人天生、数字人驱动、数字人交互三个焦点功效� ？樗惴ǖ囊恢庇呕�，通过软件系统的投入，已经大幅缩短了制作周期与制作本钱，但距离完善的消耗级ToC应用尚有一定差别，主要缘故原由是古板的相机扫描收罗到的都是2D数据，需要花大宗的算力和时间转换成3D数据。
银牛的3D视觉芯片收罗的自然就是3D数据，芯片自己还具备AI算力，他们的3D视觉芯片与我们的元享软件平台团结后，会填补这最后的一点差别，通过软硬团结，真正实现虚拟人短周期、低本钱、批量化天生，从而降低元宇宙的门槛，提供应C端用户工具化、标准化、易用型的可交付产品与解决计划。
Q：研发桌面式3D摄像机是出于哪些思量 ？
A：虚拟人天生焦点环节主要涉及建模、驱动和渲染三大手艺。第一阶段通过便携式3D深度相机我们实现了虚拟人扫描、建模自动化，那么第二阶段我们希望厘革驱动环节。
我们把虚拟人的生长划分了三个阶段，1.0阶段是静态虚拟数字人阶段，只能展示，不可互动 ；2.0是动态虚拟数字人阶段，举行展示时可以与现实人互动，但需要中之人使用，也就是双簧式，需要现实人一对一搭配数字人 ；3.0是智能数字人阶段，通过自学习，数字人完全可以替换现实人在一些领域自力事情。
1.0阶段是通过古板CG或体积视频手艺建模的，是不可控体数字人，无法实时互动，应用场景较量狭窄 ；2.0阶段主要是基于惯性行动捕获、光学行动捕获及实时渲染手艺，打造出可控体数字人，应用在虚拟主播、虚拟偶像上，虽然有一些应用，但不完善，行动容易失调、面部心情不到位、互动能力差、陶醉体验感欠好。针对这些问题，我们妄想推出可以实现3D深度视觉捕获驱动的桌面式3D摄像机。
通过3D摄像机和深度传感器能获取人体的三维形状和姿势信息，甚至是骨骼结构追踪。关于人脸识别、姿态、行动识别、手势识别，它的准确性和细节捕获能力都很是强。
因此，相较于惯性行动捕获、光学行动捕获、光惯混淆动捕方法，视觉捕获越发无邪利便，无需特另外佩带装备，关于C端越发适用，并且经由AI数据修正，可以获得更高精度、更稳固、高质量数据，并且还可以在摄像头的视野规模内举行收罗拍摄，有更大的运动空间和规模。
Q：第三阶段将推出什么产品，人体行动3D数据收罗有什么意义 ？
A：产品研发的第三阶段，我们的目的是打造一个应用于人物心情、形态及行为特征数据收罗的数字人3D数据收罗系统，形成我们特有的数据库，用来训练数字人心情和行动，这是我们为实现3.0智能数字人阶段做的数据基础设施。
ChatGPT泛起后，虚拟人谈天等智能交互体验有了奔腾提升，但虚拟人作为AIGC典范多模态应用，整个天生式AI手艺在虚拟人行动和心情天生领域相对滞后。我们看到一个AI驱动的数字人，或许能和你谈天，可是来往返回就那几个行动。AI手艺的成熟度、算法迭代离不开数据，特殊是大宗、高精度、高质量的3D数据库。
未来，我们会有一个较大规模的基于3D深度摄像机的人体重大行为数据库，经由数据喂养、深度学习算法提取,AI数字人的行动也会像语言交互体验一样趋于自然、流通，并且是自学习的，届时虚拟数字人才华真正挣脱“中之人”驱动，完玉成面的AI进化。
Q：最后一个问题，为什么选择和银牛微电子合作 ？
A：选择银牛作为合作伙伴是经由深图远虑的。银牛是一家集3D双目视觉处置惩罚和人工智能芯片设计能力于一体的高科技半导体企业。在3D深度视觉、重大SoC设计、低功耗、光学、嵌入式系统软件、边沿盘算等方面具有10年以上的深挚履历。全球最早从事芯片上3D深度感知引擎研发的企业之一以色列公司Inuitive也是银牛的子公司。加上多年来在泛机械人领域的应用探索，银牛自研的集成3D视觉感知、AI、SLAM的系统级芯片已经应用在在众多前沿应用领域的产品中，3D和AI能力已经获得了验证。
我们以为，虚拟人就是元宇宙天下里的要害，它需要3D视觉感知能力，需要AI能力。3D视觉+AI的模式，将付与虚拟人和种种智能装备“人眼”和“人脑”。选择和银牛合尴尬刁难尊龙时凯人生就是搏官网z6mg来说，是跟我们在元宇宙场景和虚拟人方面举行软硬件团结的最佳选择。
内容泉源：证券时报