2023-06-05
克日，《浪姐4》高调开播，与之前差别的是,芒果台这次大手笔，准备走国际化, 放眼望去尽是俄罗斯、美国、日本、韩国、德国、越南姐姐齐聚一堂争奇斗艳，创立了同期综艺节目的天花板。不过本季浪姐的流量剧本似乎未凭证预期上演，在海内“险些无着名度”的二次元玉人美依礼芽（MARiA），依附一首《极乐净土》人气迅速上升，断崖甩开其他选手，直接霸榜第一，打翻了本季浪姐剧本。
AIGC版《极乐净土》点燃B站
美依礼芽和《极乐净土》事实是何来头？早在7年前《极乐净土》就曾以其入耳的旋律、律动感强烈的舞步血洗B站，吸引了一大批二次元粉丝，成为B站镇站歌曲，现在时隔7年后，《极乐净土》再度翻红出圈，点燃了B站网友们的二创热情。有网友使用AIGC手艺，复刻了《极乐净土》舞蹈的名时势，引发热议，播放量甚至凌驾B站舞蹈区着名大UP翻跳版。
百变易服，人稳固，天生式AI迎来手艺突破
AIGC版的《极乐净土》，甚至比原版舞蹈更为上头（事实谁不喜欢小姐姐在舞蹈时一秒一易服呢）。之前各人熟知的AIGC图像天生，多应用于图像领域。由于无法做到稳固的多帧一连图像天生，以是鲜有高质量的AI天生视频。而AIGC版的《极乐净土》却实现了对图像的精准控制，行动、衣饰一连多变，但人物却始终坚持较为稳固的状态，其缘故原由正是天生式AI手艺迎来了新的手艺突破。
2023 年，一款叫ControlNet（译为控制网）的Stable Diffusion插件宣布，这款插件在短短的2天时间就在GitHub狂揽4.6K Stars，成为了AI绘画领域最热门的新星。ControlNet的泛起代表着天生式AI手艺最先可控，而天生式AI手艺能否被准确控制，正是AIGC手艺是否进入现实生产情形中最为要害的一环。
此前，若是想通过AIGC手艺，天生带有运动轨迹的稳固一连图像（多张图片，转换成视频）是很是难题的，由于天生式AI手艺的不可控，导致天生的图像，每一帧都会有极大的差别，无法用于合成视频。若是说在使用天生式AI手艺作画时，不可控在某些场景下还算是个优点，能够资助创作者发散头脑，提供更多可能性。那么在视频创作领域，天生式AI手艺的不可控，将导致天生的画面无法使用（想象一下，一部影戏，上一秒挥拳的照旧杰森斯坦森，下一秒就酿成了巨石强森），以是在影视领域，AIGC手艺的普及速率远远落伍于其他工业。
通过引入特另外输入，实现精准控制天生式AI
ControlNet 作者提出了一个新的神经网络看法，通过引入特另外输入来控制扩散模子，如 stable diffusion，然后在新天生的图像中保存这些信息，好比人物姿态、深度、画面结构等，以实现用户对天生的图像举行细腻化控制。
在此之前，若是想要实现对图像举行细腻控制，需要对prompt提醒词举行详细形貌，或者用图生图加上详细的prompt才华小概率天生目的图像，ControlNet 泛起后，实现难度大幅降低。通过引入特另外输入（如Canny 边沿检测、Openpose 骨骼绑定），ControlNet就可以对模子加以约束，以包管天生的图像可以遵照使用者的意图举行天生、调解，从而实现对模子的细腻化控制。
关于视频内容创作者，元享AIGC�？榻粗卮蟮男侍嵘�，原本需要投入大宗人力物力本钱，破费数周时间才华完成的视频的将在一两天内完成。智能化的使用体验，极大降低了视频的制作本钱与周期。并且随着AIGC手艺的一直更新迭代，效率效果还将一连提升，在不久的未来，AIGC手艺将倾覆视频创作流程，成为影视行业新时代数字生产力。
拓展AIGC应用领域，元享天生式AI+大模子，开启多模态虚拟数字人交互新篇章
尊龙时凯人生就是搏官网z6mg子公司元境科技妄想将AIGC手艺扩展到更多领域。现在内测版元享智能云平台已将AIGC、大模子手艺应用到虚拟数字人肢体驱动，通过卷积神经网络提取音频特征与行动库特征，建设双向映射关系，通过预训练大模与型神经网络解码器获得肢体行动要害点位置信息，天生式AI将音频信息与行动要害点位置信息团结，天生并驱动虚拟数字人行动、心情。实验室情形举行双盲测试，接入到内测版元享智能云平台的元趣AI，在虚拟数字人电商直播间的效果比照评分高于真人。由于元享虚拟数字人每一次语言时的行动心情都是由天生式AI天生的全新的行动，且能够与直播音乐频谱相团结，在直播时互动越发多样，体现越爆发动自然。
在相同话术，差别音乐韵律下，虚拟数字人每次的交互行动不尽相同，实时天生的新行动突破了以往虚拟数字人只能凭证行动库举行要害词匹配，且行动模子少、肢体心情僵硬不自然等问题，能够更好地处置惩罚重大的互动场景。此项手艺的落地将有用提升虚拟数字人在影视、教育、金融、文娱、电商、外地生涯等诸多行业的应用效果，拥有无限行动的虚拟数字人将成为虚拟人行业生长的主要里程碑。