身体长两尺,面如靛蓝,头发如朱砂,眼神凶猛,牙齿......电影《风神》中雷震子的造型令人叹为观止。 为了诠释这种数字角色,空间计算动作捕捉技术派上了用场,不仅还原了真实的人体形态1:1,而且使动作和表情都栩栩如生。
这与Leyard Virtual Dynamic基于AI的空间计算技术的赋能密不可分。 在AIGC(Generative Artificial Intelligence)大幅提升行业生产效率的当下,利亚德虚拟动力更是迈向了一步,进入了AI大模型,发布了自主研发的Lydia专业能力行动模型。 利亚德集团副总裁兼CMO、虚拟Motion Point首席执行官刘耀东在接受中国电子报记者专访时表示,Lydia已经形成了空间动作数据的“认知、感知、生成”等核心能力,并率先在空间计算和动作生成领域探索AIGC的新模式。 并将在影视创作和动漫游戏制作领域拥有广阔的未来。
把“数据资本”扛成大模型
从PGC、UGC到AIGC,内容行业经历了一轮又一轮的生产力变革。 虽然从PGC到UGC的演变牺牲了一定程度的专业性,但却大大提高了生产效率。 AIGC同时解决了内容制作质量和制作效率两大问题。
从需求来看,元宇宙和空间计算的概念火热,内容行业已经处于爆发式需求的节点,需要高频生产大量符合标准的内容。 AI大模型时代已经到来,背后是算法、算力、数据的全面竞争。 算法和算力可以通过人工训练和扩展数据中心来解决,而数据资源需要分为两部分。 互联网上充斥着**和文字,但三维空间数据却非常稀缺。
刘耀东表示:“AI时代大模型发展的瓶颈不再是算法的发展,而是数据的积累。 多年来,利亚德虚拟动态点在空间计算和动作捕捉领域积累了大量的运动数据,这也是利亚德虚拟动态点能够开发大型运动模型的核心原因。 ”
记者了解到,Lydia动作模型的参数包括基础数据参数和核心动作数据参数两部分。 在基础数据参数方面,Lydia参考了当今主流的大模型数据集,在自然语言理解的训练模型过程中已经达到了数百亿的规模。 在核心动作数据参数方面,拥有OptiTrack光学动作捕捉多年数据积累、无标记点动作捕捉数据沉淀、互联网动作数据提炼能力。 通过三种动作数据的积累,利亚德虚拟动点成功训练了Lydia大模型的动作数据。
相较于耗资斥巨资在海量数据上训练的大型模型,利亚德虚拟动力深耕空间计算和动作捕捉技术多年,拥有动作数据资源优势。 刘耀东说。
聚焦场景,推动商用
通过输入“蹲下、前走、转身”等一个或多个命令,Lydia大模型可以连续生成一个简单的动作、一组复杂的动作、一系列的特征动作,完成主流渲染引擎平台的数据开通和调用。
在2023年底召开的新闻发布会上,记者见证了Lydia大模型对动作数据文件的认知理解和描述能力。 业内专家评论称,如果将这种模式用于某些影视机构的专业创作,或者用于个人博主的内容创作,那将如鱼得水。
在通用模式遍地开花的当下,业界达成共识,成功落地大模式的行业主要有两类,一类是设计、娱乐、游戏等创意产业,二是金融、医疗、法律等高知识密集型产业。
谈及动作模型开发之初Leyard Virtual Motion Point的整体设计和规划,刘耀东说:“我们确实对大模型的定位做了很多思考。 Lydia是目前世界上为数不多的真正实现运动生成的大型模型之一,旨在解决某些场景,如影视创作、游戏开发等。 ”
不同于其他通用模型,莉迪亚动作模型是一种专业能力模型,它不同于前者的能力特征和应用领域,但能力互补,实现场景互补。 Lydia可以在空间计算领域实现对动作数据的认知理解,从而进行高效的动作生成,专注于对动作数据采集效率更重要的行业场景,如影视、电子商务、动漫制作、游戏等。 同时,Lydia 还支持其他软件平台进行连接和调用,使其生成的动作文件可以被生态伙伴用于商业化。
目前,Lydia行动模型的生态合作圈“遍布全球”,不仅吸引了众多领先的云厂商,还吸引了大量的通用模型厂商和应用厂商。
据刘耀东介绍,利亚德虚拟动态点探索未来的合作方向之一,就是如何将Lydia大模型与通用大模型平台融合,实现资源的并行调动。
对于商业合作模式,刘耀东设想:“首先,在云上,电影公司、大学、直播博主等用户可以调用API来生成动作; 第二个是项目系统,它将动作模型私有化以解决用户的特定需求。 ”
刘耀东表示:“未来,在Lydia大模型的商业化过程中,我们将首先将我们的部分能力发布给用户试用。 通过这个过程,我们将尽最大努力加深大家对动作模型的理解,比如让业界和大众意识到动作模型可以有效提高电影创作中视觉呈现的准确性和制作效率。 ”
自2023年发布“一体三核”核心能力和发展战略以来,以空间计算为主要战略主体,以AI大模型、硬件设备、空间数据为三核,利亚德虚拟动态在AI时代大踏步前进,现推出Lydia行动模型,加速AI能力体系提升。 未来,利亚德虚拟动态将持续提升科技创新的深度和准确性,加速AI大模型和空间计算应用的落地。 作者丨卢梦琪编辑丨邱江永梅编辑丨玛丽亚制片人丨连晓东.