图说:阶跃星辰展区 采访对象供图

2024世界人工智能大会展区现场,有个挤得水泄不通的互动。

像孙悟空一样在全世界大闹天宫的AI大模型,真的和《大闹天宫》联动——只需一张真人正面图片,就能获得“天庭打工人”寸照;在测出属于你的《大闹天宫》版MBTI的同时,还能来一场个人化的天庭“升职记”。

这款游戏是上海电影和阶跃星辰在“AI+IP”领域的一次创新尝试。阶跃星辰创始人、CEO 姜大昕博士表示:“我们十分珍视上影集团的宝贵文化资产,希望通过 AI 延续经典 IP 的独特价值、弘扬中国传统动画风格。”

这款“天宫 MBTI”游戏的创想来自阶跃星辰的一支产品团队。“游戏背后调用了多个阶跃星辰自研的Step系列大模型,融合了图像理解、风格迁移、图像生成、剧情创作等多种能力,丰富立体地展现了阶跃星辰行业领先的多模态水平。”游戏开发负责人介绍,例如,在初始角色生成时,系统首先会判断用户上传的照片是否符合“捏脸”要求,然后用非常《大闹天宫》的语言风格灵活给予反馈——这就体现了模型的图片理解能力和大语言模型的能力。

在游戏中,除了《大闹天宫》剧作里家喻户晓的人物,玩家可以解锁天宫更多神仙角色和场景,比如解梦仙、孟婆、司乐正、太上炼丹师、蟠桃仙官、地府判官、卷帘大将等等,而只有1%的玩家有机会解锁齐天大圣、太上老君、玉皇大帝等稀缺角色。游戏也结合了当下最火的MBTI人格测试和职场文化,弥合了玩家之间的代差,提升了年轻人的沉浸感。

“大模型也颠覆了传统H5游戏的开发业务流程,这个游戏从想法到开发完成仅用了两周,而且我们大部分的精力都在模型训练上。其中最大的挑战在于像《大闹天宫》这样稀缺的数字资产,可供训练的数据是非常有限的,我们用Step-1X图像生成大模型在这里就发挥出了优势,使我们用极其少量的训练数据就可以实现质量可观的生成效果。”开发人员补充说,“今年恰逢大闹天宫推出60周年,也是阶跃星辰第一次参加世界人工智能大会,所以有了这个创意。这次的小游戏只是一次试水,我们希望将来在更多的产品上,用多模态大模型的理解和生成能力为消费者带来全新的高维体验。”

值得一提的是,阶跃星辰团队还与上海电影结合《葫芦兄弟》的IP进行了视频生成能力的展示。和《大闹天宫》一样,这部有着近40年历史的剪纸动画具备独一无二的中国美术风格,且可供训练的视频资料非常有限。如何在极少的训练数据条件下,满足对IP形象可控性要求极高的视频生成,是阶跃星辰团队和上海电影过去一个月集中攻坚的关键任务。最终,研发团队在这个课题上取得了阶段性突破,实现了基于中国动画风格的IP可控生成。在双方公布的视频片段中,模型能够让“爷爷”喷火、让“火娃”喷水,还能够根据剧情指令高效创作出新的动画,在人物动作、运镜感知等方面都有不错的效果。

资料图:阶跃星辰研发人员介绍产品 新民晚报记者 陶磊 摄

记者了解到,在2024世界人工智能大会上,阶跃星辰首发了三款Step系列通用大模型新品:Step-2万亿参数语言大模型正式版、Step-1.5V多模态大模型和Step-1X图像生成大模型。自今年三月正式公布以来,Step系列通用大模型在短短100天左右实现了从千亿参数到万亿参数,从语言模型到多模态模型,从理解到生成的全面进步。

新民晚报记者 郜阳

友情提示

本站部分转载文章,皆来自互联网,仅供参考及分享,并不用于任何商业用途;版权归原作者所有,如涉及作品内容、版权和其他问题,请与本网联系,我们将在第一时间删除内容!

联系邮箱:1042463605@qq.com