巨人网络首次参展云栖大会,两款“游戏+AI”自研大模型应用首发
BaiLing-TTS不仅支持普通话零样本克隆,还能够生成河南话、上海话、粤语等多种方言语音。
9月19日,2024云栖大会在杭州开幕,巨人网络(002558.SZ)携多项“游戏+AI”新成果首次参展,两款自研大模型GiantGPT、BaiLing-TTS应用首发,巨人摹境、AI数字人等AI新技术亮相。
2024年被业界视为“大模型落地元年”,国产大模型经历飞速发展,正处于千行百业拼应用阶段。作为AI技术的最佳试验场之一,游戏行业在加速落地中。
本次云栖大会上,巨人网络自研角色大模型GiantGPT、语音大模型BaiLing-TTS首次亮相,展示大模型在游戏场景的最新应用成果。参展观众不仅可以体验GiantGPT基于游戏IP定制的角色对话能力,还能通过BaiLing精准生成方言语音、京剧唱腔,只需一键输入即可感受大模型的“能说会唱”。
据介绍,GiantGPT是专注于游戏业务的垂类大模型,结合高质量自有数据与互联网公共数据训练,并针对角色演绎、情景推理、长期记忆等基础能力进行深度优化,其应用效果已在巨人网络游戏业务场景中得到验证。例如,由大模型驱动的拟人化问答系统,有人设、有情绪,能够充分理解玩家语义,进行自然且富有情感的对话,为玩家提供更为真实、鲜活的体验。
另一款首次亮相的大模型是BaiLing-TTS,这是行业内首个支持多种普通话方言混说的语音大模型,巨人网络AI实验室构建了涵盖20种方言、超过20万小时的普通话和方言数据集,并采取多项创新技术进行大模型训练。BaiLing-TTS不仅支持普通话零样本克隆,还能够生成河南话、上海话、粤语等多种方言语音。
基于大模型能力,BaiLing语音生成平台以其卓越的自然度和表现力为特点,具备高保真的方言语音合成能力,能够生成多种高质量、个性化风格的语音,此外还集成了音效生成功能,支持文本直接驱动生成音效,或通过多模态信息综合驱动生成。目前,该平台已应用在游戏NPC配音、视频创作等实际场景。
本次首发的AI新技术还包括高精度实时交互数字人,征途IP定制的AI数字人,不仅高度还原了真人的外貌、声音、表情等,还能实时响应用户的对话,提供更真实的人机交互体验。通过AI技术的深度整合与协同,AI数字人实现了高度拟人化、智能化、个性化,巨人网络AI实验室已形成全栈式解决方案,未来有望拓展丰富的应用场景。