AnimeGamer—腾讯携手香港城大打造动漫生活模拟

腾讯PCG联合香港城市大学推出全新动漫生活模拟系统AnimeGamer，该系统基于多模态大语言模型（MLLM），允许玩家扮演经典动漫角色，并通过开放式语言指令与游戏世界互动。AnimeGamer支持实时动态动画生成、动态角色状态更新及自然流畅对话，提供高度自定义内容和沉浸式角色扮演体验。 其核心技术利用视频扩散模型等先进技术，确保动画流畅自然且上下文连贯。目前，该项目已开放官网、GitHub仓库及HuggingFace模型库，并发布技术论文，应用前景涵盖个性化娱乐、创意内容创作、教育辅助等多个领域。

AnimeGamer：无限动漫生活模拟系统

腾讯PCG与香港城市大学携手打造的AnimeGamer，是一款基于多模态大语言模型（MLLM）的无限动漫生活模拟系统。通过开放式的语言指令，玩家可以扮演诸如《悬崖上的金鱼姬》中的宗介等动漫角色，沉浸式地体验动态游戏世界。

核心功能：

• 沉浸式角色扮演： 扮演你最爱的动漫角色，与游戏世界及其他动漫角色互动，创造独特的冒险故事。
• 实时动态动画： 系统根据玩家指令实时生成上下文一致的动态动画视频，展现角色动作和场景变化。
• 动态角色状态： 角色的体力、社交和娱乐值会根据行为和互动实时更新，增强游戏真实感和互动性。
• 自然流畅对话： 支持多轮自然语言对话，系统基于对话历史生成一致的游戏状态，提供连贯的游戏体验。
• 高度自定义内容： 玩家可以自定义角色和场景，打造专属的动漫世界。

技术架构：

AnimeGamer的核心技术在于其先进的多模态大语言模型。系统将动画镜头分解为视觉参考、动作描述和动作强度三个要素，并利用编码器进行多模态表示整合。 基于视频扩散模型（例如CogVideoX）解码生成高质量动态视频，并通过引入动作强度控制，确保动画自然流畅。 历史动画镜头的多模态表示作为上下文输入，保证了动画镜头在上下文中的连贯性。 此外，系统还利用MLLM预测和更新角色状态，提升游戏沉浸感。

访问方式：

• 项目官网： http://howe125.github.io/AnimeGamer.github.io/
• GitHub仓库： http://github.com/TencentARC/AnimeGamer
• HuggingFace模型库： http://huggingface.co/TencentARC/AnimeGamer
• arXiv技术论文： http://arxiv.org/pdf/2504.01014

应用前景：

AnimeGamer的应用场景广泛，包括：

• 个性化娱乐： 打造专属的动漫冒险体验。
• 创意内容创作： 为创作者提供灵感和工具。
• 教育辅助： 提升语言表达和逻辑思维能力。
• 社交互动： 与朋友共同创造和分享动漫故事。
• 游戏开发辅助： 加速游戏内容生成，降低开发成本。

今天带大家了解了的相关知识，希望对你有所帮助；关于科技周边的技术知识我们会一点点深入介绍，欢迎大家关注golang学习网公众号，一起学习编程~