当前位置:首页 > 文章列表 > 科技周边 > 人工智能 > 真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

来源:机器之心 2024-11-07 14:48:42 0浏览 收藏
推广推荐
免费电影APP ➜
支持 PC / 移动端,安全直达

科技周边小白一枚,正在不断学习积累知识,现将学习到的知识记录一下,也是将我的所得分享给大家!而今天这篇文章《真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多》带大家来了解一下##content_title##,希望对大家的知识积累有所帮助,从而弥补自己的不足,助力实战开发!


AI好好用报道

编辑:杨文
目前发布的最大的开源视频生成模型。

Genmo 当了一回「赛博菩萨」。

昨晚,AI 视频生成公司 Genmo 推出了最新的视频生成模型 Mochi 1 ,并且大手一挥,直接给开源了 。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

Genmo 在社交媒体上高调宣布:Mochi 1 在运动质量、提示遵循性和人类渲染方面表现出色,甚至超越恐怖谷。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

同时,它还声称,在内部测试中,Mochi 1 已经能与 Runway、Luma 、可灵等领先的闭源竞争者打个平手,甚至略胜一筹。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

为了让网友体验一波 Mochi 1 ,Genmo 还提供了一个在线网址。

链接:https://www.genmo.ai/play

不过,每6小时仅有 2 次免费生成机会,且用且珍惜吧。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

不少网友得知消息后,已经按耐不住整活的热情。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

那么,它的效果到底咋样?

先来瞅瞅官方放出来的视频 demo,稍后我们奉上一手实测。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

-1-

一手实测

要说 Mochi 1 最大的优势,就在于其高保真运动和强大的提示遵循能力。

它可以对生成视频中的角色、设定和动作进行精确控制。

科技媒体 VentureBeat 的记者生成了一段老奶奶侧对着镜头说话的视频。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

无论是花白的头发,还是面部的皱纹,以及说话时颤动的嘴角,都相当逼真。

不过,如果细看,还是能发现老奶奶的眨眼动作并不自然。

而在下面这段 5 秒视频中,男子正端详瓷器,眼睛没有什么明显的 bug,但手部动幅一大,就会发生轻微扭曲。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

X 网友 Heather Cooper 展示了一系列 Mochi 1 生成的作品:

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

她还对比了两次生成结果的连贯性:

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

我们也来凑凑热闹,亲自上手试一把。

Prompt:Surreal, cinematic, an astronaut wandering on the desolate moon, with extreme detail.

提示词:超现实,电影效果,一个宇航员在荒凉的月球上漫步,极致细节。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

一开始,镜头对准坑坑洼洼的地表,然后缓缓上移,画面中出现了一个身穿宇航服的宇航员。

虽然其镜头运动幅度挺大,但并未体现 Prompt 中宇航员漫步的动作。

Prompt:A little dog was chasing bubbles on the grass.

提示词:一只小狗在草地上追逐泡泡。
真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

这一次,Mochi 1 翻车翻得猝不及防。

视频中,小狗在摇晃脑袋时,出现了大面积的崩坏,而且从修勾的嘴里吐出很多泡泡,这显然不符合客观事实。

尽管官方声称 Mochi 1 的提示遵循和运动质量超过大多数视频模型,但我们发现,Mochi 1 仍然存在瑕疵。

例如,它仅支持 480p 的分辨率,并且在处理复杂运动的场景时,可能会出现轻微的视觉扭曲。

此外,Mochi 1 在模拟照片级真实感方面表现出色,但在处理动画内容时还稍显力不从心。

当然,Genmo 公司已表示,计划在今年晚些时候推出 Mochi 1 HD 版本,届时将支持 720p 的分辨率,并在运动细节上提供更高的精确度。


-2-

目前发布的最大的开源视频生成模型

据介绍,Mochi 1 基于 Genmo 的非对称扩散变换器(AsymmDiT)架构构建,拥有 100 亿个参数,是目前公开发布的规模最大的开源视频生成模型。

该架构专注于视觉推理,处理视频数据的参数量是处理文本数据的四倍。

为了降低终端用户的设备内存需求,让开发者更容易地获取和使用模型,Mochi 1 采用了视频变分自编码器技术,能够将视频数据压缩到原始大小的一小部分。

现在,用户可以在 Hugging Face 平台上免费获取完整的模型权重和代码,不过需要注意的是,要在自己的设备上运行 Mochi 1,至少需要配备 4 块 Nvidia H100 GPU。

  • Code:

    https://github.com/genmoai/models

  • Preview版本: 

    https://huggingface.co/genmo/mochi-1-preview

最后,说个题外话。

昨晚,一大堆 AI 公司排队上「新货」。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

除了 Genmo 开源自家视频生成模型 Mochi 1 外 ,Runway 还介绍了新功能 ——Act One,可以把真人表演转化成不同风格。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

而在大模型领域,Anthropic 推出了升级版的 Claude 3.5 Sonnet ,以及一款新模型 Claude 3.5 Haiku;OpenAI 在欧洲上线了高级语音功能;Perplexity 引入推理模式,允许用户提出多层问题。
真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

此外,AI 生图领域,Stability AI 发布了自家最强模型 Stable Diffusion 3.5,并一口气祭出三个版本;Ideogram 推出 Canvas,可扩图、局部重绘等。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

大洋彼岸的 AI 圈扎堆搞更新,真有一种过年的赶脚。

延伸阅读:Sora 竞争对手融资数千万美元,目前可免费“薅”

文章视频链接:https://mp.weixin.qq.com/s/OdHvM7nsTWAxbJBYmxZx_w

参考链接——

https://venturebeat.com/ai/video-ai-startup-genmo-launches-mochi-1-an-open-source-model-to-rival-runway-kling-and-others/

项目博客:

https://www.genmo.ai/blog?utm_source=ai-bot.cn

在线体验:

https://www.genmo.ai/play

huggingface模型库:

https://huggingface.co/genmo/mochi-1-preview


以后我们会带来更多好玩的AI话题,也欢迎大家进群交流。

真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多

文中关于产业的知识介绍,希望对你的学习有所帮助!若是受益匪浅,那就动动鼠标收藏这篇《真·赛博菩萨!最大的开源视频模型来了,我们实测:有点东西,但不多》文章吧,也可关注golang学习网公众号了解相关技术文章。

版本声明
本文转载于:机器之心 如有侵犯,请联系study_golang@163.com删除
阿里云远程桌面连接失败怎么办?阿里云远程桌面连接失败怎么办?
上一篇
阿里云远程桌面连接失败怎么办?
如何轻松查看电脑配置:全面指南与技巧
下一篇
如何轻松查看电脑配置:全面指南与技巧
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • ChatExcel酷表:告别Excel难题,北大团队AI助手助您轻松处理数据
    ChatExcel酷表
    ChatExcel酷表是由北京大学团队打造的Excel聊天机器人,用自然语言操控表格,简化数据处理,告别繁琐操作,提升工作效率!适用于学生、上班族及政府人员。
    3203次使用
  • Any绘本:开源免费AI绘本创作工具深度解析
    Any绘本
    探索Any绘本(anypicturebook.com/zh),一款开源免费的AI绘本创作工具,基于Google Gemini与Flux AI模型,让您轻松创作个性化绘本。适用于家庭、教育、创作等多种场景,零门槛,高自由度,技术透明,本地可控。
    3416次使用
  • 可赞AI:AI驱动办公可视化智能工具,一键高效生成文档图表脑图
    可赞AI
    可赞AI,AI驱动的办公可视化智能工具,助您轻松实现文本与可视化元素高效转化。无论是智能文档生成、多格式文本解析,还是一键生成专业图表、脑图、知识卡片,可赞AI都能让信息处理更清晰高效。覆盖数据汇报、会议纪要、内容营销等全场景,大幅提升办公效率,降低专业门槛,是您提升工作效率的得力助手。
    3446次使用
  • 星月写作:AI网文创作神器,助力爆款小说速成
    星月写作
    星月写作是国内首款聚焦中文网络小说创作的AI辅助工具,解决网文作者从构思到变现的全流程痛点。AI扫榜、专属模板、全链路适配,助力新人快速上手,资深作者效率倍增。
    4555次使用
  • MagicLight.ai:叙事驱动AI动画视频创作平台 | 高效生成专业级故事动画
    MagicLight
    MagicLight.ai是全球首款叙事驱动型AI动画视频创作平台,专注于解决从故事想法到完整动画的全流程痛点。它通过自研AI模型,保障角色、风格、场景高度一致性,让零动画经验者也能高效产出专业级叙事内容。广泛适用于独立创作者、动画工作室、教育机构及企业营销,助您轻松实现创意落地与商业化。
    3824次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码