当前位置:首页 > 文章列表 > 科技周边 > 人工智能 > Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告

Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告

来源:机器之心 2024-04-24 18:24:18 0浏览 收藏

亲爱的编程学习爱好者,如果你点开了这篇文章,说明你对《Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告》很感兴趣。本篇文章就来给大家详细解析一下,主要介绍一下,希望所有认真读完的童鞋们,都有实质性的提高。

这就是生成式 AI 时代的视频编辑工具。

Adobe 全家桶马上就要拥有最先进的生成式 AI 视频创作能力了。

今天,Adobe 宣布了 Premiere Pro 全新版本的更新计划。其中包含为第三方 AI 视频生成模型添加插件,不论是 OpenAI 的 Sora 还是 Runway 的 Gen-2 和 Pika,很快都将出现在 Adobe 工具体系中可被人们所用。

现在,基于 Adobe 自己的大模型 Firefly 的能力,你可以在视频素材上直接添加或减少内容。

Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告

转场时感觉少点烘托背景的镜头?现在用 OpenAI 的 Sora 自动生成一段就行了。

Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告                              Sora 可以在每次 API 调用中为自然语言提示创建最多三种视频变体。

新工具也可以用来「凭空延长」已有镜头内容的长度,不过这一部分似乎不受提示词的控制。

Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告

自今年 2 月 OpenAI 推出 Sora 以来,我们一直只能看官方在 TikTok 账号里放 AI 生成视频的 demo,真正的工具还是在「即将发布」的状态。现在新版 Adobe Premiere Pro 都亮相了,可能预示着新技术马上即将落地。

对于 Adobe 高达 3300 万的 Creative Cloud 付费用户群体来说,这更是一件大事,它可能会带来设计领域最彻底和革命性的变化。

有了这一功能,Premiere Pro 用户将能够编辑和处理传统摄像机捕获的实景视频以及 AI 素材并与之混合。想象一下,拍摄一个演员表演逃离怪物的场景的视频,然后用人工智能生成这只怪物 —— 这一步不需要道具、服装和演员,而两个视频片段可以在同一个编辑器中访问并组合在同一个视频文件中。

对于使用更成熟的流程(从计算机到手绘帧)创建的动画也是如此,这些动画可以与 Premiere Pro 上同一文件中匹配的 AI 素材混合。Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告
值得一提的是,从 Adobe 的演示里,我们再次看到了 OpenAI 的 Sora 和其他类似产品存在代差 —— 其生成的视频效果要比其他可用工具要好很多。

与 Adobe 之前发布的许多与 Firefly 相关公告不同,这一次新视频生成工具尚未确定发布日期,Adobe 只是表示它们将在今年推出。

引入第三方先进 AI 大模型对于视频处理来说属于面向未来的探索。据 Adobe 称,这一想法旨在为 Premiere Pro 用户提供更多选择。Adobe 还表示,其内容凭证标签可以应用于这些生成的剪辑,以识别使用哪些人工智能模型来生成它们。

Adobe 的 Premiere Pro(PR)自 1991 年底首次发布 Mac 版以来,一直是世界上最受欢迎的视频编辑程序之一,如今已被世界各地的主要好莱坞电影剪辑师和独立电影制作人使用。它即将迎来一场其 33 年历史上从未有过的革新。

Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告

需要注意的是,Adobe 尚未确定何时将这些第三方 AI 视频生成器集成到 Premiere Pro 中,而且细节似乎还没有完全敲定,许多第三方工具在发布后都需要付费订阅。

此外,Adobe 还使用自己内部的生成式人工智能产品(如 Firefly 和 Generative Fill 等),强调其模型是根据其拥有或已获得许可 / 有权使用的数据进行训练的,例如 Adobe Stock 创作者贡献的内容(尽管这令一些 Adobe Stock 摄影师和艺术家感到懊恼)。

Adobe 加码生成式 AI

Adobe 专注于多媒体创作和创意软件产品,在生成式 AI 技术爆发后,这家公司不甘落后快速加入了战局。

上周,据彭博社报道,Adobe 在竞争对手 Midjourney 生成的一些图像上对 Firefly 进行了训练,Midjourney 本身基于开源 AI 模型 Stable Diffusion,在公开抓取和受版权保护的网络数据上进行训练。

今天,Adobe 宣布 Firefly 文本到图像生成模型的一个版本将在「今年晚些时候」集成到 Premiere Pro 中,从而提供一套全新的「生成式 AI 工作流程」及功能。

例如,「生成式扩展」功能将让视频编辑和电影制作人「无缝添加帧以使视频剪辑更长」,而无需拍摄任何新的镜头,这可能是一个非常有用且省钱的功能。Adobe 还表示将让视频实现更平滑的过渡,例如将过于突然结束的剪辑延长,以在某个时刻或动作上停留更长时间。

Firefly for Video 还将确保 Premiere Pro 用户可以执行智能「目标检测和移除」功能,本质上是突出显示视频中的对象(道具、角色、服装、风景等),并允许 AI 模型跨不同帧跟踪它们。同时,用户还可以利用生成式 AI 将这些对象编辑为新对象,快速更改角色的服装或道具,甚至跨多个剪辑和摄像机角度完全移除对象。

最后,Firefly for Video 还将附带文本到视频图像生成器,使其可与 Sora、Runway、Pika 和 Stable Video Diffusion 相媲美。

尽管目前还只是预览版,但 Adobe 针对 Premiere Pro 提供的新一代 AI 集成功能已经赢得了电影制作人和社交媒体创意人士的掌声。

「这对我的真人电影工作非常有帮助」,导演 Kevin K. Shah 说道。

参考内容:
https://venturebeat.com/ai/adobe-to-add-ai-video-generators-sora-runway-pika-to-premiere-pro/
https://www.theverge.com/2024/4/15/24130804/adobe-premiere-pro-firefly-video-generative-ai-openai-sora
https://www.adobe.com/products/premiere/ai-video-editing.html

本篇关于《Sora加入Adobe全家桶,视频改图加戏样样行:PR大更新预告》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于科技周边的相关知识,请关注golang学习网公众号!

版本声明
本文转载于:机器之心 如有侵犯,请联系study_golang@163.com删除
如何使用命令行工具来调试Java函数?如何使用命令行工具来调试Java函数?
上一篇
如何使用命令行工具来调试Java函数?
如何在Windows 10系统中查看时间线记录
下一篇
如何在Windows 10系统中查看时间线记录
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    542次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    508次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    497次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    484次学习
查看更多
AI推荐
  • AI Make Song:零门槛AI音乐创作平台,助你轻松制作个性化音乐
    AI Make Song
    AI Make Song是一款革命性的AI音乐生成平台,提供文本和歌词转音乐的双模式输入,支持多语言及商业友好版权体系。无论你是音乐爱好者、内容创作者还是广告从业者,都能在这里实现“用文字创造音乐”的梦想。平台已生成超百万首原创音乐,覆盖全球20个国家,用户满意度高达95%。
    16次使用
  • SongGenerator.io:零门槛AI音乐生成器,快速创作高质量音乐
    SongGenerator
    探索SongGenerator.io,零门槛、全免费的AI音乐生成器。无需注册,通过简单文本输入即可生成多风格音乐,适用于内容创作者、音乐爱好者和教育工作者。日均生成量超10万次,全球50国家用户信赖。
    12次使用
  •  BeArt AI换脸:免费在线工具,轻松实现照片、视频、GIF换脸
    BeArt AI换脸
    探索BeArt AI换脸工具,免费在线使用,无需下载软件,即可对照片、视频和GIF进行高质量换脸。体验快速、流畅、无水印的换脸效果,适用于娱乐创作、影视制作、广告营销等多种场景。
    12次使用
  • SEO标题协启动:AI驱动的智能对话与内容生成平台 - 提升创作效率
    协启动
    SEO摘要协启动(XieQiDong Chatbot)是由深圳协启动传媒有限公司运营的AI智能服务平台,提供多模型支持的对话服务、文档处理和图像生成工具,旨在提升用户内容创作与信息处理效率。平台支持订阅制付费,适合个人及企业用户,满足日常聊天、文案生成、学习辅助等需求。
    16次使用
  • Brev AI:零注册门槛的全功能免费AI音乐创作平台
    Brev AI
    探索Brev AI,一个无需注册即可免费使用的AI音乐创作平台,提供多功能工具如音乐生成、去人声、歌词创作等,适用于内容创作、商业配乐和个人创作,满足您的音乐需求。
    17次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码