0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Runway新功能「运动笔刷」再次惊艳AI圈:随手一涂,图片就动起来了

智能感知与物联网技术研究所 来源:未知 2023-11-12 22:00 次阅读
网友:我都不敢想象一年后的视频技术会有多先进。

一段五十秒的预告视频,再次让 AI 圈沸腾了。

昨日 Runway 宣布,即将在视频生成工具 Gen-2 中上线「Motion Brush」(运动笔刷)功能,一种可控制生成内容移动的新方法。

wKgaomVQ246AFrLLAAYMiuy6D40478.png

这次的玩法,甚至不需要输入文字,只要有手就够了。

任选一张图片,画笔涂抹到哪里,哪里就立刻动起来:

wKgaomVQ246AAbCGAFooai5hqeI477.gif

wKgaomVQ24-AH5OXABA3DuQ6QP0975.gif

wKgaomVQ24-Aclw0ABE5lztO5pU893.gif

不管是水流、云彩、火焰、烟雾还是人物,都能高度还原其动态。这就是传说中的「点石成金」吗?

wKgaomVQ25CAWCKRAHASr88fgzo314.gif

网友看完表示:我都不敢想象一年后的视频技术会有多先进……

wKgaomVQ25CAezfFAAHvTRpqElQ471.png

毕竟在 2023 年初,从文本生成视频还是一件相当困难的事情。

Runway 曾在今年 2 月推出了 Gen-1,功能非常丰富,包括风格化、故事版、蒙版、渲染、自定义等等。看起来,这是一个专注于「编辑」视频的工具。

但今年 3 月,Gen-2 的面世改变了一切,它新增了文字、图片生成视频功能。用户仅需输入文字、图像或文字加图像的描述,Gen-2 即可在很短的时间内生成相关视频。

这是市场上第一个公开可用的文本到视频模型。比如输入一段纯文字「午后的阳光透过纽约阁楼的窗户照进来」,Gen-2 会直接「脑补」出视频:

现在,只需几个 prompt 和手势,我们就能生成像样的视频并进一步编辑,复杂的视频编辑软件和冗长的制作流程一去不复返。

如果将文生图神器 Midjourney 与文生视频神器 Gen-2 结合起来使用,用户完全可以不动笔,直出大片。

当然,Gen-2 也是有竞争对手的,就是 Pika Labs,特别是后者还是免费的。

以上画面由 Pika Labs 生成。

对于这种疯狂卷的态势,一部分用户是非常期待的:「2024 年,Pika Labs 和 Runway 之间的拉扯一定很有意思。」

wKgaomVQ25GAXXiGAAKyRRgWVic102.png

传闻中,OpenAI 也有视频生成相关的技术。有网友表示:「这让我不禁好奇,OpenAI 的 any-to-any 模型在生成视频方面究竟有多出色,因为这家公司通常都走在别人前面。」

wKgaomVQ25GAH4zSAAKnHhnlkuQ543.png

未来的视频和电影制作行业,会因此而颠覆吗?


原文标题:Runway新功能「运动笔刷」再次惊艳AI圈:随手一涂,图片就动起来了

文章出处:【微信公众号:智能感知与物联网技术研究所】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 物联网
    +关注

    关注

    2909

    文章

    44736

    浏览量

    374485

原文标题:Runway新功能「运动笔刷」再次惊艳AI圈:随手一涂,图片就动起来了

文章出处:【微信号:tyutcsplab,微信公众号:智能感知与物联网技术研究所】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    亚马逊云科技发布Amazon Bedrock新功能

    (AI)应用程序。 此次发布不仅展示了亚马逊云科技在模型选择方面的坚定承诺,还进步优化了大规模推理的执行方式,为客户从海量数据中挖掘更多价值提供了强有力的支持。通过Amazon Bedrock,用户可以更加便捷地利用先进的AI
    的头像 发表于 12-25 15:52 130次阅读

    Amazon Q Business新功能发布,助力企业提效

    近日,在备受瞩目的2024年亚马逊云科技re:Invent全球大会上,款旨在提升企业内部工作效率的强大工具——Amazon Q Business,迎来了新功能的发布。 Amazon Q
    的头像 发表于 12-24 10:42 116次阅读

    首批Apple Intelligence功能惊艳亮相,12月新功能值得期待

     苹果正式推出了备受瞩目的Apple Intelligence,为iPhone、iPad和Mac用户带来了系列创新功能,且这些功能均通过免费软件更新即可获得。只要用户的设备和Siri
    的头像 发表于 10-29 14:11 263次阅读

    瑞萨和CJ125芯片使用SPI控制电压?

    现在是mcu使用SPI和CJ125驱动起来了,但是怎么操作电压电阻和电流呢
    发表于 10-29 11:23

    是否可以通过I2C在Android 8.1的嵌入式设备上将PCM1864EVM驱动起来

    16bit 4ch 3, 通过I2C在Android 8.1的嵌入式设备上将EVM驱动起来(是否提供linux or android开发包) BRs
    发表于 10-17 07:27

    e络盟互动社区发起“动起来”设计大赛

    安富利旗下全球电子元器件产品与解决方案分销商e络盟发起了“Start a Movement动起来”设计挑战赛,将选出 20 名工程师构建包含运动组件的自选项目。20名挑战者将获得由Analog
    的头像 发表于 09-23 10:30 340次阅读
    e络盟互动社区发起“<b class='flag-5'>动起来</b>”设计大赛

    Anthropic发布最新AI模型Claude 3.5,引入Artifacts新功能

    近日,科技领域又迎来了项引人注目的进展。Anthropic,这家OpenAI的竞争对手,于6月21日正式发布了其最新且功能强大的AI模型——Claude 3.5 Sonnet。这
    的头像 发表于 06-22 17:21 2102次阅读

    Runway发布Gen-3 Alpha:AI视频领域的新里程碑

    近日,AI视频领域的巨头Runway在深夜发布了款革命性的新产品——Gen-3 Alpha,这款产品的出现无疑为整个行业带来了新的活力与期待。Ru
    的头像 发表于 06-21 09:35 495次阅读

    Runway发布Gen-3 Alpha视频生成模型

    专为电影和图像内容创作者提供生成式AI工具的Runway公司近日宣布,其最新的Gen-3 Alpha视频生成模型已经正式问世。这款模型在多方面均取得了显著的进步,为创作者们带来了前所未有的便利和可能性。
    的头像 发表于 06-19 09:25 590次阅读

    如何用STM32F051把开关磁阻电机驱动起来啊?

    什么样的PWM波形呢?有没有大神指导下啊~只要动起来就行,不需要闭环什么的呢,求程序啊啊啊
    发表于 05-07 06:32

    百度搜索重磅推出AI图片助手

    近日,百度搜索全新上线了款名为“百度AI图片助手”的智能工具,该工具赋予了用户键处理图片的强大能力。无论是搜索中的
    的头像 发表于 05-06 10:20 1505次阅读

    STM32FOC电机惯性启动,电机会卡住下然后在转动是什么原因引起的?

    如题,有人遇到这种问题吗?详细描述是这样的,电机是霍尔无刷电机操作顺序是电机在静止状态下,点击ST的上位机 Start Motor 启动电机,电机立马就转动起来,然后在点击Stop Motor,停止
    发表于 04-26 07:53

    让PMSM简单的动起来的话,需要调用哪些头文件?

    让PMSM简单的动起来的话,需要调用那些头文件,最好解释下作用。手头有控制器,但代码太多是在看不明白。先谢过各位大佬了
    发表于 04-26 07:34

    基于5.3.3库做的有感FOC控制PMSM电机启动不了是什么原因导致的?

    如题电机启动困难,必须手拨下才能动起来动起来之后就正常了,我用的转矩模式,搞过的大神给个调试方向
    发表于 04-15 07:03

    步进电机如何让动起来?步进电机转动原理

    42步进电机的步距角为1.8°,是由定子和转子的齿数共同决定的,定子有48齿,转子有50齿,具体是怎么算的,感兴趣的同学可以自行学习,今天的重点是让步进电机如何让动起来
    发表于 04-01 10:40 2530次阅读
    步进电机如何让<b class='flag-5'>动起来</b>?步进电机转动原理