PixVerse图生视频新功助力,动态效果更生动

原文标题:中国版 Runway 新功能上线,图生视频动效更强

原文作者:AI前线

冷月清谈:

**PixVerse发布Magic Brush运动笔刷功能,精确控制视频中多主体的运动方式。**

该功能亮点包括:

  1. 支持至多6个笔刷,满足复杂创作需求。
  2. AI自动识别内容,一键选定,省时省力。
  3. 精准绘制轨迹,控制运动轨迹。
  4. 模型升级,更深入理解物理规律及画面场景。

PixVerse的视觉生成技术不断发展,在智源研究院的文生视频模型评测中位列全球TOP3,在国内同类型产品中表现最佳。




怜星夜思:


1、Magic Brush运动笔刷功能的原理是什么?
2、PixVerse的视觉生成技术在哪些领域有应用前景?
3、AI和大模型技术的发展对视频制作行业有哪些影响?




原文内容



整理:褚杏娟

今日,爱诗科技旗下视频生成工具产品 PixVerse 正式上线 Magic Brush 运动笔刷功能。

在图生视频过程中,用户可通过涂抹区域和绘制轨迹,精确控制视频中多主体的运动方式,移动、弹跳,甚至丰富多样的整体动效,Magic Brush 都能够轻松实现。

比如,用户可以对多主体运动进行控制:

用户还可以分别控制主体和背景:

PixVerse 可以更好理解物理场景,让视频效果生动自然:

基于画面含义理解笔刷,具有故事感:

PixVerse 官方介绍,本次功能更新的亮点主要包括:

  • 每次至多支持 6 个笔刷,满足复杂的创作需求。

  • AI 自动识别内容,一键选定,省时省力。

  • 全新交互设计,通过绘制轨迹精准实现运动控制。

  • 模型升级,能够深度理解物理规律及画面场景,确保视频效果生动自然。

“视觉相比于语言,承载了密集得多的信息流。人类早已在潜移默化地在这种高密度信息之中,习得了众多潜在规则,进而对于视觉信息产生了相比语言更高的要求。视觉生成既要符合客体上的限制、满足一致性的要求、还需要实现风格化的处理、保证语义的连贯性,是不亚于打造大语言模型的挑战。”爱诗科技如是介绍道。

爱诗科技的创始人王长虎博士是互联网资深技术专家,他在 2004 年加入微软亚洲研究院,经历了搜索引擎飞速发展的时代;2017 年加入字节跳动担任 AI Lab 总监;2021 年又加入龙湖,成为龙湖数字化与智能化转型的掌舵人,去年开始了自己创业之路,并进入了视觉多模态赛道。当年八月,爱诗科技完成了数千万元人民币的天使轮融资。

据介绍,爱诗科技的团队成员来自清华、北大、中科院等顶级学府,曾任职于字节、微软亚洲研究院、快手、腾讯等头部机构的核心技术团队,拥有一流的计算机视觉算法攻坚能力和解决系统工程问题的经验。

在最近智源研究院的文生视频模型评测中,PixVerse 位列全球 TOP3,在国内同类型产品中表现最佳。智源研究院智能评测组负责人杨熙博士讲到:“在提供公开服务的模型中,Runway 和爱诗科技的 PixVerse 处于第一梯队,水平相当。”


 内容推荐

大模型技术正在引领行业发展创新浪潮。那么,如何让大模型技术与行业深度融合?如何通过大模型技术为各行各业提供更加智能化的解决方案?在金融、法律、医疗、教育、政府等各行业的实践场景中,又有哪些大模型落地经验?「AI 前线」特别为您精选了刚刚结束的 AICon 全球人工智能开发与应用大会上的精彩演讲,并经过嘉宾授权将演讲的精彩 PPT 提供给大家。关注「AI 前线」,回复关键词「行业创新」即可免费获取。

 活动推荐
本届 ArchSummit 会议上,重点聚焦AI大模型技术在各行业的落地实践, 顺丰集团、众安银行、天弘基金、鸿海科技集团、宁德核电、广发证券、微众银行介绍大模型技术的应用效果 。会议上还设置了大模型应用、架构升级、智算平台、AI编程、成本优化等专题和话题内容。扫下图二维码查看更多详情。购买票数越多,享受的优惠也就越丰厚,可以联系票务经理 17310043226 , 锁定最新优惠。

今日荐文







图片

你也「在看」吗?👇

电商、广告、传媒等行业,可以用于产品展示、营销推广、内容制作。

教育、医疗、科学研究等领域,可以用于可视化数据、模拟实验。

原理有点类似于物理引擎,通过设定物体的运动轨迹,并结合物理规律,让物体在视频中按照设定的方式运动,从而实现逼真的动态效果。

解放生产力,让视频制作更便捷、更高效。

促进新兴应用场景的产生,如虚拟现实、增强现实等。

降低创作门槛,让更多人能够参与视频创作。

简单来说,就好像在视频上画笔一样,可以通过绘制轨迹来控制物体的运动,就像动画制作中的逐帧动画那样,只不过这个笔刷是由AI驱动的,可以更智能地识别画面内容。

数字艺术创作、视频特效制作、电影后期制作、游戏开发等创意领域。

该功能基于AI技术,能够自动识别画面内容,并提供运动轨迹绘制功能,通过机器学习算法,可以精确控制视频中多主体的运动方式,让视频效果更加生动自然。