Sora: 文生视频,AI视频生成工具
分类:电脑知识 发布时间:2024-02-25 18:00:15
说起最近最为热门的AI视频工具,不得不提及下Sora,它是美国人工智能研究公司OpenAI发布的人工智能文生视频大模型。本文将深入探讨Sora的相关作用和功能,使用等介绍。
Sora简介:
美国当地时间2024年2月15日,OpenAI正式发布文生视频模型Sora,并发布了48个文生视频案例和技术报告,正式入局视频生成领域。Sora能够根据提示词生成60s的连贯视频,“碾压”了行业目前大概只有平均“4s”的视频生成长度。至此,Sora成为现今大家热门关注的AI视频工具。
Sora究竟是什么?简单来说,它是一个文生视频模型,你输入一段文字,即可生成一个AI原创视频。这并非从0到1的创举,此前也有文生视频工具,但Sora实现了“史诗级颠覆”:可以直接输出的视频长达60秒,并且包含高度精细的背景、复杂的运镜、丰富的角色,既可一镜到底又能多机位切换,既高清连贯又风格多变,从人物微表情到动物神态都足够以假乱真。
Sora的功能特色:
功能综述:
Sora可以快速制作最长一分钟、准确反映用户提示、可一镜到底的视频(其他AI视频工具还在突破几秒内的连贯性),视频可以呈现“具有多个角色、特定类型的动作、以及主题和背景的准确细节的复杂场景”。
静态图生成视频:
Sora还具备根据静态图像生成视频的能力,能够让图像内容动起来,并关注细节部分,使得生成的视频更加生动逼真,这一功能在动画制作、广告设计等领域具有应用前景。
视频扩展与缺失帧填充:
Sora能够获取现有视频并对其进行扩展或填充缺失的帧,这一功能在视频编辑、电影特效等领域具有应用前景,可以帮助用户快速完成视频内容的补充和完善。
连接视频:
可以使用Sora连接两个输入视频,在具有完全不同主题和场景组成的视频之间实现无缝过渡。
其他能力:
图像生成:Sora可以生成各种尺寸的图像,分辨率最高达2048×2048。
3D一致:Sora可以生成动态运动的视频,随着相机的移动和旋转,人和场景元素在三维空间中一致移动。
远距离连贯性物体持久性:Sora通常能够有效地对短期和长期依赖关系进行建模,包括人、动物和物体的持久化,即使它们被遮挡或离开框架。同时,它还能在单个样本中生成同一角色的多个镜头,以保持其在整个视频中的外观。
互动性:Sora有时可以用简单的方式模拟影响世界状态的动作。例如一个画家可以在画布上留下新的笔触,并随着时间的推移而持续,或者一个男人可以吃汉堡并留下咬痕。
模拟数字世界:Sora可以模拟人工过程,例如电子游戏,并能够通过基本策略控制玩家,同时高保真地渲染世界及其动态。
多机位:Sora可以生成多机位、多角度的视频。
Sora目前存在的一些缺点:
Sora也存有以下弱点:可能难以准确模拟复杂场景的物理原理,无法理解因果关系,混淆提示的空间细节,难以精确描述随着时间推移发生的事件。
OpenAI表示,Sora存在不成熟之处,可能难以理解因果关系,多位人工智能领域人士表示,该问题可能因其概率模式的逻辑存有“硬伤”。加大训练量、增加训练数据与物理逻辑可改善该问题,但无法根治。想要真正突破最底层逻辑上的问题,因果关系是一条必经之路。
Sora会替代哪些行业?
应该说,无论文生视频有多么强大,无论其“制作”的视频有多逼真,它仍是数字模拟;而影视作品中动人的故事、巧妙的设计、精彩的演绎等,才更动人。也就是说,人类用“心”创作的作品,还很难用“芯”来完成。Sora带来的危机感,从很大程度上说是好事,将有力激发更多人的创造力。
总结:
以上便是关于Sora的相关介绍。Sora的诞生,让大家切实感受到数据智能变革的来临。每一天,从生活到产业领域,都可能面临变革。无论是科技爱好者还是普通的电脑手机用户,我们都已经生活在一个快速发展的科技环境中。积极拥抱变化,AI未来的画卷或将远比我们想象的更精彩。