Sora是什么?Sora如何使用升级会员

Sora震撼发布!!!

支持用提示词修改视频对象,场景不变,一句提示词出四个视频,不同景别,不同运镜,故事版能支持时间线修改视频开始和结尾,人人创作电影的时代到来了!接下来我将从Sora简介和如何使用Sora两个方面进行介绍

Sora 概述

官网地址:sora.com

Sora 是 OpenAI 的视频生成模型,旨在接收文本、图像和视频输入并生成新视频作为输出。用户可以创建各种格式的分辨率高达 1080p(最长 20 秒)的视频,从文本生成新内容,或增强、混音和融合自己的资产。用户将能够探索精选和最新动态,这些动态展示了社区创作并为新想法提供灵感。

Sora 以 DALL·E 和 GPT 模型的经验为基础,旨在为人们提供更多讲故事和创意表达的工具。 Sora 是一种扩散模型,它首先从看起来像静态噪声的基础视频开始生成视频,然后通过多个步骤消除噪声,逐渐对其进行转换。通过让模型一次预测多个帧,Sora团队解决了一个具有挑战性的问题,即确保主体即使暂时消失在视野之外也能保持不变。与 GPT 模型类似,Sora 使用 transformer 架构,从而实现卓越的扩展性能。

Sora 使用了 DALL·E 3 中的重新字幕技术,该技术涉及为视觉训练数据生成高度描述性的字幕。因此,该模型能够更忠实地遵循生成的视频中用户的文本指令。 除了能够仅根据文本指令生成视频外,该模型还能够利用现有的静态图像生成视频,以精确的方式对图像内容进行动画处理,并注意细节。该模型还可以利用现有视频进行扩展或填充缺失的帧。

Sora 是理解和模拟现实世界的模型的基础,我们相信这一能力将成为实现 AGI 的重要里程碑。 Sora 的功能还可能带来新的风险,例如可能滥用相似性或生成误导性或露骨的视频内容。为了安全地在产品中部署 Sora,Sora团队借鉴了 DALL·E 在 ChatGPT 中的部署的安全工作以及 ChatGPT 等其他 OpenAI 产品的 API 和安全缓解措施。此系统卡概述了由此产生的缓解堆栈、外部红队工作、评估和正在进行的研究,以进一步完善这些保障措施。

模型数据

正如我们2024 年 2 月的技术报告⁠中所述,Sora 从大型语言模型中汲取灵感,这些模型通过在互联网规模数据上进行训练获得了通才能力。LLM 范式的成功在一定程度上得益于使用标记优雅地统一了各种文本模态——代码、数学和各种自然语言。通过 Sora,我们考虑了视觉数据的生成模型如何继承这些好处。LLM 有文本标记,而 Sora 有视觉补丁。补丁以前已被证明是视觉数据模型的有效表示。我们发现补丁是一种高度可扩展且有效的表示,可用于在各种类型的视频和图像上训练生成模型。在高层次上,我们首先将视频压缩到低维潜在空间,然后将表示分解为时空补丁,从而将视频转换为补丁。 Sora 接受了各种数据集的训练,包括公开数据、通过合作伙伴关系获取的专有数据以及内部开发的自定义数据集。这些数据集包括:

  • 选择公开可用的数据,主要从行业标准的机器学习数据集和网络爬虫中收集。

  • 来自数据合作伙伴的专有数据。我们建立合作伙伴关系来访问非公开数据。例如,我们与 Shutterstock⁠ Pond5 合作构建和交付 AI 生成的图像。我们还合作委托和创建符合我们需求的数据集。

  • 人工数据:来自 AI 培训师、红队成员和员工的反馈。

Sora如何使用和订阅

Sora如何订阅注册

Sora 是 Plus 帐户的一部分,无需额外付费。您每月最多可以生成 50 个 480p 分辨率的视频,或更少的 720p 分辨率的视频。 对于那些想要更多 Sora 的用户,Pro 计划包括 10 倍的使用量、更高的分辨率和更长的持续时间。我们正在为不同类型的用户制定量身定制的定价,Sora计划于明年初推出

PS: 目前呢Sora是Plus或者Pro的一部分,也就是升级的订阅账户就无需额外付费使用Sora,需要升级的同学可以参考本教程 ChatGPTPro/plus国内订阅教程

tips: 目前Sora还需要账户,好像可以用ChatGPT的账号,但是目前是关闭的,大家可以等热度降一降

大家可以看看Sora官网发布的视频效果

视频封面

大家可以发散自己的脑洞,开始尽情创作了!!!

Sora如何使用

使用准备

Sora的使用前准备和ChatGPT Plus的要求一样,首先需要升级至ChatGPT Plus账号,找到后续对应的Sora开放入口,申请好Sora的权限。然后准备好对应需生成的视频文本描述语言。

输入提示词

和这篇文章说过样,需要通过一个提示词描述你想要生成的视频的场景。越详细越具体越好,这样生成的视频就会越精确。该如何编写需要的视频提示词,可以参考上一章节中的Sora视频案例,每一个视频都给出了相应的提示词。首先可以从模仿开始,然后写出自己想要的视频的提示词。

等待视频生成

输入了提示词之后,需要等待Sora按照你的提示词生成对应的视频。根据提示词描述的视频的复杂程度,Sora生成视频的时间长度不等。一般情况下,如果你的提示词描述的视频内容越清楚、也具体,那么生成视频的速度也就越快。

优化提示词

肯定你第一次通过提示词生成的视频无法达到你的要求,此时你就需要需要不断优化你的提示词,针对不满足条件的地方进一步细化,给出更加具体的描述,然后继续生成视频,不断地完善这个过程,直到生成你满意的视频为止。

Sora提示词

对于一个精良的视频来说,对应的好的提示词也是必不可少的。如果我们给出的提示词对于视频的描述越精确,那么生成的视频就能够更加符合我们的要求。通过分析OpenAI给出的视频对应的提示词,我归纳出了对于一个好的提示词来说,应该具体的以下特点。

时间描述

黄昏、黎明、早晨、中午、下午、夜幕降临

位置描述

办公室、卧室、餐厅、酒吧、公园、街道

天气情况

晴天、阴天、雨/雪、有雾、有风

视觉风格
  • 魔幻现实主义:如拉美魔幻现实主义电影
  • 印象派:追求零碎的印象,柔和的意象
  • 表现主义:表达主观情感,夸张的意象
  • 德国表现主义:鲜明的对比、扭曲的取景、夸张的表演、深刻的主题
  • 粗犷风格:粗犷、自然的风景和剪辑
  • 立体主义:强烈的3D感觉,明显的布景设计
  • 未来主义:夸张、未来主义的布景设计
  • 情绪风格:抽象、梦幻般的情绪
色调

冷色、暖色、高对比度、低对比度、饱和度、去饱和度、单色、鲜明色块、钢蓝、黄金时段、复古、黑色等不同色彩效果

示例:

原始提示词

A Samoyed and a Golden Retriever dog are playfully romping through a futuristic neon city at night. The neon lights emitted from the nearby buildings glistens off of their fur

中文提示词

一只萨摩耶犬和一只金毛猎犬在夜晚的霓虹灯城市里嬉戏。附近建筑物发出的霓虹灯在它们的皮毛上闪闪发光

原始提示词

A white and orange tabby cat is seen happily darting through a dense garden, as if chasing something. Its eyes are wide and happy as it jogs forward, scanning the branches, flowers, and leaves as it walks. The path is narrow as it makes its way between all the plants. the scene is captured from a ground-level angle, following the cat closely, giving a low and intimate perspective. The image is cinematic with warm tones and a grainy texture. The scattered daylight between the leaves and plants above creates a warm contrast, accentuating the cat’s orange fur. The shot is clear and sharp, with a shallow depth of field

中文提示词

一只白橙相间的虎斑猫欢快地在茂密的花园里窜来窜去,好像在追逐什么东西。它的眼睛睁得大大的,欢快地向前跑着,一边走一边扫视着树枝、花朵和树叶。这条小路很窄,因为它在所有的植物之间穿行。这个场景是从地面的角度拍摄的,紧跟在猫后面,给人一个低而亲密的视角。图像是电影般的暖色调和颗粒纹理。树叶和植物之间分散的日光形成了温暖的对比,突出了猫的橙色皮毛。这张照片清晰锐利,景深浅

原始提示词

A Chinese Lunar New Year celebration video with Chinese Dragon

中文提示词

中国农历新年庆祝视频与中国龙

原始提示词

A cat waking up its sleeping owner demanding breakfast. The owner tries to ignore the cat, but the cat tries new tactics and finally the owner pulls out a secret stash of treats from under the pillow to hold the cat off a little longer

中文提示词

一只猫叫醒了正在睡觉的主人,要求吃早饭。主人试图忽略猫,但猫尝试了新的策略,最后主人从枕头下拿出了一个秘密的零食,让猫多待一会儿

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值