OpenAI推出首个文生视频大模型Sora,引领AI文生视频行业跨越式发展
导读: Sora是一个扩散transformer,具有强大的语言理解能力,通过在潜在空间训练patches生成视频。对标tokens,OpenAI将视觉数据转换为patches,有效用于Sora大模型训练。Sora是一种扩散模型,通过给出输入的静态噪声以及相关的文本提示(prompt)等调节信息,训练生成原始的“干净”patches。在推理时,OpenAI还可以通过在适当大小的网格中排列随机初始化的patches来控制生成视频的大小。与GPT模型类似,Sora使用transformer架构,释放出卓越的扩展性能。立足DALL·E3和GPT模型,Sora具有强大的语言理解能力,能够生成更加准确遵循用户提示的高质量视频。此外,在固定种子和输入的情况下,可以看到训练计算的增加能显著提升样本视频的质量。
温馨提示:本平台所有资料存储于知识星球平台,已加入的朋友可点击上方链接直接下载,未加入的朋友请扫描右侧二维码加入后方可下载。
免责声明:
来源: 万联证券,互联互通社区推荐阅读,版权归作者所有。文章内容仅代表作者独立观点,不代表互联互通社区立场,转载目的在于传递更多信息。如涉及作品版权问题,请联系我们删除或做相关处理!