欧洲杯体育用于文本到视频的生成-开云(中国)kaiyun体育网址登录入口
在9月底的设立者大会上,Meta刚刚炸场,发布了十年磨一剑的产物——全息AR眼镜Orion,堪称“于今为止开始进的眼镜”欧洲杯体育,拉动股价至历史新高。北京时间10月4日晚,Meta再次投下重磅炸弹,发布类Sora的视频生成模子Movie Gen,官方称这是“迄今为止开始进的媒体基础模子”。

放置10月5日收盘,Meta涨2.26%,股价达到595.94好意思元的历史新高。自本年年头以来,Meta股价已上升朝上70%,现在最新总市值来到了1.51万亿好意思元。跟着Meta股价的握续攀升,其CEO马克·扎克伯格(Mark Zuckerberg)初次卓绝亚马逊独创东谈主贝索斯,成为巨匠第二大富豪,仅次于马斯克。
在官方博客中,Meta暗意,全新发布的 Meta Movie Gen是先进的千里浸式叙事模子系列,领有视频生成、个性化视频生成、精确视频裁剪和音频生成四大功能。从Meta演示的视频来看,其在画面好意思感、细节、东谈主物算作畅达度、物理律例等方面皆作念到了可以的后果。

在具体功能方面,用户可以通过上传图片,欺骗 Meta Movie Gen 生成既个性化但又保握东谈主物特征和算作的视频。用户也可以通过提供视频文献或文本实质,让 Meta Movie Gen 生成相对应的音频。Movie Gen赈济生成 1080P、16 秒、每秒 16 帧的高清长视频,以及大致生成最长 45 秒的高质地音频。
不外,如同Sora一样,Movie Gen亦然“期货”产物,现在尚未对外绽放,也莫得明确的时间表。官方称正在积极地与文娱行业的专科东谈主士和创作家进行疏导和配合,探究将在来岁某个时候将其整合到 Meta 我方的产物和就业中。
据外媒,Meta 副总裁 Connor Hayes 显露了延长推出的进犯原因,他暗意Meta Movie Gen 刻下使用文本领导词生成一个视频时常需要恭候数十分钟,极大影响了用户的体验。Meta 但愿进一步提升视频生成的效劳,以及杀青尽快在移动端上推出该视频就业,以便能更好地满足铺张者的需求。
Meta称Movie Gen是在授权和公开数据集的组合上进修。关于背后的时候细节,Meta AI 究诘团队也在酬酢媒体上公开了一份长达 92 页的论文。据先容,Meta 的 AI 究诘团队主要使用两个基础模子来杀青这些遍及的功能,包括Movie Gen Video 以及 Movie Gen Audio 模子。
Movie Gen Video 是一个 30B 参数的基础模子,用于文本到视频的生成,大致生成高质地的高清视频,最长可达 16 秒。而 Movie Gen Audio 模子则是一个 13B 参数的模子,用于视频和文本到音频的生成,大致生成长达 45 秒的高质地和高保的确音频,包括声息后果和音乐,并与视频同步。
据悉,模子预进修阶段使用了多量的图像和视频数据,大致交融视觉寰球的各式看法,包括物体通顺、交互、几何、相机通顺和物理律例。为了提升视频生成的质地,模子还进行了监督微调(SFT),使用了一小部分尽心挑选的高质地视频和文本标题。叙述骄气,后进修(Post-training)经过则是 Movie Gen Video 模子进修的进犯阶段,大致进一步提升视频生成的质地,尤其是针对图像和视频的个性化和裁剪功能。
在时候论文中,究诘团队公布了 Movie Gen Video 模子与主流视频生成模子的对比数据。由于 Sora 现在尚未绽放,究诘东谈主员只可使用其公设立布的视频和领导来进行比拟。关于其他模子,如 Runway Gen3、LumaLabs 和可灵 1.5,究诘东谈主员接纳通过 API 接口来自行生成视频。

通过进行胜率比拟,Movie Gen Video 在全体质地上显赫优于 Runway Gen3和 LumaLabs,对 OpenAI Sora有隐微的上风,与国内的可灵 1.5 畸形。

一度在元寰宇领域遭受窘境的Meta,在2024年凭借生成式AI告捷逆转运道。在8月初,摩根大通发表叙述将Meta目标价由480好意思元升至610好意思元,叙述指出,Meta近期发达讲究,驯顺已在要道的永久继续上符合投资,尤其是AI。9月底,摩根大通再次晓喻看好Meta,将其目标价从610好意思元上调至640好意思元。
本年8月,Meta发布的2024年Q2财报骄气,公司营收为390.71亿好意思元,同比增长22%,净利润为134.65亿好意思元,同比增长73%,均超出华尔街分析师预期。Meta暗意,公司在东谈主工智能方面的大皆投资有助于提升其在线告白平台的发达,这是营收增长的一大原因。
现在Meta已承接四个季度收入增幅朝上20%。Meta探究,2024年第三季度该公司的总营收将可达到385亿好意思元至410亿好意思元之间,这一预测相似超出分析师预期。
(本文来自第一财经)

累赘裁剪:王许宁 欧洲杯体育