体育游戏app平台用于文本到视频的生成-开云(中国)kaiyun体育网址登录入口

在9月底的配置者大会上,Meta刚刚炸场,发布了十年磨一剑的居品——全息AR眼镜Orion,堪称“于今为止起初进的眼镜”,拉动股价至历史新高。北京时刻10月4日晚,Meta再次投下重磅炸弹,发布类Sora的视频生成模子Movie Gen,官方称这是“迄今为止起初进的媒体基础模子”。
截止10月5日收盘,Meta涨2.26%,股价达到595.94好意思元的历史新高。自本年龄首以来,Meta股价已上升伊始70%,现在最新总市值来到了1.51万亿好意思元。跟着Meta股价的执续攀升,其CEO马克·扎克伯格(Mark Zuckerberg)初次非常亚马逊首创东谈主贝索斯,成为内行第二大富豪,仅次于马斯克。
在官方博客中,Meta暗示,全新发布的 Meta Movie Gen是先进的千里浸式叙事模子系列,领有视频生成、个性化视频生成、精确视频裁剪和音频生成四大功能。从Meta演示的视频来看,其在画面好意思感、细节、东谈主物看成畅通度、物理限定等方面齐作念到了可以的效用。
在具体功能方面,用户可以通过上传图片,愚弄 Meta Movie Gen 生成既个性化但又保执东谈主物特征和看成的视频。用户也可以通过提供视频文献或文本执行,让 Meta Movie Gen 生成相对应的音频。Movie Gen救济生成 1080P、16 秒、每秒 16 帧的高清长视频,以及好像生成最长 45 秒的高质地音频。
不外,如同Sora一样,Movie Gen亦然“期货”居品,现在尚未对外怒放,也莫得明确的时刻表。官方称正在积极地与文娱行业的专科东谈主士和创作家进行疏通和联接,沟通将在来岁某个时候将其整合到 Meta 我方的居品和工作中。
据外媒,Meta 副总裁 Connor Hayes 败露了蔓延推出的紧迫原因,他暗示Meta Movie Gen 现时使用文本辅导词生成一个视频通常需要恭候数十分钟,极大影响了用户的体验。Meta 但愿进一步进步视频生成的效用,以及竣事尽快在移动端上推出该视频工作,以便能更好地荒诞亏蚀者的需求。
Meta称Movie Gen是在授权和公开数据集的组合上熏陶。关于背后的技巧细节,Meta AI 盘考团队也在外交媒体上公开了一份长达 92 页的论文。据先容,Meta 的 AI 盘考团队主要使用两个基础模子来竣事这些平凡的功能,包括Movie Gen Video 以及 Movie Gen Audio 模子。
Movie Gen Video 是一个 30B 参数的基础模子,用于文本到视频的生成,好像生成高质地的高清视频,最长可达 16 秒。而 Movie Gen Audio 模子则是一个 13B 参数的模子,用于视频和文本到音频的生成,好像生成长达 45 秒的高质地和高保果然音频,包括声息效用和音乐,并与视频同步。
据悉,模子预熏陶阶段使用了多量的图像和视频数据,好像意会视觉全国的多样看法,包括物体开垦、交互、几何、相机开垦和物理限定。为了进步视频生成的质地,模子还进行了监督微调(SFT),使用了一小部分尽心挑选的高质地视频和文本标题。通知夸耀,后熏陶(Post-training)经过则是 Movie Gen Video 模子熏陶的紧迫阶段,好像进一步进步视频生成的质地,尤其是针对图像和视频的个性化和裁剪功能。
在技巧论文中,盘考团队公布了 Movie Gen Video 模子与主流视频生成模子的对比数据。由于 Sora 现在尚未怒放,盘考东谈主员只可使用其公配置布的视频和辅导来进行比拟。关于其他模子,如 Runway Gen3、LumaLabs 和可灵 1.5,盘考东谈主员选拔通过 API 接口来自行生成视频。
通过进行胜率比拟,Movie Gen Video 在全体质地上显赫优于 Runway Gen3和 LumaLabs,对 OpenAI Sora有微细的上风,与国内的可灵 1.5 止境。
一度在元六合界限遇到窘境的Meta,在2024年凭借生成式AI见效逆转运道。在8月初,摩根大通发表通知将Meta指标价由480好意思元升至610好意思元,通知指出,Meta近期弘扬邃密,服气已在重要的永久筹谋上稳妥投资,尤其是AI。9月底,摩根大通再次文书看好Meta,将其指标价从610好意思元上调至640好意思元。
本年8月,Meta发布的2024年Q2财报夸耀,公司营收为390.71亿好意思元,同比增长22%,净利润为134.65亿好意思元,同比增长73%,均超出华尔街分析师预期。Meta暗示,公司在东谈主工智能方面的多量投资有助于进步其在线告白平台的弘扬,这是营收增长的一大原因。
现在Meta已结合四个季度收入增幅伊始20%。Meta沟通,2024年第三季度该公司的总营收将可达到385亿好意思元至410亿好意思元之间,这一瞻望一样超出分析师预期。
(本文来自第一财经)
海量资讯、精确解读,尽在新浪财经APP
背负裁剪:王许宁 体育游戏app平台



