对标Sora?国产公司推文生视频工具Etna 能生成15秒4K视频
要点:
国产公司推出的AI视频技术实现了15秒4K60帧超逼真效果,与小米、快手合作瞄准500亿美元的短剧出海市场。
Etna模型作为成功复现Sora技术的重要成果之一,采用Diffusion Transformer处理不同维度数据,实现了时长、清晰度、细节丰富度和语义理解的优势。
七火山公司布局全产业链,通过AI多模态产品如Etna、Lava、miniTV和Bromo,改造短视频全产业链,受到资本市场的关注和青睐。
随着国产公司推出的AI视频技术的崛起,短剧市场迎来了新的变革。七火山公司在国内率先复现了Sora的成果,并通过Etna模型等创新技术取得了重大突破。
Etna模型采用了Diffusion Transformer处理视频数据,实现了15秒4K60帧的超高清晰度,同时具备了时空理解能力和深度语义理解能力。

官网地址:https://etna.7volcanoes.com/
论文地址:https://arxiv.org/pdf/2212.09748.pdf
从上图可以看出,相较于市场上的现有模型,Etna在时长、高清晰度、丰富生动细节和强语义理解上,都保持着较大优势。
为什么七火山能成为国内率先复现出Sora的公司?Sora的关键创新,是一个可以灵活地处理不同维度数据的Diffusion Transformer。时空压缩器会把原始视频转映射到潜空间中,视觉Transformer(ViT)模型会对已经被分词的潜表征进行处理,并输出去除噪声后的潜表征。

一个与CLIP模型类似的系统根据用户的指令(已经通过大语言模型进行了增强)和潜视觉提示,引导扩散模型生成具有特定风格或主题的视频。经过多次去噪处理之后,会得到生成视频的潜表征,然后通过相应的解码器映射回像素空间。

在相关领域技术积累的基础上,Etna模型迅速抓住了Sora的精髓,另外还引入了几项创新。技术架构创新主要是针对视频的时空特性提出的挑战,如何从空间和时间上将视频压缩到潜空间,以实现高效去噪,如何将压缩潜空间转换为patches,并将其输入到Transformer中,以及如何处理长距离的时空依赖性,并确保内容的一致性。
为此,Etna模型在主干网络上采用了Diffusion架构,同时在一个更大的数据集上实验和适配与Sora相似的Diffusion Transform架构。融合了Diffusion模型和Transformer模型的优势,Etna形成了一种高效且先进的新型模型架构,提升了模型的生成效率,保证了生成内容的高质量和高一致性。
七火山公司不仅布局了AI多模态产品,还与小米、快手等合作伙伴展开战略合作,共同探索短剧出海市场。
资本市场对七火山公司的发展充满了期待,认为其具备了潜在的成长空间和投资价值。AI视频技术的兴起将颠覆整个短视频产业链,为用户带来全新的观影体验,也为产业链上下游企业带来了更多的商机和发展空间。
拐点时刻?AIGC时代的新闻业
一阵生成式人工智能(AIGC)的旋风,正在席卷众多领域。2022年底,OpenAI发布自然语言对话应用ChatGPT,并在今年3月迭代推出GPT-4,迅速吸引了各行业与公众的关注。全球范围内大模型风云骤起,资金、技术、人才持续涌入,科技公司布局不断,纷纷推出自家的大模型。据估算,到2030年,AIGC市场规模有望突破万亿元。站长网2023-08-30 12:08:390000在美国售价$1600的Mac在巴西卖到$3500,巴西的税到底有多离谱?
最近,我们在刷社交媒体时看到一个巴西小哥吐槽,自己去美国旅游,顺手买了台MacBook。回到巴西后发现,这台MacBook加上他的往返机票钱,比在巴西本地购买一台同规格的MacBook还要便宜!因为日常工作会关注到与跨境电商相关的信息,巴西因为税制等原因,东西贵一些,我们是知道的,但这么贵,实在出乎意料。好奇心驱使下,我去查了MacBook在Amazon美国和巴西站的价格。站长网2023-08-08 14:03:200000立省三五块,年轻人爱上拼单自提奶茶
零食要买临期打折的,外出就餐先看团购和优惠券,购物精打细算凑满减……当下年轻人不再炫富而是“炫省”,他们搜罗着各式各样的省钱小妙招,追求性价比消费的品类密度,如今已经精确到了一杯十几块钱的奶茶,省钱阈值低至两三元钱。0000看了那么多干货,还是赚不到钱!
各位村民好,我是村长。有很多人,你说他勤奋吗?还真的勤奋。你说他爱学习吗?也挺爱学习的,手机里关注了不少公众号、收藏了不少文章,甚至还付费加入了不少社群。但为什么,很多人看一年、两年、三年,还是没有赚到钱呢?村长不管是写文章,还是带团队,接触过了很多人,每天也有不少人问我怎么赚钱,我和大家聊聊其中一些原因,很现实。01认知还不够80%以上的人,注定赚不到钱,这是个事实,很残忍。0000Meta 发布可以检查其他 AI 模型工作的 AI 模型
Facebook母公司Meta当地时间周五正式发布了一批来自其研究部门的新AI模型,其中包括一个名为「自学评估器」(Self-TaughtEvaluator)的模型,这可能为减少人类在AI开发过程中的参与度提供了一条新路径。站长网2024-10-20 10:46:140000