中国创业者,不敢追 Sora
Sora现身近一个月,却未能在国内掀起如同ChatGPT时期的紧追不舍之态。
科技大厂仍停留在内部探索、研发Demo的阶段:字节推出AI生成视频产品Boximator,腾讯研发了视频生成模型VideoCrafter,百度发表了统一模式视频生成系统UNiVG。至于究竟何时会推出“中国版Sora”,大厂用静悄悄回应着外部期待。
恒业资本创始合伙人江一告诉字母榜(ID:wujicaijing),投入产出比或将是困扰国内大模型玩家选择跟进的一大因素。在追赶Sora之前,目前在对话大模型领域尚处在GPT-3.5的国内头部玩家,对于是否要追赶上GPT-4的水平,“实际上他们也都有担忧:一方面想要证明自身价值,至少要做到Meta开源模型Llama2的水平;另一方面,Meta新一代开源模型Llama3即将发布,届时万一投入重金后的自研模型,水平不及Llama3乃至遭遇OpenAI自身的开源模型竞争,很可能导致前期投资‘竹篮打水一场空’。”
高企的成本,不仅困扰着大模型训练厂商推出Sora的步伐,而且同样阻碍着创业者率先体验Sora的热情。
在ChatGPT引爆新一轮AI应用热潮后,定位桌面机器人的小丽智造创始人兼CEO胡捷,一度找上国内某大厂商谈合作,希望将其大模型能力嵌入自家硬件。不过,在前者报出的数百万元合作费用面前,胡捷最终选择了国内一家二线大模型厂商,费用降低了近乎十分之一。
需要更多算力支持的视频大模型Sora,其应用成本更是胡捷这类初创公司难以承担的代价,等待越来越多国产平替方案的出现,可能是更具性价比的选择。
除了用不起之外,Sora在视频生成方面存在的精确度等Bug,也让一些支付得起C端使用成本的创业者,不敢轻易替换掉人工。
坐拥百万粉丝的上海市锦天城律师事务所律师候朝辉,以法律博主的身份运营着两档视频对话栏目《知V见》和《披荆斩棘的律师》,其视频时长在10-30分钟之间。为了保证长视频的信息精确度和画面精致感,候朝辉以15000元月薪,雇佣了一个专业剪辑师。
Sora出现后,候朝辉并没有下意识觉得可以每月节省15000元成本了,“我不会自己去学,肯定让剪辑师去学,他如果学会这套AI工具,就可以将效率变现,接更多活,赚更多钱。”
A
ChatGPT爆火之后,胡捷开始有了将大模型对话能力融入自家产品中的想法,尝试打造一个桌面机器人结合类ChatGPT的新交互方式。
“(用户)语音对话的过程中,ChatGPT的生成过程是以一个个点的形状呈现,我们借助屏幕为其配备了一个对应口型的虚拟人形象,可以把ChatGPT吐回来的文字,让虚拟人开口讲出来。”胡捷说道。
为了实现上述意图,胡捷首先找到了一家自研大模型的国内大厂,希望直接接入对方的对话大模型产品,但后者报了一个300万元左右的合作价格,还设置了终端使用量要达到过万台的门槛。
对于这家去年才刚刚成立、初始团队在10人左右的小丽智造而言,无论是大厂给出的报价,还是设备出货量要求,都超出了胡捷能够承受的范围。
退而求其次,胡捷最终选择了国内一家二线大模型厂商,后者按年收费,报价只有几十万元,且在定制开发上配合度更高,“尽管大模型能力没那么强,但是能满足我们初期的要求。而且开放性比较强,允许我们接入第三方大模型,他们提供开发对接服务。”
Sora引爆新一轮大模型热议后,胡捷们也开始等待国内平替的到来。但平替究竟何时会来,却不像ChatGPT时期那么有确定性了。
在江一看来,国内大模型厂商想要追赶OpenAI,保持一个相对领先优势,在资源投入上需要优先考虑总成本领先,即能否用比竞争对手低的成本,训练出足以媲美行业头部水平的大模型,其次才是基于数据和场景打造差异化。
在推动大模型性能不断迭代过程中,其所需要的算力等各类资源也呈指数级增长。ChatGPT成功运行的背后,最少需要一万张英伟达GPU提供算力。迭代到GPT-4后,其所需的英伟达GPU数量被爆超过了2万张,价值达数亿美元。
面对越拉越大的投入产出比,在江一看来,国内大模型厂商担忧的,不是能不能做出Sora,而是投入重金研发后,做着做着突然被硅谷的开源模型突袭,“你的价值就几乎归零了。”
B
对于那些直接付费使用C端大模型产品的创业者而言,尽管免去了用不起的烦恼,但在大模型生成内容的“幻觉”问题尚未解决之前,想让他们跳过人工成本,自己用上Sora,还有点难。
专注长视频创作的候朝辉,为了确保画面的精确和精致感,平时需要用到专业相机拍摄,大容量的视频素材使得剪映一类的傻瓜式剪辑软件,根本无法满足需求,日常剪辑只能用达芬奇等专业软件,这也迫使他以每月15000元的价格,在上海雇用了一个专职剪辑师,保证一个月能剪出两条视频。
除此之外,候朝辉还会不定时发布访谈视频,后期剪辑则以一条3000元的价格外包了出去。
ChatGPT时期延续下来的内容不准确、部分数据陈旧等问题,在采取同源技术架构的Sora身上也难以幸免。在候朝辉看来,即便真等到Sora公测那一天,也是让剪辑师去学,而不是自己去学习如何使用,“(说到底)这个工具还是要有人去操作,它很难在短期内把一个人淘汰掉,更多可能带来效率的提升,然后剪辑师就可以接更多活,赚更多钱。”
即便是被外界视为影响最大的游戏影视领域,Sora的实际应用效果也存疑。
在游戏行业,哪怕是独立游戏,都不存在用不起AI工具的情况。但AI究竟能发挥多大效用,则是另一回事。独立游戏制作人阿图(化名)曾经期待用AI绘图,减轻长期占游戏行业重头支出的游戏画师的工作量,但是真的让AI画“秦王绕柱”,结果出来的效果是“秦王在跳钢管舞”。
Sora演示效果看起来很厉害,但阿图担忧的另一个点在于,制作者还要考虑市场是否买账,“类Sora的AI工具大量应用在游戏行业,不仅要考虑技术本身的完善程度,还要考虑市场的反应。在消费心理上,用户是否认可制作方在游戏中大规模地使用Sora,会不会觉得这是在偷工减料?对于部分用户来说,他愿意为了画师的画工,特效师的构思付费,但用AI生成的文本、画面,并非是画师设计的,这算不算是在糊弄消费者?在这一点上,目前许多科技媒体调研时,都似乎忽略了市场的反映,而我认为这恰恰是很重要的。”
基于上述种种担忧,阿图的团队,即使使用AI工具,更多也只是做一些边角料的工作,比如画一些概念,做一些配色尝试,目前还没达到可以替代部分岗位的应用程度。
独立导演杜兰馨甚至比阿图更进一步,基于AI制作带来的人员投入和精力问题,在其影视公司内,他没有尝试引入AI制作,“如果把时间和精力耗费在AI如何应用上,可能还完不成公司接下的案例。”
在杜兰馨看来,如同用文生图产品一样,要想应用类Sora的工具,影视从业者还需要懂AI语言,掌握一定的技巧,才能生成想要的视频效果。“但是目前的训练,工作量似乎并没有被消减,寄望用AI减少人力成本的初衷可能只是想象中的美好,实际工作量从自己绘图,变成了重复下达指令训练AI绘图,在这个过程中,不只是人掌握了技巧,也是AI训练了人。”
杜兰馨认真算了一笔账,以影视公司剪辑师为例,假设此前负责初级剪辑的剪辑师,月薪8000元,主要工作是收集整理素材,如果可以用Sora代替初剪,就可以节省这部分支出。但同时,公司需要把文生视频的指令输入工作交给高级剪辑师,那么就要上调高级剪辑师的工资。最终只有类Sora的工具应用节约成本,足以抵消上调薪资带来的支出,影视公司才不会亏本。
C
Sora在视频生成方面的各类Bug,同样是OpenAI迟缓推出的重要原因之一。在官网介绍中,OpenAI提醒道,Sora可能难以准确模拟复杂场景的物理原理,并且可能无法理解因果关系,还可能混淆提示的空间细节,例如混淆左右,并且可能难以精确描述随着时间推移发生的事件,例如遵循特定的相机轨迹。
根据部分拿到内测名额的博主分享,Sora在物理方面遇到的困难,在表现腿部特征,或者行走方面,尤为明显,如经常生成双腿交叉和相互融合的画面。
导致Sora在内容生成上出现各类“幻觉”的背后技术动因,在与其采用了与ChatGPT一样的Transformer架构。
这也是胡捷将 ChatGPT视为一个革命性产品,而将Sora的到来,认为是一种延续性创新的原因之一。“Sora出来之后,你可以认为是在铁轨上运行的火车,变成了高铁。Claude3的发布,同样如此,给我的感觉就是速度由原来的300km/h,提升到了350km/h、400km/h,只是沿着既定路线的彼此较劲,而非颠覆性的突破。”
江一同样对Sora可能给行业带来的所谓“革命性冲击”,持怀疑态度。在他看来,Sora再更新两三个版本,可能就会触摸到技术迭代的天花板,然后慢慢被后来者追平差距。就像之前国内的语音翻译大战,一开始领先的科大讯飞,最后其实跟搜狗之间翻译结果差不太多,“从商业角度考量,大模型这场混战中,厂商也应该优先追求最小可行化产品,先商业化,然后再在往前走的路途中尽善尽美。”
过去一年中,上述竞争姿态已经在对话大模型上上演过一次。随着越来越多玩家推出大模型部署服务,在日益激烈的商业化比拼中,大模型私有化部署的价格,“从一开始的几千万报价,降到一千多万,后来又降到几百万,乃至100万,直到无限接近成本。”江一表示。
AI蛋白质设计公司“力文所”获数千万元天使轮投资
近日,国内AI蛋白质设计公司杭州力文所生物科技有限公司宣布完成数千万元天使轮融资。本轮融资由凯泰资本领投,磐霖资本、红什资本跟投,种子轮领投方真格基金追加投资。融资资金将主要用于AI蛋白质设计平台的优化和开发,及推动平台孵化建设多条产品管线。力文所成立于2021年,致力于AI蛋白质设计研究。公司核心研发团队来自哈佛大学、波士顿大学、北京大学、中科院等国内外知名大学和研究机构。站长网2023-07-28 09:38:090000国产AI掀起“百模大战”,突围ChatGPT还要多久?
我们目前没有训练GPT-5,也不会在短期内进行训练。近日,在麻省理工学院举办的“TheFutureofBusinesswithAI”论坛上,OpenAI的首席执行官SamAltman首次回应《暂停AI巨型实验》的公开信。按照这位“ChatGPT之父”的说法,“建更大的模型,喂更多的数据”已经不能奏效,GPT-4的硬件条件也到了天花板。站长网2023-05-08 17:48:150000摩根大通宣布推出用于多模态文档理解的DocLLM
站长之家(ChinaZ.com)1月3日消息:近日,摩根大通推出了DocLLM,这是一种为多模态文档理解而设计的生成式语言模型。DocLLM作为LLM的轻量级扩展,用于分析企业文档,涵盖了形式、发票、报告、合同等在文本和空间模态交汇处具有复杂语义的文档。站长网2024-01-03 14:37:570002宝马利用AI降低斯帕坦堡工厂生产成本 每年节省100万美元
宝马在其斯帕坦堡工厂实施了人工智能技术,每年节省100万美元。该人工智能工具可优化制造流程、提高效率、减少浪费并预测设备故障。它还提高了产品质量,使工厂更具竞争力和可持续发展。斯帕坦堡工厂的人工智能应用使宝马能够发现需要改进的领域。通过分析数据和识别模式,人工智能工具能够优化制造过程的各个方面,包括供应链管理、质量控制和库存管理。站长网2023-07-25 15:51:470000第二代蔚来手机 NIO Phone 2手机或将于 7 月 27 日发布
蔚来汽车公司宣布,NIOIN2024蔚来创新科技日将于7月27日在上海举行。届时,蔚来将发布其第二代智能手机——NIOPhone。蔚来创始人、董事长李斌在今年3月的“共话江城”活动中曾透露,第二代NIOPhone的研发已经完成,并已进入生产阶段。蔚来每年计划推出一款新手机,以确保产品的质量和用户体验。站长网2024-07-22 17:41:520000