周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘
站长网2024-02-18 20:40:530阅
快科技2月18日消息,今日,周鸿祎再次谈到Sora视频模型,他表示Sora生成视频堪比CG。
周鸿祎发视频称,Sora有三个片段让他觉得非常惊讶。其中一个是一堆金毛小狗在雪地里打滚儿,狗狗用鼻子拱雪,甚至一粒一粒的雪粒都能感觉到,他感觉这个画面非常真实。
他认为,对比Pika和Runway是做不出这样效果的。Pika和Runbway实际上是基于图形图像本身的操作来进行生成。只是形成一种比较简单的计算机动画的效果。
周鸿祎说:即使是用常规呢计算机CG电影工业特效来看这三个画面,那也会非常难做,但是到了Sora这里,这些细节都会变得非常简单,只要给出一些文字的提示要求,就能逼真描绘出来”。
他认为,Sora是没有做3D建模的。如果Sora也只是用3D建模再进行渲染,那么这和传统的电影工业走的是一样的路,这样就不具备颠覆性和革命性了。
周鸿祎猜测Sora做到如此效果有三点原因:
1、Sora模拟了人类观察、描绘、表现世界的方法。如果人类画师用笔画出来这三个场景,人类的大脑里不需要3D建模,因为人类对世界有基本认知。人类可以随意想象出自己要做的事,可以控制自己所想。
2、Sora在学习的过程中,用了很多视频、电影的内容来作为训练输入。当输入一些画面,不仅要解读出画面的元素,还要解读出一些物理定律。
openAI的论文中曾提到recaptioning技术,意思是对每一帧画面都能够用文字来描述。这点也正符合人类认知世界的方法。
3、openAI产生了很多3D内容。不排除它用现在游戏引擎做了很多实时3D模型的渲染,再利用这些3D模型把更多的物理知识训练给Sora。
周鸿祎表示,Sora是记录文生视频AIGC的工具,它反映了AI对世界的理解,是从文字进入图像,再从图像展示对这个世界3D模型的理解。
0000
评论列表
共(0)条相关推荐
淘宝,多了一个“ChatGPT”入口
电商,正在悄然切换,进入AI时代。现在打开淘宝,搜索“淘宝问问”,你可以直接跳转到一个全新的页面。在这个新的页面输入你的问题,可以获得内容回复,包括商品挑选攻略、生活经验百科、外出行程建议等——使用体验类似电商版“ChatGPT”,区别在于,答案中会附上相应的淘宝商品链接。站长网2023-10-07 15:35:350000原来每一个风靡全网的AI配音 背后都有真人原型
一位抖音博主“堂堂一个小飞”向他的妻子揭示了一个令人惊讶的事实:emo圈视频中经常听到的AI人声其实是由他创造的。他引用了一句经典的emo圈语录:“我说怎么走散了,原来是起风了,可惜那天没控制住情绪,说了不中听的话,你也没再迁就我,我们也就分道扬镳了。”让妻子惊讶不已。这段视频引发了热烈的讨论,许多人以为这些声音是由电脑合成的,没想到背后有真人的声音。站长网2023-09-19 14:53:5100012024 QS排名发布:计算机MIT霸榜,清华11,北大15
2024QS世界大学学科排名出炉了!在计算机科学专业排名中,MIT、卡内基梅隆大学、斯坦福大学占领了世界前三席,中国大陆有8所高校进入百强,清华大学排名最高,并列第11。2024QS世界大学学科排名来了!总体和23年变化不大。根据官网信息,2024QS世界大学学科排名涵盖了55个细分学科和5大学术领域。站长网2024-04-18 21:55:490000OpenAI、谷歌等公司同意白宫列出的八项人工智能安全保证清单
美国白宫于7月21日发布的一份情况说明书正式披露,一些在美国运营的最大的生成式人工智能公司计划为其内容添加水印。亚马逊、Anthropic、谷歌、Inflection、Meta、微软和OpenAI就生成式人工智能的使用和监督(包括水印)达成了八项自愿承诺。站长网2023-07-25 16:18:430000国庆假期,消失的网红城市
火热的十一长假已经接近尾声,但奇怪的是,今年的长假却很少能看到网红城市爆火的身影。《百度地图2024年十一假期出行锦囊》数据显示,杭州千岛湖、阿坝四姑娘山为国内热门景区TOP10,甘肃甘南、云南腾冲为全国小众旅游城市TOP10。图源:《百度地图2024年十一假期出行锦囊》不少过去蹿红的网红城市,在今年国庆假期客流量虽有所增长,但和巅峰时期相比仍有很大差距。站长网2024-10-09 03:33:270000