周鸿祎称Sora生成视频堪比CG:未做3D建模 只需文字就可逼真描绘
站长网2024-02-18 20:40:530阅
快科技2月18日消息,今日,周鸿祎再次谈到Sora视频模型,他表示Sora生成视频堪比CG。
周鸿祎发视频称,Sora有三个片段让他觉得非常惊讶。其中一个是一堆金毛小狗在雪地里打滚儿,狗狗用鼻子拱雪,甚至一粒一粒的雪粒都能感觉到,他感觉这个画面非常真实。
他认为,对比Pika和Runway是做不出这样效果的。Pika和Runbway实际上是基于图形图像本身的操作来进行生成。只是形成一种比较简单的计算机动画的效果。
周鸿祎说:即使是用常规呢计算机CG电影工业特效来看这三个画面,那也会非常难做,但是到了Sora这里,这些细节都会变得非常简单,只要给出一些文字的提示要求,就能逼真描绘出来”。
他认为,Sora是没有做3D建模的。如果Sora也只是用3D建模再进行渲染,那么这和传统的电影工业走的是一样的路,这样就不具备颠覆性和革命性了。
周鸿祎猜测Sora做到如此效果有三点原因:
1、Sora模拟了人类观察、描绘、表现世界的方法。如果人类画师用笔画出来这三个场景,人类的大脑里不需要3D建模,因为人类对世界有基本认知。人类可以随意想象出自己要做的事,可以控制自己所想。
2、Sora在学习的过程中,用了很多视频、电影的内容来作为训练输入。当输入一些画面,不仅要解读出画面的元素,还要解读出一些物理定律。
openAI的论文中曾提到recaptioning技术,意思是对每一帧画面都能够用文字来描述。这点也正符合人类认知世界的方法。

3、openAI产生了很多3D内容。不排除它用现在游戏引擎做了很多实时3D模型的渲染,再利用这些3D模型把更多的物理知识训练给Sora。
周鸿祎表示,Sora是记录文生视频AIGC的工具,它反映了AI对世界的理解,是从文字进入图像,再从图像展示对这个世界3D模型的理解。
0000
评论列表
共(0)条相关推荐
欧洲成立人工智能研究中心来监督大型平台
站长网2023-04-19 11:12:370000万兴科技发布AI视频创作软件Wondershare Filmora13
万兴科技发布了AI视频创作软件WondershareFilmora13。该软件内置了创作助手Copilot,用户可以AI助手对话获取创作建议指导。Copilot还提供了一键助力功能,可以快速完成剪辑创作,简化视频创作流程,提高创作效率。站长网2023-10-31 14:17:550000普通人在家就能赚钱的6个项目
各位村民好,我是村长月入三五千的宝妈或者普通打工族,想趁着下班做点副业赚钱,有哪些项目可以做呢?许多人在网上看到许多博主说的项目,大部分都是割韭菜,也不能实操。那么今天,我先给大家简单盘点6个适合在家就能做的赚钱项目。图源备注:图片由AI生成,图片授权服务商Midjourney01自媒体其实每一个人都能拿起手机来拍摄视频,或者写文章。其一,头条、西瓜、抖音发布作品的门槛极低。站长网2024-01-16 10:08:210001马斯克最新访谈:在全球核战爆发前必须实现殖民火星
快科技6月16日消息,据国外媒体报道,在近期的一次访谈中,特斯拉和SpaceX的CEO埃隆马斯克分享了他对太空探索和人类未来的见解。马斯克强调,SpaceX的使命是将人类意识扩展到地球之外,以应对类似恐龙灭绝的未知挑战,并确保人类文明的长期生存。马斯克认为,尽管地球已有约45亿年的历史,但文明的存在时间仅占其中的极小部分,这表明文明是短暂而脆弱的。0000拿捏老外的100个中国APP
海外用户也离不开游戏、社交、视频。这两天,几乎所有人的目光都集中在TikTok和小红书这两家公司身上,抛开国际政策因素不谈,一个值得思考的问题是:除了这两款产品,海外用户还爱用哪些中国APP?为此,「定焦One」在移动应用数据平台SensorTower上,根据2024年一整年的日活和月活用户数据(仅海外市场),拉出了一份排名TOP100的中国APP产品名单,结果既令人意外,似乎也在情理之中。0000