以全球最为熟知的LLM（大谈话模子）为例神秘顾客招聘

发布日期：2024-01-05 11:04    点击次数：77

文｜王怡宁神秘顾客招聘

剪辑｜尚恩

最近AI视频赛说念大火，Pika推出1.0版块，并通知融资千万好意思金，出尽风头。

而动作AI视频生成的老年老，风景级居品Gen-1、Gen-2的开荒商Runway倏得通知组建团队开荒通用天下模子（General World Models，以下简称GWMs），想法是创建一种不同于大谈话模子的，并能模拟履行天下的东说念主工智能系统。

Runway喊话要作念GWMs后，立即就引起繁密网友的质疑。

有东说念主就示意：

这即是加入了视频、音频、笔墨和图片的多模态大模子呗

还有东说念主平直说：“这是条可以的视频，Ruben（视频中的小狗）也很可儿”。（但平直惨酷了新模子）

神秘顾客_赛优市场调研

△图源：Twitter

Runway思作念的天下模子是什么样的？为何要在这时期选拔作念天下模子？

用天下模子来模拟天下

对于大部分用户而言，东说念主工智能在昔日一年的发展速率如实曾经超乎咱们的预期和思象，但当咱们惊羡于大谈话模子确实能够畅通地与咱们对话时，幻觉问题让大模子们时时常“天花乱坠”或“驴唇不对马嘴”的情况也让本色的使用体验大打扣头。

而这种问题并不单是存在于大谈话模子范畴，在AI扩图和AI视频生成中也日出不穷，比如AI生成图片中经典的六指问题：

距北京200多公里的燕山脚下，有一所足球特色小学。全校仅有150多名学生，但人均有两个足球。学校还有两块球场，除了校内的，校外还有一块由河滩地改建的“河畔球场”。他们的校队不但是县冠军常客，还连续多年代表承德市参加河北省的足球夏令营，是十几支队伍中唯一来自山村小学的。今年7月，他们还受邀到北京工人体育场与北京国安队的教练组交流学习……

这是12月11日在马来西亚彭亨州首府关丹市拍摄的马来西亚东海岸铁路（马东铁）项目轨道工程启动仪式现场。

△图源：Twitter

就连Runway自家的居品Gen-2也幸免不了这一问题。对此，Runway在新发布的3分钟视频内尝试讲解这一问题的根源——现存的大模子缺少对信得过天下全面的了解。

以全球最为熟知的LLM（大谈话模子）为例，尽管可以生成诗歌、著述致使电影，但LLM本色只了解谈话范畴的限定，因此际遇不了解的问题时，经常“一册矜重地胡编乱造”。

它们的底层范式是：大模子+大数据=掌持对于天下更多的知识，这种范式也导致了大批的幻觉问题，而雷同的情况也出现时AI视频生成用具中。

事实上，Runway此次提倡的通用天下模子看法，恰是思要恢复和责罚这一问题。Runway将“天下模子”界说为一种东说念主工智能系统，它能建构对环境的里面再现，况且用来模拟该环境中的改日事件。

简言之，Runway但愿新模子能够尽可能接近咱们生涯的信得过天下，模拟各式种种的情况和互动。

LeCun力挺，但Runway思搞点不同的

「天下模子」并不是Runway始创的看法。图灵奖赢得者Yann LeCun旧年就提倡过这一看法，用于刻画他理思中的、更接近东说念主类信得过水平的AI。

他曾在公开演讲中月旦GPT大模子，以为把柄概率生成自追忆的大模子，天津满意度调查公司压根无法撤消幻觉弯曲，致使断言GPT模子活不外5年。

LeCun但愿能够创造出一个可以学习天下怎样运作的里面模子，基于此，他和他的团队在本年6月发布了「类东说念主」的东说念主工智能模子I-JEPA，让模子像东说念主类一样学习对于天下的学问布景知识。

△图源：Twitter

不外现时看来，尽管他们的论文在发布时得益了不少的掌声与期待，但半年昔日了，LeCun的天下模子似乎还未找到告成落地的阶梯。这概况亦然全球对Runway持保留格调的原因。

那么Runway思搞的天下模子，是啥样的？

对于怎样开荒新模子，Runway在视频中露出了部分思法，GWM要建立的是一种心智舆图（mental map），让模子更多了解对于天下的“为什么”和“何如样”。

要齐全这一思法似乎还濒临着不少挑战，Runway团队曾经经刚硬到了这点。他们对GWM的先容中提到，脚下需要责罚的两个问题是：

1、这些模子需要生成一致的环境映射，以及在这些环境中导航和交互的才气。

2、模子不仅需要捕捉天下的动态，还需要捕捉其住户的动态，其中还包括建立履行的东说念主类行动模子。

△图源：Twitter

尽管外界对此响应平平，Runway昭着曾经下定决心组建团队，运行招兵买马，公司的官方网站上曾经通达了一批新的职位招聘，领域涵盖机器学习、愚弄盘考以及数据基础智力等多个范畴。

△图源：Runway官网

One More Thing

回看AI视频生成赛说念，由Pika 1.0燃烧的关注不减反增。从最早一批拿到Pika测评资历的用户反馈来看，现时对Pika 1.0的本色服从和本事水平的评价也呈现南北极分化的场所。

一部分用户盛赞Pika 1.0 是他们现时用过最佳的AI视频生成用具，也有一些discord用户在实测后发现，服从与其他近似用具并有没显豁差距。

国内巨头也纷繁下场布局AI生成动画，阿里和字节的竞争更是到了面对面的地步——阿里近日发布名为“Animate Anyone”的AI名堂，称只需要一张图片和一段骨骼动画，就可以为任何东说念主制作视频。字节紧随后来推出“MagicAnimate”，况且平直齐全了开源。最终，战局以阿里飞速发布“DreaMoving”拒抗暂时中止。

情理情理的是，风头无两的Pika Labs成立的机会之一，恰是两位勾通首创东说念主的作品在Runway举办的第一届AI movie Festival中落第。在最近的一次访谈中，首创东说念主Chenlin Meng也提到现时Runway、Genmo、Imagen Video等能够生成的视频质料水平临近，齐存在不少“artifact”（本事），不外这也赶巧诠释了这一范畴还有好多本事改动和冲破的空间。

Chenlin Meng将现时的视频生成本事比作“GPT-2时期”，改日的竞争花样还有好多变数。GWM能否匡助Runway弯说念超车，仍需拭目以俟。

接待换取神秘顾客招聘

• 全球
• 最为
• 数智
• LLM
• 神秘顾客招聘