
将近 4000 万人围观,7 万多人点赞,一个连话都不会说的 AI,居然把整个 AI 圈吵翻了?
关注AI圈的差友们应该知道,最近有个叫Jev的模型火了,它的官宣推文已经冲到了快 4000 万浏览。

它的创始人也来头不小,是前 OpenAI 研究员,可以说是研发ChatGPT的关键人物。
Jev 的新鲜之处,就在于它是一个“不会说话的模型”,官方给它取了个名儿叫System One模型,是一种“只负责判断、不负责说话”的 AI 模型。
如果说其他大模型是模仿人类思考,那Jev这玩意可以说是模仿人类的直觉,它会在最短的时间内做出它认为最对的选择。

官方还说了,Jev的一次调用只要 70 到 500 毫秒,价格也便宜得离谱,每百万输入 token 只要 0.042 美元,输出干脆不要钱,便宜到无法计量!

但这模型一出,网友们吵翻了。
有人觉得Jev就是未来,它的速度太快了,所以很多人开始用它搓一些很离谱的东西,比如,可以接入微信分析领导的意图。

有人用它 8 分 43 秒速通《我的世界》,还能玩地铁跑酷,马里奥。

甚至有网友还说,自己用Jev做了个实时交易机器人,只不过亏了31680美元。

但这时,就有另一派网友跳出来质疑了:听你们这么聊,这不是老一辈分类器也能做到的事儿吗?这应该是纯纯的营销吧。

所以,一个只会做选择题的 AI,真的有这么强?
哥们也整了三款游戏,来测试了下Jev的表现。先说结论吧:能玩,但玩得真没多好。。。
楼上那位哥们不是说能速通吗?于是我就用他的开源项目,开了个Minecraft服务器,然后让 Jev 进去当玩家,我全程旁观。
不过,它说不能只用Jev,得给它安排更聪明的模型当军师,于是,我给它配上了GLM 5.3。
尝试了几局,它还真的通关了,走下界,进末地,最后用床把龙炸死,用时 12 分 39 秒,这不挺厉害的吗?

但看看源码,只能说,跟我们预想中的速通差距有点大了。作者说了,其实代码早就在地图上标好了必经之路,打龙还用了固定的模块。。

而且最重要的是,在Jev的274个决策里,有250个都是只有一个选项的题目,纯纯预制游戏啊,看完我只觉得我被当250整了。

怪不得我看它一会儿在岩浆里游泳,一会儿原地转圈,只能说拉完了呀。

那我还是自己写吧,先来点简单的。比方说,斗地主,本质不也是选牌游戏吗?于是,我做了个1V1的斗地主和它玩,别问我为啥是1V1,我真怕它脑子转不过来。

然后我和Jev开了一把,结果不好意思,我没打过。在残局时刻,我出了一对 9,它反手甩了一个王炸给我秒了,确实是我菜了。


但有意思的是,我拿同一个残局让它重新打了几次,六次里有四次它选择了王炸,有两次改成了一对 K。
可能是因为在这个残局里,王炸和对 K 的概率一直咬得很紧,所以每次计算时的细微差别,都可能让选择通往另一边。
这样看,同一道题,它每次的选择也不一样,还挺像喜欢反悔的人类啊。
最后,都是卡牌游戏,我不如开把杀戮尖塔吧?这玩意不也是从头到尾的选择题吗?于是,我让Jev单兵作战,啥玩意也不给,就让它打。
它连战了十局,最终没有通关,最好一局爬到 19 层,平均下来死在 11 层左右,其实还不错了。

但其中有一局很有意思,此时它还剩 16 滴血、3 点能量,手里有三张防御牌,怪物要打它 18 滴血。

它居然选择结束回合,然后就没有然后了。
我翻日志才知道,是因为那三张防御牌,被当成三个选项分开列了出来,Jev 分别给它们了 17分、20分、18分,而“结束回合”有 21分,所以它选择了一枪不开。
从这也能看出来,Jev做的选择,其实很容易被人类设计的环境影响。
这是 Jev 的工作方式决定的,它做选择题,不是直接蹦出一个答案,而是对所有选项输出一个概率分布。

当我们的程序把三张防御牌列成了三个选项,它的猪脑也不会变通,这就导致本该集中在“防御”上的概率,被拆成了三份,不如 “结束回合”的概率,才导致了它的死亡。
而哪些动作算一个选项,选项要不要合并,这些都得由我们设计的程序,也就是 harness 决定。
所以Jev 的表现,一半取决于模型本身,另一半取决于开发者严格的设计,看来用Jev的人,锅还是得自己背啊。

但,在刚刚的一千多次操作里,有一半的决策速度在 400 毫秒以内,就问你快不快吧。

做完这三个实验,咱对 Jev 的印象也很清楚了。
在一堆卷思考、卷参数的大模型里,它确实挺新鲜的,不说话,速度快,还只做选择。
但它也真没网友吹得那么神。它不会规划,没有记忆,离开了写好的程序,它就是一个手速很快、但会瞎蒙的选择机器。
它真正实用的场景,其实不太多,更像大模型身边一个手脚麻利的跑腿小弟,在内容审核、客服分流、信息分类等地方,它或许真能派上用场,但要说真正参与复杂工作,确实还有点距离。

Jev这波火起来,可能也是真戳中了大伙的痛点,因为大模型做一个最简单的判断,也得雷霆大思考几分钟, Jev 这种模型确实省点心。
但你说让它打游戏,或者帮你赚钱,还是算了吧,感觉不如键盘上撒把米啊。
至于我斗地主输给它的那一把,大概,也只能是它运气好吧。

