← 返回学习中心 · Skills 与决策OiOi Academy
JEV 决策模型 · 06

拿到 Jev,然后呢?一份真实落地清单

@servasyy_ai 在 Jev 发布不到一周时做的祛魅长文:四次失败接入 + 两轮对照实测,最后给出"三步上生产"。

原作者 @servasyy_ai 来源 X 发布 2026-09-19
🔍

开篇:一句话定义,先祛魅

作者 @servasyy_ai 的一句话定义,整篇的灵魂:"ChatGPT、Claude 是'会写作文的 AI',Jev 是'只会做选择题的 AI'。"

它快、便宜的原因很简单:答案范围事先定好,算一遍每个选项的概率就行。训练目标不是"答得好看",而是"概率要准"——它说 70% 把握,就该约 70% 对。Jev 的三种题型、价格细节,详见《Jev 模型从 0 到 1 小白教程》,这里只谈落地。

作者还先破了一个伪命题:"Jev 取代大模型是伪命题。"合理的分工是:大模型想清楚判断规则,Jev 在生产环境高频低价执行。它抢的不是大模型的活,而是以前"不值得上 AI 的小判断"。

记住:一句话结论:Jev 不是"更便宜的大模型",它是"以前不值得做、现在值得做了"的那些小判断的执行者。
📊

官方数字:先看,再打折

以下是官方对比表,全部自报,先看再打折:

普通大模型 Jev
输出 自由文字,要程序再解析 固定选项 + 概率
响应时间 3 秒到 5 分钟 0.07 到 0.5 秒
输入价格 $0.20–$10 / 百万 token $0.042 / 百万 token
输出价格 通常是输入的 5 倍 免费
输入长度 几十万 token 约 3.2 万 token
能看图吗 能 不能,只接受文字

官方没跑公开榜单,而是自建测试:让各模型在同一段程序里做决策,拿两个最强模型的平均答案当标准。结果:Jev 准确率约 68%,接近中等水平大模型,但便宜 40 到 400 倍、快 20 到 200 倍。

原文配图:广告牌上的 200X FASTER、$0.042,和被打叉的 NEVER WRONG——
原文配图:广告牌上的 200X FASTER、$0.042,和被打叉的 NEVER WRONG——"永不犯错"要打折,"快和便宜"才是实的
🗞️

Hacker News 三条质疑,没推翻价值

作者认为下面三条质疑"没推翻 Jev 的价值",但每个想用 Jev 的人都该记住:

  • "永不幻觉"只是"不出选项范围"。选错一个选项完全可能,TypeSafe 的 CEO 自己也承认了;
  • "前沿模型"这个词有点借光。更老实的说法是:在"做选择题"这件事上,它把速度和成本推到了新水平;
  • 速度对比不完全公平。对比的是大模型"写完完整答案"的时间,而不是"只答一个字母"的时间;
  • 还有一条:Doom 演示喂的是敌人坐标而不是画面——"相当于透视,说明反应快,不代表会玩游戏"。
高中生类比
就像广告说"本餐厅永不上错菜"——意思是菜单只有三道菜、不可能端出第四道,但三道里上错一道完全可能。
🧰

真实跑通的案例,分五类

作者把能找到运行证据的案例分成五类(以下数字多为作者自报,无第三方验证):

  • ① 给 AI 助手当决策器(最多、最优)。标杆是 Browser Use 的 Jev Ultrafast;还有真 Android 上的 mobile-jev、Mac 屏幕文字识别 + Jev 决策的 typesafe-computer-use、浏览器插件 AskJev、已上架 Cline 插件市场的 Cline Jev Browser、"话没说完就执行"的语音控制 Mac、并行浏览器测试;Slack agent 快 2 倍(先分类 skill/tool/params);AgentRun harness;
  • ② 海量数据逐条分类(最省钱)。jev() PostgreSQL 扩展(129 行、约 1 秒做一次自然语言判断)、1,018 篇论文分 24 个主题、500 封邮件分类、70 条 YouTube 垃圾评论、税务文档分类、StealAds(40 秒拆 724 个 live ads、37 个品牌、9 美分);
  • ③ "有把握自动过、没把握问大模型"(最值得研究)。吃的就是校准概率这口饭;
  • ④ 实时反应 / 预测意图界面;
  • ⑤ 仿真控制实验。提醒:全是模拟数据,Jev 不能看图,"自动驾驶"的说法已被工程师否掉。

已接入的真实产品:Higgsfield API(给图/视频生成请求选模型)、GojiberryAI(销售线索资格判断排序)、Shipper、SPIRITT(工作区可直接选 Jev)、AshAI / ReqLLM。

OpenJev、Kev、Nimble 等仿品不算;纯观点、教程、没有运行证据的构想也排除——这类"听说能用"的数量,是真实案例的好几倍。

原文配图:Jev 机器在界面上做
原文配图:Jev 机器在界面上做"CLICK 7"决策——给 AI 助手当决策器,是作者认为最多、最优的一类用法
💥

四次失败:往自己工具里塞 Jev,全军覆没

最有价值的部分来了。作者四次"往自己工具里塞 Jev"想提效,全失败了。根子有三条:

  • ① 它看不到内容。为塞进 32K 上下文先砍内容,砍完就没法判断了(上下文压缩插件:跑起来是"无脑删",换个全答 0 的假模型效果一样);
  • ② 订阅制杀死经济学。Codex / Claude Code 月费里,判断的边际成本是零,再插一层只多一层延迟、多一秒等待(模型路由实验:反多花 59%–184%,每步多等 1–2 秒);
  • ③ 它只会判断、不会干活。靠第三方插件搬数据,失败多半是"壳"的错(40 个大视频判删:判出 0 个能删,纯规则能判 7 个——看不到文件内容,只能凭文件名猜)。

教训只有一句:"想拿它给自己提效的人走不通;把它当零件做进产品的人,才有可能。"

避坑
避坑:如果你是 Codex / Claude Code 订阅用户,想加一层 Jev"省时间省钱"——别。订阅制下你的判断边际成本已经是零,多一层只多一层等待。
高中生类比
订阅制杀死经济学,就像你办了健身房年卡,再花钱请人替你"判断今天去不去健身房"——判断本身免费,请人反而多花钱。
🧪

两轮实测:唯一真正跑通的一次

作者做了两轮实测(走 OpenRouter 的 typesafe/jev,注册即调、免排队;另一条路是官网排队等 "You're in!" 邮件拿 key)。

第一轮:Jev 给 217 个 Jev 项目打分"今天能不能用"。把 60 个案例 + GitHub 上 167 个 Jev 项目的公开介绍喂给 Jev 逐条判断。结果:判为"现在可用"且证据充分的只有 15 个,其中 14 个是 pydantic-ai、LangChain、Vercel AI SDK 这类框架里的 Jev 接入层,唯一的应用是 jev-ultrafast。X 上的演示大多是"作者跑通了,但你拿不到"。

第二轮:100 条中文资讯 × 3 题 = 300 个判断,对照 Qwen 3.8 Flash,上海串行调用。

  • 它说"九成以上把握"的,一个没错。300 个判断里 255 个是这一档,全对。把 80% 设为自动放行线,能放掉 89% 的请求,只错 1 个——"按把握分流"在简单任务上成立;
  • 上海实测约 0.7 秒(官方 0.07–0.5s),但没有长尾:最慢 1.5 秒,对照的 Qwen Flash 中位数差不多、最慢一次 32 秒。Jev 赢的不是"快",是"没有长尾";
  • 准确率 94.7% 对 93.0%,各花 $0.003。对上轻量模型,Jev 准确率和费用都不占优——官方"便宜 40–400 倍"比的是前沿大模型。

100 条资讯是 25 个模板 × 4 变体造出来的,任务偏简单;80%–90% 档只有 11 个样本;和 Qwen 答得不一样的 12 条,几乎全是标签边界问题(比如"云数据库算应用还是其他")。

🛫

三步上生产 + 最终判断

最后,作者给出了"三步上生产"方案:

  • ① 列出业务里"现在用大模型、但只让它返回一个选项"的调用。没有这种调用,就别追热点;
  • ② 拿真实历史数据、人工定好答案,跑一次盲测。重点看 70%–90% 档的真实正确率——校准是 Jev 唯一的护城河,必须亲自验证;
  • ③ 过了,就在大模型前面加一道 Jev 闸门。从 90% 阈值起步,再慢慢下调。

作者的最终判断(四条,原样保留):

  • 它不是"更便宜的大模型"——对上轻量模型,多出来的只有"反应时间稳定 + 可分流的把握度",拿"便宜"当理由就是选错;
  • 今天能用的 Jev 是框架里的接口,不是应用;
  • 真正值钱的只有一个用法:按把握分流;
  • 但今天别上生产(样本偏简单、官方还要排队)。
避坑
作者原话:"今天别上生产。"样本偏简单、官方还要排队——先在自己的数据上跑盲测,验证了校准再说。
词

术语翻卡:点卡片看解释

按把握分流
confidence-gated routing
有把握的自动过、没把握的转人工或大模型;作者认为这是 Jev 唯一真正值钱的用法。
边际成本
marginal cost
多做一次判断多花的钱;订阅制下这个成本是零,所以加 Jev 只多等待、不省钱。
订阅制杀死经济学
subscription kills the economics
作者的原话:在月费订阅里,判断边际成本为零,再插一层 Jev 只增加延迟和复杂度。
盲测
blind test
人工先定好标准答案,再让模型判,最后对照——验证校准必须亲自做这一步。
长尾
long tail
偶尔一次慢得离谱;Jev 的优势不是平均快,而是最慢的一次也不离谱。
自报数据
self-reported
来自官方或作者自己、未经第三方验证的数字;本课凡引官方数字处均为自报。
测

自测一下:点问题展开参考答案

合理分工是大模型想清楚判断规则、Jev 在生产环境高频低价执行;它抢的不是大模型的活,而是以前"不值得上 AI"的小判断。

① 它看不到内容(为塞 32K 砍完内容就没法判断);② 订阅制杀死经济学(月费下判断边际成本为零,多一层只多等待);③ 它只会判断不会干活(靠第三方插件搬数据,失败多是"壳"的错)。

300 个判断里 255 个"九成以上把握"全对;80% 放行线能放掉 89% 请求、只错 1 个。

赢在"没有长尾":最慢 1.5 秒对 32 秒;输在准确率(94.7% 对 93.0%)和费用(都是 $0.003)都不占优。

① 找出业务里只让大模型返回一个选项的调用;② 用真实历史数据人工定答案跑盲测,重点看 70%–90% 档真实正确率;③ 在大模型前加 Jev 闸门,从 90% 阈值起步慢慢下调。