跳到正文
Jev

可视化报告

Jev 速度与成本基准

如何阅读这些图表

这些图表基于公开讨论的 TypeSafe 区间与工作流 headline 制作的社区可视化,并非 jevtypesafe.org 独立实验室跑分。用于理解数量级主张,再通过 API 指南用你自己的 fixture 验证。

  • 延迟区间对请求内路由门控最重要。
  • 输入单价 + 免费输出对高 volume 打分最关键。
  • 工作流倍数依赖负载;请视为上界营销证据。

延迟图表

生成式前沿模型端到端可能需数秒到数分钟。Jev 公布的 System One 区间为数十到数百毫秒——这是敏捷 Agent 门控与阻塞请求之间的差别。

柱状风格图:Jev 延迟 70–500 毫秒对比典型前沿 LLM 约 3–329 秒区间
图 1 — 针对 System One 形态查询讨论的端到端延迟区间。视觉比例仅为示意。

定价图表

Jev 定价约为 $0.042 / MTok 输入,且 输出 token 免费。常见 LLM 输入 band 更高且仍对生成字符串计费。网关可能加价——预算前请确认实时费率。

横向条形图:Jev 输入价 0.042 美元/百万 token 对比预算型与前沿 LLM band
图 2 — 输入 token 价格 band。对决策负载而言,免费输出是成本故事的另一半。

工作流速度与成本 headline

TypeSafe 工作流式评估相对 LLM 决策路径公布了 striking 的相对数字。下图让不愿读完整 eval 的利益相关者快速扫一眼。

柱形图:工作流评估中 Jev 约 194 倍快于 1× 参考 LLM 路径
图 3 — 已公布工作流延迟 headline(约 194× 更快)。请对照你自己的计算图验证。
柱形图:工作流评估中 Jev 约 445 倍省于 1× 参考 LLM 路径
图 4 — 已公布工作流成本 headline(约 445× 更省)。免费输出计费放大多问题调用的节省。

公开风格测试场景

这些场景 remix 公开 demo 与开发者文章主题(路由台、批量决策、交互循环、大 Choice 集合)。可作为可复现 fixture 模板——并非复制官方 lab notebook。

四格场景矩阵:工单路由、批量决策、实时循环、高基数 Choice
图 5 — 用于规划自测耗时与成本的场景矩阵。

客服工单分流台

将一条客户消息作为 state,同时询问 Choice(团队)、Noul(是否紧急?)与 Score(挫败感)。对应公开路由 demo,替代多 prompt LLM 分类链。

在公布延迟 band 成立时,预期亚秒级决策。

昂贵 LLM 推理前的预筛

用 Jev 过滤低风险事件,仅将模糊 case 升级到 GPT/Claude 级模型。这是让成本图在生产中真正起作用的混合模式。

大部分流量留在廉价决策调用; spend 集中在难 case。

批量 map 记录

用同一问题集对多行打分或分类。公布的免费输出 token 使 speculative fan-out 远比对长字符串计费的生成模型温和。

成本主要随输入规模增长,而非冗长答案。

高基数 Choice 选择

传入大选项列表(团队、SKU、wiki 链接式 choice)。Schema 绑定答案避免自由文本幻觉,减少同时拉高延迟与 spend 的 parser 重试。

选项越多,稳定性收益越 compound。

粗算成本表

社区粗算:$0.042 / MTok 输入且输出免费。假设每次决策调用约 1,000 输入 token。请用 trace 实测 token 数替换。

按月度决策量估算的 Jev 支出
月度决策次数约输入 token估算 Jev 输入支出
100,000100M~$4.20
1,000,0001B~$42
10,000,00010B~$420

对比同样对输出 token 计费且解析失败后常需重试的生成式分类器。功能级差异见 Jev 与传统 LLM 对比。