JevBench 跑分出炉:Jev 掉到第二,榜首 classifier-dev 仍是它的封装

JevBench 从智能、校准、速度、成本效率四个维度给这类项目打分,Jev 不再是第一:榜首 classifier-dev 实为 Jev 的工程化封装,第三名 SemIf 基于 Qwen3.5-4B。

Jev 在一场「Jev 模仿大赛」里拿了第二名。

这是句玩笑话。真实情况是,一个叫 JevBench 的跑分评测项目专门面向这类项目做横向打分,而 Jev 已经不再是第一名。

JevBench 的评分从四个维度展开:

  • Intelligence(智能)
  • Calibration(校准,即置信度质量)
  • Speed(速度)
  • Cost(成本效率)

目前排在榜首的 classifier-dev,本质上仍是 Jev 服务的一层包装。它在 Jev 之上补齐了一整套工程能力:API、批处理、监控、隐私、fallback,以及低置信度时升级到 LLM 的机制。

位列第三的 SemIf(Qwen3.5-4B)则是一个开源项目,从名字就能看出,它是基于 Qwen3.5-4B 做的。

分享 微博

评论 0

    昵称