utcplus
V2EX  ›  OpenAI

做了一个 ai 模型降智监测页面

  •  
  •   utcplus · 3h 25m ago · 132 views

    最近做了一个大模型降智监测页面:

    https://www.okkmax.com/tools/iq

    可以看 Claude 、GPT 、Gemini 、DeepSeek 、Kimi 等模型最近的能力变化,包括当前智商、历史趋势,以及推理、编程、工具调用和稳定性等分项表现。

    平时经常看到有人说 Claude 或 Codex 最近降智了,但单靠个人体感不太容易判断。

    这个页面主要就是把模型近期的数据变化整理出来,方便对比它现在的表现和之前是否有明显差距。

    功能刚上线,欢迎大家体验和提建议。

    doraemonki
        1
    doraemonki  
       1h 20m ago
    感觉很不错,许几个愿望😂。

    - 降智经常伴随的行为有推理深度(思考 token 数)显著降低,token 输出速度显著提高,这俩的变化能展示出来就好了。
    - 希望区分模型是 API 渠道还是订阅渠道。另外根据 codex 最近一个降智讨论 issue 来看,表现很可能还会受到模型调度工具影响(codex 版本)。链接: https://github.com/openai/codex/issues/30364
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1119 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 18:18 · PVG 02:18 · LAX 11:18 · JFK 14:18
    ♥ Do have faith in what you're doing.