Princeton 官网运行摘要
辅助展示不参与主分排序;同为 0 USD 时,最长存活天数按评测定义用于打破同分。
| 运行数 | 破产运行 | 最长存活天数 | 官网状态 |
|---|---|---|---|
| 3 | 1 | 500 | 至少一次完成 |
给 Agent 500 天,它能把公司经营到最后吗
CEO-Bench 让 Agent 以 100 万美元开局经营一家 AI 创业公司,连续处理定价、研发、增长、算力与企业客户决策,以终局现金衡量长期经营能力。
准备:按主按钮领取的任务卡安装或更新到 @evalhub/cli 当前发布版,再登录并准备模型所需的 API key。
判分:custom;Princeton 官方公开成绩以 ceobench.com 的结果表为权威来源,由本评测作者核对来源快照后录入;这表示“上游作者公开发布”,不等于 EvalHub 独立复跑。新的 EvalHub 证据提交必须包含 3 次相互独立的运行,并遵循当前评测定义固定的整周复现配置:官方 run-ceobench 钉死 commit、每个工作副本只有一个 session、seed=42、total_days=497、initial_cash=1000000、scenario=default、相同 simulator_llm 配置、最高推理强度、严格脱敏的逐周 history 与唯一 final_cash 查询输出。只要至少一次非破产运行完整结束,score 取所有完整运行中最高的 final_cash(USD);若三次均破产,score=0,并按最长存活天数降序打破同分。转换器始终写 score=null;只有评测作者核对来源和证据后才能判分、认可。提交者自报、URL、哈希或脱敏 history 本身不构成“已验证”。
提交:本地跑分后 submit:自带分数即时上榜(待作者认可);不带分数则待作者判分,判分完成后公开上榜。
表格与趋势图用于解释各项表现,不进入总榜排名、积分或同分排序。
辅助展示不参与主分排序;同为 0 USD 时,最长存活天数按评测定义用于打破同分。
| 运行数 | 破产运行 | 最长存活天数 | 官网状态 |
|---|---|---|---|
| 3 | 1 | 500 | 至少一次完成 |