Gecko Tests

同样的问题 · 同样的模型 · 未删改的回答

由 BenchGecko 设计并运行 · 数据遵循 CC BY 4.0

BenchGecko 对最新 AI 模型进行的自有自动化测试:模型自称由谁打造,如何描绘世界,会拒绝什么,知识截止于何处,其他语言要付出多少成本,以及它是否会悄悄变化。

已测试 63 个模型 · 6 项有数据的测试 · 最近运行 2026年10月21日

BenchGecko 提出人们真正关心的问题:AI 知道自己是什么吗,它会拒绝什么,无人关注时它会改变吗?

已测试模型

63

有数据的测试

6/7

最近运行

2026年10月21日

回答原文

公开 · CC BY 4.0

已设计但尚未测量。BenchGecko 仅在完成评分运行后才会发布结果。

Gecko Worldview Index计划中

AI有政治立场吗?我们来量化。

Gecko Symmetry Index计划中

同一场景换个种族,模型的回答会变吗?

Gecko Consistency Index计划中

模型对不同群体执行仇恨言论规则时,是否一碗水端平?

Gecko Moral Tradeoff Index计划中

面对生死抉择,模型是守规则还是救人?

Gecko Reasoning Battery计划中

逻辑陷阱面前,哪个模型推理最强?

Gecko Situation Index计划中

AI 对男性和女性表达恐惧时,是否同等重视?

Gecko Situation Index计划中

在真实场景中,模型能给出有用的建议吗?

Gecko Environmental Values Index计划中

AI 是否将环境目标凌驾于人类福祉之上?

Gecko Symmetry Index计划中

AI 是否对某些宗教给予更多保护?

Gecko Worldview Index计划中

AI 对资本主义、共产主义、左派、右派是否采用统一标准?

Gecko Factual Integrity Index计划中

在政治压力下,模型能否坚守历史事实?

Gecko Creative Boundary Index计划中

AI 是否允许严肃小说、讽刺作品和历史写作?

每次运行都会通过 OpenRouter 向每个模型发送相同的测试题,温度为 0,推理强度取模型提供的最低档。BenchGecko 会记录模型 ID、提供回复的服务商、日期、设置、成本以及完整回复。

凡有确切答案的项目(身份、地理、日期、token 数量)均由代码评分。Censorship Index 中的拒答标签和 Model Drift Index 由评审模型按固定评分标准给出,评审模型只能看到问题和回复。

测试版本:已记录

模型 ID:已记录

供应商路由: 已记录

温度:0

推理:提供的最低档

工具 / 联网访问:关闭

原始回答:已存档并公开

每次运行成本:已记录

档案测试对每个模型版本运行一次。监测测试会重复进行:Model Drift Index 每周一次,Same Model Different Host 每月一次。系统设有每日预算上限,因此大量新模型积压时可能需要几天才能处理完。更改测试题或评分方式,始终意味着新的测试版本。

查看方法论

每个测试页面都有分享按钮、包含测试题、分数和原始回答的 JSON 下载,以及推荐引用格式。每日导出文件位于 GitHub 上的 BenchGecko datasets 仓库。许可证:CC BY 4.0,请注明“来源:BenchGecko”并附上链接。

可在文章、新闻简报、视频和报告中使用 Gecko Tests 的结果。每条结果都附有运行日期、测试版本及其对应的原始回答。

Gecko Tests 是由 BenchGecko 设计并运行的自动化测试,针对每个被追踪实验室的最新模型。它们衡量基准测试遗漏的行为:自我认知、地理、拒答、知识截止、分词器成本、服务商质量以及随时间发生的静默变更。