每周都有新的 AI 突破，但很难区分哪些是真正实现的，哪些是炒作。研究人员和开发者浪费时间评估可疑的声明。
一个类似维基百科的平台，专家可以在其中提交和投票里程碑，并链接到可复现的基准。类别可以包括自然语言、编码、推理等。
AI 公司可能会赞助以展示他们的成就。研究人员会重视准确的基准。
MVP：一个包含关键里程碑、投票按钮和引用链接的简单列表。
风险：需要大量专家参与才能具有权威性。
AI 能力追踪工具
创建一个实时仪表盘，根据众包验证的基准追踪已实现的 AI 里程碑。让专家对声明进行投票并记录证据。
为什么是现在
AI 领域发展迅速，伴随着不断的声明——需要一个经过验证的进展追踪。
- 做给谁
- AI 研究人员和开发者
- 商业模式
- 赞助排行榜
- 投入量级
- 几周