AI 领域缺乏清晰的基准来显示哪些方面在实际改进，哪些只是炒作。创建一个跟踪语言、视觉、推理等方面可衡量能力的仪表板。
从已发表的论文、基准测试结果和可重现的测试中获取数据。为需要可靠进展数据进行规划的公司提供高级 API 访问。
首先将现有的基准数据汇编成简单的可视化。最大的风险在于在跟上该领域快速变化的同时保持客观性。
aimetricsdashboardtracking
AI 进展跟踪仪表板
构建一个公共仪表板，跟踪 AI 能力的具体里程碑，将炒作与实际进展区分开来。帮助投资者和开发人员做出明智的决策。
为什么是现在
随着对 AI 自我改进预期的重新评估，对客观进展指标的需求正在增长。
- 做给谁
- AI 研究人员和投资者
- 商业模式
- 高级 API 访问
- 投入量级
- 几周