Google DeepMind 试点全球首个双盲 AI 评测
Google DeepMind 宣布试点全球首个针对专有前沿模型的雙盲评测,与新加坡 AI 安全研究所、OpenMined、AVERI 和 MLCommons 合作,在隐私保护环境中用机密基准测试 Gemini Flash Lite。评测借助 Google Cloud 的 Confidential Space,使评测方看不到 Gemini 模型权重,Google 也看不到评测方的测试提示词,从而降低基准污染风险。Google DeepMind 表示,这一做法让独立机构无需交出模型权重或测试题即可严格测试先进模型,并发布了技术报告说明方法与发现。
匹配字段标题