Gricea:面向对话式 AI 研究的开放科学平台
Gricea: An Open Science Platform for Conversational AI Research
精选理由
让对话式AI研究可复现、可共享、可扩展,推动知识累积。
AI 摘要
我们需要开展大规模的对话式 AI(CAI)研究,以理解人类行为并指导 CAI 设计。然而,对系统和研究配置的碎片化报告阻碍了研究复现、扩展和知识积累。我们提出 Gricea,这是一个开放科学平台,将研究表示为可配置、可部署的研究制品,使研究人员能够运行、检查、分享和复用这些制品。在对既有 CAI 研究进行形成性分析的基础上,Gricea 将研究流程、面向参与者的系统和对话任务行为结合起来。在一项使用 Gricea 的复现实验中,我们复现了 CUI 2026 论文中 93% 的符合条件的配置;同时,我们还发现 96% 的论文缺少妨碍忠实复现的信息,这进一步说明了 Gricea 的必要性。在一项用户研究中,来自不同背景的研究人员和实践者成功构建了可运行的研究,用于探究各种开放式研究问题。总体而言,这些发现表明,Gricea 通过共享研究制品支持构建、复现和扩展 CAI 研究,并借助开放科学推动累积性知识构建。