SuperAPI AI 工具集

chi-artifact-evaluation

数据与分析

查看项目

更新于 10-15 20:08

技能介绍

用途:为 ACM CHI 论文打包配套产物(prototype、研究工具、编码本、数据集、分析代码、视频证据、设计文件、AI 提示与模型配置),面向两类读者——只有五分钟的匿名评审,以及未来真正要复用材料的研究者。资料指出 CHI Papers track 在已核查的周期(2026、2027)未设独立的产物评估委员会或 badge track,具体每年需核实;因此无人替你认证产物,也无人替你确保评审能核查它们。

主要能力:先做产物清单(inventory),逐项决定“现在送审 / 日后发布 / 有理由地暂不提供”;撰写面向评审的根 README 声明映射(claims map),如“§5.1 的声明 → analysis/h1_test.R → 表 2”;每条涉及代码的声明提供一条命令并随附环境(requirements.txt、renv.lock);提供不依赖作者硬件的演示路径;全程匿名(无 .git、无元数据、无具名账户、清除路径与输出中的用户名)。

使用方式:评审归档随九月同一截止日提交。上传前对最终 ZIP 做冷启动模拟,资料给出示例命令: rm -rf /tmp/ae && unzip -q supplement.zip -d /tmp/ae && cd /tmp/ae cat README* | head -30 grep -rEil 'author|university|(^|[^a-z])lab' --include='*.md' . | head time bash run_minimal_demo.sh

录用后发布是另一项工作:在出版就绪阶段(CHI 2027 为二月)以真实署名重建产物集,存入持久化平台(DL supplemental、OSF、Zenodo、机构归档)并带 DOI;明确许可(代码 MIT/Apache/GPL,数据与工具 CC BY 或 CC BY-NC),记录第三方限制;发布前再次严格去标识化;按 camera-ready 打标签(as-published)后再另分支开发。

限制与注意:资料未提供价格、平台或额外收费信息;CHI 是否每年设产物评估需逐年确认。诚实说明无法提供的部分(如合作方基础设施不可发布,可提供完整客户端、API 契约与模拟服务器)比用死代码掩盖缺口更可信。时间安排上,在写论文 §4–5 时构建声明映射 README,T−1 周冻结评审归档,录用时记下二月重建发布。输出格式涉及 [Inventory]、[Claims map]、[Five-minute test]、[Anonymity]、[Release plan] 五类检查项。