讨论
同一份用户信息需要按用途分别审查,并根据决策时可获得的信息选择对照。测量改善、用户收益和长期复用各有不同的证据要求;记录理由与复审条件,才能检查和修正判断。
案例由作者整理,尚无独立验证。分析仅使用一个数据集、一次会话和同一界面,没有独立确认队列,也未预注册。离线结果不能证明实际收益、负担或公平性。
回到屏幕前,研究者面对的是一个人在报告自己的感受。让记录更接近参考,只回答了测量上的一个问题。是否据此调整系统、把画像留到下次,仍需分别提供证据;PersonaGuard 帮助团队记录这些判断,并在新证据出现时重新审查。
局限与后续验证
当前证据的局限
- 案例在协议开发后由作者选取并编码,尚无独立编码验证或来源论文作者的背书。
- 模型在单一数据集上开发,没有未接触的确认队列;本研究与主残差门槛未预注册。
- 单次会话、单一界面、重叠参考,以及缺失的人群与传感质量资料,限制泛化和持续性结论。
- 离线误差与计算出的标注时间,不能证明真实使用中的收益、伤害、负担、隐私、控制或公平性。
下一步如何验证
- 由独立研究者编码和解析案例,记录分歧,测量时间、易用性与决策质量。
- 开展前瞻性交互研究,对比透明基线与可逆调整,事先规定收益、伤害、负担和退出标准。
- 使用独立人群与刺激材料,检验共享参考依赖下的不确定性,并补充跨会话、跨界面测量。