IT之家 11 月 24 日消息,据《自然》杂志当地时间周三报道,本月初发表在《美国医学会眼科学杂志》上的一篇论文中,作者使用了聊天机器人 GPT-4 和高级数据分析工具 ADA 创建了一个虚假的临床试验数据集,从而支持一个“未经证实”的科学主张。
IT之家注:ADA 是一种结合了 Python 的模型,可用来执行统计分析、创建可视化数据。
报道称,论文作者要求 GPT-4 和 ADA 生成一个有关角膜炎患者的数据集,并让它支持“深层前部角膜移植(DALK)在视力和眼睛成像测试方面比穿透性角膜移植(PK)效果更好”的结论。
由 AI 生成的数据包括 160 名男性参与者和 140 名女性参与者的实验结果,并支持了上述结论,然而这个结果与真正临床试验显示的结果不符。
专家对该虚假数据集进行了详细检查,并发现其中存在明显捏造迹象。英国曼彻斯特大学生物统计学家杰克・威尔金森表示,“要创建至少表面上看似可信的数据集似乎很容易,在未经训练的人看来,这‘肯定是’一个真实的数据集。”
参与这份研究报告的作者承认,这一数据集在经过“仔细观察”之后就可发现其中存在的缺陷,但如果读者快速查看这些数据集的话,就“很难识别出”数据中的非人类来源。
由 AI 编造的“可信数据”增加了研究人员和期刊编辑对学术研究诚信的担忧。《EMBO Reports》杂志主编 Bernd Pulverer 表示,“现实中的同行评审往往不会对数据进行全面的重新分析,因此不太可能发现利用人工智能精心设计的完整性漏洞。”他补充说,期刊需要更新质量检查,以识别 AI 生成的合成数据。