OpenAI开发反作弊工具,用AI写论文可被检测
2024-11-14 【 字体:大 中 小 】
·OpenAI内部既想守住透明度承诺,又想留住用户。调查显示,近1/3的ChatGPT用户会因为反作弊技术而减少使用。
·OpenAI员工担心水印可通过简单技术被删除,比如把文本翻译成另一种语言再转换回来,或者让ChatGPT在文本中添加表情符号,然后手动删除表情。决定谁可以使用水印检测器又是一个挑战。

OpenAI开发反作弊工具,用AI写论文可被检测。
OpenAI开发了一种检测某人何时使用ChatGPT撰写论文的工具,不过由于在透明度承诺和留住用户之间摇摆不定,OpenAI尚未发布该工具。
据《华尔街日报》当地时间8月4日报道,反作弊项目在OpenAI内部争论了大约两年,准备发布的时间就有大约为一年。 OpenAI首席执行官山姆·奥特曼(Sam Altman)和首席技术官米拉·穆拉蒂(Mira Murati)都参与了反作弊工具的讨论。知情人士说,奥特曼鼓励这个项目,但没有推动发布。OpenAI内部在透明度承诺和留住用户之间摇摆不定,它对ChatGPT用户开展的一项调查发现,近1/3的用户会因为反作弊技术而关闭服务,这些受访者表示,如果ChatGPT使用反作弊技术而竞争对手没有,他们会减少使用ChatGPT。
OpenAI发言人表示,公司担心该工具可能会对非英语母语者等群体产生不成比例的影响。“我们正在开发的文本水印方法在技术上很有前景,但在研究替代方案时我们正在权衡重要的风险。”而支持该工具发布的员工则在公司内部表示,与这种技术可能带来的好处相比,这些争论显得苍白无力。
ChatGPT可以预测句子中接下来会出现的token,OpenAI的反作弊工具将略微改变token的选择方式,这些变化会留下水印。这些水印对人眼来说是不明显的,但可以被OpenAI的检测技术发现。根据内部文件,当ChatGPT创建足够多的新文本时,水印的有效性为99.9%。OpenAI今年早些时候进行的一项测试发现,水印技术不会影响ChatGPT的性能。
但一位熟悉此事的OpenAI员工表示,员工们担心水印可通过简单的技术被删除,比如把文本翻译成另一种语言然后再转换回来,或者让ChatGPT在文本中添加表情符号,然后手动删除表情。
OpenAI内部普遍认为,决定谁可以使用这种检测器又是一个挑战。如果拥有权限的人太少,这个工具就没有用处。如果太多人拥有权限,水印技术就可能被破译。OpenAI的员工已经讨论过直接向教育工作者或外部公司提供检测器,帮助学校识别人工智能撰写的论文和抄袭作品。
关于水印工具的讨论始于OpenAI在2022年11月推出ChatGPT之前。2023年1月,OpenAI发布了一种算法,旨在检测人工智能模型编写的文本。但当时的成功率只有26%,7个月后OpenAI取消了它。据《华尔街日报》报道,实际上,外部公司和研究人员也在开发其他工具来检测由人工智能创建的文本,有教师已经使用了这些工具,但有时无法检测到高级大模型编写的文本,有时也会产生误报。
猜你喜欢
东杰智能:8月7日高管梁燕生减持股份合计20万股
2625
2024年4月5日福建厦门同安闽南果蔬批发市场价格行情
9212
莱美药业:3月6日融券卖出1900股,融资融券余额119亿元
409
中金:予比亚迪股份“跑赢行业”评级 目标价266港元
2234
荣晟环保(603165SH)拟投约21亿元建设新总部大楼及工业纸管项目
317
证券代码:002419 证券简称:天虹股份 公告编号:2024-007
4198
泛茶:通过茶文化讲述中国制造故事
3971
千亩征地补偿方案确定!珠海三家村20年土地纠纷终迎结局
4703
英伟达突传利空!摩根士丹利:大幅下调!发生了什么?
9211
小型纯电燃起价格战!五菱缤果PLUS切入8万级市场 ,你拒绝得了吗
5477
4月18日香港周生生黄金价格36970港币两
五一档票房743亿
镑美6月19日最新技术分析
邦达亚洲: 美联储降息预期重燃 美元指数持续回调
比特币反弹至94万美元上方,此前一度跌破9万美元
股多多全套指标之龙头基因 龙头启动打板战法 手机版电脑版配置
央行邹澜:持续加大金融资源要素投入 为民营企业发展营造良好货币金融环境
三轮变两轮,才能上王兴的牌桌
美国3年期国债中标收益率低于发行前交易水平
300亿饮料巨头进军半导体,百亿富豪下的什么棋?
