OpenAI开发反作弊工具,用AI写论文可被检测
2024-11-14 【 字体:大 中 小 】
·OpenAI内部既想守住透明度承诺,又想留住用户。调查显示,近1/3的ChatGPT用户会因为反作弊技术而减少使用。
·OpenAI员工担心水印可通过简单技术被删除,比如把文本翻译成另一种语言再转换回来,或者让ChatGPT在文本中添加表情符号,然后手动删除表情。决定谁可以使用水印检测器又是一个挑战。

OpenAI开发反作弊工具,用AI写论文可被检测。
OpenAI开发了一种检测某人何时使用ChatGPT撰写论文的工具,不过由于在透明度承诺和留住用户之间摇摆不定,OpenAI尚未发布该工具。
据《华尔街日报》当地时间8月4日报道,反作弊项目在OpenAI内部争论了大约两年,准备发布的时间就有大约为一年。 OpenAI首席执行官山姆·奥特曼(Sam Altman)和首席技术官米拉·穆拉蒂(Mira Murati)都参与了反作弊工具的讨论。知情人士说,奥特曼鼓励这个项目,但没有推动发布。OpenAI内部在透明度承诺和留住用户之间摇摆不定,它对ChatGPT用户开展的一项调查发现,近1/3的用户会因为反作弊技术而关闭服务,这些受访者表示,如果ChatGPT使用反作弊技术而竞争对手没有,他们会减少使用ChatGPT。
OpenAI发言人表示,公司担心该工具可能会对非英语母语者等群体产生不成比例的影响。“我们正在开发的文本水印方法在技术上很有前景,但在研究替代方案时我们正在权衡重要的风险。”而支持该工具发布的员工则在公司内部表示,与这种技术可能带来的好处相比,这些争论显得苍白无力。
ChatGPT可以预测句子中接下来会出现的token,OpenAI的反作弊工具将略微改变token的选择方式,这些变化会留下水印。这些水印对人眼来说是不明显的,但可以被OpenAI的检测技术发现。根据内部文件,当ChatGPT创建足够多的新文本时,水印的有效性为99.9%。OpenAI今年早些时候进行的一项测试发现,水印技术不会影响ChatGPT的性能。
但一位熟悉此事的OpenAI员工表示,员工们担心水印可通过简单的技术被删除,比如把文本翻译成另一种语言然后再转换回来,或者让ChatGPT在文本中添加表情符号,然后手动删除表情。
OpenAI内部普遍认为,决定谁可以使用这种检测器又是一个挑战。如果拥有权限的人太少,这个工具就没有用处。如果太多人拥有权限,水印技术就可能被破译。OpenAI的员工已经讨论过直接向教育工作者或外部公司提供检测器,帮助学校识别人工智能撰写的论文和抄袭作品。
关于水印工具的讨论始于OpenAI在2022年11月推出ChatGPT之前。2023年1月,OpenAI发布了一种算法,旨在检测人工智能模型编写的文本。但当时的成功率只有26%,7个月后OpenAI取消了它。据《华尔街日报》报道,实际上,外部公司和研究人员也在开发其他工具来检测由人工智能创建的文本,有教师已经使用了这些工具,但有时无法检测到高级大模型编写的文本,有时也会产生误报。
猜你喜欢
岁月不败的风采——巩俐的时尚之路
5852
,微众银行助力小微企业,打通“经济动脉”
9386
10转5派57元!这家A股公司拟大手笔分红,全年现金分红超25亿元
2934
异动快报:ST博信(600083)8月30日10点27分触及涨停板
4437
讲真,这是韩国人“梦寐以求”的样子吧
4820
韩国去年新增就业人口327万人 增幅较2022年大幅收窄
1368
异动快报:蔚蓝生物(603739)7月30日9点52分触及涨停板
8773
重庆两江新区:211万吨!果园港货物吞吐量迎开门红
7696
融捷健康(300247SZ):没有细胞疗法的相关业务
9934
宝马集团副总裁:生产全生命周期、全产业链真正绿色的电动车
3419
邦达亚洲: 美联储降息预期重燃 美元指数持续回调
比特币反弹至94万美元上方,此前一度跌破9万美元
股多多全套指标之龙头基因 龙头启动打板战法 手机版电脑版配置
央行邹澜:持续加大金融资源要素投入 为民营企业发展营造良好货币金融环境
三轮变两轮,才能上王兴的牌桌
美国3年期国债中标收益率低于发行前交易水平
300亿饮料巨头进军半导体,百亿富豪下的什么棋?
发动机制造商普惠数千名机械师周一举行罢工
上海交大“万人大院”重组,今年我国本科专业有这些调整
刚刚!中美,突传大消息!
