OpenAI开发反作弊工具,用AI写论文可被检测
2024-11-14 【 字体:大 中 小 】
·OpenAI内部既想守住透明度承诺,又想留住用户。调查显示,近1/3的ChatGPT用户会因为反作弊技术而减少使用。
·OpenAI员工担心水印可通过简单技术被删除,比如把文本翻译成另一种语言再转换回来,或者让ChatGPT在文本中添加表情符号,然后手动删除表情。决定谁可以使用水印检测器又是一个挑战。

OpenAI开发反作弊工具,用AI写论文可被检测。
OpenAI开发了一种检测某人何时使用ChatGPT撰写论文的工具,不过由于在透明度承诺和留住用户之间摇摆不定,OpenAI尚未发布该工具。
据《华尔街日报》当地时间8月4日报道,反作弊项目在OpenAI内部争论了大约两年,准备发布的时间就有大约为一年。 OpenAI首席执行官山姆·奥特曼(Sam Altman)和首席技术官米拉·穆拉蒂(Mira Murati)都参与了反作弊工具的讨论。知情人士说,奥特曼鼓励这个项目,但没有推动发布。OpenAI内部在透明度承诺和留住用户之间摇摆不定,它对ChatGPT用户开展的一项调查发现,近1/3的用户会因为反作弊技术而关闭服务,这些受访者表示,如果ChatGPT使用反作弊技术而竞争对手没有,他们会减少使用ChatGPT。
OpenAI发言人表示,公司担心该工具可能会对非英语母语者等群体产生不成比例的影响。“我们正在开发的文本水印方法在技术上很有前景,但在研究替代方案时我们正在权衡重要的风险。”而支持该工具发布的员工则在公司内部表示,与这种技术可能带来的好处相比,这些争论显得苍白无力。
ChatGPT可以预测句子中接下来会出现的token,OpenAI的反作弊工具将略微改变token的选择方式,这些变化会留下水印。这些水印对人眼来说是不明显的,但可以被OpenAI的检测技术发现。根据内部文件,当ChatGPT创建足够多的新文本时,水印的有效性为99.9%。OpenAI今年早些时候进行的一项测试发现,水印技术不会影响ChatGPT的性能。
但一位熟悉此事的OpenAI员工表示,员工们担心水印可通过简单的技术被删除,比如把文本翻译成另一种语言然后再转换回来,或者让ChatGPT在文本中添加表情符号,然后手动删除表情。
OpenAI内部普遍认为,决定谁可以使用这种检测器又是一个挑战。如果拥有权限的人太少,这个工具就没有用处。如果太多人拥有权限,水印技术就可能被破译。OpenAI的员工已经讨论过直接向教育工作者或外部公司提供检测器,帮助学校识别人工智能撰写的论文和抄袭作品。
关于水印工具的讨论始于OpenAI在2022年11月推出ChatGPT之前。2023年1月,OpenAI发布了一种算法,旨在检测人工智能模型编写的文本。但当时的成功率只有26%,7个月后OpenAI取消了它。据《华尔街日报》报道,实际上,外部公司和研究人员也在开发其他工具来检测由人工智能创建的文本,有教师已经使用了这些工具,但有时无法检测到高级大模型编写的文本,有时也会产生误报。
猜你喜欢
【机构调研记录】睿远基金调研爱迪特、长安汽车
8877
港股异动 数字货币ETF全线走高 比特币一度突破65万美元 传以太坊现货ETF将于下周二上市
784
合肥工业大学2023届毕业生都去哪了?前50的重点就业单位有哪些?
2518
蓝丰生化(002513)2月1日主力资金净卖出4988万元
7225
谷爱凌又夺金!1天切换3种模式 赛前赶2篇论文
7902
周一美股盘前你需要了解的全球要闻
1081
中俄新合作,让美国心头一颤,多年布局、数千亿投资,要打水漂?
1395
泰尔股份(002347SZ):上半年净亏损99155万元 同比转亏
4095
河北省发力:今年规划超2万套保障房,助力楼市向好
9332
“踏血寻梅案”始末:花季少女误入歧途,被人杀害后肢解碎尸
7523
4月18日香港周生生黄金价格36970港币两
五一档票房743亿
镑美6月19日最新技术分析
邦达亚洲: 美联储降息预期重燃 美元指数持续回调
比特币反弹至94万美元上方,此前一度跌破9万美元
股多多全套指标之龙头基因 龙头启动打板战法 手机版电脑版配置
央行邹澜:持续加大金融资源要素投入 为民营企业发展营造良好货币金融环境
三轮变两轮,才能上王兴的牌桌
美国3年期国债中标收益率低于发行前交易水平
300亿饮料巨头进军半导体,百亿富豪下的什么棋?
