发现使用ChatGPT创建文章是否是一个好主意,因为我们对5个人工智能内容检测软件进行了测试。
我们生活在一个人工智能技术蓬勃发展的时代,随着ChatGPT的问世,世界已经掀起了一场风暴。
ChatGPT能够完成广泛的任务,但它做得特别好的一项是写文章。虽然这有许多明显的好处,但它也带来了一些挑战。
在我看来,人工智能生成的书面内容给出版业带来的最大障碍是错误信息的传播。
ChatGPT,或任何其他人工智能工具,可能会生成可能包含事实错误或完全不正确的文章。
想象一下,一个没有医学专业知识的人开了一个医学博客,用ChatGPT来写文章的内容。
他们的内容可能包含只有专业医生才能识别的错误。如果这些博客内容开始在社交媒体上传播,甚至可能在搜索中排名靠前,它可能会对阅读它并接受错误医疗建议的人造成伤害。
ChatGPT带来的另一个潜在挑战是学生如何在他们的书面工作中利用它。
如果一个人仅仅通过运行一个提示就能写出一篇文章(而且不需要做任何实际工作),那就大大降低了教育的质量–因为学习一个主题和表达自己的想法是论文写作的关键。
甚至在ChatGPT推出之前,许多出版商已经在使用人工智能生成内容了。而且,虽然有些人诚实地披露,但其他人可能不会。
另外,谷歌最近改变了关于人工智能生成的内容的措辞,所以它不一定违反公司的准则。
Twitter推文截图
这就是为什么我决定尝试现有的工具,以了解科技行业在检测ChatGPT产生的内容,或一般的人工智能方面的情况。
我在ChatGPT中运行以下提示,生成书面内容,然后通过不同的检测工具运行这些答案。
- “What is local SEO? Why it is important? Best practices of Local SEO.”-“什么是本地SEO?为什么它很重要?本地SEO的最佳实践。”
- “Write an essay about Napoleon Bonaparte invasion of Egypt.”-“写一篇关于拿破仑-波拿巴入侵埃及的文章。”
- “What are the main differences between iPhone and Samsung galaxy?”-“iPhone和三星galaxy的主要区别是什么?”
以下是每个工具的表现。
1. Writer.com
对于第一个提示的答案,Writer.com没有通过,它认定ChatGPT的内容有94%是人为产生的。
writer.com检测ChatGPT生成内容为人类创作
对于第二个提示,它起作用了,并检测到它是AI写的内容。
writer.com检测ChatGPT生成内容为AI生成
对于第三个提示,它再次失败。
writer.com再次检测ChatGPT生成内容为人类创作
然而,当我测试真实的人类所写的文本时,Writer.com确实非常准确地将其识别为100%的人类生成的文本。
2. Copyleaks
Copyleaks在检测这三个内容是人工智能编写的方面做得很好。
Copyleaks检测ChatGPT生成内容为AI生成
3. Contentatscale.ai
Contentatscale.ai在检测所有三个内容是人工智能写的方面做得很好,尽管第一个提示,它给出的是21%的人类分数。
Contentatscale.ai能够大概率检测ChatGPT生成为AI生成
4. Originality.ai
Originality.ai在这三个提示上都做得很好,准确地检测出它们是人工写的。
此外,当我用真实的人类写的文本进行检查时,它确实将其识别为100%由人类产生的,这一点至关重要。
Originality.ai百分百检出ChatGPT生成内容为人工智能生成
你会发现Originality.ai并没有检测到任何抄袭问题。这在未来可能会改变。
随着时间的推移,人们会使用相同的提示来生成AI编写的内容,很可能会产生一些非常相似的答案。当这些文章发表后,它们就会被抄袭工具检测出来。
5. GPTZero
这个非商业工具是由Edward Tian建立的,专门用来检测ChatGPT生成的文章。而它对所有三个提示都做到了这一点,将它们识别为AI生成的。
GPTZero检出ChatGPT内容为AI生成
与其他工具不同,它对检测到的问题进行了更详细的分析,如逐句分析。
-
截图自GPTZero
OpenAI的AI文本分类器
最后,让我们看看OpenAi如何检测它自己生成的答案。
对于第1个和第3个提示,它通过将其归类为 “possibly-AI generated(可能是AI生成的)” 来检测是否有AI参与。
AI文本分类器:Likely AI-generated
但令人惊讶的是,它在第2个提示中失败了,并将其归类为 “unlikely AI-generated(不太可能是AI产生的)”。我确实玩了不同的提示,发现就目前而言,在检查时,上述工具中很少有比OpenAi自己的工具更准确地检测出AI内容的。
AI文本分类器:Unlikely AI-generated
截至本次检查时,他们已经在前一天发布了这个消息。我认为在未来,他们会对它进行微调,它将会工作得更好。
小结
目前的人工智能内容生成工具状况良好,能够检测到ChatGPT生成的内容(成功程度不一)。
有人仍有可能通过ChatGPT生成副本,然后对其进行转述,使其不被发现,但这可能需要几乎和从头开始写一样多的工作–所以好处并不那么直接。
如果你想到用ChatGPT写的文章在谷歌中的排名,请考虑一下。如果我们上面看的工具能够识别它们是人工智能生成的,那么对于谷歌来说,检测它们应该是小菜一碟。
除此之外,谷歌还有质量评估员,他们会通过手动标记发现的文章,来训练他们的系统更好地识别人工智能写的文章。
因此,我的建议是不要把你的内容战略建立在ChatGPT生成的内容上,而只是把它作为一个辅助工具。
原文地址:https://www.wbolt.com/chatgpt-content-detect-ai.html