首页 新闻 始终识别AI生成的文本的前5个AI内容检测器

始终识别AI生成的文本的前5个AI内容检测器

2025年05月04日
WillCarter
0

早在2023年1月,我就深入研究了AI生成的窃的迷人世界和旨在对抗它的工具。当时,生成AI周围的嗡嗡声刚刚开始蒸汽。快进到现在,我手上有一个全新的更新,反映了这个快速发展的领域的最新发展。

当我第一次将GPT探测器放入测试时,我得到的最好的是三个可用的检查器之一的准确率66%。快进到2025年2月,我已经扩展了测试,最多包括10个不同的检查器。结果?他们中的三个完美地钉了。仅几个月后,这个数字跃升至五个。显然,这些工具一天都在变得更加清晰。

我正在测试什么以及我如何做

在深入研究之前,让我们澄清窃我们的意思。根据Merriam-Webster的说法,“窃”的意思是“窃取并删除(另一个人的想法或单词)自己;使用(他人的生产)而不归功于来源”。此定义当然适用于AI生成的内容。如果有人使用诸如notion ai或chatgpt的AI工具,然后将输出作为自己的输出而不信任AI,那么它仍然是窃,简单而简单。

为了评估这些AI探测器,我使用五个文本块:我写的两个,三个由Chatgpt生成。我分别运行每个块穿过每个检测器,并指出该工具是否正确地将文本识别为人类或AI生成的文本。如果检测器给出一个百分比,我认为任何超过70%的东西都是人类或AI起源的有力指标。如果您想自己尝试一下,可以在此文档中找到文本块。

总体结果

我已经在10个不同的探测器上进行了一系列的五项测试,这意味着我已经进行了50个单独的测试。是的,它需要很多咖啡!我测试的探测器包括Brandwell,Copyleaks,GPT-2输出探测器,Gptzero,Gptzero,Grammarly,Monica,Simpality.ai,Quillbot,undectable.ai,Writer.com和Zerogpt。

在此更新中,我将Copyleaks和Monica添加到了混音中,同时丢弃了Witrefull,因为它停止了其GPT检测器。内容守护者想要进来,但我无法及时设置帐户进行测试。

这是总体结果的快照。如您所见,五个检测器设法正确地识别了所有五个文本块是人类或AI生成的。

2025-04-content-detector-001 David Gewirtz/Zdnet

我还试图通过比较六个不同的测试跑步的结果来发现随着时间的改进趋势。尽管我增加了探测器的数量并换了一些探测器,但没有明确的改进模式。唯一一致的结果是,在所有检测器和日期中,测试5被可靠地鉴定为人类。

2025-04-content-detector-002 David Gewirtz/Zdnet

我将继续测试,并希望将来看到更一致的可靠性。但是,即使有一些完美的分数,我也不会完全相信这些工具来验证人工编写的内容。事实证明,非本地演讲者的写作常常被误认为是AI生成的内容。

即使这次我自己的写作大部分被确定为人类,但一个探测器(Gptzero)太不确定了,无法判断,另一个探测器(Copyleaks)错误地将其标记为AI生成的。在不同系统之间,结果可能是不一致的。

每个AI内容检测器的执行方式

Brandwell AI内容检测(准确40%)

该工具最初是由内容大规模开发的,现在是根据AI的营销服务公司Brandwell.ai运行的。不幸的是,其准确性非常低。正如您在此屏幕截图中看到的那样,它无法区分测试2中的人类和AI内容:

Brandwell David Gewirtz/Zdnet的屏幕截图

海laks(准确性80%)

具有讽刺意味的是,当我测试的一半以上的探测器做得更好时,Copylaks拥有“最精确的AI检测器,其精度超过99%”。但是,嘿,营销人员将是营销人员,对吗?该公司主要迎合教育机构,出版商和企业,旨在确保内容独创性和学术完整性。

海与串联 David Gewirtz/Zdnet的屏幕截图

GPT-2输出探测器(准确性60%)

该工具是使用由纽约的AI公司拥抱Face管理的机器学习中心开发的。尽管该公司已经获得了4000万美元的资金来开发其自然语言库,但GPT-2检测器似乎是使用拥抱Face Transformers库的用户创建的工具。

GPT2 David Gewirtz/Zdnet的屏幕截图

gptzero(准确性80%)

自我第一次测试以来,GPTZERO已大大增长。最初,这是一个裸露的网站,甚至还不清楚它是公司还是激情项目。现在,这是一个成熟的操作,其任务是“保护人类的事物”。他们提供AI验证工具和窃检查器。但是,其性能有所下降。在我的最后两次跑步中,它正确地将我的文本确定为人类生成的,但是这次,它错误地将其标记为AI生成。

gptzero David Gewirtz/Zdnet的屏幕截图

语法(准确40%)

Grammarly以帮助作家制作语法正确的内容而闻名,但这不是我在这里测试的内容。它还检查窃和AI生成的内容。在语法检查器中,您会在低右角找到窃和AI文本检查按钮:

语法 David Gewirtz/Zdnet的屏幕截图

尽管Grammarly的Ai-Check准确性很差,但它正确地确定了先前发表的测试文本。

莫妮卡(准确性100%)

莫妮卡(Monica)是现场的新来者,提供了一名多种服务的AI助手。用户可以从不同的大型语言模型中进行选择。该公司声称莫妮卡是“在线最佳AI检测器”,但它似乎通过Zerogpt,Gptzero和Copyleaks等其他检测器运行内容。有趣的是,GptZero和Copyleaks在我的测试中的表现不佳,但是Monica和Zerogpt -Did。它获得了完美的分数,但我将在以后的测试中关注它。

莫妮卡 David Gewirtz/Zdnet的屏幕截图

原创性。EA(准确100%)

Simpality.ai是一家商业服务,可以兼作AI和窃的检查器。该公司出售使用信用额;我在本文中使用了30个学分。他们提供2,000个学分,每月$ 12.95。我通过系统运行了1,400个单词,仅使用了每月分配的1.5%。

独创性 David Gewirtz/Zdnet的屏幕截图

QuillBot(准确性100%)

在我以前的测试中,Quillbot的结果无处不在 - 同一文本的多重运行产生的分数截然不同。但是,这次它始终是准确的,并得分为100%。我将在几个月后回来查看它是否可以保持这种表现。

QuillBot David Gewirtz/Zdnet的屏幕截图

无法检测到的ai(准确100%)

无法检测到的AI具有“人性化” AI生成的文本的能力,因此检测器不会标记它。作为专业作家和教育工作者,我发现此功能有些令人不安 - 感觉就像作弊。但是,它们也有一个AI检测器,表现出色。

无法检测到 David Gewirtz/Zdnet的屏幕截图

AI检测器通过了所有五项测试。有趣的是看到指标显示其他检测器的标志。该公司解释说:“我们开发了以这些主要检测器建模的多种检测器算法,以提供联合和共识的方法。它们并未直接融入列出的模型中;相反,这些模型是根据它们生成的结果进行了培训。当它说这些模型标记时,它是基于这些模型创建和更新这些模型的。”

我确实有一个关于OpenAi旗帜的疑问,因为由于精确度较低,OpenAI的内容检测器在2023年停产。尽管如此,无法检测到的。IAI正确地检测到了所有五项测试,获得了完美的100%。

writer.com AI内容检测器(准确40%)

Writer.com是一项为公司团队生成AI写作的服务。它的AI内容检测器工具可以扫描生成的内容,但其准确性较低。即使Chatgpt生成了五个测试中的三项,它将每个文本块都标识为人文编写。

作家 David Gewirtz/Zdnet的屏幕截图

Zerogpt(准确100%)

自从我上次评估以来,Zerogpt已经走了很长一段路。那时,它缺乏清晰的公司身份,并且对Google广告感到困惑。现在,这是一项带有透明定价和联系信息的抛光SaaS服务。它的准确性也有所提高,这次从上次80%跃升到完美的100%。

Zerogpt David Gewirtz/Zdnet的屏幕截图

是人类,还是人工智能?

你呢?您是否尝试过AI内容检测器,例如Copyleaks,Monica或Zerogpt?他们在您的经验方面有多准确?您是否使用这些工具来保护学术或编辑的完整性?您是否遇到过将人工写作的作品错误地标记为AI的情况?您是否比其他探测器比其他探测器评估了独创性?在下面的评论中让我们知道。

每天与我们的技术新闻通讯一起在收件箱中获取早晨的顶级故事。

您可以在社交媒体上关注我的日常项目更新。请务必订阅我的每周更新新闻通讯,并在@davidgewirtz上的Twitter/x上关注我,在Facebook上的 @davidgewirtz,lackigham.com/davidgewirtz上的Facebook.com/davidgewirtz上, @davidgewirtz.com上的Instagram上,在bluesky上,在youtube.com/davidewigne.com/davidewidewignewignewigne.com/davidewiftz.com上。

相关文章
LLM医疗功能开发:通过创新转化生育护理 LLM医疗功能开发:通过创新转化生育护理 由于人工智能(AI)的融合,革命性的生育诊所革命性的生育诊所正在见证一种转变,尤其是在生育诊所中。本文探讨了大型语言模型(LLMS)以及SQL和GraphQL技术的如何增强
YC当前队列中的四分之一的创业公司的代码库几乎完全由AI生成 YC当前队列中的四分之一的创业公司的代码库几乎完全由AI生成 AI在代码生成中的作用不断增长:Y组合者的见解正在迅速发展,AI扮演着越来越重要的角色。在Y Combinator的最新同伙,著名的Silicon Valley Startup Accelerato中,这一趋势的一个显而易见的例子很明显
拥抱脸推出AI漫画厂:综合指南 拥抱脸推出AI漫画厂:综合指南 如果您曾经梦想过制作自己的漫画,但对所需的艺术技能感到恐惧,那么AI可能只是您的新最好的朋友。 AI漫画厂在拥抱的脸上举办,是一个改变游戏规则的人,使每个人都可以访问漫画的创作。本指南将引导您完成这一创新方式
评论 (0)
0/200
返回顶部
OR