AI文字檢測軟體能檢測出ChatGPT嗎?

AI文字檢測軟體能檢測出ChatGPT嗎?

發現使用ChatGPT建立文章是否是一個好主意,因為我們對5個人工智慧內容檢測軟體進行了測試。

我們生活在一個人工智慧技術蓬勃發展的時代,隨著ChatGPT的問世,世界已經掀起了一場風暴。

ChatGPT能夠完成廣泛的任務,但它做得特別好的一項是寫文章。雖然這有許多明顯的好處,但它也帶來了一些挑戰。

在我看來,人工智慧生成的書面內容給出版業帶來的最大障礙是錯誤資訊的傳播。

ChatGPT,或任何其他人工智慧工具,可能會生成可能包含事實錯誤或完全不正確的文章。

想象一下,一個沒有醫學專業知識的人開了一個醫學部落格,用ChatGPT來寫文章的內容。

他們的內容可能包含只有專業醫生才能識別的錯誤。如果這些部落格內容開始在社交媒體上傳播,甚至可能在搜尋中排名靠前,它可能會對閱讀它並接受錯誤醫療建議的人造成傷害。

ChatGPT帶來的另一個潛在挑戰是學生如何在他們的書面工作中利用它。

如果一個人僅僅通過執行一個提示就能寫出一篇文章(而且不需要做任何實際工作),那就大大降低了教育的質量–因為學習一個主題和表達自己的想法是論文寫作的關鍵。

甚至在ChatGPT推出之前,許多出版商已經在使用人工智慧生成內容了。而且,雖然有些人誠實地披露,但其他人可能不會

另外,谷歌最近改變了關於人工智慧生成的內容的措辭,所以它不一定違反公司的準則。

Twitter推文截圖

Twitter推文截圖

這就是為什麼我決定嘗試現有的工具,以瞭解科技行業在檢測ChatGPT產生的內容,或一般的人工智慧方面的情況。

我在ChatGPT中執行以下提示,生成書面內容,然後通過不同的檢測工具執行這些答案。

  • “What is local SEO? Why it is important? Best practices of Local SEO.”-“什麼是本地SEO?為什麼它很重要?本地SEO的最佳實踐。”
  • “Write an essay about Napoleon Bonaparte invasion of Egypt.”-“寫一篇關於拿破崙-波拿巴入侵埃及的文章。”
  • “What are the main differences between iPhone and Samsung galaxy?”-“iPhone和三星galaxy的主要區別是什麼?”

以下是每個工具的表現。

1. Writer.com

對於第一個提示的答案,Writer.com沒有通過,它認定ChatGPT的內容有94%是人為產生的。

writer.com檢測ChatGPT生成內容為人類創作

writer.com檢測ChatGPT生成內容為人類創作

對於第二個提示,它起作用了,並檢測到它是AI寫的內容。

writer.com檢測ChatGPT生成內容為AI生成

writer.com檢測ChatGPT生成內容為AI生成

對於第三個提示,它再次失敗。

writer.com再次檢測ChatGPT生成內容為人類創作

writer.com再次檢測ChatGPT生成內容為人類創作

然而,當我測試真實的人類所寫的文字時,Writer.com確實非常準確地將其識別為100%的人類生成的文字。

2. Copyleaks

Copyleaks在檢測這三個內容是人工智慧編寫的方面做得很好。

Copyleaks檢測ChatGPT生成內容為AI生成

Copyleaks檢測ChatGPT生成內容為AI生成

3. Contentatscale.ai

Contentatscale.ai在檢測所有三個內容是人工智慧寫的方面做得很好,儘管第一個提示,它給出的是21%的人類分數。

Contentatscale.ai能夠大概率檢測ChatGPT生成為AI生成

Contentatscale.ai能夠大概率檢測ChatGPT生成為AI生成

4. Originality.ai

Originality.ai在這三個提示上都做得很好,準確地檢測出它們是人工寫的。

此外,當我用真實的人類寫的文字進行檢查時,它確實將其識別為100%由人類產生的,這一點至關重要。

Originality.ai百分百檢出ChatGPT生成內容為AI生成

Originality.ai百分百檢出ChatGPT生成內容為人工智慧生成

你會發現Originality.ai並沒有檢測到任何抄襲問題。這在未來可能會改變。

隨著時間的推移,人們會使用相同的提示來生成AI編寫的內容,很可能會產生一些非常相似的答案。當這些文章發表後,它們就會被抄襲工具檢測出來。

5. GPTZero

這個非商業工具是由Edward Tian建立的,專門用來檢測ChatGPT生成的文章。而它對所有三個提示都做到了這一點,將它們識別為AI生成的。

GPTZero檢出ChatGPT內容為AI生成

GPTZero檢出ChatGPT內容為AI生成

與其他工具不同,它對檢測到的問題進行了更詳細的分析,如逐句分析。

截圖自GPTZero

截圖自GPTZero

OpenAI的AI文字分類器

最後,讓我們看看OpenAi如何檢測它自己生成的答案。

對於第1個和第3個提示,它通過將其歸類為 “possibly-AI generated(可能是AI生成的)” 來檢測是否有AI參與。

AI文字分類器:Likely AI-generated

AI文字分類器:Likely AI-generated

但令人驚訝的是,它在第2個提示中失敗了,並將其歸類為 “unlikely AI-generated(不太可能是AI產生的)”。我確實玩了不同的提示,發現就目前而言,在檢查時,上述工具中很少有比OpenAi自己的工具更準確地檢測出AI內容的。

AI文字分類器:Unlikely AI-generated

AI文字分類器:Unlikely AI-generated

截至本次檢查時,他們已經在前一天釋出了這個訊息。我認為在未來,他們會對它進行微調,它將會工作得更好。

小結

目前的人工智慧內容生成工具狀況良好,能夠檢測到ChatGPT生成的內容(成功程度不一)。

有人仍有可能通過ChatGPT生成副本,然後對其進行轉述,使其不被發現,但這可能需要幾乎和從頭開始寫一樣多的工作–所以好處並不那麼直接。

如果你想到用ChatGPT寫的文章在谷歌中的排名,請考慮一下。如果我們上面看的工具能夠識別它們是人工智慧生成的,那麼對於谷歌來說,檢測它們應該是小菜一碟。

除此之外,谷歌還有質量評估員,他們會通過手動標記發現的文章,來訓練他們的系統更好地識別人工智慧寫的文章。

因此,我的建議是不要把你的內容戰略建立在ChatGPT生成的內容上,而只是把它作為一個輔助工具。

評論留言