究竟 ChatGPT 生成內容「醒」,定係 AI 內容偵測工具「勁」,大家一齊看看 3 個內容生成方法 4 個 AI 內容偵測工具
測試完之後得到這個結果我試了四種工具,然後用三種內容生成的方法去測試,你會見到 Chat GPT 在 4 個 AI 內容偵測的工具全部都不成功的,失敗的;然後我嘗試去改善內容再去挑戰這 4 個 AI 內容測試的工具,挑戰都是失敗的……
最後用 quilbot 去做一些我們稱為 rephrase 的內容後,在 4 個測試工具中,有 3 個都成功過關,唯一一個是失敗的,以下演示整個測試的過程是怎樣做的
從 ChatGPT 開始
我現在會展示給大家看,開頭我會用 ChatGPT 這是第一個步驟,我純粹叫它寫一篇內容。
用 Writer 內容偵測
那篇內容是怎樣去“減肥”,它幫我寫了一些字,之後我會用 Writer 這個 AI 內容偵測工具去放一些內容進去我現在可以示範給大家看
我會放一些純粹用 ChatGPT 的內容,然後下面有一按 Analysis 的內容,會看到它跟我說有大約 14% 的內容應該是用人寫
但它知道是 AI 去偵測,因為只有14%
GPTzero.me 內容偵測
都是可以放一些內容進去,下面有一個按鈕叫 Get Result,下面它就會跟我說“你的內容是有一些 AI 的內容”
它也會 Highlight 告訴我,最後也有一個總結,很大機會是用 AI 去寫的,不是用人寫的
AI Text Classifier 內容偵測
第三個工具我去測試的就是 OpenAI 自己出了一個偵測是不是 AI 內容的工具叫做 AI Text Classifier
在這個工具裡面我又放一些文字進去,然後按 Submit
其實它會分幾個類別就是用人寫的、AI 寫的,還是它可能都未必知道的,在這裡的內容它就很清晰跟我說應該都是用 AI 去寫的
Content at Scale 內容偵測
第四個也有名的叫做 Content at Scale,我就 Copy 剛才的內容進去然後就讓它去 Check 究竟是人寫還是機械寫
你會看到顯示的數據,它說用人寫的機會是 0% 最主要都是用機械寫的,這個測試就是我講的第一行測試就是所有用 ChatGPT 生成的內容
四個內容偵測的工具都能夠成功知道的
影片演示
第二個測試,什麼叫做改善版呢?
我在網上看到有些人說,你打一些文字就是叫它寫得比較真人化一點
同樣的,我就會生成一些內容出來,就是應該是比較人一點的,沒有那麼機器的,我也把那些內容丟回那四個
AI 內容測試的偵測器那裡結果發現就算叫做內容改善了;都是失敗的
就是都會知道是真是 AI 內容,那到什麼時候下面才會不知道呢?
第三個測試
好了,這個就是那一線的曙光,我把那些內容用這個叫做 quilbot 就丟了進去這裡,它左手邊看到有一堆的工具有 Rephrase 有 Summary 這些,我把這些內容 Rephrase 了
我現在用的是 Premium 版的,所以內容可以支撐得比較長一點,還有上面有很多種的寫法
我懷疑我把一些寫法如果轉了可能它能夠偵測多 AI 內容的難度,其實又會再提高,我就沒有選擇
我純粹把內容放在這裡然後你會看到右手邊,它開始給我 Rephrase 了一些內容,我就把這些 Rephrase了的內容,我再丟一次進去這 4 個 AI 內容偵測的工具裡
Rephrase 內容后再次內容偵測
Writer
你發現 Writer 已經檢查不到,它以為已經是人寫的了就是我如果把這篇的內容丟進去第一個去檢查
究竟是人寫還是機寫的工具的時候,它就會跟我說應該是人寫的
GPTzero.me
它反而是比較聰明的,就是我去做現在這個檢查的時候,它會跟我說應該都是 AI 來的
OpenAI
自己去製造一個工具出來去檢查那些內容是不是人寫的,這個就有一點點相確的,它上面那個例子就是說要麼就是人寫;要麼就是電腦寫;要麼就是不清楚
你會看到它出來的答案是 Unclear 的,其實它就不是很清楚是人寫還是 AI 寫的,所以由於它檢查不到是AI寫的話,我當它 Pass 了
Content at Scale
Content at Scale 這個檢查,你會看到它說 99% 的機會都是人寫的所以整個的測試內容生成和 AI 內容的偵測來說
小結
用這 4 個 AI 偵測的工具,這三種的內容生成的方法的時候得出就是原來純粹用 GPT Gen 的內容很大機會都過不了關的
所以你應該也不會過到 Google 關的,而經過改了一些 Rephrase 一些段落的時候就會有大一些機會改到
但是大一些機會改到,這些都不是 Google 來的,到最後真的過不過 Google 呢……(這個就很難猜)
但是我就不會建議你真的整篇內容都真的用 AI 去寫,可能它會做一些的協助你令到你寫內容的速度會提升你就會安全一些