Turnitin 能識破 QuillBot?看看它如何依然捉到你

Turnitin能偵測Quillbot嗎?簡單來說,是的。但它究竟是怎麼做到的,又為什麼會這樣呢?
從2023年起,Turnitin的AI檢測系統不僅可以識別AI生成的內容,還會對經過像Quillbot這樣的AI工具重新改寫過的文字進行標記。
也就是說,即使你先用ChatGPT(或其他AI模型)創建內容,再利用Quillbot修改措辭,Turnitin仍有很大可能將這些內容追溯到AI生成的來源。但它究竟是檢測哪種文字,又是如何運作的呢?讓我們來探討一下,看看為什麼Quillbot的修改可能沒有你想像中那麼隱秘。
什麼是 Turnitin?
Turnitin 是一項廣受學校與大學青睞的學術工具,用以檢查學生作品中是否存在抄襲或 AI 生成的內容。它會將你的提交與龐大的網頁、學生論文和學術資源數據庫進行比對——如今還結合了 AI 偵測模型,以發現可能由大型語言模型如 ChatGPT 撰寫或改寫的內容。
它所展示的內容包括:
相似度報告(標示出抄襲或高度匹配的文字)
AI 寫作指標(顯示可能由 AI 生成或改寫的內容)
模型是如何訓練的?
Turnitin’s AI detection model 是根據一個包含兩種主要寫作類型——由人類撰寫的原創學術論文和 AI 生成的文本——的大型數據集所開發的。這個數據集涵蓋了廣泛的主題和學術領域,以充分反映學生作品的多樣性。
此外,訓練數據還納入了來自不同地區和群體的寫作樣本,例如以英語為第二語言的學生,以降低檢測中的偏見。通過涵蓋一些不太常見的學科,如人類學、地質學和社會學,該模型旨在各個領域都能夠準確運作。
模型透過學習詞彙選擇與句子結構中的統計模式,來區分 AI 生成的內容與人類撰寫的文字。這種訓練方式使模型能夠超越具體案例進行概括,即使在語言模型不斷演進的情況下,也能準確檢測出 AI 寫作。
什麼是 QuillBot?
QuillBot 是一個多功能寫作平台,提供各種工具協助完成寫作任務,例如語法檢查、摘要生成和改寫文字。
它提供兩項文字改寫功能:QuillBot Paraphrase 以及 AI Humanization Tool,其中後者目前僅支援英文變體(澳洲、加拿大、英國及美國)。這些工具透過調整句型結構、替換同義詞以及修正語法模式,在保留原意的同時改寫文本。
然而,由於改寫幅度通常較輕微,變動往往不大,因此在規避 AI 檢測方面可能成效有限。
Turnitin如何偵測Quillbot?
如前所述,Turnitin不僅能識別AI生成的內容,還能發現利用AI工具(如Quillbot)進行改寫的內容。那麼,其具體運作方式是什麼呢?
逐步解析:
當論文提交後,Turnitin會將文本拆分成多個重疊的片段——通常是一個由2至3句構成的小段。這樣,每個句子就可以在其上下文中進行分析,而不會被孤立起來。
每個片段都會獲得一個介於0到1之間的分數,分數越高則意味著該片段很有可能是由AI生成。
如果某個片段的AI生成得分較高,Turnitin會進行第二層分析來檢查是否存在AI改寫痕跡,從而判斷文本是由AI工具重寫,而非原創生成。
像Quillbot這樣的工具通過調整句子結構、替換同義詞以及修改語法來改寫文本,但這往往會留下某些可辨識的AI“特徵”,例如固定的表達模式或不自然的語言流暢性。
Turnitin的改寫檢測模型能夠捕捉這些細微特徵,並再次以0到1的分數評估文本可能經過AI改寫的概率。
那Turnitin會檢測出Quillbot的改寫嗎?
從上述工作流程可知,Turnitin在識別AI生成與AI改寫內容方面都有不錯的表現。雖然Quillbot的改寫能夠降低觸發傳統抄襲檢測的直接文本匹配,但它並不能完全抹去Turnitin檢測模型設計用來發現的AI痕跡。
Turnitin不只是檢查是否存在重複的片段——它還會分析句子結構、不尋常的詞彙選擇以及文本的整體含義。這些細微的線索往往會在Quillbot的改寫中遺留,特別是在改寫不夠徹底的情況下。
Turnitin是否對Quillbot改寫的內容進行標記,很大程度上取決於原始文本被改動的幅度以及改寫的精細程度。隨著 Turnitin的AI檢測技術 不斷更新和完善,輕微或簡單的改寫越來越難逃過檢測。
Turnitin的AI檢測準確度如何?
那麼,Turnitin在辨識AI撰寫或AI改寫內容方面到底有多可靠呢?根據Turnitin本身的數據,它的準確性相當高,雖然並非十全十美。同時,他們也坦承自身存在一定的局限性。
Turnitin最初用80萬篇在ChatGPT問世前撰寫的學生論文來訓練和測試其系統,從而建立了一個可靠的人類書寫基準,幫助避免因誤判而錯誤指控學生使用AI。
他們的核心目標是儘量降低誤報率,具體情況如下:
低分數伴隨警告。 如果Turnitin測出您的論文中AI生成內容比例不足20%,系統會標示一個星號,提醒結果可能不夠可靠。
誤報情況十分罕見。 即便在論文中實際包含20%或以上AI生成內容的情況下,純人類撰寫的論文被誤判的比例也不足1%。
為了將誤報率控制在極低水平,系統採取了相對保守的策略,因此有時也會漏掉真正的AI生成內容。平均而言,Turnitin承認其可能漏檢大約15%的實際AI生成內容。換句話說,如果系統標記出論文中50%的部分是由AI撰寫,實際比例可能接近65%。
此外,系統至少需要分析300個字的文本,因為短文段較難準確評估。而且,Turnitin最近還改進了對論文引言與結論部分的處理,這兩個部分過去較容易誤觸警報。
那AI改寫文本該如何處理呢?
Turnitin的AI改寫檢測器運作方式略有不同。它只在主檢測器認定文本可能是AI生成之後才會啟動,因此不會直接影響前述的準確數據。
當然,改寫檢測也並非完美無誤,有時可能會:
將普通AI生成的文本誤判為AI改寫
或是將AI改寫的文本誤認為僅僅是AI生成
換句話說,檢測模型有時可能會搞錯所使用的AI“類型”,但通常還是能識別出有AI參與。
使用Quillbot後如何獲取Turnitin報告
如果您使用Quillbot進行了內容改寫,並且想了解Turnitin可能如何評估這些改寫,有幾種方式可以獲取Turnitin報告——但需要注意的是,Turnitin本身並不對個人直接開放使用,而是由大學和學校等機構授權提供服務。
以下是主要的幾個選擇:
1. 透過學校或大學提交
如果您是學生,這是最直接的方式。只需像平時一樣上傳經Quillbot編輯過的論文,提交後,您的指導老師(或依據學校設定由系統)將生成Turnitin報告。根據學校的規定,您通常可在Moodle、Blackboard或Canvas等學習平台上查看該報告。
2. 向指導老師索取報告副本
部分學校允許學生查看相似性與AI報告;若貴校並非如此,您可以請求指導老師與您分享報告,特別是在想確認是否存在無意的抄襲或AI警示時。
3. 使用整合Turnitin的草稿提交(如果提供)
有些學校允許學生在最終截止前提交論文草稿至Turnitin,以便在正式提交前查看相似性分數並做調整,這也是檢驗Quillbot改寫效果的好機會。
4. 使用其他相似性檢測工具預覽結果
如果您無法直接訪問Turnitin,仍可以利用依賴相似檢測系統的第三方工具來預估經Quillbot改寫文本的表現。只要確保所用的平台不會保存您的文件,便能避免日後產生意外的自我抄襲問題。
例如,您可以使用 turnitindetector.com,該網站利用Turnitin官方檢測系統提供即時的抄襲和AI生成內容反饋,其報告包括相似性百分比和AI寫作指標,與學校可能看到的報告類似。
常見問題
使用 QuillBot 改寫時會被判定為抄襲嗎?
會的。雖然 QuillBot 可對文本進行改寫,但它無法完全消除原始文本的痕跡。Turnitin 仍能檢測到重新表述或 AI 生成的模式,特別是在改寫程度不高的情況下。
如果我進行改寫,Turnitin 能辨識出 AI 的痕跡嗎?
在很多情況下會。如果原文由 AI 撰寫,然後進行改寫(即使使用 QuillBot 這樣的工具),Turnitin 的 AI 偵測器依然可以識別出其基本結構並標記出來。
QuillBot 對抗 Turnitin 有效嗎?
效果並不完全。QuillBot 可能有助於降低精確匹配的比例,但並無法保證完全避過檢測。Turnitin 的設計初衷是識別改寫和 AI 撰寫的內容,而不僅僅是尋找原封不動的複製文字。
Turnitin 能否檢測出 ChatGPT 的生成內容?
可以。 Turnitin 能夠檢測出 ChatGPT。其 AI 偵測模型專為識別大型語言模型的特徵而訓練。雖然並不完美,但在識別顯示 AI 生成跡象的較長文本時,依然具有很高的準確性。
最後感想
那麼,Turnitin 能否檢測出 QuillBot 呢?正如本文所探討的——答案是肯定的,而且理由充分。
雖然 QuillBot 透過改寫內容可能有助於降低直接匹配率,但它無法抹去 Turnitin 檢測模型捕捉的底層 AI 模式。
QuillBot 的效果在很大程度上取決於文本改寫的深入程度以及 Turnitin 模型的先進性。目前而言,Turnitin 持續進步,僅僅輕微的改寫不足以保證你能避開檢測。