AIが書いた文章は見分けられるのか｜検出ツールの限界を提供元の表記で確かめた

「AIっぽい」と言われた、あるいはレポートで「AI検出ツールに引っかかった」と言われた——そんな相談が増えている。だがAI検出ツールの結果は、そのまま「事実」として扱ってよいものなのだろうか。

結論を先に：どの検出ツールも「単独の根拠にしない」と提供元自身が言っている

先に結論を言うと、AI文章検出ツールは「白か黒か」を保証する道具ではない。OpenAIは自社の検出ツールを精度不足を理由に提供終了し、Turnitin・GPTZeroも公式ページの中で自ら限界を明記している。文部科学省と東京大学も、検出結果を「過信しないこと」を教育現場に求めている。

（各社とも確認日2026-08-27）

この記事の根拠

OpenAI・Turnitin・GPTZeroの公式ページと、文部科学省・東京大学・Vanderbilt大学の公式文書だけを一次情報として2026-08-27に確認した。第三者の実験値は使わず、検出をすり抜ける方法も扱わない。

講義：検出ツールの「精度」を読むときに外してはいけない3つの視点

①数字には必ず「条件」が付いている

Turnitinの「偽陽性1%未満」は「AI文章が20%を超える文書」に限った数値で、文単位では約4%まで上がる。条件を外して引用すると実態より高精度に見えてしまう。まとめると、数字を見たら「何に対する何%か」を確認する。

②高精度の主張と限界の告白は同じページに同居する

GPTZeroは「99% Accuracy」を掲げながら、同じFAQで「100%正確なAI検出ツールは存在しない」とも書いている。まとめると、宣伝文句と限界表記はセットで読む。

③日本語での精度は、各社とも公表していない

OpenAIは「英語以外の言語では著しく性能が落ちる」と明記していたが、Turnitin・GPTZeroは日本語文章に対する精度の数値を確認できなかった。まとめると、「日本語は誤判定されやすい」と断定できる材料は今のところ無い。数字の「条件」を外さない読み方はChatGPTの要約はどこまで信じられるかでも扱っている。

OpenAI：自社の検出ツールを取り下げた

OpenAIは2023年1月31日に「AI Text Classifier」を公開したが、2023年7月20日付で提供を終了した。

「As of July 20, 2023, the AI classifier is no longer available due to its low rate of accuracy.」

参考訳:2023年7月20日をもって、このAI分類器は精度の低さのため提供を終了した。（出典:openai.com・確認日2026-08-27）

稼働していた当時の評価値も、OpenAI自身が「完全には信頼できない」と明記した上で公表していた。

「Our classifier is not fully reliable. In our evaluations on a “challenge set” of English texts, our classifier correctly identifies 26% of AI-written text (true positives) as “likely AI-written,” while incorrectly labeling human-written text as AI-written 9% of the time (false positives).」

参考訳:私たちの分類器は完全には信頼できない。英語テキストの「チャレンジセット」での評価では、AIが書いたテキストの26%しか正しく判定できず、人間の文章を9%の割合で誤ってAI作と判定した。この26%・9%は、すでに提供終了したツールの、英語限定の過去の評価値である。（出典・確認日は上記と同じ）

OpenAIの教育者向け公式ヘルプページはさらに率直で、「Do AI detectors work? In short, not in our experience.」（AI検出ツールは機能するか。一言でいえば、私たちの経験では機能しない）と明記し、シェイクスピアの文章を誤ってAI生成と判定した事例も認めている（出典:help.openai.com・確認日2026-08-27）。AIそのものの限界という観点ではChatGPTハルシネーション対策も参考になる。

Turnitin：「1%未満」は条件つきの数字

Turnitinは、文書単位の偽陽性率について公式FAQで次のように説明している。

「We strive to maximize the effectiveness of our detector while keeping our false positive rate – incorrectly identifying fully human-written text as AI-generated – under 1% for documents with over 20% of AI writing. In other words, we might flag a human-written document as AI-written for one out of every 100 fully-human written documents.」

参考訳:AI文章が20%を超える文書について、偽陽性率（完全に人間が書いた文章をAI作と誤判定する率）を1%未満に保つよう努めている。「1%未満」は、この「20%超」という条件のもとでの数値であり、すべての文書に当てはまる数字ではない。（出典:guides.turnitin.com・確認日2026-08-27）

また、文単位で見ると偽陽性率は約4%まで上がると、同社のCPO（最高製品責任者）名義の公式ブログが公表している。

「Our sentence-level false positive rate is around 4%. This means that there is a 4% likelihood that a specific sentence highlighted as AI-written might be human-written.」

参考訳:文単位の偽陽性率は約4%。AI作としてハイライトされた特定の文が、実は人間の手によるものである可能性が4%あるということだ。（出典:Annie Chechitelli〈Turnitin CPO〉2023-06-14・turnitin.com・確認日2026-08-27）

さらにTurnitinは「it should not be used as the sole basis for adverse actions against a student」（学生への不利益処分の唯一の根拠として使ってはならない）とも明記している（出典:guides.turnitin.com・確認日2026-08-27）。

GPTZero：「99%」と「100%正確ではない」が同じページにある

GPTZeroはトップページで高い精度を掲げている。

「GPTZero is the most accurate AI detector, with a 99% accuracy rate when spotting AI-generated text vs. human writing.」

参考訳:GPTZeroは最も精度の高いAI検出ツールであり、精度は99%である。（出典:gptzero.me・確認日2026-08-27）

ところが、同じ公式ページのFAQには次の一文が並ぶ。

「No AI detector is 100% accurate, a​nd AI itself is changing constantly. Results should not be used to punish o​r as the final verdict.」

参考訳:100%正確なAI検出ツールは存在せず、結果を罰するためや最終判定として使うべきではない。「99%」の宣伝文と「100%正確なものはない」という限界表記が、同じページに併記されている——この事実そのものが受け止め方の手がかりになる。（出典・確認日は上記と同じ）

教育機関・公的機関の立場

文部科学省は、大学・高専向けの事務連絡（令和5年7月13日）で次のように注意を促している。

「また、AI が生成した文章かを判定するツールを学修成果の評価等に活用する場合でも、その結果を過信しないことが重要であること。」

（出典:文部科学省高等教育局「大学・高専における生成AIの教学面の取扱いについて（周知）」PDF・確認日2026-08-27）

東京大学も全学向け文書で判定の難しさを認め、対面審査との併用を求めている。

「しかし、現状では生成系AIを用いて作成した論文・レポートであることを高精度で見出すことは困難な状況です。したがって、教員はレポートや提出論文の審査に関しては、十分そのことを認識した上で評価を行う必要があります。」

（出典:東京大学utelecon「生成系AIについて」utelecon.adm.u-tokyo.ac.jp・確認日2026-08-27）

米国のVanderbilt大学は2023年8月、TurnitinのAI検出機能を無効化したと公表した。理由の一つとして、Turnitinの公開時の偽陽性率1%を自校の2022年提出数75,000本にあてはめると、約750本が誤ってAI作と判定されていた可能性があるという大学側の試算（“could have been”＝実際の件数ではない）を挙げている（出典:Vanderbilt University 2023-08-16・vanderbilt.edu・確認日2026-08-27）。

確認できなかったこと

確認できなかったことも正直に書いておく。

• Turnitinの「非英語話者へのバイアスなし」という研究ブログは、存在の確認のみで本文は未照合。
• GPTZeroの「99%」の独立検証（Penn State・RAIDベンチマーク）は未確認で、同社ページの記載としてのみ扱った。
• 日本の個別大学が「検出結果を単独の根拠にしない」と明文化した文書は見つけられなかった（無いと断定はしない）。
• 文部科学省・東京大学は精度の数値そのものを公表していない。
• Turnitin・GPTZeroの日本語文章に対する精度の数値は確認できなかった。

公開前の確認手順そのものは、AI記事のファクトチェック手順【公開事故を防ぐ】にまとめている。

疑われた側・かける側は、それぞれ何をすればいいか

AI作だと疑われる側（学生・ライター・応募者）

• 書き始めた時点のメモや構成案を残しておく。
• Googleドキュメント等、編集履歴（バージョン履歴）が残るツールで作業する。
• 調べながら書いたなら、参照した資料のURLや書名を控えておく。

いずれも「AIを使っていない証明」ではなく「自分がどう作ったかを示せる材料」を残す考え方である。文章の見直しはAI文章の不自然さを直す方法、一致率の確認はAI記事のコピペチェック手順を参考にしてほしい。

検出結果をもとに判断する側（教員・採用担当など）

• スコアだけで結論を出さない。Turnitin・GPTZeroとも「単独の根拠にするな」と自ら明記している。
• 文部科学省・東京大学も「過信しないこと」「対面審査等との併用」を求めている。
• 低スコア帯（Turnitinでは1〜19%）は、提供元自身がスコアを表示しないほど不確実な領域である。

よくある質問

Q. AI検出ツールで「AI作」と判定されたら、それは事実ですか？

A. 提供元自身が「単独の根拠にしない」と明記している。Turnitinは「AI文章が20%を超える文書で」偽陽性1%未満（文単位は約4%）という条件つきの数値を公表し、GPTZeroも「100%正確なAI検出ツールは存在しない」としている。判定結果は手がかりの一つであって、確定した事実ではない。

Q. 日本語の文章はAI検出ツールに誤判定されやすいですか？

A. 断定できない。OpenAIは英語以外で性能が落ちると明記していたが、Turnitin・GPTZeroの日本語精度は今回確認した範囲では公表されていなかった。

Q. 検出をすり抜けるにはどうすればいいですか？

A. この記事では扱わない。勧められるのは、すり抜けではなく書いた過程を示せる材料（下書き・編集履歴・参照メモ）を残すことである。

まとめ

• OpenAIは自社の検出ツールを「精度の低さ」を理由に2023年7月20日付で提供終了した。
• Turnitinの「偽陽性1%未満」は「AI文章20%超の文書」限定の数値で、文単位では約4%になる。
• GPTZeroは「99% Accuracy」と「100%正確なものはない」を同じ公式ページに併記している。
• 文科省・東大・Vanderbilt大学は、検出結果を単独の根拠にしないよう求めている。
• 日本語文章に対する各社の精度は、今回確認した範囲では公表されていなかった。

出典

• OpenAI「New AI classifier for indicating AI-written text」（確認日2026-08-27）
• OpenAI教育者向けヘルプ（確認日2026-08-27）
• Turnitin「AI writing detection capabilities FAQs」（確認日2026-08-27）
• Turnitin「Using the AI Writing Report」（確認日2026-08-27）
• Turnitin公式ブログ（文単位の偽陽性率について）（確認日2026-08-27）
• GPTZero公式サイト（確認日2026-08-27）
• 文部科学省「大学・高専における生成AIの教学面の取扱いについて（周知）」（確認日2026-08-27）
• 東京大学utelecon「生成系AIについて」（確認日2026-08-27）
• Vanderbilt University「Guidance on AI Detection」（確認日2026-08-27）