AIライティング検知とは
AIライティング検知には、人工知能と機械学習テクノロジーを使用して、教育コミュニティで急速に影響力が高まっている生成AIによるテキストを分析および識別することが含まれます。
2022年後半の大規模言語モデル（LLM）の導入により、コンテンツ作成に革命が起こり、学術界にあらゆる機会と課題の両方がもたらされました。ChatGPTのようなツールが創造性を高める可能性があると多くの人が考えていますが、アカデミック・インテグリティへの影響を懸念する人もいます。
CasalとKesslerによる最近の研究では、72人の言語学の専門家がAI生成されたコンテンツを正しく識別できた確率は38.9%にとどまり、AIによって書かれたテキストと人間が作成した著作物を区別することの難しさを強調しています。教育者が学生の論文を分類するのに奮闘している中、AIライティング検知ツールは、AIによって生成された可能性のあるコンテンツを特定するのに役立つ追加のデータポイントとなっています（2023）。
より洗練されたAIライティングツールの台頭により、検知テクノロジーの継続的な進歩を加速しています。多くの教育機関は現在、Turnitinのような組織がAI生成された文章と倫理的に作成された文章の間のギャップをどのように埋めることができるか、またこれらのツールが今後どのように進化し続けるかを模索しています。
AIライティング検知が重要な理由
多くの業界、特に学術界では、生成AIが定着することを認識しています。Tyton Partners*が実施したTurnitinの2023年の調査では、教員数より3倍の学生がChatGPTなどの生成AIライティングツールを定期的に使用していると報告していることがわかりました。
ChatGPTが開始されてから、多数の教育機関がその使用を禁止しようとしました。しかし、ニューヨークタイムズのコラムニストのケビン・ルーズ氏は次のようにコメントしています。「確かに、学校は学校のネットワークや学校所有のデバイス上でChatGPTのウェブサイトをブロックすることが可能ですが、学生は携帯電話、ノートPCなど授業以外にウェブサイトにアクセスする機会はいくらでもあります。」この新たなテクノロジーはどこにでも存在しているため、これを禁止すると学生のスキル向上が妨げられる可能性があります。TurnitinとTyton Partnersの同調査*では、学生の46%が、たとえ教員や教育機関によって禁止されていたとしても、生成AIツールを使用すると報告しています。
課題におけるAIの役割についてさまざまな意見がありますが、一部の教育者は現在、AIライティングを教材として採用し、学生が創造的なブロックを克服し、アイデアを生み出すのを支援しています。こうした利点の反面、AIが学術界にもたらすリスクを管理する必要があることは明らかです。AIライティング検知は、教育者が学生のインテグリティに対する信頼を維持する上で役立つツールを提供します。
AIの進歩を先取りするために、教育者は現在、実践的な経験を積むことが強く奨励されています。これには、評価の見直し、学習の達成度の見直し、AIライティング検知ツール導入の検討などが含まれます。
ミシシッピ大学アカデミックイノベーション担当アシスタントディレクターのマーク・ワトキンス氏が収集した、学習にAIを使用した学生からの意見を反映するフィードバックでは、慎重にAIを使用すれば創造性を高めることができることを示しています。ただし、これは重要な考慮事項もあることを強調しています。教育者がAIの利点とアカデミック・インテグリティを維持する必要性とのバランスをどのように取れるかということです。
生成AIは創造性と生産性を高める可能性を秘めていますが、人間が書くコンテンツと合成コンテンツの境界があいまいになるなどの危険要因もあります（Beyer）。2023年4月にTurnitinのAIライティング検知機能がリリースされて以来、2億5,000万以上の提出物が審査され、そのうち840万件に80%のAIライティングの可能性があるとフラグが付けられました。
AIライティング検知を授業に組み込むと、抑止力と学習ツールの両方として機能し、教育者がこの新しい教育の側面をナビゲートできるようになります。教員は検知をデータポイントとして使用すると、AIの使用が教育機関のガイドラインやアカデミック・インテグリティ・ポリシーに沿っているかどうかを判断できます。
AIライティング検知の仕組み
Turnitinに論文やレポートが提出されると、およそ数百単語（約5～10文）のテキストのセグメントに分割されます。次に、それらの分割されたセグメント同士を重ね合わせて、文脈のなかで各文を分析します。
AI検知モデルに対してセグメントが実行され、各文に0から1のスコアを付けて、それが人間が書いた文章かAIが書いた文章なのかを判断します。モデルがAI生成の文章でないと判断した場合、スコアは0になります。文章全体がAIによって生成された可能性が高いと判断された場合、スコアは1になります。
次に、モデルは文書内のすべてのセグメントの平均スコアを使用して、AIによって生成されたと思われる提出物内のテキスト量の全体的な予測を生成します。
現在、日本語の提出物に対する TurnitinのAIライティング検知機能 は、GPT-4、GPT4-o、GPT-4o-miniの言語モデルからコンテンツを検知するようにトレーニングされています。当社のテクノロジーは、ChatGPTなどのモデルに基づく他のAIライティングツールも検知できます。
TurnitinのAIライティング検知は英語以外の言語でも機能しますか？
TurnitinのAIライティング検知機能が日本語でも利用可能となり、教育者に学生の関心を維持しつつ、アカデミック・インテグリティをサポートする強力なツールが提供されます。AI検知機能は当初、英語で開始され、次にスペイン語、そして今回は日本語のサポートが追加されました。このツールはAIが生成した可能性のある日本語文書の全体的な割合を示し、インジケーターではさらに、モデルがAIによって書かれた可能性が高いと予測したテキストセグメントを強調表示するレポートにリンクしています。
TurnitinのAIライティング検知ツールの誤検知の発生率はどのくらいですか？
AIライティング検知ツールは、提出対象の学生と会話を開始するためのガイドを提供するように設計されていますが、AIライティングレポートがAIライティングの絶対的な証拠または反証ではないことを明確にしておきたいと思います。
Turnitinでは、検知機能の有効性を最大化するよう努めており、学生のレポートに添付されたAIライティングスコアを評価する際に 誤検出率 を考慮しています。完全に人間が書いたテキストがAI生成であると識別された場合に、誤検出率が発生します。
TurnitinのAIライティングインジケーターによる誤検知のリスクは低い（AI生成コンテンツが20%を超える文書の場合は1%未満）一方で、その事実は、注意を呼びかけるシグナルツールとしてAIライティング検知を使用し、調査を行う上でのパズルの1ピースとして利用することの重要性が強調されます。AIライティングスコアは、学生との形成的な会話を促進するために存在し、他の支援要素と組み合わせて評価すると、より大きな影響力があります。
誤検知の潜在的な発生を避けるため、Turnitin AI検知スコアが1%～19%の範囲にある場合、スコアやハイライトは考慮されません。レポート内で20%のしきい値を下回るAIが検知された場合、アスタリスク（*%）で表示され、割合は関連付けられません。
大規模な言語モデルが成長するにつれて、当社ではAIライティング検知ツールを学習に合わせて適応させ、最適化することに重点を置いています（英語）。
教育機関は学生や教員に対しどのようにしてAIライティング検知の導入を促すことができるでしょうか？
新しいAIライティング検知ツールの導入は、教育機関全体の学生と教員の両方にとって困難を伴う可能性が高いと言えるでしょう。好意的な意図を持つ学生は、なぜ自分たちのインテグリティが監視の対象になるのか疑問に思うかもしれません。教員は、時間制約のために新しい技術に取り組むことをためらったり、生成AIライティングをめぐる使用状況の変化や、この種の不正行為に対して厳重な警戒が必要な理由を十分に理解していない可能性があります。
AIライティング検知ツールが採用される過程について、教育機関のメンバーに対して透明性を保つことが、混乱やパニックを防ぐ鍵となります。
生成AIの影響を教育者と学生の両方に教える
生成AIツールがさらに利用しやすく高度になるにつれて、授業でツールを使用することには利点と欠点の両方があります。今後数年間の教育改革に与える生成AIの影響を認識することで、教育機関は学習の実証方法や 課題の悪用防止 など、教育的アプローチの最新化において有利なスタートを切ることができます。このインサイトにより生成AIの影響を理解しやすくなり、学生が意図しない学術不正にさらされるのを最小限に抑えることができます。
AIライティング検知ツールの使用方法と解釈方法について詳しく知る
教育者や研究者は、評価プロセスの一部としてAIライティング検知ツールを導入する前に（英語）、時間を割いてAIライティング検知ツールの機能と限界を理解する必要があります。誤検知が存在する可能性があるため、当社のAIライティングインジケーターは必ずしも正確であるとは言えません。学生の論文で誤検知の問題に最初に取り組む際は、学生に疑いの余地を提示するようにしてください。さらに決定的な証拠が収集された場合にのみ、研究者はその機関の方針に従って次のステップに進むことが可能です。
AIライティング検知ツールの使用タイミングと方法について透明性を確保する
AIライティングスコアは教員および管理者の方のみに表示されますが、口頭やメール、教育機関のアカデミック・インテグリティ・ポリシーの更新など、AIライティング検知の使用法について学生とオープンに話し合うことの重要性が軽視されるわけではありません。教育者はAIライティングのスコアがいつ、どのように厳密に監視されるかについてオープンでなければなりません。それは形成的評価の際に使用されますか、それとも総括的な評価のみに使用されますか？学生は事前にツールの動作を確認して、その機能を理解できますか？同教育機関は潜在的なAIライティングの誤用ケースをどのように管理するのでしょうか？
スーザン・ダゴスティーノ氏は、マイアミデイド大学（米国）の学術および学習技術担当副学長であるネストル・ペレイラ氏の言葉を引用し、AIライティング検知ツールを「学生との会話の出発点」と説明しています。ペレイラ氏はさらに、生成AIを利用して自分の文章を置き換えることを考えている学生は、教育機関内にAIライティング検知ツールが導入されていれば、そのことを考え直すかもしれません、と述べています。
教育機関はAIライティング検知を調査ツールとしてどのように使用できますか？
生成AIツールによって書かれた可能性のある論文に遭遇した場合、またはAIライティング検知ツールの使用時に潜在的な誤検知が生じた場合には、調査プロセスを見直すことが不可欠です。AI生成の可能性が20%を超えるコンテンツを含む文書の場合、誤検知のリスクは1%未満ですが、学生と直接会話する準備ができていれば、学生にとっても教育者にとっても、調査をできるだけ苦痛なく行うことができます。
AIライティング検知ツールは調査を支援しますが、「...私たち全員が人工的に描かれた未来に滑り込むにつれて、人間のように疑問を抱く考え方が必要になるのは明らかです。実際、当社の調査スキルと批判的思考の手法は、これまで以上必要とされる可能性があります。」（O'Brien、2023）。
AIライティングレポートをダウンロード
学生との会話の準備の最初のステップとして、AIライティングレポートをダウンロードし、他の入手可能な調査結果や教育者の専門知識と組み合わせて徹底的に分析することをお勧めします。当社の目標は、教育者が十分な情報に基づいた意思決定を行えるよう洞察を提供することです。ただし、AIライティングレポートはパズルの1ピースにすぎないということを肝に銘じておくことが大切です。執筆スタイルや提出された過去の作品などの背景も、全体像を理解する上で同様に重要です。AIスコアと学術上の不正行為に関するポリシーと併せてより広範な状況の両方を考慮することで、教育者はデータの全体性を確認して学生の取り組みを評価できます。
信頼できる教育者との関係
学術環境では、学生の論文レポートにおけるAIライティングの可能性を調査する際に、教育者と学生の関係が貴重な出発点となる場合があります。AIライティング検知ツールによりハイライト（強調表示）されたスコアが何であれ、問題対象となる学生との敬意を持った対話をせずに告発は決して行われるべきではありません。教育者は学期間を通して学生と対話しましたか？執筆プロセス中にフィードバックを提供しましたか？学生との対話の一環として、学生が主題に対して十分な知識を持っていたことを覚えていますか？教育者が学生との関係を構築していれば、学生の取り組みを評価する際にも活用できます。
批判的思考の証拠を確認する
学生が提出した論文レポートの真の著者であるなら、学生は執筆時の思考プロセスを裏付けることができるいくつかの事柄をもっているはずです。たとえば、研究メモ、概要、文書のバージョン履歴とメタデータ、以前のドラフトの印刷物などです。また、自分自身、他の教育者、同僚、信頼できる査読者、または執筆プロセスを追跡できるソフトウェアからフィードバックを受けている可能性もあります。このことは、AIによる文章と人間が書く文章を比較する確実な指標となる可能性があります。
以前の文章サンプルを評価する
評価で執筆プロセスの一部として生成AIが許可されていない場合、以前の文章サンプルを使用して、執筆スタイル、文法の洗練さ、語彙の複雑さを問題の論文と比較するとよいでしょう。一致する部分がありますか？
生成AIが存在する以前の文章サンプルを入手するのは、時間が経過するにつれて困難になる可能性があることは当然です。その場合は、学期の初めにテスト条件として作文を書くように学生に依頼するとよいでしょう（実施する理由を学生に説明すること）。また、今後の課題をAIの悪用から守るために、ガードレールを設置できるかどうかを自問してください。これは、許可されていない場合に学生がAIを使用して論文を書くことを阻止するのに役立ちますが、将来的にAIライティングやゴーストライティングの問題が発生する可能性がある場合に、比較できる原本があるという安心感を教育者に提供します。
好意的な意図を想定する
AIと人間が書く文章について最終的な結論を導き出せない場合は、好意的な意図だと捉えてもいいかもしれません。AIライティング検知から適切な会話、適切な質問に至るまで、調査中に不確実な点がある場合は、告発やペナルティを課さずに先に進めてください。この経験自体が、将来起こりうる誤用に対する強力な抑止力として機能することができます。
概要：AIライティング検知について教育機関のリーダーが知っておくべきこと
生成AIは急速に発展していますが、AIライティング検知も同様です。Turnitinでは、教育コミュニティのニーズを認識しており、今後の大規模言語モデルに向けた検知システムの構築にすでに取り組んでいます。
しかしながら、AIライティング検知は、より大きなプロセスの一部にすぎません。さらなる証拠に基づく実践も、アカデミック・インテグリティというデリケートな領域の調査と意思決定において重要な役割を果たします。アカデミック・インテグリティの問題には慎重かつ徹底に取り組み、結論を出す前にあらゆる調査手段を検討することが重要です。
AIライティング検知ツールは1つのデータポイントを提供しますが、最終的な結論を導き出すことはできません。学生の成果を評価する際には、誤検知の可能性、学生の意図、最も重要なことには、学生のスキルと能力の理解を考慮して、人間による判断を優先することをお勧めします。