AI検出は日本語にも対応？Humanizerの多言語ロードマップ

英語以外のAI検出は、英語に比べてまだ穴が多いのが実情です。TurnitinのAI文章検出が対応しているのは英語、スペイン語、日本語、アラビア語で、ほとんどの検出ツールはまず英語を前提に作られました。Humanizerは現在、英語の入力に対応しています。韓国語、スペイン語、中国語、日本語、フランス語も準備中で、アプリ内の入力ガイドにはすでに「近日対応」として表示されています。Academic Humanizerのウェブサイトとこのブログは、すでに10言語で公開しています。

新しい入力言語の提供時期はまだお知らせしていません。その理由をこの記事で説明します。ある言語でうまくヒューマナイズすることは、翻訳作業ではありません。その言語で検出ツールがどう振る舞うか、テキストがどのような単位に分割されるか、そしてその言語で良い学術文とは何か。これらすべてに左右されます。

現在の言語対応状況

英語は学術出版の大きな部分を占めており、多くのAI検出ツールが前提としてきた言語でもあります。英語で論文を発表する研究者の多くは、英語を第二・第三言語として書いています。つまり英語入力の時点で、すでに多言語の書き手に使われているのです。

多言語のヒューマナイズが見た目以上に難しい理由

Humanizerのような文単位のヒューマナイザーは、どの言語でも三つのことをこなす必要があります。原稿を正しく文に分割すること、検出ツールに判定される文を見つけること、そしてその文だけを分野にふさわしい文体で書き直すことです。英語以外では、そのどれもが難しくなります。

1. 検出ツールは主に英語向けに作られている

広く使われているAI検出ツールの多くは、主に英語のテキストで開発・評価されてきました。他の言語での挙動はあまり研究されておらず、学習データのパターンから外れた文章を検出ツールが誤判定しうることも、すでに研究で示されています。非ネイティブの英語文章を対象にした研究では、ネイティブ話者の文章に比べてAI生成と判定される割合がはるかに高いことがわかりました。主な原因は、平易で予測しやすい言い回しが、検出ツールには機械的に見えてしまうことです。この研究についてはGPT検出ツールは非ネイティブの英語話者に不利で詳しく取り上げています。

英語の中でさえ判定にばらつきがあるなら、言語をまたげばばらつきはさらに大きいと考えるのが自然です。新しい入力言語を受け付ける前に、どの検出ツールがその言語を扱えるのか、ツール同士の判定がどう食い違うのか、そしてその言語での誤判定がどのようなものかを把握しておく必要があります。

2. テキストの分割のされ方が違う

検出ツールや言語モデルは、単語を読んでいるわけではありません。読んでいるのはトークン、つまりモデルの語彙にたまたま含まれているテキストの断片です。英語では、よく使う単語は一つのトークンになることが多くあります。語尾変化の多い言語や、単語の間にスペースを入れない言語では、同じ内容がより多くの細かい断片に分かれることがあります。

The results were significant / 결과가 유의미했다

あくまで説明用の例です。緑：なじみのある単語単位の断片。赤：細かく分割された単語。実際の分割は各モデルの語彙によって異なります。

これが重要な理由は二つあります。統計ベースの検出ツールは各トークンの予測しやすさを見ているため、分割が変われば検出ツールが受け取る信号も変わります。また、文の区切り方そのものも言語によって異なります。中国語と日本語は文末の句読点が違い、単語間にスペースを入れません。韓国語と日本語には、丁寧さや文体を担う文末表現があります。文の分割を誤ったヒューマナイザーは、書き直すべきでない箇所を書き直してしまいます。

3. 学術的な文体は言語ごとに異なる

「人間らしく聞こえる」という目標は、言語によって中身が違います。良い学術文の慣習もそれぞれです。

• 韓国語の研究論文では、一般に平叙形の常体を用い、形式的で客観的な語調で書きます。
• 日本語の論文は、話し言葉寄りの敬体ではなく、書き言葉の常体（である調）で書くのが一般的で、文章全体で統一する必要があります。
• スペイン語とフランス語の学術文は、英語なら冗長に見えるような長い文や非人称構文を好む傾向があります。
• 中国語の学術文には独自の形式的な接続語や定型表現があり、それを多用することはテンプレート的な文章の目印として知られています。

英語らしい自然さをそのまま別の言語に移植したような書き直しでは、読者に不親切ですし、おそらく検出ツールもごまかせません。言語ごとに、すっきりした学術文とはどういうものかという感覚が必要です。さらに、現地語と英語由来の外来語が混在しがちな専門用語にも注意を払わなければなりません。

TurnitinやGPTZeroは英語以外のAIも検出できるのか

一部の言語に限れば、検出できるものがあります。TurnitinのAI Writing Reportのガイドは、対応言語として英語、スペイン語、日本語、アラビア語を挙げており、それ以外の言語のファイルにはAI文章レポートが作成されません。これは「問題なし」という結果とは違います。AIで言い換えた文章やAIバイパスツールを通した文章の検出は、英語でしか機能しません。

GPTZeroのFAQは、同社のモデルが英語、スペイン語、フランス語、ドイツ語などに対応しているとし、Copyleaksは30以上の言語に対応しているとしています。これらはベンダー自身の説明です。英語以外での独立した検証は、英語に比べてはるかに少ないのが現状です。

英語以外の言語で書く場合、次の3点が言えます。

• 大学やジャーナルが使っている検出ツールが、そもそもあなたの言語に対応しているかを確認しましょう。
• 新しく対応した言語のスコアは、英語のスコアほど検証を経ていないと考えておきましょう。
• 翻訳には注意が必要です。14のツールを調べた2023年の研究では、人間が書いて英語に機械翻訳した文章は、英語で書かれた文章に比べて正しく分類される割合が約20ポイント低くなりました（その研究でわかったことをご覧ください）。

言語を公開する前に確認すること

1. 文の分割その言語の原稿が、読み手が区切るのと同じように文単位に分割されること。
2. 検出ツールの対応範囲照合に使う検出ツールが、その言語でどう振る舞うかを把握していること。
3. 文体の品質書き直した文が、翻訳調の英語ではなく、その言語の正式な学術文として読めること。
4. 意味と用語数値、引用、専門用語が書き直し後も保たれていること。

これらの確認をすべて通過して初めて、その言語は「近日対応」から「提供中」に移ります。提供時期を約束していないのもそのためです。きちんと仕上がったときが完成のときです。

それまでの間にできること

英語を母語以外の言語として書いているなら、Humanizerは今日から使えます。原稿は一文ずつスキャンされ、判定された文だけが書き直され、それ以外はあなたが書いたまま残ります。平易な英語を検出ツールに誤読されがちな書き手にとって、これが最も役立つ使い方であることが少なくありません。この状況については、非ネイティブの英語執筆者のケーススタディで詳しく紹介しています。

原稿が英語以外の言語で書かれている場合は、英語に翻訳して戻すのではなく、ネイティブ対応を待つことをおすすめします。翻訳を往復させると、守りたいはずの文体が平板になりがちです。また、どの言語で書く場合でも、AIを活用した原稿を提出する前に、所属機関や投稿先ジャーナルのAIポリシーを確認してください。

よくある質問

Academic Humanizerで今すぐ韓国語の文章をヒューマナイズできますか？

まだできません。現在の入力は英語のみです。韓国語は、スペイン語、中国語、日本語、フランス語とともに、近日対応予定の5言語の一つです。

新しい入力言語はいつ公開されますか？

提供時期は発表していません。各言語は、上記の確認を通過した後に公開されます。

ウェブサイトは自分の言語で利用できますか？

ウェブサイトとブログは、英語、韓国語、日本語、簡体字中国語、スペイン語、フランス語、ドイツ語、ヒンディー語、イタリア語、ポルトガル語で利用できます。

英語以外のテキストでAI検出ツールの信頼性が下がるのはなぜですか？

多くのツールが主に英語で開発・評価されてきたためです。トークン化の違いや書き方の慣習の違いによって、ツールが頼りにしている信号が変わります。背景についてはAI検出ツールの仕組みをご覧ください。

さらなる言語対応に向けて

Academic Humanizerは、研究者自身のアイデアが機械の文章と誤ってラベル付けされないために存在しています。この問題は英語だけにとどまりませんし、Humanizerも英語だけで終わるつもりはありません。今のところ、原稿が英語であれば、今日すぐに実行して、検出ツールがどの文を拾うのかを一文ずつ確認できます。