ChatGPTや他のAIソフトにエッセイの宿題を頼る学生が増えています。
もちろん、大学や高校の先生たちはその新しいタイプのカンニングに目を光らせていますよ。
カナダの高校や大学では、学生はたくさんのエッセイアサインメントと格闘します。
高校では5ページくらいの長さ。
大学では、20ページにもなるアサインメントが出ます!
そして、カナダのエッセイアサインメントには厳しい規則があります。
決して他の人の考えや、または他の人の書いたものからの盗用、つまりコピー・ペーストは絶対禁止です。
これはplagiarismと呼ばれ、厳格な規定があります。
高校でplagiariseした場合、厳しい警告を受け、宿題のやり直しとなるでしょう。
大学では、成績は0%、管轄のオフィスに呼び出されます。
初めてplagiariseした場合でも授業から追放されることが多いです。
大学側が納得しない場合には(なぜ他の人の書いたものを盗作したかの理由)大学から退学になることもあります。
1番軽い場合でも、初犯の学生は厳格な警告があります。「繰り返したら学校から追放」と。
大学はかなり前からplagiariseを見抜くためのソフトを使っています。
人のIdeaはすでにオンラインに存在していますので、それら無数のwritingと照らし合わせるソフトです。
高校も使用しているところが多いです。
でもね、そんなソフトに頼らないでも、普段学生を指導している教師ならすぐに「あれ?これはいつものこの生徒のwriting とは違うな。」とわかります。
カナダクラブで日本の高校生・大学生に本物のEssay を指導している(Essay Basics) Robertや私も、あっという間に「このエッセイは臭うね。」となります。
他のIdeaの盗用は、このように長年の経験と、そして特別なソフトに頼ることも必要ですが、実は驚くことに、ChatGPTなどのAIに書かせたエッセイは、非常に簡単に見抜けるのを知っていましたか?
本当に簡単に、あっという間にわかります。
このコラムではその「あっと言う間にわかる理由」の詳細を述べて行きます。
「やった!いいエッセイが書けたと思う。」とAIに書かせた宿題をニマニマと提出した人は、ブルブル震えながら読んで下さい。

高校の先生でも簡単に見抜けるChatGPTやAIが書いたエッセイ:その理由は?
まず、一番簡単な理由は:
その生徒の普段のwritingと異なる。
突然、普段の文章構成、文法の使い方、単語の使い方と異なるものを書き連ねていますので、教師が思わず苦笑いすぐほどバレバレです。
ChatGPTやAIのwritingには明らかな書き方の癖があるからです:
概要のみ述べ、具体例がない。(これが大きいです。笑えるほど具体的でないです。(readwrite)など)
内容には、人間の感情・行動を理解していない文が並びます。(AIにはまだ書けない分野です。)
与えられたこと以外を考えることは出来ないので、calculusやstatisticsのprobabilityのルールを使い内容を推察して書いています。(このようなreasoningは書いたものを見るとすぐわかります。)
重要な鍵となる言葉を飛ばす傾向があります、例えば文学分析エッセイでも人物の名前とかをうまく使えません。
特定の言い方や言葉ばかりを使い過ぎる傾向があります。(GitHub)など。
(Certainly, Dive into, Embark, Furthermore, In conclusion, Important to note, Important to understand, Remember that)
実際にはないものを作り上げてしまいます。これをは“Hallucinations”と呼ばれます。
ある法学教授が処罰を受けました。ChatGPTに書かせた書類を裁判所に提出し、その中に実際には存在しない判例を含んでいたからです。(Reuters)
AIソフトがどう機能しているのかを知ると、上記の変な癖もわかって来ますよ。
カナダクラブのRobert McMillanは大学で数学専攻、日本の学生に30年以上エッセイを指導し、並行して数学が言語プロセスにどう使われて行くのかを、つまりAIがどう数学を利用し文を書いていくのかを学んで来ました。Udacity からのCertificateも取得しています。
そのRobertから、AIがどのように文章を書いて行くのかを少し説明します。
ChatGPTはAIの一種で LLM (a Large Language Model) を使い言語をプロセスし創造します。
LLMは最初は膨大な量のデータ(例えば学術論文やニュースなど)を与えられ訓練されます。
訓練に必要な量はオンラインでは何十億ページにもなります。
だから、AIには膨大なエネルギーが必要なわけです。
そこから、LLMにpromptやtaskを与え、あるテーマについてのエッセイを書く訓練を行います。
訓練とは、LLMが数学プロセスを使い、次にはどの単語が使える可能性があるかを推察していくことです。
ときには、最適ではないが使えそうな単語を選びます。創造的で人間のような書き方にするために。
つまり、ChatGPTのような巨大なlanguage modelは考えることはしていないということ。ただ単に推察しているだけということを知る必要があります。
ですから、とんでもないミスも発生します。存在しない判例とか他にも間違った情報などを使うことになります。
“Hallucinations”が起こります。
Scientific American誌は、“Hallucinations”じゃなくてこれは”Bullshitting”と呼ぶべきだと述べています。 (Scientific American)
長くなりますので、この”Bullshitting”についてはまた次回に面白く述べてみます。
日本から留学してくる学生のエッセイには、実はAIが書くものを酷似する特徴があるのを知っていましたか?
上に述べた「ChatGPTやAIのwritingには明らかな書き方の癖」が当に日本人の書く概要のみの一般的なエッセイ、なんでこんな長い単語を連ねてるの?というエッセイに非常によく似ているからです。
大学で必死で書いたエッセイがChatGPTを使ったと疑われるケースもあるとか。
決まったフレーズや、意味不明なzombie nouns(だらだらと長い大げさな名詞)を使う癖がある日本人のエッセイ。
まずはフレーズや単語から決めて書いているのかなとも思ってしまいます。
日本人留学生のみなさん、気をつけて!
(だらだらと長い英語の名詞 + of + 再びだらだらを長い英語の名詞)の組み合わせを多用しているなら、要注意です。
Help 必要ですか?
How Can I Help?
