はるか昔……弊サイトにまだBBSがあったころ……
　レンタルBBSを絨毯爆撃する海外のBOTと、管理人との長い戦いがあった……

　その戦いは、コメント前にクイズに答えないといけないシステム「くいこめ１号」の完成によって幕を閉じた。
　こらっピピ助！ 話の腰を折るな！

　その時俺は「人間らしさとは何か？ それはもちろんクイズを解くことだ。」と偏った思想で断言した。
　そのころ俺が想定しうるAIとは、設問と選択肢を検索エンジンにかけた結果から正解を推察するようなものだった。

　だが今は違う！(ｷﾞｭｯ)
　我々が生きる2023年にはChatGPTが存在する！
　もはや汎用おしゃべりAIが爆速でクイズに正解してくる時代になったのだ！

　俺はAIの進撃を恐れた。
　ChatGPTを駆使する悪のハッカーに狙われたら、弊サイトをBOTから守る「くいこめ１号」のクイズはもはやショウジ戸も同然に破られてしまうだろう。
　敵を知り、備えなければ！
　こらっピピ助！ 話の腰を折るな！

　俺はさっそくChatGPTに、くいこめ１号がもつクイズを次々とぶつけてみた。しかしこの４択形式の出題では、極端にマニアックな話題か、かなり最近の時事ネタでない限り、AIを惑わすことは困難であった。
　たとえば……問題文を検索すれば答えがそのまま出てくるような問いは、一瞬で正解されてしまう。
　いくら選択肢で撹乱しようと、これはいまやGoogle検索ですら直接答えを出してくる時代になったので当然といえよう。

　それから、当時「単純に検索スコアだけで攻略できない問いはAIは苦手なのではないか？」という発想で導入した、正しくないものを選ぶ問い。これも一撃で攻略されてしまう。
　「アレガ 夏の大三角」で検索するとわりと大三角扱いされているのでごまかせるかなと思ったが、無理だった。

　一応、特定の作品のメインキャラクターでないものについての問いではさすがに学習が及んでいないらしく、誤答を引き出すことができた。
　謎の中国人Ｋと化してしまった老師Ｏ、かわいそう。

　さらに、意外な設問で誤答が見られた。
　検索すれば即決できそうな問いでありながら、なぜか「赤鯱」と解答し、なぜそれを選んだのか聞いたところ間違いをみとめ「赤カブト」に解答を変えた。坊ちゃんと赤カブト、それなりにいい勝負をしそう。
　ChatGPTは汎用おしゃべりAIであり、クイズ特化の訓練は受けていない。したがって「特定の作品のサブキャラについての問いを作り、選択肢をあからさまにわかりやすくする」ことで当初の目標は達成できそうな気がする。

　同じくAIが苦手そうな「複数の言葉から連想されるものを選ぶ」形式の問いでも、いくつか突破を阻んだものが見られた。
　デ・ニーロはこれらの映画に出演していない。映画のタイトルを並べたので、映画俳優に注目し、監督の名前は優先度が下がったのかもしれない。ただ、これは人間でも普通に間違うパターンであろう。AIに特効が入るわけではない。

　連想クイズだとChatGPTはけっこうたくさん喋る。その結果ボロを出しているパターンもある。
　正解はしているものの、特徴的な単語にひっぱられて全てをONE PIECEだと思い込んだ回。やはりこの設問文の形式は解析しにくいのだろうか。スランプを特技にされるのも可哀想だし、コトブキヤ・サボはいったい誰なんだ。とはいえ正解されてしまっているので俺の負けには違いない。

　「順番を答える問い」は全ての項目を比較する必要があるため、BOTが突破するのに多少の手間を要するのではないかと思って入れていたが、ChatGPTは連想クイズよりは安定して突破してきた。
　さすが簡単に正解を……いや待てなんか聖子ちゃんやさぐれてるな！？？ 正解してるけどやさぐれてるな！？？（年も違うな？）

　説明に怪しい部分はあれど、たいていの順番当ては攻略されてしまったが、稀に自信満々に間違うことがあり油断ならない。
　いや知らないよ！！ なんだそのテーマとクライマックス！！


　繰り返しになるが、ChatGPTは汎用おしゃべりAIであり、これをもって「AIはこういうクイズが苦手！」ということはできない。だが人間が簡単にできてAIには難しいことを反映させていくための指針にはなろう。今後「くいこめ１号」はこういう方向でチューンナップされた設問に徐々に差し替えていきたい。
　その通りだぞ、ピピ助！ だけどそれじゃ俺が面白くないんだよ！

計算機 [COMMENT]