間違いだらけの生成AI

ChatGPT、Bing　そしてBard,,,　新しい生成AIが出るたびにテストしてみている。バージョンも上がり、機能も追加され、なによりもデータの量が多くなってより正確になったと言われているし、行政などでもこれの使用を考えているところがあるようだけど、、、、

再度、テストしてみたけど、恐ろしいほどまったく使い物にならない。

 

今回のテストは　千葉県いすみ市の人口はという設問だった。

ちなみに、いすみ市役所のHPでは２０２４年１月１日の人口は３５，２０９名ということでした。

 

トップの写真はBing。　一番マトモな回答をしていたけど、、

ただ、スマホで音声で質問したら、千葉県和泉市と回答してきた。（その前のときには夷隅市、このときは回答の中に千葉県では一番早くひらがなの市名にした町と言っていたけど漢字の「夷隅」を使っているね）　他のBardやChatGPTではきちんといすみ市を認識しているのに、Bingだけはいすみ市を認識できない）

和泉市は印旛郡、印旛沼のそばにある市で、千葉県では一番最近市になったところだそうで（千葉県には和泉市は存在しない。県のHPでも確認済み）　人口３２，１１６名。ちなみにこれ以上の質問があればリンクからHPへ飛んで調べてくれと回答の後ろにリンクをつけているが、一つは千葉市、もう一つは鴨川市だった。

 

ChatGPT（私は無料版の3.5しか使わない）

データが古いので自治体へ聞いてくれって答えている。

まあ、一番正確といえばこれがそうかな？

なので、２０２２年１月の人口を聞くと、

これは持っているはずなのに答えてくれない。

なんで？

 

一番面白かった（酷かったのは）Bard.

まず、回答が間違い。前に書いたようにいすみ市の人口は２４年１月１日で３５，２８９人。

１７，９０７というのは多分、女性の人口。

次に、１５年と２２年の人口を出している。（これは多分当たっている）

でもいくら人口減少が続いているにしても２２年１０月の３５，０００人から２４年１月にやや半数までへるってことはないよね。

 

おまけに回答の２．

２４年１月の人口も間違っているけど、２０年１１月の人口が３７２，０００人？

 

とにかく、生成AI、実用化されるにはまだまだ先が長いって感じですね～