夢幻泡影

「ゆめの世にかつもどろみて夢をまたかたるも夢よそれがまにまに」

間違いだらけの生成AI

2024年01月07日 19時00分53秒 | 日記

ChatGPT、Bing そしてBard,,, 新しい生成AIが出るたびにテストしてみている。バージョンも上がり、機能も追加され、なによりもデータの量が多くなってより正確になったと言われているし、行政などでもこれの使用を考えているところがあるようだけど、、、、

再度、テストしてみたけど、恐ろしいほどまったく使い物にならない。

 

今回のテストは 千葉県いすみ市の人口はという設問だった。

ちなみに、いすみ市役所のHPでは2024年1月1日の人口は35,209名ということでした。

 

トップの写真はBing。 一番マトモな回答をしていたけど、、

ただ、スマホで音声で質問したら、千葉県和泉市と回答してきた。(その前のときには夷隅市、このときは回答の中に千葉県では一番早くひらがなの市名にした町と言っていたけど漢字の「夷隅」を使っているね) 他のBardやChatGPTではきちんといすみ市を認識しているのに、Bingだけはいすみ市を認識できない)

和泉市は印旛郡、印旛沼のそばにある市で、千葉県では一番最近市になったところだそうで(千葉県には和泉市は存在しない。県のHPでも確認済み) 人口32,116名。ちなみにこれ以上の質問があればリンクからHPへ飛んで調べてくれと回答の後ろにリンクをつけているが、一つは千葉市、もう一つは鴨川市だった。

 

ChatGPT(私は無料版の3.5しか使わない)

データが古いので自治体へ聞いてくれって答えている。

まあ、一番正確といえばこれがそうかな?

なので、2022年1月の人口を聞くと、

これは持っているはずなのに答えてくれない。

なんで?

 

一番面白かった(酷かったのは)Bard.

まず、回答が間違い。前に書いたようにいすみ市の人口は24年1月1日で35,289人。

17,907というのは多分、女性の人口。

次に、15年と22年の人口を出している。(これは多分当たっている)

でもいくら人口減少が続いているにしても22年10月の35,000人から24年1月にやや半数までへるってことはないよね。

 

おまけに回答の2.

24年1月の人口も間違っているけど、20年11月の人口が372,000人?

 

とにかく、生成AI、実用化されるにはまだまだ先が長いって感じですね~