LLMは古いデータと英語圏以外のデータが苦手

NECのPC-9801m2の定価が知りたくてgpt-ossに聞いたら39800円とのこと。あきらかに桁が違うので、別途ネットで調べて415000円では？と修正を促したがガンとして聞き入れない。学習したデータが間違っていたようだ。

gpt-ossではなく、gemma-3-27bだったらどうなるかと聞いてみたら今度は168000円とのこと。これも415000円ではと聞いたら、それはメモリを増設した上位機種だと諭された。そんなものはないのだが。

スバル360の乾燥重量を聞いたら本当は385kgなのに500kgだそうだ。零戦21型のエンジン出力を聞いたら1900馬力だそうだ。そんなにパワーがあったらグラマンF6Fに負けてないよ。陸軍の鍾馗のエンジン出力を聞いたら1800馬力だって。そんなにあったらB-29を落としてたよ。

米軍機のF4FワイルドキャットとF4Uコルセアのエンジン出力は正しく答えていた。

英語圏以外の情報と、古い情報はネット上にあまりないので、間違い情報が混じっているとそれに影響されて学習してしまうようだ。

ちなみにモビルスーツのことを聞くと、とんでもない型番や名前の迷機をたくさん捏造してくれるので、これはこれで面白かった。彼らの世界ではMSN-18とかMS-35とかがあるのだって。MSN-18はMS-18ケンプファーをニュータイプ専用機に改造したものではなく、通常のモビルスーツより装甲が薄くてサイズが小さいものなんだって。いろいろ聞いてみるとめちゃくちゃ面白かった。