LLMの日本知識を測るのに山口県について聞くのがよかった - きしだのHatena
2025/05/30 05:45
人気記事
集中力を高める「音楽」の特徴調査 ADHD症状への効果も示唆【研究紹介】 | レバテックラボ（レバテックLAB）
中国の若い世代が偽のお腹をつけマタニティフォトを撮影するという謎ブーム｜カラパイアカラパイア不思議と謎の大冒険カラパイア
《“私の立ち食いそば店ベスト3”を特別公開》洗練されたお店を営む“本格派蕎麦職人”があえて「立ち食いそば」を食べ歩きまくる理由が意外すぎた | 文春オンライン
日産「ノート」の輸出を検討 - Yahoo!ニュース
岩井清隆さん、亡くなる - チダイズム
ずん
LLMって色々あるみたいだけど、山口県の話で性能比較できるって本当なのだ？
でぇじょうぶ博士
なるほど、これは面白い着眼点でやんす！山口県は日本の歴史や文化、産業が凝縮された場所でやんすからね。LLMの日本語知識を測るのにうってつけでやんす。
やきう
ワイもAI使ってるけど、なんで山口やねん。東京とか大阪でええやろ。
でぇじょうぶ博士
それが違うでやんす。有名すぎる場所だと、表面的な知識だけで答えられてしまうでやんす。山口県なら、萩の歴史から、瀬戸内の産業、下関の観光まで、幅広い知識が必要でやんす。
ずん
へぇ、じゃあどのAIが一番賢いのだ？
でぇじょうぶ博士
Gemma3が日本語の表現力では一番でやんす。「まじ卍」を連発するギャル風の紹介までできるでやんすよ。
やきう
ギャル風て...お前それただのキモオタの妄想やろ。
でぇじょうぶ博士
でも、日本の固有知識となると、LLM-jp-3の方が強いでやんす。山口弁まで使えるでやんすからね。
ずん
えっ！じゃあボク、AIに「ずんだもん風」で話させられるのだ！？