もっと詳しく

GMOメディアは、「大規模言語モデルの日本語実践的評価:JGLUEとITパスポート試験を用いた比較分析」をテーマとした研究を実施し、LLMが持つ推論能力(正確な解答を導き出す力)や問題解決能力の特徴を分析することで、LLMごとのIT分野における能力差を解明した。 同研究では、ITパスポート試験において、LLMが正解を導き出す力がどのくらいあるのかを指標とした。以下のLLMにITパスポート試験の過去 …