GMOメディア、IT分野でのLLMの能力差を解明 最も正答率が高いのは「ELYZA-japanese-Llama-2-7b-instruct」で72.3% (CodeZine)

GMOメディアは3月22日、同社のシニアエンジニア、羽中田将氏が執筆した「大規模言語モデルの日本語実践的評価:JGLUEとIT パスポート試験を用いた比較分析」の研究論文が、「2024年度 人工知能学会全国大会」に採択されたことを発表した。 「人工知能学会全国大会」は、国内の研究者が一堂に集い、人工知能に関連する最新の技術動向や研究成果が発表される大規模な学会。 本研究では、大規模言語モデル(LL …