5060/5090 日本語ローカルLLM要約ベンチマーク(2026/4/1)｜shi3z

ツイート

以下は、現在5060(8GB)または5090(32GB)で動作する各種LLMの要約タスクベンチマーク結果である。このベンチマークの目的は、ローカルエージェンティックAIを日本語で開発することである。 この要約タスクは、清水が独自の原稿をランダムに7000字切り出し、200字程度に要約させたものをClaudeが評価したものであり、既存のベンチマークと異なり、LLMが事前学習することは不可能なものである。 なお、検証に用いたソースコードは以下のリポジトリからダウンロードできる。 LLM 日本語…