aws-benchのVPC Flow Logs診断タスクでKiro CLI 17モデルの合否が分かれた理由を確認してみた
2026.08.01 1:58
Classmethod.jp
aws-bench の公開データセットから VPC Flow Logs の診断タスク1本を取り出し、Kiro CLI で選べる17モデルに同じ条件で3周ずつ解かせました。有効な Flow Log を正しく指摘した回答でも不合格が続き、合否は紛らわしいロググループ2本に気付けたかどうかで分かれました。判定理由と回答、実行ログから、その境目を確認します。