OpenAIがAIベンチマーク「SWE-Lancer」を公開、フリーランスエンジニアに100万ドルで依頼するレベルのタスクをこなせるか測定

2025.02.19 11:44

Livedoor.com

OpenAIが2025年2月18日に、AIモデルのコーディング性能を評価するためのオープンソースのベンチマーク「SWE-Lancer」を公開しました。[2502.12115] SWE-Lancer: Can Frontier LLMs Earn $1 Million from Real-World Freelance Software Engineering?https://arxiv.org/abs/2502.12115Introducing the SWE-Lancer benchmark | OpenAIh…

記事全文へ

検索

人気記事

株式会社パンと水と法人の生成AI活用の4つの壁を取り除く。AI連携プラットフォームAgentFlowをローンチ。

2023.11.30 9:20

デジタルシティオキナワ株式会社デジタルシティオキナワ、コールセンターの課題を生成AIで解決する「CallAIプロ」をリリース

2024.03.26 11:00

グーグル、「Fitbit」データを基に提案できる「Gemini」ベースのAIモデルを開発中

2024.03.21 13:55

マンガ『魔法使いの嫁』新章、AIマンガ翻訳クラウド『Mantra Engine』により日英2言語で同時連載スタート

2023.12.21 19:17

ChatGPT、VSCodeのコードを読み込み編集可能に／VSCodeの新機能「Copilot Vision」／AIによるコーディングアシスタントなどまとめ、ほか2025年3月の人気記事

2025.04.03 23:37

コメント一覧

まだコメントはありません。

コメント