OpenAIがソフトウェア開発ベンチマークを発表

2025.03.18 16:31

InfoQ.com

OpenAIは、実世界のフリーランスのソフトウェア開発タスクで先進的なAI言語モデルの能力を評価するためのSWE-Lancerベンチマークを発表した。このベンチマークはUpworkから提供された1,400以上のタスクのデータセットを使用しており、その総額は100万ドルである。これらのタスクには独立したコーディング活動と管理的意思決定の両方が含まれ、複雑さと報酬の範囲が実世界のフリーランスのシナリオをシミュレートするように設計されている。 By Daniel Dominguez Translated by Hiro…

記事全文へ

検索

人気記事

株式会社WonderSpace『【SEO未経験者1人で月50記事リライトできる】 ChatGPTを活用したSEOに効果的なリライト方法』ウェビナーのアーカイブ配信を開始いたしました

2023.11.16 9:40

ネットスイート、生成AI/AI機能をスイート全体に組み込み--「SuiteWorld 2023」基調講演

2023.10.18 8:12

EC、研究における責任ある生成AIの使用に関するガイドラインを発表

2024.03.29 10:01

オリックス生命、新人研修にAI講師　コールセンター向け

2025.02.21 6:42

ペーパーポットティッシュケースおしゃれでかわいいペーパータオルホルダートイレットペーパーカバーボックスティッシュ対応丸黒マットブラック日本製直径17cm×高さ17.3cm アイコレクション(Ai collection)

2023.11.25 13:35

コメント一覧

まだコメントはありません。

コメント