AI性能評価、業界団体が回答速度測る新たなベンチマーク追加
ロイター / 2024年3月28日 14時48分
人工知能(AI)の能力を測定・比較するためのベンチマークを開発する業界コンソーシアムMLコモンズは27日、最高級ハードウエアがAIアプリケーションを実行し、ユーザーに応答する速度を評価する新たなテストと結果を公表した。資料写真(2024年 ロイター/Dado Ruvic)
Max A. Cherney
[サンフランシスコ 27日 ロイター] - 人工知能(AI)の能力を測定・比較するためのベンチマークを開発する業界コンソーシアムMLコモンズは27日、最高級ハードウエアがAIアプリケーションを実行し、ユーザーに応答する速度を評価する新たなテストと結果を公表した。
MLコモンズが新たに追加した2つのベンチマークは、AI半導体とシステムがAIモデルから応答を生成する速度を測定する。「チャットGPT」などのAIアプリがユーザーの質問にどれだけ速く答えを出せるかが分かる。
追加したベンチマークの一つは大規模言語モデルの応答の速さを測る「Llama 2」で、メタ・プラットフォームズが開発した。もう一つは画像生成の「MLPerf」で、スタビリティーAIの「ステーブル・ディフュージョンXL」をベースとしている。
アルファベット傘下のグーグル、スーパーマイクロなどが構築したエヌビディアの半導体「H100」を搭載したサーバーは、両方の新ベンチマークを大きく上回った。
インテルも自社のアクセラレーター半導体「ガウディ2」をベースにしたデザインを提出した。同社は良好な結果としている。
この記事に関連するニュース
-
もはや「ChatGPT」で騒いでいる場合ではない? 深みある日本語を生成するAI「Claude」の凄さ
東洋経済オンライン / 2024年7月15日 8時20分
-
パナソニックHD、Flowベース生成モデルにおいて、従来難しかったタスク特有の知識を扱えるAI技術を開発
PR TIMES / 2024年7月12日 17時40分
-
Nejumi LLMリーダーボードがアップデートされ、安全性評価など多数の評価を追加
PR TIMES / 2024年7月1日 19時45分
-
オラクル、HeatWave GenAIによる業界初のインデータベースLLMと自動化されたインデータベース・ベクトル・ストアを発表
PR TIMES / 2024年6月30日 22時40分
-
ELYZA、「GPT-4」を上回る性能の日本語LLMを開発・公開
PR TIMES / 2024年6月26日 16時45分
ランキング
-
1米国初の女性・アジア系大統領を目指すハリス氏、手腕には厳しい評価も
産経ニュース / 2024年7月22日 19時11分
-
2バイデン氏の撤退決断、米主要紙が評価 「勇気ある選択」「米国の最良の利益」
産経ニュース / 2024年7月22日 19時34分
-
3北朝鮮エリートの脱北ラッシュ、なぜ外交官なのか…海外生活で「目覚めた」
KOREA WAVE / 2024年7月22日 16時30分
-
4バイデン氏大統領選からの“撤退表明” トランプ氏「いんちきジョーは最悪の大統領」とSNS投稿
TBS NEWS DIG Powered by JNN / 2024年7月22日 11時43分
-
5反捕鯨団体の創設者を拘束 妨害関連で日本引き渡しも
共同通信 / 2024年7月22日 22時25分
記事ミッション中・・・
記事にリアクションする
記事ミッション中・・・
記事にリアクションする
エラーが発生しました
ページを再読み込みして
ください