グーグル、大規模言語モデル「PaLM」のAPIを発表
ASCII.jp / 2023年3月15日 18時1分
グーグルは3月14日(現地時間)、大規模言語モデル(LLM)「PaLM」のAPIを発表。当面はプライベート・プレビューを通じて一部の開発者のみに提供されるが、近日中にウェイティングリストも公開されるという。
パラメーター数は最大5400億
PaLM(Scaling Language Modeling with Pathways)はグーグルの研究機関Google Researchが2022年4月に発表したLLM。開発者は「PaLM API」を呼び出すことで、学習済みのPaLMが持つ文章生成、会話、要約、分類といった様々な機能を利用することができるようになる。
グーグルの代表的なLLMには2021年に発表された「LaMDA(Language Model for Dialogue Applications)」もあるが、こちらは会話に特化したモデルであり、PaLMはLLM本来のもっと幅広い用途での利用を想定している。
PaLMのニューラルネットワークの規模は最大5400億パラメーターとなっており、Meta「LLaMA」の最大650億パラメーター、OpenAI「GPT-3」の最大1750億パラメーターを大きく上回っている。(同日発表されたOpenAIの「GPT-4」はパラメーター数を明らかにしていない)。
![](https://ascii.jp/img/2023/03/15/3507936/x/51365b9df1b43e71.png)
PaLMの能力を質疑応答、文脈内読解、文章完成、常識推論といった29の英語自然言語処理(NLP)タスクで評価したところ、28タスクでGPT-3、LaMDAといった先行LLMの性能を上回ったという。
![](https://ascii.jp/img/2023/03/15/3507937/x/8b13e3a5919f1a13.gif)
巨大言語モデルはパラメーターの数が多いほど性能が向上するとされておりグーグルはそのメリットを強調するが、そのぶん必要とされる処理能力も跳ね上がりマシンコストが増大するというデメリットもある。
対称的に、Metaが提供するLLaMAはパラメーター数を減らすことによって単体GPUでも動作することをメリットにしている。
当初APIで公開されるのは「サイズと機能の面で効率的なモデル」とされており、5400億パラメーターよりもスリムなモデルになるようだ。
また、PaLMにプロンプトの反復、合成データによるデータセットの増強、カスタムモデルのチューニングといった特定のタスクを実行させるための「MakerSuite」と呼ばれる新しいプロトタイピングツールも発表している。
Google CloudでPaLMを利用する
さらに、Google CloudでPaLMを利用できるようにするために、機械学習モデルやAIアプリを構築・デプロイするためのAI開発プラットフォーム「Vertex AI」の大規模アップデートも行なわれた。現在はテキストや画像を生成する基礎モデルを提供しているが、将来的には音声や動画にも対応するという。
また、企業や研究者が独自のデータを使い、生成AIを搭載したチャットインターフェイスやデジタルアシスタントを構築するためのサービス「Generative AI App Builder」の提供も開始した。
Google Workspaceにも生成AI機能を追加
グーグルは同日、同社のクラウドサービス「Google Workspace」のGmailやGoogleドキュメントに生成AIを使った以下のような新機能を追加することも発表した。
・Gmail の下書き、返信、要約、優先順位づけ
・ドキュメントでのブレインストーミング、校正、執筆、書き直し
・スライドで自動生成された画像、オーディオ、ビデオを使って、クリエイティブなビジョンを作成する
・スプレッドシートの自動補完、数式生成、文脈に応じた分類により、元データから洞察や分析につなげる
・Meet で新しい背景を生成し、会議のメモを作成する
・Chat で物事を進めるためのワークフローを実現する
![](https://ascii.jp/img/2023/03/15/3507934/x/697e5e008c6c48c4.gif)
サイトでは、プロンプトを入力するだけで文章のドラフトが自動的に作成される様子を公開している。作成されたドラフトに情報を追加したり、文章のトーンを変更したりすることも可能だ。
まずは米国の英語版を「信頼できる一部のテスター」に提供し、年内には一般公開する計画だ。
この記事に関連するニュース
-
吉積情報、Google Workspaceで利用できる法人向け生成AIツール「WorkAIzer」
マイナビニュース / 2024年7月2日 14時11分
-
Allganizeと日立ソリューションズが生成AI・LLM領域で販売パートナーシップを強化
PR TIMES / 2024年7月2日 12時45分
-
Meta、コード最適化のためのAIモデル「LLM Compiler」を商用ライセンスで公開
ITmedia NEWS / 2024年6月28日 14時50分
-
オンプレミス導入も可能な高性能日本語LLM「Llama 3 neoAI 8B Chat v0.1」を公開
PR TIMES / 2024年6月26日 16時45分
-
生成AIブームの中でアップルが出した「答え」 例年以上に大注目のWWDCで明かされた真実
東洋経済オンライン / 2024年6月12日 7時0分
ランキング
-
1楽天ペイと楽天ポイントのキャンペーンまとめ【7月4日最新版】 楽天ペイアプリでポイント最大10倍もらえる
ITmedia Mobile / 2024年7月4日 10時5分
-
2ドコモ、au、ソフトバンク、楽天モバイルの端末セールまとめ【7月5日最新版】 新スマホ「AQUOS R9」「Xperia 1 VI」をお得に入手しよう
ITmedia Mobile / 2024年7月5日 10時5分
-
37月10日は「納豆の日」 LINEヤフーが納豆にまつわる検索データ公開 ユーザーの関心明らかに
iza(イザ!) / 2024年7月5日 11時19分
-
4Google検索も不要に? 検索AI「Perplexity」がスゴすぎてちょっと怖い
ITmedia NEWS / 2024年7月5日 19時16分
-
5「ドコモ光 1ギガ」旧プランを2025年6月に提供終了、解約金の安い新プランへ自動移行
マイナビニュース / 2024年7月4日 19時15分
記事ミッション中・・・
記事にリアクションする
![](/pc/img/mission/mission_close_icon.png)
記事ミッション中・・・
記事にリアクションする
![](/pc/img/mission/point-loading.png)
エラーが発生しました
ページを再読み込みして
ください
![](/pc/img/mission/mission_close_icon.png)