生成AI活用の格差解消へ。インドで“ヒンディー語対応”の言語モデルを構築、スタートアップSarvam AIのアプローチ
Techable / 2024年1月31日 18時0分
近年、ChatGPTをはじめとする「生成AI」が世界中で注目を集めている。しかし、生成AIの対応言語は英語であることが多く、英語話者の少ない国では生成AIの活用がはばかられている。
とくに、ヒンディー語を公用語とするインドでは、英語が準公用語であるものの、英語を流暢に話せる人の割合は少ないという。
AIを活用できる人とできない人の格差が生まれるなか、インドの生成AIスタートアップ企業Sarvam AIはヒンディー語対応のオープンソース言語モデルを開発した。
GPT-3.5と同等の言語モデル「OpenHathi」Sarvam AIは2023年に設立されたばかりの生成AIスタートアップ。「OpenHathi-Hi-0.1」と呼ばれる初のオープンソースのヒンディー語言語モデルをリリースしている。
同モデルは、リーズナブルな価格でGPT-3.5のような性能をヒンディー言語でも取得できるように、計算とデータの制約の下で訓練されたもの。Llama2-7Bの上に構築されており、そのトークナイザーを48Kトークンに拡張するという。
OpenHathi-Hi-0.1の学習プロセスは2段階。最初のフェーズでは、ランダムに初期化されたヒンディー語埋め込みを調整する。2つ目のフェーズではバイリンガル言語モデリング。ここでは、トークン間で言語を超えてモデルをトレーニングする。
なお、OpenHathi-Hi-0.1はテキストと音声の両方に対応しており、今後はインド企業と提携しデータに基づいたAIモデルを構築していく予定だ。
設立から5か月で4,100万ドルを調達Sarvam AIの設立者のVivek Raghavan氏とPratyush Kumar氏は、以前インド研究機関のAI4Bharatで働いていた。
AI4Bharatは、インド言語のオープンソースモデルやアプリケーションの開発に取り組んでいる。OpenHathi-Hi-0.1の開発に際し、Sarvam AIは同研究室と提携し、言語リソースとベンチマークを活用したという。
2023年12月、Sarvam AIはLightspeedやPeak XV Partners、Khosla Venturesが主導するシリーズAラウンドで4,100万ドルを調達した。設立からわずか5か月での資金調達ということで注目が集まっている。
参考・引用元:Sarvam AI
(文・山田)
外部リンク
この記事に関連するニュース
-
インド国内の非英語話者向けAI翻訳サービスDevnagri、プレシリーズA資金調達
Techable / 2024年7月31日 16時0分
-
Llama 3.1発表、4050億パラメータの最先端モデル公開「オープンなAIを主流に」
マイナビニュース / 2024年7月24日 7時22分
-
「Phi-3」「Llama-3」「GPT-4o mini」などの小規模言語モデルを使用して生成AIの回答精度を向上させる「SLMファインチューニング」カスタムサービスを開始
PR TIMES / 2024年7月23日 18時15分
-
JTP、OpenAIの最新モデルGPT-4o miniへの対応を完了
PR TIMES / 2024年7月19日 15時30分
-
OpenAI 「GPT-4o mini」発表、優れた推論力とコスト効率、GPT-3.5 Turboの置き換えに
マイナビニュース / 2024年7月19日 7時36分
ランキング
-
1そうはならんやろ……! 230万再生の“究極のマクドナルドアレンジ”が狂気すぎ 「糖尿病まっしぐら」「心臓発作なるわ」【海外】
ねとらぼ / 2024年8月17日 12時15分
-
2「それ知らんかった」 マルコメ、“まさかのお知らせ”に思わず二度見 「弊社より旅立ったみそ達が……」
ねとらぼ / 2024年8月17日 13時3分
-
3VTuber・湊あくあ主演ゲームが“無制限で実況・配信OK”に 卒業まで期間限定で
ITmedia NEWS / 2024年8月16日 19時28分
-
4日本語対応の質屋経営ゲーム『Pawn Planet』Steam早期アクセス開始。宇宙人相手に価格交渉で儲けろ!
Game*Spark / 2024年8月17日 17時41分
-
5Androidの大きな脆弱性をセキュリティー会社が指摘 世界中のPixelデバイスに影響か
ASCII.jp / 2024年8月16日 18時0分
記事ミッション中・・・
記事にリアクションする
![](/pc/img/mission/mission_close_icon.png)
記事ミッション中・・・
記事にリアクションする
![](/pc/img/mission/point-loading.png)
エラーが発生しました
ページを再読み込みして
ください
![](/pc/img/mission/mission_close_icon.png)