千葉工業大学と東大、リザバー計算の一種「ESN」の性能向上の鍵を確認
マイナビニュース / 2024年5月7日 16時28分
千葉工業大学(千葉工大)と東京大学(東大)は5月1日、リザバー計算(RC)モデルの一種である次世代型人工知能「エコーステートネットワーク」(ESN)の性能向上の鍵として、ニューロン内部の「時間履歴項」(以下、「THT」と省略)の調整によるダイナミクスの最適化が重要な役割を担うことを解明したと共同で発表した。
同成果は、千葉工大大学院 情報科学研究科の江波戸雄大氏、同・大学 情報変革科学部 情報工学科の信川創教授(同・大学 数理工学研究センター 非常勤主席研究員/国立精神・神経医療研究センター 精神保健研究所児童・予防精神医学研究部 客員研究員兼任)、同・大学 数理工学研究センターの酒見悠介上席研究員(東大 国際高等研究所 ニューロインテリジェンス国際研究機構(WPI-IRCN) 連携研究者兼任)、大和大学 情報学部 情報学科の西村治彦教授(兵庫県立大学 応用情報科学研究科 名誉教授兼任)、工学院大学 先進工学部 機械理工学科の金丸隆志教授(WPI-IRCN 連携研究者兼任)、東京都市大学 知能情報工学科のNina Sviridova講師、東大の合原一幸特別教授/名誉教授(WPI-IRCN IRCNエグゼクティブ・ディレクター・主任研究者/千葉工大 数理工学研究センター 主席研究員兼任)らの共同研究チームによるもの。詳細は、英オンライン総合学術誌「Scientific Reports」に掲載された。
ESNの性能は、リザバー(RCモデルの訓練なしの再帰型ニューラルネットワーク)の記憶性能や安定性、ダイナミクス多様性などが関連しており、それらの性質を定量化する指標が提案されつつある。そこで研究チームは今回、ESNのリザバーを構成するニューロンモデルのTHTがどのように性能に寄与するのかを調べることにしたという。
THTは、現時刻のニューロンの発火状態に、過去の発火状態の履歴をどの程度残すかを調節できるパラメータで、リザバーの状態変動のタイムスケールを入力信号や目標出力に合わせることが可能。しかし一般的な指標では、リザバーのダイナミクスのタイムスケールという、やや曖昧な概念を指標化できていなかったため、これまでその効果が十分には検証されていなかったという。また、一般的な記憶指標の「memory capacity」は、THTを持つリザバーの記憶性能を過小評価するという課題があった。
-
- 1
- 2
この記事に関連するニュース
-
東大がシリコン膜からの熱放射の倍増に成功、半導体の排熱問題の解決へ
マイナビニュース / 2024年5月10日 17時33分
-
スーパーコンピュータ「富岳」で学習した大規模言語モデル「Fugaku-LLM」を公開
PR TIMES / 2024年5月10日 17時15分
-
富士通など8者、富岳で学習した130億パラメータのLLM「Fugaku-LLM」を公開
マイナビニュース / 2024年5月10日 14時43分
-
東北大、生物の自然な動きを模倣できるロボット用運動生成AIを開発
マイナビニュース / 2024年5月8日 17時25分
-
千葉工業大学・東京大学などの研究チーム、ニューロンの時間履歴項調整によるダイナミクスの最適化がエコーステートネットワーク性能向上の鍵
PR TIMES / 2024年5月2日 12時15分
ランキング
-
1「くたばれクソメディア」 マイファスHiro、「性加害巡る誤報」伝えかけた週刊誌に中指突き立て “音声暴露”し「覚悟持ってやってこい」
ねとらぼ / 2024年5月28日 12時11分
-
2PDFアプリやQRアプリ装うマルウェア、Google Playストアで7万ダウンロード
マイナビニュース / 2024年5月28日 18時31分
-
3ダイソーが“激安スマホアクセサリー”を女性向けに展開したワケ 1100円のオーディオ製品はどうやって生まれた?
ITmedia Mobile / 2024年5月28日 12時53分
-
4約3万円台半ばでペン付きのAndroidタブレット「Lenovo Tab M11」を試す コンテンツ消費には十分なスペック
ITmedia PC USER / 2024年5月28日 17時5分
-
5やったー! KFCの定番セットメニューが値下げ 最大160円お得になるから「ケンタッキーにしな~い?」
ねとらぼ / 2024年5月28日 18時24分
複数ページをまたぐ記事です
記事の最終ページでミッション達成してください