国際学会「EMNLP」で本社員の論文が2年連続で採択
PR TIMES / 2024年11月7日 17時15分
大規模言語モデルの信頼性向上に関する手法を提案
株式会社朝日新聞社(代表取締役社長 角田 克)メディア研究開発センター員の川畑輝が主著した論文(以下「本論文」)が、自然言語処理分野における世界最高峰の国際学会の一つ「Empirical Methods in Natural Language Processing」(以下「EMNLP」)の本会議に採択されました。川畑が主著の論文がEMNLPに採択されるのは2023年に続き2年連続になります。本年は11月12日から16日まで米国フロリダ州マイアミで本会議が開催され、現地で川畑が発表します。
本論文は、国立情報学研究所 菅原朔助教との研究成果をまとめたもので、大規模言語モデル(以下「LLM」)が応答する内容の、真偽性を自動評価するためのLLM(以下「評価用LLM」)の構築手法について提案しました。従来研究において評価用LLMは、評価対象のLLMが出力する最終的な結論の真偽のみに評価の焦点を当て構築されてきました。本論文では、評価対象のLLMが出力する結論だけではなく、結論を導くまでの過程や根拠の妥当性も評価できるような評価用LLMを学習する手法「Rationale Enhancement through Pairwise Selection:REPS」を提案しました。情報の受け手にとっては「結論のみならず結論を導くまでの過程や根拠も重要である」ことに着目したもので、LLM自体の性能向上や、LLMの応答に含まれる嘘(ハルシネーション)の低減や検知にもつながる研究です。
[画像: https://prcdn.freetls.fastly.net/release_image/9214/1745/9214-1745-61160c57c1b019a69462cd0b7d340218-1390x559.jpg?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
REPSの概念図(本論文より引用)
朝日新聞社は最新テクノロジー、特にAI分野での研究を推進し、社内外のLLM技術の利活用やDXに貢献していきます。
■論文について
Akira Kawabata, Saku Sugawara. Rationale-Aware Answer Verification by Pairwise Self-Evaluation. In Proceedings of the 2024 Conference on Empirical Methods in Natural Language Processing (EMNLP 2024), Florida, U.S.A., November 2024. https://arxiv.org/abs/2410.04838
邦題: ペアワイズ自己評価による根拠を考慮した回答検証
■メディア研究開発センターについて
2021年4月に発足しました。人工知能を始めとする先端メディア技術と、新聞社ならではの豊富なテキストや写真、音声などの資源を活用し、社内外の問題解決を目指すとともに、自然言語処理や画像処理をはじめとした先端技術の研究・開発を進めています。
<本リリースについての問い合わせ>
朝日新聞社 メディア事業本部 メディア研究開発センター
E-mail: mrad-contact@asahi.comにお願いします。
企業プレスリリース詳細へ
PR TIMESトップへ
この記事に関連するニュース
-
朝日新聞社・東京科学大学・産総研グループによる産学連携
PR TIMES / 2024年11月16日 21時40分
-
朝日新聞ポッドキャストで新番組「ニュースの学校」配信開始
PR TIMES / 2024年11月12日 12時40分
-
学生スポーツメディア「4years.」が 11月11日「マンガ部」を創部
PR TIMES / 2024年11月11日 15時45分
-
ストックマーク LLM組織の高橋が執筆した日本語LLMの分析論文が LLM領域の査読付き国際学会「PACLIC 38」に採択
PR TIMES / 2024年11月3日 23時40分
-
押さえておきたいLLM用語の基礎解説 第3回 学習率・事前学習・クリーニング・ファインチューニング・インストラクションチューニング・プレファレンスチューニング
マイナビニュース / 2024年10月29日 9時0分
ランキング
-
1クリスマスケーキに異変…『卵』の価格高騰止まらず 夏の猛暑の影響で今後は鳥インフルエンザによる卵不足の恐れも
東海テレビ / 2024年11月21日 21時22分
-
2業績悪化の日産、アメリカでの希望退職に1000人が応募か…世界で9000人削減方針
読売新聞 / 2024年11月21日 22時2分
-
3NY株続伸、461ドル高=トランプ氏の政策期待で
時事通信 / 2024年11月22日 7時23分
-
4北欧電池企業が破産法申請 EV販売鈍化、経営圧迫
共同通信 / 2024年11月22日 7時24分
-
5さすがに価格が安すぎた? 『ニトリ』外食事業をわずか3年8カ月で撤退の原因を担当者に直撃「さまざまな取り組みを実施しましたが…」
集英社オンライン / 2024年11月21日 16時49分
記事ミッション中・・・
記事にリアクションする
記事ミッション中・・・
記事にリアクションする
エラーが発生しました
ページを再読み込みして
ください