国際学会「EMNLP」で本社員の論文が2年連続で採択
PR TIMES / 2024年11月7日 17時15分
大規模言語モデルの信頼性向上に関する手法を提案
株式会社朝日新聞社(代表取締役社長 角田 克)メディア研究開発センター員の川畑輝が主著した論文(以下「本論文」)が、自然言語処理分野における世界最高峰の国際学会の一つ「Empirical Methods in Natural Language Processing」(以下「EMNLP」)の本会議に採択されました。川畑が主著の論文がEMNLPに採択されるのは2023年に続き2年連続になります。本年は11月12日から16日まで米国フロリダ州マイアミで本会議が開催され、現地で川畑が発表します。
本論文は、国立情報学研究所 菅原朔助教との研究成果をまとめたもので、大規模言語モデル(以下「LLM」)が応答する内容の、真偽性を自動評価するためのLLM(以下「評価用LLM」)の構築手法について提案しました。従来研究において評価用LLMは、評価対象のLLMが出力する最終的な結論の真偽のみに評価の焦点を当て構築されてきました。本論文では、評価対象のLLMが出力する結論だけではなく、結論を導くまでの過程や根拠の妥当性も評価できるような評価用LLMを学習する手法「Rationale Enhancement through Pairwise Selection:REPS」を提案しました。情報の受け手にとっては「結論のみならず結論を導くまでの過程や根拠も重要である」ことに着目したもので、LLM自体の性能向上や、LLMの応答に含まれる嘘(ハルシネーション)の低減や検知にもつながる研究です。
[画像: https://prcdn.freetls.fastly.net/release_image/9214/1745/9214-1745-61160c57c1b019a69462cd0b7d340218-1390x559.jpg?width=536&quality=85%2C75&format=jpeg&auto=webp&fit=bounds&bg-color=fff ]
REPSの概念図(本論文より引用)
朝日新聞社は最新テクノロジー、特にAI分野での研究を推進し、社内外のLLM技術の利活用やDXに貢献していきます。
■論文について
Akira Kawabata, Saku Sugawara. Rationale-Aware Answer Verification by Pairwise Self-Evaluation. In Proceedings of the 2024 Conference on Empirical Methods in Natural Language Processing (EMNLP 2024), Florida, U.S.A., November 2024. https://arxiv.org/abs/2410.04838
邦題: ペアワイズ自己評価による根拠を考慮した回答検証
■メディア研究開発センターについて
2021年4月に発足しました。人工知能を始めとする先端メディア技術と、新聞社ならではの豊富なテキストや写真、音声などの資源を活用し、社内外の問題解決を目指すとともに、自然言語処理や画像処理をはじめとした先端技術の研究・開発を進めています。
<本リリースについての問い合わせ>
朝日新聞社 メディア事業本部 メディア研究開発センター
E-mail: mrad-contact@asahi.comにお願いします。
企業プレスリリース詳細へ
PR TIMESトップへ
この記事に関連するニュース
-
朝日新聞社・東京科学大学・産総研グループによる産学連携
PR TIMES / 2024年11月13日 13時40分
-
ストックマーク LLM組織の高橋が執筆した日本語LLMの分析論文が LLM領域の査読付き国際学会「PACLIC 38」に採択
PR TIMES / 2024年11月3日 23時40分
-
押さえておきたいLLM用語の基礎解説 第3回 学習率・事前学習・クリーニング・ファインチューニング・インストラクションチューニング・プレファレンスチューニング
マイナビニュース / 2024年10月29日 9時0分
-
朝日新聞社の文章校正AI 「Typoless(タイポレス)」が ISMS「ISO/IEC 27001:2022」認証を取得
PR TIMES / 2024年10月17日 16時40分
-
Appier (エイピア)、人工知能に関する研究論文3本が、世界最高峰の学会「NeurIPS (人工知能、機械学習)」と「EMNLP (自然言語処理)」で採択
PR TIMES / 2024年10月17日 15時10分
ランキング
-
1「103万円の壁」見直しに宮城知事「私が総理なら首を縦に振らない」「立ちどころに財政破綻」
読売新聞 / 2024年11月13日 23時13分
-
2高知など13日は全国42の地点で夏日に…猛暑が去ったのにキュウリが3倍近くの価格になり食卓に打撃 一体なぜ?
TBS NEWS DIG Powered by JNN / 2024年11月13日 19時47分
-
3“大型セール”ブラックフライデー始まる、驚きの96円グルメも登場、旅行もお得に【Nスタ解説】
TBS NEWS DIG Powered by JNN / 2024年11月13日 21時44分
-
4【独自】住民税非課税世帯に3万円検討 子1人2万円上乗せも、物価高で
共同通信 / 2024年11月13日 21時42分
-
5星野リゾート、総スカン「大学1年でも内定」の意義 学生や採用担当者には不評だが隠された意図がある?
東洋経済オンライン / 2024年11月14日 9時20分
記事ミッション中・・・
記事にリアクションする
記事ミッション中・・・
記事にリアクションする
エラーが発生しました
ページを再読み込みして
ください