2021年7月 - 2026年3月
多元自動通訳システムと評価法に関する研究とその応用展開
日本学術振興会 科学研究費助成事業 基盤研究(S) 基盤研究(S)
- 課題番号
- 21H05054
- 体系的番号
- JP21H05054
- 担当区分
- 研究分担者
- 配分額
-
- (総額)
- 189,280,000円
- (直接経費)
- 145,600,000円
- (間接経費)
- 43,680,000円
課題1-A)強調を含んだ原音声をend-to-endで対象言語に変換する方式を検討し有効性を示した.形容詞以外の品詞の強調やフォーカスの抽出および翻訳法に関する検討を開始した.音声とビデオの身体的話者性変換の統合システムの改良を実施した.任意の話者および言語にも対応可能な深層ネットワーク統合型音声変換法を提案し,その有効性を示した.任意のフォトリアルな発話表情合成を実現するため,Nerfに基づく従来の3次元顔モデルベースとは異なる,3次元モデルの仲介や長時間レンダリングを必要としない輝度場の機械学習に基づくスーパーフォトリアル顔画像合成法に着手した.B)分野やキーワード等の情報を明に与える形での事前適応について方式調査を行った.マルチモーダル事前学習モデルを用いた予備検討を行い,本タスクに最適化する際の学習効率が課題であることが明らかになった.C)漸進的音声合成の品質と遅延の改善を優先的に実施した.大きく語順の異なる同時音声翻訳に対応するため,構文情報を利用する方法,プレフィクスを利用する方法を提案し有効性を確認した.
課題2-A)遠隔同時通訳において導入されている既存の通訳者支援システムを特定し分析した.B)現在使われている通訳品質評価法について,先行研究の検証や関連機関へのヒアリングを行い,主観評価ではなく客観的に測定可能なデータに基づく通訳品質評価法の確立に向けた作業に着手した.翻訳評価で用いられる枠組みであるMQMを用いた小規模な同時通訳評価アノテーションを実施した.C)同時通訳中における文単位のASSR反応による認知負荷の測定,認知負荷指数の関係の解析を実施した.
課題3-A)原発話・通訳発話のアラインメントツールプロトタイプを構築し評価アノテーションに活用した.C)モジュールの再構築による統合システムの更新を行いIWSLT 2022の同時翻訳共通タスクに参加した.
課題2-A)遠隔同時通訳において導入されている既存の通訳者支援システムを特定し分析した.B)現在使われている通訳品質評価法について,先行研究の検証や関連機関へのヒアリングを行い,主観評価ではなく客観的に測定可能なデータに基づく通訳品質評価法の確立に向けた作業に着手した.翻訳評価で用いられる枠組みであるMQMを用いた小規模な同時通訳評価アノテーションを実施した.C)同時通訳中における文単位のASSR反応による認知負荷の測定,認知負荷指数の関係の解析を実施した.
課題3-A)原発話・通訳発話のアラインメントツールプロトタイプを構築し評価アノテーションに活用した.C)モジュールの再構築による統合システムの更新を行いIWSLT 2022の同時翻訳共通タスクに参加した.
- リンク情報
- ID情報
-
- 課題番号 : 21H05054
- 体系的番号 : JP21H05054
この研究課題の成果一覧
絞り込み
受賞
6論文
65-
IEICE Transactions on Information and Systems E107.D(10) 1322-1331 2024年10月1日 査読有り
-
Journal of Natural Language Processing 31(3) 868-893 2024年9月 査読有り
-
Proceedings of the 21st International Conference on Spoken Language Translation (IWSLT 2024) 254-264 2024年8月 査読有り
-
Proceedings of the 19th Workshop on Innovative Use of NLP for Building Educational Applications (BEA 2024) 316-329 2024年6月 査読有り
-
Proceedings of the 2024 Joint International Conference on Computational Linguistics, Language Resources and Evaluation (LREC-COLING 2024) 6484-6495 2024年5月 査読有り
-
Proceedings of the 2024 Joint International Conference on Computational Linguistics, Language Resources and Evaluation (LREC-COLING 2024) 12046-12052 2024年5月 査読有り
-
言語処理学会 第30回年次大会 発表論文集 2024年3月
-
言語処理学会 第30回年次大会 2024年3月
-
言語処理学会 第30回年次大会 発表論文集 2024年3月
-
言語処理学会 第30回年次大会 発表論文集 2024年3月
MISC
4-
言語処理学会第31回年次大会発表論文集 2013-2018 2025年3月
-
言語処理学会第31回年次大会発表論文集 228-233 2025年3月
-
言語処理学会 第29回年次大会 発表論文集 800-804 2023年3月
-
言語処理学会 第28回年次大会 発表論文集 2056-2060 2022年3月
講演・口頭発表等
5-
日本翻訳連盟(JTF)セミナー 2024年7月31日 招待有り
-
多元自動通訳研究シンポジウム2023 2023年8月31日 招待有り
-
Translation in Transition 6 Conference 2022年9月22日
-
日本通訳翻訳学会 第23回年次大会 2022年9月4日
-
情報処理学会 第141回音声言語処理研究発表会 2022年3月23日 招待有り