2024年3⽉10⽇ NL研

原発話に忠実な英⽇同時機械翻訳の実現に向けた順送り訳評価データ作成
福⽥ りょう, ⼟肥 康輔, 須藤 克仁, 中村 哲
奈良先端科学技術⼤学院⼤学

同時翻訳• ⽂の終わりを待たずに翻訳を開始する漸進的な機械翻訳（MT）
I have a pen.

Ia pen.

同時翻訳

機械翻訳（MT）
私はペンを持っている。

have

私は持っている、ペンを• 同時翻訳の取り組み• 英語 → {ドイツ語、中国語、⽇本語} などの⾔語対で研究が盛ん• 多くは、時間に制約されないオフライン翻訳データを⽤いてMTを学習→ 英⽇では語順の違いによって遅延が⽣じる（SVO→SOV）• 英⽇同時通訳データを⽤いたMTの学習 [Shimizuら 2013, Koら 2023]→ 通訳者の同時通訳の技法を取り⼊れることで低遅延な翻訳を⽬指す

2

同時通訳者の技法︓順送りと短縮⽅略
英⽇通訳の同時性を⾼める2つの訳出⽅略 [遠⼭ら 2003]
1. 順送りによる訳出（順送り⽅略）• 発話をチャンクに区切りながら順次訳出• 時間的制約のため、順送り⽅略を常に適⽤することは難しい(1) Groups like Anonymous / (2) have risen up / (3) over the last 12 months /(4) and have become a major player / (5) in the field of online attacks.

(1) アノニマスのようなグループが / (2) 台頭してきています，/ (3)
過去12ヶ⽉にわたって， / (4) そして主要なプレイヤーになっています，/ (5) オンライン攻撃の分野において．

2. 短縮による訳出（短縮⽅略）• 要約や、重要でない箇所の省略などで遅延を低減
3

同時翻訳の課題︓短縮⽅略の学習• 同時通訳データを⽤いたMTの学習 [Shimizuら 2013, Koら 2023]→ 同時通訳の技法（順送り⽅略・短縮⽅略）の獲得を⽬指す• MTが通訳者並みの適切さで短縮⽅略を⾏うことは難しい現状• 同時通訳事例を学習したMTは訳抜けが多い [Koら 2023]• 何を省略して何を省略しないかの区別が難しい. 多量のデータで解決︖同時通訳データは少ない
原発話• Thereʼs no hospital that can say ”No.”• Anybody whoʼs paralyzed now has access to actually draw orcommunicate using only their eyes.

同時通訳• 病院も、ノーとは⾔えない。
• ⿇痺してる⼈達は、これを全員使うことが出来るようになっています。

同時通訳を学習したMT• 病院は、• ⿇痺した⼈たちは、
4

⽬的順送り⽅略だけを常に適⽤する同時翻訳システムの構築• 順送り⽅略だけ … 省略しないことで、単語対応関係などが学習しやすい• 常に適⽤ … 同時性が⾼く、かつ訳抜けの少ない（忠実な）同時翻訳を実現• 時間的制約から常に適⽤は難しかったが、処理が⾼速なMTなら可能︖

同時性 MTの学習 原発話への忠実さ
オフライン翻訳×○○

同時通訳（順送りと短縮⽅略の使い分け）

○

×

△

順送り訳（順送り⽅略のみ）

○

○

○

本研究では初期検討として、MT評価⽤の英⽇順送り訳データを作成
5

関連研究︓英⽇同時翻訳のデータ作成
1. 事前並び替えとスタイル変換による擬似同時通訳データ [⼆⼜ら 2020]
2. ⽂脈を考慮したチャンク単位の対訳コーパス [中林ら 2021]
⾃動的⼿法で⼤規模なデータを作成できる
訳⽂の流暢さに課題

3. ⼈⼿で作成した順送り訳を含む同時通訳コーパス [東⼭ら 2023]
本研究のデータと類似、かつ規模が⼤きい
本研究は (1) チャンキングを⾃動化, (2) 同時通訳と⽐較, (3) データを公開
6

順送り訳の定義「チャンク単位で交差量が0、かつ省略が0となる訳出」• 交差量︓対応する訳⽂のチャンクの位置が右⽅向に移動した原発話のチャンクの数• 省略︓対応する訳⽂のチャンクが存在しない原発話のチャンクの数
原発話(1) Groups like Anonymous / (2) have risen up / (3) overthe last 12 months / (4) and have become a major player /(5) in the field of online attacks.

オフライン翻訳(1) Anonymousというグループは / (3) この12ヶ⽉ほど /(2) 活気付いていて / (5) オンライン攻撃において / (4) ⼤きな存在になってます

交差量=2
省略=0

同時通訳

(1) アノニマス集団ですね, こちらの⽅が, / (5) オンライン攻撃の, / (4) 主要な, プレイヤーになっています.

交差量=1
省略=2

順送り訳

(1) アノニマスのようなグループが / (2) 台頭してきています，
交差量=0/ (3) 過去12ヶ⽉にわたって， / (4) そして主要なプレイヤー
省略=0になっています，/ (5) オンライン攻撃の分野において．
7

順送り訳の定義「チャンク単位で交差量が0、かつ省略が0となる訳出」• 交差量︓対応する訳⽂のチャンクの位置が右⽅向に移動した原発話のチャンクの数• 省略︓対応する訳⽂のチャンクが存在しない原発話のチャンクの数
原発話(1) Groups like Anonymous / (2) have risen up / (3) overthe last 12 months / (4) and have become a major player /(5) in the field of online attacks.

オフライン翻訳(1) Anonymousというグループは / (3) この12ヶ⽉ほど /(2) 活気付いていて / (5) オンライン攻撃において / (4) ⼤きな存在になってます

交差量=2
省略=0

交差量=1
(1) アノニマス集団ですね, こちらの⽅が, / (5) オンライン
同時通訳交差︓(3)の完了を交差︓(5)の完了を攻撃の, / (4)主要な, プレイヤーになっています.
省略=2
同時性↓
待って(2)を訳出待って(4)を訳出(1) アノニマスのようなグループが / (2) 台頭してきています，交差量=0
順送り訳/ (3) 過去12ヶ⽉にわたって， / (4) そして主要なプレイヤー
省略=0になっています，/ (5) オンライン攻撃の分野において．
8順送り訳の定義「チャンク単位で交差量が0、かつ省略が0となる訳出」• 交差量︓対応する訳⽂のチャンクの位置が右⽅向に移動した原発話のチャンクの数• 省略︓対応する訳⽂のチャンクが存在しない原発話のチャンクの数
原発話(1) Groups like Anonymous / (2) have risen up / (3) overthe last 12 months / (4) and have become a major player /(5) in the field of online attacks.

オフライン翻訳(1) Anonymousというグループは / (3) この12ヶ⽉ほど /(2) 活気付いていて / (5) オンライン攻撃において / (4) ⼤きな存在になってます

交差量=2
省略=0

同時通訳

(1) アノニマス集団ですね, こちらの⽅が, / (5) オンライン攻撃の, / (4) 主要な, プレイヤーになっています.

交差量=1
省略=2

(1) アノニマスのようなグループが / (2) 台頭してきています，
交差量=0
順送り訳(2)(3)が省略︓原発話の/ (3) 過去12ヶ⽉にわたって， / (4) そして主要なプレイヤー
忠実さ↓
省略=0
情報全てが伝わらないになっています，/ (5) オンライン攻撃の分野において．
9順送り訳の定義「チャンク単位で交差量が0、かつ省略が0となる訳出」• 交差量︓対応する訳⽂のチャンクの位置が右⽅向に移動した原発話のチャンクの数• 省略︓対応する訳⽂のチャンクが存在しない原発話のチャンクの数
原発話(1) Groups like Anonymous / (2) have risen up / (3) overthe last 12 months / (4) and have become a major player /(5) in the field of online attacks.

(1) Anonymousというグループは / (3) この12ヶ⽉ほど /オフライン翻訳 (2) 活気付いていて / (5) オンライン攻撃において / (4) ⼤き同時性と忠実さのな存在になってます
観点で理想的(1) アノニマス集団ですね, こちらの⽅が, / (5) オンライン同時通訳
攻撃の, / (4) 主要な, プレイヤーになっています.
順送り訳

交差量=2
省略=0
交差量=1
省略=2

(1) アノニマスのようなグループが / (2) 台頭してきています，
交差量=0/ (3) 過去12ヶ⽉にわたって， / (4) そして主要なプレイヤー
省略=0になっています，/ (5) オンライン攻撃の分野において．
10順送り訳の定義「チャンク単位で交差量が0、かつ省略が0となる訳出」• 交差量︓対応する訳⽂のチャンクの位置が右⽅向に移動した原発話のチャンクの数• 省略︓対応する訳⽂のチャンクが存在しない原発話のチャンクの数
原発話(1) Groups like Anonymous / (2) have risen up / (3) overthe last 12 months / (4) and have become a major player /(5) in the field of online attacks.

(1) Anonymousというグループは / (3) この12ヶ⽉ほど /つなぎ⾔葉による⻑い訳出
オフライン翻訳 (2) 活気付いていて / (5)オンライン攻撃において / (4) ⼤き→ 聞き疲れしやすい︖
同時性と忠実さのな存在になってます
⼀度の理解が難しい︖
観点で理想的(1) アノニマス集団ですね, こちらの⽅が, / (5) オンライン同時通訳
攻撃の, / (4) 主要な, プレイヤーになっています.
順送り訳

交差量=2
省略=0
交差量=1
省略=2(1) アノニマスのようなグループが / (2) 台頭してきています，
交差量=0/ (3) 過去12ヶ⽉にわたって， / (4) そして主要なプレイヤー
省略=0になっています，/ (5) オンライン攻撃の分野において．
11順送り訳データ作成︓概要• ⼿順① チャンキング（⾃動）In other words, itwill pay off to put
people first.

② 順送り訳作成（翻訳者）

In other words, / itwill pay off / to put
people first.

⾔い換えると、 / 報われるのだということです、 /⼈を第⼀に考えることで。

• 作業対象データ• TED talksに基づく英⽇同時通訳コーパスNAIST-SIC-Aligned-ST[Koら 2023] のテストデータ511⽂
12

順送り訳データ作成︓① チャンキング
• 通訳者の経験に基づくチャンク化ルール [岡村, ⼭⽥ 2023]

I. 節を導く接続詞，関係詞（主語を修飾する場合は除く）の前
I think / thatyou are right.
II. 後ろに3語以上が続くto不定詞，前置詞，動名詞の前III. 3語以上の⻑い主語の後
IV. コンマ（1語ずつの羅列は除く），セミコロン，ハイフン等の記号の前後
V. ⽂頭（または節を導く接続詞，関係詞の直後）の前置詞句，副詞句の後• spaCyの英語モデルの構⽂解析情報を⽤いて⾃動化• ⼀貫性のあるチャンキング、翻訳者の作業負担軽減• ⼈⼿チャンキングとの⼀致︓F1=75.9%, 適合率72.5%, 再現率79.7%

13

順送り訳データ作成︓② 順送り訳作成• 基本ルール

1. ⽂頭からチャンクごとに翻訳する
2. ⽂全体を⾒てチャンク間の繋がりが⾃然になるように翻訳する
3. 後ろ（未来）のチャンクの情報を含めずに翻訳する
In other words, / it will pay off / to put people first.
△ ⾔い換えると, / それは報われるでしょう. / ⼈を第⼀に考えること.
○ ⾔い換えると, / 報われるのだということです, / ⼈を第⼀に考えることで.

つなぎ⾔葉
14

順送り訳データ作成︓② 順送り訳作成• 基本ルール

1. ⽂頭からチャンクごとに翻訳する
2. ⽂全体を⾒てチャンク間の繋がりが⾃然になるように翻訳する
3. 後ろ（未来）のチャンクの情報を含めずに翻訳する• 流暢性を保つために許容した操作（※下ほど慎重に適⽤）• 前のチャンクの情報を繰り返し訳出すること• 翻訳すべき情報を後ろのチャンクに先送りすること• 不要な情報を省略すること

15

順送り訳データ作成︓② 順送り訳作成• 基本ルール

1. ⽂頭からチャンクごとに翻訳する
he drew again / for the first time, / in front of his family / and friends.
2. And
⽂全体を⾒てチャンク間の繋がりが⾃然になるように翻訳する
そして彼は再び描きました, / 初めて, / 家族の前で / また友⼈たち.
3. △後ろ（未来）のチャンクの情報を含めずに翻訳する○ そして彼は再び描きました, / 初めて, / 家族の前で / また友⼈たちの前で.

• 流暢性を保つために許容した操作（※下ほど慎重に適⽤）繰り返し• 前のチャンクの情報を繰り返し訳出すること• 翻訳すべき情報を後ろのチャンクに先送りすること• 不要な情報を省略すること

16

分析︓品質評価• 翻訳の評価基準で5段階評価（通訳経験のあるアノテータ）• 流暢さ︓⽂章としてどの程度⾃然な表現か• 適切性︓原⽂の情報がどの程度含まれているか→ 平均4.8/5→ 平均4.9/5• ⾃然かつ原⽂の内容に忠実な順送り訳• 「全体にとても美しい順送り訳になっていると感じた」• システム構築の評価データとして適切
サンプル数

500431

流暢さ
適切性400455300
200
100
0001202208360 4645

評価値

17

分析︓同時通訳との⽐較• オフライン翻訳を基準に、同時通訳は短く、順送り訳は⻑い• 合計⽂字数︓同時通訳1.6万、オフライン翻訳2.2万、順送り訳2.6万• ⽂の平均⽂字数︓同時通訳31.6、 順送り訳50.3
140

順送り訳
同時通訳

100
80
60
40
200110
11-2021-3031-40
41-5051-6061-7071-8081-9091-100
10
1-

サンプル数

120

文字数
18

分析︓同時通訳との⽐較
省略 “flexible design”•要約
同時通訳は短縮⽅略により短く、順送り訳は繰り返しやつなぎ“スクワットをしたり⾔葉により⻑くなる傾向すること”
原発話Its flexible design / allows for deep squats, / crawls and highagility movements.

同時通訳

これでスクワットをしたりすることができるわけです．

⽂脈を考慮した省略
その柔軟な設計は / 深いスクワットを可能にし， / クロールや⾼い敏捷性の動き
つなぎ⾔葉を多⽤順送り訳を可能にします．
“online attacks”→ “攻撃”“のは, ” “です, それも”繰り返し “allows”
原発話

They use online attacks / to make lots of money / and lots and lots of it.

同時通訳（直前の訳︓オンラインの犯罪というのは，要するにお⾦を稼ごうとしてるわけです．）これ攻撃をして，お⾦をたくさん稼いでると.

順送り訳

彼らがオンライン攻撃を⽤いるのは， / 多くのお⾦を稼ぐためです， / それも⼭ほどのお⾦を．
19分析︓不適切なチャンキング• ⾃動チャンキングの精度やチャンキングのルールに改善の余地• 評価者「チャンク位置のために訳出困難，意味ずれなどが多発した」• 7%のサンプルに、チャンキングのエラーかエラー以外の不適切な分割
チャンキングのエラー
句動詞running intoの分割→ 翻訳者は先送りで対処

ルールII*に従っているが不⾃然な分割*後ろに3語以上が続く前置詞

原発話

It was running / into bankruptcy last fall, / …
… / along with most / of the other experimental quantum physicists, / …

順送り訳

それは， / 昨秋，破産⼨前でした / …
… / ⼤半の / 他の実験的量⼦物理学者たちと同じような類の⼀⼈であるという事です, / …
20

まとめと今後の課題• 同時翻訳システム評価⽤の英⽇順送り訳データを作成• 流暢さと適切性が⾼く、評価データとして適切な品質• チャンキングに改善の余地• データ︓ https://dsc-nlp.naist.jp/data/NAIST-SIC/Aligned-Chunk_Mono-EJ• 聞き⼿の視点からデータを評価することが今後必要• ⻑いほど⼀度に理解しづらい、聞き疲れしやすいなどの懸念を踏まえ「原発話に忠実な同時翻訳」の必要性を検証• その後、順送り訳を⾏える同時翻訳システムを構築• 同時性が⾼く、原発話に忠実な同時翻訳の実現

21