Welcome to mirror list, hosted at ThFree Co, Russian Federation.

github.com/marian-nmt/marian-regression-tests.git - Unnamed repository; edit this file 'description' to name the repository.
summaryrefslogtreecommitdiff
diff options
context:
space:
mode:
authorRoman Grundkiewicz <rgrundki@exseed.ed.ac.uk>2018-07-06 23:53:18 +0300
committerRoman Grundkiewicz <rgrundki@exseed.ed.ac.uk>2018-07-06 23:53:18 +0300
commit66e6bff4a4efb655966374ecc611202f16932716 (patch)
treeed228ce9ec6117164661deae08dde059cd2df07b
parentf287fde403a6edf3ad1f7da0827155d77a04dfaf (diff)
Change to Moses alignment format
-rw-r--r--tests/decoder/align-ensemble/align.b1.expected46
-rw-r--r--tests/decoder/align-ensemble/align.expected46
-rw-r--r--tests/decoder/align/align.b1.expected60
-rw-r--r--tests/decoder/align/align.batched.expected60
-rw-r--r--tests/decoder/align/align.expected60
-rw-r--r--tests/decoder/align/transform_to_moses_align.py10
6 files changed, 146 insertions, 136 deletions
diff --git a/tests/decoder/align-ensemble/align.b1.expected b/tests/decoder/align-ensemble/align.b1.expected
index c9baf5d..39a57f4 100644
--- a/tests/decoder/align-ensemble/align.b1.expected
+++ b/tests/decoder/align-ensemble/align.b1.expected
@@ -1,25 +1,25 @@
-das Treffen war auch geplant , um den Konflikt mit den Palästinensern und die umstrittene Zwei-@@ Staaten@@ -Lösung zu decken . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-5 7-7 8-8 9-9 10-10 11-11 12-6 13-13 14-14 15-15 16-16 17-17 18-6 19-6 20-19
-Sie hatten einen Hund namens Ligh@@ tning , der mit ihnen im Back@@ stein@@ haus lebte , die sich in Gau@@ tier dem Kö@@ der entgegen@@ nahm . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-7 9-9 10-10 11-11 12-13 13-13 14-14 15-8 16-15 17-15 18-17 19-18 20-23 21-24 22-16 23-20 24-26 25-16 26-26 27-26
-er war verheiratet und hatte drei junge Kinder . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-9
-Schmidt , der ermor@@ dete Professor , leitete das erst@@ inst@@ anz@@ liche Seminar@@ programm und spezialisierte sich auf die Indianer und die Kolonial@@ geschichte , sagte Don Allan Mitchell , ein englischer Professor an der Schule . ||| 0-0 1-1 2-2 3-3 4-33 5-4 6-5 7-6 8-7 9-8 10-9 11-33 12-33 13-10 14-11 15-12 16-13 17-14 18-13 19-15 20-15 21-17 22-18 23-18 24-19 25-20 26-21 27-22 28-23 29-24 30-25 31-26 32-27 33-28 34-29 35-30 36-31 37-32
-und einige halten sich für eine Imp@@ lo@@ sion aus . ||| 0-0 1-1 2-3 3-5 4-5 5-6 6-7 7-7 8-8 9-3 10-10
-der britische Premierminister hat erneut alle Parteien , einschließlich des geteilten Sicherheitsrates , aufgefordert , alle Verhandlungen über die Aufnahme und Unterstützung der Verhandlungen zu vereinen und zu unterstützen , um eine politische Lösung zu finden . ||| 0-0 1-1 2-3 3-29 4-6 5-6 6-7 7-5 8-9 9-10 10-11 11-12 12-29 13-5 14-17 15-21 16-22 17-18 18-22 19-21 20-19 21-20 22-21 23-21 24-18 25-18 26-19 27-20 28-20 29-23 30-23 31-25 32-26 33-27 34-24 35-24 36-29
-die Polizei sagte , der Hund sei in Ordnung . ||| 0-0 1-0 2-1 3-2 4-2 5-3 6-4 7-5 8-5 9-6
-andere haben ihn als Witz abgetan . ||| 0-0 1-1 2-3 3-4 4-6 5-2 6-7
-in der Gegend wuchs Lamm@@ ert auf . ||| 0-0 1-4 2-5 3-1 4-0 5-7 6-7 7-7
-der Film beginnt und es kommt mir vor , dass ich ein Fa@@ ke G@@ äh@@ nen und ein Arm strecken weg von der zu einem Termin mit der Prinzessin von Wales . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-5 7-5 8-31 9-8 10-9 11-11 12-12 13-31 14-13 15-31 16-31 17-15 18-16 19-17 20-18 21-20 22-20 23-21 24-21 25-23 26-24 27-25 28-26 29-27 30-28 31-29 32-31
+das Treffen war auch geplant , um den Konflikt mit den Palästinensern und die umstrittene Zwei-@@ Staaten@@ -Lösung zu decken . ||| 0-0 1-1 2-2 3-3 4-4 5-5 5-6 6-12 6-18 6-19 7-7 8-8 9-9 10-10 11-11 13-13 14-14 15-15 16-16 17-17 19-20
+Sie hatten einen Hund namens Ligh@@ tning , der mit ihnen im Back@@ stein@@ haus lebte , die sich in Gau@@ tier dem Kö@@ der entgegen@@ nahm . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 7-8 8-15 9-9 10-10 11-11 13-12 13-13 14-14 15-16 15-17 16-22 16-25 17-18 18-19 20-23 23-20 24-21 26-24 26-26 26-27
+er war verheiratet und hatte drei junge Kinder . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 9-8
+Schmidt , der ermor@@ dete Professor , leitete das erst@@ inst@@ anz@@ liche Seminar@@ programm und spezialisierte sich auf die Indianer und die Kolonial@@ geschichte , sagte Don Allan Mitchell , ein englischer Professor an der Schule . ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-13 11-14 12-15 13-16 13-18 14-17 15-19 15-20 17-21 18-22 18-23 19-24 20-25 21-26 22-27 23-28 24-29 25-30 26-31 27-32 28-33 29-34 30-35 31-36 32-37 33-4 33-11 33-12
+und einige halten sich für eine Imp@@ lo@@ sion aus . ||| 0-0 1-1 3-2 3-9 5-3 5-4 6-5 7-6 7-7 8-8 10-10
+der britische Premierminister hat erneut alle Parteien , einschließlich des geteilten Sicherheitsrates , aufgefordert , alle Verhandlungen über die Aufnahme und Unterstützung der Verhandlungen zu vereinen und zu unterstützen , um eine politische Lösung zu finden . ||| 0-0 1-1 3-2 5-7 5-13 6-4 6-5 7-6 9-8 10-9 11-10 12-11 17-14 18-17 18-24 18-25 19-20 19-26 20-21 20-27 20-28 21-15 21-19 21-22 21-23 22-16 22-18 23-29 23-30 24-34 24-35 25-31 26-32 27-33 29-3 29-12 29-36
+die Polizei sagte , der Hund sei in Ordnung . ||| 0-0 0-1 1-2 2-3 2-4 3-5 4-6 5-7 5-8 6-9
+andere haben ihn als Witz abgetan . ||| 0-0 1-1 2-5 3-2 4-3 6-4 7-6
+in der Gegend wuchs Lamm@@ ert auf . ||| 0-0 0-4 1-3 4-1 5-2 7-5 7-6 7-7
+der Film beginnt und es kommt mir vor , dass ich ein Fa@@ ke G@@ äh@@ nen und ein Arm strecken weg von der zu einem Termin mit der Prinzessin von Wales . ||| 0-0 1-1 2-2 3-3 4-4 5-5 5-6 5-7 8-9 9-10 11-11 12-12 13-14 15-17 16-18 17-19 18-20 20-21 20-22 21-23 21-24 23-25 24-26 25-27 26-28 27-29 28-30 29-31 31-8 31-13 31-15 31-16 31-32
Sie und ihre Mutter waren absolut beste Freunde . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8
-sein Auto war noch in der Einfahrt gelaufen . ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-4 8-9
-beide unter@@ richteten in der Sparte Sozialwissenschaften und Geschichte , die 17 Fakult@@ äts@@ mitglieder aufführen , und viele Schüler nahmen Kurse von beiden . ||| 0-0 1-1 2-1 3-2 4-3 5-4 6-6 7-8 8-9 9-10 10-11 11-13 12-14 13-25 14-15 15-12 16-16 17-17 18-18 19-19 20-20 21-21 22-22 23-23 24-20
-einen Tag nach der Schul@@ schie@@ ß@@ aktion zw@@ angen sich Schüler und Dozenten hinter verschlossenen Türen zu verstecken , die Behörden versuchten noch , gemeinsam das , was motivierte Lamm zu bilden . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-27 7-27 8-6 9-27 10-7 11-7 12-8 13-9 14-12 15-13 16-14 17-11 18-11 19-15 20-16 21-16 22-19 23-18 24-20 25-23 26-23 27-24 28-23 29-24 30-25 31-21 32-21 33-27
-die Kurse nehmen am Mittwoch wieder an . ||| 0-0 1-0 2-1 3-2 4-2 5-1 6-4 7-4
-im März hatte Netanjahu auf Einladung der Republikaner eine umstrittene Rede vor dem US-Kongress abgegeben , der zum Teil als Aff@@ ront gegen Obama gesehen wurde . ||| 0-0 1-1 2-11 3-10 4-3 5-5 6-7 7-8 8-12 9-13 10-14 11-15 12-16 13-17 14-11 15-19 16-20 17-28 18-22 19-24 20-26 21-26 22-27 23-28 24-23 25-21 26-29
-es gab keinen Hinweis , dass Lamb , der zwei Online-@@ Klassen für die Delta State University in Cleveland , Mississippi , war schon 300 Meilen auf dem Campus der Schule gereist , wo die Polizei glaubt , dass er einen gut ausseh@@ enden Geschichts@@ professor E@@ than Schmidt in die Tür zu seinem Büro scho@@ ss und umgebracht hat . ||| 0-3 1-1 2-2 3-3 4-4 5-5 6-5 7-6 8-7 9-10 10-11 11-12 12-13 13-14 14-14 15-15 16-16 17-17 18-18 19-19 20-20 21-9 22-23 23-23 24-25 25-26 26-27 27-28 28-31 29-14 30-29 31-24 32-22 33-33 34-34 35-34 36-35 37-40 38-40 39-36 40-40 41-41 42-42 43-58 44-43 45-44 46-46 47-47 48-48 49-50 50-51 51-52 52-54 53-55 54-56 55-37 56-58 57-38 58-39 59-58 60-58
-Ban sagte einer Pressekonferenz am Mittwoch , er plane , mit ausländischen Ministern der fünf ständigen Rat@@ sk@@ andi@@ daten - den USA , Russland , China , Großbritannien und Frankreich - am Rande der Minister@@ tagung der Generalversammlung noch in diesem Monat zu sprechen , um über Syrien zu sprechen . ||| 0-0 1-1 2-2 3-3 4-5 5-5 6-1 7-7 8-8 9-11 10-11 11-12 12-13 13-14 14-16 15-17 16-18 17-19 18-19 19-49 20-20 21-21 22-22 23-23 24-24 25-25 26-26 27-27 28-28 29-29 30-30 31-31 32-32 33-34 34-36 35-40 36-41 37-36 38-37 39-42 40-43 41-43 42-44 43-45 44-47 45-49 46-47 47-47 48-47 49-46 50-46 51-49
-&quot; das ist wirklich für mich &quot; , sagte Spiel@@ berg , &quot; in@@ wohl der größte Zeit@@ reise@@ film , der je auf Film gesetzt wird &quot; . ||| 0-0 1-1 2-3 3-2 4-4 5-5 6-6 7-8 8-8 9-9 10-10 11-11 12-12 13-13 14-14 15-15 16-16 17-17 18-18 19-19 20-20 21-20 22-20 23-22 24-23 25-21 26-24 27-24 28-26
+sein Auto war noch in der Einfahrt gelaufen . ||| 0-0 1-1 2-2 3-3 4-7 5-4 6-5 7-6 9-8
+beide unter@@ richteten in der Sparte Sozialwissenschaften und Geschichte , die 17 Fakult@@ äts@@ mitglieder aufführen , und viele Schüler nahmen Kurse von beiden . ||| 0-0 1-1 1-2 2-3 3-4 4-5 6-6 8-7 9-8 10-9 11-10 12-15 13-11 14-12 15-14 16-16 17-17 18-18 19-19 20-20 20-24 21-21 22-22 23-23 25-13
+einen Tag nach der Schul@@ schie@@ ß@@ aktion zw@@ angen sich Schüler und Dozenten hinter verschlossenen Türen zu verstecken , die Behörden versuchten noch , gemeinsam das , was motivierte Lamm zu bilden . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-8 7-10 7-11 8-12 9-13 11-17 11-18 12-14 13-15 14-16 15-19 16-20 16-21 18-23 19-22 20-24 21-31 21-32 23-25 23-26 23-28 24-27 24-29 25-30 27-6 27-7 27-9 27-33
+die Kurse nehmen am Mittwoch wieder an . ||| 0-0 0-1 1-2 1-5 2-3 2-4 4-6 4-7
+im März hatte Netanjahu auf Einladung der Republikaner eine umstrittene Rede vor dem US-Kongress abgegeben , der zum Teil als Aff@@ ront gegen Obama gesehen wurde . ||| 0-0 1-1 3-4 5-5 7-6 8-7 10-3 11-2 11-14 12-8 13-9 14-10 15-11 16-12 17-13 19-15 20-16 21-25 22-18 23-24 24-19 26-20 26-21 27-22 28-17 28-23 29-26
+es gab keinen Hinweis , dass Lamb , der zwei Online-@@ Klassen für die Delta State University in Cleveland , Mississippi , war schon 300 Meilen auf dem Campus der Schule gereist , wo die Polizei glaubt , dass er einen gut ausseh@@ enden Geschichts@@ professor E@@ than Schmidt in die Tür zu seinem Büro scho@@ ss und umgebracht hat . ||| 1-1 2-2 3-0 3-3 4-4 5-5 5-6 6-7 7-8 9-21 10-9 11-10 12-11 13-12 14-13 14-14 14-29 15-15 16-16 17-17 18-18 19-19 20-20 22-32 23-22 23-23 24-31 25-24 26-25 27-26 28-27 29-30 31-28 33-33 34-34 34-35 35-36 36-39 37-55 38-57 39-58 40-37 40-38 40-40 41-41 42-42 43-44 44-45 46-46 47-47 48-48 50-49 51-50 52-51 54-52 55-53 56-54 58-43 58-56 58-59 58-60
+Ban sagte einer Pressekonferenz am Mittwoch , er plane , mit ausländischen Ministern der fünf ständigen Rat@@ sk@@ andi@@ daten - den USA , Russland , China , Großbritannien und Frankreich - am Rande der Minister@@ tagung der Generalversammlung noch in diesem Monat zu sprechen , um über Syrien zu sprechen . ||| 0-0 1-1 1-6 2-2 3-3 5-4 5-5 7-7 8-8 11-9 11-10 12-11 13-12 14-13 16-14 17-15 18-16 19-17 19-18 20-20 21-21 22-22 23-23 24-24 25-25 26-26 27-27 28-28 29-29 30-30 31-31 32-32 34-33 36-34 36-37 37-38 40-35 41-36 42-39 43-40 43-41 44-42 45-43 46-49 46-50 47-44 47-46 47-47 47-48 49-19 49-45 49-51
+&quot; das ist wirklich für mich &quot; , sagte Spiel@@ berg , &quot; in@@ wohl der größte Zeit@@ reise@@ film , der je auf Film gesetzt wird &quot; . ||| 0-0 1-1 2-3 3-2 4-4 5-5 6-6 8-7 8-8 9-9 10-10 11-11 12-12 13-13 14-14 15-15 16-16 17-17 18-18 19-19 20-20 20-21 20-22 21-25 22-23 23-24 24-26 24-27 26-28
das Verhältnis zwischen Obama und Netanjahu ist nicht gerade freundlich . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-9 10-10
-Lamm und Pr@@ enti@@ ss hatten offenbar schon seit einiger Zeit Bestand . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-9 8-10 9-10 10-11 11-8 12-13
-alle Mädchen würden schmelzen , als er sich herum@@ sprach &quot; , sagte H@@ air@@ ston , heute 40 und leben im Jack@@ son-@@ Vorort Brand@@ on . ||| 0-0 1-2 2-3 3-4 4-5 5-5 6-6 7-8 8-8 9-7 10-9 11-11 12-11 13-12 14-13 15-14 16-15 17-16 18-17 19-18 20-19 21-20 22-22 23-28 24-23 25-25 26-26 27-27
-Pres@@ ses@@ pre@@ cher Emil@@ y Wag@@ ster P@@ ett@@ us in Green@@ ville , Mississippi und Reb@@ ecca Sant@@ ana in New Orleans trugen zu diesem Bericht bei . ||| 0-0 1-1 2-2 3-2 4-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-11 13-12 14-13 15-14 16-15 17-17 18-18 19-19 20-20 21-21 22-22 23-23 24-24 25-25 26-26 27-27 28-24 29-29
-auch die Ehefrau von Schmidt , Li@@ z und Bruder Jeff Schmidt nahmen an der Vi@@ gil teil , bei der der Uni@@ -@@ Chor &quot; B@@ right Mor@@ ning Star &quot; und &quot; Ama@@ zing Grace &quot; sang . ||| 0-0 1-0 2-2 3-4 4-0 5-3 6-4 7-5 8-6 9-8 10-9 11-10 12-12 13-13 14-13 15-14 16-15 17-12 18-16 19-17 20-18 21-19 22-20 23-21 24-21 25-23 26-24 27-25 28-26 29-27 30-28 31-29 32-30 33-31 34-32 35-33 36-34 37-35 38-22 39-37
-er äußerte Bedauern darüber , dass die Spaltung im Rat und unter den syrischen Völkern und Regional@@ mächten &quot; diese Situation nicht lös@@ bar &quot; gemacht habe . ||| 0-0 1-1 2-2 3-25 4-25 5-4 6-4 7-4 8-5 9-7 10-8 11-9 12-10 13-11 14-12 15-13 16-14 17-15 18-16 19-18 20-19 21-20 22-21 23-25 24-17 25-17 26-24 27-25
+Lamm und Pr@@ enti@@ ss hatten offenbar schon seit einiger Zeit Bestand . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 8-11 9-7 10-8 10-9 11-10 13-12
+alle Mädchen würden schmelzen , als er sich herum@@ sprach &quot; , sagte H@@ air@@ ston , heute 40 und leben im Jack@@ son-@@ Vorort Brand@@ on . ||| 0-0 2-1 3-2 4-3 5-4 5-5 6-6 7-9 8-7 8-8 9-10 11-11 11-12 12-13 13-14 14-15 15-16 16-17 17-18 18-19 19-20 20-21 22-22 23-24 25-25 26-26 27-27 28-23
+Pres@@ ses@@ pre@@ cher Emil@@ y Wag@@ ster P@@ ett@@ us in Green@@ ville , Mississippi und Reb@@ ecca Sant@@ ana in New Orleans trugen zu diesem Bericht bei . ||| 0-0 1-1 2-2 2-3 3-4 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-12 12-13 13-14 14-15 15-16 17-17 18-18 19-19 20-20 21-21 22-22 23-23 24-24 24-28 25-25 26-26 27-27 29-29
+auch die Ehefrau von Schmidt , Li@@ z und Bruder Jeff Schmidt nahmen an der Vi@@ gil teil , bei der der Uni@@ -@@ Chor &quot; B@@ right Mor@@ ning Star &quot; und &quot; Ama@@ zing Grace &quot; sang . ||| 0-0 0-1 0-4 2-2 3-5 4-3 4-6 5-7 6-8 8-9 9-10 10-11 12-12 12-17 13-13 13-14 14-15 15-16 16-18 17-19 18-20 19-21 20-22 21-23 21-24 22-38 23-25 24-26 25-27 26-28 27-29 28-30 29-31 30-32 31-33 32-34 33-35 34-36 35-37 37-39
+er äußerte Bedauern darüber , dass die Spaltung im Rat und unter den syrischen Völkern und Regional@@ mächten &quot; diese Situation nicht lös@@ bar &quot; gemacht habe . ||| 0-0 1-1 2-2 4-5 4-6 4-7 5-8 7-9 8-10 9-11 10-12 11-13 12-14 13-15 14-16 15-17 16-18 17-24 17-25 18-19 19-20 20-21 21-22 24-26 25-3 25-4 25-23 25-27
diff --git a/tests/decoder/align-ensemble/align.expected b/tests/decoder/align-ensemble/align.expected
index cf7947e..a2ddfea 100644
--- a/tests/decoder/align-ensemble/align.expected
+++ b/tests/decoder/align-ensemble/align.expected
@@ -1,25 +1,25 @@
-das Treffen war auch geplant , um den Konflikt mit den Palästinensern und die umstrittene Zwei-@@ Staaten@@ -Lösung abzudecken . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-5 7-7 8-8 9-9 10-10 11-11 12-6 13-13 14-14 15-15 16-16 17-17 18-6 19-19
-Sie hatten einen Hund namens Ligh@@ tning , der mit ihnen im Back@@ stein@@ haus lebte , die sich in Gau@@ tier auf einen Kö@@ der stützen . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-7 9-9 10-10 11-11 12-13 13-13 14-14 15-8 16-15 17-15 18-17 19-18 20-23 21-24 22-16 23-19 24-20 25-26 26-16 27-25
-er war verheiratet und hatte drei junge Kinder . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-9
-Schmidt , der ermor@@ dete Professor , leitete das erst@@ inst@@ anz@@ liche Seminar@@ programm und spezialisierte sich auf Indianer und Kolonial@@ geschichte , sagte Don Allan Mitchell , ein englischer Professor an der Schule . ||| 0-0 1-1 2-2 3-3 4-33 5-4 6-5 7-6 8-7 9-8 10-9 11-33 12-33 13-10 14-11 15-12 16-13 17-14 18-13 19-15 20-33 21-18 22-19 23-20 24-21 25-22 26-23 27-24 28-25 29-26 30-27 31-28 32-29 33-30 34-31 35-32
-und einige halten sich für eine Imp@@ lo@@ sion aus . ||| 0-0 1-1 2-3 3-5 4-5 5-6 6-7 7-7 8-8 9-3 10-10
-der UN-Generalsekretär forderte erneut alle Parteien , einschließlich des geteilten UN-Sicherheitsrates , auf , umfassende Verhandlungen zu vereinen und zu unterstützen , um eine politische Lösung zu finden . ||| 0-0 1-1 2-5 3-4 4-6 5-7 6-8 7-9 8-10 9-11 10-12 11-16 12-17 13-18 14-21 15-22 16-18 17-18 18-19 19-20 20-20 21-23 22-23 23-25 24-26 25-27 26-24 27-24 28-28
-die Polizei sagte , der Hund sei in Ordnung . ||| 0-0 1-0 2-1 3-2 4-2 5-3 6-4 7-5 8-5 9-6
-andere haben ihn als Witz abgetan . ||| 0-0 1-1 2-3 3-4 4-6 5-2 6-7
-Lamm wuchs in der Gegend auf . ||| 0-0 1-1 2-3 3-4 4-5 5-1 6-7
-der Film beginnt und es kommt mir vor , dass ich ein Fa@@ ke G@@ äh@@ nen und ein Arm strecken weg von der Anwesenheit mit der Prinzessin von Wales . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-5 7-5 8-31 9-8 10-9 11-11 12-12 13-31 14-13 15-31 16-31 17-15 18-16 19-17 20-18 21-20 22-20 23-21 24-21 25-25 26-26 27-27 28-28 29-29 30-31
+das Treffen war auch geplant , um den Konflikt mit den Palästinensern und die umstrittene Zwei-@@ Staaten@@ -Lösung abzudecken . ||| 0-0 1-1 2-2 3-3 4-4 5-5 5-6 6-12 6-18 7-7 8-8 9-9 10-10 11-11 13-13 14-14 15-15 16-16 17-17 19-19
+Sie hatten einen Hund namens Ligh@@ tning , der mit ihnen im Back@@ stein@@ haus lebte , die sich in Gau@@ tier auf einen Kö@@ der stützen . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 7-8 8-15 9-9 10-10 11-11 13-12 13-13 14-14 15-16 15-17 16-22 16-26 17-18 18-19 19-23 20-24 23-20 24-21 25-27 26-25
+er war verheiratet und hatte drei junge Kinder . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 9-8
+Schmidt , der ermor@@ dete Professor , leitete das erst@@ inst@@ anz@@ liche Seminar@@ programm und spezialisierte sich auf Indianer und Kolonial@@ geschichte , sagte Don Allan Mitchell , ein englischer Professor an der Schule . ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-13 11-14 12-15 13-16 13-18 14-17 15-19 18-21 19-22 20-23 21-24 22-25 23-26 24-27 25-28 26-29 27-30 28-31 29-32 30-33 31-34 32-35 33-4 33-11 33-12 33-20
+und einige halten sich für eine Imp@@ lo@@ sion aus . ||| 0-0 1-1 3-2 3-9 5-3 5-4 6-5 7-6 7-7 8-8 10-10
+der UN-Generalsekretär forderte erneut alle Parteien , einschließlich des geteilten UN-Sicherheitsrates , auf , umfassende Verhandlungen zu vereinen und zu unterstützen , um eine politische Lösung zu finden . ||| 0-0 1-1 4-3 5-2 6-4 7-5 8-6 9-7 10-8 11-9 12-10 16-11 17-12 18-13 18-16 18-17 19-18 20-19 20-20 21-14 22-15 23-21 23-22 24-26 24-27 25-23 26-24 27-25 28-28
+die Polizei sagte , der Hund sei in Ordnung . ||| 0-0 0-1 1-2 2-3 2-4 3-5 4-6 5-7 5-8 6-9
+andere haben ihn als Witz abgetan . ||| 0-0 1-1 2-5 3-2 4-3 6-4 7-6
+Lamm wuchs in der Gegend auf . ||| 0-0 1-1 1-5 3-2 4-3 5-4 7-6
+der Film beginnt und es kommt mir vor , dass ich ein Fa@@ ke G@@ äh@@ nen und ein Arm strecken weg von der Anwesenheit mit der Prinzessin von Wales . ||| 0-0 1-1 2-2 3-3 4-4 5-5 5-6 5-7 8-9 9-10 11-11 12-12 13-14 15-17 16-18 17-19 18-20 20-21 20-22 21-23 21-24 25-25 26-26 27-27 28-28 29-29 31-8 31-13 31-15 31-16 31-30
Sie und ihre Mutter waren absolut beste Freunde . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8
-sein Auto lief noch in der Einfahrt . ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-9
-beide lernten in der Sparte Sozialwissenschaften und Geschichte , die 17 Fakult@@ äts@@ mitglieder aufführen , und viele Schüler nahmen Kurse von beiden . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-8 7-9 8-1 9-11 10-13 11-14 12-25 13-15 14-12 15-16 16-17 17-18 18-19 19-20 20-21 21-22 22-23 23-20
-einen Tag nach der Schul@@ aufnahme zw@@ angen sich Schüler und Dozenten hinter verschlossenen Türen zu verstecken , die Behörden versuchten noch , gemeinsam das , was motivierte Lamm zu leisten . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-27 8-7 9-7 10-8 11-9 12-12 13-13 14-14 15-11 16-11 17-15 18-16 19-16 20-19 21-18 22-20 23-23 24-23 25-24 26-23 27-24 28-25 29-21 30-21 31-27
-die Kurse werden am Mittwoch fortgesetzt . ||| 0-0 1-0 2-1 3-2 4-2 5-1 6-4
-im März hatte Netanjahu auf Einladung der Republikaner eine umstrittene Rede vor dem US-Kongress , der zum Teil als Aff@@ ront gegen Obama gesehen wurde . ||| 0-0 1-1 2-11 3-10 4-3 5-5 6-7 7-8 8-12 9-13 10-14 11-15 12-16 13-17 14-11 15-20 16-28 17-22 18-24 19-26 20-26 21-27 22-28 23-23 24-21 25-29
-es gab keine Hinweise darauf , dass Lamb , der zwei Online-@@ Klassen für die Delta State University in Cleveland , Mississippi war , schon 300 Meilen auf dem Campus der Schule gereist war , wo die Polizei glaubt , dass er einen gut ausseh@@ enden Geschichts@@ professor E@@ than Schmidt in die Tür zu seinem Büro scho@@ ss und umgebracht hat . ||| 0-3 1-1 2-2 3-3 4-4 5-1 6-5 7-5 8-6 9-7 10-10 11-11 12-12 13-13 14-14 15-14 16-15 17-16 18-17 19-18 20-19 21-20 22-9 23-21 24-25 25-25 26-26 27-27 28-28 29-31 30-28 31-29 32-24 33-22 34-32 35-33 36-34 37-34 38-35 39-58 40-40 41-36 42-40 43-41 44-42 45-58 46-43 47-44 48-46 49-47 50-48 51-50 52-51 53-52 54-54 55-55 56-56 57-37 58-58 59-38 60-39 61-58 62-58
-Ban sagte einer Pressekonferenz am Mittwoch , er plane , sich mit ausländischen Ministern der fünf ständigen Rat@@ stagungen - den USA , Russland , China , Großbritannien und Frankreich - am Rande der Minister@@ tagung der Generalversammlung noch in diesem Monat zu Gesprächen über Syrien zu treffen . ||| 0-0 1-1 2-2 3-3 4-5 5-5 6-1 7-7 8-8 9-11 10-11 11-11 12-12 13-13 14-14 15-16 16-17 17-18 18-19 19-20 20-21 21-22 22-23 23-24 24-25 25-26 26-27 27-28 28-29 29-30 30-31 31-32 32-34 33-35 34-40 35-41 36-36 37-37 38-42 39-43 40-43 41-44 42-45 43-47 44-47 45-47 46-32 47-10 48-45
-&quot; das ist wirklich für mich &quot; , sagte Spiel@@ berg , &quot; in@@ wohl der größte Zeit@@ reise@@ film , der jemals auf Film gesetzt wurde &quot; . ||| 0-0 1-1 2-3 3-2 4-4 5-5 6-6 7-8 8-8 9-9 10-10 11-11 12-12 13-13 14-14 15-15 16-16 17-17 18-18 19-19 20-20 21-20 22-20 23-22 24-23 25-21 26-24 27-24 28-26
+sein Auto lief noch in der Einfahrt . ||| 0-0 1-1 2-2 3-3 5-4 6-5 7-6 9-7
+beide lernten in der Sparte Sozialwissenschaften und Geschichte , die 17 Fakult@@ äts@@ mitglieder aufführen , und viele Schüler nahmen Kurse von beiden . ||| 0-0 1-1 1-8 2-2 3-3 4-4 6-5 8-6 9-7 11-9 12-14 13-10 14-11 15-13 16-15 17-16 18-17 19-18 20-19 20-23 21-20 22-21 23-22 25-12
+einen Tag nach der Schul@@ aufnahme zw@@ angen sich Schüler und Dozenten hinter verschlossenen Türen zu verstecken , die Behörden versuchten noch , gemeinsam das , was motivierte Lamm zu leisten . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-8 7-9 8-10 9-11 11-15 11-16 12-12 13-13 14-14 15-17 16-18 16-19 18-21 19-20 20-22 21-29 21-30 23-23 23-24 23-26 24-25 24-27 25-28 27-7 27-31
+die Kurse werden am Mittwoch fortgesetzt . ||| 0-0 0-1 1-2 1-5 2-3 2-4 4-6
+im März hatte Netanjahu auf Einladung der Republikaner eine umstrittene Rede vor dem US-Kongress , der zum Teil als Aff@@ ront gegen Obama gesehen wurde . ||| 0-0 1-1 3-4 5-5 7-6 8-7 10-3 11-2 11-14 12-8 13-9 14-10 15-11 16-12 17-13 20-15 21-24 22-17 23-23 24-18 26-19 26-20 27-21 28-16 28-22 29-25
+es gab keine Hinweise darauf , dass Lamb , der zwei Online-@@ Klassen für die Delta State University in Cleveland , Mississippi war , schon 300 Meilen auf dem Campus der Schule gereist war , wo die Polizei glaubt , dass er einen gut ausseh@@ enden Geschichts@@ professor E@@ than Schmidt in die Tür zu seinem Büro scho@@ ss und umgebracht hat . ||| 1-1 1-5 2-2 3-0 3-3 4-4 5-6 5-7 6-8 7-9 9-22 10-10 11-11 12-12 13-13 14-14 14-15 15-16 16-17 17-18 18-19 19-20 20-21 21-23 22-33 24-32 25-24 25-25 26-26 27-27 28-28 28-30 29-31 31-29 32-34 33-35 34-36 34-37 35-38 36-41 37-57 38-59 39-60 40-40 40-42 41-43 42-44 43-46 44-47 46-48 47-49 48-50 50-51 51-52 52-53 54-54 55-55 56-56 58-39 58-45 58-58 58-61 58-62
+Ban sagte einer Pressekonferenz am Mittwoch , er plane , sich mit ausländischen Ministern der fünf ständigen Rat@@ stagungen - den USA , Russland , China , Großbritannien und Frankreich - am Rande der Minister@@ tagung der Generalversammlung noch in diesem Monat zu Gesprächen über Syrien zu treffen . ||| 0-0 1-1 1-6 2-2 3-3 5-4 5-5 7-7 8-8 10-47 11-9 11-10 11-11 12-12 13-13 14-14 16-15 17-16 18-17 19-18 20-19 21-20 22-21 23-22 24-23 25-24 26-25 27-26 28-27 29-28 30-29 31-30 32-31 32-46 34-32 35-33 36-36 37-37 40-34 41-35 42-38 43-39 43-40 44-41 45-42 45-48 47-43 47-44 47-45
+&quot; das ist wirklich für mich &quot; , sagte Spiel@@ berg , &quot; in@@ wohl der größte Zeit@@ reise@@ film , der jemals auf Film gesetzt wurde &quot; . ||| 0-0 1-1 2-3 3-2 4-4 5-5 6-6 8-7 8-8 9-9 10-10 11-11 12-12 13-13 14-14 15-15 16-16 17-17 18-18 19-19 20-20 20-21 20-22 21-25 22-23 23-24 24-26 24-27 26-28
das Verhältnis zwischen Obama und Netanjahu ist nicht gerade freundlich . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-9 10-10
-Lamm und Pr@@ enti@@ ss waren offenbar seit einiger Zeit aus . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-9 8-10 9-11 10-8 11-13
-alle Mädchen würden schmelzen , als er sich um &quot; , sagte H@@ air@@ ston , heute 40 und lebe im Jack@@ son-@@ Vorort Brand@@ on . ||| 0-0 1-2 2-3 3-4 4-5 5-5 6-6 7-8 8-8 9-9 10-11 11-11 12-12 13-13 14-14 15-15 16-16 17-17 18-18 19-19 20-20 21-22 22-28 23-23 24-25 25-26 26-27
-Pres@@ ses@@ pre@@ cher Emil@@ y Wag@@ ster P@@ ett@@ us in Green@@ ville , Mississippi und Reb@@ ecca Sant@@ ana in New Orleans trugen zu diesem Bericht bei . ||| 0-0 1-1 2-2 3-2 4-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-11 13-12 14-13 15-14 16-15 17-17 18-18 19-19 20-20 21-21 22-22 23-23 24-24 25-25 26-26 27-27 28-24 29-29
-auch Schmidt &apos; s Frau Li@@ z und Bruder Jeff Schmidt nahmen an der Vi@@ gil teil , bei der der Uni@@ -@@ Chor &quot; B@@ right Mor@@ ning Star &quot; und &quot; Ama@@ zing Grace &quot; sang . ||| 0-0 1-0 2-2 3-2 4-2 5-4 6-5 7-6 8-8 9-9 10-10 11-12 12-13 13-13 14-14 15-15 16-12 17-16 18-17 19-18 20-19 21-20 22-21 23-21 24-23 25-24 26-25 27-26 28-27 29-28 30-29 31-30 32-31 33-32 34-33 35-34 36-35 37-22 38-37
-er bedau@@ erte , dass die Spaltung im Rat und unter den syrischen Völkern und Regional@@ mächten &quot; diese Situation nicht lös@@ bar &quot; gemacht habe . ||| 0-0 1-1 2-25 3-2 4-3 5-4 6-4 7-5 8-7 9-8 10-9 11-10 12-11 13-12 14-13 15-14 16-15 17-16 18-18 19-19 20-20 21-21 22-25 23-17 24-17 25-25 26-25
+Lamm und Pr@@ enti@@ ss waren offenbar seit einiger Zeit aus . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 8-10 9-7 10-8 11-9 13-11
+alle Mädchen würden schmelzen , als er sich um &quot; , sagte H@@ air@@ ston , heute 40 und lebe im Jack@@ son-@@ Vorort Brand@@ on . ||| 0-0 2-1 3-2 4-3 5-4 5-5 6-6 8-7 8-8 9-9 11-10 11-11 12-12 13-13 14-14 15-15 16-16 17-17 18-18 19-19 20-20 22-21 23-23 25-24 26-25 27-26 28-22
+Pres@@ ses@@ pre@@ cher Emil@@ y Wag@@ ster P@@ ett@@ us in Green@@ ville , Mississippi und Reb@@ ecca Sant@@ ana in New Orleans trugen zu diesem Bericht bei . ||| 0-0 1-1 2-2 2-3 3-4 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-12 12-13 13-14 14-15 15-16 17-17 18-18 19-19 20-20 21-21 22-22 23-23 24-24 24-28 25-25 26-26 27-27 29-29
+auch Schmidt &apos; s Frau Li@@ z und Bruder Jeff Schmidt nahmen an der Vi@@ gil teil , bei der der Uni@@ -@@ Chor &quot; B@@ right Mor@@ ning Star &quot; und &quot; Ama@@ zing Grace &quot; sang . ||| 0-0 0-1 2-2 2-3 2-4 4-5 5-6 6-7 8-8 9-9 10-10 12-11 12-16 13-12 13-13 14-14 15-15 16-17 17-18 18-19 19-20 20-21 21-22 21-23 22-37 23-24 24-25 25-26 26-27 27-28 28-29 29-30 30-31 31-32 32-33 33-34 34-35 35-36 37-38
+er bedau@@ erte , dass die Spaltung im Rat und unter den syrischen Völkern und Regional@@ mächten &quot; diese Situation nicht lös@@ bar &quot; gemacht habe . ||| 0-0 1-1 2-3 3-4 4-5 4-6 5-7 7-8 8-9 9-10 10-11 11-12 12-13 13-14 14-15 15-16 16-17 17-23 17-24 18-18 19-19 20-20 21-21 25-2 25-22 25-25 25-26
diff --git a/tests/decoder/align/align.b1.expected b/tests/decoder/align/align.b1.expected
index e368ebe..f667d9e 100644
--- a/tests/decoder/align/align.b1.expected
+++ b/tests/decoder/align/align.b1.expected
@@ -1,30 +1,30 @@
-Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-6 7-7
-auf der Tagesordnung stehen die Pläne für eine stärkere Zusammenarbeit im Nuklear@@ bereich . ||| 0-0 1-2 2-3 3-0 4-0 5-5 6-6 7-7 8-7 9-8 10-8 11-8 12-11 13-11
-Indien ist angeblich auch auf eine Einigung zur Verteidigungs@@ kooperation der beiden Nationen gehofft . ||| 0-0 1-1 2-3 3-4 4-4 5-6 6-7 7-8 8-9 9-10 10-11 11-13 12-14 13-4 14-16
-Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-11 11-11 12-4
-die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es miss@@ achtete und leicht@@ sinn@@ ig@@ erweise fahr@@ bereit zu sein . ||| 0-0 1-3 2-0 3-0 4-1 5-2 6-4 7-6 8-7 9-8 10-9 11-5 12-10 13-10 14-11 15-11 16-18 17-14 18-15 19-18 20-18 21-18 22-16 23-18 24-18 25-18 26-18
-er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats@@ -@@ Richter erscheinen . ||| 0-0 1-2 2-5 3-14 4-13 5-5 6-6 7-7 8-8 9-9 10-10 11-11 12-9 13-4 14-16
-das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-8 4-9 5-10 6-3 7-4 8-5 9-6 10-12 11-12 12-12
-George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ rap@@ schen vor ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-12 12-13 13-14 14-3
-ein Mann soll sich vor Gericht stellen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 2-3 3-5 4-5 5-8 6-4 7-6 8-6 9-10 10-11 11-12 12-13 13-8 14-15 15-15
-George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Gebühren . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-7 9-10 10-11 11-12 12-13 13-14 14-15 15-19 16-17 17-17 18-7 19-8 20-6
-Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November auf dem Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-9 13-11 14-12 15-13 16-14 17-18 18-16 19-4 20-18
-die Wiedervereinigung mit dem Very American Ideal , dass die Rechte der Arbeitnehmer , ||| 0-0 1-0 2-2 3-4 4-4 5-5 6-6 7-7 8-7 9-8 10-8 11-8 12-8 13-10
-aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 3-2 4-4 5-6 6-7 7-8 8-9 9-11 10-12 11-13 12-15
-die Amerikaner akzeptierten seit Generationen die Grund@@ bedingung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 1-3 2-4 3-0 4-1 5-5 6-6 7-7 8-15 9-9 10-9 11-10 12-12 13-11 14-15
-wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-9 9-9 10-10 11-8 12-12
-die Geschichte ist ein großer Lehrer . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5
-nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 3-2 4-19 5-4 6-5 7-6 8-10 9-11 10-12 11-14 12-9 13-9 14-9 15-15 16-15 17-16 18-15 19-19
-wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sie sich . ||| 0-0 1-3 2-3 3-2 4-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-10 13-11 14-12 15-11 16-11
-die Geschichte erinnert sich , wie sollten wir es . ||| 0-0 1-0 2-1 3-1 4-1 5-3 6-4 7-5 8-7 9-7
-Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 3-2 4-3 5-11 6-4 7-7 8-8 9-9 10-9 11-9 12-10 13-10 14-6 15-5
-eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um eine dauer@@ haf@@ tere Regelung über das Gesetz zu fällen . ||| 0-0 1-1 2-2 3-5 4-6 5-7 6-8 7-9 8-10 9-4 10-11 11-11 12-11 13-13 14-15 15-21 16-21 17-16 18-17 19-18 20-19 21-12 22-12 23-21
-Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-12 11-13
-die Forscher verfolgten die Frauen@@ arz@@ t@@ -Rei@@ se über sieben Jahre hinweg . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-7 7-7 8-7 9-8 10-9 11-10 12-2 13-11
-ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überleben@@ schancen . ||| 0-0 1-1 2-2 3-3 4-4 5-4 6-5 7-9 8-11 9-12 10-13 11-7 12-20 13-20 14-20 15-14 16-15 17-16 18-17 19-18 20-20
-Garten@@ center rue fällt in Eigen@@ heim@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-5 7-6 8-8
-der TV-S@@ ender stopp@@ te etwa 40 Minuten , hat aber inzwischen wieder eine Übertragung . ||| 0-0 1-1 2-2 3-3 4-18 5-4 6-7 7-8 8-4 9-10 10-12 11-12 12-13 13-13 14-15 15-18
-etwa einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 4-6 5-5 6-8 7-9 8-11 9-12 10-13 11-14 12-15 13-19 14-16 15-17 16-18
-die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 4-3 5-4 6-4 7-6 8-6
-die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-12 7-8 8-9 9-10 10-11
-das Militär spielt in Pakistan eine wichtige Rolle und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 4-7 5-3 6-4 7-5 8-20 9-10 10-16 11-17 12-18 13-14 14-11 15-11 16-10 17-20
+Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 5-4 6-5 6-6 7-7
+auf der Tagesordnung stehen die Pläne für eine stärkere Zusammenarbeit im Nuklear@@ bereich . ||| 0-0 0-3 0-4 2-1 3-2 5-5 6-6 7-7 7-8 8-9 8-10 8-11 11-12 11-13
+Indien ist angeblich auch auf eine Einigung zur Verteidigungs@@ kooperation der beiden Nationen gehofft . ||| 0-0 1-1 3-2 4-3 4-4 4-13 6-5 7-6 8-7 9-8 10-9 11-10 13-11 14-12 16-14
+Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 4-12 5-5 6-6 7-7 8-8 10-9 11-10 11-11
+die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es miss@@ achtete und leicht@@ sinn@@ ig@@ erweise fahr@@ bereit zu sein . ||| 0-0 0-2 0-3 1-4 2-5 3-1 4-6 5-11 6-7 7-8 8-9 9-10 10-12 10-13 11-14 11-15 14-17 15-18 16-22 18-16 18-19 18-20 18-21 18-23 18-24 18-25 18-26
+er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats@@ -@@ Richter erscheinen . ||| 0-0 2-1 4-13 5-2 5-5 6-6 7-7 8-8 9-9 9-12 10-10 11-11 13-4 14-3 16-14
+das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-6 4-7 5-8 6-9 8-3 9-4 10-5 12-10 12-11 12-12
+George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ rap@@ schen vor ||| 0-0 1-1 2-2 3-3 3-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-11 13-12 14-13
+ein Mann soll sich vor Gericht stellen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 3-2 4-6 5-3 5-4 6-7 6-8 8-5 8-13 10-9 11-10 12-11 13-12 15-14 15-15
+George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Gebühren . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 6-20 7-7 7-8 7-18 8-19 10-9 11-10 12-11 13-12 14-13 15-14 17-16 17-17 19-15
+Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November auf dem Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 0-1 1-2 2-3 3-4 4-5 4-19 5-6 6-7 7-8 8-9 9-10 9-12 10-11 11-13 12-14 13-15 14-16 16-18 18-17 18-20
+die Wiedervereinigung mit dem Very American Ideal , dass die Rechte der Arbeitnehmer , ||| 0-0 0-1 2-2 4-3 4-4 5-5 6-6 7-7 7-8 8-9 8-10 8-11 8-12 10-13
+aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 2-3 4-4 6-5 7-6 8-7 9-8 11-9 12-10 13-11 15-12
+die Amerikaner akzeptierten seit Generationen die Grund@@ bedingung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 0-3 1-4 3-1 4-2 5-5 6-6 7-7 9-9 9-10 10-11 11-13 12-12 15-8 15-14
+wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-11 9-8 9-9 10-10 12-12
+die Geschichte ist ein großer Lehrer . ||| 0-0 0-1 1-2 2-3 3-4 4-5 5-6
+nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 2-3 4-5 5-6 6-7 9-12 9-13 9-14 10-8 11-9 12-10 14-11 15-15 15-16 15-18 16-17 19-4 19-19
+wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sie sich . ||| 0-0 2-3 3-1 3-2 4-5 5-6 6-7 7-8 8-9 9-10 10-11 10-12 11-13 11-15 11-16 12-14 14-4
+die Geschichte erinnert sich , wie sollten wir es . ||| 0-0 0-1 1-2 1-3 1-4 3-5 4-6 5-7 7-8 7-9
+Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 2-3 3-4 4-6 5-15 6-14 7-7 8-8 9-9 9-10 9-11 10-12 10-13 11-5
+eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um eine dauer@@ haf@@ tere Regelung über das Gesetz zu fällen . ||| 0-0 1-1 2-2 4-9 5-3 6-4 7-5 8-6 9-7 10-8 11-10 11-11 11-12 12-21 12-22 13-13 15-14 16-17 17-18 18-19 19-20 21-15 21-16 21-23
+Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 10-9 12-10 13-11
+die Forscher verfolgten die Frauen@@ arz@@ t@@ -Rei@@ se über sieben Jahre hinweg . ||| 0-0 1-1 2-2 2-12 3-3 4-4 6-5 7-6 7-7 7-8 8-9 9-10 10-11 11-13
+ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überleben@@ schancen . ||| 0-0 1-1 2-2 3-3 4-4 4-5 5-6 7-11 9-7 11-8 12-9 13-10 14-15 15-16 16-17 17-18 18-19 20-12 20-13 20-14 20-20
+Garten@@ center rue fällt in Eigen@@ heim@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 5-6 6-7 8-8
+der TV-S@@ ender stopp@@ te etwa 40 Minuten , hat aber inzwischen wieder eine Übertragung . ||| 0-0 1-1 2-2 3-3 4-5 4-8 7-6 8-7 10-9 12-10 12-11 13-12 13-13 15-14 18-4 18-15
+etwa einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 5-5 6-4 8-6 9-7 11-8 12-9 13-10 14-11 15-12 16-14 17-15 18-16 19-13
+die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 3-4 4-5 4-6 6-7 6-8
+die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 6-5 8-7 9-8 10-9 11-10 12-6
+das Militär spielt in Pakistan eine wichtige Rolle und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 3-5 4-6 5-7 7-4 10-9 10-16 11-14 11-15 14-13 16-10 17-11 18-12 20-8 20-17
diff --git a/tests/decoder/align/align.batched.expected b/tests/decoder/align/align.batched.expected
index e368ebe..f667d9e 100644
--- a/tests/decoder/align/align.batched.expected
+++ b/tests/decoder/align/align.batched.expected
@@ -1,30 +1,30 @@
-Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-6 7-7
-auf der Tagesordnung stehen die Pläne für eine stärkere Zusammenarbeit im Nuklear@@ bereich . ||| 0-0 1-2 2-3 3-0 4-0 5-5 6-6 7-7 8-7 9-8 10-8 11-8 12-11 13-11
-Indien ist angeblich auch auf eine Einigung zur Verteidigungs@@ kooperation der beiden Nationen gehofft . ||| 0-0 1-1 2-3 3-4 4-4 5-6 6-7 7-8 8-9 9-10 10-11 11-13 12-14 13-4 14-16
-Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-11 11-11 12-4
-die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es miss@@ achtete und leicht@@ sinn@@ ig@@ erweise fahr@@ bereit zu sein . ||| 0-0 1-3 2-0 3-0 4-1 5-2 6-4 7-6 8-7 9-8 10-9 11-5 12-10 13-10 14-11 15-11 16-18 17-14 18-15 19-18 20-18 21-18 22-16 23-18 24-18 25-18 26-18
-er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats@@ -@@ Richter erscheinen . ||| 0-0 1-2 2-5 3-14 4-13 5-5 6-6 7-7 8-8 9-9 10-10 11-11 12-9 13-4 14-16
-das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-8 4-9 5-10 6-3 7-4 8-5 9-6 10-12 11-12 12-12
-George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ rap@@ schen vor ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-12 12-13 13-14 14-3
-ein Mann soll sich vor Gericht stellen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 2-3 3-5 4-5 5-8 6-4 7-6 8-6 9-10 10-11 11-12 12-13 13-8 14-15 15-15
-George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Gebühren . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-7 9-10 10-11 11-12 12-13 13-14 14-15 15-19 16-17 17-17 18-7 19-8 20-6
-Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November auf dem Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-9 13-11 14-12 15-13 16-14 17-18 18-16 19-4 20-18
-die Wiedervereinigung mit dem Very American Ideal , dass die Rechte der Arbeitnehmer , ||| 0-0 1-0 2-2 3-4 4-4 5-5 6-6 7-7 8-7 9-8 10-8 11-8 12-8 13-10
-aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 3-2 4-4 5-6 6-7 7-8 8-9 9-11 10-12 11-13 12-15
-die Amerikaner akzeptierten seit Generationen die Grund@@ bedingung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 1-3 2-4 3-0 4-1 5-5 6-6 7-7 8-15 9-9 10-9 11-10 12-12 13-11 14-15
-wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-9 9-9 10-10 11-8 12-12
-die Geschichte ist ein großer Lehrer . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5
-nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 3-2 4-19 5-4 6-5 7-6 8-10 9-11 10-12 11-14 12-9 13-9 14-9 15-15 16-15 17-16 18-15 19-19
-wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sie sich . ||| 0-0 1-3 2-3 3-2 4-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-10 13-11 14-12 15-11 16-11
-die Geschichte erinnert sich , wie sollten wir es . ||| 0-0 1-0 2-1 3-1 4-1 5-3 6-4 7-5 8-7 9-7
-Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 3-2 4-3 5-11 6-4 7-7 8-8 9-9 10-9 11-9 12-10 13-10 14-6 15-5
-eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um eine dauer@@ haf@@ tere Regelung über das Gesetz zu fällen . ||| 0-0 1-1 2-2 3-5 4-6 5-7 6-8 7-9 8-10 9-4 10-11 11-11 12-11 13-13 14-15 15-21 16-21 17-16 18-17 19-18 20-19 21-12 22-12 23-21
-Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-12 11-13
-die Forscher verfolgten die Frauen@@ arz@@ t@@ -Rei@@ se über sieben Jahre hinweg . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-7 7-7 8-7 9-8 10-9 11-10 12-2 13-11
-ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überleben@@ schancen . ||| 0-0 1-1 2-2 3-3 4-4 5-4 6-5 7-9 8-11 9-12 10-13 11-7 12-20 13-20 14-20 15-14 16-15 17-16 18-17 19-18 20-20
-Garten@@ center rue fällt in Eigen@@ heim@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-5 7-6 8-8
-der TV-S@@ ender stopp@@ te etwa 40 Minuten , hat aber inzwischen wieder eine Übertragung . ||| 0-0 1-1 2-2 3-3 4-18 5-4 6-7 7-8 8-4 9-10 10-12 11-12 12-13 13-13 14-15 15-18
-etwa einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 4-6 5-5 6-8 7-9 8-11 9-12 10-13 11-14 12-15 13-19 14-16 15-17 16-18
-die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 4-3 5-4 6-4 7-6 8-6
-die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-12 7-8 8-9 9-10 10-11
-das Militär spielt in Pakistan eine wichtige Rolle und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 4-7 5-3 6-4 7-5 8-20 9-10 10-16 11-17 12-18 13-14 14-11 15-11 16-10 17-20
+Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 5-4 6-5 6-6 7-7
+auf der Tagesordnung stehen die Pläne für eine stärkere Zusammenarbeit im Nuklear@@ bereich . ||| 0-0 0-3 0-4 2-1 3-2 5-5 6-6 7-7 7-8 8-9 8-10 8-11 11-12 11-13
+Indien ist angeblich auch auf eine Einigung zur Verteidigungs@@ kooperation der beiden Nationen gehofft . ||| 0-0 1-1 3-2 4-3 4-4 4-13 6-5 7-6 8-7 9-8 10-9 11-10 13-11 14-12 16-14
+Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 4-12 5-5 6-6 7-7 8-8 10-9 11-10 11-11
+die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es miss@@ achtete und leicht@@ sinn@@ ig@@ erweise fahr@@ bereit zu sein . ||| 0-0 0-2 0-3 1-4 2-5 3-1 4-6 5-11 6-7 7-8 8-9 9-10 10-12 10-13 11-14 11-15 14-17 15-18 16-22 18-16 18-19 18-20 18-21 18-23 18-24 18-25 18-26
+er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats@@ -@@ Richter erscheinen . ||| 0-0 2-1 4-13 5-2 5-5 6-6 7-7 8-8 9-9 9-12 10-10 11-11 13-4 14-3 16-14
+das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-6 4-7 5-8 6-9 8-3 9-4 10-5 12-10 12-11 12-12
+George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ rap@@ schen vor ||| 0-0 1-1 2-2 3-3 3-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-11 13-12 14-13
+ein Mann soll sich vor Gericht stellen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 3-2 4-6 5-3 5-4 6-7 6-8 8-5 8-13 10-9 11-10 12-11 13-12 15-14 15-15
+George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Gebühren . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 6-20 7-7 7-8 7-18 8-19 10-9 11-10 12-11 13-12 14-13 15-14 17-16 17-17 19-15
+Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November auf dem Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 0-1 1-2 2-3 3-4 4-5 4-19 5-6 6-7 7-8 8-9 9-10 9-12 10-11 11-13 12-14 13-15 14-16 16-18 18-17 18-20
+die Wiedervereinigung mit dem Very American Ideal , dass die Rechte der Arbeitnehmer , ||| 0-0 0-1 2-2 4-3 4-4 5-5 6-6 7-7 7-8 8-9 8-10 8-11 8-12 10-13
+aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 2-3 4-4 6-5 7-6 8-7 9-8 11-9 12-10 13-11 15-12
+die Amerikaner akzeptierten seit Generationen die Grund@@ bedingung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 0-3 1-4 3-1 4-2 5-5 6-6 7-7 9-9 9-10 10-11 11-13 12-12 15-8 15-14
+wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-11 9-8 9-9 10-10 12-12
+die Geschichte ist ein großer Lehrer . ||| 0-0 0-1 1-2 2-3 3-4 4-5 5-6
+nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 2-3 4-5 5-6 6-7 9-12 9-13 9-14 10-8 11-9 12-10 14-11 15-15 15-16 15-18 16-17 19-4 19-19
+wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sie sich . ||| 0-0 2-3 3-1 3-2 4-5 5-6 6-7 7-8 8-9 9-10 10-11 10-12 11-13 11-15 11-16 12-14 14-4
+die Geschichte erinnert sich , wie sollten wir es . ||| 0-0 0-1 1-2 1-3 1-4 3-5 4-6 5-7 7-8 7-9
+Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 2-3 3-4 4-6 5-15 6-14 7-7 8-8 9-9 9-10 9-11 10-12 10-13 11-5
+eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um eine dauer@@ haf@@ tere Regelung über das Gesetz zu fällen . ||| 0-0 1-1 2-2 4-9 5-3 6-4 7-5 8-6 9-7 10-8 11-10 11-11 11-12 12-21 12-22 13-13 15-14 16-17 17-18 18-19 19-20 21-15 21-16 21-23
+Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 10-9 12-10 13-11
+die Forscher verfolgten die Frauen@@ arz@@ t@@ -Rei@@ se über sieben Jahre hinweg . ||| 0-0 1-1 2-2 2-12 3-3 4-4 6-5 7-6 7-7 7-8 8-9 9-10 10-11 11-13
+ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überleben@@ schancen . ||| 0-0 1-1 2-2 3-3 4-4 4-5 5-6 7-11 9-7 11-8 12-9 13-10 14-15 15-16 16-17 17-18 18-19 20-12 20-13 20-14 20-20
+Garten@@ center rue fällt in Eigen@@ heim@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 5-6 6-7 8-8
+der TV-S@@ ender stopp@@ te etwa 40 Minuten , hat aber inzwischen wieder eine Übertragung . ||| 0-0 1-1 2-2 3-3 4-5 4-8 7-6 8-7 10-9 12-10 12-11 13-12 13-13 15-14 18-4 18-15
+etwa einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 5-5 6-4 8-6 9-7 11-8 12-9 13-10 14-11 15-12 16-14 17-15 18-16 19-13
+die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 3-4 4-5 4-6 6-7 6-8
+die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 6-5 8-7 9-8 10-9 11-10 12-6
+das Militär spielt in Pakistan eine wichtige Rolle und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 3-5 4-6 5-7 7-4 10-9 10-16 11-14 11-15 14-13 16-10 17-11 18-12 20-8 20-17
diff --git a/tests/decoder/align/align.expected b/tests/decoder/align/align.expected
index db4fe94..4bba506 100644
--- a/tests/decoder/align/align.expected
+++ b/tests/decoder/align/align.expected
@@ -1,30 +1,30 @@
-Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-6 7-7
-auf der Tagesordnung stehen die Pläne für eine verstärkte nukleare Zusammenarbeit . ||| 0-0 1-2 2-3 3-0 4-0 5-5 6-6 7-7 8-7 9-8 10-9 11-10
-auch Indien hofft angeblich auf eine Einigung zur Verteidigungs@@ kooperation beider Nationen . ||| 0-0 1-0 2-4 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-14 12-15
-Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-11 11-11 12-4
-die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es versäumt zu stoppen und leicht@@ sinnig fahren zu können . ||| 0-0 1-3 2-0 3-0 4-1 5-2 6-4 7-6 8-7 9-8 10-9 11-5 12-10 13-10 14-11 15-11 16-12 17-13 18-14 19-15 20-18 21-16 22-18 23-18 24-18
-er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats erscheinen . ||| 0-0 1-2 2-5 3-14 4-13 5-5 6-6 7-7 8-8 9-9 10-10 11-16 12-16
-das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-8 4-9 5-10 6-3 7-4 8-5 9-6 10-12 11-12 12-12
-George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ vergewal@@ tigung vor ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-12 12-13 13-15 14-15
-ein Mann soll vor Gericht stehen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 2-3 3-5 4-5 5-4 6-15 7-6 8-10 9-11 10-12 11-13 12-8 13-15 14-15
-George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Vorwürfe . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-7 9-10 10-11 11-12 12-13 13-14 14-15 15-19 16-17 17-17 18-7 19-8 20-19
-Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November beim Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-9 13-11 14-13 15-14 16-18 17-16 18-4 19-18
-Wieder@@ ansch@@ aff@@ ung mit der Very American Ideal , die Arbeits@@ rechte sind Menschenrechte ||| 0-0 1-1 2-13 3-13 4-2 5-4 6-4 7-5 8-6 9-7 10-7 11-8 12-9 13-10 14-11
-aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 3-2 4-4 5-6 6-7 7-8 8-9 9-11 10-12 11-13 12-15
-die Amerikaner akzeptierten seit Generationen die Grundvoraussetzung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 1-3 2-4 3-0 4-1 5-5 6-6 7-15 8-8 9-9 10-10 11-12 12-11 13-15
-wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-9 9-9 10-10 11-8 12-12
-die Geschichte ist ein großer Lehrer . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5
-nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 3-2 4-19 5-4 6-5 7-6 8-10 9-11 10-12 11-14 12-9 13-9 14-9 15-15 16-15 17-16 18-15 19-19
-wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sich an sie . ||| 0-0 1-3 2-3 3-2 4-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-10 13-11 14-12 15-11 16-12 17-13
-die Geschichte erinnert sich , wie auch wir . ||| 0-0 1-0 2-1 3-1 4-1 5-3 6-4 7-5 8-6
-Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 3-2 4-3 5-11 6-4 7-7 8-8 9-9 10-9 11-9 12-10 13-10 14-6 15-5
-eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um ein dauerhaftes Urteil über das Gesetz zu fällen . ||| 0-0 1-1 2-2 3-5 4-6 5-7 6-8 7-9 8-10 9-4 10-11 11-11 12-11 13-13 14-15 15-16 16-17 17-18 18-19 19-12 20-12 21-21
-Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-12 11-13
-die Forscher verfolgten die Frauen@@ medizin@@ er über sieben Jahre hinweg . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-7 7-8 8-9 9-10 10-2 11-11
-ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überlebens@@ raten . ||| 0-0 1-1 2-2 3-3 4-4 5-4 6-5 7-9 8-11 9-12 10-13 11-7 12-20 13-20 14-20 15-14 16-15 17-16 18-17 19-18 20-19
-Garten@@ center rue fällt bei Haus@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-8
-der TV-S@@ ender stopp@@ te etwa 40 Minuten den Rundfunk , hat aber inzwischen begonnen , erneut auszu@@ strahlen . ||| 0-0 1-1 2-2 3-3 4-18 5-4 6-7 7-8 8-4 9-4 10-3 11-11 12-12 13-12 14-13 15-14 16-16 17-15 18-15 19-17
-rund einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 4-6 5-5 6-8 7-9 8-11 9-12 10-13 11-14 12-15 13-19 14-16 15-17 16-18
-die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 4-3 5-4 6-4 7-6 8-6
-die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-12 7-8 8-9 9-10 10-11
-das Militär spielt eine wichtige Rolle in Pakistan und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-20 9-10 10-14 11-17 12-18 13-14 14-11 15-11 16-10 17-20
+Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 5-4 6-5 6-6 7-7
+auf der Tagesordnung stehen die Pläne für eine verstärkte nukleare Zusammenarbeit . ||| 0-0 0-3 0-4 2-1 3-2 5-5 6-6 7-7 7-8 8-9 9-10 10-11
+auch Indien hofft angeblich auf eine Einigung zur Verteidigungs@@ kooperation beider Nationen . ||| 0-0 0-1 3-3 4-2 5-4 6-5 7-6 8-7 9-8 10-9 11-10 14-11 15-12
+Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 4-12 5-5 6-6 7-7 8-8 10-9 11-10 11-11
+die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es versäumt zu stoppen und leicht@@ sinnig fahren zu können . ||| 0-0 0-2 0-3 1-4 2-5 3-1 4-6 5-11 6-7 7-8 8-9 9-10 10-12 10-13 11-14 11-15 12-16 13-17 14-18 15-19 16-21 18-20 18-22 18-23 18-24
+er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats erscheinen . ||| 0-0 2-1 5-2 5-5 6-6 7-7 8-8 9-9 10-10 13-4 14-3 16-11 16-12
+das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-6 4-7 5-8 6-9 8-3 9-4 10-5 12-10 12-11 12-12
+George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ vergewal@@ tigung vor ||| 0-0 1-1 2-2 3-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-11 13-12 15-13 15-14
+ein Mann soll vor Gericht stehen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 3-2 4-5 5-3 5-4 6-7 8-12 10-8 11-9 12-10 13-11 15-6 15-13 15-14
+George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Vorwürfe . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 7-8 7-18 8-19 10-9 11-10 12-11 13-12 14-13 15-14 17-16 17-17 19-15 19-20
+Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November beim Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 0-1 1-2 2-3 3-4 4-5 4-18 5-6 6-7 7-8 8-9 9-10 9-12 10-11 11-13 13-14 14-15 16-17 18-16 18-19
+Wieder@@ ansch@@ aff@@ ung mit der Very American Ideal , die Arbeits@@ rechte sind Menschenrechte ||| 0-0 1-1 2-4 4-5 4-6 5-7 6-8 7-9 7-10 8-11 9-12 10-13 11-14 13-2 13-3
+aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 2-3 4-4 6-5 7-6 8-7 9-8 11-9 12-10 13-11 15-12
+die Amerikaner akzeptierten seit Generationen die Grundvoraussetzung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 0-3 1-4 3-1 4-2 5-5 6-6 8-8 9-9 10-10 11-12 12-11 15-7 15-13
+wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-11 9-8 9-9 10-10 12-12
+die Geschichte ist ein großer Lehrer . ||| 0-0 0-1 1-2 2-3 3-4 4-5 5-6
+nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 2-3 4-5 5-6 6-7 9-12 9-13 9-14 10-8 11-9 12-10 14-11 15-15 15-16 15-18 16-17 19-4 19-19
+wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sich an sie . ||| 0-0 2-3 3-1 3-2 4-5 5-6 6-7 7-8 8-9 9-10 10-11 10-12 11-13 11-15 12-14 12-16 13-17 14-4
+die Geschichte erinnert sich , wie auch wir . ||| 0-0 0-1 1-2 1-3 1-4 3-5 4-6 5-7 6-8
+Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 2-3 3-4 4-6 5-15 6-14 7-7 8-8 9-9 9-10 9-11 10-12 10-13 11-5
+eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um ein dauerhaftes Urteil über das Gesetz zu fällen . ||| 0-0 1-1 2-2 4-9 5-3 6-4 7-5 8-6 9-7 10-8 11-10 11-11 11-12 12-19 12-20 13-13 15-14 16-15 17-16 18-17 19-18 21-21
+Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 10-9 12-10 13-11
+die Forscher verfolgten die Frauen@@ medizin@@ er über sieben Jahre hinweg . ||| 0-0 1-1 2-2 2-10 3-3 4-4 6-5 7-6 8-7 9-8 10-9 11-11
+ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überlebens@@ raten . ||| 0-0 1-1 2-2 3-3 4-4 4-5 5-6 7-11 9-7 11-8 12-9 13-10 14-15 15-16 16-17 17-18 18-19 19-20 20-12 20-13 20-14
+Garten@@ center rue fällt bei Haus@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 8-7
+der TV-S@@ ender stopp@@ te etwa 40 Minuten den Rundfunk , hat aber inzwischen begonnen , erneut auszu@@ strahlen . ||| 0-0 1-1 2-2 3-3 3-10 4-5 4-8 4-9 7-6 8-7 11-11 12-12 12-13 13-14 14-15 15-17 15-18 16-16 17-19 18-4
+rund einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 5-5 6-4 8-6 9-7 11-8 12-9 13-10 14-11 15-12 16-14 17-15 18-16 19-13
+die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 3-4 4-5 4-6 6-7 6-8
+die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 6-5 8-7 9-8 10-9 11-10 12-6
+das Militär spielt eine wichtige Rolle in Pakistan und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 10-9 10-16 11-14 11-15 14-10 14-13 17-11 18-12 20-8 20-17
diff --git a/tests/decoder/align/transform_to_moses_align.py b/tests/decoder/align/transform_to_moses_align.py
new file mode 100644
index 0000000..060927b
--- /dev/null
+++ b/tests/decoder/align/transform_to_moses_align.py
@@ -0,0 +1,10 @@
+
+import sys
+
+for line in sys.stdin:
+ txt, aln = line.strip().split(' ||| ')
+ ps = [a.split('-') for a in aln.split()]
+ idxs = [(int(p[1]), int(p[0])) for p in ps]
+ idxs.sort()
+ aln2 = " ".join(["{}-{}".format(a, b) for a, b in idxs])
+ print("{} ||| {}".format(txt, aln2))