From 66e6bff4a4efb655966374ecc611202f16932716 Mon Sep 17 00:00:00 2001 From: Roman Grundkiewicz Date: Fri, 6 Jul 2018 21:53:18 +0100 Subject: Change to Moses alignment format --- tests/decoder/align/align.b1.expected | 60 ++++++++++++------------- tests/decoder/align/align.batched.expected | 60 ++++++++++++------------- tests/decoder/align/align.expected | 60 ++++++++++++------------- tests/decoder/align/transform_to_moses_align.py | 10 +++++ 4 files changed, 100 insertions(+), 90 deletions(-) create mode 100644 tests/decoder/align/transform_to_moses_align.py (limited to 'tests/decoder/align') diff --git a/tests/decoder/align/align.b1.expected b/tests/decoder/align/align.b1.expected index e368ebe..f667d9e 100644 --- a/tests/decoder/align/align.b1.expected +++ b/tests/decoder/align/align.b1.expected @@ -1,30 +1,30 @@ -Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-6 7-7 -auf der Tagesordnung stehen die Pläne für eine stärkere Zusammenarbeit im Nuklear@@ bereich . ||| 0-0 1-2 2-3 3-0 4-0 5-5 6-6 7-7 8-7 9-8 10-8 11-8 12-11 13-11 -Indien ist angeblich auch auf eine Einigung zur Verteidigungs@@ kooperation der beiden Nationen gehofft . ||| 0-0 1-1 2-3 3-4 4-4 5-6 6-7 7-8 8-9 9-10 10-11 11-13 12-14 13-4 14-16 -Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-11 11-11 12-4 -die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es miss@@ achtete und leicht@@ sinn@@ ig@@ erweise fahr@@ bereit zu sein . ||| 0-0 1-3 2-0 3-0 4-1 5-2 6-4 7-6 8-7 9-8 10-9 11-5 12-10 13-10 14-11 15-11 16-18 17-14 18-15 19-18 20-18 21-18 22-16 23-18 24-18 25-18 26-18 -er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats@@ -@@ Richter erscheinen . ||| 0-0 1-2 2-5 3-14 4-13 5-5 6-6 7-7 8-8 9-9 10-10 11-11 12-9 13-4 14-16 -das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-8 4-9 5-10 6-3 7-4 8-5 9-6 10-12 11-12 12-12 -George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ rap@@ schen vor ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-12 12-13 13-14 14-3 -ein Mann soll sich vor Gericht stellen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 2-3 3-5 4-5 5-8 6-4 7-6 8-6 9-10 10-11 11-12 12-13 13-8 14-15 15-15 -George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Gebühren . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-7 9-10 10-11 11-12 12-13 13-14 14-15 15-19 16-17 17-17 18-7 19-8 20-6 -Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November auf dem Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-9 13-11 14-12 15-13 16-14 17-18 18-16 19-4 20-18 -die Wiedervereinigung mit dem Very American Ideal , dass die Rechte der Arbeitnehmer , ||| 0-0 1-0 2-2 3-4 4-4 5-5 6-6 7-7 8-7 9-8 10-8 11-8 12-8 13-10 -aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 3-2 4-4 5-6 6-7 7-8 8-9 9-11 10-12 11-13 12-15 -die Amerikaner akzeptierten seit Generationen die Grund@@ bedingung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 1-3 2-4 3-0 4-1 5-5 6-6 7-7 8-15 9-9 10-9 11-10 12-12 13-11 14-15 -wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-9 9-9 10-10 11-8 12-12 -die Geschichte ist ein großer Lehrer . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 -nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 3-2 4-19 5-4 6-5 7-6 8-10 9-11 10-12 11-14 12-9 13-9 14-9 15-15 16-15 17-16 18-15 19-19 -wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sie sich . ||| 0-0 1-3 2-3 3-2 4-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-10 13-11 14-12 15-11 16-11 -die Geschichte erinnert sich , wie sollten wir es . ||| 0-0 1-0 2-1 3-1 4-1 5-3 6-4 7-5 8-7 9-7 -Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 3-2 4-3 5-11 6-4 7-7 8-8 9-9 10-9 11-9 12-10 13-10 14-6 15-5 -eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um eine dauer@@ haf@@ tere Regelung über das Gesetz zu fällen . ||| 0-0 1-1 2-2 3-5 4-6 5-7 6-8 7-9 8-10 9-4 10-11 11-11 12-11 13-13 14-15 15-21 16-21 17-16 18-17 19-18 20-19 21-12 22-12 23-21 -Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-12 11-13 -die Forscher verfolgten die Frauen@@ arz@@ t@@ -Rei@@ se über sieben Jahre hinweg . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-7 7-7 8-7 9-8 10-9 11-10 12-2 13-11 -ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überleben@@ schancen . ||| 0-0 1-1 2-2 3-3 4-4 5-4 6-5 7-9 8-11 9-12 10-13 11-7 12-20 13-20 14-20 15-14 16-15 17-16 18-17 19-18 20-20 -Garten@@ center rue fällt in Eigen@@ heim@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-5 7-6 8-8 -der TV-S@@ ender stopp@@ te etwa 40 Minuten , hat aber inzwischen wieder eine Übertragung . ||| 0-0 1-1 2-2 3-3 4-18 5-4 6-7 7-8 8-4 9-10 10-12 11-12 12-13 13-13 14-15 15-18 -etwa einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 4-6 5-5 6-8 7-9 8-11 9-12 10-13 11-14 12-15 13-19 14-16 15-17 16-18 -die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 4-3 5-4 6-4 7-6 8-6 -die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-12 7-8 8-9 9-10 10-11 -das Militär spielt in Pakistan eine wichtige Rolle und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 4-7 5-3 6-4 7-5 8-20 9-10 10-16 11-17 12-18 13-14 14-11 15-11 16-10 17-20 +Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 5-4 6-5 6-6 7-7 +auf der Tagesordnung stehen die Pläne für eine stärkere Zusammenarbeit im Nuklear@@ bereich . ||| 0-0 0-3 0-4 2-1 3-2 5-5 6-6 7-7 7-8 8-9 8-10 8-11 11-12 11-13 +Indien ist angeblich auch auf eine Einigung zur Verteidigungs@@ kooperation der beiden Nationen gehofft . ||| 0-0 1-1 3-2 4-3 4-4 4-13 6-5 7-6 8-7 9-8 10-9 11-10 13-11 14-12 16-14 +Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 4-12 5-5 6-6 7-7 8-8 10-9 11-10 11-11 +die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es miss@@ achtete und leicht@@ sinn@@ ig@@ erweise fahr@@ bereit zu sein . ||| 0-0 0-2 0-3 1-4 2-5 3-1 4-6 5-11 6-7 7-8 8-9 9-10 10-12 10-13 11-14 11-15 14-17 15-18 16-22 18-16 18-19 18-20 18-21 18-23 18-24 18-25 18-26 +er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats@@ -@@ Richter erscheinen . ||| 0-0 2-1 4-13 5-2 5-5 6-6 7-7 8-8 9-9 9-12 10-10 11-11 13-4 14-3 16-14 +das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-6 4-7 5-8 6-9 8-3 9-4 10-5 12-10 12-11 12-12 +George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ rap@@ schen vor ||| 0-0 1-1 2-2 3-3 3-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-11 13-12 14-13 +ein Mann soll sich vor Gericht stellen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 3-2 4-6 5-3 5-4 6-7 6-8 8-5 8-13 10-9 11-10 12-11 13-12 15-14 15-15 +George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Gebühren . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 6-20 7-7 7-8 7-18 8-19 10-9 11-10 12-11 13-12 14-13 15-14 17-16 17-17 19-15 +Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November auf dem Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 0-1 1-2 2-3 3-4 4-5 4-19 5-6 6-7 7-8 8-9 9-10 9-12 10-11 11-13 12-14 13-15 14-16 16-18 18-17 18-20 +die Wiedervereinigung mit dem Very American Ideal , dass die Rechte der Arbeitnehmer , ||| 0-0 0-1 2-2 4-3 4-4 5-5 6-6 7-7 7-8 8-9 8-10 8-11 8-12 10-13 +aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 2-3 4-4 6-5 7-6 8-7 9-8 11-9 12-10 13-11 15-12 +die Amerikaner akzeptierten seit Generationen die Grund@@ bedingung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 0-3 1-4 3-1 4-2 5-5 6-6 7-7 9-9 9-10 10-11 11-13 12-12 15-8 15-14 +wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-11 9-8 9-9 10-10 12-12 +die Geschichte ist ein großer Lehrer . ||| 0-0 0-1 1-2 2-3 3-4 4-5 5-6 +nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 2-3 4-5 5-6 6-7 9-12 9-13 9-14 10-8 11-9 12-10 14-11 15-15 15-16 15-18 16-17 19-4 19-19 +wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sie sich . ||| 0-0 2-3 3-1 3-2 4-5 5-6 6-7 7-8 8-9 9-10 10-11 10-12 11-13 11-15 11-16 12-14 14-4 +die Geschichte erinnert sich , wie sollten wir es . ||| 0-0 0-1 1-2 1-3 1-4 3-5 4-6 5-7 7-8 7-9 +Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 2-3 3-4 4-6 5-15 6-14 7-7 8-8 9-9 9-10 9-11 10-12 10-13 11-5 +eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um eine dauer@@ haf@@ tere Regelung über das Gesetz zu fällen . ||| 0-0 1-1 2-2 4-9 5-3 6-4 7-5 8-6 9-7 10-8 11-10 11-11 11-12 12-21 12-22 13-13 15-14 16-17 17-18 18-19 19-20 21-15 21-16 21-23 +Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 10-9 12-10 13-11 +die Forscher verfolgten die Frauen@@ arz@@ t@@ -Rei@@ se über sieben Jahre hinweg . ||| 0-0 1-1 2-2 2-12 3-3 4-4 6-5 7-6 7-7 7-8 8-9 9-10 10-11 11-13 +ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überleben@@ schancen . ||| 0-0 1-1 2-2 3-3 4-4 4-5 5-6 7-11 9-7 11-8 12-9 13-10 14-15 15-16 16-17 17-18 18-19 20-12 20-13 20-14 20-20 +Garten@@ center rue fällt in Eigen@@ heim@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 5-6 6-7 8-8 +der TV-S@@ ender stopp@@ te etwa 40 Minuten , hat aber inzwischen wieder eine Übertragung . ||| 0-0 1-1 2-2 3-3 4-5 4-8 7-6 8-7 10-9 12-10 12-11 13-12 13-13 15-14 18-4 18-15 +etwa einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 5-5 6-4 8-6 9-7 11-8 12-9 13-10 14-11 15-12 16-14 17-15 18-16 19-13 +die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 3-4 4-5 4-6 6-7 6-8 +die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 6-5 8-7 9-8 10-9 11-10 12-6 +das Militär spielt in Pakistan eine wichtige Rolle und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 3-5 4-6 5-7 7-4 10-9 10-16 11-14 11-15 14-13 16-10 17-11 18-12 20-8 20-17 diff --git a/tests/decoder/align/align.batched.expected b/tests/decoder/align/align.batched.expected index e368ebe..f667d9e 100644 --- a/tests/decoder/align/align.batched.expected +++ b/tests/decoder/align/align.batched.expected @@ -1,30 +1,30 @@ -Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-6 7-7 -auf der Tagesordnung stehen die Pläne für eine stärkere Zusammenarbeit im Nuklear@@ bereich . ||| 0-0 1-2 2-3 3-0 4-0 5-5 6-6 7-7 8-7 9-8 10-8 11-8 12-11 13-11 -Indien ist angeblich auch auf eine Einigung zur Verteidigungs@@ kooperation der beiden Nationen gehofft . ||| 0-0 1-1 2-3 3-4 4-4 5-6 6-7 7-8 8-9 9-10 10-11 11-13 12-14 13-4 14-16 -Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-11 11-11 12-4 -die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es miss@@ achtete und leicht@@ sinn@@ ig@@ erweise fahr@@ bereit zu sein . ||| 0-0 1-3 2-0 3-0 4-1 5-2 6-4 7-6 8-7 9-8 10-9 11-5 12-10 13-10 14-11 15-11 16-18 17-14 18-15 19-18 20-18 21-18 22-16 23-18 24-18 25-18 26-18 -er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats@@ -@@ Richter erscheinen . ||| 0-0 1-2 2-5 3-14 4-13 5-5 6-6 7-7 8-8 9-9 10-10 11-11 12-9 13-4 14-16 -das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-8 4-9 5-10 6-3 7-4 8-5 9-6 10-12 11-12 12-12 -George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ rap@@ schen vor ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-12 12-13 13-14 14-3 -ein Mann soll sich vor Gericht stellen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 2-3 3-5 4-5 5-8 6-4 7-6 8-6 9-10 10-11 11-12 12-13 13-8 14-15 15-15 -George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Gebühren . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-7 9-10 10-11 11-12 12-13 13-14 14-15 15-19 16-17 17-17 18-7 19-8 20-6 -Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November auf dem Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-9 13-11 14-12 15-13 16-14 17-18 18-16 19-4 20-18 -die Wiedervereinigung mit dem Very American Ideal , dass die Rechte der Arbeitnehmer , ||| 0-0 1-0 2-2 3-4 4-4 5-5 6-6 7-7 8-7 9-8 10-8 11-8 12-8 13-10 -aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 3-2 4-4 5-6 6-7 7-8 8-9 9-11 10-12 11-13 12-15 -die Amerikaner akzeptierten seit Generationen die Grund@@ bedingung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 1-3 2-4 3-0 4-1 5-5 6-6 7-7 8-15 9-9 10-9 11-10 12-12 13-11 14-15 -wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-9 9-9 10-10 11-8 12-12 -die Geschichte ist ein großer Lehrer . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 -nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 3-2 4-19 5-4 6-5 7-6 8-10 9-11 10-12 11-14 12-9 13-9 14-9 15-15 16-15 17-16 18-15 19-19 -wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sie sich . ||| 0-0 1-3 2-3 3-2 4-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-10 13-11 14-12 15-11 16-11 -die Geschichte erinnert sich , wie sollten wir es . ||| 0-0 1-0 2-1 3-1 4-1 5-3 6-4 7-5 8-7 9-7 -Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 3-2 4-3 5-11 6-4 7-7 8-8 9-9 10-9 11-9 12-10 13-10 14-6 15-5 -eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um eine dauer@@ haf@@ tere Regelung über das Gesetz zu fällen . ||| 0-0 1-1 2-2 3-5 4-6 5-7 6-8 7-9 8-10 9-4 10-11 11-11 12-11 13-13 14-15 15-21 16-21 17-16 18-17 19-18 20-19 21-12 22-12 23-21 -Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-12 11-13 -die Forscher verfolgten die Frauen@@ arz@@ t@@ -Rei@@ se über sieben Jahre hinweg . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-7 7-7 8-7 9-8 10-9 11-10 12-2 13-11 -ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überleben@@ schancen . ||| 0-0 1-1 2-2 3-3 4-4 5-4 6-5 7-9 8-11 9-12 10-13 11-7 12-20 13-20 14-20 15-14 16-15 17-16 18-17 19-18 20-20 -Garten@@ center rue fällt in Eigen@@ heim@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-5 7-6 8-8 -der TV-S@@ ender stopp@@ te etwa 40 Minuten , hat aber inzwischen wieder eine Übertragung . ||| 0-0 1-1 2-2 3-3 4-18 5-4 6-7 7-8 8-4 9-10 10-12 11-12 12-13 13-13 14-15 15-18 -etwa einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 4-6 5-5 6-8 7-9 8-11 9-12 10-13 11-14 12-15 13-19 14-16 15-17 16-18 -die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 4-3 5-4 6-4 7-6 8-6 -die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-12 7-8 8-9 9-10 10-11 -das Militär spielt in Pakistan eine wichtige Rolle und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 4-7 5-3 6-4 7-5 8-20 9-10 10-16 11-17 12-18 13-14 14-11 15-11 16-10 17-20 +Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 5-4 6-5 6-6 7-7 +auf der Tagesordnung stehen die Pläne für eine stärkere Zusammenarbeit im Nuklear@@ bereich . ||| 0-0 0-3 0-4 2-1 3-2 5-5 6-6 7-7 7-8 8-9 8-10 8-11 11-12 11-13 +Indien ist angeblich auch auf eine Einigung zur Verteidigungs@@ kooperation der beiden Nationen gehofft . ||| 0-0 1-1 3-2 4-3 4-4 4-13 6-5 7-6 8-7 9-8 10-9 11-10 13-11 14-12 16-14 +Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 4-12 5-5 6-6 7-7 8-8 10-9 11-10 11-11 +die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es miss@@ achtete und leicht@@ sinn@@ ig@@ erweise fahr@@ bereit zu sein . ||| 0-0 0-2 0-3 1-4 2-5 3-1 4-6 5-11 6-7 7-8 8-9 9-10 10-12 10-13 11-14 11-15 14-17 15-18 16-22 18-16 18-19 18-20 18-21 18-23 18-24 18-25 18-26 +er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats@@ -@@ Richter erscheinen . ||| 0-0 2-1 4-13 5-2 5-5 6-6 7-7 8-8 9-9 9-12 10-10 11-11 13-4 14-3 16-14 +das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-6 4-7 5-8 6-9 8-3 9-4 10-5 12-10 12-11 12-12 +George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ rap@@ schen vor ||| 0-0 1-1 2-2 3-3 3-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-11 13-12 14-13 +ein Mann soll sich vor Gericht stellen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 3-2 4-6 5-3 5-4 6-7 6-8 8-5 8-13 10-9 11-10 12-11 13-12 15-14 15-15 +George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Gebühren . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 6-20 7-7 7-8 7-18 8-19 10-9 11-10 12-11 13-12 14-13 15-14 17-16 17-17 19-15 +Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November auf dem Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 0-1 1-2 2-3 3-4 4-5 4-19 5-6 6-7 7-8 8-9 9-10 9-12 10-11 11-13 12-14 13-15 14-16 16-18 18-17 18-20 +die Wiedervereinigung mit dem Very American Ideal , dass die Rechte der Arbeitnehmer , ||| 0-0 0-1 2-2 4-3 4-4 5-5 6-6 7-7 7-8 8-9 8-10 8-11 8-12 10-13 +aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 2-3 4-4 6-5 7-6 8-7 9-8 11-9 12-10 13-11 15-12 +die Amerikaner akzeptierten seit Generationen die Grund@@ bedingung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 0-3 1-4 3-1 4-2 5-5 6-6 7-7 9-9 9-10 10-11 11-13 12-12 15-8 15-14 +wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-11 9-8 9-9 10-10 12-12 +die Geschichte ist ein großer Lehrer . ||| 0-0 0-1 1-2 2-3 3-4 4-5 5-6 +nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 2-3 4-5 5-6 6-7 9-12 9-13 9-14 10-8 11-9 12-10 14-11 15-15 15-16 15-18 16-17 19-4 19-19 +wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sie sich . ||| 0-0 2-3 3-1 3-2 4-5 5-6 6-7 7-8 8-9 9-10 10-11 10-12 11-13 11-15 11-16 12-14 14-4 +die Geschichte erinnert sich , wie sollten wir es . ||| 0-0 0-1 1-2 1-3 1-4 3-5 4-6 5-7 7-8 7-9 +Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 2-3 3-4 4-6 5-15 6-14 7-7 8-8 9-9 9-10 9-11 10-12 10-13 11-5 +eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um eine dauer@@ haf@@ tere Regelung über das Gesetz zu fällen . ||| 0-0 1-1 2-2 4-9 5-3 6-4 7-5 8-6 9-7 10-8 11-10 11-11 11-12 12-21 12-22 13-13 15-14 16-17 17-18 18-19 19-20 21-15 21-16 21-23 +Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 10-9 12-10 13-11 +die Forscher verfolgten die Frauen@@ arz@@ t@@ -Rei@@ se über sieben Jahre hinweg . ||| 0-0 1-1 2-2 2-12 3-3 4-4 6-5 7-6 7-7 7-8 8-9 9-10 10-11 11-13 +ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überleben@@ schancen . ||| 0-0 1-1 2-2 3-3 4-4 4-5 5-6 7-11 9-7 11-8 12-9 13-10 14-15 15-16 16-17 17-18 18-19 20-12 20-13 20-14 20-20 +Garten@@ center rue fällt in Eigen@@ heim@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 5-6 6-7 8-8 +der TV-S@@ ender stopp@@ te etwa 40 Minuten , hat aber inzwischen wieder eine Übertragung . ||| 0-0 1-1 2-2 3-3 4-5 4-8 7-6 8-7 10-9 12-10 12-11 13-12 13-13 15-14 18-4 18-15 +etwa einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 5-5 6-4 8-6 9-7 11-8 12-9 13-10 14-11 15-12 16-14 17-15 18-16 19-13 +die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 3-4 4-5 4-6 6-7 6-8 +die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 6-5 8-7 9-8 10-9 11-10 12-6 +das Militär spielt in Pakistan eine wichtige Rolle und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 3-5 4-6 5-7 7-4 10-9 10-16 11-14 11-15 14-13 16-10 17-11 18-12 20-8 20-17 diff --git a/tests/decoder/align/align.expected b/tests/decoder/align/align.expected index db4fe94..4bba506 100644 --- a/tests/decoder/align/align.expected +++ b/tests/decoder/align/align.expected @@ -1,30 +1,30 @@ -Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-6 7-7 -auf der Tagesordnung stehen die Pläne für eine verstärkte nukleare Zusammenarbeit . ||| 0-0 1-2 2-3 3-0 4-0 5-5 6-6 7-7 8-7 9-8 10-9 11-10 -auch Indien hofft angeblich auf eine Einigung zur Verteidigungs@@ kooperation beider Nationen . ||| 0-0 1-0 2-4 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-14 12-15 -Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-11 11-11 12-4 -die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es versäumt zu stoppen und leicht@@ sinnig fahren zu können . ||| 0-0 1-3 2-0 3-0 4-1 5-2 6-4 7-6 8-7 9-8 10-9 11-5 12-10 13-10 14-11 15-11 16-12 17-13 18-14 19-15 20-18 21-16 22-18 23-18 24-18 -er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats erscheinen . ||| 0-0 1-2 2-5 3-14 4-13 5-5 6-6 7-7 8-8 9-9 10-10 11-16 12-16 -das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-8 4-9 5-10 6-3 7-4 8-5 9-6 10-12 11-12 12-12 -George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ vergewal@@ tigung vor ||| 0-0 1-1 2-2 3-3 4-5 5-6 6-7 7-8 8-9 9-10 10-11 11-12 12-13 13-15 14-15 -ein Mann soll vor Gericht stehen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 2-3 3-5 4-5 5-4 6-15 7-6 8-10 9-11 10-12 11-13 12-8 13-15 14-15 -George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Vorwürfe . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-7 9-10 10-11 11-12 12-13 13-14 14-15 15-19 16-17 17-17 18-7 19-8 20-19 -Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November beim Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-9 13-11 14-13 15-14 16-18 17-16 18-4 19-18 -Wieder@@ ansch@@ aff@@ ung mit der Very American Ideal , die Arbeits@@ rechte sind Menschenrechte ||| 0-0 1-1 2-13 3-13 4-2 5-4 6-4 7-5 8-6 9-7 10-7 11-8 12-9 13-10 14-11 -aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 3-2 4-4 5-6 6-7 7-8 8-9 9-11 10-12 11-13 12-15 -die Amerikaner akzeptierten seit Generationen die Grundvoraussetzung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 1-3 2-4 3-0 4-1 5-5 6-6 7-15 8-8 9-9 10-10 11-12 12-11 13-15 -wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-9 9-9 10-10 11-8 12-12 -die Geschichte ist ein großer Lehrer . ||| 0-0 1-0 2-1 3-2 4-3 5-4 6-5 -nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 3-2 4-19 5-4 6-5 7-6 8-10 9-11 10-12 11-14 12-9 13-9 14-9 15-15 16-15 17-16 18-15 19-19 -wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sich an sie . ||| 0-0 1-3 2-3 3-2 4-14 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-10 13-11 14-12 15-11 16-12 17-13 -die Geschichte erinnert sich , wie auch wir . ||| 0-0 1-0 2-1 3-1 4-1 5-3 6-4 7-5 8-6 -Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 3-2 4-3 5-11 6-4 7-7 8-8 9-9 10-9 11-9 12-10 13-10 14-6 15-5 -eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um ein dauerhaftes Urteil über das Gesetz zu fällen . ||| 0-0 1-1 2-2 3-5 4-6 5-7 6-8 7-9 8-10 9-4 10-11 11-11 12-11 13-13 14-15 15-16 16-17 17-18 18-19 19-12 20-12 21-21 -Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 9-10 10-12 11-13 -die Forscher verfolgten die Frauen@@ medizin@@ er über sieben Jahre hinweg . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-7 7-8 8-9 9-10 10-2 11-11 -ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überlebens@@ raten . ||| 0-0 1-1 2-2 3-3 4-4 5-4 6-5 7-9 8-11 9-12 10-13 11-7 12-20 13-20 14-20 15-14 16-15 17-16 18-17 19-18 20-19 -Garten@@ center rue fällt bei Haus@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-8 -der TV-S@@ ender stopp@@ te etwa 40 Minuten den Rundfunk , hat aber inzwischen begonnen , erneut auszu@@ strahlen . ||| 0-0 1-1 2-2 3-3 4-18 5-4 6-7 7-8 8-4 9-4 10-3 11-11 12-12 13-12 14-13 15-14 16-16 17-15 18-15 19-17 -rund einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 4-6 5-5 6-8 7-9 8-11 9-12 10-13 11-14 12-15 13-19 14-16 15-17 16-18 -die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 4-3 5-4 6-4 7-6 8-6 -die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 5-6 6-12 7-8 8-9 9-10 10-11 -das Militär spielt eine wichtige Rolle in Pakistan und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-20 9-10 10-14 11-17 12-18 13-14 14-11 15-11 16-10 17-20 +Indien und Japan Ministerpräsidenten treffen sich in Tokio ||| 0-0 1-1 2-2 3-3 5-4 6-5 6-6 7-7 +auf der Tagesordnung stehen die Pläne für eine verstärkte nukleare Zusammenarbeit . ||| 0-0 0-3 0-4 2-1 3-2 5-5 6-6 7-7 7-8 8-9 9-10 10-11 +auch Indien hofft angeblich auf eine Einigung zur Verteidigungs@@ kooperation beider Nationen . ||| 0-0 0-1 3-3 4-2 5-4 6-5 7-6 8-7 9-8 10-9 11-10 14-11 15-12 +Kar@@ ra@@ tha Polizei nimmt 20-@@ Jährige nach Hochgeschwindigkeits@@ motor@@ en@@ jagd fest ||| 0-0 1-1 2-2 3-3 4-4 4-12 5-5 6-6 7-7 8-8 10-9 11-10 11-11 +die Polizei von Kar@@ ra@@ tha hat einen 20-@@ jährigen Mann beauftragt , der es versäumt zu stoppen und leicht@@ sinnig fahren zu können . ||| 0-0 0-2 0-3 1-4 2-5 3-1 4-6 5-11 6-7 7-8 8-9 9-10 10-12 10-13 11-14 11-15 12-16 13-17 14-18 15-19 16-21 18-20 18-22 18-23 18-24 +er soll am 23. September in Kar@@ ra@@ tha Magistr@@ ats erscheinen . ||| 0-0 2-1 5-2 5-5 6-6 7-7 8-8 9-9 10-10 13-4 14-3 16-11 16-12 +das Motorrad wurde für drei Monate beschlagnahmt und im@@ matri@@ k@@ uliert . ||| 0-0 1-1 2-2 3-6 4-7 5-8 6-9 8-3 9-4 10-5 12-10 12-11 12-12 +George Web@@ ster warf N@@ air@@ n und Pit@@ loch@@ ry Hotel@@ vergewal@@ tigung vor ||| 0-0 1-1 2-2 3-3 5-4 6-5 7-6 8-7 9-8 10-9 11-10 12-11 13-12 15-13 15-14 +ein Mann soll vor Gericht stehen , der Frauen in zwei Hotels vergewaltigt hat . ||| 0-0 1-1 3-2 4-5 5-3 5-4 6-7 8-12 10-8 11-9 12-10 13-11 15-6 15-13 15-14 +George Web@@ ster , 28 , stellte sich bei einer Anhörung vor dem Ober@@ landes@@ gericht in Glasgow die Vorwürfe . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 7-8 7-18 8-19 10-9 11-10 12-11 13-12 14-13 15-14 17-16 17-17 19-15 19-20 +Rich@@ terin Lady Ra@@ e hat einen Prozes@@ stag für den 17. November beim Ober@@ landes@@ gericht Edinburgh festgelegt . ||| 0-0 0-1 1-2 2-3 3-4 4-5 4-18 5-6 6-7 7-8 8-9 9-10 9-12 10-11 11-13 13-14 14-15 16-17 18-16 18-19 +Wieder@@ ansch@@ aff@@ ung mit der Very American Ideal , die Arbeits@@ rechte sind Menschenrechte ||| 0-0 1-1 2-4 4-5 4-6 5-7 6-8 7-9 7-10 8-11 9-12 10-13 11-14 13-2 13-3 +aber es ist sicher keine radikale Initiative - zumindest durch amerikanische Standards . ||| 0-0 1-1 2-2 2-3 4-4 6-5 7-6 8-7 9-8 11-9 12-10 13-11 15-12 +die Amerikaner akzeptierten seit Generationen die Grundvoraussetzung , dass Arbeits@@ rechte Menschenrechte sind . ||| 0-0 0-3 1-4 3-1 4-2 5-5 6-6 8-8 9-9 10-10 11-12 12-11 15-7 15-13 +wie der Rever@@ end Martin Luther King Jr. vor fünfzig Jahren sagte : ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-11 9-8 9-9 10-10 12-12 +die Geschichte ist ein großer Lehrer . ||| 0-0 0-1 1-2 2-3 3-4 4-5 5-6 +nun weiß jeder , dass die Arbeiter@@ bewegung die Stärke der Nation nicht schm@@ älert , sondern vergrößert hat . ||| 0-0 1-2 2-1 2-3 4-5 5-6 6-7 9-12 9-13 9-14 10-8 11-9 12-10 14-11 15-15 15-16 15-18 16-17 19-4 19-19 +wer die Arbeit angreift , vergisst diese einfachen Wahrheiten , aber die Geschichte erinnert sich an sie . ||| 0-0 2-3 3-1 3-2 4-5 5-6 6-7 7-8 8-9 9-10 10-11 10-12 11-13 11-15 12-14 12-16 13-17 14-4 +die Geschichte erinnert sich , wie auch wir . ||| 0-0 0-1 1-2 1-3 1-4 3-5 4-6 5-7 6-8 +Richter blockiert vorübergehend das Gesetz , das alle Louisiana Ab@@ t@@ reibungs@@ klin@@ iken schließen könnte ||| 0-0 1-2 2-1 2-3 3-4 4-6 5-15 6-14 7-7 8-8 9-9 9-10 9-11 10-12 10-13 11-5 +eine Anhörung soll innerhalb eines Monats für den Richter angesetzt werden , um ein dauerhaftes Urteil über das Gesetz zu fällen . ||| 0-0 1-1 2-2 4-9 5-3 6-4 7-5 8-6 9-7 10-8 11-10 11-11 11-12 12-19 12-20 13-13 15-14 16-15 17-16 18-17 19-18 21-21 +Small STU@@ DY : neue Medikamente können bremsen , Eier@@ stock@@ krebs ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 8-8 10-9 12-10 13-11 +die Forscher verfolgten die Frauen@@ medizin@@ er über sieben Jahre hinweg . ||| 0-0 1-1 2-2 2-10 3-3 4-4 6-5 7-6 8-7 9-8 10-9 11-11 +ältere Frauen und jene , deren Krebs zum Zeitpunkt der Diagnose fortgeschritt@@ ener war , hatten die ärmsten Überlebens@@ raten . ||| 0-0 1-1 2-2 3-3 4-4 4-5 5-6 7-11 9-7 11-8 12-9 13-10 14-15 15-16 16-17 17-18 18-19 19-20 20-12 20-13 20-14 +Garten@@ center rue fällt bei Haus@@ besitzern . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 8-7 +der TV-S@@ ender stopp@@ te etwa 40 Minuten den Rundfunk , hat aber inzwischen begonnen , erneut auszu@@ strahlen . ||| 0-0 1-1 2-2 3-3 3-10 4-5 4-8 4-9 7-6 8-7 11-11 12-12 12-13 13-14 14-15 15-17 15-18 16-16 17-19 18-4 +rund einen Kilometer entfernt stießen sie auf Sicherheits@@ dienste , bewaffnet mit Stö@@ cken und Steinen . ||| 0-0 1-1 2-2 3-3 5-5 6-4 8-6 9-7 11-8 12-9 13-10 14-11 15-12 16-14 17-15 18-16 19-13 +die Polizei setzte T@@ rän@@ eng@@ as ein . ||| 0-0 1-1 2-2 3-3 3-4 4-5 4-6 6-7 6-8 +die Demonstranten forderten Shar@@ if Rücktritt , den er ablehnte . ||| 0-0 1-1 2-2 3-3 4-4 6-5 8-7 9-8 10-9 11-10 12-6 +das Militär spielt eine wichtige Rolle in Pakistan und hat in der Vergangenheit mehrfach die Macht ergriffen . ||| 0-0 1-1 2-2 3-3 4-4 5-5 6-6 7-7 10-9 10-16 11-14 11-15 14-10 14-13 17-11 18-12 20-8 20-17 diff --git a/tests/decoder/align/transform_to_moses_align.py b/tests/decoder/align/transform_to_moses_align.py new file mode 100644 index 0000000..060927b --- /dev/null +++ b/tests/decoder/align/transform_to_moses_align.py @@ -0,0 +1,10 @@ + +import sys + +for line in sys.stdin: + txt, aln = line.strip().split(' ||| ') + ps = [a.split('-') for a in aln.split()] + idxs = [(int(p[1]), int(p[0])) for p in ps] + idxs.sort() + aln2 = " ".join(["{}-{}".format(a, b) for a, b in idxs]) + print("{} ||| {}".format(txt, aln2)) -- cgit v1.2.3