From 739e764a1f3854f214403c5238b53f5981c27842 Mon Sep 17 00:00:00 2001 From: Roman Grundkiewicz Date: Sat, 14 Oct 2017 19:22:40 +0000 Subject: Remove first translations from the WMT17 n-best list test --- tests/decoder/wmt17/nbest.expected | 5 ----- tests/decoder/wmt17/nbest.scores.nematus | 5 ----- tests/decoder/wmt17/test_nbest.sh | 2 +- 3 files changed, 1 insertion(+), 11 deletions(-) (limited to 'tests') diff --git a/tests/decoder/wmt17/nbest.expected b/tests/decoder/wmt17/nbest.expected index 5fce946..956233c 100644 --- a/tests/decoder/wmt17/nbest.expected +++ b/tests/decoder/wmt17/nbest.expected @@ -1,8 +1,3 @@ -0 ||| wir müssen den Chef / Bürgermeister @-@ Modell aufgeben , der seine Faust durch die Wand treibt und alles löst . ||| F0= -5.44562 ||| -0.247528 -0 ||| wir müssen dem Chef / Bürgermeister @-@ Modell , das seine Faust durch die Wand treibt und alles löst , aufgeben . ||| F0= -6.70064 ||| -0.291332 -0 ||| wir müssen den Chef / Bürgermeister @-@ Modell aufgeben , der die Faust durch die Wand treibt und alles löst . ||| F0= -6.89012 ||| -0.313187 -0 ||| wir müssen den Chef / Bürgermeister @-@ Modell , der seine Faust durch die Wand treibt und alles löst , aufgeben . ||| F0= -7.23511 ||| -0.31457 -0 ||| wir müssen dem Chef / Bürgermeister @-@ Modell , das die Faust durch die Wand treibt und alles löst , aufgeben . ||| F0= -7.98375 ||| -0.34712 1 ||| Nein . ||| F0= -0.0375563 ||| -0.0125188 1 ||| Nein ! ||| F0= -4.98803 ||| -1.66268 1 ||| Nr. ||| F0= -4.37517 ||| -2.18758 diff --git a/tests/decoder/wmt17/nbest.scores.nematus b/tests/decoder/wmt17/nbest.scores.nematus index f3ab693..2a56fb4 100644 --- a/tests/decoder/wmt17/nbest.scores.nematus +++ b/tests/decoder/wmt17/nbest.scores.nematus @@ -1,8 +1,3 @@ -0.247528422963 -0.2913334266 -0.313187317415 -0.314569701319 -0.347120927728 0.012518612047 1.66267442703 2.18758511543 diff --git a/tests/decoder/wmt17/test_nbest.sh b/tests/decoder/wmt17/test_nbest.sh index d1c85e2..43f111a 100644 --- a/tests/decoder/wmt17/test_nbest.sh +++ b/tests/decoder/wmt17/test_nbest.sh @@ -5,7 +5,7 @@ set -e # Test code goes here $MRT_MARIAN/build/marian-decoder -c $MRT_MODELS/wmt17_systems/marian.en-de.yml \ - -b 5 --n-best --normalize < text.in > nbest.out + -b 5 --n-best --normalize < text.in | tail -n +6 > nbest.out # Compare n-best lists $MRT_TOOLS/diff-floats.py -p 0.0002 nbest.out nbest.expected > nbest.diff -- cgit v1.2.3