diff options
author | Roman Grundkiewicz <rgrundki@exseed.ed.ac.uk> | 2017-10-14 22:22:40 +0300 |
---|---|---|
committer | Roman Grundkiewicz <rgrundki@exseed.ed.ac.uk> | 2017-10-14 22:22:40 +0300 |
commit | 739e764a1f3854f214403c5238b53f5981c27842 (patch) | |
tree | 9c1a24b6feea20f9ee4cf11018912628cc583f66 /tests/decoder | |
parent | 03303c7b7fdfc77a6c0ab3caacda930d49263e7f (diff) |
Remove first translations from the WMT17 n-best list test
Diffstat (limited to 'tests/decoder')
-rw-r--r-- | tests/decoder/wmt17/nbest.expected | 5 | ||||
-rw-r--r-- | tests/decoder/wmt17/nbest.scores.nematus | 5 | ||||
-rw-r--r-- | tests/decoder/wmt17/test_nbest.sh | 2 |
3 files changed, 1 insertions, 11 deletions
diff --git a/tests/decoder/wmt17/nbest.expected b/tests/decoder/wmt17/nbest.expected index 5fce946..956233c 100644 --- a/tests/decoder/wmt17/nbest.expected +++ b/tests/decoder/wmt17/nbest.expected @@ -1,8 +1,3 @@ -0 ||| wir müssen den Chef / Bürgermeister @-@ Modell aufgeben , der seine Faust durch die Wand treibt und alles löst . ||| F0= -5.44562 ||| -0.247528 -0 ||| wir müssen dem Chef / Bürgermeister @-@ Modell , das seine Faust durch die Wand treibt und alles löst , aufgeben . ||| F0= -6.70064 ||| -0.291332 -0 ||| wir müssen den Chef / Bürgermeister @-@ Modell aufgeben , der die Faust durch die Wand treibt und alles löst . ||| F0= -6.89012 ||| -0.313187 -0 ||| wir müssen den Chef / Bürgermeister @-@ Modell , der seine Faust durch die Wand treibt und alles löst , aufgeben . ||| F0= -7.23511 ||| -0.31457 -0 ||| wir müssen dem Chef / Bürgermeister @-@ Modell , das die Faust durch die Wand treibt und alles löst , aufgeben . ||| F0= -7.98375 ||| -0.34712 1 ||| Nein . ||| F0= -0.0375563 ||| -0.0125188 1 ||| Nein ! ||| F0= -4.98803 ||| -1.66268 1 ||| Nr. ||| F0= -4.37517 ||| -2.18758 diff --git a/tests/decoder/wmt17/nbest.scores.nematus b/tests/decoder/wmt17/nbest.scores.nematus index f3ab693..2a56fb4 100644 --- a/tests/decoder/wmt17/nbest.scores.nematus +++ b/tests/decoder/wmt17/nbest.scores.nematus @@ -1,8 +1,3 @@ -0.247528422963 -0.2913334266 -0.313187317415 -0.314569701319 -0.347120927728 0.012518612047 1.66267442703 2.18758511543 diff --git a/tests/decoder/wmt17/test_nbest.sh b/tests/decoder/wmt17/test_nbest.sh index d1c85e2..43f111a 100644 --- a/tests/decoder/wmt17/test_nbest.sh +++ b/tests/decoder/wmt17/test_nbest.sh @@ -5,7 +5,7 @@ set -e # Test code goes here $MRT_MARIAN/build/marian-decoder -c $MRT_MODELS/wmt17_systems/marian.en-de.yml \ - -b 5 --n-best --normalize < text.in > nbest.out + -b 5 --n-best --normalize < text.in | tail -n +6 > nbest.out # Compare n-best lists $MRT_TOOLS/diff-floats.py -p 0.0002 nbest.out nbest.expected > nbest.diff |