+
+ 
+
+
+
+
git clone --single-branch git://gonito.net/retroc2 -b submission-00647
cd retroc2
@@ -192,22 +195,57 @@
149.17849548415006 i Rdlñmczy samorzfšü” Wybnwdclsgylláwdolvlmhkvel Izby RUIHI( (e1 odbyły się a gmdmn zouz y cyyuyę Eyal: rwym. będą veyrezL-nlum/nh w . w mnęszkzunec y „yyy, yy yy awm ?gniew tym. mœszkamę( Ustawa z dma M grudnia v99; y. y .zumy rownych, ktora wasi yy zym s kwyelma 199c y. ,yyuyzy syçnzhvohuciychwPolxv wyme- ,yę mnędzywu ennym azymyy w Pmm ymy rowan: Syçganne do „yy uadyqy yymyyyyyyy „yyy y. ynspwaqedadzyašanyaobecnyth .z Wymœnyunquäuyvapvzewyduy y z moty ;smaga paw.) przynar Ieznoár yy umovxądu mhvczegu „yy Ivycxrwch y prawnych będą' „yyy ;xxhtnykami „ymy rolnego, pedalku dochodowego yy yyy» y /yunvnh y „a m: priv/nych z dzmlnwsprqalnyrh nvmlukql yyy, „c, ovyxzczlonkuw rohuczych ipn)- Hush!! prudulœygnych posada”. tychw dzyelnyarh Krąg kyd! pudmmmwy yyœyyyyuye wszyslkye osuby .ymm y.] swe dzmła\\nn›ć«ą yyyyyyyzy. yyy ›a maxu yesl ubhgalnryuun, ak* znak ysy mch .yyyz wyka; zyyyyzyz» nunzłvyvohyczel.klóvydualnutna alrauna pvwlalu Muglby hanlne; y y abauue powlnm Wybory w lym mlm zysmy pvnpmwadmm wędki; z y znwanei uslawy Inhwilunœi 2| (uma zum y. Dmyçhrzzs w wyhomrh „yyy dzem: cyyyyyyyy hczątc pnmdłlyś lu nzylkńw mhnwh wyblsruüy dodalkowych xlmhonláw, Mldeymo dzralan y. vzezz mxw .yyy yyyyyzsyymyyy rohvyrlwn y ww yyy; pnpawysuukxuyyzgvalmy „yam dZemeV neywyzsxy „ym uby, M0 „yyy Lłulydwtmsw Lynam. Izbie Rohm-vy okolo m0 osob. m- ym. «umow me zmienna „ę, .ny łwurzą yyy ›wę Pawyymwa uR Do 29 gmdma uabęaę wę ymm poswdzcnya yyy ymyyyy Wy, m» dokonają wyboru wle woxlnnuqxstšn „ay y yyyyyyy. ;sdr neguäelsgah y. Walmlgmnvadzcr „ux š 7 kazde; miły yade" :mę gal będa lworzyly wyyy. Zgmmar dxenm wasy yyyyyyyyyyyozwyy :yy orgraruuyt ym mab Wahcgn Zyumadzcnna, bo yyy zawsze duzu sprawnie y dam. yy y. na w I "wurządzamt analu, yny, Dpm!! y »vnmsköw z mkvesu pmduktu yoyyyy ym Nm kumhvagay gynvom admlmslmqy rudawe] y ;yr „ma u wysxçpnwama ay ulgznow adnvvmuluqy vvąduœœy w wugewudzlwl: y „p, nnw sammządu lnyylnmünygo y ynyqavywa w zakresie regulaql prawnydv dulvrząryrh yoyyycryyy, yymyyy wy y rynków mnyyzy mmz upmiüwame pyyyęyyyyyyy (ych pilar „ymy, prowadzeme dzmlzn yrzerz Iwnlzumn rynku yyyysgo oraz wprawy »uruukávy zbytu „ymy mw rolnych, pmwadzenœ ..yynyy kuędów y yyynmyyyymy pmdmyy mhm, gtnmadvrnœ, prze' ducenluw mhuyrh oraz yyytyy pyzedayębnunáw, dundzhvn y znkresy: dzyawmáry mhm/eg, wytqskyego gospodarslwx dummy/ego uml uzyskiwania yyyyz rolnykáw wzmę Mmww kwahhkacygnych yy zakusy:: yyyyyyyyyyy, kuvalkvwanw y upowszechnmnye zyunnlelvky vue ay ympyd.y‹z.~„yyzy.xyy .y navzecz pndnnvrnm yakołn ,yoynyow y urządzen swsuwmnydw w dhamma- ›(1 mwnn; uraz yyy rzczz popm- slw.: w :elnnnw z yyayosykyyyy pvrw/ ny yyyyyyczy. wapœvalvœ yyy LIuaMI Hush, ymqawame powsuwanm „eyy pmducemnw rnhvynh y k» ;yyy zyyyyyyy yy m-ci pupmwv wame ekwpullu prudukláw ruhuyüly yyyyy orgnmzaqnmn pvndurrnxów mlnyzh „wyrwy y yynyyyyyy. qą ;mhm/ną w zakresyę uzhvony Środowska, zdmwm y wyeyyyyygy dxmdznrma yynyyyymgy, wy; nwolubehkir pomady: yyyyyym ty; yy „zyyywyyyyyyy haha gospodarsku w wuyewadz {mewynmy „y zzuyyyzyyyyyzmz panad 2,5 .yyy yyy co svavvowy yn yyyyz. produky kraymvq, zyęyyyyy mw ponad z xs yyyy yyy /I lpm( nk' :huvakńm cukwwyüw ;,4 yyyy yyy y' ye z lys. yyy/ au y y mez naywnznyeyszœ w kraju zagyyby. „ym yyynyy yagnrüwych r myłhny czym pnrzeczky, xmsknwky, yyy: mo" uvvawy tyloma y zy dnkańcuni: n: m. 2002.49999998415 1853.3215045
146.48617498419003 r yyyyyy 1004 y y z rLyym yyzzyyy œçácrq Merkvsga rynku zyyyyyzzywwyzyyo Zuwagr yyy wzrosl zbraniw zbó: w us nre yyarzzy z teg:: powod !rtzyć yyy wzrost zzy, które bedq mkr: ;awiejak w dwóm pwned/Hth :zza/mdr Zaćma w wrr yyyrmw drwygw „a swyrh hymm rra/wrekfm „szwy zmyyyy zyzrmyyzyyyyry w myszyyyy kra/u. w vu xe ' uma zyyyyypyyzwy Nrchórym mrruamrom muyna yyyz blaka y w zzy. cza miesa, zwłaszcza mniam/ego, kmm m produkty rolne Ĺy yrzzymz wykupywane yyyzyz przrdsrrbrvrswwa z rnnydr raruw zyze œrr upy. Przew/mkrum yyy Dvzwkaçh Cmrnnydr w Dokm/owre Wiadomnśc Gm nne -±______ „yw yyzyyyyyyyz mundy yywyyzzyyy., stamwa ule mz. me skazane wyzrwy-m ,y Tc ukolrunma sprawna/ą, yz Inne „yyy yy y !orne y yzw yyyzzywyy będą wyyyywymyzyyyz y yyyyszyywywayz yy., yywyy „yyyyyyyyyy, lesza: mz powtarzam, ze nakazem rhwrr na( ,yz y n aby porskr y Nas/ys „ymyyy ,esy ralrrrw/a, yy syzyyyyyzzyyym polazzvvru ramka! duzego mrawz Gmrna wyzy-swy Brala Podlnka !o v2. soo ha yyyywyzyzyryyyy, w yyy yyy au (rz m nz yyy gmmy ame, r524 ryz yyy lasy) nalezace do r 55v gospodarstw 0d wyrwwy !a1 w yyyyyyyyyz yyyyywywyyyym yyy mweçlycre uzy lep ym !zg/Madam ;esw yyw 2004, w którym przeznanzyrramy »a mo( budzetu grnrny yyy zzdarrra yyy, we yyyye Eudwcmyrnln zs orrqg w, ?Jkm ›rem kdrraIr/axtymer y 2 wm dróggmrrrrvydl :podbudową y asfaltem. N y nn yyywu y docrągawer, 22 wm syzzy wzyyzrrzzzyyyyz; y zsz wny zyc; gymyymyzn z scy wyyy dróg .yywzyyzzyyyyww sw wrę:( [sucze duzo donot/rama Wdm ym yyaryazyy 20m4 roku omm, my yyyyywayrzyry ›Ae/eg wyyĹyyyyyry, wazrvyrrr dla (Imrrvy y mreszkańmw rnwcstyc/r, Mrcdzy ymyymy zymyyyz zywym sportowa 7 wrdnwrdanmr przy rvyyzyryayyyyyy Dimmu/um w Crcrborze Dux m Nrcxapomrnamymkze a naszsr, brfskrer kuhurze Przy wryyyyzzn wyyryyyyy mz nłvrellrrarh zzyyywyyy zespoły (prew/ay ›a mwyr, ne. Mymy a racowm grnaryrh rawodńw yyy yyy ywyywy, kurorrkarskąy xdobmcrwa ludow/ngo, yzzzwyy, ;dowan. zaaz mk yyyyyyza :a grup rmędzynslodowyth Dzrękr temu nasza gnu/m , ,arz wawy ze pala yeye gyyyyyzyyyyy. Dzra yar/mv( yy.; yyywye kultury to wsyyarczysyyy powrór ywy wyyzyzyy. w Lhvwwrrę( azwyyz /wyC/are oraz vhyriywy* yrryy yyy y pr V, szwy pokoleń DOŻYNKI POWIATOWE: ŁOMAZY: Ic. ŻNIWA SKOŃCZONE, SNOPY ZWIEZIONE; ŻEŃCY 5:5 SPIESZĄ, SKACZĄ A CIESZĄ.” Uwieńczenie Iudzkiej pracy Mszą śwwęłą w kmuęre pw. Apusmmw Prmm y Pawla w wyyyyyzyzw, wyymzrzwyyyywzya wzzz rs brskupa uy dozynkowe Na „ere lradyrymtgu duzynkuwegu kuruwudu nhuk Fidenza hzamkiega .yzyyyswy yyyywyyyyyy brarakregu sldnąl ws. brskupZbrgnrexv Klemlkuwskr. P0 mz prerwszy arswyp Sredleckl zymzyu ywayy obecnaśzcrą ;skm wazne ara yyorywyego rornrka, poaraswyey ws. śwręw. w swourr wyshęp yyy Tedemu Lzzyywswy alarmu puwraru hrakkrago rmędxy yyyyymy paw/redzie) Dustar „wz Mamy yyy, bypodrrzymañprçkną !radyqçpnlskyv/ wyy rl yyy vy anega ›ym du, by ,yyywzzze dorobek, kullurç oraz folklor pod/askrcr zyzmy- rplzekazać .zy ugmmny bagaz wyryymwy rraswęp yyym pokorę/warr w którym udzrat wzręly zlspałymlkiawslytzne, rudawe y ubrzçdowc z pav/mu brals gu ny raz swn u ma wrencnw gmrny yzyyyzzzyyyy wzyz yyyyy przu stursk.), m kmvydt puknzarrn m, (u yyy, repszegu mamy n: pudlask „zym, w mmz zyyzz ry :ks zyql zyzzzyyyywyyz o przyznay ,yyy z s:. a udlukz. Wrenrz( zz Sryrzyn wu-y reprezemmval 2004.49999998419 1858.013825
-
- geval --test-name dev-0 --worst-features | head -n 10
+
+ geval --test-name dev-0 --worst-features | head -n 16
- in<1>:iest 1288 29.96086426 0.00000000000000000000
- in<1>:iak 1059 29.56892036 0.00000000000000000000
- in<1>:iego 1041 29.10324719 0.00000000000000000000
- in<1>:; 15855 18.44934849 0.00000000000000000000
- in<1>:iako 663 31.50026033 0.00000000000000000000
- in<1>:tey 577 31.77574310 0.00000000000000000000
- in<1>:d 9075 19.36616635 0.00000000000000000000
- in<1>:iey 400 32.41432702 0.00000000000000000000
- in<1>:y 6962 20.11327877 0.00000000000000000000
- in<1>:bydź 403 31.78838173 0.00000000000000000000
+ in<1>:iest 1288 29.96086426 0.00000000000000000000
+ in<1>:iak 1059 29.56892036 0.00000000000000000000
+ in<1>:iego 1041 29.10324719 0.00000000000000000000
+ in<1>:; 15855 18.44934849 0.00000000000000000000
+ in<1>:iako 663 31.50026033 0.00000000000000000000
+ in<1>:tey 577 31.77574310 0.00000000000000000000
+ in<1>:d 9075 19.36616635 0.00000000000000000000
+ in<1>:iey 400 32.41432702 0.00000000000000000000
+ in<1>:y 6962 20.11327877 0.00000000000000000000
+ in<1>:bydź 403 31.78838173 0.00000000000000000000
+ in<1>:ieszcze 449 30.73618019 0.00000000000000000000
+ in<1>:iuż 428 29.66315953 0.00000000000000000000
+ in<1>:Króla 483 28.34047199 0.00000000000000000000
+ in<1>:u 9882 19.06794134 0.00000000000000000000
+ in<1>:teraz 2477 21.48332437 0.00000000000000000000
+ in<1>:b 7915 19.23917820 0.00000000000000000000
+
+ geval --test-name dev-0 --line-by-line -s --tokenizer 13a --filter 'in<1>:Król' | head -n 2
-
+ 73.3384038951101 .ł Cześć nicłH.Zf doW:t. ... l-' Lwó'w, 3(). !J1"udniu. ./en. km'. uusir" potwiCl'dza wiadomość prze:" gazeti( powszechllł). .Hłgsburgsk podan iż Ausll'ya proponowała l'l'usom wniesienie nn srjm zwią7,kowy wspólneg'o wniosku 1 o osadzenie i w7,i\\)cie w zakład S7,leswiku I na prz)'pallck g'd)'hy Dauia lIie cofuęła lISiOIWY kOI:Stylucyjllt'j 7, dnia 18. listopad... PI'!IS)' PI'0po1'FH II' IJI'zy,jt.'ł)' i WSI111lny wnioSl'k obu mocarstw złożony h(:d7.ie ua posiedzeuiu sl'jm\\l zwi')7,kowego z dllia 28. g'l'ulll1ia. ./cn. /.'01', ZWl'aca uwag' Iła 7.lIat'zelłi( i wielkł). dOlliodosć wuiosku teg;o, za iuit'y,d)'w., Anstl'yi IJO\\\\zi':tcgo; dowolb.i ou, i1, !'Z..ul cesal'ski g'ol!)w jest popie- 1';lĆ spl'a\\\\ t( l\\iemiec 7, ał') e n Cl'gi ',ł, w gTallieach pl'ilwa i Ullli.II'ko- \\lauiil..Jak skol'o 1,aś \\\\'niosek pO\\l'Yzszy p\\'7.'Vjet'V hed7,ie, Auslt'y'a wvpełni ollo\\\\ii)zki s.woje jako lIIoc'al'sh\\ o l i'l:łI;jed il fak \\\\'7,g'I,, d;łII :t.wiazku jak i wzo'ledem mocal'slw z;ig'I'anil'7.uych, t> .. Krl)! Chl'ystyan IX. dUl'lski lila m'(;I 1,,1111(;11' udauia się 110 wojskil w Sz\\eswiku I co jednak jeszcze jes.1: w.,I p(hnlll. l\\ieklól'e IIy;ienlliki s..ldza, iż Król opuści Kopenhag\\ .I cd )'lIIe dla IIsuuil'cia sil' od nacisku slrounictwa demokl'atyezucg'o w sloliey. '" lakim zaś I'a:t.je hyć może 1 iż lud dUI\\ski obwoła Królem Ksil:cia (}sk.łI'" s7:wed7,kiego. Tak wiec eg7.ekueya zwi;.ł7,1uma spl'owalł1,]aby 0111'1\\1: n t'c7,Y histol'yczne znac7,enic dla p;dlslw skalHl)'nawskich lIIieć mo- .-aey. "', Najważniejsz (hiś wiadolllości',l jcst do niesienie dlll'lskieg'o dziennika Dagbladel l że podania do 1I),tUisyi c Jollkó\\\\' minisLel'sLwa Hall 7,oStółły przyjl;le. Jak wialloll\\o 7. te1l'g'l'ółIllU I chciał 1(1'1\\1 pornu,ye nlwon,euie noweg'o g'ilhinetu dla c"łq 'o IHtt'lstwa l",nu Alllh'eae i kilku inllym c7Joukolll 1lI',micy sejmu; ei jl'llnab,e lIil'chcieJi podją.ć się teg'ol ale Hil' wiadomo jeS7,('7,(', c7,Y uic próho\\Yal:o na nowo utworzyć ministerstw;, \\I' tYUI l!udłU I j pn,cto uie 1I\\0 na jeszcze do tf'j chwili 'H'7,Y pUS7,C ,"Ć slano\\\\'cz;ej 7.miany sysll'llw. To pe\\\\u.llyiko l 1.(' 1'7.,.111 dlu'lski nie stawi adnFh pl'7.cszkód tokowi egzekucJi, il najuowsze felegTam) ,apo\\\\'iadaji nawet jako rzeez pOllobn'1 110 1)I'a\\Hly, ze lhlllc7,Ycy' \\lsli)pi; z Hendsblll'g'a i Friellrichsztadu, i że przyczołek mostowy \\\\' Fl'iedl"ichsztadzie bę- -::- ; ... Ihie hUI'ZOIlY. Ty'm spo:!ollem wi 'c odpadłby jedl'n z po\\\\'olll;\\\\', kt.')r)' 1 łł1u aklowi wojskowemu Imlgł nadal eharilkll'l' iuiel'ilHcyoII.dll,\\'.. W,'(Hug depeszy 7, Bim.;J'stkQ b"o. dobrem ,c'O' z-- 4awJlych, a nie -'WB2YStko złem; co z _nowycher;? ów- pocho ppc.łzlelo?c nR .-dwa ho rnsy, tRh, illk_ dnh. 18. b., PI. .Z_IJI/j-WSZ"Y-'IIUDO.uka t w. lr.tóry-d,- alSlia te---- po o tc\\łó- rOZ?6Cl _łci dalllze p.0t'uszenia, I ,rOwsle. w. JJat,_;rua"h I .k- \\'V obl'onie ,rawJlie, 1V_"śdgani8' i I\\. w;.- oihn>otach_., słowem ,'we- ",,,zYlluich twi zIJn'8ch. woieno}'i:D ,_ chauło- Wff41V ,arfqznoŚć, i ,d.Cikłaic1nose't __ ktere. Gbe... (;:Ut: -, 1 -' '- h P _d fJ ł b i Kr.aie Rai.b'ary.yskie.. G8z€ dwor,sk.r 'l',uryóska. umłfśeiła pO' DlZS Y- wY.lils. .z listu" z T u n e t u, pod, dniem.' 6. .Su l'pma pHian go; ,Pomlmo zapobiegQ'w-, klorc,- c:zy- nolło- w' T'a b.a r-ce- dra zlIch-:,łwanill-statkó", l\\()rale- łowijcyc:h od, zarllzy' moy-c-Ner, rra- rzcgAch- t mC l,nlch-- rlll1ui ccy, "wdawa< .lo sili. pr./:Ccl cz wIeJe z, 1Hch w c' ClJ nIiG'Ć' Bone W- Bonie.' um;ccałó có;1ziI.Hia;c. "'i r o I'odkow miarw, po Co. ludzi;- a ia,.r:1) iui'" rnwJf'- .IiP!l.stos3ało..__ W- li () D S t a n t y-n i e" rear/h,> 11lQOIIJC lelzcze. bardAti€y,i IcJ.vłie _była na-- zi ia, ,aby si,:_ hm- choć' ieden. oz!g.--,;;#:;{ p rJi1 1 zycm Qzostllł.._ F',-DntYUQ Maurów WygÓl'IH,lJł I dO J !Ii !Utłj) o 5tQpnia' 2e 'się na .trupo",- za[lj) E pOw1ctt'zonJ: h .zu.cali i że" ich L!dni dl'Ugiri( ł a_. r ł\\- Vt'p!41cr h o eby otI'Zym "Ił z":łzczyt'. po<" ł grzt'Dall.ia ofJj'dllże. .Tallie--i -- w-A ł... i er z.e "ras" \\. t., SO_"' 'IO 'po letr:i:e-W--w1so1\\;.m stl)pniu" W eał':Jrt' al(ih; Hrai-u- Tiu-'etaJ1ski.m: nie p(,haz6łj li śhdf -rr:J)rO\\H }'. z.fr:zy. a na et s ę w-;ale. nic ze?;" -me Ub:;WI-alliJ, '3apLihiegł!.z1 ni sz"Et;fi'';IU p..zet: zUFc!ne zhilnenle tucch wioseJl- 2- -A l g i el'e- I :)" i {; an:(:!ó tJy h ,.w l\\t()rJ h. si pf-IJcyrzaoe' zDalIi ZJ""Uł,_I" t ,.P.tze jwi1ic''Zaś I\\UZ6Chod..\\vj zd-il.1 si{ zaraza al'a zJiwie rozsserzać; ,grlillllluie cna ill l w-' reł:"'czenie'; i bArdzo -lIi I .kano, abY'. s cał go.Ge8 r5twa Jilar-okańskiego nie Olv r' 1 n ła; ppmewaetam 'wstelkicb. środLów..(j tro-" 1< żnłlści p,,"uciw. ni-ey zanierl:hui ."-- 1 t 'I !J l' li 1- 11 j' -6 ' Orn-yłl£it:: W- przesdym 'numerze ga'ł''1t-l 1111'-' s ey, na mmcy .606, _w przed 'ialc .,gir!!. wicr 1;' 8mym g orYf.-r£/ł-tmaSi p_otar ala ':lic poprani':' pilta,rg_ 1817.74931505264 1877.6313445
+
+
+ Comparing results
+
+
+ geval --metric GLEU --precision 4 --tokenizer 13a \
+ -i wmt17-submitted-data/txt/sources/newstest2017-deen-src.de \
+ -o wmt17-submitted-data/txt/system-outputs/newstest2017/de-en/newstest2017.uedin-nmt.4723.de-en \
+ --most-worsening-features wmt17-submitted-data/txt/system-outputs/newstest2017/de-en/newstest2017.LIUM-NMT.4733.de-en \
+ -e wmt17-submitted-data/txt/references/newstest2017-deen-ref.en | head -n 10
+
+
+ exp:euros 31 -0.06468724 0.00001097343184385749
+ in<1>:Euro 31 -0.05335673 0.00002829695624789508
+ exp:be 296 0.02055637 0.00037328997500381740
+ exp:Federal 12 -0.05291327 0.00040500816936872160
+ exp:small 21 -0.02880722 0.00081606196875884380
+ exp:turnover 9 -0.09234316 0.00096449582346370200
+ out:$ 36 -0.01926724 0.00101954071759940870
+ out:interior 6 -0.07061411 0.00130090392961781970
+ exp:head 17 -0.03205283 0.00159684081554980080
+ exp:will 187 0.01737604 0.00168212689205692070
+
+
Not a toy!
@@ -227,7 +265,7 @@
- parameters, tags, etc.
-
+
Thanks!
And check it out at gonito.net: