out fix

dev-0/out.tsv

@@ -1,471 +1,471 @@
-pokoju
+nie:0.3 do:0.2 :0.5
-)
+jest:0.3 był:0.2 :0.5
-;
+do:0.3 o:0.2 :0.5
-lecz
+niej:0.3 niego:0.2 :0.5
-nie
+,:0.3 i:0.2 :0.5
-?
+jak:0.3 który:0.2 :0.5
-.
+na:0.3 on:0.2 :0.5
-po
+nią:0.3 co:0.2 :0.5
-do
+::0.3 ;:0.2 :0.5
-niego
+na:0.3 ale:0.2 :0.5
-i
+nim:0.3 nią:0.2 :0.5
-jeszcze
+i:0.3 ;:0.2 :0.5
-)
+do:0.3 po:0.2 :0.5
-.
+nas:0.3 mnie:0.2 :0.5
-panna
+::0.3 i:0.2 :0.5
-florentyna
+czy:0.3 na:0.2 :0.5
-do
+od:0.3 do:0.2 :0.5
-głowy
+na:0.3 .:0.2 :0.5
-do
+lewo:0.3 co:0.2 :0.5
-domu
+i:0.3 ::0.2 :0.5
-!
+nawet:0.3 o:0.2 :0.5
-a
+na:0.3 do:0.2 :0.5
-potem
+lewo:0.3 myśl:0.2 :0.5
-,
+i:0.3 .:0.2 :0.5
-który
+już:0.3 nie:0.2 :0.5
-na
+nawet:0.3 ,:0.2 :0.5
-jego
+,:0.3 ;:0.2 :0.5
-na
+nie:0.3 a:0.2 :0.5
-dzień
+mam:0.3 mógł:0.2 :0.5
-;
+o:0.3 do:0.2 :0.5
-do
+mnie:0.3 na:0.2 :0.5
-panny
+nie:0.3 ,:0.2 :0.5
-do
+,:0.3 do:0.2 :0.5
-panny
+nie:0.3 i:0.2 :0.5
-?
+mam:0.3 .:0.2 :0.5
-,
+.:0.3 i:0.2 :0.5
-ażeby
+o:0.3 a:0.2 :0.5
-nie
+co:0.3 czym:0.2 :0.5
-ma
+dzień:0.3 .:0.2 :0.5
-mu
+nie:0.3 ,:0.2 :0.5
-,
+ma:0.3 na:0.2 :0.5
-a
+;:0.3 ,:0.2 :0.5
-on
+a:0.3 ale:0.2 :0.5
-,
+co:0.3 nawet:0.2 :0.5
-ażeby
+?:0.3 do:0.2 :0.5
-nie
+o:0.3 od:0.2 :0.5
-jest
+na:0.3 .:0.2 :0.5
-nie
+nią:0.3 nim:0.2 :0.5
-.
+!:0.3 ::0.2 :0.5
-ale
+po:0.3 nie:0.2 :0.5
-ja
+co:0.3 prostu:0.2 :0.5
-.
+?:0.3 do:0.2 :0.5
-pan
+na:0.3 i:0.2 :0.5
-ignacy
+niego:0.3 lewo:0.2 :0.5
-?
+o:0.3 !:0.2 :0.5
-po
+pani:0.3 ,:0.2 :0.5
-chwili
+.:0.3 krzeszowska:0.2 :0.5
-go
+na:0.3 o:0.2 :0.5
-?
+niego:0.3 co:0.2 :0.5
-na
+i:0.3 do:0.2 :0.5
-jego
+po:0.3 już:0.2 :0.5
-dzień
+co:0.3 na:0.2 :0.5
-?
+.:0.3 dzień:0.2 :0.5
-)
+po:0.3 o:0.2 :0.5
-i
+na:0.3 chwili:0.2 :0.5
-nie
+lewo:0.3 nią:0.2 :0.5
-.
+.:0.3 i:0.2 :0.5
-ale
+panna:0.3 na:0.2 :0.5
-może
+izabela:0.3 nie:0.2 :0.5
-do
+i:0.3 ,:0.2 :0.5
-domu
+ja:0.3 na:0.2 :0.5
-,
+::0.3 do:0.2 :0.5
-nie
+,:0.3 i:0.2 :0.5
-jestem
+i:0.3 ale:0.2 :0.5
-i
+już:0.3 nie:0.2 :0.5
-co
+i:0.3 do:0.2 :0.5
-do
+jeszcze:0.3 o:0.2 :0.5
-niego
+;:0.3 i:0.2 :0.5
-)
+i:0.3 nawet:0.2 :0.5
-i
+na:0.3 o:0.2 :0.5
-nie
+lewo:0.3 myśl:0.2 :0.5
-będzie
+nie:0.3 ,:0.2 :0.5
-do
+mógł:0.3 na:0.2 :0.5
-głowy
+.:0.3 i:0.2 :0.5
-;
+o:0.3 na:0.2 :0.5
-i
+na:0.3 co:0.2 :0.5
-ja
+prawo:0.3 obiad:0.2 :0.5
-,
+;:0.3 do:0.2 :0.5
-na
+,:0.3 nie:0.2 :0.5
-drugi
+i:0.3 nie:0.2 :0.5
-i
+nawet:0.3 jak:0.2 :0.5
-do
+i:0.3 nie:0.2 :0.5
-mnie
+jak:0.3 nawet:0.2 :0.5
-,
+::0.3 i:0.2 :0.5
-który
+na:0.3 o:0.2 :0.5
-do
+niego:0.3 myśl:0.2 :0.5
-niej
+o:0.3 ::0.2 :0.5
-nie
+i:0.3 do:0.2 :0.5
-może
+nawet:0.3 jeszcze:0.2 :0.5
-być
+nie:0.3 o:0.2 :0.5
-do
+było:0.3 .:0.2 :0.5
-końca
+i:0.3 ::0.2 :0.5
-?
+o:0.3 po:0.2 :0.5
-)
+.:0.3 mnie:0.2 :0.5
-,
+nie:0.3 po:0.2 :0.5
-ażeby
+jestem:0.3 ,:0.2 :0.5
-nie
+do:0.3 ;:0.2 :0.5
-było
+czasu:0.3 pani:0.2 :0.5
-do
+.:0.3 ;:0.2 :0.5
-pani
+i:0.3 a:0.2 :0.5
-krzeszowskiej
+nie:0.3 o:0.2 :0.5
-)
+jest:0.3 ,:0.2 :0.5
-?
+.:0.3 ::0.2 :0.5
-a
+ale:0.3 a:0.2 :0.5
-może
+o:0.3 ,:0.2 :0.5
-nie
+nie:0.3 mnie:0.2 :0.5
-mam
+.:0.3 ma:0.2 :0.5
-na
+od:0.3 nie:0.2 :0.5
-myśl
+o:0.3 do:0.2 :0.5
-;
+do:0.3 nim:0.2 :0.5
-ale
+czasu:0.3 domu:0.2 :0.5
-ja
+.:0.3 ;:0.2 :0.5
-,
+gdy:0.3 na:0.2 :0.5
-który
+do:0.3 już:0.2 :0.5
-?
+niego:0.3 nas:0.2 :0.5
-nie
+.:0.3 i:0.2 :0.5
-mam
+gdy:0.3 panna:0.2 :0.5
-nie
+do:0.3 i:0.2 :0.5
-ma
+czasu:0.3 drzwi:0.2 :0.5
-do
+,:0.3 .:0.2 :0.5
-niego
+co:0.3 o:0.2 :0.5
-i
+ja:0.3 on:0.2 :0.5
-na
+do:0.3 o:0.2 :0.5
-niego
+panny:0.3 niej:0.2 :0.5
-;
+florentyny:0.3 i:0.2 :0.5
-nawet
+,:0.3 .:0.2 :0.5
-i
+jak:0.3 a:0.2 :0.5
-do
+!:0.3 i:0.2 :0.5
-mego
+co:0.3 nawet:0.2 :0.5
-do
+do:0.3 .:0.2 :0.5
-paryża
+niego:0.3 mnie:0.2 :0.5
-i
+.:0.3 ::0.2 :0.5
-nawet
+panna:0.3 i:0.2 :0.5
-i
+i:0.3 ewelina:0.2 :0.5
-nie
+nawet:0.3 ja:0.2 :0.5
-,
+nie:0.3 ::0.2 :0.5
-ale
+nie:0.3 ma:0.2 :0.5
-co
+było:0.3 mam:0.2 :0.5
-,
+,:0.3 .:0.2 :0.5
-co
+jak:0.3 a:0.2 :0.5
-do
+,:0.3 jest:0.2 :0.5
-domu
+jak:0.3 i:0.2 :0.5
-;
+,:0.3 jest:0.2 :0.5
-może
+a:0.3 który:0.2 :0.5
-być
+ja:0.3 jeżeli:0.2 :0.5
-do
+od:0.3 i:0.2 :0.5
-paryża
+.:0.3 ,:0.2 :0.5
-:
+na:0.3 o:0.2 :0.5
-po
+lewo:0.3 mnie:0.2 :0.5
-nie
+nie:0.3 ?:0.2 :0.5
-?
+.:0.3 było:0.2 :0.5
-i
+o:0.3 pan:0.2 :0.5
-ja
+pani:0.3 co:0.2 :0.5
-.
+na:0.3 ,:0.2 :0.5
-panna
+,:0.3 myśl:0.2 :0.5
-.
+a:0.3 i:0.2 :0.5
-a
+nawet:0.3 o:0.2 :0.5
-może
+nie:0.3 na:0.2 :0.5
-?
+mam:0.3 na:0.2 :0.5
-)
+na:0.3 ::0.2 :0.5
-na
+mnie:0.3 lewo:0.2 :0.5
-myśl
+::0.3 .:0.2 :0.5
-nie
+nie:0.3 i:0.2 :0.5
-było
+mam:0.3 było:0.2 :0.5
-o
+,:0.3 od:0.2 :0.5
-?
+o:0.3 do:0.2 :0.5
-czy
+pani:0.3 co:0.2 :0.5
-na
+,:0.3 i:0.2 :0.5
-myśl
+jak:0.3 a:0.2 :0.5
-:
+.:0.3 ja:0.2 :0.5
-a
+a:0.3 na:0.2 :0.5
-może
+do:0.3 co:0.2 :0.5
-?
+niej:0.3 głowy:0.2 :0.5
-i
+.:0.3 ;:0.2 :0.5
-o
+panna:0.3 po:0.2 :0.5
-co
+nie:0.3 i:0.2 :0.5
-,
+,:0.3 ma:0.2 :0.5
-a
+o:0.3 na:0.2 :0.5
-pan
+pani:0.3 nie:0.2 :0.5
-nie
+;:0.3 krzeszowska:0.2 :0.5
-będzie
+nie:0.3 ,:0.2 :0.5
-mnie
+było:0.3 będzie:0.2 :0.5
-o
+;:0.3 ,:0.2 :0.5
-nim
+ale:0.3 o:0.2 :0.5
-;
+co:0.3 o:0.2 :0.5
-ale
+,:0.3 dzień:0.2 :0.5
-po
+do:0.3 i:0.2 :0.5
-,
+i:0.3 niej:0.2 :0.5
-który
+do:0.3 na:0.2 :0.5
-?
+głowy:0.3 panny:0.2 :0.5
-do
+!:0.3 ;:0.2 :0.5
-paryża
+jak:0.3 po:0.2 :0.5
-?
+.:0.3 nie:0.2 :0.5
-a
+pan:0.3 nawet:0.2 :0.5
-potem
+na:0.3 od:0.2 :0.5
-!
+nim:0.3 co:0.2 :0.5
-po
+nie:0.3 na:0.2 :0.5
-.
+było:0.3 ,:0.2 :0.5
-co
+i:0.3 ,:0.2 :0.5
-nie
+po:0.3 o:0.2 :0.5
-jestem
+na:0.3 obiedzie:0.2 :0.5
-.
+jej:0.3 nią:0.2 :0.5
-i
+;:0.3 nie:0.2 :0.5
-jeszcze
+a:0.3 ,:0.2 :0.5
-do
+gdy:0.3 i:0.2 :0.5
-mnie
+nie:0.3 o:0.2 :0.5
-?
+ma:0.3 na:0.2 :0.5
-i
+na:0.3 ,:0.2 :0.5
-na
+mnie:0.3 nią:0.2 :0.5
-myśl
+::0.3 ?:0.2 :0.5
-do
+na:0.3 co:0.2 :0.5
-końca
+myśl:0.3 niego:0.2 :0.5
-?
+,:0.3 ::0.2 :0.5
-i
+co:0.3 nie:0.2 :0.5
-na
+nie:0.3 ,:0.2 :0.5
-myśl
+mam:0.3 ,:0.2 :0.5
-:
+od:0.3 na:0.2 :0.5
-po
+powietrza:0.3 na:0.2 :0.5
-,
+do:0.3 nie:0.2 :0.5
-jak
+niego:0.3 pani:0.2 :0.5
-nie
+;:0.3 nie:0.2 :0.5
-jestem
+.:0.3 ale:0.2 :0.5
-nie
+na:0.3 nawet:0.2 :0.5
-można
+niego:0.3 nią:0.2 :0.5
-i
+o:0.3 ;:0.2 :0.5
-o
+mnie:0.3 ,:0.2 :0.5
-.
+o:0.3 i:0.2 :0.5
-panna
+.:0.3 mnie:0.2 :0.5
-na
+ale:0.3 nie:0.2 :0.5
-co
+i:0.3 nawet:0.2 :0.5
-,
+do:0.3 o:0.2 :0.5
-nie
+pani:0.3 niego:0.2 :0.5
-ma
+;:0.3 i:0.2 :0.5
-być
+o:0.3 ,:0.2 :0.5
-)
+na:0.3 czym:0.2 :0.5
-?
+prawo:0.3 niego:0.2 :0.5
-nie
+;:0.3 ::0.2 :0.5
-może
+a:0.3 i:0.2 :0.5
-do
+nie:0.3 co:0.2 :0.5
-czasu
+do:0.3 ma:0.2 :0.5
-:
+głowy:0.3 pani:0.2 :0.5
-nie
+.:0.3 i:0.2 :0.5
-jest
+gdy:0.3 i:0.2 :0.5
-bardzo
+do:0.3 .:0.2 :0.5
-,
+czasu:0.3 paryża:0.2 :0.5
-ani
+na:0.3 ;:0.2 :0.5
-,
+co:0.3 mnie:0.2 :0.5
-a
+do:0.3 ,:0.2 :0.5
-on
+niego:0.3 czasu:0.2 :0.5
-na
+.:0.3 na:0.2 :0.5
-kilka
+o:0.3 panna:0.2 :0.5
-nie
+ile:0.3 do:0.2 :0.5
-ma
+nie:0.3 ;:0.2 :0.5
-być
+jest:0.3 mam:0.2 :0.5
-i
+na:0.3 .:0.2 :0.5
-o
+jego:0.3 myśl:0.2 :0.5
-niej
+;:0.3 lat:0.2 :0.5
-;
+i:0.3 a:0.2 :0.5
-do
+ja:0.3 na:0.2 :0.5
-panny
+o:0.3 ;:0.2 :0.5
-;
+do:0.3 ,:0.2 :0.5
-na
+czasu:0.3 pani:0.2 :0.5
-mnie
+o:0.3 do:0.2 :0.5
-nie
+,:0.3 do:0.2 :0.5
-mam
+ale:0.3 nie:0.2 :0.5
-na
+o:0.3 i:0.2 :0.5
-mnie
+czym:0.3 nim:0.2 :0.5
-,
+::0.3 ,:0.2 :0.5
-i
+,:0.3 o:0.2 :0.5
-nie
+i:0.3 nie:0.2 :0.5
-na
+co:0.3 jeszcze:0.2 :0.5
-nią
+nie:0.3 ?:0.2 :0.5
-.
+mam:0.3 będzie:0.2 :0.5
-panna
+;:0.3 do:0.2 :0.5
-na
+a:0.3 na:0.2 :0.5
-kilka
+,:0.3 nie:0.2 :0.5
-dni
+który:0.3 czy:0.2 :0.5
-na
+do:0.3 od:0.2 :0.5
-myśl
+mnie:0.3 czasu:0.2 :0.5
-i
+i:0.3 ::0.2 :0.5
-o
+o:0.3 na:0.2 :0.5
-:
+mnie:0.3 pani:0.2 :0.5
-nie
+do:0.3 o:0.2 :0.5
-o
+mnie:0.3 nas:0.2 :0.5
-do
+i:0.3 nie:0.2 :0.5
-głowy
+jeszcze:0.3 nawet:0.2 :0.5
-:
+do:0.3 o:0.2 :0.5
-a
+czasu:0.3 drzwi:0.2 :0.5
-może
+.:0.3 na:0.2 :0.5
-na
+i:0.3 nie:0.2 :0.5
-nią
+dopiero:0.3 nie:0.2 :0.5
-:
+.:0.3 po:0.2 :0.5
-na
+nie:0.3 pan:0.2 :0.5
-mnie
+,:0.3 ma:0.2 :0.5
-.
+o:0.3 który:0.2 :0.5
-po
+,:0.3 mnie:0.2 :0.5
-chwili
+a:0.3 o:0.2 :0.5
-mu
+nawet:0.3 jeżeli:0.2 :0.5
-,
+co:0.3 do:0.2 :0.5
-jak
+na:0.3 .:0.2 :0.5
-on
+mnie:0.3 nim:0.2 :0.5
-nie
+::0.3 .:0.2 :0.5
-może
+nie:0.3 ,:0.2 :0.5
-być
+może:0.3 ,:0.2 :0.5
-)
+o:0.3 ,:0.2 :0.5
-do
+czym:0.3 pani:0.2 :0.5
-niego
+;:0.3 na:0.2 :0.5
-i
+i:0.3 nie:0.2 :0.5
-o
+jak:0.3 nie:0.2 :0.5
-jego
+na:0.3 i:0.2 :0.5
-,
+jego:0.3 co:0.2 :0.5
-ale
+,:0.3 na:0.2 :0.5
-może
+ale:0.3 jak:0.2 :0.5
-?
+nawet:0.3 na:0.2 :0.5
-nie
+.:0.3 ,:0.2 :0.5
-ma
+panna:0.3 i:0.2 :0.5
-?
+nie:0.3 i:0.2 :0.5
-ale
+,:0.3 jest:0.2 :0.5
-ja
+nawet:0.3 który:0.2 :0.5
-,
+o:0.3 nawet:0.2 :0.5
-co
+i:0.3 do:0.2 :0.5
-i
+,:0.3 jeszcze:0.2 :0.5
-co
+który:0.3 na:0.2 :0.5
-nie
+,:0.3 do:0.2 :0.5
-będzie
+o:0.3 a:0.2 :0.5
-,
+pani:0.3 i:0.2 :0.5
-co
+baronowa:0.3 na:0.2 :0.5
-on
+na:0.3 o:0.2 :0.5
-,
+mnie:0.3 nią:0.2 :0.5
-bo
+?:0.3 na:0.2 :0.5
-jest
+):0.3 i:0.2 :0.5
-nie
+,:0.3 nie:0.2 :0.5
-,
+i:0.3 ale:0.2 :0.5
-co
+ja:0.3 co:0.2 :0.5
-jest
+.:0.3 o:0.2 :0.5
-o
+pan:0.3 i:0.2 :0.5
-,
+jak:0.3 i:0.2 :0.5
-i
+do:0.3 mnie:0.2 :0.5
-nawet
+czasu:0.3 domu:0.2 :0.5
-?
+.:0.3 nie:0.2 :0.5
-nie
+panna:0.3 po:0.2 :0.5
-,
+nie:0.3 .:0.2 :0.5
-i
+jest:0.3 mam:0.2 :0.5
-co
+od:0.3 ::0.2 :0.5
-,
+na:0.3 ,:0.2 :0.5
-nie
+mnie:0.3 jego:0.2 :0.5
-mógł
+o:0.3 ::0.2 :0.5
-o
+o:0.3 nim:0.2 :0.5
-nich
+i:0.3 .:0.2 :0.5
-nie
+nie:0.3 na:0.2 :0.5
-,
+do:0.3 mógł:0.2 :0.5
-nie
+.:0.3 panny:0.2 :0.5
-ma
+na:0.3 nawet:0.2 :0.5
-i
+nią:0.3 prawo:0.2 :0.5
-nie
+do:0.3 i:0.2 :0.5
-mam
+mnie:0.3 panny:0.2 :0.5
-,
+::0.3 ?:0.2 :0.5
-ale
+do:0.3 nie:0.2 :0.5
-o
+niego:0.3 pani:0.2 :0.5
-nim
+o:0.3 na:0.2 :0.5
-nie
+,:0.3 nim:0.2 :0.5
-będzie
+ale:0.3 na:0.2 :0.5
-.
+do:0.3 i:0.2 :0.5
-a
+niej:0.3 głowy:0.2 :0.5
-co
+do:0.3 i:0.2 :0.5
-nie
+mnie:0.3 domu:0.2 :0.5
-będzie
+nie:0.3 ,:0.2 :0.5
-do
+na:0.3 jest:0.2 :0.5
-niej
+nią:0.3 niego:0.2 :0.5
-.
+,:0.3 na:0.2 :0.5
-ale
+co:0.3 jak:0.2 :0.5
-nie
+nie:0.3 mnie:0.2 :0.5
-może
+będzie:0.3 na:0.2 :0.5
-do
+;:0.3 i:0.2 :0.5
-nas
+ale:0.3 ,:0.2 :0.5
-:
+co:0.3 nie:0.2 :0.5
-po
+?:0.3 do:0.2 :0.5
-angielsku
+,:0.3 ):0.2 :0.5
-?
+nie:0.3 o:0.2 :0.5
-po
+na:0.3 może:0.2 :0.5
-.
+nim:0.3 prawo:0.2 :0.5
-po
+nie:0.3 do:0.2 :0.5
-nie
+,:0.3 i:0.2 :0.5
-mam
+nie:0.3 i:0.2 :0.5
-.
+jest:0.3 mam:0.2 :0.5
-po
+.:0.3 ;:0.2 :0.5
-nie
+a:0.3 pan:0.2 :0.5
-mam
+na:0.3 gdy:0.2 :0.5
-nic
+lewo:0.3 nim:0.2 :0.5
-:
+,:0.3 !:0.2 :0.5
-co
+o:0.3 i:0.2 :0.5
-.
+do:0.3 mnie:0.2 :0.5
-po
+niej:0.3 nas:0.2 :0.5
-co
+i:0.3 ,:0.2 :0.5
-.
+o:0.3 jak:0.2 :0.5
-na
+pani:0.3 nie:0.2 :0.5
-co
+krzeszowska:0.3 na:0.2 :0.5
-nie
+na:0.3 o:0.2 :0.5
-?
+nią:0.3 jego:0.2 :0.5
-)
+i:0.3 na:0.2 :0.5
-nie
+do:0.3 na:0.2 :0.5
-,
+nas:0.3 domu:0.2 :0.5
-który
+;:0.3 ?:0.2 :0.5
-?
+.:0.3 i:0.2 :0.5
-do
+panna:0.3 a:0.2 :0.5
-domu
+i:0.3 .:0.2 :0.5
-na
+nie:0.3 po:0.2 :0.5
-co
+na:0.3 do:0.2 :0.5
-dzień
+prawo:0.3 nim:0.2 :0.5
-nie
+;:0.3 o:0.2 :0.5
-było
+nawet:0.3 lecz:0.2 :0.5
-o
+od:0.3 ,:0.2 :0.5
-co
+.:0.3 niego:0.2 :0.5
-dzień
+a:0.3 nie:0.2 :0.5
-,
+nawet:0.3 gdy:0.2 :0.5
-który
+o:0.3 .:0.2 :0.5
-na
+nim:0.3 pani:0.2 :0.5
-nich
+o:0.3 na:0.2 :0.5
-.
+.:0.3 ,:0.2 :0.5
-do
+i:0.3 na:0.2 :0.5
-niego
+co:0.3 jeszcze:0.2 :0.5
-)
+dzień:0.3 ?:0.2 :0.5
-?
+nie:0.3 na:0.2 :0.5
-do
+.:0.3 do:0.2 :0.5
-domu
+a:0.3 i:0.2 :0.5
-na
+,:0.3 gdy:0.2 :0.5
-kilka
+czy:0.3 do:0.2 :0.5
-lat
+i:0.3 nawet:0.2 :0.5
-na
+na:0.3 ja:0.2 :0.5
-niego
+nim:0.3 co:0.2 :0.5
-)
+,:0.3 na:0.2 :0.5
-;
+a:0.3 na:0.2 :0.5
-nie
+nawet:0.3 na:0.2 :0.5
-może
+.:0.3 co:0.2 :0.5
-być
+a:0.3 na:0.2 :0.5
-od
+do:0.3 ja:0.2 :0.5
-innych
+domu:0.3 niej:0.2 :0.5
-.
+,:0.3 ;:0.2 :0.5
-pan
+o:0.3 jak:0.2 :0.5
-jest
+i:0.3 czym:0.2 :0.5
-.
+co:0.3 jak:0.2 :0.5
-panna
+,:0.3 dzień:0.2 :0.5
-na
+który:0.3 jak:0.2 :0.5
-chwilę
+,:0.3 i:0.2 :0.5
-na
+a:0.3 o:0.2 :0.5
-co
+na:0.3 jeżeli:0.2 :0.5
-na
+co:0.3 lewo:0.2 :0.5
-niego
+.:0.3 do:0.2 :0.5
-;
+i:0.3 a:0.2 :0.5
-na
+o:0.3 już:0.2 :0.5
-co
+na:0.3 nim:0.2 :0.5
-,
+jego:0.3 mnie:0.2 :0.5
-ażeby
+;:0.3 ::0.2 :0.5
-i
+ale:0.3 a:0.2 :0.5
-na
+co:0.3 nie:0.2 :0.5
-chwilę
+dzień:0.3 .:0.2 :0.5
-;
+::0.3 o:0.2 :0.5
-ale
+pan:0.3 i:0.2 :0.5
-może
+o:0.3 na:0.2 :0.5
-być
+.:0.3 i:0.2 :0.5
-?
+nie:0.3 po:0.2 :0.5

guessword.py

@@ -1,12 +1,11 @@
-
+import os
 import numpy as np
 import torch
-from tqdm.notebook import tqdm
 from sklearn.model_selection import train_test_split
 import nltk
 from nltk.tokenize import word_tokenize 
-
 nltk.download('punkt')
+dir_path = os.path.dirname(os.path.realpath(__file__))
 
 NGRAMS = 5
 BATCH_SIZE = 128
@@ -14,21 +13,21 @@ EPOCHS = 15
 
 device = torch.device("cuda" if torch.cuda.is_available() else "cpu")
 
-with open("train/train.tsv", "r", encoding="utf8") as lalka_path:
+with open(dir_path + "\\train\\train.tsv", "r", encoding="utf8") as lalka_path:
     lines = lalka_path.readlines()
 
 train, test = train_test_split(lines, test_size = 0.2)
 
-with open("train/train_train.tsv", "w", encoding="utf8") as out_train_file:
+with open(dir_path + "\\train\\train_train.tsv", "w", encoding="utf8") as out_train_file:
     for i in train:
         out_train_file.write(i)
 
-with open("train/train_test.tsv", "w", encoding="utf8") as out_test_file:
+with open(dir_path + "\\train\\train_test.tsv", "w", encoding="utf8") as out_test_file:
     for i in test:
         out_test_file.write(i)
 
-lalka_path_train= 'train/train_train.tsv'
+lalka_path_train= dir_path + '\\train\\train_train.tsv'
-lalka_path_valid= 'train/train_test.tsv'
+lalka_path_valid= dir_path + '\\train\\train_test.tsv'
 
 corpora_train = open(lalka_path_train, encoding="utf8").read()
 corpora_train_tokenized = list(word_tokenize(corpora_train))
@@ -192,24 +191,27 @@ for i in range(30):
 
 print('starting outs...')
 
-with open("dev-0/in.tsv", "r", encoding="UTF-8") as dev_path:
+with open(dir_path + "\\dev-0\\in.tsv", "r", encoding="UTF-8") as dev_path:
     nr_of_dev_lines = len(dev_path.readlines())
 
-with open("test-A/in.tsv", "r", encoding="UTF-8") as test_a_path:
+with open(dir_path + "\\test-A\\in.tsv", "r", encoding="UTF-8") as test_a_path:
     nr_of_test_a_lines = len(test_a_path.readlines())
 
-with open("dev-0/out.tsv", "w", encoding="UTF-8") as out_dev_file:
+with open(dir_path + "\\dev-0\\out.tsv", "w", encoding="UTF-8") as out_dev_file:
     for i in range(nr_of_dev_lines):
         preds= lm(ids)
         candidates = torch.topk(torch.softmax(preds,1),candidates_number)[1][0].cpu().numpy()
         candidate = 15001
         while candidate > 15000:
             candidate = candidates[np.random.randint(candidates_number)]
+        candidate2 = 15001
+        while candidate2 > 15000 or candidate2 == candidate:
+            candidate2 = candidates[np.random.randint(candidates_number)]
         print(vocab_itos[candidate])
         ids =  torch.cat((ids, torch.tensor([[candidate]], device = device)), 1)
-        out_dev_file.write(vocab_itos[candidate] + '\n')
+        out_dev_file.write(vocab_itos[candidate] + ':0.3 ' + vocab_itos[candidate2] + ':0.2 :0.5' '\n')
 
-with open("test-A/out.tsv", "w", encoding="UTF-8") as out_test_file:
+with open(dir_path + "\\test-A\\out.tsv", "w", encoding="UTF-8") as out_test_file:
     for i in range(nr_of_dev_lines):
         preds= lm(ids)
         candidates = torch.topk(torch.softmax(preds,1),candidates_number)[1][0].cpu().numpy()

test-A/out.tsv

@@ -1,471 +1,471 @@
-)
-.
-do
-nas
-po
-do
-domu
-.
-panna
-felicja
-?
-na
-nią
-do
-mnie
-,
-i
-co
-i
-jeszcze
-i
-do
-głowy
-do
-niego
-?
-ale
-jeżeli
-,
-ale
-nie
-mam
-mnie
-,
-i
-już
-i
-ja
-do
-niego
-na
-głowie
-.
-panna
-felicja
-i
-ja
-.
-pan
-ma
-do
-domu
-:
-ale
-,
-nie
 jestem
-nie
-mam
-i
-nie
 ,
 na
-którym
-na
-jego
-pokoju
-)
-i
-bez
-i
-do
-paryża
-na
-myśl
-,
-gdzie
-.
-panna
-nie
-na
-lewo
-i
-na
-mnie
-nie
-,
-który
-i
-nawet
-nie
-będzie
-;
-nie
-było
-mu
-do
-mieszkania
-do
-paryża
-i
-o
-czym
-do
-niego
-na
-myśl
-.
-panna
-na
-kilka
-i
-o
-mnie
-na
-co
-i
-o
-co
-na
-jego
-?
-i
-do
-końca
-.
-i
-nie
-mam
-nie
-mam
-nie
-o
-,
-który
-do
-końca
-do
-czasu
-:
-i
-jeszcze
-,
-na
-niego
-,
-nie
-można
-:
-i
-jeszcze
-i
-na
-chwilę
-i
-na
-lewo
-:
-na
-niego
-?
-do
-mnie
-do
-mnie
 i
 nie
 mógł
-o
-nich
-i
-do
-panny
-,
-nie
-mógł
-o
-nim
-i
-do
-końca
 ;
-i
+lecz
-ja
+od
-go
-pan
-:
-czy
-,
-który
-?
-)
-nie
-jestem
-go
-i
-na
-myśl
-;
-nawet
-nie
-można
-na
-mnie
-nie
-będzie
-,
-co
-na
-kilka
-do
-niego
-i
-o
-co
-najmniej
-nie
-może
-;
-i
-o
-czym
-:
-czy
-co
-nie
-,
-a
-ja
-go
-i
-jeszcze
-:
-)
-:
-ale
-o
-,
-nie
-można
-na
-mnie
-i
 do
 pani
-baronowa
+krzeszowskiej
-;
-na
-co
-na
-kilka
-.
-po
-chwili
-do
-niego
-:
-po
-,
-nie
-ma
-,
-ale
-po
-do
-pokoju
-do
-mnie
-;
-nie
-na
-lewo
-:
-na
-głowie
-,
-a
-po
-południu
-i
-nie
-będę
-nie
-może
-o
-dziesiątej
-.
-na
-jego
-i
-jeszcze
-do
-czasu
-;
-a
-gdy
-nie
-będzie
-?
-o
-jej
-nie
-było
-?
-ale
-na
-kilka
-na
-kilka
-.
-po
-nie
-może
-,
-nie
-jest
-i
-o
-co
-na
-mnie
-:
-czy
-nie
-może
-nie
-będzie
-o
-nim
-;
-nawet
-nie
-jest
-o
-co
-,
-bo
-,
-a
-nawet
-na
-jego
 ,
 ażeby
-,
-na
-których
 i
-co
-.
-po
-nie
-będzie
-mnie
-:
-ale
-o
-jej
-nie
-jest
-i
-o
-:
-co
-.
-)
-do
-paryża
-.
-ale
-czy
-co
-na
-nich
-;
-a
-nie
-będzie
-.
-a
-co
-nie
-mam
-nie
-mam
-nie
-.
-a
-co
-.
-panna
 do
 nas
 i
-nie
-będzie
-i
-co
-nie
-było
-.
-nie
 na
-nią
+lewo
 i
-bez
-panny
-izabeli
-i
-na
-nią
-nie
-,
-ale
-jeszcze
-nie
-można
-do
-głowy
-?
 o
-,
-a
-nawet
-nie
-będzie
-do
 mnie
-do
+,
-nas
+o
-do
-końca
 nie
-.
+,
-panna
 na
-niego
+lewo
-;
-i
-o
-jej
-o
-dziesiątej
 .
+a
 nie
 ma
-i
+od
-ja
+,
+a
 na
-kilka
+nim
-minut
+do
-?
+niego
-ale
+i
-czy
+do
-ja
+głowy
+:
+o
+do
+czasu
+:
+,
+co
+nie
 .
-ale
+o
-ja
+do
+niego
+,
+na
+niego
+:
+a
+,
+nie
+.
+a
+do
+głowy
 do
 niej
 do
-końca
+nas
-i
-po
-do
-panny
 ,
+ale
+ja
+.
 nie
-można
+do
+domu
+nie
+do
+domu
+i
+jak
+,
+który
+o
+,
+który
+jest
+na
+lewo
+,
 na
 niego
+:
+co
+o
+i
+nie
+mam
+do
+mnie
+nie
+.
+nie
+,
+ani
+do
+niego
+na
+nim
+i
+o
+pani
+na
+nim
+nie
+,
+a
+co
+na
+myśl
+i
+o
+nie
+o
+na
+prawo
+.
+ale
+o
+nie
+mam
+o
+o
+.
+nie
+.
+nawet
+.
+a
+,
+nie
+było
+?
+)
+nie
+będzie
+;
+o
+na
+niego
+;
+a
+nie
+może
+i
+co
+i
+nawet
+o
+na
+nią
+?
+na
+prawo
+,
+ale
+na
+jej
+;
+nie
+ma
+i
+bez
+do
+pani
+,
+ale
+na
+lewo
+nie
+ma
+od
+,
+o
+mnie
+o
+nim
+albo
+.
+nie
+ma
+od
+nas
+nie
+było
+;
+,
+czy
+już
+do
+niego
+:
+co
+:
+i
+nie
+.
+ale
+,
+a
+do
+panny
+do
+mnie
+na
+mnie
+na
+jego
+,
+a
+i
+nawet
+.
+ale
+co
+ja
+?
+od
+i
+o
+i
+do
+niego
+;
+nawet
+nie
+do
+.
+ale
+do
+mnie
+nie
+.
+pan
+od
+nas
+,
+a
+,
+jeżeli
+pani
+baronowa
+o
+nie
+i
+.
+ale
+ja
+do
+mnie
+i
+ja
+.
+panna
+i
+jeszcze
+o
+.
+a
+,
+czy
+i
+do
+mnie
+,
+co
+mnie
+.
+ale
+ja
+już
+nawet
+i
+do
+niego
+i
+.
+nawet
+na
+niego
+do
+nas
+;
+pani
+,
+nie
+będzie
+na
+obiad
+i
+o
+do
+niego
+na
+obiad
+o
+i
+do
+niego
+nie
+,
+jak
+mnie
+.
+pan
+jak
+do
+domu
+.
+gdy
+na
+nim
+:
+i
+jak
+od
+,
+na
+mnie
+,
+na
+prawo
+!
+jak
+ja
+i
+do
+czasu
+na
+nią
+!
+na
+niego
+,
+ale
+i
+o
+,
+i
+jak
+od
+czasu
+nie
+ma
+do
+paryża
+o
+na
+obiad
+?
+nie
+było
+.
+a
+co
+pan
+ignacy
+nie
+mam
+,
+co
+na
+lewo
+,
+a
+,
+nie
+może
+.
+co
+ja
+i
+jeszcze
+do
+pani
+krzeszowska
+nie
+nie
+ma
+go
+na
+myśl
+:
+a
+o
+nim
+na
+obiad
+:
+a
+co
+i
+ja
+.
+nawet
+co
+,
+i
+jeszcze
+do
+czasu
+;
+,
+co
+nie
+jest
+i
+o
+,
+ażeby
+nie
+.
+a
+nie
+było
+i
+do
+głowy
+:
+czy
+i
+ja
+po
+angielsku
+?
+)
+o
+mnie
+nie
+będzie
+nie
+było
+i
+nawet
+nie
+na
+jej
+o
+mnie
+na
+mnie
+i
+po
+na
+co
+.
+i
+jak
+od
+.
+ale
+na
+prawo
+do
+mnie
+,
+na
+co
+najmniej
+na