s434624/challenging-america-word-gap-prediction
1
0
Fork 0
Code Issues Pull Requests Projects Releases Wiki Activity

Final out fix

Browse Source
This commit is contained in:
Jakub Kaczmarek 2023-06-09 02:33:57 +02:00
parent 5bc8f3f6f7
commit 40c36dce44
1 changed files with 59 additions and 59 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

118
test-A/out.tsv
View File

@ -168,7 +168,7 @@ commonly:1
ia:1 ia:1
this:1 this:1
':1 ':1
<EFBFBD>:1 a:1
ia:1 ia:1
feet:1 feet:1
to:1 to:1
@ -249,7 +249,7 @@ D:1
years:1 years:1
liver:1 liver:1
and:1 and:1
<EFBFBD>:1 a:1
no:1 no:1
day:1 day:1
ern:1 ern:1
@ -646,14 +646,14 @@ us:1
the:1 the:1
at:1 at:1
North:1 North:1
<EFBFBD>:1 a:1
of:1 of:1
ily:1 ily:1
ia:1 ia:1
And:1 And:1
and:1 and:1
up:1 up:1
<EFBFBD>:1 a:1
bishop:1 bishop:1
ern:1 ern:1
ia:1 ia:1
@ -716,7 +716,7 @@ delight:1
vessel:1 vessel:1
work.:1 work.:1
ery:1 ery:1
<EFBFBD>:1 a:1
all:1 all:1
whose:1 whose:1
to:1 to:1
@ -824,7 +824,7 @@ war:1
with:1 with:1
may:1 may:1
train:1 train:1
<EFBFBD>:1 a:1
t:1 t:1
entered:1 entered:1
if:1 if:1
@ -927,7 +927,7 @@ ment:1
of:1 of:1
every:1 every:1
any:1 any:1
<EFBFBD>:1 a:1
If:1 If:1
is:1 is:1
we:1 we:1
@ -983,7 +983,7 @@ have:1
vern:1 vern:1
dinner:1 dinner:1
Keith:1 Keith:1
<EFBFBD>:1 a:1
fire:1 fire:1
do:1 do:1
our:1 our:1
@ -1076,7 +1076,7 @@ of:1
Spe:1 Spe:1
lly:1 lly:1
by:1 by:1
<EFBFBD>:1 a:1
o:1 o:1
ize:1 ize:1
consequence:1 consequence:1
@ -1110,7 +1110,7 @@ part:1
t:1 t:1
ili:1 ili:1
the:1 the:1
<EFBFBD>:1 a:1
years:1 years:1
pace:1 pace:1
O:1 O:1
@ -1167,7 +1167,7 @@ a:1
ers:1 ers:1
the:1 the:1
Air:1 Air:1
<EFBFBD>:1 a:1
line:1 line:1
that:1 that:1
ious:1 ious:1
@ -1202,7 +1202,7 @@ became:1
further:1 further:1
early:1 early:1
than:1 than:1
<EFBFBD>:1 a:1
a:1 a:1
the:1 the:1
of:1 of:1
@ -1285,7 +1285,7 @@ in:1
a:1 a:1
iced:1 iced:1
agreement:1 agreement:1
<EFBFBD>:1 a:1
ia:1 ia:1
line.:1 line.:1
other:1 other:1
@ -1345,7 +1345,7 @@ cred:1
well:1 well:1
a:1 a:1
ia:1 ia:1
<EFBFBD>:1 a:1
English:1 English:1
different:1 different:1
acquainted:1 acquainted:1
@ -1960,7 +1960,7 @@ their:1
nsn:1 nsn:1
wit:1 wit:1
79:1 79:1
<EFBFBD>:1 a:1
be:1 be:1
It:1 It:1
Chesapeake:1 Chesapeake:1
@ -2370,7 +2370,7 @@ ime:1
h:1 h:1
for:1 for:1
ily:1 ily:1
<EFBFBD>:1 a:1
velop:1 velop:1
m:1 m:1
ents:1 ents:1
@ -2461,7 +2461,7 @@ at:1
in:1 in:1
the:1 the:1
w:1 w:1
<EFBFBD>:1 a:1
the:1 the:1
be:1 be:1
rela:1 rela:1
@ -2496,7 +2496,7 @@ and:1
when:1 when:1
invitation:1 invitation:1
appoint:1 appoint:1
<EFBFBD>:1 a:1
otficial:1 otficial:1
Ber:1 Ber:1
impossible:1 impossible:1
@ -2726,7 +2726,7 @@ at:1
clothes:1 clothes:1
ia:1 ia:1
any:1 any:1
<EFBFBD>:1 a:1
of:1 of:1
party:1 party:1
But:1 But:1
@ -2793,7 +2793,7 @@ and:1
eveu­:1 eveu­:1
urn:1 urn:1
ile:1 ile:1
public-:1 public:1
them:1 them:1
per:1 per:1
ia:1 ia:1
@ -2824,7 +2824,7 @@ ili:1
an:1 an:1
gives:1 gives:1
of:1 of:1
<EFBFBD>:1 a:1
and:1 and:1
love:1 love:1
was:1 was:1
@ -2861,7 +2861,7 @@ t:1
the:1 the:1
June:1 June:1
world:1 world:1
<EFBFBD>:1 a:1
met:1 met:1
can:1 can:1
ian:1 ian:1
@ -2877,7 +2877,7 @@ South:1
right:1 right:1
o:1 o:1
of:1 of:1
<EFBFBD>:1 a:1
that:1 that:1
of:1 of:1
________:1 ________:1
@ -2923,7 +2923,7 @@ and:1
iz:1 iz:1
of:1 of:1
------------:1 ------------:1
<EFBFBD><EFBFBD>:1 a:1
a:1 a:1
into:1 into:1
ized:1 ized:1
@ -3103,7 +3103,7 @@ year:1
ery:1 ery:1
hand:1 hand:1
wheat:1 wheat:1
<EFBFBD>:1 a:1
this:1 this:1
top:1 top:1
urn:1 urn:1
@ -3217,7 +3217,7 @@ never:1
to:1 to:1
velop:1 velop:1
or:1 or:1
~~~~~~~~~~~~~~~~:1 a:1
corn:1 corn:1
has:1 has:1
our:1 our:1
@ -3227,7 +3227,7 @@ ili:1
his:1 his:1
un:1 un:1
plan:1 plan:1
_______:1 a:1
it:1 it:1
there:1 there:1
o:1 o:1
@ -3245,7 +3245,7 @@ in:1
for:1 for:1
ever:1 ever:1
This:1 This:1
':1 a:1
a:1 a:1
small:1 small:1
soil:1 soil:1
@ -3257,7 +3257,7 @@ than:1
made:1 made:1
was:1 was:1
sh:1 sh:1
________:1 a:1
of:1 of:1
cold:1 cold:1
not:1 not:1
@ -3292,7 +3292,7 @@ government:1
regard:1 regard:1
eigner:1 eigner:1
yesterday.:1 yesterday.:1
****************:1 a:1
ers:1 ers:1
lly:1 lly:1
the:1 the:1
@ -3361,7 +3361,7 @@ ering:1
to:1 to:1
ili:1 ili:1
been:1 been:1
•:1 a:1
Indiana:1 Indiana:1
be:1 be:1
the:1 the:1
@ -3408,7 +3408,7 @@ the:1
ingly:1 ingly:1
to:1 to:1
has:1 has:1
;:1 a:1
has:1 has:1
repair:1 repair:1
techr:1 techr:1
@ -3454,7 +3454,7 @@ ia:1
ia:1 ia:1
it:1 it:1
ia:1 ia:1
(:1 a:1
and:1 and:1
ia:1 ia:1
the:1 the:1
@ -3551,12 +3551,12 @@ at:1
ided:1 ided:1
year:1 year:1
ern:1 ern:1
^:1 a:1
money:1 money:1
ia:1 ia:1
the:1 the:1
irl:1 irl:1
<EFBFBD>:1 a:1
ise:1 ise:1
to:1 to:1
ix:1 ix:1
@ -3566,7 +3566,7 @@ ery:1
uth:1 uth:1
to:1 to:1
arded:1 arded:1
-:1 a:1
States:1 States:1
are:1 are:1
eral:1 eral:1
@ -3579,7 +3579,7 @@ vern:1
against:1 against:1
St:1 St:1
good:1 good:1
________:1 a:1
to:1 to:1
urn:1 urn:1
ia:1 ia:1
@ -3618,8 +3618,8 @@ ia:1
samples.:1 samples.:1
to:1 to:1
down:1 down:1
Pi^:1 Pi:1
co-operative):1 co-operative:1
ided:1 ided:1
was:1 was:1
14:1 14:1
@ -3656,7 +3656,7 @@ than:1
most:1 most:1
as:1 as:1
to:1 to:1
!!:1 a:1
grave:1 grave:1
ids:1 ids:1
of:1 of:1
@ -3923,7 +3923,7 @@ we:1
ers:1 ers:1
not:1 not:1
kil:1 kil:1
<EFBFBD>:1 a:1
much:1 much:1
the:1 the:1
the:1 the:1
@ -3961,7 +3961,7 @@ that:1
new:1 new:1
where:1 where:1
did:1 did:1
____:1 a:1
ild:1 ild:1
ia:1 ia:1
Nevada:1 Nevada:1
@ -4041,7 +4041,7 @@ and:1
such:1 such:1
ik:1 ik:1
car:1 car:1
<EFBFBD>:1 a:1
to:1 to:1
Th:1 Th:1
west:1 west:1
@ -4099,9 +4099,9 @@ lakes:1
ownership.:1 ownership.:1
a:1 a:1
ills:1 ills:1
?:1 a:1
ia:1 ia:1
<EFBFBD>:1 a:1
shore:1 shore:1
he:1 he:1
ive:1 ive:1
@ -4227,7 +4227,7 @@ to:1
yet:1 yet:1
heart:1 heart:1
of:1 of:1
':1 a:1
of:1 of:1
alone:1 alone:1
ix:1 ix:1
@ -4248,7 +4248,7 @@ and:1
lect:1 lect:1
diction:1 diction:1
next:1 next:1
<EFBFBD>:1 a:1
ia:1 ia:1
the:1 the:1
ily:1 ily:1
@ -4274,7 +4274,7 @@ ia:1
ib:1 ib:1
than:1 than:1
of:1 of:1
<EFBFBD>:1 a:1
was:1 was:1
vern:1 vern:1
not.:1 not.:1
@ -4849,7 +4849,7 @@ this:1
the:1 the:1
ia:1 ia:1
noon:1 noon:1
<EFBFBD>:1 a:1
absence:1 absence:1
before:1 before:1
gest:1 gest:1
@ -5189,7 +5189,7 @@ the:1
death:1 death:1
to:1 to:1
E:1 E:1
<EFBFBD>:1 a:1
his:1 his:1
izz:1 izz:1
Darrin:1 Darrin:1
@ -5348,7 +5348,7 @@ who:1
been:1 been:1
a:1 a:1
has:1 has:1
<EFBFBD>:1 a:1
time:1 time:1
to:1 to:1
7:1 7:1
@ -5438,7 +5438,7 @@ gave:1
to:1 to:1
________:1 ________:1
ills:1 ills:1
<EFBFBD>:1 a:1
ips:1 ips:1
________:1 ________:1
head:1 head:1
@ -5585,7 +5585,7 @@ ization:1
h:1 h:1
ia:1 ia:1
urn:1 urn:1
<EFBFBD>:1 a:1
the:1 the:1
now:1 now:1
General:1 General:1
@ -5765,7 +5765,7 @@ In:1
seen:1 seen:1
of:1 of:1
the:1 the:1
<EFBFBD>:1 a:1
procedure:1 procedure:1
run:1 run:1
is:1 is:1
@ -6003,7 +6003,7 @@ ers:1
The:1 The:1
vainly:1 vainly:1
ild:1 ild:1
<EFBFBD>:1 a:1
this:1 this:1
the:1 the:1
whether:1 whether:1
@ -6448,7 +6448,7 @@ seized:1
must:1 must:1
ills:1 ills:1
ia:1 ia:1
<EFBFBD>:1 a:1
are:1 are:1
moral:1 moral:1
in:1 in:1
@ -6582,7 +6582,7 @@ at:1
he:1 he:1
JANU:1 JANU:1
the:1 the:1
<EFBFBD><EFBFBD>:1 aa:1
must:1 must:1
J:1 J:1
and:1 and:1
@ -6806,7 +6806,7 @@ he:1
found:1 found:1
ids:1 ids:1
to:1 to:1
<EFBFBD>:1 a:1
ended:1 ended:1
last:1 last:1
w:1 w:1
@ -7106,7 +7106,7 @@ are:1
vern:1 vern:1
b:1 b:1
io:1 io:1
<EFBFBD>:1 a:1
that:1 that:1
treatment:1 treatment:1
that:1 that:1

1 ers:1
168 ia:1
169 this:1
170 ':1
171 �:1 a:1
172 ia:1
173 feet:1
174 to:1
249 years:1
250 liver:1
251 and:1
252 �:1 a:1
253 no:1
254 day:1
255 ern:1
646 the:1
647 at:1
648 North:1
649 �:1 a:1
650 of:1
651 ily:1
652 ia:1
653 And:1
654 and:1
655 up:1
656 �:1 a:1
657 bishop:1
658 ern:1
659 ia:1
716 vessel:1
717 work.:1
718 ery:1
719 �:1 a:1
720 all:1
721 whose:1
722 to:1
824 with:1
825 may:1
826 train:1
827 �:1 a:1
828 t:1
829 entered:1
830 if:1
927 of:1
928 every:1
929 any:1
930 �:1 a:1
931 If:1
932 is:1
933 we:1
983 vern:1
984 dinner:1
985 Keith:1
986 �:1 a:1
987 fire:1
988 do:1
989 our:1
1076 Spe:1
1077 lly:1
1078 by:1
1079 �:1 a:1
1080 o:1
1081 ize:1
1082 consequence:1
1110 t:1
1111 ili:1
1112 the:1
1113 �:1 a:1
1114 years:1
1115 pace:1
1116 O:1
1167 ers:1
1168 the:1
1169 Air:1
1170 �:1 a:1
1171 line:1
1172 that:1
1173 ious:1
1202 further:1
1203 early:1
1204 than:1
1205 �:1 a:1
1206 a:1
1207 the:1
1208 of:1
1285 a:1
1286 iced:1
1287 agreement:1
1288 �:1 a:1
1289 ia:1
1290 line.:1
1291 other:1
1345 well:1
1346 a:1
1347 ia:1
1348 �:1 a:1
1349 English:1
1350 different:1
1351 acquainted:1
1960 nsn:1
1961 wit:1
1962 79:1
1963 �:1 a:1
1964 be:1
1965 It:1
1966 Chesapeake:1
2370 h:1
2371 for:1
2372 ily:1
2373 �:1 a:1
2374 velop:1
2375 m:1
2376 ents:1
2461 in:1
2462 the:1
2463 w:1
2464 �:1 a:1
2465 the:1
2466 be:1
2467 rela:1
2496 when:1
2497 invitation:1
2498 appoint:1
2499 �:1 a:1
2500 otficial:1
2501 Ber:1
2502 impossible:1
2726 clothes:1
2727 ia:1
2728 any:1
2729 �:1 a:1
2730 of:1
2731 party:1
2732 But:1
2793 eveu­:1
2794 urn:1
2795 ile:1
2796 public-:1 public:1
2797 them:1
2798 per:1
2799 ia:1
2824 an:1
2825 gives:1
2826 of:1
2827 �:1 a:1
2828 and:1
2829 love:1
2830 was:1
2861 the:1
2862 June:1
2863 world:1
2864 �:1 a:1
2865 met:1
2866 can:1
2867 ian:1
2877 right:1
2878 o:1
2879 of:1
2880 �:1 a:1
2881 that:1
2882 of:1
2883 ________:1
2923 iz:1
2924 of:1
2925 ------------:1
2926 ��:1 a:1
2927 a:1
2928 into:1
2929 ized:1
3103 ery:1
3104 hand:1
3105 wheat:1
3106 �:1 a:1
3107 this:1
3108 top:1
3109 urn:1
3217 to:1
3218 velop:1
3219 or:1
3220 ~~~~~~~~~~~~~~~~:1 a:1
3221 corn:1
3222 has:1
3223 our:1
3227 his:1
3228 un:1
3229 plan:1
3230 _______:1 a:1
3231 it:1
3232 there:1
3233 o:1
3245 for:1
3246 ever:1
3247 This:1
3248 ':1 a:1
3249 a:1
3250 small:1
3251 soil:1
3257 made:1
3258 was:1
3259 sh:1
3260 ________:1 a:1
3261 of:1
3262 cold:1
3263 not:1
3292 regard:1
3293 eigner:1
3294 yesterday.:1
3295 ****************:1 a:1
3296 ers:1
3297 lly:1
3298 the:1
3361 to:1
3362 ili:1
3363 been:1
3364 •:1 a:1
3365 Indiana:1
3366 be:1
3367 the:1
3408 ingly:1
3409 to:1
3410 has:1
3411 ;:1 a:1
3412 has:1
3413 repair:1
3414 techr:1
3454 ia:1
3455 it:1
3456 ia:1
3457 (:1 a:1
3458 and:1
3459 ia:1
3460 the:1
3551 ided:1
3552 year:1
3553 ern:1
3554 ^:1 a:1
3555 money:1
3556 ia:1
3557 the:1
3558 irl:1
3559 �:1 a:1
3560 ise:1
3561 to:1
3562 ix:1
3566 uth:1
3567 to:1
3568 arded:1
3569 -:1 a:1
3570 States:1
3571 are:1
3572 eral:1
3579 against:1
3580 St:1
3581 good:1
3582 ________:1 a:1
3583 to:1
3584 urn:1
3585 ia:1
3618 samples.:1
3619 to:1
3620 down:1
3621 Pi^:1 Pi:1
3622 co-operative):1 co-operative:1
3623 ided:1
3624 was:1
3625 14:1
3656 most:1
3657 as:1
3658 to:1
3659 !!:1 a:1
3660 grave:1
3661 ids:1
3662 of:1
3923 ers:1
3924 not:1
3925 kil:1
3926 �:1 a:1
3927 much:1
3928 the:1
3929 the:1
3961 new:1
3962 where:1
3963 did:1
3964 ____:1 a:1
3965 ild:1
3966 ia:1
3967 Nevada:1
4041 such:1
4042 ik:1
4043 car:1
4044 �:1 a:1
4045 to:1
4046 Th:1
4047 west:1
4099 ownership.:1
4100 a:1
4101 ills:1
4102 ?:1 a:1
4103 ia:1
4104 �:1 a:1
4105 shore:1
4106 he:1
4107 ive:1
4227 yet:1
4228 heart:1
4229 of:1
4230 ':1 a:1
4231 of:1
4232 alone:1
4233 ix:1
4248 lect:1
4249 diction:1
4250 next:1
4251 �:1 a:1
4252 ia:1
4253 the:1
4254 ily:1
4274 ib:1
4275 than:1
4276 of:1
4277 �:1 a:1
4278 was:1
4279 vern:1
4280 not.:1
4849 the:1
4850 ia:1
4851 noon:1
4852 �:1 a:1
4853 absence:1
4854 before:1
4855 gest:1
5189 death:1
5190 to:1
5191 E:1
5192 �:1 a:1
5193 his:1
5194 izz:1
5195 Darrin:1
5348 been:1
5349 a:1
5350 has:1
5351 �:1 a:1
5352 time:1
5353 to:1
5354 7:1
5438 to:1
5439 ________:1
5440 ills:1
5441 �:1 a:1
5442 ips:1
5443 ________:1
5444 head:1
5585 h:1
5586 ia:1
5587 urn:1
5588 �:1 a:1
5589 the:1
5590 now:1
5591 General:1
5765 seen:1
5766 of:1
5767 the:1
5768 �:1 a:1
5769 procedure:1
5770 run:1
5771 is:1
6003 The:1
6004 vainly:1
6005 ild:1
6006 �:1 a:1
6007 this:1
6008 the:1
6009 whether:1
6448 must:1
6449 ills:1
6450 ia:1
6451 �:1 a:1
6452 are:1
6453 moral:1
6454 in:1
6582 he:1
6583 JANU:1
6584 the:1
6585 ��:1 aa:1
6586 must:1
6587 J:1
6588 and:1
6806 found:1
6807 ids:1
6808 to:1
6809 �:1 a:1
6810 ended:1
6811 last:1
6812 w:1
7106 vern:1
7107 b:1
7108 io:1
7109 �:1 a:1
7110 that:1
7111 treatment:1
7112 that:1