s415366/en-ner-conll-2003
1
0
Fork 0
forked from kubapok/en-ner-conll-2003
Code Issues Pull Requests Projects Releases Wiki Activity

fixed incorrect tsv read

Browse Source
This commit is contained in:
wangobango 2021-06-21 18:08:57 +02:00
parent 39f174bf1b
commit 180a662e07
2 changed files with 3 additions and 4 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

1
dev-0/out.tsv
View File

@ -1,3 +1,4 @@
O O B-ORG O O O O O O O O O B-LOC O O B-MISC I-MISC O B-PER I-PER O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O B-ORG I-ORG I-ORG O O O O O O B-ORG O O O O O O O O O O B-ORG O O O O B-ORG O O O O O O O O B-PER I-PER O B-ORG I-ORG O O O O O O O O O O O B-ORG O B-LOC O B-PER I-PER O O O O O O O O O O B-ORG O O O O O O O O O B-PER O O O O O O O O O O B-ORG O O O O O O O O O O O B-PER I-PER O B-PER I-PER O O O O B-ORG O O O O B-ORG O B-LOC O O B-PER O O O O B-LOC O O O O O I-PER O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-LOC O B-ORG O B-PER I-PER O O O O O B-LOC O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O O O O O O B-LOC O B-PER I-PER O O O O B-ORG O O B-ORG O O O O O O B-ORG O O B-ORG O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O O O B-MISC B-PER I-PER O O O O O B-PER I-PER O B-PER O O B-PER I-PER O O O O B-ORG O B-ORG O O O O O O B-ORG O O O O B-ORG I-ORG O O O O O O O O O O O O O B-ORG O O O O O O B-MISC O O O O O O O O O O B-ORG O O B-PER I-PER O O O O B-PER I-PER O O O O O O O O B-ORG O O O O O O O
O O B-MISC I-MISC I-MISC O O O B-LOC O O O O O O O O O B-MISC O O O O O O O B-LOC O B-ORG O B-ORG O O O O O O O O B-ORG O O O O B-PER B-ORG I-ORG O O B-ORG O O O B-ORG O O O B-ORG O O O B-LOC O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER O O O O B-ORG O O B-ORG I-PER O O O O O O B-PER I-PER O B-ORG O O B-PER I-PER O O B-PER O B-PER O O B-ORG O O O B-LOC O B-LOC I-LOC O O B-ORG O O B-ORG O O B-PER I-PER O O O O B-PER O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O O B-LOC O B-ORG O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O O O O O O B-ORG O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O B-ORG O O B-ORG O B-ORG O O O O B-ORG I-ORG O B-PER B-PER I-PER O O O O O O B-PER I-PER O O B-PER I-PER O O O B-ORG O B-ORG O O O O B-PER I-PER O O O O O B-ORG O O B-PER O O O B-PER I-PER O O O B-PER O O B-MISC I-MISC I-MISC O O O B-LOC O O O O O O O O O B-MISC O O O O O O O B-LOC O B-ORG O B-ORG O O O O O O O O B-ORG O O O O B-PER B-ORG I-ORG O O B-ORG O O O B-ORG O O O B-ORG O O O B-LOC O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER O O O O B-ORG O O B-ORG I-PER O O O O O O B-PER I-PER O B-ORG O O B-PER I-PER O O B-PER O B-PER O O B-ORG O O O B-LOC O B-LOC I-LOC O O B-ORG O O B-ORG O O B-PER I-PER O O O O B-PER O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O O B-LOC O B-ORG O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O O O O O O B-ORG O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O B-ORG O O B-ORG O B-ORG O O O O B-ORG I-ORG O B-PER B-PER I-PER O O O O O O B-PER I-PER O O B-PER I-PER O O O B-ORG O B-ORG O O O O B-PER I-PER O O O O O B-ORG O O B-PER O O O B-PER I-PER O O O B-PER
O O O B-ORG I-ORG O O B-LOC O O B-LOC O O O O O O O O O O B-LOC O O O O O O O O O O O O O O O B-MISC I-MISC I-MISC O O O O O O B-LOC O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-MISC O O O O O B-MISC I-MISC O O O O O O O O O O O O O B-LOC O O B-MISC O O O O O O O B-ORG O B-LOC O O O O O O O O O O O B-ORG I-ORG I-ORG O O O O B-ORG O O O O O O O O O O B-ORG O O O O B-ORG O O O O O O O O B-LOC O O B-ORG O O O O O O O O O B-LOC I-LOC O O B-LOC O O O O O O O O O O O O B-LOC O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O B-ORG O O O O O O O O B-ORG O O O O O B-LOC O B-LOC O O O B-MISC O O O O O O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O B-MISC I-MISC O O B-ORG O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O B-LOC I-LOC O B-LOC O O O O O B-ORG I-ORG O O O O O B-LOC O O O O B-ORG O O O O O O B-ORG O B-ORG O O O O O O O O O O O B-LOC O O O O O O O B-ORG O O O O O O O O O O O B-LOC I-LOC O B-LOC O O O O O B-ORG O O O O O O B-ORG I-ORG O O O B-LOC I-LOC O O O B-LOC I-LOC O O O B-ORG I-ORG O O B-LOC O O B-LOC O O O O O O O O O O B-LOC O O O O O O O O O O O O O O O B-MISC I-MISC I-MISC O O O O O O B-LOC O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-MISC O O O O O B-MISC I-MISC O O O O O O O O O O O O O B-LOC O O B-MISC O O O O O O O B-ORG O B-LOC O O O O O O O O O O O B-ORG I-ORG I-ORG O O O O B-ORG O O O O O O O O O O B-ORG O O O O B-ORG O O O O O O O O B-LOC O O B-ORG O O O O O O O O O B-LOC I-LOC O O B-LOC O O O O O O O O O O O O B-LOC O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O B-ORG O O O O O O O O B-ORG O O O O O B-LOC O B-LOC O O O B-MISC O O O O O O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O B-MISC I-MISC O O B-ORG O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O B-LOC I-LOC O B-LOC O O O O O B-ORG I-ORG O O O O O B-LOC O O O O B-ORG O O O O O O B-ORG O B-ORG O O O O O O O O O O O B-LOC O O O O O O O B-ORG O O O O O O O O O O O B-LOC I-LOC O B-LOC O O O O O B-ORG O O O O O O B-ORG I-ORG O O O B-LOC I-LOC O O O B-LOC I-LOC
O O B-ORG O O B-LOC O O O B-LOC O O O O O O O B-PER I-PER O O O O O B-LOC O O O O O O O O O O B-ORG O O O O O O O O O O O O O O B-PER I-PER O O O O O O O B-MISC O O O O O O O B-PER I-PER O O B-PER O B-ORG O O O O O O B-LOC O O B-MISC I-MISC O O B-LOC O B-LOC O O B-PER O O O O O O O O O O O B-PER I-PER O O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O B-PER O O O O O O O O I-PER O O O O O O O O O O O O O O O O O O O O B-PER O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O B-PER O B-MISC I-MISC O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O B-PER I-PER B-ORG O O O B-ORG O O B-LOC O O O B-LOC O O O O O O O B-PER I-PER O O O O O B-LOC O O O O O O O O O O B-ORG O O O O O O O O O O O O O O B-PER I-PER O O O O O O O B-MISC O O O O O O O B-PER I-PER O O B-PER O B-ORG O O O O O O B-LOC O O B-MISC I-MISC O O B-LOC O B-LOC O O B-PER O O O O O O O O O O O B-PER I-PER O O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O B-PER O O O O O O O O I-PER O O O O O O O O O O O O O O O O O O O O B-PER O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O B-PER O B-MISC I-MISC O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O B-PER I-PER B-ORG O

1 O O B-MISC I-MISC I-MISC O O O B-LOC O O O O O O O O O B-MISC O O O O O O O B-LOC O B-ORG O B-ORG O O O O O O O O B-ORG O O O O B-PER B-ORG I-ORG O O B-ORG O O O B-ORG O O O B-ORG O O O B-LOC O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER O O O O B-ORG O O B-ORG I-PER O O O O O O B-PER I-PER O B-ORG O O B-PER I-PER O O B-PER O B-PER O O B-ORG O O O B-LOC O B-LOC I-LOC O O B-ORG O O B-ORG O O B-PER I-PER O O O O B-PER O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O O B-LOC O B-ORG O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O O O O O O B-ORG O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O B-ORG O O B-ORG O B-ORG O O O O B-ORG I-ORG O B-PER B-PER I-PER O O O O O O B-PER I-PER O O B-PER I-PER O O O B-ORG O B-ORG O O O O B-PER I-PER O O O O O B-ORG O O B-PER O O O B-PER I-PER O O O B-PER O O B-ORG O O O O O O O O O B-LOC O O B-MISC I-MISC O B-PER I-PER O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O B-ORG I-ORG I-ORG O O O O O O B-ORG O O O O O O O O O O B-ORG O O O O B-ORG O O O O O O O O B-PER I-PER O B-ORG I-ORG O O O O O O O O O O O B-ORG O B-LOC O B-PER I-PER O O O O O O O O O O B-ORG O O O O O O O O O B-PER O O O O O O O O O O B-ORG O O O O O O O O O O O B-PER I-PER O B-PER I-PER O O O O B-ORG O O O O B-ORG O B-LOC O O B-PER O O O O B-LOC O O O O O I-PER O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-LOC O B-ORG O B-PER I-PER O O O O O B-LOC O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O O O O O O B-LOC O B-PER I-PER O O O O B-ORG O O B-ORG O O O O O O B-ORG O O B-ORG O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O O O B-MISC B-PER I-PER O O O O O B-PER I-PER O B-PER O O B-PER I-PER O O O O B-ORG O B-ORG O O O O O O B-ORG O O O O B-ORG I-ORG O O O O O O O O O O O O O B-ORG O O O O O O B-MISC O O O O O O O O O O B-ORG O O B-PER I-PER O O O O B-PER I-PER O O O O O O O O B-ORG O O O O O O O
1 O O B-ORG O O O O O O O O O B-LOC O O B-MISC I-MISC O B-PER I-PER O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O B-ORG I-ORG I-ORG O O O O O O B-ORG O O O O O O O O O O B-ORG O O O O B-ORG O O O O O O O O B-PER I-PER O B-ORG I-ORG O O O O O O O O O O O B-ORG O B-LOC O B-PER I-PER O O O O O O O O O O B-ORG O O O O O O O O O B-PER O O O O O O O O O O B-ORG O O O O O O O O O O O B-PER I-PER O B-PER I-PER O O O O B-ORG O O O O B-ORG O B-LOC O O B-PER O O O O B-LOC O O O O O I-PER O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-LOC O B-ORG O B-PER I-PER O O O O O B-LOC O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O O O O O O B-LOC O B-PER I-PER O O O O B-ORG O O B-ORG O O O O O O B-ORG O O B-ORG O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O O O B-MISC B-PER I-PER O O O O O B-PER I-PER O B-PER O O B-PER I-PER O O O O B-ORG O B-ORG O O O O O O B-ORG O O O O B-ORG I-ORG O O O O O O O O O O O O O B-ORG O O O O O O B-MISC O O O O O O O O O O B-ORG O O B-PER I-PER O O O O B-PER I-PER O O O O O O O O B-ORG O O O O O O O
2 O O B-MISC I-MISC I-MISC O O O B-LOC O O O O O O O O O B-MISC O O O O O O O B-LOC O B-ORG O B-ORG O O O O O O O O B-ORG O O O O B-PER B-ORG I-ORG O O B-ORG O O O B-ORG O O O B-ORG O O O B-LOC O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER O O O O B-ORG O O B-ORG I-PER O O O O O O B-PER I-PER O B-ORG O O B-PER I-PER O O B-PER O B-PER O O B-ORG O O O B-LOC O B-LOC I-LOC O O B-ORG O O B-ORG O O B-PER I-PER O O O O B-PER O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O O B-LOC O B-ORG O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O O O O O O B-ORG O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O B-ORG O O B-ORG O B-ORG O O O O B-ORG I-ORG O B-PER B-PER I-PER O O O O O O B-PER I-PER O O B-PER I-PER O O O B-ORG O B-ORG O O O O B-PER I-PER O O O O O B-ORG O O B-PER O O O B-PER I-PER O O O B-PER O O B-MISC I-MISC I-MISC O O O B-LOC O O O O O O O O O B-MISC O O O O O O O B-LOC O B-ORG O B-ORG O O O O O O O O B-ORG O O O O B-PER B-ORG I-ORG O O B-ORG O O O B-ORG O O O B-ORG O O O B-LOC O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER O O O O B-ORG O O B-ORG I-PER O O O O O O B-PER I-PER O B-ORG O O B-PER I-PER O O B-PER O B-PER O O B-ORG O O O B-LOC O B-LOC I-LOC O O B-ORG O O B-ORG O O B-PER I-PER O O O O B-PER O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O O B-LOC O B-ORG O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O O O O O O B-ORG O B-ORG O O O O B-PER I-PER O O B-PER I-PER O O B-PER I-PER O O O B-ORG O O B-ORG O O B-ORG O B-ORG O O O O B-ORG I-ORG O B-PER B-PER I-PER O O O O O O B-PER I-PER O O B-PER I-PER O O O B-ORG O B-ORG O O O O B-PER I-PER O O O O O B-ORG O O B-PER O O O B-PER I-PER O O O B-PER
3 O O O B-ORG I-ORG O O B-LOC O O B-LOC O O O O O O O O O O B-LOC O O O O O O O O O O O O O O O B-MISC I-MISC I-MISC O O O O O O B-LOC O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-MISC O O O O O B-MISC I-MISC O O O O O O O O O O O O O B-LOC O O B-MISC O O O O O O O B-ORG O B-LOC O O O O O O O O O O O B-ORG I-ORG I-ORG O O O O B-ORG O O O O O O O O O O B-ORG O O O O B-ORG O O O O O O O O B-LOC O O B-ORG O O O O O O O O O B-LOC I-LOC O O B-LOC O O O O O O O O O O O O B-LOC O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O B-ORG O O O O O O O O B-ORG O O O O O B-LOC O B-LOC O O O B-MISC O O O O O O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O B-MISC I-MISC O O B-ORG O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O B-LOC I-LOC O B-LOC O O O O O B-ORG I-ORG O O O O O B-LOC O O O O B-ORG O O O O O O B-ORG O B-ORG O O O O O O O O O O O B-LOC O O O O O O O B-ORG O O O O O O O O O O O B-LOC I-LOC O B-LOC O O O O O B-ORG O O O O O O B-ORG I-ORG O O O B-LOC I-LOC O O O B-LOC I-LOC O O O B-ORG I-ORG O O B-LOC O O B-LOC O O O O O O O O O O B-LOC O O O O O O O O O O O O O O O B-MISC I-MISC I-MISC O O O O O O B-LOC O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-MISC O O O O O B-MISC I-MISC O O O O O O O O O O O O O B-LOC O O B-MISC O O O O O O O B-ORG O B-LOC O O O O O O O O O O O B-ORG I-ORG I-ORG O O O O B-ORG O O O O O O O O O O B-ORG O O O O B-ORG O O O O O O O O B-LOC O O B-ORG O O O O O O O O O B-LOC I-LOC O O B-LOC O O O O O O O O O O O O B-LOC O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O B-ORG O O O O O O O O B-ORG O O O O O B-LOC O B-LOC O O O B-MISC O O O O O O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O B-MISC I-MISC O O B-ORG O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O B-LOC I-LOC O B-LOC O O O O O B-ORG I-ORG O O O O O B-LOC O O O O B-ORG O O O O O O B-ORG O B-ORG O O O O O O O O O O O B-LOC O O O O O O O B-ORG O O O O O O O O O O O B-LOC I-LOC O B-LOC O O O O O B-ORG O O O O O O B-ORG I-ORG O O O B-LOC I-LOC O O O B-LOC I-LOC
4 O O B-ORG O O B-LOC O O O B-LOC O O O O O O O B-PER I-PER O O O O O B-LOC O O O O O O O O O O B-ORG O O O O O O O O O O O O O O B-PER I-PER O O O O O O O B-MISC O O O O O O O B-PER I-PER O O B-PER O B-ORG O O O O O O B-LOC O O B-MISC I-MISC O O B-LOC O B-LOC O O B-PER O O O O O O O O O O O B-PER I-PER O O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O B-PER O O O O O O O O I-PER O O O O O O O O O O O O O O O O O O O O B-PER O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O B-PER O B-MISC I-MISC O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O B-PER I-PER B-ORG O O O B-ORG O O B-LOC O O O B-LOC O O O O O O O B-PER I-PER O O O O O B-LOC O O O O O O O O O O B-ORG O O O O O O O O O O O O O O B-PER I-PER O O O O O O O B-MISC O O O O O O O B-PER I-PER O O B-PER O B-ORG O O O O O O B-LOC O O B-MISC I-MISC O O B-LOC O B-LOC O O B-PER O O O O O O O O O O O B-PER I-PER O O O O O O O O B-ORG O B-ORG O O O O O O O O O O O O O O O O O O O O O O O O B-PER O O O O O O O O I-PER O O O O O O O O O O O O O O O O O O O O B-PER O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O O O O O O O O O O O O O O O O O B-PER O B-MISC I-MISC O O O O O O O O O O O O O O O O O O O O O O O B-ORG O O B-PER I-PER B-ORG O

6
main.py
View File

@ -76,12 +76,10 @@ mode = "eval"
save_path = "dev-0/out.tsv" save_path = "dev-0/out.tsv"
data = pd.read_csv("dev-0/in.tsv", sep="\t") data = pd.read_csv("dev-0/in.tsv", sep="\t", names=['0'])
# data.columns = ["labels", "text"] # data.columns = ["labels", "text"]
data.columns = ['0']
ex_data = pd.read_csv("dev-0/expected.tsv", sep="\t") ex_data = pd.read_csv("dev-0/expected.tsv", sep="\t", names=['labels'])
ex_data.columns = ['labels']
in_data = data["0"] in_data = data["0"]
target = ex_data["labels"] target = ex_data["labels"]