datasets comit fixes

This commit is contained in:
Kacper 2022-05-28 14:38:59 +02:00
parent aa86c568f6
commit 95ddfdcbf5
3 changed files with 1330 additions and 1330 deletions

View File

@ -58,9 +58,11 @@ def process_file(file):
if email:
email_address = email.group()
text = text.replace(email_address, '@')
text = text.replace("'", "")
tokens = word_tokenize(text)
tokens = [token.replace('@', email_address) for token in tokens]
else:
text = text.replace("'", "")
tokens = word_tokenize(text)
return tokens

View File

@ -1,23 +1,14 @@
# text: poproszę miejsca od 10 do 12 w ostatnim rzędzie
# intent: inform
# slots: 10do12wostatnimrzędzie:seat
1 poproszę inform NoLabel
2 miejsca inform NoLabel
3 od inform NoLabel
4 10 inform B-seat
5 do inform I-seat
6 12 inform I-seat
7 w inform I-seat
8 ostatnim inform I-seat
9 rzędzie inform I-seat
# text: A jakie są dostępne
# intent: request
# text: Dzień dobry
# intent: hello
# slots:
1 A request NoLabel
2 jakie request NoLabel
3 są request NoLabel
4 dostępne request NoLabel
1 Dzień hello NoLabel
2 dobry hello NoLabel
# text: wybieram 18:00
# intent: inform
# slots: 18:00:hour
1 wybieram inform NoLabel
2 18:00 inform B-hour
# text: Tak
# intent: act
@ -29,10 +20,10 @@
# slots: 1:rowplacement
1 1 inform B-rowplacement
# text: 1
# intent: affirm inform
# slots: 1:ticketnumber
1 1 affirm inform B-ticketnumber
# text: 16.03
# intent: inform
# slots: 16.03:date
1 16.03 inform B-date
# text: przez internet
# intent: inform
@ -40,134 +31,132 @@
1 przez inform B-purchaseType
2 internet inform I-purchaseType
# text: 12093098490832030210334434
# text: 485554893
# intent: inform
# slots: 12093098490832030210334434:bankAccountNumber
1 12093098490832030210334434 inform B-bankAccountNumber
# slots: 485554893:phone
1 485554893 inform B-phone
# text: W jakim kinie?
# text: Ile kosztują bielty na Sing 2?
# intent: request
# slots:
1 W request NoLabel
2 jakim request NoLabel
3 kinie request NoLabel
4 ? request NoLabel
1 Ile request NoLabel
2 kosztują request NoLabel
3 bielty request NoLabel
4 na request NoLabel
5 Sing request NoLabel
6 2 request NoLabel
7 ? request NoLabel
# text: Gdzie jest to kino?
# intent: request
# text: Rozumiem. Dziękuję
# intent: ack thankyou
# slots:
1 Gdzie request NoLabel
2 jest request NoLabel
3 to request NoLabel
4 kino request NoLabel
5 ? request NoLabel
1 Rozumiem ack_thankyou NoLabel
2 . ack_thankyou NoLabel
3 Dziękuję ack_thankyou NoLabel
# text: W jaki inny dzień bilety kosztują mniej?
# text: emkarcinos42069@buziaczek.pl 123123123
# intent: inform inform
# slots: 123123123:phone
1 emkarcinos42069@buziaczek.pl inform_inform NoLabel
2 123123123 inform_inform B-phone
# text: Dzień dobry
# intent: hello
# slots:
1 Dzień hello NoLabel
2 dobry hello NoLabel
# text: Chcialbym bilet na Batman
# intent: request request
# slots: Batman:movie
1 Chcialbym request_request NoLabel
2 bilet request_request NoLabel
3 na request_request NoLabel
4 Batman request_request B-movie
# text: lalalalili@gmai.com, 111222111
# intent: inform inform
# slots: 111222111:phone
1 lalalalili@gmai.com, inform_inform NoLabel
2 111222111 inform_inform B-phone
# text: Co w przypadku gdy się spóźnie?
# intent: reqmore
# slots:
1 W reqmore NoLabel
2 jaki reqmore NoLabel
3 inny reqmore NoLabel
4 dzień reqmore NoLabel
5 bilety reqmore NoLabel
6 kosztują reqmore NoLabel
7 mniej reqmore NoLabel
8 ? reqmore NoLabel
1 Co reqmore NoLabel
2 w reqmore NoLabel
3 przypadku reqmore NoLabel
4 gdy reqmore NoLabel
5 się reqmore NoLabel
6 spóźnie reqmore NoLabel
7 ? reqmore NoLabel
# text: Adrian Charkiewicz, gfasfaf@gmail.com
# intent: inform inform
# slots: AdrianCharkiewicz:name
1 Adrian inform inform B-name
2 Charkiewicz inform inform I-name
3 , inform inform NoLabel
4 gfasfaf@gmail.com inform inform NoLabel
# text: z przodu
# intent: inform
# text: Cześć
# intent: hello
# slots:
1 z inform NoLabel
2 przodu inform NoLabel
# text: Bilety ulgowe
# intent: inform
# slots: ulgowe:ticketType
1 Bilety inform NoLabel
2 ulgowe inform B-ticketType
# text: 20
# intent: infrom
# slots: 20:quantity
1 20 infrom B-quantity
# text: Dziękuje za obsługe
# intent: thankyou bye
# slots:
1 Dziękuje thankyou bye NoLabel
2 za thankyou bye NoLabel
3 obsługe thankyou bye NoLabel
# text: Bilet na seans
# intent: request
# slots:
1 Bilet request NoLabel
2 na request NoLabel
3 seans request NoLabel
1 Cześć hello NoLabel
# text: Poproszę bilet na ostatni seans Batmana
# intent: inform inform
# slots: ostatni:time
1 Poproszę inform inform NoLabel
2 bilet inform inform NoLabel
3 na inform inform NoLabel
4 ostatni inform inform B-time
5 seans inform inform NoLabel
6 Batmana inform inform NoLabel
1 Poproszę inform_inform NoLabel
2 bilet inform_inform NoLabel
3 na inform_inform NoLabel
4 ostatni inform_inform B-time
5 seans inform_inform NoLabel
6 Batmana inform_inform NoLabel
# text: jan.kowalski@pies.pl
# intent: inform
# slots: jan.kowalski@pies.pl:e-mail
1 jan.kowalski@pies.pl inform B-e-mail
# text: o czym jest straszny film 10?
# text: Chciałbym kupić seans
# intent: request
# slots: movie_detail:task
1 o request NoLabel
2 czym request NoLabel
3 jest request NoLabel
4 straszny request NoLabel
5 film request NoLabel
6 10 request NoLabel
7 ? request NoLabel
# slots:
1 Chciałbym request NoLabel
2 kupić request NoLabel
3 seans request NoLabel
# text: Cały tydzień
# text: chciałbym się dowiedzieć co będzie 25 marca
# intent: request
# slots:
1 chciałbym request NoLabel
2 się request NoLabel
3 dowiedzieć request NoLabel
4 co request NoLabel
5 będzie request NoLabel
6 25 request NoLabel
7 marca request NoLabel
# text: Jan Kowalski
# intent: inform
# slots: Całytydzień:date
1 Cały inform B-date
2 tydzień inform I-date
# slots: JanKowalski:name
1 Jan inform B-name
2 Kowalski inform I-name
# text: Jeden ulgowy jeden senior
# intent: inform
# slots: senior:tickettype
1 Jeden inform NoLabel
2 ulgowy inform NoLabel
3 jeden inform NoLabel
4 senior inform B-tickettype
# text: Jakie są godziny tych seansów?
# intent: request
# slots:
1 Jakie request NoLabel
2 są request NoLabel
3 godziny request NoLabel
4 tych request NoLabel
5 seansów request NoLabel
6 ? request NoLabel
# text: Tak
# intent: affirm
# slots:
1 Tak affirm NoLabel
# text: Chcę wiedzieć w jakim kinie podajesz seanse
# intent: null
# text: Jeden ulgowy jeden senior
# intent: inform
# slots: senior:tickettype
1 Jeden inform_ NoLabel
2 ulgowy inform_ NoLabel
3 jeden inform_ NoLabel
4 senior inform_ B-tickettype
# text: Tak
# intent: affirm
# slots:
1 Chcę null NoLabel
2 wiedzieć null NoLabel
3 w null NoLabel
4 jakim null NoLabel
5 kinie null NoLabel
6 podajesz null NoLabel
7 seanse null NoLabel
1 Tak affirm NoLabel
# text: poproszę o miejsce 5 w rzędzie 10
# intent: inform
@ -180,34 +169,48 @@
6 rzędzie inform NoLabel
7 10 inform B-row
# text: ju tu
# intent: inform
# slots: jutu:name
1 ju inform B-name
2 tu inform I-name
# text: poprosze inni ludzie na 14:1313
# intent: null
# text: Nie wiem czy masz jakieś propozycję na dziś ?
# intent: request
# slots:
1 poprosze null NoLabel
2 inni null NoLabel
3 ludzie null NoLabel
4 na null NoLabel
5 14:1313 null NoLabel
1 Nie request NoLabel
2 wiem request NoLabel
3 czy request NoLabel
4 masz request NoLabel
5 jakieś request NoLabel
6 propozycję request NoLabel
7 na request NoLabel
8 dziś request NoLabel
9 ? request NoLabel
# text: chciałbym kupić bilet ale nie wiem na co
# intent: help
# slots:
1 chciałbym help NoLabel
2 kupić help NoLabel
3 bilet help NoLabel
4 ale help NoLabel
5 nie help NoLabel
6 wiem help NoLabel
7 na help NoLabel
8 co help NoLabel
# text: 30 marca o godzinie 12:10
# intent: inform inform
# slots: 12:10:hour
1 30 inform inform NoLabel
2 marca inform inform NoLabel
3 o inform inform NoLabel
4 godzinie inform inform NoLabel
5 12:10 inform inform B-hour
1 30 inform_inform NoLabel
2 marca inform_inform NoLabel
3 o inform_inform NoLabel
4 godzinie inform_inform NoLabel
5 12:10 inform_inform B-hour
# text: xyz@gmail.com
# intent: inform
# slots: xyz@gmail.com:e-mail
1 xyz@gmail.com inform B-e-mail
# text: Chciałbym kupić bilet na NajlepszaNAzwaFilmu
# intent: request inform
# slots: NajlepszaNAzwaFilmu:movie
1 Chciałbym request_inform NoLabel
2 kupić request_inform NoLabel
3 bilet request_inform NoLabel
4 na request_inform NoLabel
5 NajlepszaNAzwaFilmu request_inform B-movie
# text: Chciałbym zarezerwować film
# intent: null
@ -216,6 +219,26 @@
2 zarezerwować null NoLabel
3 film null NoLabel
# text: A później nie ma?
# intent: reqmore
# slots:
1 A reqmore NoLabel
2 później reqmore NoLabel
3 nie reqmore NoLabel
4 ma reqmore NoLabel
5 ? reqmore NoLabel
# text: Jedno dla mnie, drugie dla kota
# intent: infrom
# slots: 2:quantity
1 Jedno infrom NoLabel
2 dla infrom NoLabel
3 mnie infrom NoLabel
4 , infrom NoLabel
5 drugie infrom NoLabel
6 dla infrom NoLabel
7 kota infrom NoLabel
# text: To jeden tylko dla mnie proszę
# intent: inform
# slots: jeden:quantity
@ -226,49 +249,27 @@
5 mnie inform NoLabel
6 proszę inform NoLabel
# text: Chcę iść do kina
# intent: request
# text: A gdzie się znajduje?
# intent: reqmore
# slots:
1 Chcę request NoLabel
2 iść request NoLabel
3 do request NoLabel
4 kina request NoLabel
1 A reqmore NoLabel
2 gdzie reqmore NoLabel
3 się reqmore NoLabel
4 znajduje reqmore NoLabel
5 ? reqmore NoLabel
# text: No pewnie jakoś będzie. Na fanstaczne zernęta proszę zatem.
# intent: inform
# slots: fanstacznezernęta:title
1 No inform NoLabel
2 pewnie inform NoLabel
3 jakoś inform NoLabel
4 będzie inform NoLabel
5 . inform NoLabel
6 Na inform NoLabel
7 fanstaczne inform B-title
8 zernęta inform I-title
9 proszę inform NoLabel
10 zatem inform NoLabel
11 . inform NoLabel
# text: A co gracie?
# intent: request
# text: na moje
# intent: null
# slots:
1 A request NoLabel
2 co request NoLabel
3 gracie request NoLabel
4 ? request NoLabel
1 na null NoLabel
2 moje null NoLabel
# text: dzisiaj, teraz
# intent: inform inform
# slots: 15:30:hour
1 dzisiaj inform inform NoLabel
2 , inform inform NoLabel
3 teraz inform inform NoLabel
# text: miejsce 11
# text: Chciałbym kupić bilet
# intent: inform
# slots: 11:seat_place
1 miejsce inform NoLabel
2 11 inform B-seat_place
# slots: book:task
1 Chciałbym inform NoLabel
2 kupić inform NoLabel
3 bilet inform NoLabel
# text: nie jestem pewien, za ile jest bilet?
# intent: reqmore
@ -283,70 +284,69 @@
8 bilet reqmore NoLabel
9 ? reqmore NoLabel
# text: Ok
# intent: ack
# slots:
1 Ok ack NoLabel
# text: A Uncharted
# intent: inform request
# slots: Uncharted:title
1 A inform_request NoLabel
2 Uncharted inform_request B-title
# text: Dziękuję systemie
# intent: thankyou
# slots:
1 Dziękuję thankyou NoLabel
2 systemie thankyou NoLabel
# text: Dobra, czy jutro gracie batman?
# intent: ack inform request
# slots: batman:title
1 Dobra ack inform request NoLabel
2 , ack inform request NoLabel
3 czy ack inform request NoLabel
4 jutro ack inform request NoLabel
5 gracie ack inform request NoLabel
6 batman ack inform request B-title
7 ? ack inform request NoLabel
# text: Czy gracie Batman?
# text: Jakie płatności przyjmujecie?
# intent: request
# slots: Batman:movie
1 Czy request NoLabel
2 gracie request NoLabel
3 Batman request B-movie
# slots:
1 Jakie request NoLabel
2 płatności request NoLabel
3 przyjmujecie request NoLabel
4 ? request NoLabel
# text: Chciałym 15.04
# intent: inform
# slots: 15.04:date
1 Chciałym inform NoLabel
2 15.04 inform B-date
# text: Cześć systemie
# text: Dzień dobry.
# intent: hello
# slots:
1 Cześć hello NoLabel
2 systemie hello NoLabel
1 Dzień hello NoLabel
2 dobry hello NoLabel
3 . hello NoLabel
# text: ulgowe
# text: pierwszy rząd
# intent: inform
# slots: ulgowe:tickettype
1 ulgowe inform B-tickettype
# slots: pierwszy:row
1 pierwszy inform B-row
2 rząd inform NoLabel
# text: dzisiaj
# text: Chcę dokonać zakupu
# intent: inform
# slots: buy:task
1 Chcę inform NoLabel
2 dokonać inform NoLabel
3 zakupu inform NoLabel
# text: dowidzenia
# intent: bye
# slots:
1 dzisiaj inform NoLabel
1 dowidzenia bye NoLabel
# text: Dzięki
# intent: thankyou
# slots:
1 Dzięki thankyou NoLabel
# text: Na wyjdz za mnie
# text: Jakub Kaczmarek
# intent: inform
# slots: Wyjdzzamnie:movie
1 Na inform NoLabel
2 wyjdz inform B-movie
3 za inform I-movie
4 mnie inform I-movie
# slots: JanKaczmarek:name
1 Jakub inform NoLabel
2 Kaczmarek inform NoLabel
# text: Dzień dobry
# intent: hello
# slots:
1 Dzień hello NoLabel
2 dobry hello NoLabel
# text: Nie dostałam potwierdzenia
# intent: help
# slots: Niedostałampotwierdzenia:issue
1 Nie help B-issue
2 dostałam help I-issue
3 potwierdzenia help I-issue
# text: Dzień dobry
# intent: hello
# slots:
1 Dzień hello NoLabel
2 dobry hello NoLabel
# text: z tyłu, na środku (aby ekran był centralnie widoczny)
# intent: inform
@ -364,47 +364,63 @@
11 widoczny inform NoLabel
12 ) inform NoLabel
# text: Na końcu sali
# intent: inform
# slots:
1 Na inform NoLabel
2 końcu inform NoLabel
3 sali inform NoLabel
# text: Poproszę miejsce 11 w przedostatnim rzędzie. I 7 w ostatnim rzędzie
# intent: inform inform
# slots: 7wostatnimrzędzie:seat
1 Poproszę inform_inform NoLabel
2 miejsce inform_inform NoLabel
3 11 inform_inform NoLabel
4 w inform_inform NoLabel
5 przedostatnim inform_inform NoLabel
6 rzędzie inform_inform NoLabel
7 . inform_inform NoLabel
8 I inform_inform NoLabel
9 7 inform_inform B-seat
10 w inform_inform I-seat
11 ostatnim inform_inform I-seat
12 rzędzie inform_inform I-seat
# text: Chciałbym anulować rezerwację
# intent: deny inform
# slots: reservation:task
1 Chciałbym deny inform NoLabel
2 anulować deny inform NoLabel
3 rezerwację deny inform NoLabel
1 Chciałbym deny_inform NoLabel
2 anulować deny_inform NoLabel
3 rezerwację deny_inform NoLabel
# text: Zgadza się
# intent: act
# slots:
1 Zgadza act NoLabel
2 się act NoLabel
# text: Chciałbym zarezerwować bilety na Batman i zemsta Muminków jutro o 21:00
# intent: request request request request
# slots: 21:00:hour
1 Chciałbym request_request_request_request NoLabel
2 zarezerwować request_request_request_request NoLabel
3 bilety request_request_request_request NoLabel
4 na request_request_request_request NoLabel
5 Batman request_request_request_request NoLabel
6 i request_request_request_request NoLabel
7 zemsta request_request_request_request NoLabel
8 Muminków request_request_request_request NoLabel
9 jutro request_request_request_request NoLabel
10 o request_request_request_request NoLabel
11 21:00 request_request_request_request B-hour
# text: Dzięki ❤️
# intent: thankyou
# slots:
1 Dzięki thankyou NoLabel
2 ❤️ thankyou NoLabel
# text: Nie, rozmyśliłam się.
# intent: deny
# slots: cancelbook:task
1 Nie deny NoLabel
2 , deny NoLabel
3 rozmyśliłam deny NoLabel
4 się deny NoLabel
5 . deny NoLabel
# text: O, super. O której?
# intent: request
# slots: Uncharted:movie
1 O request NoLabel
2 , request NoLabel
3 super request NoLabel
4 . request NoLabel
5 O request NoLabel
6 której request NoLabel
7 ? request NoLabel
# text: Elo
# intent: hello
# slots:
1 Elo hello NoLabel
# text: To 12 i 13 w J proszę
# intent: inform inform inform
# slots: 13:seat
1 To inform_inform_inform NoLabel
2 12 inform_inform_inform NoLabel
3 i inform_inform_inform NoLabel
4 13 inform_inform_inform B-seat
5 w inform_inform_inform NoLabel
6 J inform_inform_inform NoLabel
7 proszę inform_inform_inform NoLabel
# text: Jeden dla mnie, drugi dla kota
# intent: inform
@ -417,14 +433,37 @@
6 dla inform NoLabel
7 kota inform NoLabel
# text: Które rzędzy są dostępne?
# intent: null
# slots:
1 Które null NoLabel
2 rzędzy null NoLabel
3 są null NoLabel
4 dostępne null NoLabel
5 ? null NoLabel
# text: O, super. O której?
# intent: request
# slots: Uncharted:movie
1 O request NoLabel
2 , request NoLabel
3 super request NoLabel
4 . request NoLabel
5 O request NoLabel
6 której request NoLabel
7 ? request NoLabel
# text: Wybieram wszystkie
# intent: inform
# slots: all:seat
1 Wybieram inform NoLabel
2 wszystkie inform NoLabel
# text: 7 normalnych i 4 ulgowe
# intent: inform inform
# slots: 4:ticketnumber,ulgowe:tickettype
1 7 inform_inform NoLabel
2 normalnych inform_inform NoLabel
3 i inform_inform NoLabel
4 4 inform_inform B-ticketnumber
5 ulgowe inform_inform B-tickettype
# text: rząd 10
# intent: inform
# slots: 10:row
1 rząd inform NoLabel
2 10 inform B-row
# text: Chcę kupić bilety na film
# intent: inform
@ -435,70 +474,72 @@
4 na inform NoLabel
5 film inform NoLabel
# text: A jakie filmy gracie?
# intent: request
# slots:
1 A request NoLabel
2 jakie request NoLabel
3 filmy request NoLabel
4 gracie request NoLabel
5 ? request NoLabel
# text: Dzień dobry
# intent: hello
# slots:
1 Dzień hello NoLabel
2 dobry hello NoLabel
# text: 2 bilety
# text: Kupić
# intent: inform
# slots: 2:ticketnumber
1 2 inform B-ticketnumber
2 bilety inform NoLabel
# slots: buy:task
1 Kupić inform NoLabel
# text: Najlepiej rzędy na górze
# intent: null
# slots:
1 Najlepiej null NoLabel
2 rzędy null NoLabel
3 na null NoLabel
4 górze null NoLabel
# text: Wybieram 6-7
# intent: inform inform
# slots: 7:seat
1 Wybieram inform inform NoLabel
2 6-7 inform inform NoLabel
1 Wybieram inform_inform NoLabel
2 6-7 inform_inform NoLabel
# text: To poproszę bilet ulgowy
# text: 123@132.pl
# intent: inform
# slots: ulgowy:tickettype
1 To inform NoLabel
2 poproszę inform NoLabel
3 bilet inform NoLabel
4 ulgowy inform B-tickettype
# slots: 123@132.pl:e-mail
1 123@132.pl inform B-e-mail
# text: tak, daleko od ekranu
# intent: inform
# slots: dalekoodekranu:seats
1 tak inform NoLabel
2 , inform NoLabel
3 daleko inform B-seats
4 od inform I-seats
5 ekranu inform I-seats
# text: Chciał bym zamówić bilet na film Minionki dzisiaj o 18.30
# intent: inform inform inform
# slots: 18.30:time
1 Chciał inform_inform_inform NoLabel
2 bym inform_inform_inform NoLabel
3 zamówić inform_inform_inform NoLabel
4 bilet inform_inform_inform NoLabel
5 na inform_inform_inform NoLabel
6 film inform_inform_inform NoLabel
7 Minionki inform_inform_inform NoLabel
8 dzisiaj inform_inform_inform NoLabel
9 o inform_inform_inform NoLabel
10 18.30 inform_inform_inform B-time
# text: 123456789
# intent: inform
# slots: 123456789:phone
1 123456789 inform B-phone
# text: Czy na 'batman i zemsta muminków' w ten dzień dostępne są miejsca w ostatnim rzędzie?
# intent: request
# slots: sit:task,Batmanizemstamuminków:movie
1 Czy request NoLabel
2 na request NoLabel
3 batman request B-movie
4 i request I-movie
5 zemsta request I-movie
6 muminków request I-movie
7 w request NoLabel
8 ten request NoLabel
9 dzień request NoLabel
10 dostępne request NoLabel
11 są request NoLabel
12 miejsca request NoLabel
13 w request NoLabel
14 ostatnim request NoLabel
15 rzędzie request NoLabel
16 ? request NoLabel
# text: Przed filmem
# intent: inform
# slots:
1 Przed inform NoLabel
2 filmem inform NoLabel
# text: W sumie tak. Interesuje mnie najbliższa sobota
# text: Chciałbym dowiedzieć się czegoś o aktualnym repertuarze
# intent: request
# slots: closestscreenings:task
1 W request NoLabel
2 sumie request NoLabel
3 tak request NoLabel
4 . request NoLabel
5 Interesuje request NoLabel
6 mnie request NoLabel
7 najbliższa request NoLabel
8 sobota request NoLabel
1 Chciałbym request NoLabel
2 dowiedzieć request NoLabel
3 się request NoLabel
4 czegoś request NoLabel
5 o request NoLabel
6 aktualnym request NoLabel
7 repertuarze request NoLabel

File diff suppressed because it is too large Load Diff