s151636/Generic_DialogSystem
s151636/Generic_DialogSystem
3
2
Fork 1
Code Issues Pull Requests Projects Releases Wiki Activity

add evaluation

Browse Source
This commit is contained in:
Olga Kwoczak 2023-06-22 13:43:44 +02:00
parent ef2e4fc3f7
commit 781623bf5e
1 changed files with 10 additions and 0 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

10
evaluation.md Normal file
View File

@ -0,0 +1,10 @@
##Ewaluacja systemu przez użytkowników
System oceniło czworo użytkowników. Rozumienie systemu przez użytkownika zostało ocenione na średnio 4.0, jednak rozumienie użytkownika przez system na jedynie 2.25. Łatwość poszukiwania produktów, a także znalezienie odpowiedzi na pytania, ankietowani
wycenili średnio na ocenę 3.0. Byli zadowoleni z tempa interakcji oraz komfortu rozmowy - średnia ocena to odpowiednio 5.0 oraz 4.0. Użytkownikom zabrakło kilku produktów, których poszukiwali, np. zupki chińskiej, coca-coli, parówek. System niestety nie posiadał funkcjonalności, których oczekiwali użytkownicy. Mimo to 3 na 4 użytkowników planuje używać systemu w przyszłości.
##Podsumowanie
Stworzony system posiada standardową architekturę systemu dialogowego. Poszczególne moduły odpowiedzialne za przekazywanie tekstu bądź ram, tworzone pojedynczo, realizowały zadania NLU, DM, DP oraz NLG. Problemtyczny okazała się kwestia połączenia systemu w całość, ponieważ poszczególne moduły różniły się sposobem działania. Z tego powodu nie zrealizowano wszystkich wymagań, założonych w początkowej dokumentacji, takich jak: dodawanie i usuwanie przedmiotów do koszyka, finalizacja zakupów czy obsługa płatności. Aktualnie system potrafi poinformować o produktach dostępnych w sklepie, a także sugerować dostępne promocje bądź produkty. Na tej podstawie, oraz przestawionej powyżej analizie ewaluacji, system uznano za projekt do dalszego rozwoju.