Lab. 8 i 9

This commit is contained in:
Paweł Skórzewski 2024-05-15 12:20:09 +02:00
parent a86c353753
commit b568122036
2 changed files with 13 additions and 14 deletions

View File

@ -20,7 +20,7 @@
"cell_type": "markdown", "cell_type": "markdown",
"metadata": {}, "metadata": {},
"source": [ "source": [
"Proszę wykonać zadanie 1 lub zadanie 2 (nie oba naraz). Zadanie 3 można zrobić niezależnie." "Proszę wykonać zadanie 1 lub zadanie 2 (nie oba naraz)."
] ]
}, },
{ {
@ -45,17 +45,17 @@
"- wynik widoczny na platformie zarówno dla dev i dla test\n", "- wynik widoczny na platformie zarówno dla dev i dla test\n",
"- wynik dla dev i test lepszy (niższy) niż 6.50 (liczone przy pomocy geval)\n", "- wynik dla dev i test lepszy (niższy) niż 6.50 (liczone przy pomocy geval)\n",
"- deadline do **22 maja 2024** przed zajęciami\n", "- deadline do **22 maja 2024** przed zajęciami\n",
"- commitując rozwiązanie proszę również umieścić rozwiązanie w pliku /run.py (czyli na szczycie katalogu). Można przekonwertować jupyter do pliku python przez File → Download as → Python. Rozwiązanie nie musi być w pythonie, może być w innym języku.\n", "\n",
"- zadania wykonujemy samodzielnie\n", "- Zadanie można wykonać na zbiorze **https://gonito.csi.wmi.amu.edu.pl/challenge/challenging-america-word-gap-prediction** lub jego polskim odpowiedniku: **https://gonito.csi.wmi.amu.edu.pl/challenge/retro-gap**\n",
"- w nazwie commita podaj nr indeksu\n",
"- w tagach podaj **neural-network** oraz **5gram**!\n",
"- zadanie tym razem jest dla polskiego odpowiednika word-gap: **https://gonito.csi.wmi.amu.edu.pl/challenge/retro-gap**\n",
"- metryka to LogLossHashed (praktycznie to samo, co PerlpexityHased). Przelicznik, to LogLossHased = log(PerplexityHashed). Podając równe prawd. dla każdego słowa dostaniemy 6.93, bo log(1024) = 6.93\n", "- metryka to LogLossHashed (praktycznie to samo, co PerlpexityHased). Przelicznik, to LogLossHased = log(PerplexityHashed). Podając równe prawd. dla każdego słowa dostaniemy 6.93, bo log(1024) = 6.93\n",
"\n", "\n",
"Uwagi dla wysyłania zadania na Gonito:\n",
"- commitując rozwiązanie proszę również umieścić rozwiązanie w pliku /run.py (czyli na szczycie katalogu). Można przekonwertować jupyter do pliku python przez File → Download as → Python. Rozwiązanie nie musi być w pythonie, może być w innym języku.\n",
"- w nazwie commita podaj nr indeksu\n",
"- w tagach podaj **neural-network** oraz **5gram**\n",
"\n",
"Punktacja:\n", "Punktacja:\n",
"- podstawa: 60 punktów\n", "- 60 punktów\n"
"- 40 punktów z najlepszy wynik z 2 grup\n",
"- 20 punktów z 3 kolejno najlepszych wyników z 2 grup\n"
] ]
}, },
{ {
@ -92,16 +92,15 @@
"source": [ "source": [
"## Zadanie 2\n", "## Zadanie 2\n",
"\n", "\n",
"Proszę zrobić parameter Hyperparameter Tuning dla zadania 1 i zaprezentować na forum grupy razem z wnioskami\n", "Proszę zrobić parameter Hyperparameter Tuning dla zadania 1\n",
"\n", "\n",
"- wymóg wyniku najlepszego modelu, conajwyżej 6.10\n", "- wymóg wyniku najlepszego modelu, conajwyżej 6.10\n",
"- wnioski nie muszą być specjalnie rozbudowane, prezentacja może trwać 3-5minut lub dłużej\n", "- wnioski nie muszą być specjalnie rozbudowane, prezentacja może trwać 3-5minut lub dłużej\n",
"- należy wybrać dla siebie metodę hypermarameter tuningu\n", "- należy wybrać dla siebie metodę hypermarameter tuningu\n",
"- należy stworzyć conajmniej 10 modeli, należy pokazać wyniku dla conajmniej paru\n", "- należy stworzyć conajmniej 10 modeli, należy pokazać wyniku dla conajmniej paru\n",
"- oczywiście kod musi być automatyczny (a nie ręcznie zmieniamy paratery), natomiast nie ma wymogu korzystania ze specjalnych bibliotek\n", "- oczywiście kod musi być automatyczny (a nie ręcznie zmieniamy paratery), natomiast nie ma wymogu korzystania ze specjalnych bibliotek\n",
"- podstawa punktów 100\n", "- podstawa punktów: **100**\n",
"- za wynik lepszy (niższy) niż 5.50 +20 punktów\n", "- za wynik lepszy (niższy) niż 5.50: **+20** punktów\n",
"- użycie GPU na dowolnym cloud lub od WMI + 30 punktów\n",
"- deadline: **22 maja 2024** przed zajęciami" "- deadline: **22 maja 2024** przed zajęciami"
] ]
} }

View File

@ -5,7 +5,7 @@
"metadata": {}, "metadata": {},
"source": [ "source": [
"## Modelowanie języka laboratoria\n", "## Modelowanie języka laboratoria\n",
"### 24 kwietnia 2024\n", "### 15 maja 2024\n",
"# 9. Model neuronowy rekurencyjny" "# 9. Model neuronowy rekurencyjny"
] ]
}, },