Rozbudowano rozdział I pracy, do rekurencyjnych sieci neuronowych

This commit is contained in:
CezaryPukownik 2020-05-25 22:39:44 +02:00
parent 845ac0025e
commit b6f766f957
21 changed files with 731 additions and 293 deletions

View File

@ -12,40 +12,64 @@
\@writefile{lof}{\addvspace {10\p@ }} \@writefile{lof}{\addvspace {10\p@ }}
\@writefile{lot}{\addvspace {10\p@ }} \@writefile{lot}{\addvspace {10\p@ }}
\@writefile{toc}{\contentsline {section}{\numberline {1.1\relax .\enspace }Regresja liniowa}{13}\protected@file@percent } \@writefile{toc}{\contentsline {section}{\numberline {1.1\relax .\enspace }Regresja liniowa}{13}\protected@file@percent }
\@writefile{toc}{\contentsline {section}{\numberline {1.2\relax .\enspace }Funkcja kosztu oraz metody gradientowe}{13}\protected@file@percent } \@writefile{lof}{\contentsline {figure}{\numberline {1.1}{\ignorespaces Regresja liniowa jednej zmiennej\relax }}{14}\protected@file@percent }
\@writefile{lof}{\contentsline {figure}{\numberline {1.1.}{\ignorespaces Regresja liniowa jednej zmiennej}}{14}\protected@file@percent } \providecommand*\caption@xref[2]{\@setref\relax\@undefined{#1}}
\newlabel{fig:linreg}{{1.1}{14}} \newlabel{fig:linreg}{{1.1}{14}}
\@writefile{toc}{\contentsline {subsection}{\numberline {1.2.1\relax .\enspace }Funkcja kosztu}{14}\protected@file@percent } \@writefile{toc}{\contentsline {section}{\numberline {1.2\relax .\enspace }Uczenie modelu}{14}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {1.2.2\relax .\enspace }Metoda gradientu prostego}{15}\protected@file@percent } \@writefile{toc}{\contentsline {subsection}{\numberline {1.2.1\relax .\enspace }Funkcja kosztu}{15}\protected@file@percent }
\@writefile{lof}{\contentsline {figure}{\numberline {1.2.}{\ignorespaces źródlo: Przykład sieci neuronowej}}{15}\protected@file@percent } \@writefile{toc}{\contentsline {subsection}{\numberline {1.2.2\relax .\enspace }Znajdowanie minimum funkcji}{15}\protected@file@percent }
\newlabel{fig:neuralnet1}{{1.2}{15}} \@writefile{toc}{\contentsline {subsection}{\numberline {1.2.3\relax .\enspace }Metody gradientowe}{15}\protected@file@percent }
\@writefile{toc}{\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 2\relax .\enspace Reprezentacja danych muzycznych}{17}\protected@file@percent } \@writefile{lof}{\contentsline {figure}{\numberline {1.2}{\ignorespaces Wizualizacja algorytmu gradientu prostego\relax }}{16}\protected@file@percent }
\newlabel{fig:gradient}{{1.2}{16}}
\@writefile{lof}{\contentsline {subfigure}{\numberline{(a)}{\ignorespaces {Wyznaczenie gradientu}}}{16}\protected@file@percent }
\@writefile{lof}{\contentsline {subfigure}{\numberline{(b)}{\ignorespaces {Iteracja kolejnych punktów}}}{16}\protected@file@percent }
\@writefile{toc}{\contentsline {section}{\numberline {1.3\relax .\enspace }Regresja liniowa jako model sieci neuronowej}{17}\protected@file@percent }
\newlabel{section:linreg}{{1.3}{17}}
\@writefile{lof}{\contentsline {figure}{\numberline {1.3}{\ignorespaces Regresja liniowa jako model sieci neuronowej\relax }}{17}\protected@file@percent }
\newlabel{fig:neural_model_one}{{1.3}{17}}
\@writefile{lof}{\contentsline {figure}{\numberline {1.4}{\ignorespaces Regresja liniowa wielu zmiennych jako model sieci nauronowej\relax }}{18}\protected@file@percent }
\newlabel{fig:neural_model_multi}{{1.4}{18}}
\@writefile{toc}{\contentsline {section}{\numberline {1.4\relax .\enspace }Funkcje aktywacji}{19}\protected@file@percent }
\@writefile{lof}{\contentsline {figure}{\numberline {1.5}{\ignorespaces Funkcja logistyczna\relax }}{20}\protected@file@percent }
\newlabel{fig:sigmoid}{{1.5}{20}}
\@writefile{toc}{\contentsline {section}{\numberline {1.5\relax .\enspace }Głębokie sieci neuronowe}{20}\protected@file@percent }
\@writefile{lof}{\contentsline {figure}{\numberline {1.6}{\ignorespaces Przykład modelu sieci neuronowej\relax }}{21}\protected@file@percent }
\newlabel{fig:neural_net_1}{{1.6}{21}}
\@writefile{toc}{\contentsline {subsection}{\numberline {1.5.1\relax .\enspace }Jednokierunkowe sieci neuronowe}{21}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {1.5.2\relax .\enspace }Propagacja wsteczna błędu}{21}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {1.5.3\relax .\enspace }Autoencodery}{22}\protected@file@percent }
\@writefile{lof}{\contentsline {figure}{\numberline {1.7}{\ignorespaces Przykład modelu autoencodera\relax }}{22}\protected@file@percent }
\newlabel{fig:autoencoder}{{1.7}{22}}
\@writefile{toc}{\contentsline {subsection}{\numberline {1.5.4\relax .\enspace }Rekurencyjne sieci neuronowe}{23}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {1.5.5\relax .\enspace }Długa pamięć krótkotrwała}{23}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {1.5.6\relax .\enspace }Model sieci seq2seq}{23}\protected@file@percent }
\@writefile{toc}{\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 2\relax .\enspace Reprezentacja danych muzycznych}{25}\protected@file@percent }
\@writefile{lof}{\addvspace {10\p@ }} \@writefile{lof}{\addvspace {10\p@ }}
\@writefile{lot}{\addvspace {10\p@ }} \@writefile{lot}{\addvspace {10\p@ }}
\@writefile{toc}{\contentsline {section}{\numberline {2.1\relax .\enspace }Podstawowe koncepcje}{17}\protected@file@percent } \@writefile{toc}{\contentsline {section}{\numberline {2.1\relax .\enspace }Podstawowe koncepcje}{25}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {2.1.1\relax .\enspace }Dźwięk muzyczny}{17}\protected@file@percent } \@writefile{toc}{\contentsline {subsection}{\numberline {2.1.1\relax .\enspace }Dźwięk muzyczny}{25}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {2.1.2\relax .\enspace }Sygnał dźwiękowy}{17}\protected@file@percent } \@writefile{toc}{\contentsline {subsection}{\numberline {2.1.2\relax .\enspace }Sygnał dźwiękowy}{25}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {2.1.3\relax .\enspace }Zapis nutowy}{17}\protected@file@percent } \@writefile{toc}{\contentsline {subsection}{\numberline {2.1.3\relax .\enspace }Zapis nutowy}{25}\protected@file@percent }
\@writefile{lof}{\contentsline {figure}{\numberline {2.1.}{\ignorespaces Przykład przebiegu fali dźwiękowej}}{18}\protected@file@percent } \@writefile{lof}{\contentsline {figure}{\numberline {2.1}{\ignorespaces Przykład przebiegu fali dźwiękowej\relax }}{26}\protected@file@percent }
\newlabel{fig:waveform}{{2.1}{18}} \newlabel{fig:waveform}{{2.1}{26}}
\@writefile{lof}{\contentsline {figure}{\numberline {2.2.}{\ignorespaces źródlo: https://www.infomusic.pl/poradnik/46934,poradnik-teoria-muzyki-rytm 5 kwietnia 2020 12:46}}{19}\protected@file@percent } \@writefile{lof}{\contentsline {figure}{\numberline {2.2}{\ignorespaces źródlo: https://www.infomusic.pl/poradnik/46934,poradnik-teoria-muzyki-rytm 5 kwietnia 2020 12:46\relax }}{27}\protected@file@percent }
\newlabel{fig:waveform}{{2.2}{19}} \newlabel{fig:waveform}{{2.2}{27}}
\@writefile{lot}{\contentsline {table}{\numberline {2.1.}{\ignorespaces Dźwięki symboliczne oraz ich częstosliwości}}{19}\protected@file@percent } \@writefile{lot}{\contentsline {table}{\numberline {2.1}{\ignorespaces Dźwięki symboliczne oraz ich częstosliwości\relax }}{27}\protected@file@percent }
\newlabel{table:dzwieki}{{2.1}{19}} \newlabel{table:dzwieki}{{2.1}{27}}
\@writefile{lof}{\contentsline {figure}{\numberline {2.3.}{\ignorespaces źródlo: https://amplitudaschool.weebly.com/lekcja-11.html 5 kwietnia 2020 13:24}}{20}\protected@file@percent } \@writefile{lof}{\contentsline {figure}{\numberline {2.3}{\ignorespaces źródlo: https://amplitudaschool.weebly.com/lekcja-11.html 5 kwietnia 2020 13:24\relax }}{28}\protected@file@percent }
\newlabel{fig:pieciolinia}{{2.3}{20}} \newlabel{fig:pieciolinia}{{2.3}{28}}
\@writefile{toc}{\contentsline {section}{\numberline {2.2\relax .\enspace }Cyfrowa reprezentacja muzyki symbolicznej}{20}\protected@file@percent } \@writefile{toc}{\contentsline {section}{\numberline {2.2\relax .\enspace }Cyfrowa reprezentacja muzyki symbolicznej}{28}\protected@file@percent }
\@writefile{toc}{\contentsline {subsection}{\numberline {2.2.1\relax .\enspace }Standard MIDI}{20}\protected@file@percent } \@writefile{toc}{\contentsline {subsection}{\numberline {2.2.1\relax .\enspace }Standard MIDI}{28}\protected@file@percent }
\@writefile{lof}{\contentsline {figure}{\numberline {2.4.}{\ignorespaces Fragment protokołu MIDI}}{21}\protected@file@percent } \@writefile{lof}{\contentsline {figure}{\numberline {2.4}{\ignorespaces Fragment protokołu MIDI\relax }}{29}\protected@file@percent }
\@writefile{toc}{\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 3\relax .\enspace Projekt}{23}\protected@file@percent } \@writefile{toc}{\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 3\relax .\enspace Projekt}{31}\protected@file@percent }
\@writefile{lof}{\addvspace {10\p@ }} \@writefile{lof}{\addvspace {10\p@ }}
\@writefile{lot}{\addvspace {10\p@ }} \@writefile{lot}{\addvspace {10\p@ }}
\@writefile{toc}{\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 4\relax .\enspace Podsumowanie}{25}\protected@file@percent } \@writefile{toc}{\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 4\relax .\enspace Podsumowanie}{33}\protected@file@percent }
\@writefile{lof}{\addvspace {10\p@ }} \@writefile{lof}{\addvspace {10\p@ }}
\@writefile{lot}{\addvspace {10\p@ }} \@writefile{lot}{\addvspace {10\p@ }}
\bibcite{}{1} \bibcite{}{1}
\bibcite{}{2} \bibcite{}{2}
\bibcite{}{3} \bibcite{}{3}
\@writefile{toc}{\contentsline {chapter}{Bibliografia}{27}\protected@file@percent } \@writefile{toc}{\contentsline {chapter}{Bibliografia}{35}\protected@file@percent }
\@writefile{lof}{\addvspace {10\p@ }} \@writefile{lof}{\addvspace {10\p@ }}
\@writefile{lot}{\addvspace {10\p@ }} \@writefile{lot}{\addvspace {10\p@ }}

View File

@ -1,19 +1,34 @@
# Fdb version 3 # Fdb version 3
["makeindex document.idx"] 1586120051 "document.idx" "document.ind" "document" 1587308705 ["makeindex document.idx"] 1590408180 "document.idx" "document.ind" "document" 1590439106
"document.idx" 1587304814 0 d41d8cd98f00b204e9800998ecf8427e "pdflatex" "document.idx" 1590414275 0 d41d8cd98f00b204e9800998ecf8427e "pdflatex"
(generated) (generated)
"document.ind"
"document.ilg" "document.ilg"
["pdflatex"] 1587304813 "/home/altarin/praca-magisterska/docs/document.tex" "/home/altarin/praca-magisterska/docs/document.pdf" "document" 1587308705 "document.ind"
"/home/altarin/praca-magisterska/docs/document.aux" 1587304814 4140 fe92d02eca12017bcd70981e9b88b107 "" ["pdflatex"] 1590414275 "/home/altarin/praca-magisterska/docs/document.tex" "/home/altarin/praca-magisterska/docs/document.pdf" "document" 1590439106
"/home/altarin/praca-magisterska/docs/document.tex" 1587308704 20948 a8e3447372cb1be2bbe8f0d022e247aa "" "/home/altarin/praca-magisterska/docs/document.aux" 1590414275 6824 81f4ea3b9dd4f0379db0da6e0d4bdde4 ""
"/usr/share/texmf-dist/fonts/enc/dvips/pl/plit.enc" 1572595918 1946 62ba825cda1ff16dbaa60d53ac60525a "" "/home/altarin/praca-magisterska/docs/document.tex" 1590439105 33356 4e4407cf830d411ea836363350d19007 ""
"/usr/share/texmf-dist/fonts/enc/dvips/cm-super/cm-super-t1.enc" 1572595918 2971 def0b6c1f0b107b3b936def894055589 ""
"/usr/share/texmf-dist/fonts/enc/dvips/pl/plme.enc" 1572595918 3126 59f33ff3e396436ebc36f4e7b444d5c4 "" "/usr/share/texmf-dist/fonts/enc/dvips/pl/plme.enc" 1572595918 3126 59f33ff3e396436ebc36f4e7b444d5c4 ""
"/usr/share/texmf-dist/fonts/enc/dvips/pl/plmi.enc" 1572595918 2005 f094775651a1386335c158fb632529f1 "" "/usr/share/texmf-dist/fonts/enc/dvips/pl/plmi.enc" 1572595918 2005 f094775651a1386335c158fb632529f1 ""
"/usr/share/texmf-dist/fonts/enc/dvips/pl/plms.enc" 1572595918 2468 3f9e2f3088bcf5b581dfc367d71e7d95 "" "/usr/share/texmf-dist/fonts/enc/dvips/pl/plms.enc" 1572595918 2468 3f9e2f3088bcf5b581dfc367d71e7d95 ""
"/usr/share/texmf-dist/fonts/enc/dvips/pl/plrm.enc" 1572595918 1944 1845592c00bbe510359fd6887a83ff72 "" "/usr/share/texmf-dist/fonts/enc/dvips/pl/plrm.enc" 1572595918 1944 1845592c00bbe510359fd6887a83ff72 ""
"/usr/share/texmf-dist/fonts/enc/dvips/pl/plsc.enc" 1572595918 1970 17f08459267325f59652d212eb7ed719 ""
"/usr/share/texmf-dist/fonts/map/fontname/texfonts.map" 1572595918 3332 103109f5612ad95229751940c61aada0 "" "/usr/share/texmf-dist/fonts/map/fontname/texfonts.map" 1572595918 3332 103109f5612ad95229751940c61aada0 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx1095.tfm" 1572595918 3584 21b378cca2e40816b0e6d74a4dc98f04 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx1200.tfm" 1572595918 3584 402da0b29eafbad07963b1224b222f18 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx1440.tfm" 1572595918 3584 13049b61b922a28b158a38aeff75ee9b ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx2074.tfm" 1572595918 3584 7666d038713b9e38abb5c2e0f6972188 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx2488.tfm" 1572595918 3584 0181dbc4d429c3ba4e30feba37b5df96 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/eccc1200.tfm" 1572595918 3072 1e3dcc56ea731d0f3645bbefe8c8608c ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm0600.tfm" 1572595918 3584 291a5713401683441e0a8c8f4417b17b ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm0700.tfm" 1572595918 3584 cf973739aac7ab6247f9150296af7954 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm0800.tfm" 1572595918 3584 49064b465390a8e316a3c8417a050403 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm1000.tfm" 1572595918 3584 adb004a0c8e7c46ee66cad73671f37b4 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm1095.tfm" 1572595918 3584 929cdff2b7a8c11bd4d49fd68cb0ae70 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm1200.tfm" 1572595918 3584 f80ddd985bd00e29e9a6047ebd9d4781 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm1440.tfm" 1572595918 3584 3169d30142b88a27d4ab0e3468e963a2 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm2074.tfm" 1572595918 3584 8e2870ec7aa9776f59654942b0923f51 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm2488.tfm" 1572595918 3584 406ad7b70d9a41f7833f92b6313150c8 ""
"/usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecti1095.tfm" 1572595918 3072 b73d2778cc3af44970de4de5e032d7f6 ""
"/usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam10.tfm" 1572595918 916 f87d7c45f9c908e672703b83b72241a3 "" "/usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam10.tfm" 1572595918 916 f87d7c45f9c908e672703b83b72241a3 ""
"/usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam5.tfm" 1572595918 924 9904cf1d39e9767e7a3622f2a125a565 "" "/usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam5.tfm" 1572595918 924 9904cf1d39e9767e7a3622f2a125a565 ""
"/usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam7.tfm" 1572595918 928 2dc8d444221b7a635bb58038579b861a "" "/usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam7.tfm" 1572595918 928 2dc8d444221b7a635bb58038579b861a ""
@ -22,9 +37,6 @@
"/usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm7.tfm" 1572595918 940 228d6584342e91276bf566bcf9716b83 "" "/usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm7.tfm" 1572595918 940 228d6584342e91276bf566bcf9716b83 ""
"/usr/share/texmf-dist/fonts/tfm/public/cm/cmr10.tfm" 1572595918 1296 45809c5a464d5f32c8f98ba97c1bb47f "" "/usr/share/texmf-dist/fonts/tfm/public/cm/cmr10.tfm" 1572595918 1296 45809c5a464d5f32c8f98ba97c1bb47f ""
"/usr/share/texmf-dist/fonts/tfm/public/cm/cmr12.tfm" 1572595918 1288 655e228510b4c2a1abe905c368440826 "" "/usr/share/texmf-dist/fonts/tfm/public/cm/cmr12.tfm" 1572595918 1288 655e228510b4c2a1abe905c368440826 ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plbx10.tfm" 1572595918 2120 c2bca6a74408b1687f9d32e4fd3978fc ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plbx12.tfm" 1572595918 2112 e31d5b368c33d42906fcc26c9ca0a59c ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plcsc10.tfm" 1572595918 2140 d2ca82625bedca0b1948a5da5764d911 ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plex10.tfm" 1572595918 992 93098cecc00cfdb7e881cb8983ca7545 "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plex10.tfm" 1572595918 992 93098cecc00cfdb7e881cb8983ca7545 ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plmi10.tfm" 1572595918 1528 c9811a5c54036a0d60617f9ae77b990e "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plmi10.tfm" 1572595918 1528 c9811a5c54036a0d60617f9ae77b990e ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plmi12.tfm" 1572595918 1524 234f65aa0171d619f32097d0f9186df0 "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plmi12.tfm" 1572595918 1524 234f65aa0171d619f32097d0f9186df0 ""
@ -34,7 +46,6 @@
"/usr/share/texmf-dist/fonts/tfm/public/pl/plmi8.tfm" 1572595918 1520 1a3ee2ce8d697eaf56e43f8d2c40cb71 "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plmi8.tfm" 1572595918 1520 1a3ee2ce8d697eaf56e43f8d2c40cb71 ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plr10.tfm" 1572595918 2080 5c3eb4fec3b89def05dc3a4c6b93fb7c "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plr10.tfm" 1572595918 2080 5c3eb4fec3b89def05dc3a4c6b93fb7c ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plr12.tfm" 1572595918 2076 e1758d4caaf275a731cf0532450f26f0 "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plr12.tfm" 1572595918 2076 e1758d4caaf275a731cf0532450f26f0 ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plr17.tfm" 1572595918 2080 b61c70f1a22b45d92358c39b67ea9906 ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plr5.tfm" 1572595918 2008 3b7792da2ec68e9d8515961176bc983d "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plr5.tfm" 1572595918 2008 3b7792da2ec68e9d8515961176bc983d ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plr6.tfm" 1572595918 2088 aa80c569a200447488b571f8bf7b132b "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plr6.tfm" 1572595918 2088 aa80c569a200447488b571f8bf7b132b ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plr7.tfm" 1572595918 2088 3950be4df310cc88dade7a45ba964220 "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plr7.tfm" 1572595918 2088 3950be4df310cc88dade7a45ba964220 ""
@ -44,20 +55,28 @@
"/usr/share/texmf-dist/fonts/tfm/public/pl/plsy6.tfm" 1572595918 1300 730d55d47130c8c9a62c9e7eab4ae96a "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plsy6.tfm" 1572595918 1300 730d55d47130c8c9a62c9e7eab4ae96a ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plsy7.tfm" 1572595918 1304 a6a2c86c403d8bc56664eeac17804b8a "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plsy7.tfm" 1572595918 1304 a6a2c86c403d8bc56664eeac17804b8a ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plsy8.tfm" 1572595918 1304 3b6e6a90176144a582c7bcae45156f9b "" "/usr/share/texmf-dist/fonts/tfm/public/pl/plsy8.tfm" 1572595918 1304 3b6e6a90176144a582c7bcae45156f9b ""
"/usr/share/texmf-dist/fonts/tfm/public/pl/plti10.tfm" 1572595918 2240 33876944658f33d5fc3eacb794ebb2f3 ""
"/usr/share/texmf-dist/fonts/type1/public/amsfonts/symbols/msbm10.pfb" 1572595918 34694 ad62b13721ee8eda1dcc8993c8bd7041 "" "/usr/share/texmf-dist/fonts/type1/public/amsfonts/symbols/msbm10.pfb" 1572595918 34694 ad62b13721ee8eda1dcc8993c8bd7041 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plbx10.pfb" 1572595918 27050 0da5f310861fb948b3c5e6a53aad685b "" "/usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1095.pfb" 1572595918 154600 ea54091d31de803b613ba9e80ca51709 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plbx12.pfb" 1572595918 26733 3fa55bab1df289b642fa8cd9e61fb25f "" "/usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1200.pfb" 1572595918 140176 d4962f948b4cc0adf4d3dde77a128c95 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plcsc10.pfb" 1572595918 26854 260e35f0156087ec159362abd8f70655 "" "/usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1440.pfb" 1572595918 135942 859a90cad7494a1e79c94baf546d7de5 ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx2074.pfb" 1572595918 140194 627cc7f36c05b80e25d178974ccb3442 ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx2488.pfb" 1572595918 135938 299ac3a69892db3b7674a8b2543b0a77 ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfcc1200.pfb" 1572595918 108594 1a08a22405bc37650b977f219cc3597d ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm0700.pfb" 1572595918 154599 ded6d7c21788a8930eadc7fef7518942 ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm0800.pfb" 1572595918 164227 3df942b4ff2124425d8fb1b6d3e01c7a ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1000.pfb" 1572595918 138258 6525c253f16cededa14c7fd0da7f67b2 ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1095.pfb" 1572595918 145929 f25e56369a345c4ff583b067cd87ce8e ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1200.pfb" 1572595918 136101 f533469f523533d38317ab5729d00c8a ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1440.pfb" 1572595918 131078 d96015a2fa5c350129e933ca070b2484 ""
"/usr/share/texmf-dist/fonts/type1/public/cm-super/sfti1095.pfb" 1572595918 196446 8fbbe4b97b83e5182def6d29a44e57fb ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plex10.pfb" 1572595918 22371 094f80a5a689f2eefc72bff87ecbc407 "" "/usr/share/texmf-dist/fonts/type1/public/pl/plex10.pfb" 1572595918 22371 094f80a5a689f2eefc72bff87ecbc407 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plmi12.pfb" 1572595918 29704 5868c49c125729105d39d7e6e5638dd3 "" "/usr/share/texmf-dist/fonts/type1/public/pl/plmi12.pfb" 1572595918 29704 5868c49c125729105d39d7e6e5638dd3 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plmi6.pfb" 1572595918 30338 4bdf6a32e66b53760b57428a52eeec91 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plmi8.pfb" 1572595918 29648 f588152f66151a0a6061bdcc4f5c0f53 "" "/usr/share/texmf-dist/fonts/type1/public/pl/plmi8.pfb" 1572595918 29648 f588152f66151a0a6061bdcc4f5c0f53 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plr10.pfb" 1572595918 27396 59c827d3c8566d0d9cbf81ac7c0d162a ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plr12.pfb" 1572595918 27754 6f5ae55af1b64df2aab0bbeada447136 "" "/usr/share/texmf-dist/fonts/type1/public/pl/plr12.pfb" 1572595918 27754 6f5ae55af1b64df2aab0bbeada447136 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plr7.pfb" 1572595918 27523 c9185de4b4f361086bdc0d056fdd2b09 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plr8.pfb" 1572595918 27613 078d72cee58a40f102986ecdd23ed1c6 "" "/usr/share/texmf-dist/fonts/type1/public/pl/plr8.pfb" 1572595918 27613 078d72cee58a40f102986ecdd23ed1c6 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plsy10.pfb" 1572595918 26714 6fe260cd3a16c4a700b121f4edac67f2 "" "/usr/share/texmf-dist/fonts/type1/public/pl/plsy10.pfb" 1572595918 26714 6fe260cd3a16c4a700b121f4edac67f2 ""
"/usr/share/texmf-dist/fonts/type1/public/pl/plti10.pfb" 1572595918 32502 73b348676aac6ae1f3a22f93f5f2370b "" "/usr/share/texmf-dist/fonts/type1/public/pl/plsy8.pfb" 1572595918 26387 98cf0141874ba26c215635f2b6f404e5 ""
"/usr/share/texmf-dist/tex/context/base/mkii/supp-pdf.mkii" 1572595918 71627 94eb9990bed73c364d7f53f960cc8c5b "" "/usr/share/texmf-dist/tex/context/base/mkii/supp-pdf.mkii" 1572595918 71627 94eb9990bed73c364d7f53f960cc8c5b ""
"/usr/share/texmf-dist/tex/generic/oberdiek/etexcmds.sty" 1572595918 7612 729a8cc22a1ee0029997c7f74717ae05 "" "/usr/share/texmf-dist/tex/generic/oberdiek/etexcmds.sty" 1572595918 7612 729a8cc22a1ee0029997c7f74717ae05 ""
"/usr/share/texmf-dist/tex/generic/oberdiek/ifluatex.sty" 1572595918 7324 2310d1247db0114eb4726807c8837a0e "" "/usr/share/texmf-dist/tex/generic/oberdiek/ifluatex.sty" 1572595918 7324 2310d1247db0114eb4726807c8837a0e ""
@ -128,9 +147,13 @@
"/usr/share/texmf-dist/tex/latex/amsmath/amsmath.sty" 1572595918 85514 eb45164c0234a1f8e9b74aa2f583bc21 "" "/usr/share/texmf-dist/tex/latex/amsmath/amsmath.sty" 1572595918 85514 eb45164c0234a1f8e9b74aa2f583bc21 ""
"/usr/share/texmf-dist/tex/latex/amsmath/amsopn.sty" 1572595918 4116 32e6abd27229755a83a8b7f18e583890 "" "/usr/share/texmf-dist/tex/latex/amsmath/amsopn.sty" 1572595918 4116 32e6abd27229755a83a8b7f18e583890 ""
"/usr/share/texmf-dist/tex/latex/amsmath/amstext.sty" 1572595918 2432 8ff93b1137020e8f21930562a874ae66 "" "/usr/share/texmf-dist/tex/latex/amsmath/amstext.sty" 1572595918 2432 8ff93b1137020e8f21930562a874ae66 ""
"/usr/share/texmf-dist/tex/latex/base/fontenc.sty" 1572595918 4571 68999fcec19eaab44a6e13159b4dca8a ""
"/usr/share/texmf-dist/tex/latex/base/inputenc.sty" 1572595918 5050 aae684508bdbe288a555910330f17c1b "" "/usr/share/texmf-dist/tex/latex/base/inputenc.sty" 1572595918 5050 aae684508bdbe288a555910330f17c1b ""
"/usr/share/texmf-dist/tex/latex/base/makeidx.sty" 1572595918 1940 56d7e65bf2f613c7fbe5d4befdc5fdf6 "" "/usr/share/texmf-dist/tex/latex/base/makeidx.sty" 1572595918 1940 56d7e65bf2f613c7fbe5d4befdc5fdf6 ""
"/usr/share/texmf-dist/tex/latex/base/ot4enc.def" 1572595918 4740 d5944d0d1491b2196654df90ff9fd0cc "" "/usr/share/texmf-dist/tex/latex/base/ot4enc.def" 1572595918 4740 d5944d0d1491b2196654df90ff9fd0cc ""
"/usr/share/texmf-dist/tex/latex/base/t1enc.def" 1572595918 10687 a7567925dae1870ed1d4a2e413995d60 ""
"/usr/share/texmf-dist/tex/latex/caption/caption.sty" 1572595918 68688 0117141b30e5c5fec86154f541dec0d0 ""
"/usr/share/texmf-dist/tex/latex/caption/caption3.sty" 1572595918 68575 41af57b9d23e31041c5fb63021aa6d56 ""
"/usr/share/texmf-dist/tex/latex/fancyhdr/fancyhdr.sty" 1572595918 11128 a53805799bebfed6358fc1658a18e41f "" "/usr/share/texmf-dist/tex/latex/fancyhdr/fancyhdr.sty" 1572595918 11128 a53805799bebfed6358fc1658a18e41f ""
"/usr/share/texmf-dist/tex/latex/graphics-cfg/color.cfg" 1572595918 1213 620bba36b25224fa9b7e1ccb4ecb76fd "" "/usr/share/texmf-dist/tex/latex/graphics-cfg/color.cfg" 1572595918 1213 620bba36b25224fa9b7e1ccb4ecb76fd ""
"/usr/share/texmf-dist/tex/latex/graphics-cfg/graphics.cfg" 1572595918 1224 978390e9c2234eab29404bc21b268d1e "" "/usr/share/texmf-dist/tex/latex/graphics-cfg/graphics.cfg" 1572595918 1224 978390e9c2234eab29404bc21b268d1e ""
@ -165,24 +188,32 @@
"/usr/share/texmf-dist/tex/latex/polski/omxplex.fd" 1572595918 1283 a1205ac8611390c6de04f8d76756c3c4 "" "/usr/share/texmf-dist/tex/latex/polski/omxplex.fd" 1572595918 1283 a1205ac8611390c6de04f8d76756c3c4 ""
"/usr/share/texmf-dist/tex/latex/polski/ot4cmr.fd" 1572595918 2599 8c16345f9109faed2ca2ff52e16d8a6f "" "/usr/share/texmf-dist/tex/latex/polski/ot4cmr.fd" 1572595918 2599 8c16345f9109faed2ca2ff52e16d8a6f ""
"/usr/share/texmf-dist/tex/latex/polski/polski.sty" 1572595918 13310 401406f54546887504ce1857a307089b "" "/usr/share/texmf-dist/tex/latex/polski/polski.sty" 1572595918 13310 401406f54546887504ce1857a307089b ""
"/usr/share/texmf-dist/tex/latex/subfig/subfig.sty" 1572595918 21369 9ef165ca6df8815c92e693146a376c92 ""
"/usr/share/texmf-dist/tex/latex/xcolor/xcolor.sty" 1572595918 55589 34128738f682d033422ca125f82e5d62 "" "/usr/share/texmf-dist/tex/latex/xcolor/xcolor.sty" 1572595918 55589 34128738f682d033422ca125f82e5d62 ""
"/usr/share/texmf-dist/web2c/texmf.cnf" 1572595918 33301 a3134070eacafb10b1f371612ce2650d "" "/usr/share/texmf-dist/web2c/texmf.cnf" 1572595918 33301 a3134070eacafb10b1f371612ce2650d ""
"/var/lib/texmf/fonts/map/pdftex/updmap/pdftex.map" 1586643947 334148 1b9d30ff8c861d6082e3e9bfccd8d7eb "" "/var/lib/texmf/fonts/map/pdftex/updmap/pdftex.map" 1589405448 334148 1b9d30ff8c861d6082e3e9bfccd8d7eb ""
"/var/lib/texmf/web2c/pdftex/pdflatex.fmt" 1586643938 8044939 a3f22fc5e900aed94fde03d7fc2cca11 "" "/var/lib/texmf/web2c/pdftex/pdflatex.fmt" 1589405429 8044939 b23304717ecc5ce8d46ad93c0d4cb929 ""
"chapter-style.sty" 1585406727 376 a4a2fb4e6d39af51a43bb1e06c2593ad "" "chapter-style.sty" 1585406727 376 a4a2fb4e6d39af51a43bb1e06c2593ad ""
"document.aux" 1587304814 4140 fe92d02eca12017bcd70981e9b88b107 "pdflatex" "document.aux" 1590414275 6824 81f4ea3b9dd4f0379db0da6e0d4bdde4 "pdflatex"
"document.ind" 1586120051 0 d41d8cd98f00b204e9800998ecf8427e "makeindex document.idx" "document.ind" 1590408180 0 d41d8cd98f00b204e9800998ecf8427e "makeindex document.idx"
"document.tex" 1587308704 20948 a8e3447372cb1be2bbe8f0d022e247aa "" "document.tex" 1590439105 33356 4e4407cf830d411ea836363350d19007 ""
"document.toc" 1587304814 1444 0f46b0697d6212c76a3578bd8618e9a9 "pdflatex" "document.toc" 1590414275 2369 5be341b4fcb8ccdb52a2ec5c3c8dc23d "pdflatex"
"images/autoencoder.png" 1590399556 23857 07547cd5bcc55280ad497e04dca51a4f ""
"images/gradient_descent_1_long.png" 1590334914 10075 03e26f48b0713f31b10c11831a32dc53 ""
"images/gradient_descent_2_long.png" 1590334941 8705 b70a4b02180426a4a74386cd3b33d85e ""
"images/linear_reg.png" 1586114366 8534 6b02c28c696018f318c414719b10ba20 "" "images/linear_reg.png" 1586114366 8534 6b02c28c696018f318c414719b10ba20 ""
"images/naural_model_multi.png" 1590348154 66955 72009d48341e9f9c82c275cdc06d2128 ""
"images/naural_model_one.png" 1590348337 22256 d18cdfcf9147acb57ba38b52c2b99f9a ""
"images/neural_net_1.png" 1590396699 53908 284ec3cd98726d30cdbeda25dd51e89a ""
"images/nuty_linia.png" 1586086475 21762 16cba37ab47ffa1339da455c8de72422 "" "images/nuty_linia.png" 1586086475 21762 16cba37ab47ffa1339da455c8de72422 ""
"images/sigmoid.png" 1590389797 9716 b83afcf14af2336533ae9a25190c325c ""
"images/wartosc_nut.jpg" 1586083515 48213 d311c2cedb2ed53dcf5eff20f70eda80 "" "images/wartosc_nut.jpg" 1586083515 48213 d311c2cedb2ed53dcf5eff20f70eda80 ""
"images/waveform.png" 1586077461 14738 0130027435b8f829d39b6afdaf56775a "" "images/waveform.png" 1586077461 14738 0130027435b8f829d39b6afdaf56775a ""
(generated) (generated)
"document.log"
"/home/altarin/praca-magisterska/docs/document.pdf" "/home/altarin/praca-magisterska/docs/document.pdf"
"document.pdf" "document.pdf"
"document.aux" "document.aux"
"document.idx"
"/home/altarin/praca-magisterska/docs/document.log"
"document.toc" "document.toc"
"document.log"
"/home/altarin/praca-magisterska/docs/document.log"
"document.idx"

View File

@ -154,6 +154,17 @@ INPUT /usr/share/texmf-dist/tex/latex/listings/lstmisc.sty
INPUT /usr/share/texmf-dist/tex/latex/listings/lstmisc.sty INPUT /usr/share/texmf-dist/tex/latex/listings/lstmisc.sty
INPUT /usr/share/texmf-dist/tex/latex/listings/listings.cfg INPUT /usr/share/texmf-dist/tex/latex/listings/listings.cfg
INPUT /usr/share/texmf-dist/tex/latex/listings/listings.cfg INPUT /usr/share/texmf-dist/tex/latex/listings/listings.cfg
INPUT /usr/share/texmf-dist/tex/latex/subfig/subfig.sty
INPUT /usr/share/texmf-dist/tex/latex/subfig/subfig.sty
INPUT /usr/share/texmf-dist/tex/latex/caption/caption.sty
INPUT /usr/share/texmf-dist/tex/latex/caption/caption.sty
INPUT /usr/share/texmf-dist/tex/latex/caption/caption3.sty
INPUT /usr/share/texmf-dist/tex/latex/caption/caption3.sty
INPUT /usr/share/texmf-dist/tex/latex/base/fontenc.sty
INPUT /usr/share/texmf-dist/tex/latex/base/fontenc.sty
INPUT /usr/share/texmf-dist/tex/latex/base/t1enc.def
INPUT /usr/share/texmf-dist/tex/latex/base/t1enc.def
INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm1200.tfm
OUTPUT /home/altarin/praca-magisterska/docs/document.idx OUTPUT /home/altarin/praca-magisterska/docs/document.idx
INPUT /home/altarin/praca-magisterska/docs/document.aux INPUT /home/altarin/praca-magisterska/docs/document.aux
INPUT /home/altarin/praca-magisterska/docs/document.aux INPUT /home/altarin/praca-magisterska/docs/document.aux
@ -184,13 +195,13 @@ INPUT /usr/share/texmf-dist/tex/generic/oberdiek/ifpdf.sty
INPUT /usr/share/texmf-dist/tex/generic/oberdiek/ifpdf.sty INPUT /usr/share/texmf-dist/tex/generic/oberdiek/ifpdf.sty
INPUT /usr/share/texmf-dist/tex/latex/latexconfig/epstopdf-sys.cfg INPUT /usr/share/texmf-dist/tex/latex/latexconfig/epstopdf-sys.cfg
INPUT /usr/share/texmf-dist/tex/latex/latexconfig/epstopdf-sys.cfg INPUT /usr/share/texmf-dist/tex/latex/latexconfig/epstopdf-sys.cfg
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plcsc10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/eccc1200.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr17.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm2074.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plbx12.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx2074.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr12.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm1440.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr17.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm2488.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plbx12.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx2488.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plbx12.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx1440.tfm
OUTPUT /home/altarin/praca-magisterska/docs/document.pdf OUTPUT /home/altarin/praca-magisterska/docs/document.pdf
INPUT /var/lib/texmf/fonts/map/pdftex/updmap/pdftex.map INPUT /var/lib/texmf/fonts/map/pdftex/updmap/pdftex.map
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr8.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr8.tfm
@ -218,22 +229,23 @@ INPUT /usr/share/texmf-dist/tex/latex/amsfonts/umsb.fd
INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm7.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm7.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm1095.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plmi10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plmi10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plsy10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plsy10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plbx12.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx1200.tfm
INPUT /home/altarin/praca-magisterska/docs/document.toc INPUT /home/altarin/praca-magisterska/docs/document.toc
INPUT /home/altarin/praca-magisterska/docs/document.toc INPUT /home/altarin/praca-magisterska/docs/document.toc
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plbx10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecbx1095.tfm
OUTPUT /home/altarin/praca-magisterska/docs/document.toc OUTPUT /home/altarin/praca-magisterska/docs/document.toc
INPUT /home/altarin/praca-magisterska/docs/images/linear_reg.png INPUT /home/altarin/praca-magisterska/docs/images/linear_reg.png
INPUT /home/altarin/praca-magisterska/docs/images/linear_reg.png INPUT /home/altarin/praca-magisterska/docs/images/linear_reg.png
INPUT /home/altarin/praca-magisterska/docs/images/linear_reg.png INPUT /home/altarin/praca-magisterska/docs/images/linear_reg.png
INPUT /home/altarin/praca-magisterska/docs/images/waveform.png INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm0800.tfm
INPUT /home/altarin/praca-magisterska/docs/images/waveform.png INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm0600.tfm
INPUT /home/altarin/praca-magisterska/docs/images/waveform.png INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm1000.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr7.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr7.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr5.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plr5.tfm
@ -249,32 +261,65 @@ INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msam5.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm10.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm7.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm7.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm5.tfm INPUT /usr/share/texmf-dist/fonts/tfm/public/amsfonts/symbols/msbm5.tfm
INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecrm0700.tfm
INPUT /home/altarin/praca-magisterska/docs/images/gradient_descent_1_long.png
INPUT /home/altarin/praca-magisterska/docs/images/gradient_descent_1_long.png
INPUT /home/altarin/praca-magisterska/docs/images/gradient_descent_1_long.png
INPUT /home/altarin/praca-magisterska/docs/images/gradient_descent_2_long.png
INPUT /home/altarin/praca-magisterska/docs/images/gradient_descent_2_long.png
INPUT /home/altarin/praca-magisterska/docs/images/gradient_descent_2_long.png
INPUT /home/altarin/praca-magisterska/docs/images/naural_model_one.png
INPUT /home/altarin/praca-magisterska/docs/images/naural_model_one.png
INPUT /home/altarin/praca-magisterska/docs/images/naural_model_one.png
INPUT /home/altarin/praca-magisterska/docs/images/naural_model_multi.png
INPUT /home/altarin/praca-magisterska/docs/images/naural_model_multi.png
INPUT /home/altarin/praca-magisterska/docs/images/naural_model_multi.png
INPUT /home/altarin/praca-magisterska/docs/images/sigmoid.png
INPUT /home/altarin/praca-magisterska/docs/images/sigmoid.png
INPUT /home/altarin/praca-magisterska/docs/images/sigmoid.png
INPUT /home/altarin/praca-magisterska/docs/images/neural_net_1.png
INPUT /home/altarin/praca-magisterska/docs/images/neural_net_1.png
INPUT /home/altarin/praca-magisterska/docs/images/neural_net_1.png
INPUT /home/altarin/praca-magisterska/docs/images/autoencoder.png
INPUT /home/altarin/praca-magisterska/docs/images/autoencoder.png
INPUT /home/altarin/praca-magisterska/docs/images/autoencoder.png
INPUT /home/altarin/praca-magisterska/docs/images/waveform.png
INPUT /home/altarin/praca-magisterska/docs/images/waveform.png
INPUT /home/altarin/praca-magisterska/docs/images/waveform.png
INPUT /home/altarin/praca-magisterska/docs/images/wartosc_nut.jpg INPUT /home/altarin/praca-magisterska/docs/images/wartosc_nut.jpg
INPUT /home/altarin/praca-magisterska/docs/images/wartosc_nut.jpg INPUT /home/altarin/praca-magisterska/docs/images/wartosc_nut.jpg
INPUT /home/altarin/praca-magisterska/docs/images/wartosc_nut.jpg INPUT /home/altarin/praca-magisterska/docs/images/wartosc_nut.jpg
INPUT /home/altarin/praca-magisterska/docs/images/nuty_linia.png INPUT /home/altarin/praca-magisterska/docs/images/nuty_linia.png
INPUT /home/altarin/praca-magisterska/docs/images/nuty_linia.png INPUT /home/altarin/praca-magisterska/docs/images/nuty_linia.png
INPUT /home/altarin/praca-magisterska/docs/images/nuty_linia.png INPUT /home/altarin/praca-magisterska/docs/images/nuty_linia.png
INPUT /usr/share/texmf-dist/fonts/tfm/public/pl/plti10.tfm INPUT /usr/share/texmf-dist/fonts/tfm/jknappen/ec/ecti1095.tfm
INPUT /home/altarin/praca-magisterska/docs/document.ind INPUT /home/altarin/praca-magisterska/docs/document.ind
INPUT /home/altarin/praca-magisterska/docs/document.ind INPUT /home/altarin/praca-magisterska/docs/document.ind
INPUT /home/altarin/praca-magisterska/docs/document.aux INPUT /home/altarin/praca-magisterska/docs/document.aux
INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plit.enc INPUT /usr/share/texmf-dist/fonts/enc/dvips/cm-super/cm-super-t1.enc
INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plrm.enc
INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plme.enc
INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plms.enc
INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plmi.enc INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plmi.enc
INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plsc.enc INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plms.enc
INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plme.enc
INPUT /usr/share/texmf-dist/fonts/enc/dvips/pl/plrm.enc
INPUT /usr/share/texmf-dist/fonts/type1/public/amsfonts/symbols/msbm10.pfb INPUT /usr/share/texmf-dist/fonts/type1/public/amsfonts/symbols/msbm10.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plbx10.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plbx12.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plcsc10.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plex10.pfb INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plex10.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plmi12.pfb INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plmi12.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plmi6.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plmi8.pfb INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plmi8.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plr10.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plr12.pfb INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plr12.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plr7.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plr8.pfb INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plr8.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plsy10.pfb INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plsy10.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plti10.pfb INPUT /usr/share/texmf-dist/fonts/type1/public/pl/plsy8.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1095.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1200.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1440.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx2074.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx2488.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfcc1200.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm0700.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm0800.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1000.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1095.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1200.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1440.pfb
INPUT /usr/share/texmf-dist/fonts/type1/public/cm-super/sfti1095.pfb

View File

@ -1,4 +1,4 @@
This is pdfTeX, Version 3.14159265-2.6-1.40.20 (TeX Live 2019/Arch Linux) (preloaded format=pdflatex 2020.4.12) 19 APR 2020 16:00 This is pdfTeX, Version 3.14159265-2.6-1.40.20 (TeX Live 2019/Arch Linux) (preloaded format=pdflatex 2020.5.13) 25 MAY 2020 15:44
entering extended mode entering extended mode
restricted \write18 enabled. restricted \write18 enabled.
file:line:error style messages enabled. file:line:error style messages enabled.
@ -389,8 +389,54 @@ File: lstmisc.sty 2019/09/10 1.8c (Carsten Heinz)
File: listings.cfg 2019/09/10 1.8c listings configuration File: listings.cfg 2019/09/10 1.8c listings configuration
)) ))
Package: listings 2019/09/10 1.8c (Carsten Heinz) Package: listings 2019/09/10 1.8c (Carsten Heinz)
\c@de=\count130 (/usr/share/texmf-dist/tex/latex/subfig/subfig.sty
\c@tw=\count131 Package: subfig 2005/06/28 ver: 1.3 subfig package
(/usr/share/texmf-dist/tex/latex/caption/caption.sty
Package: caption 2019/09/01 v3.3d Customizing captions (AR)
(/usr/share/texmf-dist/tex/latex/caption/caption3.sty
Package: caption3 2019/09/01 v1.8d caption3 kernel (AR)
Package caption3 Info: TeX engine: e-TeX on input line 64.
\captionmargin=\dimen169
\captionmargin@=\dimen170
\captionwidth=\dimen171
\caption@tempdima=\dimen172
\caption@indent=\dimen173
\caption@parindent=\dimen174
\caption@hangindent=\dimen175
Package caption Info: Unknown document class (or package),
(caption) standard defaults will be used.
)
Package caption Warning: Unsupported document class (or package) detected,
(caption) usage of the caption package is not recommended.
See the caption package documentation for explanation.
Package caption Info: \@makecaption = \long macro:#1#2->\addvspace \abovecaptionskip \bgroup \centeredlast #1.\enspace #2\par \egroup \vskip \belowcaptionskip .
\c@caption@flags=\count130
\c@ContinuedFloat=\count131
Package caption Info: listings package is loaded.
)
\c@KVtest=\count132
\sf@farskip=\skip55
\sf@captopadj=\dimen176
\sf@capskip=\skip56
\sf@nearskip=\skip57
\c@subfigure=\count133
\c@subfigure@save=\count134
\c@lofdepth=\count135
\c@subtable=\count136
\c@subtable@save=\count137
\c@lotdepth=\count138
\sf@top=\skip58
\sf@bottom=\skip59
) (/usr/share/texmf-dist/tex/latex/base/fontenc.sty
Package: fontenc 2018/08/11 v2.0j Standard LaTeX package
(/usr/share/texmf-dist/tex/latex/base/t1enc.def
File: t1enc.def 2018/08/11 v2.0j Standard LaTeX file
LaTeX Font Info: Redeclaring font encoding T1 on input line 48.
))
\c@de=\count139
\c@tw=\count140
\@indexfile=\write4 \@indexfile=\write4
\openout4 = `document.idx'. \openout4 = `document.idx'.
@ -409,32 +455,32 @@ LaTeX Warning: Label `' multiply defined.
) )
\openout1 = `document.aux'. \openout1 = `document.aux'.
LaTeX Font Info: Checking defaults for OML/cmm/m/it on input line 44. LaTeX Font Info: Checking defaults for OML/cmm/m/it on input line 55.
LaTeX Font Info: ... okay on input line 44. LaTeX Font Info: ... okay on input line 55.
LaTeX Font Info: Checking defaults for T1/cmr/m/n on input line 44. LaTeX Font Info: Checking defaults for T1/cmr/m/n on input line 55.
LaTeX Font Info: ... okay on input line 44. LaTeX Font Info: ... okay on input line 55.
LaTeX Font Info: Checking defaults for OT1/cmr/m/n on input line 44. LaTeX Font Info: Checking defaults for OT1/cmr/m/n on input line 55.
LaTeX Font Info: ... okay on input line 44. LaTeX Font Info: ... okay on input line 55.
LaTeX Font Info: Checking defaults for OMS/cmsy/m/n on input line 44. LaTeX Font Info: Checking defaults for OMS/cmsy/m/n on input line 55.
LaTeX Font Info: ... okay on input line 44. LaTeX Font Info: ... okay on input line 55.
LaTeX Font Info: Checking defaults for OMX/cmex/m/n on input line 44. LaTeX Font Info: Checking defaults for OMX/cmex/m/n on input line 55.
LaTeX Font Info: ... okay on input line 44. LaTeX Font Info: ... okay on input line 55.
LaTeX Font Info: Checking defaults for U/cmr/m/n on input line 44. LaTeX Font Info: Checking defaults for U/cmr/m/n on input line 55.
LaTeX Font Info: ... okay on input line 44. LaTeX Font Info: ... okay on input line 55.
LaTeX Font Info: Checking defaults for OT4/cmr/m/n on input line 44. LaTeX Font Info: Checking defaults for OT4/cmr/m/n on input line 55.
LaTeX Font Info: ... okay on input line 44. LaTeX Font Info: ... okay on input line 55.
(/usr/share/texmf-dist/tex/context/base/mkii/supp-pdf.mkii (/usr/share/texmf-dist/tex/context/base/mkii/supp-pdf.mkii
[Loading MPS to PDF converter (version 2006.09.02).] [Loading MPS to PDF converter (version 2006.09.02).]
\scratchcounter=\count132 \scratchcounter=\count141
\scratchdimen=\dimen169 \scratchdimen=\dimen177
\scratchbox=\box42 \scratchbox=\box42
\nofMPsegments=\count133 \nofMPsegments=\count142
\nofMParguments=\count134 \nofMParguments=\count143
\everyMPshowfont=\toks35 \everyMPshowfont=\toks35
\MPscratchCnt=\count135 \MPscratchCnt=\count144
\MPscratchDim=\dimen170 \MPscratchDim=\dimen178
\MPnumerator=\count136 \MPnumerator=\count145
\makeMPintoPDFobject=\count137 \makeMPintoPDFobject=\count146
\everyMPtoPDFconversion=\toks36 \everyMPtoPDFconversion=\toks36
) (/usr/share/texmf-dist/tex/latex/oberdiek/epstopdf-base.sty ) (/usr/share/texmf-dist/tex/latex/oberdiek/epstopdf-base.sty
Package: epstopdf-base 2016/05/15 v2.6 Base part for package epstopdf Package: epstopdf-base 2016/05/15 v2.6 Base part for package epstopdf
@ -472,14 +518,17 @@ Package grfext Info: Graphics extension search list:
(/usr/share/texmf-dist/tex/latex/latexconfig/epstopdf-sys.cfg (/usr/share/texmf-dist/tex/latex/latexconfig/epstopdf-sys.cfg
File: epstopdf-sys.cfg 2010/07/13 v1.3 Configuration of (r)epstopdf for TeX Live File: epstopdf-sys.cfg 2010/07/13 v1.3 Configuration of (r)epstopdf for TeX Live
)) ABD: EveryShipout initializing macros )) ABD: EveryShipout initializing macros
\c@lstlisting=\count138 \c@lstlisting=\count147
Package caption Info: Begin \AtBeginDocument code.
Package caption Info: subfig package v1.3 is loaded.
Package caption Info: End \AtBeginDocument code.
Underfull \hbox (badness 10000) in paragraph at lines 85--86 Underfull \hbox (badness 10000) in paragraph at lines 96--97
[] []
Underfull \hbox (badness 10000) in paragraph at lines 87--88 Underfull \hbox (badness 10000) in paragraph at lines 98--99
[] []
@ -489,34 +538,34 @@ Underfull \hbox (badness 10000) in paragraph at lines 87--88
] ]
LaTeX Font Info: Trying to load font information for OML+plm on input line 125. LaTeX Font Info: Trying to load font information for OML+plm on input line 136.
(/usr/share/texmf-dist/tex/latex/polski/omlplm.fd (/usr/share/texmf-dist/tex/latex/polski/omlplm.fd
File: omlplm.fd 2008/02/24 v1.2.1 Font defs for fonts PL (MW) File: omlplm.fd 2008/02/24 v1.2.1 Font defs for fonts PL (MW)
) )
LaTeX Font Info: Trying to load font information for OMS+plsy on input line 125. LaTeX Font Info: Trying to load font information for OMS+plsy on input line 136.
(/usr/share/texmf-dist/tex/latex/polski/omsplsy.fd (/usr/share/texmf-dist/tex/latex/polski/omsplsy.fd
File: omsplsy.fd 2008/02/24 v1.2.1 Font defs for fonts PL (MW) File: omsplsy.fd 2008/02/24 v1.2.1 Font defs for fonts PL (MW)
) )
LaTeX Font Info: Trying to load font information for OMX+plex on input line 125. LaTeX Font Info: Trying to load font information for OMX+plex on input line 136.
(/usr/share/texmf-dist/tex/latex/polski/omxplex.fd (/usr/share/texmf-dist/tex/latex/polski/omxplex.fd
File: omxplex.fd 2008/02/24 v1.2.1 Font defs for fonts PL (MW) File: omxplex.fd 2008/02/24 v1.2.1 Font defs for fonts PL (MW)
) )
LaTeX Font Info: External font `plex10' loaded for size LaTeX Font Info: External font `plex10' loaded for size
(Font) <12> on input line 125. (Font) <12> on input line 136.
LaTeX Font Info: External font `plex10' loaded for size LaTeX Font Info: External font `plex10' loaded for size
(Font) <8> on input line 125. (Font) <8> on input line 136.
LaTeX Font Info: External font `plex10' loaded for size LaTeX Font Info: External font `plex10' loaded for size
(Font) <6> on input line 125. (Font) <6> on input line 136.
LaTeX Font Info: Trying to load font information for U+msa on input line 125. LaTeX Font Info: Trying to load font information for U+msa on input line 136.
(/usr/share/texmf-dist/tex/latex/amsfonts/umsa.fd (/usr/share/texmf-dist/tex/latex/amsfonts/umsa.fd
File: umsa.fd 2013/01/14 v3.01 AMS symbols A File: umsa.fd 2013/01/14 v3.01 AMS symbols A
) )
LaTeX Font Info: Trying to load font information for U+msb on input line 125. LaTeX Font Info: Trying to load font information for U+msb on input line 136.
(/usr/share/texmf-dist/tex/latex/amsfonts/umsb.fd (/usr/share/texmf-dist/tex/latex/amsfonts/umsb.fd
File: umsb.fd 2013/01/14 v3.01 AMS symbols B File: umsb.fd 2013/01/14 v3.01 AMS symbols B
) )
LaTeX Font Info: External font `plex10' loaded for size LaTeX Font Info: External font `plex10' loaded for size
(Font) <10.95> on input line 133. (Font) <10.95> on input line 144.
[3] [4 [3] [4
@ -536,108 +585,158 @@ LaTeX Font Info: External font `plex10' loaded for size
] ]
Package xcolor Warning: Incompatible color definition on input line 166. Package xcolor Warning: Incompatible color definition on input line 177.
Overfull \vbox (16.08192pt too high) detected at line 166 Overfull \vbox (15.92963pt too high) detected at line 177
[] []
Rozdzia\PlPrIeC {\l } 1. Rozdzia\PlPrIeC {\l } 1.
<images/linear_reg.png, id=50, 433.62pt x 289.08pt> <images/linear_reg.png, id=54, 433.62pt x 289.08pt>
File: images/linear_reg.png Graphic file (type png) File: images/linear_reg.png Graphic file (type png)
<use images/linear_reg.png> <use images/linear_reg.png>
Package pdftex.def Info: images/linear_reg.png used on input line 191. Package pdftex.def Info: images/linear_reg.png used on input line 205.
(pdftex.def) Requested size: 398.33858pt x 265.57306pt. (pdftex.def) Requested size: 398.33858pt x 265.57306pt.
[13] [13] [14 </home/altarin/praca-magisterska/docs/images/linear_reg.png>]
Missing character: There is no ; in font nullfont! LaTeX Font Info: External font `plex10' loaded for size
Missing character: There is no ; in font nullfont! (Font) <10> on input line 238.
Missing character: There is no ; in font nullfont! LaTeX Font Info: External font `plex10' loaded for size
[14 </home/altarin/praca-magisterska/docs/images/linear_reg.png>] [15] [16 (Font) <7> on input line 238.
LaTeX Font Info: External font `plex10' loaded for size
(Font) <5> on input line 238.
[15]
<images/gradient_descent_1_long.png, id=76, 216.81pt x 289.08pt>
File: images/gradient_descent_1_long.png Graphic file (type png)
<use images/gradient_descent_1_long.png>
Package pdftex.def Info: images/gradient_descent_1_long.png used on input line 256.
(pdftex.def) Requested size: 142.26378pt x 189.69504pt.
<images/gradient_descent_2_long.png, id=77, 216.81pt x 289.08pt>
File: images/gradient_descent_2_long.png Graphic file (type png)
<use images/gradient_descent_2_long.png>
Package pdftex.def Info: images/gradient_descent_2_long.png used on input line 258.
(pdftex.def) Requested size: 142.26378pt x 189.69504pt.
[16 </home/altarin/praca-magisterska/docs/images/gradient_descent_1_long.png> </home/altarin/praca-magisterska/docs/images/gradient_descent_2_long.png>]
<images/naural_model_one.png, id=84, 341.77687pt x 386.19281pt>
File: images/naural_model_one.png Graphic file (type png)
<use images/naural_model_one.png>
Package pdftex.def Info: images/naural_model_one.png used on input line 289.
(pdftex.def) Requested size: 227.62204pt x 257.2098pt.
Underfull \vbox (badness 2142) has occurred while \output is active []
[17 </home/altarin/praca-magisterska/docs/images/naural_model_one.png (PNG copy)>]
<images/naural_model_multi.png, id=88, 535.2497pt x 542.77782pt>
File: images/naural_model_multi.png Graphic file (type png)
<use images/naural_model_multi.png>
Package pdftex.def Info: images/naural_model_multi.png used on input line 315.
(pdftex.def) Requested size: 227.62204pt x 230.82245pt.
[18 </home/altarin/praca-magisterska/docs/images/naural_model_multi.png (PNG copy)>]
<images/sigmoid.png, id=92, 433.62pt x 289.08pt>
File: images/sigmoid.png Graphic file (type png)
<use images/sigmoid.png>
Package pdftex.def Info: images/sigmoid.png used on input line 362.
(pdftex.def) Requested size: 398.33858pt x 265.57306pt.
[19]
<images/neural_net_1.png, id=97, 585.68813pt x 380.92313pt>
File: images/neural_net_1.png Graphic file (type png)
<use images/neural_net_1.png>
Package pdftex.def Info: images/neural_net_1.png used on input line 392.
(pdftex.def) Requested size: 227.62204pt x 148.0421pt.
Underfull \vbox (badness 10000) has occurred while \output is active []
[20 </home/altarin/praca-magisterska/docs/images/sigmoid.png>]
Underfull \vbox (badness 2818) has occurred while \output is active []
[21 </home/altarin/praca-magisterska/docs/images/neural_net_1.png (PNG copy)>]
<images/autoencoder.png, id=105, 372.64218pt x 353.82187pt>
File: images/autoencoder.png Graphic file (type png)
<use images/autoencoder.png>
Package pdftex.def Info: images/autoencoder.png used on input line 418.
(pdftex.def) Requested size: 227.62204pt x 216.12256pt.
Underfull \vbox (badness 10000) has occurred while \output is active []
[22 </home/altarin/praca-magisterska/docs/images/autoencoder.png (PNG copy)>] [23] [24
] ]
Package xcolor Warning: Incompatible color definition on input line 263. Package xcolor Warning: Incompatible color definition on input line 440.
Overfull \vbox (16.08192pt too high) detected at line 263 Overfull \vbox (15.92963pt too high) detected at line 440
[] []
Rozdzia\PlPrIeC {\l } 2. Rozdzia\PlPrIeC {\l } 2.
<images/waveform.png, id=70, 433.62pt x 289.08pt> <images/waveform.png, id=115, 433.62pt x 289.08pt>
File: images/waveform.png Graphic file (type png) File: images/waveform.png Graphic file (type png)
<use images/waveform.png> <use images/waveform.png>
Package pdftex.def Info: images/waveform.png used on input line 294. Package pdftex.def Info: images/waveform.png used on input line 471.
(pdftex.def) Requested size: 398.33858pt x 265.57306pt. (pdftex.def) Requested size: 398.33858pt x 265.57306pt.
LaTeX Font Info: External font `plex10' loaded for size
(Font) <10> on input line 306.
LaTeX Font Info: External font `plex10' loaded for size
(Font) <7> on input line 306.
LaTeX Font Info: External font `plex10' loaded for size
(Font) <5> on input line 306.
Underfull \hbox (badness 10000) in paragraph at lines 306--306 Underfull \hbox (badness 10000) in paragraph at lines 483--483
[][][]\OT4/cmr/m/n/10 ¹ródlo: http://www.classicalmusiccity.com/search/article.php?vars=446/ [][][]\T1/cmr/m/n/10 ¹ródlo: http://www.classicalmusiccity.com/search/article.php?vars=446/
[] []
[17] [25]
<images/wartosc_nut.jpg, id=74, 903.375pt x 470.75874pt> <images/wartosc_nut.jpg, id=120, 903.375pt x 470.75874pt>
File: images/wartosc_nut.jpg Graphic file (type jpg) File: images/wartosc_nut.jpg Graphic file (type jpg)
<use images/wartosc_nut.jpg> <use images/wartosc_nut.jpg>
Package pdftex.def Info: images/wartosc_nut.jpg used on input line 314. Package pdftex.def Info: images/wartosc_nut.jpg used on input line 491.
(pdftex.def) Requested size: 398.33858pt x 207.57985pt. (pdftex.def) Requested size: 398.33858pt x 207.57985pt.
Overfull \hbox (48.05707pt too wide) in paragraph at lines 315--315 Overfull \hbox (77.12407pt too wide) in paragraph at lines 492--492
[]\OT4/cmr/m/n/10.95 Rysunek 2.2.¹ródlo: https://www.infomusic.pl/poradnik/46934,poradnik-teoria-muzyki-rytm []\T1/cmr/m/n/12 Rysunek 2.2: |¹ró-dlo: https://www.infomusic.pl/poradnik/46934,poradnik-teoria-muzyki-rytm
[] []
[18 </home/altarin/praca-magisterska/docs/images/waveform.png>] [26 </home/altarin/praca-magisterska/docs/images/waveform.png>]
<images/nuty_linia.png, id=80, 683.55376pt x 127.22531pt> <images/nuty_linia.png, id=125, 683.55376pt x 127.22531pt>
File: images/nuty_linia.png Graphic file (type png) File: images/nuty_linia.png Graphic file (type png)
<use images/nuty_linia.png> <use images/nuty_linia.png>
Package pdftex.def Info: images/nuty_linia.png used on input line 352. Package pdftex.def Info: images/nuty_linia.png used on input line 529.
(pdftex.def) Requested size: 398.33858pt x 74.14209pt. (pdftex.def) Requested size: 398.33858pt x 74.14209pt.
[19 </home/altarin/praca-magisterska/docs/images/wartosc_nut.jpg>] [20 </home/altarin/praca-magisterska/docs/images/nuty_linia.png (PNG copy)>] [21] [22] [27 </home/altarin/praca-magisterska/docs/images/wartosc_nut.jpg>] [28 </home/altarin/praca-magisterska/docs/images/nuty_linia.png (PNG copy)>] [29] [30]
Package xcolor Warning: Incompatible color definition on input line 439. Package xcolor Warning: Incompatible color definition on input line 616.
Overfull \vbox (16.08192pt too high) detected at line 439 Overfull \vbox (15.92963pt too high) detected at line 616
[] []
Rozdzia\PlPrIeC {\l } 3. Rozdzia\PlPrIeC {\l } 3.
[23 [31
] [24 ] [32
] ]
Package xcolor Warning: Incompatible color definition on input line 444. Package xcolor Warning: Incompatible color definition on input line 621.
Overfull \vbox (16.08192pt too high) detected at line 444 Overfull \vbox (15.92963pt too high) detected at line 621
[] []
Rozdzia\PlPrIeC {\l } 4. Rozdzia\PlPrIeC {\l } 4.
[25] [26 [33] [34
] (/home/altarin/praca-magisterska/docs/document.ind) [27] (/home/altarin/praca-magisterska/docs/document.aux) ] (/home/altarin/praca-magisterska/docs/document.ind) [35] (/home/altarin/praca-magisterska/docs/document.aux)
LaTeX Warning: There were multiply-defined labels. LaTeX Warning: There were multiply-defined labels.
) )
Here is how much of TeX's memory you used: Here is how much of TeX's memory you used:
14866 strings out of 492167 16156 strings out of 492167
280040 string characters out of 6131558 300928 string characters out of 6131558
332873 words of memory out of 5000000 350884 words of memory out of 5000000
18912 multiletter control sequences out of 15000+600000 20169 multiletter control sequences out of 15000+600000
20478 words of font info for 62 fonts, out of 8000000 for 9000 27578 words of font info for 68 fonts, out of 8000000 for 9000
1141 hyphenation exceptions out of 8191 1141 hyphenation exceptions out of 8191
60i,11n,68p,817b,1116s stack positions out of 5000i,500n,10000p,200000b,80000s 60i,12n,54p,816b,1094s stack positions out of 5000i,500n,10000p,200000b,80000s
{/usr/share/texmf-dist/fonts/enc/dvips/pl/plit.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plrm.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plme.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plms.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plmi.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plsc.enc}</usr/share/texmf-dist/fonts/type1/public/amsfonts/symbols/msbm10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plbx10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plbx12.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plcsc10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plex10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plmi12.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plmi8.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plr10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plr12.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plr7.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plr8.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plsy10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plti10.pfb> {/usr/share/texmf-dist/fonts/enc/dvips/cm-super/cm-super-t1.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plmi.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plms.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plme.enc}{/usr/share/texmf-dist/fonts/enc/dvips/pl/plrm.enc}</usr/share/texmf-dist/fonts/type1/public/amsfonts/symbols/msbm10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plex10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plmi12.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plmi6.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plmi8.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plr12.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plr8.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plsy10.pfb></usr/share/texmf-dist/fonts/type1/public/pl/plsy8.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1095.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1200.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx1440.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx2074.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfbx2488.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfcc1200.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm0700.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm0800.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1000.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1095.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1200.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfrm1440.pfb></usr/share/texmf-dist/fonts/type1/public/cm-super/sfti1095.pfb>
Output written on /home/altarin/praca-magisterska/docs/document.pdf (27 pages, 213966 bytes). Output written on /home/altarin/praca-magisterska/docs/document.pdf (35 pages, 618938 bytes).
PDF statistics: PDF statistics:
160 PDF objects out of 1000 (max. 8388607) 230 PDF objects out of 1000 (max. 8388607)
110 compressed objects within 2 object streams 153 compressed objects within 2 object streams
0 named destinations out of 1000 (max. 500000) 0 named destinations out of 1000 (max. 500000)
33 words of extra memory for PDF output out of 10000 (max. 10000000) 68 words of extra memory for PDF output out of 10000 (max. 10000000)

Binary file not shown.

Binary file not shown.

View File

@ -9,6 +9,17 @@
\usepackage{chapter-style} \usepackage{chapter-style}
\usepackage{tikz} \usepackage{tikz}
\usepackage{listings} \usepackage{listings}
\usepackage{subfig}
\usepackage[T1]{fontenc}
% \usepackage[utf8]{inputenc}
% \usepackage{amsmath}
\newcommand{\textoperatorname}[1]{%
\operatorname{\textnormal{#1}}%
}
\textheight 21.1 cm \textheight 21.1 cm
@ -165,25 +176,28 @@ Jednocześnie przyjmuję do wiadomości, że przypisanie sobie, w pracy dyplomow
\chapter{Wprowadzenie do sieci neuronowych} \chapter{Wprowadzenie do sieci neuronowych}
W tym rozdziale przedstawię podstawy działania sieci neuronowych, opiszę działanie autoencoderów oraz modelu Seq2Seq, ponieważ tych modeli użyłem do skonstruowania architektury generującej muzykę. Aby lepiej zrozumieć, w jaki sposób odpowiednio skonstruowane sieci neuronowe potrafią sprostać takiemu zadaniu jak generowanie muzyki, w tym rozdziale przedstawię od podstaw zasady działania sieci neuronowych. Opiszę w jaki sposób można od regresji liniowej przejść do prostych sieci oraz w jaki sposób uczy się sieci neuronowe. Ostatecznie przedstawię architektury które wykorzystałem w projekcie.
\section{Regresja liniowa} \section{Regresja liniowa}
Podstawą wszystkich sieci neuronowych, jest regresja liniowa. W statystyce wykorzystywana aby wyjaśnić liniowe zalezności między zmiennymi. Podstawą wszystkich sieci neuronowych, jest regresja liniowa. W statystyce wykorzystywana aby wyjaśnić liniowe zalezności między zmiennymi. Wyróżnia się dwa rodzaje
Prosty model regresji liniowej dla jednej zmiennej można opisać wzorem. Prosty model regresji liniowej dla jednej zmiennej można opisać wzorem.
\[\hat{y} = ax+b\] \[y = ax+b+\epsilon\]
gdzie, gdzie,
\begin{itemize} \begin{itemize}
\item $\hat{y}$ jest to estymacja zmiennej objaśnianej, \item $y$ jest zmienną objaśnianą,
\item $x$ jest to zmienna objaśniająca, \item $x$ jest to zmienna objaśniająca,
\item $a$ jest parametrem modelu, \item $a$ jest parametrem modelu,
\item $b$ jest wyrazem wolnym. \item $b$ jest wyrazem wolnym modelu.
\item $\epsilon$ jest składnikiem losowym.
\end{itemize} \end{itemize}
\medskip \medskip
Zadaniem jest znalezienie takiego parametru $a\in \mathbb{R}$ oraz wyrazu wolnego $b \in \mathbb{R}$, aby dla znanych wartości $x \in \mathbb{R}$ estymacja zmiennej objasnianej $\hat{y} \in \mathbb{R}$ najlepiej opisywała zmienną objasnaną $y \in \mathbb{R}$
Zadaniem jest znalezienie takiego parametru $a\in \mathbb{R}$ oraz wyrazu wolnego $b \in \mathbb{R}$, aby dla znanych wartości $x \in \mathbb{R}$ estymacja zmiennej objasnianej $\hat{y} \in \mathbb{R}$ najlepiej opisywała zmienną objasnaną $y \in \mathbb{R}$. Tak zdefiniowany model, opisuje zmienną $y$ z dokładnością do składnika losowego. W praktyce oznacza to że szacowane modele będą przybliżeniem opisywanych zależności.
\medskip \medskip
\begin{figure}[!htb] \begin{figure}[!htb]
@ -195,70 +209,233 @@ Jednocześnie przyjmuję do wiadomości, że przypisanie sobie, w pracy dyplomow
Wartość zmiennej objaśnianej $y$ można również opisać za pomocą wielu zmiennych objaśniająych. Wtedy dla zmiennych objaśniającej $x_1, x_2, ... , x_n \in \mathbb{R}$ szukamy parametrów $\theta_1, \theta_2, ... ,\theta_n \in \mathbb{R}$. Otrzymany w ten sposób model nazywany jest również hipotezą i oznaczamy go $h(x)$. Wartość zmiennej objaśnianej $y$ można również opisać za pomocą wielu zmiennych objaśniająych. Wtedy dla zmiennych objaśniającej $x_1, x_2, ... , x_n \in \mathbb{R}$ szukamy parametrów $\theta_1, \theta_2, ... ,\theta_n \in \mathbb{R}$. Otrzymany w ten sposób model nazywany jest również hipotezą i oznaczamy go $h(x)$.
\[h(x) = b + \theta_1x_2 + \theta_2x_2 + ... + \theta_nx_n = b + \sum_{i=1}^{n} \theta_ix_i\] \[h(x) = b + \theta_1x_2 + \theta_2x_2 + ... + \theta_nx_n + \epsilon = b + \sum_{i=1}^{n} \theta_ix_i + \epsilon\]
\section{Funkcja kosztu oraz metody gradientowe} Rysunek~\ref{fig:linreg} przedstawia przykładowy model regresji liniowej jednej zmiennej, dopasowany do zbioru.
\section{Uczenie modelu}
Celem uczenia modelu jest znalezienie ogólnych parametrów, aby model dla każdej pary $x, y$ zwracał wartości $\hat{y}$ najlepiej opisujące całe zjawisko według pewnego kryterium. W ten sposób jesteśmy wstanie znaleźć przybliżenie funkcji $h(x)$. Celem uczenia modelu jest znalezienie ogólnych parametrów, aby model dla wartości wejściowych $x$ zwracał wartości predykcji $\hat{y}$ najlepiej opisujące całe zjawisko według pewnego kryterium. Formalnie, aby suma wszystkich różnic między predykcją a rzeczywistością była najmniejsza.
\[
\textoperatorname{błąd} = \sum_{i=1}^m | \textoperatorname{predykcja} - \textoperatorname{rzeczywistość} |
\] , gdzie $m \in \mathbb{N}$ jest wielkością zbioru danych jakim dysponujemy. Minimalizując bład dla modelu jesteśmy wstanie znaleźć przybliżenie funkcji $h(x)$.
\subsection{Funkcja kosztu} \subsection{Funkcja kosztu}
W tym celu używa się funcji $J_\theta(h)$, która zwraca wartość błędu między wartościami $h(x)$ oraz $y$ dla wszystkich obserwacji. Taka funckcja nazywana jest funkcją kosztu. W tym celu używa się funkcji $J_\theta(h)$, która zwraca wartość błędu między wartościami $h(x)$ oraz $y$ dla wszystkich obserwacji. Taka funkcja nazywana jest funkcją kosztu (cost function).
Dla przykładu regresji liniowej funkcją kosztu może być odchylenie średnio kwadratowe. Wtedy funkcja kosztu przyjmuje postać: Dla przykładu regresji liniowej funkcją kosztu może być błąd średniokwadratowy (mean squared error). Wtedy funkcja kosztu przyjmuje postać:
\[ J_\theta(h) = \frac{1}{m}\sum_{i=1}^{m}(y_i-h(x_i))^2 \] \[ J_\theta(h) = \frac{1}{m}\sum_{i=1}^{m}(y_i-h(x_i))^2 \].
gdzie $m \in \mathbb{N}$ jest liczbą obserwacji.
Przy zdefiniowanej funkcji kosztu, proces uczenia sprowadza się do znalezienia takich parametrów funckji $h(x)$ aby funkcja kosztu była najmniejsza. Jest to problem optymalizacyjny sprowadzający się do znalezienia globalnego minimum funkcji. Przy zdefiniowanej funkcji kosztu proces uczenia sprowadza się do znalezienia takich parametrów funkcji $h(x)$, aby funkcja kosztu była najmniejsza. Jest to problem optymalizacyjny sprowadzający się do znalezienia globalnego minimum funkcji.
\subsection{Metoda gradientu prostego} \subsection{Znajdowanie minimum funkcji}
Jednym z algorytmów stosowanych do rozwiązania powyższego problemu optymalizacji jest metoda gradientu prostego (ang. gradient descent).
Aby znaleźć minimum funkcji $f$ możemy skorzystać z analizy matematycznej. Wiemy, że jeśli funkcja $f$ jest różniczkowalna to funkcja może przyjmować minimum lokalne, gdy $f'(x_0) = 0$ dla pewnego $x_0$ z dzieniny funkcji $f$. Dodatkowo jeśli istanieje otoczenie punktu $x_0$, że dla wszystkich punktów z tego otoczenia spełniona jest nierówność:
\[ f(x)>f(x_0) \]
to znaleziony punkt $x_0$ jest minimum lokalnym.
W teorii, należałoby zatem wybrać taką funkcję kosztu, aby była różniczkowalna. Obliczyć równanie $J_\theta'(h)=0$, następnie dla otrzymanych wyników sprawdzić powyższą nierówność oraz wybrać najmniejszy wynik ze wszystkich\footnote{źródlo: Analiza matematyczna, Krysicki Włodarski, s.187 }. W praktyce rozwiązanie takie równania ze względu na jego złożoność może się okazać niewykonalne. Aby rozwiązać ten problem powstały inne metody, które pozwalają szukać ekstremów funkcji, jednak nigdy nie będziemy mieli pewności że otrzymany wynik jest minimum globalnym funkcji kosztu.
\subsection{Metody gradientowe}
Metody gradientowe są to iteracyjne algorytmy służące do znajdowania minimum funkcji. Aby móc skorzystać z metod gradientowych analizowana funkcja musi być ciągła oraz różniczkowalna. Sposób działania ich można intuicyjnie opisać w nastepujących krokach.
1. Wybierz punkt początkowy.
2. Oblicz kierunek, w którym funkcja maleje.
3. Przejdź do kolejnego punktu zgodnie obliczonym kierunkiem o pewną małą odległość.
4. Powtarzamy, aż osiągniemy minimum funkcji.
Wizualizację algorytmu została przedstawiona na rysunku~\ref{fig:gradient}.
\begin{figure}[!htb] \begin{figure}[!htb]
\centering \centering
\def\layersep{2.5cm} \subfloat[Wyznaczenie gradientu]{{\includegraphics[width=5cm]{images/gradient_descent_1_long.png} }}%
\begin{tikzpicture}[shorten >=1pt,->,draw=black!50, node distance=\layersep] \qquad
\subfloat[Iteracja kolejnych punktów]{{\includegraphics[width=5cm]{images/gradient_descent_2_long.png} }}%
\tikzstyle{every pin edge}=[<-,shorten <=1pt] \caption{Wizualizacja algorytmu gradientu prostego}%
\tikzstyle{neuron}=[circle,fill=black!25,minimum size=17pt,inner sep=0pt] \label{fig:gradient}
\tikzstyle{input neuron}=[neuron, fill=black!50];
\tikzstyle{output neuron}=[neuron, fill=black!50];
\tikzstyle{hidden neuron}=[neuron, fill=black!50];
\tikzstyle{annot} = [text width=4em, text centered]
% Draw the input layer nodes
\foreach \name / \y in {1,...,4}
% This is the same as writing \foreach \name / \y in {1/1,2/2,3/3,4/4}
\node[input neuron, pin=left:Input \#\y] (I-\name) at (0,-\y) {};
% Draw the hidden layer nodes
\foreach \name / \y in {1,...,5}
\path[yshift=0.5cm]
node[hidden neuron] (H-\name) at (\layersep,-\y cm) {};
% Draw the output layer node
\node[output neuron,pin={[pin edge={->}]right:Output}, right of=H-3] (O) {};
% Connect every node in the input layer with every node in the
% hidden layer.
\foreach \source in {1,...,4}
\foreach \dest in {1,...,5}
\path (I-\source) edge (H-\dest);
% Connect every node in the hidden layer with the output layer
\foreach \source in {1,...,5}
\path (H-\source) edge (O);
% Annotate the layers
\node[annot,above of=H-1, node distance=1cm] (hl) {Hidden layer};
\node[annot,left of=hl] {Input layer};
\node[annot,right of=hl] {Output layer};
\end{tikzpicture}
\caption{źródlo: Przykład sieci neuronowej}
\label{fig:neuralnet1}
\end{figure} \end{figure}
\medskip
Dla funkcji $h(x)$ należy ustalić wartość początkową $\Theta_0$, dla wszystkich parametrów $\theta_1$ ... $\theta_n$.
\[ \Theta_0 = \left[ \theta_1, \theta_2, ... ,\theta_n \right] \]
Następnie policzyć wszystkie pochodne cześciowe $\frac{\partial J_\theta(h)}{\partial \theta_i}$. Otrzymamy w ten sposób gradient $\nabla J_\theta(h)$, gdzie
\[
\nabla J_\theta(h) = \left[ \frac{\partial J_\theta(h)}{\partial \theta_1}, \frac{\partial J_\theta(h)}{\partial \theta_2}, ... , \frac{\partial J_\theta(h)}{\partial \theta_n} \right]
\]
Następnie obliczyć element $\Theta_{k+1}$, ze wzoru
\[
\Theta_{k+1} = \Theta_{k} - \alpha\nabla J_\theta(h)
\]
gdzie $\alpha \in \mathbb{R}$ jest współczynnikiem uczenia (learning rate). Proces ten należy powtarzać do pewnego momentu. Najczęśćiej z góry określoną liczbę razy lub do momentu, gdy uzysk funkcji kosztu spowodowany nastepną iteracją jest mniejszy niż ustalona wartość. Otrzymany w ten sposób wektor parametrów $\Theta_k$ jest wynikiem algorytmu.\footnote{Deep Learning techniques for music geneation - A survay s.44}
Wykorzystując metody gradientowe, otrzymujemy wyuczony model. Parametry $\theta_i$ modelu $h(x)$, zostały ustalone w taki sposób, aby błąd między predykcją, a rzeczywistością był najmniejszy.
\section{Regresja liniowa jako model sieci neuronowej}
\label{section:linreg}
Omawiany model regresji, możemy zapisać w sposób graficzny, tak jak przedstawiono na rysunku ~\ref{fig:neural_model_one}.
\begin{figure}[!htb]
\centering
\includegraphics[width=8cm]{images/naural_model_one.png}
\caption{Regresja liniowa jako model sieci neuronowej}
\label{fig:neural_model_one}
\end{figure}
Każdy węzeł z lewej strony reprezentuje zmienną objaśniającą $x_i$. Połączenia nazywane są wagami i reprezentują one parametry $\theta_i$. Węzeł z prawej strony oznaczony jako $\hat{y}$, jest sumą iloczynów wag oraz wartości węzłów z prawej strony. Wtedy
\[
\hat{y} =
\begin{bmatrix}
1 \\ x_1 \\ x_2 \\ \vdots \\ x_n
\end{bmatrix}
\begin{bmatrix}
b & \theta_1 & \theta_2 & \dots & \theta_n
\end{bmatrix}
=
b + x_1\theta_1 + x_2\theta_2 + \dots + x_n\theta_n =
b + \sum_{i=1}^n x_i\theta_i
\]
co jest równoważne omawianemu modelowi regresji liniowej. Węzły sieci nazywane są neuronami a wyraz wolny modelu $b$, nazywany jest biasem (bias).
W łatwy sposób możemy rozbudować ten model, do regresji liniowej wielu zmiennych. Predykcją modelu nie będzie jak do tej pory jedna wartość $\hat{y}$ tylko wektor wartości $\hat{y_1}, \hat{y_2}, \dots , \hat{y_m}$, który oznaczać bedziemy jako $\hat{Y}$. Model ten zostal przedstawiony na rysunku~\ref{fig:neural_model_multi}.
\begin{figure}[!htb]
\centering
\includegraphics[width=8cm]{images/naural_model_multi.png}
\caption{Regresja liniowa wielu zmiennych jako model sieci nauronowej}
\label{fig:neural_model_multi}
\end{figure}
Dla uogólnienia, pojedyncze wagi modelu zapisywać będę jako $w_{nm}$, natomiast macierz wag jako $W$. Algebricznie zapisalibyśmy ten model jako
\[
\begin{bmatrix}
1 & 1 & \dots & 1\\
x_{11} & x_{12} & \dots & x_{1m} \\
x_{21} & x_{22} & \dots & x_{2m} \\
\vdots & \vdots & \ddots & \vdots \\
x_{n1} & x_{12} & \dots & x_{nm} \\
\end{bmatrix}
\begin{bmatrix}
b_1 & w_{11} & w_{12} & \dots & w_{1n} \\
b_2 & w_{21} & w_{22} & \dots & w_{2n} \\
\vdots & \vdots & \vdots & \ddots & \vdots \\
b_m & w_{m1} & w_{m2} & \dots & w_{mn} \\
\end{bmatrix}
=
\begin{bmatrix}
h_1(x) \\ h_2(x) \\ \vdots \\ h_m(x)
\end{bmatrix}
=
\begin{bmatrix}
\hat{y_1} \\ \hat{y_2} \\ \vdots \\ \hat{y_m}
\end{bmatrix}
\]
\[
b+XW = \hat{Y}
\]
Gdzie, $n$ jest liczbą zmiennych niezależnych, $m$ jest liczbą zmiennych zaleznych, $X$ jest rozszerzonym do macierzy o rozmiarach $m$ x $n$ wektorem zmiennych objaśniających w taki sposób, że $x_{i1} = x_{i2} = \dots = x_{in}$ dla $i = 1, 2, ..., m$, $W$ jest macierzą wag o rozmiarach $n$ x $m$ natomiast $b$ jest sumą wyrazów wolnych $b_1, ... ,b_m$ nazywaną biasem (bias). Możemy zauważyć, że model dla wielu zmiennych, jest wieloma modelami dla jednej zmiennej, gdzie każdy model operuje na tych samych danych wejściowych. Taki model może być uznany na sieć neuronową i nazywany jest perceptronem.
\section{Funkcje aktywacji}
Omawiany model służy rozwiązywaniu problemu regresji. Ponieważ wartości predykcji nie są uregulowane, moga przyjmować wartości z $\mathbb{R}$. Aby przekształcić ten model aby móc go wykorzystać do rozwiązania problemu klasifikacji, należy dodatkowo na otrzymanym wektorze $\hat{Y}$ wykonać pewną funkcję, która przekształci wynik. W tym celu uzywamy funkcji aktywacji (activation function). Istnieje wiele rodzaji funkcji aktywacji, każda posiada inny wpływ na model. Najpopularnijeszą grupą fukcji są funkcje sigmoidalne (sigmoid functions). Jedną z nich jest funkcja logistyczna (logistic curve) o wzrorze
\[
\sigma(x) = \frac{1}{1+e^{-x}}
\]
oraz wykresie przedstawionym na rysunku~\ref{fig:sigmoid}
\begin{figure}[!htb]
\centering
\includegraphics[width=\linewidth]{images/sigmoid.png}
\caption{Funkcja logistyczna}
\label{fig:sigmoid}
\end{figure}
Funkcja logistyczna, ma pewne użyteczne właściwości, które pozwolą kontrolować wartości węzłów, oraz zamienić wartości z całego $\mathbb{R}$ do wartości z przedziału $(0,1)$. Dzięki tej własciwości, funkcja logistyczna jest często uzywana aby otrzymać prawdopodobieństwo wystąpienia pewnego zdarzenia. Dodatkowo funkcja logistyczna szybko przyjmuje wartości skrajne, co oznacza że dla bardzo dużych wartości ujemnych i bardzo dużych wartości dodatnich, funkcja staje się mało wrażliwa na zmiany wartości, wraz ze zmianą wartości argumentu. \footnote{Deep Learning Book, s.66}
W ten sposób, możemy w łatwy sposób zmienić model regresji liniowej, na model regresji logistycznej.
\[
\sigma(b+XW) = \hat{Y}
\]
W dalszych cześciach pracy, kiedy bedę używał funcji aktywacji, nie wskazując na konkretną funckcję będe wykorzystywał oznaczenie $AF(x)$.
\section{Głębokie sieci neuronowe}
Model omawiany wcześniej może posłużyć jako podstawowy element do budowania bardziej skomplikowanych modeli. Aby to zrobić, należy potraktować otrzymany wektor $\hat{Y}$ jako wektor wejściowy do następngo podstawowego modelu. Składając ze sobą wiele modeli, mówimy o warstwach (layers) modelu sieci neuronowej.
Wyróżniamy trzy rodzaje warstw:
\begin{itemize}
\item warstwa wejściowa (input layer) jest pierwszą warstwą modelu,
\item warstwa wyjściowa (output layer) jest ostatnią wartstwą modelu
\item wartwa ukryta (hidden layer) jest warswą pomiędzy warstwą wejsciową oraz wyjściową.
\end{itemize}
Na rysunku~\ref{fig:neural_net_1} przedstawiono przykład posiadający warswę wejściową, dwie wartswy ukryte oraz wartswę wyjsciową.
\begin{figure}[!htb]
\centering
\includegraphics[width=8cm]{images/neural_net_1.png}
\caption{Przykład modelu sieci neuronowej}
\label{fig:neural_net_1}
\end{figure}
Tego typu modele są głębokimi sieciami neuronowymi (deep neural networks). Istnieje wiele różnich architektur głębokich sieci neuronowych, które wykorzystują te podstawowe koncepcje i rozszerzają je o dodatkowe warstwy, połącznia, funkcje aktywacji czy specjalne komórki (węzły).
\subsection{Jednokierunkowe sieci neuronowe}
Jednokierunkowe sieci neuronowe (feedforward neural networks) są to najprostrze sieci neuronowe, które wprost czerpią z omówionych wcześniej podstawowych wartsw. Możemy się również spotkać z nazwą wielowarstwowy perceptron (multi layer perceptron - MLP) ze względu na fakt, że jest zbudowany z wielu perceptronów zaprezentoanych w części~\ref{section:linreg}. Działają one w taki sposób, że zasila się je danymi do warstwy wejściowej, następnie sukcesywnie wykonuje się obliczenia do momentu dotarcia do końca sieci.
Każdy krok z warstwy $k-1$ do warstwy $k$ obliczany jest zgodnie ze wzorem \footnote{Deep Learning techniques for music geneation - A survay s.63}
\[
X_k = AF(b_k + W_kX_{k-1})
\]
\subsection{Propagacja wsteczna błędu}
Kiedy uzywamy jednokierunkowych sieci neuronowych, zasilamy je danymi wejściowymi $x$ ostatecznie otrzymując predykcję $\hat(y)$. Taki sposób działania nazywa się propagcją wprzód (foreward propagation). Podczas uczenia sieci kontynuuje się ten proces obliczając koszt $J(h)$. Propagacja wsteczna (back-propagation), pozwala na przepływ informacji od funkcji kosztu wstecz sieci neuronowej aby ostatecznie obliczyć gradient. Zasada działania algorytmu propagacji wsteczniej błędu, polega na sukcesywnym aktualizowaniu wag i biasów, oraz przesyłaniu wstecz po warstwach sieci. Dzięki temu jesteśmy wstanie wyuczyć sieć oraz obliczyć optymalne wagi i biasy dla całej sieci.
\subsection{Autoencodery}
Autoencoder jest to rodzaj głębokiej sieci neuronowej, zbudowany z jednej warstwy ukrytej. Dodatkowo rozmiar wartwy wejściowej musi być równy rozmiarowi wartwy wyjściowej, tworząc w ten sposób symetryczną sieć, której kształt przypomina klepsydrę. Przykład autoencodera przedstawiono na rysunku ~\ref{fig:autoencoder}.
\begin{figure}[!htb]
\centering
\includegraphics[width=8cm]{images/autoencoder.png}
\caption{Przykład modelu autoencodera}
\label{fig:autoencoder}
\end{figure}
Podczas uczenia autoencodera, przedstawia się dane wejściowe jako cel. W ten sposób ta architektura stara się odtworzyć funckje identyczności. Zadanie nie jest trywialne jak mogło by się zdawać ponieważ zazwyczaj ukryta warstwa jest mniejszego rozmiaru niż dane wejściowe. Przez to autoencoder jest zmuszony do wydobycia istotnych cech danych wejściowych, skompresowania a następnie jak najwierniejszego ich odtworzenia. Część kompresująca dane nazywana jest encoderem, natomiast część dekompresująca decoderem.
Wektor cech, które zostały odkryte przez autoencoder nazywane są zmiennymi utajnionymi (latent variables). Zarówno encoder jak i dekoder można wyodrębnić z autoencodera i wykorzystywać go jako osobną sieć neuronową.
Ciekawą cechą decodera, jest jego generatywny charakter, ponieważ dostarczając zupełnie nowe informacje jako zmienne wejściowe, decoder odtworzy je na podobieństwo danych, na których został nauczony.
\subsection{Rekurencyjne sieci neuronowe}
Rekurencyjne sieci neuronowe (recurrent neural networks - RNN) w uproszczeniu, są to MLP posiadające pamięć. Neurony tego typu sieci, różnią się od zwykłych neuronów ponieważ posiadają one dwa parametry zmiast jednego, obecny stan oraz poprzednią predycję.
\subsection{Długa pamięć krótkotrwała}
LSTM
\subsection{Model sieci seq2seq}
Seq2Seq
\chapter{Reprezentacja danych muzycznych} \chapter{Reprezentacja danych muzycznych}

View File

@ -3,16 +3,26 @@
\contentsline {chapter}{Wstęp}{11}% \contentsline {chapter}{Wstęp}{11}%
\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 1\relax .\enspace Wprowadzenie do sieci neuronowych}{13}% \contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 1\relax .\enspace Wprowadzenie do sieci neuronowych}{13}%
\contentsline {section}{\numberline {1.1\relax .\enspace }Regresja liniowa}{13}% \contentsline {section}{\numberline {1.1\relax .\enspace }Regresja liniowa}{13}%
\contentsline {section}{\numberline {1.2\relax .\enspace }Funkcja kosztu oraz metody gradientowe}{13}% \contentsline {section}{\numberline {1.2\relax .\enspace }Uczenie modelu}{14}%
\contentsline {subsection}{\numberline {1.2.1\relax .\enspace }Funkcja kosztu}{14}% \contentsline {subsection}{\numberline {1.2.1\relax .\enspace }Funkcja kosztu}{15}%
\contentsline {subsection}{\numberline {1.2.2\relax .\enspace }Metoda gradientu prostego}{15}% \contentsline {subsection}{\numberline {1.2.2\relax .\enspace }Znajdowanie minimum funkcji}{15}%
\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 2\relax .\enspace Reprezentacja danych muzycznych}{17}% \contentsline {subsection}{\numberline {1.2.3\relax .\enspace }Metody gradientowe}{15}%
\contentsline {section}{\numberline {2.1\relax .\enspace }Podstawowe koncepcje}{17}% \contentsline {section}{\numberline {1.3\relax .\enspace }Regresja liniowa jako model sieci neuronowej}{17}%
\contentsline {subsection}{\numberline {2.1.1\relax .\enspace }Dźwięk muzyczny}{17}% \contentsline {section}{\numberline {1.4\relax .\enspace }Funkcje aktywacji}{19}%
\contentsline {subsection}{\numberline {2.1.2\relax .\enspace }Sygnał dźwiękowy}{17}% \contentsline {section}{\numberline {1.5\relax .\enspace }Głębokie sieci neuronowe}{20}%
\contentsline {subsection}{\numberline {2.1.3\relax .\enspace }Zapis nutowy}{17}% \contentsline {subsection}{\numberline {1.5.1\relax .\enspace }Jednokierunkowe sieci neuronowe}{21}%
\contentsline {section}{\numberline {2.2\relax .\enspace }Cyfrowa reprezentacja muzyki symbolicznej}{20}% \contentsline {subsection}{\numberline {1.5.2\relax .\enspace }Propagacja wsteczna błędu}{21}%
\contentsline {subsection}{\numberline {2.2.1\relax .\enspace }Standard MIDI}{20}% \contentsline {subsection}{\numberline {1.5.3\relax .\enspace }Autoencodery}{22}%
\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 3\relax .\enspace Projekt}{23}% \contentsline {subsection}{\numberline {1.5.4\relax .\enspace }Rekurencyjne sieci neuronowe}{23}%
\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 4\relax .\enspace Podsumowanie}{25}% \contentsline {subsection}{\numberline {1.5.5\relax .\enspace }Długa pamięć krótkotrwała}{23}%
\contentsline {chapter}{Bibliografia}{27}% \contentsline {subsection}{\numberline {1.5.6\relax .\enspace }Model sieci seq2seq}{23}%
\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 2\relax .\enspace Reprezentacja danych muzycznych}{25}%
\contentsline {section}{\numberline {2.1\relax .\enspace }Podstawowe koncepcje}{25}%
\contentsline {subsection}{\numberline {2.1.1\relax .\enspace }Dźwięk muzyczny}{25}%
\contentsline {subsection}{\numberline {2.1.2\relax .\enspace }Sygnał dźwiękowy}{25}%
\contentsline {subsection}{\numberline {2.1.3\relax .\enspace }Zapis nutowy}{25}%
\contentsline {section}{\numberline {2.2\relax .\enspace }Cyfrowa reprezentacja muzyki symbolicznej}{28}%
\contentsline {subsection}{\numberline {2.2.1\relax .\enspace }Standard MIDI}{28}%
\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 3\relax .\enspace Projekt}{31}%
\contentsline {chapter}{Rozdzia\PlPrIeC {\l }\ 4\relax .\enspace Podsumowanie}{33}%
\contentsline {chapter}{Bibliografia}{35}%

BIN
docs/images/autoencoder.png Normal file

Binary file not shown.

After

Width:  |  Height:  |  Size: 23 KiB

Binary file not shown.

After

Width:  |  Height:  |  Size: 11 KiB

Binary file not shown.

After

Width:  |  Height:  |  Size: 11 KiB

Binary file not shown.

After

Width:  |  Height:  |  Size: 9.8 KiB

Binary file not shown.

After

Width:  |  Height:  |  Size: 9.5 KiB

Binary file not shown.

After

Width:  |  Height:  |  Size: 8.5 KiB

Binary file not shown.

After

Width:  |  Height:  |  Size: 65 KiB

Binary file not shown.

After

Width:  |  Height:  |  Size: 22 KiB

Binary file not shown.

After

Width:  |  Height:  |  Size: 53 KiB

File diff suppressed because one or more lines are too long

BIN
docs/images/sigmoid.png Normal file

Binary file not shown.

After

Width:  |  Height:  |  Size: 9.5 KiB

Binary file not shown.