|
|
|
||
Poslední úprava: T_UFAL (09.01.2017)
|
|
||
Poslední úprava: T_UFAL (09.01.2017)
Na prvních šesti seminářích se studenti formou přednášky a diskuse seznámí s následujícími tématy:
Rekurentní neuronové sítě a s nimi spojená matematická intuice Sequence-to-sequence learning Attention model a jeho varianty Řešení problému omezeného slovníku Pokročilé metody trénování (minimum risk training, zpětnovazební učení)
Ve zbývající části semestru budou formou studentských referátů prezentovány předem vybrané články z odborných konferencí a časopisů. V následující moderované diskuzi se studenti pokusí navrhnout, jak by bylo možné obsah probíraného článku naprogramovat.
Zápočet bude možné získat za: Včasné písemné zodpovězení otázek k prezentovaným článkům a Přednesení referátu k vybranému článku nebo fungující implementaci některého ze článků |
|
||
Poslední úprava: doc. RNDr. Vladislav Kuboň, Ph.D. (05.06.2018)
Zápočet je udělován za vypracování dostatečného množství úloh. Úlohy jsou zadávány pravidelně celý semestr a na vypracování každé z nich je několik týdnů. Vzhledem ke způsobu obdržení zápočtu není možné jeho získání opakovat. Získání zápočtu není podmínkou k připuštění ke zkoušce.
Zkouška sestává z písemné části a z nepovinné ústní části, kde studenti mohou reagovat na dotazy ke svému řešení a odpovídat na doplňující otázky. Požadavky zkoušky odpovídají sylabu předmětu v rozsahu, který byl prezentován na přednášce. |
|
||
Poslední úprava: T_UFAL (09.01.2017)
Goodfellow, Ian, Yoshua Bengio, Aaron Courville. Deep Learning. MIT Press, 2016. (chapters 10-12).
LeCun, Yann, Yoshua Bengio, and Geoffrey Hinton. "Deep learning." Nature 521.7553 (2015): 436-444.
Sutskever, Ilya, Oriol Vinyals, and Quoc V. Le. "Sequence to sequence learning with neural networks." Advances in neural information processing systems. 2014.
Bahdanau, Dzmitry, Kyunghyun Cho, and Yoshua Bengio. "Neural machine translation by jointly learning to align and translate." arXiv preprint arXiv:1409.0473 (2014).
Sennrich, Rico, Barry Haddow, and Alexandra Birch. "Neural machine translation of rare words with subword units." arXiv preprint arXiv:1508.07909 (2015).
Shen, Shiqi, et al. "Minimum risk training for neural machine translation." arXiv preprint arXiv:1512.02433 (2015).
Wu, Yonghui, et al. "Google's Neural Machine Translation System: Bridging the Gap between Human and Machine Translation." arXiv preprint arXiv:1609.08144 (2016).
Johnson, Melvin, et al. "Google's Multilingual Neural Machine Translation System: Enabling Zero-Shot Translation." arXiv preprint arXiv:1611.04558 (2016). |
|
||
Poslední úprava: Mgr. Jindřich Helcl, Ph.D. (13.05.2019)
Dopředné hluboké neuronové sítě
Regularizace hlubokých modelů
Konvoluční neuronové sítě
Rekurentní neuronové sítě
Praktická metodika
Zpracování přirozeného jazyka
Hluboké generativní modely
Structured prediction
Úvod do hlubokého zpětnovazebního učení |