Głębokie uczenie przez wzmacnianie. Praca z chatbotami oraz robotyka, optymalizacja dyskretna i automatyzacja sieciowa w praktyce., 526B-87604 (Helion Gliwice)

"Głębokie uczenie poprzez wzmacnianie rozwija się wyjątkowo dynamicznie. Dziedzinę tę znamionuje niewyczerpany potencjał rozwiązywania skomplikowanych problemów. Zajmuje się tym co najmniej kilka grup badawczych, koncentrujących się na wdrażaniu głębokiego uczenia poprzez wzmacnianie w różnorodnych branżach. Niestety, opisy najnowszych osiągnięć są niełatwe do zrozumienia i zbyt abstrakcyjne, żeby można było jeużyć w ergonomicznych implementacjach, a przecież poprawne działanie aplikacji jest uwarunkowane gruntownym zrozumieniem problemu przez projektanta. To zaktualizowane i zwiększone wydanie bestsellerowego przewodnika po najnowszych narzędziach i metodach związanych z uczeniem poprzez wzmacnianie. Posiada wprowadzenie do teorii uczenia poprzez wzmacnianie oraz wyjaśnia praktyczne sposoby kodowania samouczących się agentów w celu rozwiązywania praktycznych zadań. W tym wydaniu dodano sześć nowych rozdziałów poświęconych takim osiągnięciom technologii jak dyskretna optymalizacja, metody wieloagentowe, środowisko Microsoft TextWorld czy zaawansowane techniki eksploracji. Opisano ponadto inne zagadnienia, między innymi głębokie sieci Q, gradienty polityk, sterowanie ciągłe i wysoce skalowalne metody bezgradientowe.
Poszczególne kwestie zostały zilustrowane kodem wraz z opisem szczegółów implementacji. W książce pomiędzy innymi: związki pomiędzy uczeniem przez wzmacnianie a głębokim uczeniem zróżnicowane metody uczenia przez wzmacnianie, w tym entropia krzyżowa, sieć DQN, a także algorytmy: aktor-krytyk, TRPO, PPO, DDPG, D4PG i inne poręczne zastosowanie dyskretnej optymalizacji w celu rozwiązania problemu kostki Rubika trenowanie agentów przy użyciu oprogramowania AlphaGo Zero chatboty oparte na sztucznej inteligencji nowoczesne techniki eksploracyjne, w tym metody destylacji sieci Witaj, świecie prawdziwej nienaturalnej inteligencji!

Maxim Lapan jest niezależnym badaczem z wieloletnim doświadczeniem zawodowym w dziedzinie programowania i architektury systemów. Gruntownie poznał takie zagadnienia jak wielkie zbiory danych, uczenie maszynowe i rozproszone systemy obliczeniowe o wysokiej efektywności.
obecnie zajmuje się wykorzystaniami uczenia głębokiego, w tym głębokim przetwarzaniem języka naturalnego i głębokim uczeniem przez wzmacnianie."