На GitHub выложили The Little Book of RL с PyTorch-реализациями

На GitHub выложили The Little Book of Reinforcement Learning — книжку, которая сжато и по делу объясняет Reinforcement Learning от основ до готовых алгоритмов. В репозитории лежит не только сам текст, но и дополнительный материал. В папке algos/ собраны реализации алгоритмов на Pytorch — от простого Monte-Carlo до продвинутого PPO. Всё можно сразу запустить и посмотреть, как работает. В папке supplementary/ — подробные объяснения и строгие доказательства для алгоритмов динамического программирования, которые в книге даны коротко. Этот документ автор написал ещё в 2021 году. Обещают добавлять новые материалы по мере развития репозитория. Книгу можно распечатать — ссылка на печать есть на странице. Распространяется по некоммерческой лицензии Creative Commons — CC BY-SA 4.0.