Mathematical Foundation of Reinforcement-Learningという教科書を著者 Shiyu ZhaoのGitHubのページから読んだりダウンロードしたりすることができます。Amazonで買うとKindle版で13808円となっています。
https://github.com/MathFoundationRL/Book-Mathematical-Foundation-of-Reinforcement-Learning
この教科書の講義動画もあります。 video course, textbook, lecture slidesが提供されています。
https://youtube.com/playlist?list=PLEhdbSEZZbDaFWPX4gehhwB9vJZJ1DNm8&si=McjJ1Flk-3jsKEsX