強化学習、AI、環境、エージェントの学習環境の作成について。情報提供のみ.自由に作れる環境方法

https://www.youtube.com/watch?v=jZa9rfUOAss https://www.youtube.com/watch?v=IvKw_jmKGkU 上記のような学習環境を自由に作る方法のサイトや、キーワード、書籍を教えてください。 自動運転が都市で走る事実は近いのですが、自動運転とはいえ１００パーセント事故が起きないことは、言えません。そこで、実際の街を仮想（上記のようなアニメ化）として、学習させて、事故レベルをさらに下げたいのです。 詳しい方、お願いします。