強化学習２８が終了していることが前提です。
DQNとその派生系についてです。
DQNとDoubleDQNは、CartPole、Pendulum、MountainCar、Acrobotの４つで可能です。
reinforceは、CartPoleのみです。
iqnは、CartPole、MountainCar、Acrobotが可能です。
categorical dqn は、CartPoleのみ可能です。
A2C、A3C、Acerは全部に対応しています。

それぞれchokozainerに入れておきました。
使い方は、
強化学習２８を参照してください。
https://qiita.com/chokozainer/items/38592c3c81df5ec4399c