特に何もせずSupport Libraryを23.2にあげたら矢印とmoreのアイコンが黒くなってしまった…
これは，Vector Drawablesのサポートに関する記述をbuild.gradleに追加せず，
Lollipopより前のバージョンの端末で動かした場合に起こる現象のようです．
記述の仕方はAndroid Developers Blogの記事に載ってるのでここでは割愛します．
記事にあるように正しく記述すれば，以下のようにちゃんとアイコンが表示されます．
詳しい情報はこのissueにあります．
何かおかしい点などあればコメントお願いします🙇