セマンティックセグメンテーションの転移学習について

　セマンティックセグメンテーションの転移学習において、新たにセグメンテーションしたいデータが学習済みモデルに用いたデータと類似している(映っているオブジェクトやクラス数なども同じ)場合、新たに層を追加したり、層に変更を加えたりする必要はあるのでしょうか？