この記事で説明する対処法はSelectorクラス派生のコントロールに共通して当てはまります
x:Bind の場合は Mode=OneWay or Mode=TwoWay を指定する
{Binding}を利用した場合はデフォルトでMode=OneWayですが、{x:Bind}はMode=OneTimeがデフォルトです。
Itemがclassの場合、IEquatable を実装する
アイテムの同値を判定するのにReferenceEqualsが利用されますが、IEquatableが実装されている場合はそちらが優先されます。
同じインスタンスのつもりでSelectedItemに指定したアイテムが別インスタンスとなる可能性がある場合は、IEquatableを実装することで意図通りバインディングされます。