BitConverterは速いって話をしたな。あれは嘘だ。

すいません。ごめんなさい。

コードの最適化ありなしで速度が変わる事がわかりました。

コード最適化なし

BitConverter 50ms
Marshal 802ms
unsafe 140ms

コード最適化ある

BitConverter 49ms
Marshal 631ms
unsafe 32ms

現実的にコード最適化しないとかないのでBitConverterよりunsageの方が速いです。
unsafeとコード最適化のからみはいずれ調べたいです。