なぜ作ったか
JSONはJavaScriptと違ってコメントを含められないのですが、APIドキュメントでサンプルデータを書くときは便宜的にコメントを書いたりします。
そこで、コメントを削除して、ついでにミニファイするユーティリティをライブラリとコマンドラインツールとして作成してみました。
Goでlexerを作る
Goでlexerを書く手法の一つとしてLexical Scanning in Go - Rob Pike - YouTubeがあります。Go標準ライブラリtext/templateのtext/template/parse/lex.goはこの手法で実装されています。
lexerの状態をstateFnという関数で表すのと、lexerが処理したトークンをchannelでやりとりすることにより、lexerの実装をすっきり書けるのが特徴です。
type stateFn func(*lexer) stateFn
上のlexerの仕組みをそのまま真似た版
hnakamur/jsonpreprocessのバージョンでは上のlexerの仕組みをそのまま真似た実装となっています。
使い方のサンプル。ミニファイするコマンドラインツールのソースはこちらです。
jsonpreprocess/minifyjson/main.go at e6a36e006e4f8b8c145972a867ce474fa8299b4d · hnakamur/jsonpreprocess
（このバージョンの時点ではパッケージ名がjsonutilだったので、go getした後にディレクトリ名を変えるか、ソースでjsonutilをjsonpreprocessに変更する必要があります。）
lexerのinputをstringからio.Readerに変えた版
lexerのinputがstringだと巨大なファイルを読み込むときに内容をメモリ上に読み込まれてしまうのがいまいちです。そこでinputをstringではなくio.Readerにするように改良してみました。
hnakamur/jsonpreprocess
使い方のサンプル。ミニファイするコマンドラインツールのソースはこちらです。
jsonpreprocess/minifyjson/main.go at master · hnakamur/jsonpreprocess