MySQLのSQLをtokenizeするRubyの正規表現

mysqldumpしたSQLをparseするための自分メモ

sql = <<__SQL__
CREATE TABLE `users` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `email` varchar(11) NOT NULL,
  `created_at` datetime DEFAULT NULL,
  `updated_at` datetime DEFAULT NULL,
  `restaurant_id` int(11) DEFAULT NULL,
  PRIMARY KEY (`id`),
  KEY `index_users_on_email` (`email`),
) ENGINE=InnoDB AUTO_INCREMENT=1000 DEFAULT CHARSET=utf8;
__SQL__
p sql.scan(/(?:''|(?:'.*?[^']'(?!'))|`.*?`|-?\d+(?:\.\d+)?|\w+|\S)/m)