7
4

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 5 years have passed since last update.

CircleCIAdvent Calendar 2015

Day 19

CircleCIでrake db:structure:loadが遅い場合のでschema_migrationsをBULK INSERTした

Last updated at Posted at 2016-01-27

migrationファイルの中に特殊な処理があるときなどは、db/schema.rbではdbのテーブル構成を忠実に再現出来ないケースが有り、その場合は生のSQLを使うdb/structure.sqlをdumpする方法があります。

こんな感じで設定出来ます。

config/application.rb
module YourApp
  class Application < Rails::Application
    config.active_record.schema_format = :sql
  end
end

このときrake db:schema:loadからrake db:structure:loadに変えたところ、CircleCIにおいて、処理速度が遅くなってしまったので調べていたところ、
bundle exec rake db:structure:dumpの最後のschema_migrationsテーブルの中身をdumpする処理BULK INSERTではなかったので、ちょろっと調整してみました。

config/initializers/extensions/active_record.rb
module ActiveRecord
  module ConnectionAdapters
    module SchemaStatements
      # CircleCIでのINSERTがとにかく遅いのでBulk Insertでschema_migrationsを出力する
      def dump_schema_information
        sm_table = ActiveRecord::Migrator.schema_migrations_table_name

        sql = String.new
        sql << "INSERT INTO #{sm_table} (version) VALUES"
        sql << ActiveRecord::SchemaMigration.order('version').map { |sm|
          "('#{sm.version}')"
        }.join(",")
        sql << ";\n\n"
      end
    end
  end
end

テーブル数200強、migration数が600弱という環境で、ローカルのmacだと以下ぐらいの差です。

  • MacBook Pro (Retina, 15-inch, Mid 2014)
  • プロセッサ: 2.2 GHz Intel Core i7
  • メモリ: 16 GB 1600 MHz DDR3

before

time bundle exec rake db:structure:load  5.60s user 3.71s system 63% cpu 14.592 total

After

time bundle exec rake db:structure:load  4.46s user 2.05s system 65% cpu 9.973 total

CircleCIだと1分近い差がでました。

7
4
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
7
4

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?