非同期送信を利用する場合は、SMTPの設定を指定するには smtp_settings ではなく async_smtp_settings を使用します:
/path/to/configuration.yml
development:
email_delivery:
delivery_method: :async_smtp
async_smtp_settings: # smtp_settings ではありません
address: ...
port: ...
...