homebrewでのインストールがうまく行かなかったのでソースコードからインストールした。
wget -i https://pypi.python.org/packages/source/p/pandas/pandas-0.14.0.tar.gz
tar xvf pandas-0.14.0.tar.gz
cd pandas-0.14.0
sudo python3.4 setup.py install

一旦端末を閉じる
$python3.4
...
import pandas
/opt/local/Library/Frameworks/Python.framework/Versions/3.4/lib/python3.4/site-packages/pandas-0.14.0-py3.4-macosx-10.9-x86_64.egg/pandas/io/excel.py:626: UserWarning: Installed openpyxl is not supported at this time. Use >=1.6.1 and <2.0.0.
.format(openpyxl_compat.start_ver, openpyxl_compat.stop_ver))