Spark
sparksql

spark-sqlのthriftserverの起動オプション

More than 1 year has passed since last update.
~/bin/start-thriftserver.sh
#!/bin/sh                                                                                                     
export SPARK_HOME=/opt/spark2.0

$SPARK_HOME/sbin/start-thriftserver.sh \
  --hiveconf hive.server2.thrift.port=10001 \
  --hiveconf hive.server2.thrift.bind.host=[なんかさーばー] \
  --master yarn --conf spark.ui.port=4049
  • port=10000は普通のhiverserv2が使っているので、10001に変更
  • masterはyarnで
  • spark.ui.portは他が使っているので、4049に変更