1、保证spark-sql已经使用mysql作为metadata存储介质
2、启动thrift网关
$SPARK_HOME/sbin/start-thriftserver.sh --driver-class-path /usr/local/spark/spark-1.3.0-bin-hadoop2.3/lib/mysql-connector-java-5.1.6-bin.jar --master spark://hd1:7077 --executor-memory 2g --total-executor-cores 10
3、确认是否正确
beeline
>!connect jdbc:hive2://hd1:10000
user:hadoop
password:******
show databases;
show tables;
如果能够看到和本地启动的spark-sql一样的结果,就是确认成功了。
亿速云「云数据库 MySQL」免部署即开即用,比自行安装部署数据库高出1倍以上的性能,双节点冗余防止单节点故障,数据自动定期备份随时恢复。点击查看>>
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。