配置并启动spark的thriftserver网关-创新互联

1、保证spark-sql已经使用mysql作为metadata存储介质

创新互联建站主要从事网站设计、做网站、网页设计、企业做网站、公司建网站等业务。立足成都服务肥城,10多年网站建设经验,价格优惠、服务专业,欢迎来电咨询建站服务:028-86922220

2、启动thrift网关

$SPARK_HOME/sbin/start-thriftserver.sh --driver-class-path /usr/local/spark/spark-1.3.0-bin-hadoop2.3/lib/mysql-connector-java-5.1.6-bin.jar --master spark://hd1:7077 --executor-memory 2g --total-executor-cores 10

3、确认是否正确

beeline

>!connect jdbc:hive2://hd1:10000

user:hadoop

password:******

show databases;

show tables;

如果能够看到和本地启动的spark-sql一样的结果,就是确认成功了。

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


分享标题:配置并启动spark的thriftserver网关-创新互联
网页URL:http://hbruida.cn/article/codoig.html