文章/答案/技术大牛

发布

社区首页 >问答首页 >启动spark中的节约服务器

问启动spark中的节约服务器
EN

Stack Overflow用户

提问于 2016-11-17 11:05:23

回答 2查看 7.7K关注 0票数 3

有人能帮我启动火花节约服务器吗？我正在以独立模式运行我的脚本，我想在我的商业智能工具中获取数据。

为了做到这一点，我需要启动节约服务器。我试着运行shell脚本：

$SPARK_HOME/sbin/start-thriftserver.sh

但我发现了一个错误：

错误"ps未知选项-0“

apache-spark

apache-spark-sql

spark-thriftserver

回答 2

Stack Overflow用户

回答已采纳

发布于 2016-11-22 12:14:15

sbin/脚本在linux下运行良好，但它们不准备在Failed to start master for Spark in Windows中运行(参见Failed to start master for Spark in Windows)。但是可以使用命令在前台启动spark，不依赖于操作系统：

java -cp conf/:jars/* org.apache.spark.deploy.SparkSubmit --class org.apache.spark.sql.hive.thriftserver.HiveThriftServer2 spark-internal

然后，您可以使用spark提供的直线测试连接：

$ ./bin/beeline -u jdbc:hive2://localhost:10000
Connecting to jdbc:hive2://localhost:10000
16/11/22 13:09:57 INFO Utils: Supplied authorities: localhost:10000
16/11/22 13:09:57 INFO Utils: Resolved authority: localhost:10000
16/11/22 13:09:57 INFO HiveConnection: Will try to open client transport with JDBC Uri: jdbc:hive2://localhost:10000
Connected to: Spark SQL (version 2.0.1)
Driver: Hive JDBC (version 1.2.1.spark2)
Transaction isolation: TRANSACTION_REPEATABLE_READ
Beeline version 1.2.1.spark2 by Apache Hive
0: jdbc:hive2://localhost:10000> show databases;
+---------------+--+
| databaseName  |
+---------------+--+
| default       |
| elo           |
+---------------+--+
2 rows selected (0,26 seconds)

票数 5

Stack Overflow用户

发布于 2018-05-21 13:46:57

在星火2.2.1

cd %SPARK_HOME%\bin
spark-class org.apache.spark.deploy.SparkSubmit --class org.apache.spark.sql.hive.thriftserver.HiveThriftServer2 spark-internal

这就启动了windows中的星火节约服务器。在另一个终端中，运行下面的beeline命令来打开jdbc连接

cd %SPARK_HOME%\bin
beeline -u jdbc:hive2://localhost:10000

票数 8

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/40653248

复制

相似问题

问启动spark中的节约服务器
EN

回答 2

Stack Overflow用户

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问启动spark中的节约服务器EN

回答 2

Stack Overflow用户

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问启动spark中的节约服务器
EN