评论：cloudera cdh6 添加spark-sql http://blog.51yip.com/hadoop/2286.html －－一步，二步，三步，N步，二行脚印 Tue, 07 Jun 2022 01:26:20 +0000 http://wordpress.org/?v=2.9.1 hourly 1 来自：feego http://blog.51yip.com/hadoop/2286.html/comment-page-1#comment-18211 feego Sat, 01 May 2021 17:06:33 +0000 http://blog.51yip.com/?p=2286#comment-18211 兄弟，我按照你的步骤操作下，还是有报When running with master 'yarn' either HADOOP_CONF_DIR or YARN_CONF_DIR must be set in the environment. 这一步是为了让新的spark走cdh的配置？ mv spark-env.sh spark-env //这一步很重要 环境变量已经设置了上面两个，还有其他原因么？ 兄弟，我按照你的步骤操作下，还是有报When running with master 'yarn' either HADOOP_CONF_DIR or YARN_CONF_DIR must be set in the environment.
这一步是为了让新的spark走cdh的配置？
mv spark-env.sh spark-env //这一步很重要
环境变量已经设置了上面两个，还有其他原因么？

]]> 来自：zhc http://blog.51yip.com/hadoop/2286.html/comment-page-1#comment-18012 zhc Mon, 23 Dec 2019 09:10:25 +0000 http://blog.51yip.com/?p=2286#comment-18012 为什么我配置第7步设置yarn.resourcemanager后，启动失败。 另外spark需要进行编译吗？ Failed to load main class org.apache.spark.sql.hive.thriftserver.HiveThriftServer2. You need to build Spark with -Phive and -Phive-thriftserver. 为什么我配置第7步设置yarn.resourcemanager后，启动失败。
另外spark需要进行编译吗？
Failed to load main class org.apache.spark.sql.hive.thriftserver.HiveThriftServer2.
You need to build Spark with -Phive and -Phive-thriftserver.

]]>