当HDFS配置了NameNode HA后，通过zookeeper-client访问ZooKeeper的/hadoop-ha/nameservice1/ActiveStandbyElectorLock会报错。报错信息：[root@ctkf01 ~]# zookeeper-client[zk: localhost:2181(CONNECTED) 3] l……继续阅读 » 九万里大数据 2年前 (2021-06-07) 586浏览 0评论2个赞
假设CDH上已经安装了Spark1.6.0和Spark2.4.0，用spark-shell和spark2-shell可以分别调用两个版本的Spark。现在需要安装第三个版本的Spark客户端，这里讲述这种场景下再安装一个1.6.3版本的Spark客户端。普通的Spark客户端安装可以参考往期文章：https://www.jwldata.com/archi……继续阅读 » 九万里大数据 2年前 (2021-05-26) 777浏览 0评论0个赞
虽然通过CDH控制台可以很方便地安装hive客户端，但如果客户端机器并不属于自己管辖，通过这种先安装cloudera manager agent再安装hive客户端的方式显然不妥当。在这种情形下，用户自己安装配置hive客户端，是最好的方式。安装JDK首先需要安装JDK配置hosts将服务端的hosts全部配置，添加到客户端的/etc/hosts中。……继续阅读 » 九万里大数据 2年前 (2021-04-30) 1889浏览 0评论5个赞
虽然通过CDH控制台可以很方便地安装hadoop客户端，但如果客户端机器并不属于自己管辖，通过这种先安装cloudera manager agent再安装hadoop客户端的方式显然不妥当。在这种情形下，用户自己安装配置hadoop客户端，是最好的方式。安装JDK首先需要安装JDK配置hosts将服务端的hosts全部配置，添加到客户端的/etc/h……继续阅读 » 九万里大数据 2年前 (2021-04-28) 2062浏览 0评论10个赞
