出现上述问题可能是格式化两次hadoop,导致没有datanode 解决方法1:重启linux,再使用start-dfs.sh和start-yarn.sh 重启一下hadoop 解决办法2:找到hadoop安装目录下 h…
标签:sh
使用java api操作zookeeper
ZooKeeper服务命令: 在准备好相应的配置之后,可以直接通过zkServer.sh 这个脚本进行服务的相关操作 1. 启动ZK服务: sh bin/zkServer.sh start 2. 查看ZK服务状态: sh…
Zookeeper教程 - Zookeeper命令行操作
Zookeeper提供了很多方便的功能,方便我们查看服务器的状态,增加,修改,删除数据(入口是zkServer.sh和zkCli.sh)。 还提供了一系列四字命令,方便我们跟服务器进行各种交互,来确认服务器当前的工作情况…
Zookeeper常用命令
ZooKeeper服务命令: 在准备好相应的配置之后,可以直接通过zkServer.sh 这个脚本进行服务的相关操作 1. 启动ZK服务: &nbs…
Jenkins配置
Jenkins配置的问题 使用Jenkins发布服务的时候,通过tomcat的shutdown.sh脚本停止tomcat服务之后,部署的实例线程并不会退出 写了一个强制杀死进程的脚本 #!/bin/bash #强制关闭进…
HBase golang初探
最近要进行大数据相关的任务,牛刀小试,先将最基础的HBase搭建并实践起来。本文借用docker,快速搭建HBase基础环境,并使用go结合thrift调用相关API进行数据操作。 0、方便起见,需要一个docker环境…
hadoop启动和关闭命令
start-all.sh 启动所有的Hadoop守护进程。包括NameNode、 Secondary NameNode、DataNode、JobTracker、 TaskTrack stop-all.sh 停止所有的Ha…
Kafka常用命令行总结
以下是kafka常用命令行总结: 1.查看topic的详细信息 ./kafka-topics.sh -zookeeper127.0.0.1:2181-describe -topic test…
sparkstreaming消费kafka数据
具体的配置参考kafka配置 启动zookeeper cd /home/hadoop-2.6.4/zookeeper-3.4.6/bin ./zkServer.sh start 从节点一样执行以上命令 #查看zk集群状态…
大数据工具:Spark配置遇到的坑
遇到的问题: 在配置spark的时候,启动spark-shell正常启动和使用,但是使用脚本start-all.sh 启动所有的服务时遇到问题,抛出Java异常: Unsupported major.minor vers…
尚硅谷大数据技术之HBase第2章 HBase安装
2.1 Zookeeper正常部署 首先保证Zookeeper集群的正常部署,并启动之: [atguigu@hadoop102 zookeeper-3.4.10]$ bin/zkServer.sh start [atgu…
Spark各组件功能简单理解(quick start)
各个组件 conf/spark-env.sh 配置spark的环境变量 conf/spark-default.conf 配置spark应用默认的配置项和spark-env.sh有重合之处,可在提交应用时指定要用的配置文件…