[root@hadoop102 hadoop]$ xsync /opt/module/hadoop-2.7.2/ #查看是否成功 [root@hadoop103 hadoop]$ cat /opt/module/hadoop-2.7.2/etc/hadoop/core-site.xml 4.为启动集群做准备,同步集群时间 [root@hadoop102 hadoop]# date.sh 2020-02-02 1. 5.启动集群 5.1 如果集群是第一次启动,需要格式化NameN...
在hadoop102上格式化:hdfs namenode -format 在hadoop102上启动集群:start-dfs.sh 分别在hadoop102-104上通过jps查看服务启动情况 在浏览器中查看:http://hadoop102:50070 停⽌集群:stop-dfs.sh 通过jps查看服务停⽌情况 停机做快照 2、问题 格式化有问题datanode只有⼀个的,把三个主机的这三都删了,再重新...
-- nn1的http通信地址 --><property><name>dfs.namenode.http-address.mycluster.nn1</name><value>hadoop102:50070</value></property><!-- nn2的http通信地址 --><property><name>dfs.namenode.http-address.mycluster.nn2</name><value>hadoop103:50070</value></property><!-- 指定NameNode元数据在...
scp -r zookeeper-3.4.10/ [root@hadoop104.atguigu.com:/opt/app/](mailto:root@hadoop104.atguigu.com:/opt/app/) 并分别修改myid文件中内容为3、4 (4)分别启动zookeeper [root@hadoop102 zookeeper-3.4.10]# bin/zkServer.sh start [root@hadoop103 zookeeper-3.4.10]# bin/zkServer.sh start [root@...
1、启动集群,可以参考 搭建hadoop集群的详细教程 ; 2、浏览器中输入:http://hadoop102:50070/status.html,这里需要注意,需前置在windows中维护好主机名,进而才能通过主机名访问,windows配置见windows设置通过主机名访问网站; 3、查看SecondaryNameNode信息。
-- nn1的http通信地址 --><property> <name>dfs.namenode.http-address.mycluster.nn1</name> <value>hadoop102:50070</value> </property><!-- nn2的http通信地址 --><property> <name>dfs.namenode.http-address.mycluster.nn2</name> <value>hadoop103:50070</value> </property><!-- 指定Name...
<value>hadoop01:50070</value> <!--namenode web UI--> </property> <property> <name>dfs.client.read.shortcircuit.streams.cache.size</name> <value>4096</value> <!-- 在客户端读取前会创建一个FileinputStreamCache,就是由前两个参数控制大小和过期时间, ...
[atguigu@hadoop102 module]$ xsync zookeeper-3.4.10/ 3、配置服务器编号 (1)在/opt/module/zookeeper-3.4.10/这个目录下创建zkData 代码语言:javascript 复制 [atguigu@hadoop102 zookeeper-3.4.10]$ mkdir-p zkData (2)在/opt/module/zookeeper-3.4.10/zkData目录下创建一个myid的文件 ...
通过web访问hdfs://hadoop102:50070/user/atguigu/input/.snapshot/s……// 快照和源文件使用相同数据 代码语言:javascript 复制 [atguigu@hadoop102 hadoop-2.7.2]$ hdfs dfs-lsr/user/atguigu/input/.snapshot/ (3)指定名称创建快照 代码语言:javascript ...
[alex@hadoop103hadoop-2.7.2]$ sbin/start-yarn.sh 5、Azkaban 执行 步骤和单Job案例 一样 6、查看HDFS [alex@hadoop102~]$ cd/opt/module/hadoop-2.7.2[alex@hadoop102hadoop-2.7.2]$ bin/hadoop fs –ls / 7、浏览器查看 http://hadoop102:50070...