> 文章列表 > 3.HADOOP后续配置

3.HADOOP后续配置

3.HADOOP后续配置

为了操作的方便,我们经常进行一些自定义的配置

1.自定义脚本

除了上次自定义的shell脚本,我们还需要自定义一些方便集群操作的脚本。

1.1 xsync:集群文件同步脚本

      具体代码参考上一节

1.2 xcall:让命令执行的时候更加规整

# 先安装pdsh
sudo yum install -y epel-release
sudo yum install -y pdsh
# pdsh使用例子:在三台hadoop上同时执行jps命令
pdsh -w \'hadoop101,hadoop102,hadoop103\' \'jps\'

此时发现输出的结果不是很整齐,因此自定义xcall脚本,让不同机器有序输出。

sudo vim /bin/xcall

 粘贴如下内容:

#!/bin/bash
pdsh -w \'hadoop101,hadoop102,hadoop103\' \"$*\" | awk -F \":\" \'{temp=$1;$1=null;array[temp]=array[temp]$0\"\\n\"}END{for (i in array) {print \"===========  \"i\"  ============\\n\"array[i]}}\'