【Shell实战】Linux多节点分发文件,索爱w760拆机_硬件技术

文件名：【Shell实战】Linux多节点分发文件,索爱w760拆机【Shell实战】Linux多节点分发文件多节点分发文件

通过shell脚本将跳板机或者软件中转机上的文件，分发至一组目标机器中。

使用前提：跳板机或者软件中转机与目标集群均配置免密。目标机器的接收目录拥有足够的大小。脚本使用说明：

sh distributing_packages.sh /data/gd/distributing /data/software 22

第一个参数为分发文件所在目录所在的绝对路径:/data/gd/distributing第二个参数为目标机器接收目录所在的绝对路径:/data/software第三个参数为(可选参数) ssh端口号要求整个分发机器们统一.22 使用日志输出样例 2023-11-15 17:46:39,273 [INFO ] 参数提示:第一个参数为分发目录所在的绝对路径,第二个参数为目标接收目录所在的绝对路径,第三个参数为(可选参数) ssh端口号要求整个分发机器们统一.例如: sh distributing_packages.sh /data/gd/distributing /data/software 222023-11-15 17:46:39,275 [INFO ] =================== 安装前检查开始 ===================2023-11-15 17:46:39,280 [INFO ] =================== 安装前检查完毕 ===================2023-11-15 17:46:39,665 [INFO ] =================== 分发文件开始 ===================2023-11-15 17:46:39,672 [INFO ] 正在向[192.168.1.1]发送文件[apache-doris-2.0.2-bin-x64-noavx2.tar.gz]...2023-11-15 17:47:04,260 [INFO ] 正在向[192.168.1.1]发送文件[apache-doris-2.0.2-bin-x64.tar.gz]...2023-11-15 17:47:28,916 [INFO ] 正在向[192.168.1.1]发送文件[distributing_config.properties]...2023-11-15 17:47:29,055 [INFO ] 正在向[192.168.1.1]发送文件[distributing_packages.sh]...2023-11-15 17:47:29,195 [INFO ] 正在向[192.168.1.1]发送文件[jdk1.8.0_161.tgz]...2023-11-15 17:47:30,969 [INFO ] 向[192.168.1.1]发送文件完毕2023-11-15 17:47:30,977 [INFO ] 正在向[192.168.1.2]发送文件[apache-doris-2.0.2-bin-x64-noavx2.tar.gz]...2023-11-15 17:47:55,485 [INFO ] 正在向[192.168.1.2]发送文件[apache-doris-2.0.2-bin-x64.tar.gz]...2023-11-15 17:48:19,987 [INFO ] 正在向[192.168.1.2]发送文件[distributing_config.properties]...2023-11-15 17:48:20,132 [INFO ] 正在向[192.168.1.2]发送文件[distributing_packages.sh]...2023-11-15 17:48:20,272 [INFO ] 正在向[192.168.1.2]发送文件[jdk1.8.0_161.tgz]...2023-11-15 17:48:22,036 [INFO ] 向[192.168.1.2]发送文件完毕2023-11-15 17:48:22,044 [INFO ] 正在向[192.168.1.3]发送文件[apache-doris-2.0.2-bin-x64-noavx2.tar.gz]...2023-11-15 17:48:46,588 [INFO ] 正在向[192.168.1.3]发送文件[apache-doris-2.0.2-bin-x64.tar.gz]...2023-11-15 17:49:11,176 [INFO ] 正在向[192.168.1.3]发送文件[distributing_config.properties]...2023-11-15 17:49:11,323 [INFO ] 正在向[192.168.1.3]发送文件[distributing_packages.sh]...2023-11-15 17:49:11,470 [INFO ] 正在向[192.168.1.3]发送文件[jdk1.8.0_161.tgz]...2023-11-15 17:49:13,266 [INFO ] 向[192.168.1.3]发送文件完毕2023-11-15 17:49:13,269 [INFO ] =================== 分发文件成功 ===================

目标机器的IP存放在配置文件distributing_config.properties中，脚本通过解析配置文件获取它们。

脚本源码：

distributing_packages.sh

#!/bin/bash# Author : Donny# Date : 2023/11/15# Func : 软件包分发脚本# 例如：sh distributing_packages.sh /data/gd/distributing /data/software 22########################################################################### ############################## Prameter area ############################### 采用绝对地址表示软件包分发的目录，容量至少50G。distributingPackagePath=$1# 分发配置文件名distributingConfigFile="distributing_config.properties"# 获取本地IPlocalIP=$(ifconfig -a | grep inet | grep -v 127.0.0.1 | grep -v inet6 | awk '{print $2}')# ssh端口为可选参数sshPort=22# 分发目标节点IPtargetIps=""# 分发目标节点的接收目录，容量至少50G。targetPath=$2if [[ -n "${3}" ]]; thensshPort=${3}fi# ############################## Buildin function area ############################### >>>>>>>>>>>>>>>>>>>>>>>>>>>>>> 日志模块 >>>>>>>>>>>>>>>>>>>>>>>>>>>>>># 初始化日志模块function initLogModule() {# 初始化日志输出logPath=$(pwd)# 脚本日志目录LogFile="$logPath/logs/distributing_package_$(date +%F).log"mkdir -p "${distributingPackagePath}/logs"# 创建日志文件if ! [ -f "${LogFile}" ]; thentouch "$LogFile"fiecho "日志文件为: ${LogFile}"}# 输出红色高亮字体并标记ERRORfunction echo_error() {echo -e "\033[1;31m$1\033[0m"[ -n "${LogFile}" ] && echo "$(date +%F\ %T,%N | cut -c1-23) [ERROR] $1" >>"${LogFile}"}# 输出默认字体并标记INFOfunction echo_info() {echo -e "$1"[ -n "${LogFile}" ] && echo "$(date +%F\ %T,%N | cut -c1-23) [INFO ] $1" >>"${LogFile}"}# 输出绿色字体并标记INFOfunction echo_green() {echo -e "\033[32m$1\033[0m"[ -n "${LogFile}" ] && echo "$(date +%F\ %T,%N | cut -c1-23) [INFO ] $1" >>"${LogFile}"}# <<<<<<<<<<<<<<<<<<<<<<<<<<<<<< 日志模块 <<<<<<<<<<<<<<<<<<<<<<<<<<<<<<# 获取配置文件内容function getPropertiesValue() {# check文件是否存在if ! [ -f "${distributingPackagePath}/${distributingConfigFile}" ]; thenecho_error "缺少配置文件[${distributingPackagePath}/${distributingConfigFile}]"exit 1fi# check 文件中是否配置了distributingTargeIpsfile=$(grep 'distributingTargeIps' "${distributingPackagePath}"/"${distributingConfigFile}")if [[ -z "${file}" ]]; thenecho_error "缺少配置项distributingTargeIps"exit 1fi# check distributingTargeIps的合法性targetIps=$(echo "$file" | awk -F "=" '{print $2}' | awk -F "," '{for(i=1;i<=NF;i++) a[i,NR]=$i}END{for(i=1;i<=NF;i++) {for(j=1;j<=NR;j++) printf a[i,j] " ";print ""}}')length1=$(echo "$targetIps" | wc -l)length2=$(echo "$targetIps" | sort -u | wc -l)if [[ "$length1" != "$length2" ]]; thenecho_error "distributingTargeIps中存在IP重复或存在多余分隔符"exit 1fierrorIp=""for ip in ${targetIps}; doif [[ "${ip}" != "${localIP}" ]]; thenssh -p${sshPort} "${ip}" 'mkdir -p '${targetPath}'' &>/dev/null[ "$?" != "0" ] && errorIp="$errorIp"$ip, && continuefidoneif [[ -n "${errorIp}" ]]; thenerrorIp=${errorIp::-1}echo_error "${errorIp}无法ssh"exit 1fi}# ############################## Execute body area ############################### 初始化日志initLogModuleecho_info "参数提示:第一个参数为分发目录所在的绝对路径,第二个参数为目标接收目录所在的绝对路径,第三个参数为(可选参数) ssh端口号要求整个分发机器们统一.例如: sh $0 /data/gd/distributing /data/software 22"echo_info "=================== 安装前检查开始 ==================="current=$(whoami)# 0.用户检查if [[ "root" != "$current" ]]; thenecho_error "请使用root用户执行脚本！"exit 1fi# 1.检查参数是否齐全if [[ -z "${distributingPackagePath}" || -z "${targetPath}" ]]; thenecho_error "请输入正确参数:第一个参数为分发目录所在的绝对路径,第二个参数为目标接收目录所在的绝对路径第三个参数为(可选参数) ssh端口号要求整个集群统一.例如: sh $0 /data/gd/distributing /data/software 22"exit 1# 2.检查路径是否非法elif ! [ -d "${distributingPackagePath}" ]; thenecho_error "目录${distributingPackagePath}不存在"exit 1fiecho_green "=================== 安装前检查完毕 ==================="getPropertiesValueerrorflag=0echo_info "=================== 分发文件开始 ==================="# 向集群结点分发for ip in ${targetIps}; doerrorDistribution=""if [[ "${ip}" != "${localIP}" ]]; then# 发送配置文件packageFiles=$(ls ${distributingPackagePath})for file in ${packageFiles}; dosudo scp -P${sshPort} ${distributingPackagePath}/${file} root@${ip}:${targetPath}/${file} &>/dev/null[ "$?" != "0" ] && errorDistribution="$errorDistribution""向[$ip]发送[$file]失败, "doneif [[ -n "${errorDistribution}" ]]; thenerrorflag=1errorDistribution=${errorDistribution}"。"echo_error "${errorDistribution}"elseecho_info "向[${ip}]发送文件完毕"fifidoneif ((${errorflag} == 1)); thenecho_error "=================== 分发文件失败 ==================="exit 1elseecho_green "=================== 分发文件成功 ==================="fi# ############################## Return value area ##############################exit 0

distributing_config.properties

# distributingTargeIps代表软件包需要分发到的IP地址,格式ip1,ip2,ip3distributingTargeIps=192.168.1.1,192.168.1.2,192.168.1.3

【Shell实战】Linux多节点分发文件,索爱w760拆机

2016年有序放开发用电计划工作综述

【Shell脚本11】Shell 函数,原道n12豪华版

【QT5-自我学习-线程qThread移植与使用-通过代码完成自己需要功能-移植小记3】,wgt2012

【QT开发（6）】0926-QT 中加入 fastDDS 通信库的程序使用说明,索爱u10i

【Qt】报错error-undefined reference to `vtable for Consumer‘的解决方法,PSP MEDIA PLAYER

【Qt】文件系统,kf755（qt文件管理系统）

【Qt之QSequentialIterable】使用,s5830官方

【Qt之QSqlRelationalTableModel】描述及使用,e本t3

【Qt之QVariant】使用,金立a696

【Qt之QtConcurrent】描述及使用,p2p电视

【Qt图书管理系统】4.系统设计与详细设计,pop.pcpop.com（基于qt的图书管理系统）

« 2025年12月 »
一	二	三	四	五	六	日
1	2	3	4	5	6	7
8	9	10	11	12	13	14
15	16	17	18	19	20	21
22	23	24	25	26	27	28
29	30	31