Запуск в несколько потоков

• find -type d выводит имена всех директорий.
• xargs -I '{}' xargs запускает для каждого файла команду rsync. Ключ -P 5 утилиты xargs задает количество одновременно запущенных команд (потоков rsync), то есть одновременно будут запущена передача 5-ти файлов. Каждый файл передается отдельно.

find -type d | xargs -I '{}' -P 5 -n1 rsync -a --delete /home/old/Foto/'{}'/ /home/old/CloudDisk/'{}'/

Постоянная синхронизация каталогов

Источник

Для CentOS ставим и запускаем rsync-daemon

Концепция:

• на источнике определяем директории доступные для синхронизации, с набором параметров для каждой
• пользователь здесь условный, в рамках rsync'a, можно не указывать, будет анонимус
• на приемнике делаем скрипт для единичной синхронизации, запускаем его по расписанию

Клиент (источник):

# /etc/rsyncd.conf
max connections = 10
exclude = lost+found/
dont compress = *.gz *.tgz *.zip
# use chroot = false - ???
 
[service1]
        path = /home/dn/outfolder/
        comment = My service 1
        read only = yes
        list = yes
        auth users = synuser
        secrets file = /etc/rsyncd.scrt (формат простой- логин:пароль)
        hosts allow = 192.168.0.100
        hosts deny = *

Сервер (приемник):

#!/bin/bash
 
password_file='/etc/rsyncd.scrt'
user='synuser'
ip='192.168.0.101'
source='service1'
destination='/var/infolder/service1/'
 
rsync -a --delete-after --password-file=$password_file $user@$ip::$source $destination

В файле кредлов сохранен только пароль

* Возможны траблы с SELinux, его надо настроить либо отключить
* Права на файлы кредлов 600

Примеры использования

  # Аргументы передаются в конце команды
find. -name *.png -type f -print | xargs tar -cvzf images.tar.gz
 
  # Так в указанное место (скобки похоже по умолчанию используются)
ls /etc/*.conf | xargs -i cp {} /home/likegeeks/Desktop/out
 
  # Добавить строку (дату в данном случае) к каждому элементу вывода
ls / | xargs -I '{}' echo "$(date '+%Y-%m-%d') - {}"
 
tar -cvf $pathToBcps$nameArchive /etc/letsencrypt /var/www /etc/apache2 | xargs -I '{}' echo "$(date '+%Y-%m-%d_%H-%M') - {}" > /usr/zxbcps/bin/logs/lastBcps.log
 
  # Переименование
ls | sed -e "p;s/.txt$/.sql/" | xargs -n2 fmv
 
  # Смена прав доступа
find . -group root -print | xargs chown temp
 
  # Удалить файлы старше 7 дней 
find /tmp -type f -name '*' -mtime +7 -print0 | xargs -0 rm -f
 
  # Можно заменить циклом, например это 
find . -type f -and -iname "*.deb" | xargs -n 1 dpkg -I
    # Эквивалентно 
for file in `find . -type f -and -iname "*.deb"`; do dpkg -I "$file"; done

Инфа разбита по блокам, результат в Json

#!/bin/bash
 
#
# Скрипт для сбора и вывода информации с хоста, используется в zabbix, UserParameters
# Информация разбита на смысловые блоки, блоки на кейсы в свитче,
#       название нужного блока передается первым аргументом при запуске скрипта
#       каждый блок соответствует zabbix-ключу, соответствие задано уже в конфиге заббикс агента,
#               типа- "UserParameter=mykeys.host,/var/tmp/get-info.sh host" - ключ для получения имени хоста
#
 
case $1 in
'host') # Имя хоста
        echo '[{"Имя хоста": "' `hostname` '"}]';;
 
'os') # ОС, дистрибутив и версия ядра
        # Первый вариант лучше, но у Debian его нет, поэтому есть второй
        distrib=`cat /etc/system-release 2>/dev/null`
        if [[ -z $distrib ]]; then
                distrib=`cat /etc/os-release | grep -Po "PRETTY_NAME=\K.*" | sed -e s/\"//g`
        fi
        printf '[{"Дистрибутив": "%s", "Версия ядра": "%s"}]\n' "$distrib" `uname -r`;;
 
'cpu') # ЦП
        echo '[{"Модель":"'`lscpu | grep -Po '^Model name:\x20*\K.*'`'' x''`lscpu | grep -Po '^CPU\(s\):\x20*\K.*'`'"}]';;
 
'mem') # ОЗУ, объем в гб
        echo '[{"Объем": "' `free -th | grep 'Total:' | awk '{print $2}'` '"}]';;
 
'devnet') # Сетевые уст-ва
        # Массив доступных интерфейсов, только имена
        devs=( $(ip -br l | grep -vE '^lo|^docker0' | awk '{print $1}') )
 
        result='[ '
        # Проходим перечень интерфейсов, собираем инфу по каждому
        for dev in ${devs[@]}; do
                status=`ip -br a show $dev 2>/dev/null | awk '{print $2}'`
                # Встречаются какие то абстрактные интерфейсы, по ним нет никакой инфы, такие пропускаем
                if [[ -z $status || $status == 'DOWN' ]]; then
                        continue
                fi
                speed=`cat /sys/class/net/$dev/speed 2>/dev/null`
                duplex=`cat /sys/class/net/$dev/duplex 2>/dev/null`
                ips=`ip -br a show $dev 2>/dev/null | grep -Eo '([0-9]{0,3}\.){3}[0-9]{0,3}/([0-9]{0,3})' 2>/dev/null`
                label=`cat /sys/class/net/$dev/device/label 2>dev/null`
                result+='{"Наименование": "'$dev'", "Модель": "'$label'", "Скорость": "'$speed'", "Поддержка duplex": "'$duplex'", "Статус": "'$status'", "IP-адреса": "'$ips'"},'
        done
        echo ${result::-1}']';;
 
'devstor') # Устройства хранения, со своими разделами
        res="`lsblk -Jo MODEL,SERIAL,SIZE,TYPE,TRAN | grep -E '"type":"disk"|"type": "disk"' | sed s/'model'/'Модель'/g | sed s/'serial'/'Серийный номер'/g | sed s/'size'/'Размер'/g | sed s/'tran'/'Тип'/g | sed -e s/'"type":"disk"\,'//g$
        echo '['${res::-1}']';;
 
'location') # Расположение, исходя из IP адреса
        var=`curl -s ipinfo.io | grep -E 'country|region|city' | sed s/'city'/'Город'/g | sed s/'region'/'Регион'/g | sed s/'country'/'Страна'/g`
        echo '[{'${var::-1}'}]'
esac

Распаковать RPM без установки

apt install rpm2cpio
rpm2cpio myFile.rpm | cpio -idmv

Замер скорости

Утилита iperf3, кроссплатформенная, замер пропускной способности

  # Винда
https://iperf.fr/iperf-download.php\\
  # Linux
sudo dnf install iperf3
 
  # прослушивание сервером
iperf3 -s
 
  # Запуск клиента
iperf3 -c host-ip