Table des matières
- 2026:
- 2025:
13 billet(s) pour novembre 2026
| Réseaux - protocole QUIC mieux que TCP | 2026/11/17 21:26 | Jean-Baptiste |
| Notes conversion JSON YAML | 2026/11/13 11:16 | Jean-Baptiste |
| Git commit perdu | 2026/11/12 18:16 | Jean-Baptiste |
| Notes mojo lang | 2026/11/11 20:34 | Jean-Baptiste |
| Notes rust lang compilation | 2026/11/11 18:35 | Jean-Baptiste |
| Mémoire VSIZE VMSIZE SEGV lang C | 2026/11/11 15:59 | Jean-Baptiste |
| Ansible-navigator utilisation de ansible-vault | 2026/11/06 11:33 | Jean-Baptiste |
| Err Ansible - Module result deserialization failed No start of json char found | 2026/11/06 09:09 | Jean-Baptiste |
| Script Python conversion JSON vers CSV | 2026/11/06 08:14 | Jean-Baptiste |
| Filter Incoming IPv4 Packets Containing IP Options - cve-2026-98432 mitigation - Kernel TCP Use-After-Free | 2026/11/04 21:04 | Jean-Baptiste |
| Notes ZFS | 2026/11/03 18:04 | Jean-Baptiste |
| Diff image container | 2026/11/03 16:30 | Jean-Baptiste |
| Notes processus multi-thread | 2026/11/03 10:59 | Jean-Baptiste |
Shell script LVM lsblk get vgfree space without root privileges
vg_free.sh
#! /bin/bash # Creative Commons CC0 Public Domain Licence set -euo pipefail IFS=$' \t\n' export LC_ALL=C SCRIPT_NAME="$(basename "$0")" usage() { cat <<-EOF Usage: $SCRIPT_NAME [ VG_NAME ] Usage: $SCRIPT_NAME [ -a|--all ] Usage: $SCRIPT_NAME [ -h|--help ] $SCRIPT_NAME display volume groups free space in MiB for non-root users. $SCRIPT_NAME [ VG_NAME ] Is equivalent : sudo vgs --readonly --noheadings --units=m [ VG_NAME ] -o vgfree $SCRIPT_NAME --all Is equivalent : sudo vgs --readonly --noheadings --units=m -o vgname,vgfree EOF } command_exists() { if ! command -v "$1" >/dev/null 2>&1 ; then echo -e "Missing command : $1\nAborting." >&2 exit 127 fi } calc_sum() { awk '{s+=$1} END {printf "%.0f", s}' "$*" } get_vg_size() { local VG_NAME=$1 lsblk -b -i | grep -B1 -E -e '[|`]-'"${VG_NAME/-/-*}-" | awk '/part|disk|crypt/ { print $4 }' | calc_sum } get_lv_total_size() { local VG_NAME=$1 #lsblk -p -b -o NAME,SIZE -J --nodeps "/dev/${VG_NAME}"/* |jq '.blockdevices[].size |tonumber' lsblk -p -b -n -o SIZE --nodeps "/dev/${VG_NAME}/"* | calc_sum } get_vg_list() { # shellcheck disable=SC2012 ls -1 /dev/mapper/ | awk '/-/{print $1}' | sed -e 's/-[^-]*$//' -e 's/--/-/' | sort -u } get_vgfree() { local VG_NAME=$1 local -i VG_SIZE local -i LV_TOTAL_SIZE VG_SIZE="$(get_vg_size "$VG_NAME")" LV_TOTAL_SIZE="$(get_lv_total_size "$VG_NAME")" echo "$(( ( VG_SIZE - LV_TOTAL_SIZE ) /1024/1024 ))" } check_inputs() { local VG_NAME=$1 if [[ ! -d "/dev/${VG_NAME}" ]] then echo "Volume group $VG_NAME not found" >&2 exit 5 fi } main() { local VG_NAME=${1-} local -i VG_FREE command_exists lsblk if [[ "$NOARGS" -eq 1 ]] then for VG in $(get_vg_list) do VG_FREE="$(get_vgfree "$VG")" printf " %-8s %10.2fm\n" "$VG" "$VG_FREE" done else VG_FREE="$(get_vgfree "$VG_NAME")" echo " ${VG_FREE}.00m" fi } if [[ $# -eq 0 ]] then echo "$SCRIPT_NAME: missing operand" >&2 echo "Try '$SCRIPT_NAME --help' for more information." >&2 exit 1 fi while [ "${1-}" != "" ]; do case $1 in # --debug ) DEBUG=1 # ;; -a | --all ) shift NOARGS=1 main ;; -h | --help ) usage exit 0 ;; --) # End of all options shift break ;; -*) echo "SCRIPT_NAME: invalid option" >&2 echo "Try '$SCRIPT_NAME --help' for more information." >&2 exit 1 ;; *) check_inputs "$1" NOARGS=0 main "$1" ;; esac shift done
Sinon il est toujours possible de s'en sortir avec quelques commandes
lsblk -b -i |grep -B1 vg00 |awk '/part|disk/crypt/ { print $4 }' | awk '{s+=$1} END {printf "%.0f", s}' lsblk -b -i |grep -B1 vg00 |awk '/lvm/ { print $4 }' |awk '{s+=$1} END {printf "%.0f", s}'
Shell script - exemple de wrapper - exec rgrep
Voir aussi wrapper compilés :
- /usr/lib64/nagios/plugins/negate
/usr/bin/rgrep
#!/bin/sh exec grep -r "$@"
/bin/fgrep
#!/bin/sh exec grep -F "$@"
Voir man bash
ou avec une fonction
function rgrep() { grep -r "$@" }
Autre exemple
tar () { command tar "$@" --no-same-owner --no-same-permissions; return $?; }
Scripting shell bash et tests unitaires avec bats
Voir :
apt-get install -y --no-install-recommends bats
test/spec.bats
#!/usr/bin/env bats set -euo pipefail @test "Check apache2 is up" { ps aux | grep "apache2" }
test/spec.bats
#! /usr/bin/env bats set -eu setup() { # Appelée avant chaque test unitaire #echo "$(date --iso-8601=second BEGIN $BATS_TEST_NUMBER $BATS_TEST_NAME" > /dev/stdin true } teardown() { # Appelée après chaque test unitaire #echo "$(date --iso-8601=second) END $BATS_TEST_NUMBER $BATS_TEST_NAME" > /dev/stdin true } setup_file() { # Appelée une seule fois au début du lancement de ce script echo "$(date --iso-8601=second) BEGIN $(basename $BATS_TEST_FILENAME)" > /dev/stdin } teardown_file() { # Appelée une seule fois en dernier lors de l’exécution de ce script sleep 1 echo -e "\b$(date --iso-8601=second) END $(basename $BATS_TEST_FILENAME)" > /dev/stdin } ### Exemple de tests @test "prereq - create account" { ansible -b -i tests/inventory -m user -a 'name=testplop' all } @test "Check required fields" { ansible-playbook --check tests/test.yml -i tests/inventory | grep -q 'NameError.' }
Dépendance et condition
test/spec.bats
foo() { echo foobar > /tmp/plop } @test "foobar" { run foo }
Autres
tests/spec.sh
#! /bin/bash set -eu if [ -z "${ALREADY_RUN:-}" ] then export ALREADY_RUN=yes fi
test/spec.bats
#! /usr/bin/env bats set -eu load spec.sh @test "clean" { if [ ! -z "${ALREADY_RUN:-}" ] then ssh server -- sudo find /opt/app1/ -type f -delete fi }
Shell Script - Allow chown for non root users
Voir aussi :
- CAP_CHOWN
Pour changer le groupe propriétaire d'un fichier il faut soit être root ou alors il faut :
- Avoir les droits en lecture / écriture et
- Appartenir au groupe cible
L'autre solution, c'est de copier le fichier. Ce que fait le script ci-dessous.
chuser.sh
#!/bin/bash # Creative Commons CC0 Public Domain Licence set -euo pipefail FICHIER=$1 TMPDIR="$(mktemp -d)" clean_on_exit() { rm -r "$TMPDIR" } trap clean_on_exit EXIT main() { local FICNAME FICNAME="$(basename "$FICHIER")" cp -d --preserve=all -r "$FICHIER" "$TMPDIR" rm -r "$FICHIER" mv "${TMPDIR}/${FICNAME}" "$FICHIER" } main
Exemple
roger$ echo PLOP > /home/share/plop.txt roger$ chmod a+rw /home/share/plop.txt roger$ ls -l /home/share/plop.txt -rw-rw-rw- 1 roger roger 5 Aug 12 10:03 /home/share/plop.txt
jean$ ./chuser.sh /home/share/plop.txt jean$ ls -l /home/share/plop.txt -rw-rw-rw- 1 jean jean 5 Aug 12 10:03 /home/share/plop.txt
Ce qui revient à faire
sudo chown $(whoami) /home/share/plop.txt
Shell GNU tar - Commande tar
man tar info tar
Exemples / options
Inclusion / Exclusion
tar --exclude=/data/sub1 --exclude=/data/sub2 --exclude=/data/sub3 --exclude=/data/sub4 -cf /home/_data.tar /data
tar --exclude='*/.git/*' -cf /home/_data.tar /data
Spécifier le chemin racine - éviter 'cd'
Utiliser l'option -C pour indiquer le chemin
tar czf ~/tmp/nagios.tgz -C ~/tmp/ --exclude='.git' --owner=1013 --group=250 nagios/
Archiver des fichiers cachés (dot files)
tar cvjf archive.tar.bz2 --exclude .. --exclude . .*
Dot dir dossier point à la racine
Creation d'archive
Dossier “.” (dot dir) à la racine de l'archive
$ tar czvf ../plop.tar.gz . ./ ./plop.tar.gz ./check_routerHA.sh $ tar czvf ../plop.tar.gz * check_routerHA.sh plop.tar.gz # Ou encore $ tar czvf ../plop.tar.gz --xform="s,^./,," ./* # Ou #find . -print0 | tar -T - --null --no-recursion -czf ../plop.tar.gz $ find . -printf "%P\n" | tar -czf ../plop.tar.gz --no-recursion -T - # Autre # find -mindepth 1 .
Créer un tarball sans arborescence hiérarchique
$ tar czvf pushlogs.tar.gz --transform='s,^.*/,,' ./12/scs/data/.pushlogs.env ./common/pcc/scripts/pushlogs.sh ./12/scs/data/.pushlogs.env ./common/pcc/scripts/pushlogs.sh $ tar tf pushlogs.tar.gz .pushlogs.env pushlogs.sh
Extraction d'archive
tar --strip-components 1 -xvf plop.tar.gz
Droits / permissions / owner
GNU tar allows you not to preserve the owner and permissions.
tar -c -f archive.tar --owner=0 --group=0 --no-same-owner --no-same-permissions
Compression
gzip: warning: GZIP environment variable is deprecated; use an alias or script
L'ancienne commande
GZIP=-9 tar -zcf ... files to compress ...
Devient
tar -I 'gzip -9' -cf ... files to compress
Syncho à la rsync - pipe - ssh
cd /mnt/src tar cf - . | tar xvf - -C /mnt/dest tar -C /src/dir -jcf - ./ | ssh user@server 'tar -C /dest/dir -jxf -'
Autres outils
Voir aussi
- cpio
- archivemount (et avfs / mountavfs)
pkgdiff / tardiff (html diff was produced by rfcdiff)
pkgdiff pour faire un diff de deux fichiers tar
pkgdiff -hide-unchanged nagios-3.0_v001.tgz nagios-3.0_v002.tgz
pkgdiff se base sur l'extention du fichier
# Ne pas faire : pkgdiff -hide-unchanged plop.tgz plop.tgz2 # Mais faire : mv plop.tgz2 plop2.tgz pkgdiff -hide-unchanged plop.tgz plop2.tgz
Cela génére un rapport HTML.
Il y a aussi tardiff mais il bug
tardiff nagios-3.0_v001.tgz nagios-3.0_v002.tgz # BUG: L'option ''-m'' ne fonctionne pas # C'est comme si cette option était ignorée # tardiff affiche bien les fichiers ajoutés mais pas les fichiers modifiés tardiff -m nagios-3.0_v001.tgz nagios-3.0_v002.tgz
Cela revient à
diff <(tar tf nagios-3.0_v001.tgz | sort) <(tar tf nagios-3.0_v002.tgz | sort) # Pour les droits, propriétaire, date diff <(tar tvf nagios-3.0_v001.tgz | sort) <(tar tvf nagios-3.0_v002.tgz | sort)
Autres
Voir :
--strip-components=NUMBER--strip
Pb
Erreur Cannot hard link to
$ tar -xzf Maildir.tar.gz Maildir/.Sent/ tar: Maildir/.Sent/cur/1665228871.M836500P20407.vps788223,S=3786957,W=3836179\:2,S: Cannot hard link to ‘Maildir/.Trash/cur/1665228871.M836500P20407.vps788223,S=3786957,W=3836179:2,S’: No such file or directory tar: Exiting with failure status due to previous errors
Monter une archive tar.gz
sudo apt-get install archivemount mkdir ~/mnt archivemount Maildir.tar.gz ~/mnt/ rsync -axv ~/mnt/Maildir/.Sent/ Maildir/.Sent/ fusermount -u ~/mnt
