Outils pour utilisateurs

Outils du site


blog

Shell script LVM lsblk get vgfree space without root privileges

vg_free.sh

#! /bin/bash
 
# Creative Commons CC0 Public Domain Licence
 
set -euo pipefail
IFS=$' \t\n'
export LC_ALL=C
 
SCRIPT_NAME="$(basename "$0")"
 
usage()
{
        cat <<-EOF
	Usage: $SCRIPT_NAME [ VG_NAME ]
	Usage: $SCRIPT_NAME [ -a|--all ]
	Usage: $SCRIPT_NAME [ -h|--help ]
 
	$SCRIPT_NAME display volume groups free space in MiB for non-root users.
 
	$SCRIPT_NAME [ VG_NAME ]
	Is equivalent :
	  sudo vgs --readonly --noheadings --units=m [ VG_NAME ] -o vgfree
 
	$SCRIPT_NAME --all
	Is equivalent :
	  sudo vgs --readonly --noheadings --units=m -o vgname,vgfree
	EOF
}
 
command_exists() {                                                                                                                                                                                     
    if ! command -v "$1" >/dev/null 2>&1 ; then                                                                                                                                                                                  
        echo -e "Missing command : $1\nAborting." >&2
        exit 127
    fi
}
 
calc_sum()
{
        awk '{s+=$1} END {printf "%.0f", s}' "$*"
}
 
get_vg_size()
{
        local VG_NAME=$1
        lsblk -b -i | grep -B1 -E -e '[|`]-'"${VG_NAME/-/-*}-" | awk '/part|disk|crypt/ { print $4 }' | calc_sum
}
 
 
get_lv_total_size()
{
        local VG_NAME=$1
        #lsblk -p -b -o NAME,SIZE -J --nodeps "/dev/${VG_NAME}"/*  |jq '.blockdevices[].size |tonumber'
        lsblk -p -b -n -o SIZE --nodeps "/dev/${VG_NAME}/"* | calc_sum
}
 
 
get_vg_list()
{
        # shellcheck disable=SC2012
        ls -1 /dev/mapper/ | awk '/-/{print $1}' | sed -e 's/-[^-]*$//' -e 's/--/-/' | sort -u
}
 
get_vgfree()
{
        local VG_NAME=$1
        local -i VG_SIZE
        local -i LV_TOTAL_SIZE
        VG_SIZE="$(get_vg_size "$VG_NAME")"
        LV_TOTAL_SIZE="$(get_lv_total_size "$VG_NAME")"
        echo "$(( ( VG_SIZE - LV_TOTAL_SIZE ) /1024/1024 ))"
}
 
check_inputs()
{
        local VG_NAME=$1
        if [[ ! -d "/dev/${VG_NAME}" ]]
        then
                echo "Volume group $VG_NAME not found" >&2
                exit 5
        fi
}
 
main()
{
        local VG_NAME=${1-}
        local -i VG_FREE
        command_exists lsblk
 
        if [[ "$NOARGS" -eq 1 ]]
        then
                for VG in $(get_vg_list)
                do
                        VG_FREE="$(get_vgfree "$VG")"
                        printf "  %-8s %10.2fm\n" "$VG" "$VG_FREE"
                done
        else
                VG_FREE="$(get_vgfree "$VG_NAME")"
                echo "  ${VG_FREE}.00m"
        fi
}
 
 
if [[ $# -eq 0 ]]
then
        echo "$SCRIPT_NAME: missing operand" >&2
        echo "Try '$SCRIPT_NAME --help' for more information." >&2
        exit 1
fi
 
 
while [ "${1-}" != "" ]; do
    case $1 in
#        --debug )                      DEBUG=1
#                                ;;
        -a | --all )                    shift
                                        NOARGS=1
                                        main
                                ;;
        -h | --help )                   usage
                                        exit 0
                                ;;
        --)                             # End of all options
                                        shift
                                        break
                                ;;
        -*)                             echo "SCRIPT_NAME: invalid option" >&2
                                        echo "Try '$SCRIPT_NAME --help' for more information." >&2
                                        exit 1
                                ;;
        *)
                                        check_inputs "$1"
                                        NOARGS=0
                                        main "$1"
                                ;;
    esac
    shift
done

Sinon il est toujours possible de s'en sortir avec quelques commandes

lsblk -b -i |grep -B1 vg00 |awk '/part|disk/crypt/ { print $4 }' | awk '{s+=$1} END {printf "%.0f", s}'
lsblk -b -i |grep -B1 vg00 |awk '/lvm/ { print $4 }' |awk '{s+=$1} END {printf "%.0f", s}'
2025/03/24 15:06
, ,

Shell script - exemple de wrapper - exec rgrep

Voir aussi wrapper compilés :

  • /usr/lib64/nagios/plugins/negate

/usr/bin/rgrep

#!/bin/sh
 
exec grep -r "$@"

/bin/fgrep

#!/bin/sh
exec grep -F "$@"

Voir man bash

ou avec une fonction

function rgrep()
{
        grep -r "$@"
}

Autre exemple

tar ()  { command tar "$@" --no-same-owner --no-same-permissions; return $?; }
2025/03/24 15:06

Scripting shell bash et tests unitaires avec bats

Voir :

apt-get install -y --no-install-recommends bats

test/spec.bats

#!/usr/bin/env bats
 
set -euo pipefail
 
@test "Check apache2 is up" {
  ps aux | grep "apache2"
}

test/spec.bats

#! /usr/bin/env bats
 
set -eu
 
setup() {
        # Appelée avant chaque test unitaire
        #echo "$(date --iso-8601=second BEGIN $BATS_TEST_NUMBER $BATS_TEST_NAME" > /dev/stdin
        true
}
 
teardown() {
        # Appelée après chaque test unitaire
        #echo "$(date --iso-8601=second) END   $BATS_TEST_NUMBER $BATS_TEST_NAME" > /dev/stdin
        true
}
 
setup_file() {
        # Appelée une seule fois au début du lancement de ce script
        echo "$(date --iso-8601=second) BEGIN $(basename $BATS_TEST_FILENAME)" > /dev/stdin
}
 
teardown_file() {
        # Appelée une seule fois en dernier lors de l’exécution de ce script
        sleep 1
        echo -e "\b$(date --iso-8601=second) END   $(basename $BATS_TEST_FILENAME)" > /dev/stdin
}
 
### Exemple de tests
 
@test "prereq - create account" {
        ansible -b -i tests/inventory -m user -a 'name=testplop' all
}
 
@test "Check required fields" {
        ansible-playbook --check tests/test.yml -i tests/inventory | grep -q 'NameError.'
}

Dépendance et condition

test/spec.bats

foo() {
        echo foobar > /tmp/plop
}
 
@test "foobar" {
        run foo
}

Autres

tests/spec.sh

#! /bin/bash
 
set -eu
 
if [ -z "${ALREADY_RUN:-}" ]
then
        export ALREADY_RUN=yes
fi

test/spec.bats

#! /usr/bin/env bats
 
set -eu
 
load spec.sh
 
@test "clean" {
        if [ ! -z  "${ALREADY_RUN:-}" ]
        then
                ssh server -- sudo find /opt/app1/ -type f -delete
        fi
}
2025/03/24 15:06

Shell Script - Allow chown for non root users

Voir aussi :

Pour changer le groupe propriétaire d'un fichier il faut soit être root ou alors il faut :

  • Avoir les droits en lecture / écriture et
  • Appartenir au groupe cible

L'autre solution, c'est de copier le fichier. Ce que fait le script ci-dessous.

chuser.sh

#!/bin/bash
 
# Creative Commons CC0 Public Domain Licence
 
set -euo pipefail
 
FICHIER=$1
 
TMPDIR="$(mktemp -d)"
 
clean_on_exit() {
        rm -r "$TMPDIR"
}
 
trap clean_on_exit EXIT
 
main() {
        local FICNAME
        FICNAME="$(basename "$FICHIER")"
        cp -d --preserve=all -r "$FICHIER" "$TMPDIR"
        rm -r "$FICHIER"
        mv "${TMPDIR}/${FICNAME}" "$FICHIER"
}
 
main

Source : https://askubuntu.com/questions/95985/is-it-possible-to-change-ownership-of-a-file-without-root-access

Exemple

roger$ echo PLOP > /home/share/plop.txt
roger$ chmod a+rw /home/share/plop.txt
roger$ ls -l /home/share/plop.txt
-rw-rw-rw- 1 roger roger 5 Aug 12 10:03 /home/share/plop.txt
jean$ ./chuser.sh /home/share/plop.txt 
jean$ ls -l /home/share/plop.txt 
-rw-rw-rw- 1 jean jean 5 Aug 12 10:03 /home/share/plop.txt

Ce qui revient à faire

sudo chown $(whoami) /home/share/plop.txt
2025/03/24 15:06
,

Shell GNU tar - Commande tar

man tar
info tar

Exemples / options

Inclusion / Exclusion
tar --exclude=/data/sub1 --exclude=/data/sub2 --exclude=/data/sub3 --exclude=/data/sub4 -cf /home/_data.tar /data 
tar --exclude='*/.git/*' -cf /home/_data.tar /data 

Spécifier le chemin racine - éviter 'cd'

Utiliser l'option -C pour indiquer le chemin

tar czf ~/tmp/nagios.tgz -C ~/tmp/ --exclude='.git' --owner=1013 --group=250 nagios/

Archiver des fichiers cachés (dot files)

tar cvjf archive.tar.bz2 --exclude .. --exclude . .*
Dot dir dossier point à la racine
Creation d'archive

Dossier “.” (dot dir) à la racine de l'archive

$ tar czvf ../plop.tar.gz .
./
./plop.tar.gz
./check_routerHA.sh

$ tar czvf ../plop.tar.gz *
check_routerHA.sh
plop.tar.gz

# Ou encore 
$ tar czvf ../plop.tar.gz --xform="s,^./,," ./*

# Ou
#find . -print0  | tar -T - --null --no-recursion -czf ../plop.tar.gz
$ find . -printf "%P\n"  | tar -czf ../plop.tar.gz --no-recursion -T -

# Autre
# find -mindepth 1 .

Créer un tarball sans arborescence hiérarchique

$ tar czvf pushlogs.tar.gz --transform='s,^.*/,,' ./12/scs/data/.pushlogs.env ./common/pcc/scripts/pushlogs.sh
./12/scs/data/.pushlogs.env
./common/pcc/scripts/pushlogs.sh

$ tar tf pushlogs.tar.gz
.pushlogs.env
pushlogs.sh
Extraction d'archive
tar --strip-components 1 -xvf plop.tar.gz
Droits / permissions / owner

GNU tar allows you not to preserve the owner and permissions.

tar -c -f archive.tar --owner=0 --group=0 --no-same-owner --no-same-permissions
Compression
gzip: warning: GZIP environment variable is deprecated; use an alias or script

L'ancienne commande

GZIP=-9 tar -zcf ... files to compress ...

Devient

tar -I 'gzip -9' -cf ... files to compress

Syncho à la rsync - pipe - ssh

cd /mnt/src
tar cf - . | tar xvf - -C /mnt/dest
 
tar -C /src/dir -jcf - ./ | ssh user@server 'tar -C /dest/dir -jxf -'

Autres outils

Voir aussi

  • cpio
  • archivemount (et avfs / mountavfs)
pkgdiff / tardiff (html diff was produced by rfcdiff)

pkgdiff pour faire un diff de deux fichiers tar

pkgdiff -hide-unchanged nagios-3.0_v001.tgz nagios-3.0_v002.tgz

pkgdiff se base sur l'extention du fichier

# Ne pas faire :
pkgdiff -hide-unchanged plop.tgz plop.tgz2
 
# Mais faire :
mv plop.tgz2 plop2.tgz
pkgdiff -hide-unchanged plop.tgz plop2.tgz

Cela génére un rapport HTML.

Il y a aussi tardiff mais il bug

tardiff nagios-3.0_v001.tgz nagios-3.0_v002.tgz
 
# BUG: L'option ''-m'' ne fonctionne pas
# C'est comme si cette option était ignorée
# tardiff affiche bien les fichiers ajoutés mais pas les fichiers modifiés
tardiff -m nagios-3.0_v001.tgz nagios-3.0_v002.tgz

Cela revient à

diff <(tar tf nagios-3.0_v001.tgz | sort) <(tar tf nagios-3.0_v002.tgz | sort)
 
# Pour les droits, propriétaire, date
diff <(tar tvf nagios-3.0_v001.tgz | sort) <(tar tvf nagios-3.0_v002.tgz | sort)

Autres

Voir :

  • --strip-components=NUMBER
  • --strip

Pb

$ tar -xzf Maildir.tar.gz Maildir/.Sent/
tar: Maildir/.Sent/cur/1665228871.M836500P20407.vps788223,S=3786957,W=3836179\:2,S: Cannot hard link to ‘Maildir/.Trash/cur/1665228871.M836500P20407.vps788223,S=3786957,W=3836179:2,S’: No such file or directory
tar: Exiting with failure status due to previous errors

Monter une archive tar.gz

sudo apt-get install archivemount
mkdir ~/mnt
archivemount Maildir.tar.gz ~/mnt/
rsync -axv ~/mnt/Maildir/.Sent/ Maildir/.Sent/
fusermount -u ~/mnt
2025/03/24 15:06
blog.txt · Dernière modification : de 127.0.0.1

Donate Powered by PHP Valid HTML5 Valid CSS Driven by DokuWiki