Modifications entre les versions 1 et 61 (s'étendant sur 60 versions)
Version 1 à la date du 2007-11-07 17:02:48
Taille: 967
Éditeur: ThomasNoël
Commentaire: premier draft, en cours
Version 61 à la date du 2008-11-14 22:48:12
Taille: 9284
Éditeur: ThomasNoël
Commentaire: préparation de la Grande Nouvelle Qui Va Nous Resoudre Tous Les Problemes De Doc Tu Parles Charles
Texte supprimé. Texte ajouté.
Ligne 1: Ligne 1:
Git est un système de gestion de versions. Voir sa [http://fr.wikipedia.org/wiki/Git_(logiciel) page wikipédia] ||<#ff0000> '''APPEL A CANDIDATURES''' : si vous désirez mettre en place ce système, contactez JeanChristopheAndré (via la liste de discussion technique de l'AUF). Il a programmé un paquet Debian `auf-git-etc` qui installe tout cela automagiquement ! Aidez-le à tester son paquet : c'est quasiment sans risque, et ça sera bientôt la façon «officielle» de faire. Affaire à suivre très prochainement. ||
Ligne 3: Ligne 3:
= Suivre la config d'une machine avec git = On veut pouvoir documenter les modifications faites dans `/etc` et dans `/usr/local`, qui sont ''grosso modo'' les deux répertoires permettant de décrire comment fonctionne un serveur. Cette documentation est indispensable en cas d'administration à plusieurs, mais elle est également très utile quand on est seul à gérer : c'est un aide-mémoire indispensable vu la vitesse à laquelle évoluent les technologies et donc les configurations.
Ligne 5: Ligne 5:
On veut pouvoir documenter les modifications faites dans /etc et dans /usr/local. Pour cela, on utilise un logiciel de gestion de version. Ce logiciel va nous permettre de documenter chaque modification effectuée sur un fichier ou un ensemble de fichier. '''On pourra ensuite retrouver à quel moment à été faite une modification, par qui et pour quelle raison.'''

Il existe différents logiciels de ce type, parmis lesquels on peut citer l'ancètre CVS, son fils Subversion (`svn`), et dans une famille différente `git`. C'est ce dernier logiciel que nous avons choisi car il est moins bavard, moins intrusif dans le code à surveiller, et surtout très bien documenté.


''A écrire : petites explications sur la notion de dépôt, orientée git et surveillance de /etc''

Notre objectif ici est d'installer `git` sur un serveur pour que son ou ses administrateurs, et uniquement eux, puissent aisément faire le suivi de sa configuration.

== Installation ==
Ligne 8: Ligne 17:
  {{{  {{{
Ligne 12: Ligne 21:
 2. On créée un dépôt général pour toute la machine :
  {{{
 2. On créée un dépôt général pour toute la machine. Attention à bien régler les droits : seul `root` doit pouvoir accéder au dépôt, sinon les fichiers du genre `shadow` seraient accessibles à tous.
 {{{
Ligne 15: Ligne 24:
# git init # git init-db <--- Ou "git init" sur Git 1.5 (Debian Lenny, Ubuntu Gutsy)
# chmod u=rwx,go= /.git <--- important ! Seul "root" doit pouvoir accéder au dépôt
Ligne 18: Ligne 28:
 3. Pour éviter d'avoir des "saletés" directement à la racine (`/`), on déplace le dépôt autre part :
  {{{
 3. Pour éviter d'avoir des "saletés" directement à la racine (`/`), on déplace le dépôt vers `/var/lib/git`. Le répertoire `/.git` à la racine ne sera en fait qu'un lien symbolique vers le véritable emplacement du dépôt :
 {{{
Ligne 22: Ligne 32:
# chmod u=rwx /var/lib/git/root # ln -s /var/lib/git/root /.git
Ligne 25: Ligne 35:
 4. On veut suivre `/etc` et `/usr/local` seulement, pour cela on modifie les exclusions au niveau du dépôt, dans le fichier `/var/lib/git/root/info/excludes` :
  {{{
#
# Le fichier /var/lib/git/root/info/exclude
#
 4. On veut suivre `/etc` et `/usr/local` seulement, pour cela on modifie les exclusions au niveau du dépôt, dans le fichier `/var/lib/git/root/info/exclude` :
 {{{
# Le fichier /var/lib/git/root/info/exclude à modifier ou créer
# Par défaut, on exclut tout sauf /etc
Ligne 31: Ligne 40:
!/etc
# ... mais dans /etc on interdit certains fichiers :
/etc/*shadow*
/etc/ssh/ssh_host_*_key
/etc/mtab
/etc/adjtime
/etc/ld.so.cache
# On n'interdit pas non plus le parcours de /usr. Mais dans ce parcours,
# on interdit tout sauf /usr/local. C'est la technique pour inclure /usr/local...
!/usr
/usr/*
Ligne 32: Ligne 52:
!/etc # quelques type fichiers à ne pas jamais considérer, globalement :
*.dpkg-old
*.dpkg-new
.*.swp
*~
*#
Ligne 35: Ligne 60:
 5. On fait les premiers ajouts :
  {{{
 5. On fait le premier ajout de tous les fichiers à suivre (sauf les exclus indiqués ci-dessus), puis le premier ''commit'' :
 {{{
Ligne 38: Ligne 63:
# git add /etc
# git add /usr/local
# git add etc usr/local
# git commit -m "mise en route du suivi : /etc et /usr/local" --author "Prenom NOM <prenom.nom@auf.org>"
Ligne 41: Ligne 66:

 6. On utilisera surtout `git` avec `sudo`. Il faut donc dire à `sudo` de ne pas supprimer les variables d'environnement utiles à `git` :
 {{{
# (... extrait de /etc/sudoers ...)
# une ligne à ajouter au début de /etc/sudoers :
Defaults env_keep += "GIT_COMMITTER_NAME GIT_COMMITTER_EMAIL GIT_AUTHOR_NAME GIT_AUTHOR_EMAIL"
}}}

== Utilisation ==

 * '''Préliminaire''' : ajouter dans son `~/.bashrc` (puis se reloger pour activation) :
 {{{
# à ajouter à la fin de son fichier ~/.bashrc :
export GIT_AUTHOR_NAME="Prenom NOM"
export GIT_AUTHOR_EMAIL="prenom.nom@auf.org"
}}}

 * Pour voir les modifications avant de les envoyer dans le dépôt :
 {{{
$ sudo git status -a # affiche la ligne des fichiers modifiés, supprimés, nouveaux...
$ sudo git diff # affiche les différences entre la version stockée dans git et la version actuelle
}}}

 * Pour envoyer les modifications dans le dépôt, on lance un ''commit''. Il y a plusieurs façons de faire, parmis lesquelles :
 {{{
$ sudo git commit un/seul/fichier/modifié # pour un fichier : toujours en notation relative
$ sudo git commit -a # on enregistre *toutes* les modifications
}}}

 * Pour suivre un nouveau fichier ou tous les nouveaux fichiers d'un répertoire, par exemple suite à l'installation de nouveaux fichier de configuration :
 {{{
$ cd /
$ sudo git add le/chemin/relatif/vers/le/fichier/ou/repertoire <-- il faut indiquer le chemin en "relatif" (sans / au début)
$ sudo git commit
}}}
  Attention : il faut éventuellement modifier le fichier `/.git/info/exclude`

 * Pour ne plus suivre un fichier ou un répertoire :
 {{{
$ sudo vi /.git/info/exclude <-- on ajoute le nom du fichier dans les excludes (exemple : /etc/ldap.secret)
$ cd /
$ sudo git rm le/chemin/du/fichier/a/ne/plus/suivre <-- on le retire du dépôt (nb : le chemin est relatif, sans / au début)
}}}

 * Pour revoir les modifications, plusieurs techniques en ligne de commande :
 {{{
$ sudo tig <-- petit logiciel très sympa, à installer avec aptitude install tig
$ sudo git whatchanged
$ sudo git log -10
$ sudo git show ...(le code du commit)...
}}}

 * Note : la plupart du temps, il est plus simple de prendre l'habitude de se placer à la racine pour faire les manipulations `git`. Un exemple typique :
 {{{
$ cd /etc |
$ sudo vi profile <-----| ici on travaille
$ sudo vi postfix/main.cf |
$ cd /
$ sudo git status -a | on fait un cd /
$ sudo git diff | less <-----| puis on documente
$ sudo git commit -a | son travail ...
}}}

== Quelques automatisations quasi indispensables ==

Pour lancer un "status" à chaque connexion sur le serveur (très très utile) :

 1. Permettre aux gens du groupe "admin" de lancer git status sans mot de passe :
 {{{
# et à ajouter vers la fin de /etc/sudoers :
%admin ALL=(ALL) NOPASSWD: /usr/bin/git status -a
}}}

 1. Lancer le `git status` (via `sudo`) dans le `/etc/profile`, et configurer un peu les variables GIT :
 {{{
# A ajouter à la fin de /etc/profile :
if [ "$PS1" ]; then
  # on lance un git status sur l'utilisateur est dans le groupe
  # admin ou bien si c'est root
  if $(id -Gn | grep -qw admin) || [ $(id -u) -eq 0 ]; then
    [ -x /usr/bin/git -a -e /.git ] && (cd / && sudo /usr/bin/git status -a)
  fi
  # les lignes suivantes tentent de configurer les variables GIT_*
  # si les résultats ne sont pas bien "devinés", définir les bonnes valeurs dans .bashrc
  GIT_AUTHOR_NAME=${GIT_AUTHOR_NAME:=$(getent passwd $(id -un)|cut -d: -f5|cut -d, -f1)}
  GIT_AUTHOR_EMAIL=${GIT_AUTHOR_EMAIL:=$(id -un)@$(hostname -f)}
  GIT_COMMITTER_NAME=${GIT_COMMITTER_NAME:=$GIT_AUTHOR_NAME}
  GIT_COMMITTER_EMAIL=${GIT_COMMITTER_EMAIL:=$GIT_AUTHOR_EMAIL}
  export GIT_AUTHOR_NAME GIT_AUTHOR_EMAIL GIT_COMMITTER_NAME GIT_COMMITTER_EMAIL
fi
}}}


Pour envoyer un mail à chaque commit :

 1. Créer un script `/.git/hooks/post-commit` :
 {{{
#!/bin/bash
recipients="admins@XX.auf.org" # adresse pour l'envoi du mail
# On modifie un peu la sortie de git show :
# 1) on ajoute "From git hostname" devant le nom en From
# 2) on retire le [PATCH] dans le sujet, replacé par git-commit:
# 3) on ajoute un champ To:
# et on maile le tout via sendmail
PATH=/usr/sbin:/usr/bin:/sbin:/bin
git show --pretty=email |
  sed '1,6s/^From: /From: git '`hostname -f`' - /;1,6s/^Subject: \[PATCH\]/Subject: git-commit:/;2iTo: '"${recipients}" |
  head -c 16k | /usr/lib/sendmail ${recipients}
exit 0
}}}
 1. Activer le script :
 {{{
# chmod +x /.git/hooks/post-commit
}}}
 1. Faire un petit commit de test afin de vérifier ça marche, notamment que `sendmail` (Postfix, Exim, ...) envoie bien le message.


== Ca ressemble à quoi ? ==

Juste pour donner une idée, voici ce que donne le petit programme `tig` lorsqu'on le lance sur une machine bien suivie :

  {{attachment:ce-que-montre-tig.png}}

== Améliorations à trouver ==

Pour plus tard (Lenny) :
 * correction du bogue quand on joue avec un "/.git" (y a-t-il un bogue, d'ailleurs ? )
 * `git-stash` pour relier apt et git correctement
 * [[Tini]] n'ose pas le dire, mais il a fait un paquet Debian `git-etc-auf` qui fait tout le boulot d'installation. Un jour il osera.
 * il n'a pas vraiment osé, mais ProgFou a repris le flambeau et ne s'est pas encore brulé les doigts avec
 * Chouette ! Maintenant qu'on a notre [[DépôtAPT|dépôt APT AuF]], on va pouvoir FOOONNNCCCEEEEEEERRRR (dans le mur ?)

APPEL A CANDIDATURES : si vous désirez mettre en place ce système, contactez JeanChristopheAndré (via la liste de discussion technique de l'AUF). Il a programmé un paquet Debian auf-git-etc qui installe tout cela automagiquement ! Aidez-le à tester son paquet : c'est quasiment sans risque, et ça sera bientôt la façon «officielle» de faire. Affaire à suivre très prochainement.

On veut pouvoir documenter les modifications faites dans /etc et dans /usr/local, qui sont grosso modo les deux répertoires permettant de décrire comment fonctionne un serveur. Cette documentation est indispensable en cas d'administration à plusieurs, mais elle est également très utile quand on est seul à gérer : c'est un aide-mémoire indispensable vu la vitesse à laquelle évoluent les technologies et donc les configurations.

Pour cela, on utilise un logiciel de gestion de version. Ce logiciel va nous permettre de documenter chaque modification effectuée sur un fichier ou un ensemble de fichier. On pourra ensuite retrouver à quel moment à été faite une modification, par qui et pour quelle raison.

Il existe différents logiciels de ce type, parmis lesquels on peut citer l'ancètre CVS, son fils Subversion (svn), et dans une famille différente git. C'est ce dernier logiciel que nous avons choisi car il est moins bavard, moins intrusif dans le code à surveiller, et surtout très bien documenté.

A écrire : petites explications sur la notion de dépôt, orientée git et surveillance de /etc

Notre objectif ici est d'installer git sur un serveur pour que son ou ses administrateurs, et uniquement eux, puissent aisément faire le suivi de sa configuration.

Installation

  1. On installe git :

    # aptitude install git-core
  2. On créée un dépôt général pour toute la machine. Attention à bien régler les droits : seul root doit pouvoir accéder au dépôt, sinon les fichiers du genre shadow seraient accessibles à tous.

    # cd /
    # git init-db                   <--- Ou "git init" sur Git 1.5 (Debian Lenny, Ubuntu Gutsy)
    # chmod u=rwx,go= /.git         <--- important ! Seul "root" doit pouvoir accéder au dépôt
  3. Pour éviter d'avoir des "saletés" directement à la racine (/), on déplace le dépôt vers /var/lib/git. Le répertoire /.git à la racine ne sera en fait qu'un lien symbolique vers le véritable emplacement du dépôt :

    # mkdir /var/lib/git
    # mv /.git /var/lib/git/root
    # ln -s /var/lib/git/root /.git
  4. On veut suivre /etc et /usr/local seulement, pour cela on modifie les exclusions au niveau du dépôt, dans le fichier /var/lib/git/root/info/exclude :

    # Le fichier /var/lib/git/root/info/exclude à modifier ou créer
    # Par défaut, on exclut tout sauf /etc
    /*
    !/etc
    # ... mais dans /etc on interdit certains fichiers :
    /etc/*shadow*
    /etc/ssh/ssh_host_*_key
    /etc/mtab
    /etc/adjtime
    /etc/ld.so.cache
    # On n'interdit pas non plus le parcours de /usr. Mais dans ce parcours,
    # on interdit tout sauf /usr/local. C'est la technique pour inclure /usr/local...
    !/usr
    /usr/*
    !/usr/local
    # quelques type fichiers à ne pas jamais considérer, globalement :
    *.dpkg-old
    *.dpkg-new
    .*.swp
    *~
    *#
  5. On fait le premier ajout de tous les fichiers à suivre (sauf les exclus indiqués ci-dessus), puis le premier commit :

    # cd /
    # git add etc usr/local
    # git commit -m "mise en route du suivi : /etc et /usr/local" --author "Prenom NOM <prenom.nom@auf.org>"
  6. On utilisera surtout git avec sudo. Il faut donc dire à sudo de ne pas supprimer les variables d'environnement utiles à git :

    # (... extrait de /etc/sudoers ...)
    # une ligne à ajouter au début de /etc/sudoers :
    Defaults env_keep += "GIT_COMMITTER_NAME GIT_COMMITTER_EMAIL GIT_AUTHOR_NAME GIT_AUTHOR_EMAIL"

Utilisation

  • Préliminaire : ajouter dans son ~/.bashrc (puis se reloger pour activation) :

    # à ajouter à la fin de son fichier ~/.bashrc :
    export GIT_AUTHOR_NAME="Prenom NOM"
    export GIT_AUTHOR_EMAIL="prenom.nom@auf.org"
  • Pour voir les modifications avant de les envoyer dans le dépôt :
    $ sudo git status -a      # affiche la ligne des fichiers modifiés, supprimés, nouveaux...
    $ sudo git diff           # affiche les différences entre la version stockée dans git et la version actuelle
  • Pour envoyer les modifications dans le dépôt, on lance un commit. Il y a plusieurs façons de faire, parmis lesquelles :

    $ sudo git commit un/seul/fichier/modifié   # pour un fichier : toujours en notation relative
    $ sudo git commit -a                        # on enregistre *toutes* les modifications
  • Pour suivre un nouveau fichier ou tous les nouveaux fichiers d'un répertoire, par exemple suite à l'installation de nouveaux fichier de configuration :
    $ cd /
    $ sudo git add le/chemin/relatif/vers/le/fichier/ou/repertoire        <-- il faut indiquer le chemin en "relatif" (sans / au début)
    $ sudo git commit
    • Attention : il faut éventuellement modifier le fichier /.git/info/exclude

  • Pour ne plus suivre un fichier ou un répertoire :
    $ sudo vi /.git/info/exclude                         <-- on ajoute le nom du fichier dans les excludes (exemple : /etc/ldap.secret) 
    $ cd /
    $ sudo git rm le/chemin/du/fichier/a/ne/plus/suivre  <-- on le retire du dépôt (nb : le chemin est relatif, sans / au début)
  • Pour revoir les modifications, plusieurs techniques en ligne de commande :
    $ sudo tig               <-- petit logiciel très sympa, à installer avec aptitude install tig
    $ sudo git whatchanged
    $ sudo git log -10
    $ sudo git show ...(le code du commit)...
  • Note : la plupart du temps, il est plus simple de prendre l'habitude de se placer à la racine pour faire les manipulations git. Un exemple typique :

    $ cd /etc                              |
    $ sudo vi profile                <-----| ici on travaille
    $ sudo vi postfix/main.cf              |
    $ cd /     
    $ sudo git status -a                   | on fait un cd /
    $ sudo git diff | less           <-----| puis on documente
    $ sudo git commit -a                   | son travail ...

Quelques automatisations quasi indispensables

Pour lancer un "status" à chaque connexion sur le serveur (très très utile) :

  1. Permettre aux gens du groupe "admin" de lancer git status sans mot de passe :
    # et à ajouter vers la fin de /etc/sudoers :
    %admin ALL=(ALL) NOPASSWD: /usr/bin/git status -a
  2. Lancer le git status (via sudo) dans le /etc/profile, et configurer un peu les variables GIT :

    # A ajouter à la fin de /etc/profile :
    if [ "$PS1" ]; then
      # on lance un git status sur l'utilisateur est dans le groupe
      # admin ou bien si c'est root
      if $(id -Gn | grep -qw admin) || [ $(id -u) -eq 0 ]; then
        [ -x /usr/bin/git -a -e /.git ] && (cd / && sudo /usr/bin/git status -a)
      fi
      # les lignes suivantes tentent de configurer les variables GIT_*
      # si les résultats ne sont pas bien "devinés", définir les bonnes valeurs dans .bashrc
      GIT_AUTHOR_NAME=${GIT_AUTHOR_NAME:=$(getent passwd $(id -un)|cut -d: -f5|cut -d, -f1)}
      GIT_AUTHOR_EMAIL=${GIT_AUTHOR_EMAIL:=$(id -un)@$(hostname -f)}
      GIT_COMMITTER_NAME=${GIT_COMMITTER_NAME:=$GIT_AUTHOR_NAME}
      GIT_COMMITTER_EMAIL=${GIT_COMMITTER_EMAIL:=$GIT_AUTHOR_EMAIL}
      export GIT_AUTHOR_NAME GIT_AUTHOR_EMAIL GIT_COMMITTER_NAME GIT_COMMITTER_EMAIL
    fi

Pour envoyer un mail à chaque commit :

  1. Créer un script /.git/hooks/post-commit :

    recipients="admins@XX.auf.org"   # adresse pour l'envoi du mail
    # On modifie un peu la sortie de git show :
    #   1) on ajoute "From git hostname" devant le nom en From
    #   2) on retire le [PATCH] dans le sujet, replacé par git-commit:
    #   3) on ajoute un champ To:
    # et on maile le tout via sendmail
    PATH=/usr/sbin:/usr/bin:/sbin:/bin
    git show --pretty=email | 
      sed '1,6s/^From: /From: git '`hostname -f`' - /;1,6s/^Subject: \[PATCH\]/Subject: git-commit:/;2iTo: '"${recipients}" | 
      head -c 16k | /usr/lib/sendmail ${recipients}
    exit 0
  2. Activer le script :
    # chmod +x /.git/hooks/post-commit
  3. Faire un petit commit de test afin de vérifier ça marche, notamment que sendmail (Postfix, Exim, ...) envoie bien le message.

Ca ressemble à quoi ?

Juste pour donner une idée, voici ce que donne le petit programme tig lorsqu'on le lance sur une machine bien suivie :

  • ce-que-montre-tig.png

Améliorations à trouver

Pour plus tard (Lenny) :

  • correction du bogue quand on joue avec un "/.git" (y a-t-il un bogue, d'ailleurs ? )
  • git-stash pour relier apt et git correctement

  • Tini n'ose pas le dire, mais il a fait un paquet Debian git-etc-auf qui fait tout le boulot d'installation. Un jour il osera.

  • il n'a pas vraiment osé, mais ProgFou a repris le flambeau et ne s'est pas encore brulé les doigts avec

  • Chouette ! Maintenant qu'on a notre dépôt APT AuF, on va pouvoir FOOONNNCCCEEEEEEERRRR (dans le mur ?)

Git/SuiviDeConfiguration (dernière édition le 2013-09-02 03:50:32 par JeanChristopheAndré)