« Outils de traduction - 2e partie » : différence entre les versions

De April MediaWiki
Aller à la navigationAller à la recherche
(Création d'une nouvelle page avec le contenu de la rév 48901 de CharteGroupeTradGnu)
(DIminuer la marge du diagramme.)
 
(214 versions intermédiaires par 3 utilisateurs non affichées)
Ligne 1 : Ligne 1 :
{{Travail En Cours}}
:'''<span style="color: red;">Cette page sert de référence aux quelques personnes qui s'occupent de mettre à jour les traductions françaises sur www.gnu.org, mais n'est ''absolument pas indispensable'' pour contribuer aux traductions.</span>'''




''Cette page est un annexe du [[Manuel_du_traducteur_du projet_GNU|Manuel du traducteur du projet GNU]].''
'''&#8656; [[:Catégorie:Traduction_de_la_philosophie_GNU|Retour au menu de trad-gnu]]'''




==Utilisation de GNUnited Nations (GNUN)==


Ce qui suit est un résumé du manuel qui se trouve sur http://www.gnu.org/software/trans-coord/manual/gnun/ et est destiné aux personnes sachant se servir de cvs.


''Il est recommandé de prendre connaissance des documentations spécifiques de chaque outil avant installation ou utilisation.''
==Introduction==


Ce que GNUN permet de faire, entre autres :
* valider les fichiers PO ;
* transformer les fichiers PO en pages HTML (avec le style par défaut), ce qui facilite grandement la relecture ;
* voir quelles traductions ont besoin d'une mise à jour.


Le site gnu.org contient des centaines de pages dont certaines sont traduites en plus de 25 langues. Beaucoup d'entre elles sont fréquemment remaniées, les traductions doivent donc être mises à jour. Pour faciliter cette opération, les développeurs de gnu.org ont écrit un ensemble de scripts connu sous le nom de  GNUnited Nations (GNUN), qui fait appel à plusieurs autres programmes.
La maintenance des fichiers se fait à l'aide de systèmes de contrôle de version : CVS pour le site lui-même (dépôt www) et Git pour les traductions en français (dépôt www-fr).


===Installation===
Le '''circuit de mise à jour des traductions''' est résumé par le schéma suivant, adapté du [http://www.gnu.org/software/trans-coord/manual/gnun/gnun.html#PO-Files-and-Team manuel de GNUN] :


GNUnited Nations est utilisé sur le site de GNU pour générer toutes les pages HTML traduites à partir des fichiers PO. GNUN a été conçu pour le site web de gnu.org et a besoin de l'arborescence de http://www.gnu.org pour fonctionner. Pour l'utiliser en local, il faut donc recréer cette arborescence. Cela se fait avec cvs.
<pre>
  +---------------+              +---------------+
  |    Dépôt    |              |    Dépôt    |
  |  officiel    |  [Savannah]  |    officiel  |
  |  www (CVS)  |              |  www-fr (Git) |
  +---------------+              +---------------+
      |  ∧                          |  ∧
    M1 |  | C2                    M2 |  | M5
      V  |                          V  |
  +---------------+              +---------------+
  |  Répertoires  |      M3      |    Dépôts    |  M4
  |    locaux    |---->---->----|    locaux    |<------.
  |  www (CVS)  |              |  www-fr (Git) |      |
  +---------------+              +---------------+      |
        ∧                            |  |            |
        |      C1                    |  |            |
        '----<----<---Coordinateur----'  '---Membres---'
_________________________________________________________
|                          |              |              |
|        Opération        | GNUmakefile  |  Scripts    |
|                          |  (GNUN)    |  maison*    |
|___________________________|______________|______________|
|                          |              |              |
|  M1 = cvs update          | )            | )            |
|  M2 = git pull            | )            | ) cvs-sync  |
|  M3 = msgmerge (Gettext)  | ) make sync  | )            |
|  M4 = git commit          | )            |              |
|  M5 = git push            | )            |              |
|                          |              |              |
|  C1 = cp de www-fr à www  | make publish | ) www-commit |
|  C2 = cvs commit          |              | )            |
|___________________________|______________|______________|
 
                    [*] Voir plus loin.
</pre>
 
Le travail se fait dans des copies locales de www et www-fr. Il comporte cinq étapes :
# synchroniser les copies locales de www et www-fr avec les dépôts officiels correspondants [voir schéma : M1 et M2] ;
# synchroniser www-fr avec www localement et déterminer quels fichiers PO ont besoin d'une mise à jour [M3] ;
# mettre à jour ces fichiers ;
# les valider ;
# les enregistrer dans le dépôt www-fr local [M4] et les envoyer dans le dépôt www-fr officiel [M5] (cette dernière étape demande d'avoir un compte sur Savannah - voir la [[Charte_Groupe_Traduction_de_la_philosophie_GNU#D.C3.A9p.C3.B4t_git | Charte de trad-gnu]]).
 
Par la suite, les fichiers mis à jour seront envoyés dans le dépôt www de Savannah par le coordinateur du groupe [C1 et C2], et moins d'une heure plus tard GNUN régénèrera les pages traduites.
 
 
Le circuit des nouvelles traductions et des révisions est le même, à part que la synchronisation des dépôts n'est pas nécessaire puisque l'initiative appartient à l'équipe de traduction.
 
 
'''Sources d'information et de formation'''
 
* Le [https://www.gnu.org/software/trans-coord/manual/gnun/gnun.html manuel de GNUN] décrit le principe de la génération des pages traduites et détaille chaque fonction de GNUN. Ce que GNUN permet de faire, entre autres :
** valider les fichiers PO ;
** transformer les fichiers PO en pages HTML (avec le style par défaut), ce qui facilite grandement la relecture ;
** voir quelles traductions ont besoin d'une mise à jour.  


GNUN s'installe dans le $HOME. L'ensemble de l'installation occupe un peu moins de 400 Mo.
* Git est ce qui risque le plus de dérouter les débutants, mais avec un peu de persévérance il suffit d'une semaine ou deux pour s'y mettre, foi de Mme Michu. L'essentiel de ce qu'il y a à savoir se trouve dans les trois premiers chapitres du [https://git-scm.com/book/fr Git Book]. S'il y a un problème, quelques mots-clés dans un moteur de recherche ou un appel au secours sur la liste font merveille. Pas de panique, Git a été conçu pour pouvoir rattraper les erreurs.


Pré-requis :
Et devinez quoi... il y a des ''interfaces graphiques'' :
* cvs
* Git GUI (multiplateforme) permet de faire une bonne partie des opérations. Il est couplé avec gitk.
* Autotools
* gitk visualise l'historique des branches, montre les différences entre fichiers et permet de faire des recherches dans l'arborescence.
* gettext
* GNU guile et po4a (pour la conversion HTML <--> PO)
* pour la validation des pages HTML, libxml2 et la DTD XHTML 1.0 du W3C


Créer un répertoire, GNU par exemple, et se placer dans celui-ci:
 
:''Il arrive qu'une même opération puisse être faite de différentes manières. Les méthodes qui utilisent des scripts sont les plus efficaces pour un travail de routine, même si leur mise en place semble un peu compliquée (branche Git supplémentaire, configuration).''
 
 
 
==Mise en place des outils==
 
 
===Clonage du dépôt Git www-fr===
 
 
''Prérequis :'' Git, avoir un [https://savannah.nongnu.org/account/register.php compte sur Savannah] et appartenir au [https://savannah.nongnu.org/my/groups.php?words=www-fr groupe www-fr].
 
Le [https://git.savannah.gnu.org/gitweb/?p=www-fr.git dépôt www-fr] comprend 2 branches principales :
* <em>master</em> contient les fichiers  *.fr.po  sur lesquels on travaille. Elle ne peut pas être supprimée.
* <em>scripts</em> contient quelques outils :
** <code>transvalid-po</code> vérifie que le format d'un PO est correct, régénère un fichier  *.html  et vérifie qu'il est conforme au standard XHTML (format utilisé sur www.gnu.org). L'ensemble de ces opérations est désigné par un néologisme, « transvalidation ». Le fichier  *.html  original est requis, ainsi qu'un autre fichier de la branche scripts, html5.dtd, qui provient du paquet GNUN.
** <code>transvalid-batch</code> fait la même chose sur une liste de POs, typiquement l'ensemble d'un commit. Une arborescence contenant les HTML originaux est requise.
** <code>previewpo.pl</code> (écrit par Donatas Klimašauskas) crée un HTML générique à partir d'un PO. Pas besoin de l'original.
** <code>micro-www-checkout</code> crée un répertoire www réduit, ne contenant que les fichiers nécessaires à la régénération de pages traduites en français par transvalid-po ou transvalid-batch.
** <code>cvs-sync</code> synchronise le répertoire www avec le dépôt CVS et le répertoire www-fr avec www, puis établit un rapport sur l'état des POs qui peut éventuellement être envoyé sur la liste de discussion.
** <code>po2pad</code> et <code>pad2po</code> facilitent le passage du format PO au pad de traduction et inversement (po2pad utilise un autre fichier de la branche scripts, pad-header-gnu).
** <code>check-links</code> extrait les liens de chaque ensemble chaîne originale + chaîne traduite et montre leurs différences ; il opère sur un fichier PO, sur un répertoire (par exemple philosophy/) ou sur l'ensemble de www-fr.
 
''Ne pas hésiter à modifier ces scripts, à les critiquer ou à en créer de nouveaux. Ils sont là pour ça. ;-)''
 
On  peut même se payer le luxe de créer des lanceurs pour les 3 scripts les plus utiles: cvs-sync, transvalid-batch et www-commit.
 
 
'''1. Clonage de www-fr'''
 
Créer le répertoire de travail (GNU/ par exemple) qui contiendra aussi www, et s'y placer :
<pre>
<pre>
$ mkdir GNU
mkdir -p ~/GNU && cd ~/GNU
$ cd GNU
</pre>
</pre>


Récupérer tous les fichiers du site web de gnu.org dans un sous-repertoire www :
Ensuite, on a le choix de cloner le dépôt complet ou seulement une des branches.
 
* ''Méthode la plus simple : clonage du dépôt complet''
<pre>
<pre>
$ cvs -z3 -d:pserver:anonymous@cvs.savannah.gnu.org:/webcvs/www co www
git clone ID-SUR-SAVANNAH@git.sv.gnu.org:/srv/git/www-fr.git
</pre>
</pre>


Récupérer les sources de GNUN :
* ''Méthode plus élaborée : clonage séparé des branches master et scripts'' (voir le [http://www.kernel.org/pub/software/scm/git/docs/git-remote.html manuel de git-remote]).
 
Cela évite de traîner l'historique de www-fr avec les scripts, et inversement. Mais surtout, cela permet d'utiliser les scripts avec les fichiers PO sans avoir à les copier ailleurs. Il est en effet impossible d'accéder en même temps à deux branches d'un même dépôt local qui n'ont aucun fichier en commun. Les scripts peuvent être n'importe où&nbsp;; en revanche, le répertoire www-fr doit avoir la même racine que www.
 
Pour la branche master (celle qui contient les fichiers PO) :
<pre>
<pre>
$ cvs -d :pserver:anonymous@cvs.sv.gnu.org:/sources/trans-coord \
mkdir -p www-fr && cd www-fr
        checkout trans-coord/gnun/server/gnun
git init
git remote add -f -t master -m master origin \
    ID-SUR-SAVANNAH@git.sv.gnu.org:/srv/git/www-fr.git
git merge origin
</pre>
</pre>


Préparer l'installation :
Pour la branche scripts, c'est un peu plus compliqué car celle qu'on crée localement s'appelle master par défaut mais ne correspond pas à la branche master du dépôt distant. Si l'on veut pouvoir pousser les modifications locales, il faut la renommer&nbsp;; autrement, on a une erreur assez énigmatique&nbsp;: « error: src refspec scripts does not match any. »
<pre>
<pre>
$ cd trans-coord/gnun/server/gnun
mkdir -p www-fr-scripts && cd www-fr-scripts
$ autoreconf -i
git init
$ ./configure
git remote add -f -t scripts -m scripts origin \
$ make
    ID-SUR-SAVANNAH@git.sv.gnu.org:/srv/git/www-fr.git
git merge origin
git branch -m master scripts
</pre>
</pre>




Il faut éditer le fichier gnun.conf pour remplacer les adresses de
'''2. Configuration'''
courriel, afin que les tests ne soient pas envoyés aux webmasters GNU ;-)
 
Écrire dans ~/.gitconfig l'identité de celui/celle qui fait les commits. Sans l'option --global, l'information est écrite dans le fichier .git/config (l'adresse de courriel n'a pas besoin d'être valide, il faut seulement qu'elle contienne « @ ») :
<pre>
<pre>
$ sed 's/bug-gnun@gnu.org/adresse@bidon.fr/g' gnun.conf
~/GNU/www-fr
git config --global user.name "Gribouille Tartempion"
git config --global user.email gtartempion@serveur.mail
</pre>
</pre>


Maintenant, on peut installer GNUnited Nations dans ~/GNU/www/server/gnun :
La commande ci-dessous va faciliter le travail à plusieurs :
<pre>
<pre>
$ sudo make install
git config branch.autosetuprebase remote
</pre>
</pre>


Mettre des liens vers config.mk et GNUmakefile dans le répertoire www/server/gnun. Par exemple sous Ubuntu :


''Remarques :''
* on peut demander à Git d'ignorer certains fichiers en créant un fichier ~/.gitignore_global, ou en utilisant le fichier .git/info/exclude de chacun des dépôts locaux. L'exclusion des fichiers .html est nécessaire si l'on se sert de transvalid-po, qui sauvegarde les pages web traduites dans le répertoire ou se trouve le PO. Par exemple, le fichier exclude de www-fr pourrait contenir :
<pre>
<pre>
$ cd ~/GNU/www/server/gnun/
*~
$ ln -s /usr/local/share/gnun/GNUmakefile ./
*.html
$ ln -s /usr/local/share/gnun/config.mk ./
*.txt
*.diff
</pre>
</pre>


Pour les flemmards, voici un petit script qui fait ça tout seul. Il faut juste rentrer le mot de passe sudo. Le script fonctionne sous Ubuntu et Debian (à condition d'avoir activé sudo pour l'utilisateur) :
*  Il est fortement déconseiller de créer des branches perso sur le serveur, car les utilisateurs ne peuvent pas les supprimer.
 
 
===Installation d'une arborescence www locale===
 
 
Le type d'arborescence à créer dépend de ce qu'on veut en faire.
 
*'''Installation minimum pour utiliser transvalid-batch : micro-www-checkout'''
 
Ce script télécharge les fichiers strictement nécessaires à transvalid-batch. C'est la méthode recommandée avec un SSD (disque à mémoire flash). Il est en effet très mauvais pour ce type de disque de modifier fréquemment des centaines de fichiers, ce qui arrive si l'on synchronise une arborescence www complète avec le dépôt CVS.
 
Les fichiers nécessaires à la mise à jour des nouvelles traductions doivent être ajoutés séparément. Le script cvs-sync s'en charge à l'étape de synchronisation (voir plus loin).


''Prérequis :'' cvs, rsync.
<pre>
<pre>
#/bin/bash
cd ~/GNU/www-fr-scripts
./micro-www-checkout -l fr
</pre>


# NOUVELLE INSTALLATION DE GNUN
*'''Installation complète'''


cd
Pour avoir une image complète du site web (près de 500&nbsp;Mo), il faut passer par la méthode traditionnelle&nbsp;:
mkdir GNU
 
cd GNU
''Prérequis :'' cvs.
<pre>
mkdir -p ~/GNU && cd ~/GNU
cvs -z3 -d:pserver:anonymous@cvs.savannah.gnu.org:/webcvs/www co www
cvs -z3 -d:pserver:anonymous@cvs.savannah.gnu.org:/webcvs/www co www
cvs -d :pserver:anonymous@cvs.sv.gnu.org:/sources/trans-coord checkout trans-coord/gnun/server/gnun
</pre>
 
 
===Installation de GNUN (optionnelle)===
 
 
''Prérequis :''
# une arborescence www complète (voir plus haut) ;
# make, gawk ;
# texinfo, gettext, po4a (pour la conversion HTML <--> PO) ;
# pour la validation des pages HTML : libxml2, libxml2-utils (la DTD est incluse dans le paquet GNUN).
 
Télécharger le paquet gnun-latest (ou gnun-1.4) par exemple dans $HOME, et l'extraire. On obtient le dossier gnun-1.4 :
<pre>
wget https://ftp.gnu.org/gnu/gnun/gnun-latest.tar.gz
tar xzvf gnun-latest.tar.gz
</pre>


cd trans-coord/gnun/server/gnun
Se placer dans le dossier gnun-1.4 et préparer l'installation :
autoreconf -i
<pre>
cd ~/gnun-1.4
./configure
./configure
make
make
sed 's/bug-gnun@gnu.org/adresse@bidon.fr/g' gnun.conf
</pre>
 
Il faut éditer le fichier gnun.conf pour remplacer les adresses de
courriel, afin que les tests ne soient pas envoyés aux webmasters GNU. ;-)
<pre>
sed -i 's/bug-gnun@gnu.org/adresse@bidon.fr/' gnun.conf
</pre>
 
Maintenant, on peut installer GNUnited Nations dans ~/GNU/www/server/gnun :
<pre>
sudo make install
sudo make install
</pre>


cd ~/GNU/www/server/gnun/
Enfin, il faut copier config.mk et GNUmakefile dans le répertoire www/server/gnun :
ln -s /usr/local/share/gnun/GNUmakefile ./
<pre>
ln -s /usr/local/share/gnun/config.mk ./
cp GNUmakefile ~/GNU/www/server/gnun/
cp config.mk ~/GNU/www/server/gnun/
</pre>
</pre>


Ne pas oublier de le rendre exécutable. ;-)


===Valider un PO / Générer une page HTML===


On met  le fichier à valider DOCUMENT.fr.po dans le dossier ~/GNU/www/SECTION/po
==Les six étapes d'une mise à jour==


On se place dans le répertoire ~/GNU/www/server/gnun, et on demande à générer la page :


<pre>
===Synchronisation des dépôts locaux avec le dépôt www de Savannah===
$ cd ~/GNU/www/server/gnun
$ make VALIDATE=yes ../../SECTION/DOCUMENT.fr.html
</pre>


Et voilà, make dit s'il y a une erreur. On peut modifier ../../SECTION/po/DOCUMENT.fr.po et régénérer la page HTML, qu'on récupère dans ~/GNU/www/SECTION/.


*'''À l'aide du script cvs-sync'''


===Faire l'inventaire des traductions à mettre à jour===
''Prérequis'' : cvs, git.


Enlever (ou renommer) les fichiers DOCUMENT.fr.po qui ont été récemment validés et qui se trouvent dans le dossier ~/GNU/www/SECTION/po.
Ce script fait l'inventaire des PO à mettre à jour dans la foulée de la synchronisation et établit un rapport sur l'état des POs (nombre de chaînes à traduire ou «&nbsp;fuzzy&nbsp;»), qui peut éventuellement être envoyé sur la liste trad-gnu@april.org .  


Mettre à jour www :
Si cvs-sync est dans le répertoire www-fr-scripts :
<pre>
<pre>
$ cd ~/GNU
cd ~/GNU/www-fr-scripts
$ cvs -z3 -d:pserver:anonymous@cvs.savannah.gnu.org:/webcvs/www update www
./cvs-sync
</pre>
</pre>


Demander à GNUN de faire l'inventaire, et l'enregistrer avec la date :
*'''Manuellement'''
 
''Prérequis'' : cvs, git, GNUN, [http://www.gnu.org/software/trans-coord/manual/gnun/gnun.html#GNUmakefile_002eteam-Targets GNUmakefile des équipes de traduction] à la racine de www-fr.
 
1. Synchroniser l'arborescence www locale avec le dépôt CVS de www :
<pre>
<pre>
$ cd www/server/gnun/
cd ~/GNU/www
$ make report TEAM=fr > ~/CHEMIN/VERS/"inventaire_"`eval date +%Y%m%d`".txt"
cvs update
</pre>
''Remarque 1''. La connexion au dépôt CVS de Savannah est quelquefois lente et irrégulière. On peut alors utiliser une solution de repli plus rapide : aller voir le [https://www.gnu.org/software/gnun/reports/report-fr.html rapport de GNUN sur l'état des traductions] et synchroniser uniquement les fichiers à mettre à jour :
<pre>
cd ~/GNU/www
cvs update SECTION/po/DOCUMENT.fr.po SECTION/po/DOCUMENT.pot SECTION/DOCUMENT.html
</pre>
''Remarque 2''. La synchronisation ne se fait bien (c'est-à-dire sans « conflit pendant la fusion ») que si les fichiers n'ont pas été modifiés localement. Si pour une raison quelconque ils l'ont été (à l'étape de validation par exemple), on peut supprimer les changements globalement :
<pre>
cd ~/GNU/www
cvs diff | patch -R -p0
</pre>
Ou bien, si la connexion est mauvaise, on peut restreindre l'opération à un dossier particulier :
<pre>
cd ~/GNU/www/DOSSIER
cvs diff | patch -R -p0
</pre>
</pre>


Et voilà pour les flemmards un petit script qui fait ça tout seul :
2. Synchroniser localement www-fr avec www en utilisant GNUN (ne pas oublier de se placer sur la branche adéquate) :
<pre>
<pre>
#/bin/bash
cd ~/GNU/www-fr
git checkout master
make sync
</pre>
 


# GNUN - UPDATE et MAKE REPORT
===Inventaire des PO à mettre à jour===


# On part du principe qu'il y a déjà une installation de GNUN dans le dossier ~/GNU,
# et qu'elle n'a pas servi à tester des PO.


cd GNU
* '''En ligne''' : [https://www.gnu.org/software/gnun/reports/report-fr.html rapport de GNUN sur l'état des traductions]
cvs -z3 -d:pserver:anonymous@cvs.savannah.gnu.org:/webcvs/www update www
 
cd www/server/gnun
*'''À l'aide du script cvs-sync'''
make report TEAM=fr > ~/CHEMIN/VERS/"inventaire_"`eval date +%Y%m%d`".txt"
''Prérequis'' : cvs, git.
 
L'inventaire se fait dans la foulée de la synchronisation (voir plus haut).
 
* '''À l'aide de GNUN''' (ne pas oublier de se placer sur la branche adéquate)
''Prérequis'' : cvs, git, GNUN, GNUmakefile à la racine de www-fr.
<pre>
cd ~/GNU/www-fr
git checkout master
make report
</pre>
</pre>


==Travail dans le CVS de www-fr==


Ce qui suit suppose connues les grandes lignes du fonctionnement de cvs, mais n'utilise aucune de ses fonctions avancées. La référence en la matière est le [http://ftp.gnu.org/non-gnu/cvs/source/feature/1.12.13 Cederqvist] mais il n'est pas nécessaire de le lire en entier pour s'y mettre !
===Mise à jour des PO===
 
 
Il est préférable de mettre les fichiers à jour dans www-fr (voir plus loin pourquoi).
 
On peut utiliser un éditeur de PO ou un éditeur de texte ordinaire (voir [[Outils_de_traduction_-_1e_partie | Outils de traduction 1e partie]]).
 
Pour faciliter la relecture, on peut '''convertir le fichier PO en HTML générique''' avec previewpo.pl. Une page web plus conforme à l'original peut être régénérée avec transvalid-po (voir plus loin).
 
 
===Transvalidation (génération des pages HTML et validation)===
 


*'''À l'aide de transvalid-po ou transvalid-batch'''


===Récupérer les traductions stockées dans le CVS===
Le script transvalid-po permet de régénérer une page traduite à partir du PO et de la page originale&nbsp;; de plus, il vérifie que les POs sont formatés correctement, actualise la date de révision et vérifie que la page traduite n'a pas d'erreur de validation XHTML. transvalid-batch fait la même chose sur une série de POs, par exemple l'ensemble des fichiers d'un commit. Une fois validés, les POs peuvent être commités dans le dépôt Git local. Les pages traduites sont enregistrées dans www-fr, mais on fait en sorte que Git les ignore (voir plus haut). L'arborescence www n'est pas modifiée.


Cela peut se faire en accès anonyme :
''Prérequis :''
# po4a (qui dépend de gettext, perl, etc.), awk,
# xmllint (paquet Debian libxml2-utils),
# html5.dtd de gnun (dans le même répertoire que transvalid-po).
Si transvalid-po est dans le répertoire www-fr-scripts :
<pre>
<pre>
$ cvs -z3 -d:pserver:anonymous@cvs.savannah.gnu.org:/cvsroot/www-fr co www-fr/SECTION/DOCUMENT.fr.po
cd ~/GNU/www-fr-scripts
./transvalid-po
</pre>
</pre>


On peut aussi récupérer l'ensemble du « module www-fr », c'est-à-dire l'ensemble des traductions :
*'''À l'aide d'une installation locale de GNUN'''
 
1. On met le fichier à valider DOCUMENT.fr.po dans le dossier ~/GNU/www/SECTION/po/. C'est faisable avec « make publish », mais alors ''tous'' les PO de www-fr seront reformatés et copiés dans www, même ceux qui ne sont pas encore prêts à être validés.
 
2. On se place dans le répertoire ~/GNU/www/server/gnun, et on demande à générer la page :
<pre>
<pre>
$ cvs -z3 -d:pserver:anonymous@cvs.savannah.gnu.org:/cvsroot/www-fr co www-fr
cd ~/GNU/www/server/gnun
make VALIDATE=yes ../../SECTION/DOCUMENT.fr.html
</pre>
</pre>


Et voilà, make dit s'il y a une erreur. On peut modifier ../../SECTION/po/DOCUMENT.fr.po et régénérer la page HTML, qu'on récupère dans ~/GNU/www/SECTION/.


===Mise à jour et envoi des nouvelles traductions dans www-fr===
''Remarque''. Il arrive fréquemment que le fichier POT soit régénéré au cours de la validation (voir le manuel de GNUN). Cela modifie également le fichier PO (ainsi que des fichiers intermédiaires) et perturbe les synchronisations ultérieures. Il est possible de supprimer les changements comme expliqué plus haut, mais il faut évidemment que le PO mis à jour soit sauvegardé ailleurs. Il est donc recommandé de faire les mises à jour dans www-fr et de ne valider qu'une copie. De même, la page DOCUMENT.fr.html régénérée doit être sauvegardée si l'on veut s'en servir pour la relecture.


Tout ce qui demande des droits d'écriture dans le CVS se fait en accès authentifié avec un compte sur Savannah (https://savannah.gnu.org/projects/www-fr) validé par le coordinateur du groupe.


===Envoi dans le dépôt www-fr===


====Mise à jour====


Pour travailler sur un fichier, il faut d'abord le sortir du CVS :
1. Ajouter des modifications ou de nouveaux fichiers à la branche master (indexation) :
<pre>
<pre>
$ cd
cd ~/GNU/www-fr
$ export CVS_RSH=ssh
git checkout master
$ cvs -z3 -d:ext:votrecompte@cvs.savannah.gnu.org:/cvsroot/www-fr co www-fr/SECTION/DOCUMENT.fr.po
git add fichier1 fichier2 ...
</pre>
</pre>


On peut aussi sortir l'ensemble des traductions :
2. Enregistrer (commiter) les modifications dans le dépôt local (branche master) :
<pre>
<pre>
$ cvs -z3 -d:ext:votrecompte@cvs.savannah.gnu.org:/cvsroot/www-fr co www-fr
git commit -m "Message de commit" fichier1 fichier2 [...]
</pre>
</pre>
Les commits peuvent être regroupés logiquement, par exemple modifications d'un même type sur plusieurs fichiers.


On travaille sur une image locale de l'arborescence du CVS. Les fichiers ne doivent pas être déplacés ni renommés. Lorsque les modifications sont faites, on les renvoie :
3. Envoyer (pousser) les modifications sur le serveur :
<pre>
<pre>
$ cd ~/www-fr
git push
$ cvs commit SECTION/DOCUMENT.fr.po
</pre>
</pre>
Un éditeur de texte s'ouvre, et on inscrit un commentaire, succinct mais assez détaillé pour faciliter le travail du coordinateur, qui doit vérifier les changements faits avant de mettre la traduction en ligne.


On peut aussi mettre le commentaire directement dans la ligne de commande. Par exemple :
4. Éventuellement faire la liste des fichiers modifiés :
<pre>
<pre>
$ cd ~/www-fr
git diff --name-only master master^
$ cvs commit -m "Ajouté des renvois dans les notes de traduction." SECTION/DOCUMENT.fr.po
</pre>
</pre>


(ATTENTION : Il n'est pas possible de modifier le commentaire une fois le fichier envoyé.)
5. Prévenir [mailto:trad-gnu@april.org trad-gnu@april.org] en joignant la liste des fichiers s'il y en a beaucoup.


On prévient ensuite sur la liste de diffusion qu'une mise à jour d'un document a été déposée dans le CVS.




====Nouvelle traduction====
===Envoi dans le dépôt www (coordinateur.trice uniquement)===
 
www-commit peut envoyer successivement 3 groupes de POs correspondant aux 3 derniers commits dans www-fr, en commençant par le plus récent.


S'il s'agit d'une nouvelle traduction, on la place dans le dossier de l'arborescence locale à laquelle elle appartient, puis on crée une nouvelle entrée dans le CVS et on envoie le fichier comme précédemment. Cela donne :
<pre>
<pre>
$ cd ~/www-fr
cd ~/GNU/www-fr-scripts
$ cvs add SECTION/DOCUMENT.fr.po
./www-commit
$ cvs commit -m "Nouvelle traduction" SECTION/DOCUMENT.fr.po
</pre>
</pre>


On prévient ensuite sur la liste de diffusion qu'un nouveau document a été déposé dans le CVS.
 
 
 


[[Catégorie:Traduction de la philosophie GNU]]
[[Catégorie:Traduction de la philosophie GNU]]

Dernière version du 29 mars 2024 à 11:15

Cette page sert de référence aux quelques personnes qui s'occupent de mettre à jour les traductions françaises sur www.gnu.org, mais n'est absolument pas indispensable pour contribuer aux traductions.


Retour au menu de trad-gnu



Introduction[modifier]

Le site gnu.org contient des centaines de pages dont certaines sont traduites en plus de 25 langues. Beaucoup d'entre elles sont fréquemment remaniées, les traductions doivent donc être mises à jour. Pour faciliter cette opération, les développeurs de gnu.org ont écrit un ensemble de scripts connu sous le nom de GNUnited Nations (GNUN), qui fait appel à plusieurs autres programmes. La maintenance des fichiers se fait à l'aide de systèmes de contrôle de version : CVS pour le site lui-même (dépôt www) et Git pour les traductions en français (dépôt www-fr).

Le circuit de mise à jour des traductions est résumé par le schéma suivant, adapté du manuel de GNUN :

  +---------------+              +---------------+
  |     Dépôt     |              |     Dépôt     |
  |   officiel    |  [Savannah]  |    officiel   |
  |   www (CVS)   |              |  www-fr (Git) |
  +---------------+              +---------------+
       |   ∧                           |   ∧
    M1 |   | C2                     M2 |   | M5
       V   |                           V   |
  +---------------+              +---------------+
  |  Répertoires  |      M3      |     Dépôts    |   M4
  |    locaux     |---->---->----|     locaux    |<------.
  |   www (CVS)   |              |  www-fr (Git) |       |
  +---------------+              +---------------+       |
         ∧                             |   |             |
         |      C1                     |   |             |
         '----<----<---Coordinateur----'   '---Membres---'
 _________________________________________________________
|                           |              |              |
|         Opération         | GNUmakefile  |   Scripts    |
|                           |   (GNUN)     |   maison*    |
|___________________________|______________|______________|
|                           |              |              |
|  M1 = cvs update          | )            | )            |
|  M2 = git pull            | )            | ) cvs-sync   |
|  M3 = msgmerge (Gettext)  | ) make sync  | )            |
|  M4 = git commit          | )            |              |
|  M5 = git push            | )            |              |
|                           |              |              |
|  C1 = cp de www-fr à www  | make publish | ) www-commit |
|  C2 = cvs commit          |              | )            |
|___________________________|______________|______________|

                    [*] Voir plus loin.

Le travail se fait dans des copies locales de www et www-fr. Il comporte cinq étapes :

  1. synchroniser les copies locales de www et www-fr avec les dépôts officiels correspondants [voir schéma : M1 et M2] ;
  2. synchroniser www-fr avec www localement et déterminer quels fichiers PO ont besoin d'une mise à jour [M3] ;
  3. mettre à jour ces fichiers ;
  4. les valider ;
  5. les enregistrer dans le dépôt www-fr local [M4] et les envoyer dans le dépôt www-fr officiel [M5] (cette dernière étape demande d'avoir un compte sur Savannah - voir la Charte de trad-gnu).

Par la suite, les fichiers mis à jour seront envoyés dans le dépôt www de Savannah par le coordinateur du groupe [C1 et C2], et moins d'une heure plus tard GNUN régénèrera les pages traduites.


Le circuit des nouvelles traductions et des révisions est le même, à part que la synchronisation des dépôts n'est pas nécessaire puisque l'initiative appartient à l'équipe de traduction.


Sources d'information et de formation

  • Le manuel de GNUN décrit le principe de la génération des pages traduites et détaille chaque fonction de GNUN. Ce que GNUN permet de faire, entre autres :
    • valider les fichiers PO ;
    • transformer les fichiers PO en pages HTML (avec le style par défaut), ce qui facilite grandement la relecture ;
    • voir quelles traductions ont besoin d'une mise à jour.
  • Git est ce qui risque le plus de dérouter les débutants, mais avec un peu de persévérance il suffit d'une semaine ou deux pour s'y mettre, foi de Mme Michu. L'essentiel de ce qu'il y a à savoir se trouve dans les trois premiers chapitres du Git Book. S'il y a un problème, quelques mots-clés dans un moteur de recherche ou un appel au secours sur la liste font merveille. Pas de panique, Git a été conçu pour pouvoir rattraper les erreurs.

Et devinez quoi... il y a des interfaces graphiques :

  • Git GUI (multiplateforme) permet de faire une bonne partie des opérations. Il est couplé avec gitk.
  • gitk visualise l'historique des branches, montre les différences entre fichiers et permet de faire des recherches dans l'arborescence.


Il arrive qu'une même opération puisse être faite de différentes manières. Les méthodes qui utilisent des scripts sont les plus efficaces pour un travail de routine, même si leur mise en place semble un peu compliquée (branche Git supplémentaire, configuration).


Mise en place des outils[modifier]

Clonage du dépôt Git www-fr[modifier]

Prérequis : Git, avoir un compte sur Savannah et appartenir au groupe www-fr.

Le dépôt www-fr comprend 2 branches principales :

  • master contient les fichiers  *.fr.po  sur lesquels on travaille. Elle ne peut pas être supprimée.
  • scripts contient quelques outils :
    • transvalid-po vérifie que le format d'un PO est correct, régénère un fichier  *.html  et vérifie qu'il est conforme au standard XHTML (format utilisé sur www.gnu.org). L'ensemble de ces opérations est désigné par un néologisme, « transvalidation ». Le fichier  *.html  original est requis, ainsi qu'un autre fichier de la branche scripts, html5.dtd, qui provient du paquet GNUN.
    • transvalid-batch fait la même chose sur une liste de POs, typiquement l'ensemble d'un commit. Une arborescence contenant les HTML originaux est requise.
    • previewpo.pl (écrit par Donatas Klimašauskas) crée un HTML générique à partir d'un PO. Pas besoin de l'original.
    • micro-www-checkout crée un répertoire www réduit, ne contenant que les fichiers nécessaires à la régénération de pages traduites en français par transvalid-po ou transvalid-batch.
    • cvs-sync synchronise le répertoire www avec le dépôt CVS et le répertoire www-fr avec www, puis établit un rapport sur l'état des POs qui peut éventuellement être envoyé sur la liste de discussion.
    • po2pad et pad2po facilitent le passage du format PO au pad de traduction et inversement (po2pad utilise un autre fichier de la branche scripts, pad-header-gnu).
    • check-links extrait les liens de chaque ensemble chaîne originale + chaîne traduite et montre leurs différences ; il opère sur un fichier PO, sur un répertoire (par exemple philosophy/) ou sur l'ensemble de www-fr.

Ne pas hésiter à modifier ces scripts, à les critiquer ou à en créer de nouveaux. Ils sont là pour ça. ;-)

On peut même se payer le luxe de créer des lanceurs pour les 3 scripts les plus utiles: cvs-sync, transvalid-batch et www-commit.


1. Clonage de www-fr

Créer le répertoire de travail (GNU/ par exemple) qui contiendra aussi www, et s'y placer :

mkdir -p ~/GNU && cd ~/GNU

Ensuite, on a le choix de cloner le dépôt complet ou seulement une des branches.

  • Méthode la plus simple : clonage du dépôt complet
git clone ID-SUR-SAVANNAH@git.sv.gnu.org:/srv/git/www-fr.git
  • Méthode plus élaborée : clonage séparé des branches master et scripts (voir le manuel de git-remote).

Cela évite de traîner l'historique de www-fr avec les scripts, et inversement. Mais surtout, cela permet d'utiliser les scripts avec les fichiers PO sans avoir à les copier ailleurs. Il est en effet impossible d'accéder en même temps à deux branches d'un même dépôt local qui n'ont aucun fichier en commun. Les scripts peuvent être n'importe où ; en revanche, le répertoire www-fr doit avoir la même racine que www.

Pour la branche master (celle qui contient les fichiers PO) :

mkdir -p www-fr && cd www-fr
git init
git remote add -f -t master -m master origin \
    ID-SUR-SAVANNAH@git.sv.gnu.org:/srv/git/www-fr.git
git merge origin

Pour la branche scripts, c'est un peu plus compliqué car celle qu'on crée localement s'appelle master par défaut mais ne correspond pas à la branche master du dépôt distant. Si l'on veut pouvoir pousser les modifications locales, il faut la renommer ; autrement, on a une erreur assez énigmatique : « error: src refspec scripts does not match any. »

mkdir -p www-fr-scripts && cd www-fr-scripts
git init
git remote add -f -t scripts -m scripts origin \
    ID-SUR-SAVANNAH@git.sv.gnu.org:/srv/git/www-fr.git
git merge origin
git branch -m master scripts


2. Configuration

Écrire dans ~/.gitconfig l'identité de celui/celle qui fait les commits. Sans l'option --global, l'information est écrite dans le fichier .git/config (l'adresse de courriel n'a pas besoin d'être valide, il faut seulement qu'elle contienne « @ ») :

~/GNU/www-fr
git config --global user.name "Gribouille Tartempion"
git config --global user.email gtartempion@serveur.mail

La commande ci-dessous va faciliter le travail à plusieurs :

git config branch.autosetuprebase remote


Remarques :

  • on peut demander à Git d'ignorer certains fichiers en créant un fichier ~/.gitignore_global, ou en utilisant le fichier .git/info/exclude de chacun des dépôts locaux. L'exclusion des fichiers .html est nécessaire si l'on se sert de transvalid-po, qui sauvegarde les pages web traduites dans le répertoire ou se trouve le PO. Par exemple, le fichier exclude de www-fr pourrait contenir :
*~
*.html
*.txt
*.diff
  • Il est fortement déconseiller de créer des branches perso sur le serveur, car les utilisateurs ne peuvent pas les supprimer.


Installation d'une arborescence www locale[modifier]

Le type d'arborescence à créer dépend de ce qu'on veut en faire.

  • Installation minimum pour utiliser transvalid-batch : micro-www-checkout

Ce script télécharge les fichiers strictement nécessaires à transvalid-batch. C'est la méthode recommandée avec un SSD (disque à mémoire flash). Il est en effet très mauvais pour ce type de disque de modifier fréquemment des centaines de fichiers, ce qui arrive si l'on synchronise une arborescence www complète avec le dépôt CVS.

Les fichiers nécessaires à la mise à jour des nouvelles traductions doivent être ajoutés séparément. Le script cvs-sync s'en charge à l'étape de synchronisation (voir plus loin).

Prérequis : cvs, rsync.

cd ~/GNU/www-fr-scripts
./micro-www-checkout -l fr
  • Installation complète

Pour avoir une image complète du site web (près de 500 Mo), il faut passer par la méthode traditionnelle :

Prérequis : cvs.

mkdir -p ~/GNU && cd ~/GNU
cvs -z3 -d:pserver:anonymous@cvs.savannah.gnu.org:/webcvs/www co www


Installation de GNUN (optionnelle)[modifier]

Prérequis :

  1. une arborescence www complète (voir plus haut) ;
  2. make, gawk ;
  3. texinfo, gettext, po4a (pour la conversion HTML <--> PO) ;
  4. pour la validation des pages HTML : libxml2, libxml2-utils (la DTD est incluse dans le paquet GNUN).

Télécharger le paquet gnun-latest (ou gnun-1.4) par exemple dans $HOME, et l'extraire. On obtient le dossier gnun-1.4 :

wget https://ftp.gnu.org/gnu/gnun/gnun-latest.tar.gz
tar xzvf gnun-latest.tar.gz

Se placer dans le dossier gnun-1.4 et préparer l'installation :

cd ~/gnun-1.4
./configure
make

Il faut éditer le fichier gnun.conf pour remplacer les adresses de courriel, afin que les tests ne soient pas envoyés aux webmasters GNU. ;-)

sed -i 's/bug-gnun@gnu.org/adresse@bidon.fr/' gnun.conf

Maintenant, on peut installer GNUnited Nations dans ~/GNU/www/server/gnun :

sudo make install

Enfin, il faut copier config.mk et GNUmakefile dans le répertoire www/server/gnun :

cp GNUmakefile ~/GNU/www/server/gnun/
cp config.mk ~/GNU/www/server/gnun/


Les six étapes d'une mise à jour[modifier]

Synchronisation des dépôts locaux avec le dépôt www de Savannah[modifier]

  • À l'aide du script cvs-sync

Prérequis : cvs, git.

Ce script fait l'inventaire des PO à mettre à jour dans la foulée de la synchronisation et établit un rapport sur l'état des POs (nombre de chaînes à traduire ou « fuzzy »), qui peut éventuellement être envoyé sur la liste trad-gnu@april.org .

Si cvs-sync est dans le répertoire www-fr-scripts :

cd ~/GNU/www-fr-scripts
./cvs-sync
  • Manuellement

Prérequis : cvs, git, GNUN, GNUmakefile des équipes de traduction à la racine de www-fr.

1. Synchroniser l'arborescence www locale avec le dépôt CVS de www :

cd ~/GNU/www
cvs update

Remarque 1. La connexion au dépôt CVS de Savannah est quelquefois lente et irrégulière. On peut alors utiliser une solution de repli plus rapide : aller voir le rapport de GNUN sur l'état des traductions et synchroniser uniquement les fichiers à mettre à jour :

cd ~/GNU/www
cvs update SECTION/po/DOCUMENT.fr.po SECTION/po/DOCUMENT.pot SECTION/DOCUMENT.html

Remarque 2. La synchronisation ne se fait bien (c'est-à-dire sans « conflit pendant la fusion ») que si les fichiers n'ont pas été modifiés localement. Si pour une raison quelconque ils l'ont été (à l'étape de validation par exemple), on peut supprimer les changements globalement :

cd ~/GNU/www
cvs diff | patch -R -p0

Ou bien, si la connexion est mauvaise, on peut restreindre l'opération à un dossier particulier :

cd ~/GNU/www/DOSSIER
cvs diff | patch -R -p0

2. Synchroniser localement www-fr avec www en utilisant GNUN (ne pas oublier de se placer sur la branche adéquate) :

cd ~/GNU/www-fr
git checkout master
make sync


Inventaire des PO à mettre à jour[modifier]

  • À l'aide du script cvs-sync

Prérequis : cvs, git.

L'inventaire se fait dans la foulée de la synchronisation (voir plus haut).

  • À l'aide de GNUN (ne pas oublier de se placer sur la branche adéquate)

Prérequis : cvs, git, GNUN, GNUmakefile à la racine de www-fr.

cd ~/GNU/www-fr
git checkout master
make report


Mise à jour des PO[modifier]

Il est préférable de mettre les fichiers à jour dans www-fr (voir plus loin pourquoi).

On peut utiliser un éditeur de PO ou un éditeur de texte ordinaire (voir Outils de traduction 1e partie).

Pour faciliter la relecture, on peut convertir le fichier PO en HTML générique avec previewpo.pl. Une page web plus conforme à l'original peut être régénérée avec transvalid-po (voir plus loin).


Transvalidation (génération des pages HTML et validation)[modifier]

  • À l'aide de transvalid-po ou transvalid-batch

Le script transvalid-po permet de régénérer une page traduite à partir du PO et de la page originale ; de plus, il vérifie que les POs sont formatés correctement, actualise la date de révision et vérifie que la page traduite n'a pas d'erreur de validation XHTML. transvalid-batch fait la même chose sur une série de POs, par exemple l'ensemble des fichiers d'un commit. Une fois validés, les POs peuvent être commités dans le dépôt Git local. Les pages traduites sont enregistrées dans www-fr, mais on fait en sorte que Git les ignore (voir plus haut). L'arborescence www n'est pas modifiée.

Prérequis :

  1. po4a (qui dépend de gettext, perl, etc.), awk,
  2. xmllint (paquet Debian libxml2-utils),
  3. html5.dtd de gnun (dans le même répertoire que transvalid-po).

Si transvalid-po est dans le répertoire www-fr-scripts :

cd ~/GNU/www-fr-scripts
./transvalid-po
  • À l'aide d'une installation locale de GNUN

1. On met le fichier à valider DOCUMENT.fr.po dans le dossier ~/GNU/www/SECTION/po/. C'est faisable avec « make publish », mais alors tous les PO de www-fr seront reformatés et copiés dans www, même ceux qui ne sont pas encore prêts à être validés.

2. On se place dans le répertoire ~/GNU/www/server/gnun, et on demande à générer la page :

cd ~/GNU/www/server/gnun
make VALIDATE=yes ../../SECTION/DOCUMENT.fr.html

Et voilà, make dit s'il y a une erreur. On peut modifier ../../SECTION/po/DOCUMENT.fr.po et régénérer la page HTML, qu'on récupère dans ~/GNU/www/SECTION/.

Remarque. Il arrive fréquemment que le fichier POT soit régénéré au cours de la validation (voir le manuel de GNUN). Cela modifie également le fichier PO (ainsi que des fichiers intermédiaires) et perturbe les synchronisations ultérieures. Il est possible de supprimer les changements comme expliqué plus haut, mais il faut évidemment que le PO mis à jour soit sauvegardé ailleurs. Il est donc recommandé de faire les mises à jour dans www-fr et de ne valider qu'une copie. De même, la page DOCUMENT.fr.html régénérée doit être sauvegardée si l'on veut s'en servir pour la relecture.


Envoi dans le dépôt www-fr[modifier]

1. Ajouter des modifications ou de nouveaux fichiers à la branche master (indexation) :

cd ~/GNU/www-fr
git checkout master
git add fichier1 fichier2 ...

2. Enregistrer (commiter) les modifications dans le dépôt local (branche master) :

git commit -m "Message de commit" fichier1 fichier2 [...]

Les commits peuvent être regroupés logiquement, par exemple modifications d'un même type sur plusieurs fichiers.

3. Envoyer (pousser) les modifications sur le serveur :

git push

4. Éventuellement faire la liste des fichiers modifiés :

git diff --name-only master master^

5. Prévenir trad-gnu@april.org en joignant la liste des fichiers s'il y en a beaucoup.


Envoi dans le dépôt www (coordinateur.trice uniquement)[modifier]

www-commit peut envoyer successivement 3 groupes de POs correspondant aux 3 derniers commits dans www-fr, en commençant par le plus récent.

cd ~/GNU/www-fr-scripts
./www-commit