General directives for migration/fr: Difference between revisions

Cette page traite des problèmes reliés au transfert de vos données entre nos équipements et ceux de nos partenaires régionaux.  

Si vous avez besoin de conseils ou d'information supplémentaire, contactez le [[Technical support/fr|soutien technique]].

==En préparation à la migration==

Vérifiez si la migration de vos données doit être effectuée par vous-même ou par notre équipe technique. Pour toute question, contactez le [[Technical support/fr|soutien technique]].

La migration des données se fait à l'aide de [[Globus]]; si vous ne connaissez pas encore ce service, informez-vous de son fonctionnement et assurez-vous qu'il est compatible avec votre système. Pour garantir l'intégrité de vos données, testez le fonctionnement des outils qui seront utilisés sur des données de test; ces outils sont, par exemple [http://www.howtogeek.com/248780/how-to-compress-and-extract-files-using-the-tar-command-on-linux/ tar], [https://www.gnu.org/software/gzip/manual/gzip.html gzip] ou [https://www.cyberciti.biz/faq/how-to-create-a-zip-file-in-unix/ zip].  

Commencez le processus de migration le plus tôt possible. Le temps de migration peut être augmenté en raison de la quantité de données à migrer et de la charge de traitement exigée des ordinateurs ou du réseau. Le transfert de centaines de gigaoctets prendra plusieurs heures, mais prévoyez une journée complète en cas de difficulté. Le transfert de téraoctets nécessitera quelques jours.

=== Élagage de vos fichiers===  

Peu d'entre nous avons adopté comme pratique l'inspection régulière de nos données pour en supprimer les éléments superflus. À l'occasion d'une opération majeure de migration, il importe de procéder au nettoyage de vos répertoires et de vos fichiers. Le temps de transfert est diminué d'autant et l'espace de stockage, denrée en grande demande, est ainsi mieux utilisé.

L'une ou l'autre des commandes <code>make clean</code>, <code>make realclean</code>, ou <code>rm *.o</code> pourrait être utile, selon votre fichier [[Make|makefile]].

* Si vous ignorez l'utilité de gros fichiers portant des noms comme <code>core.12345</code>, il s'agit probablement de fichiers de vidange [https://en.wikipedia.org/wiki/Core_dump (core dumps)] qui peuvent être supprimés.

=== Archivage et compression ===  

La plupart des applications de transfert de données déplacent plus efficacement un seul gros fichier que plusieurs petits fichiers dont le total serait équivalent. Si vos répertoires ou arborescences de fichiers comprennent un grand nombre de petits fichiers, combinez-les pour archivage en utilisant [[Archiving and compressing files|tar]].

Dans certains cas, il peut être avantageux de compresser les gros fichiers; c'est le cas par exemple de fichiers texte, dont la taille est souvent considérablement réduite par l'opération de compression. Il n'y a cependant pas toujours un gain de temps significatif à compresser un fichier qui sera décompressé à son arrivée. Il faut considérer les points suivants : l'espace gagné par la compression du fichier, la durée du temps de compression et la disponibilité de la bande passante. Ces points sont discutés dans la section ''Data Compression and transfer discussion'' de [https://bluewaters.ncsa.illinois.edu/data-transfer-doc cette page web] produite par le US National Center for Supercomputing Applications.

Si vous estimez que la compression est avantageuse, utilisez [[Archiving and compressing files|tar]]  ou [https://www.gnu.org/software/gzip/manual/gzip.html gzip].

=== Élimination des doublons ===

</div>

==Après la migration==

Si vous n'avez pas utilisé Globus ou si vous n'avez pas sélectionné l'option ''verify file integrity'', assurez-vous que les données transférées ne sont pas corrompues. Un moyen simple est de comparer la taille des fichiers de départ à la taille des fichiers à destination. Pour un examen plus poussé, utilisez  [http://man7.org/linux/man-pages/man1/cksum.1.html cksum] et [http://man7.org/linux/man-pages/man1/md5sum.1.html md5sum] avec les fichiers source et les fichiers d'arrivée et comparez les résultats. Les fichiers dont la taille ou le checksum ne concordent pas devraient être transférés à nouveau.

== Soutien technique ==

* Pour savoir comment utiliser les utilitaires d'archivage et de compression, utilisez la commande Linux  <code>man <command></code> or <code><command> --help</code>.

* Contactez le [[Technical support/fr|soutien technique]].