wiki:BasculeCCRTTGCC/Prestation_CCRT_TGCC

Version 13 (modified by aclsce, 12 years ago) (diff)

--

Prestation CCRT TGCC

Contexte

L'IPSL produit sur les machines de calcul du CCRT vectorielles et scalaires ainsi que sur les machines scalaires de l'IDRIS des simulations climatiques. Les données produites jusqu'alors par ces simulations étaient stockées sur le système de stockage du CCRT et /ou de l'IDRIS. L'écosystème du CCRT, qui va être intégré au TGCC, évolue et en particulier son système de stockage. C'est dans le contexte de changement de système de stockage que prend place la prestation " Evolution des outils de traitement et de synchronisation des données et audit de la chaîne de calcul de l’IPSL". Cette prestation comprend 3 parties (lots) :

  • Support sur les outils élémentaires de traitement des données
  • Synchronisation des fichiers d ’entrée des modèles entre les centres de calcul utilisés par l’IPSL
  • Audit et évaluation de la chaîne de calcul de l’IPSL

Réunions

Réunion de lancement - 13/06/2012 - LSCE

Les présentations faites lors de la réunion :

Réunion d'acceptation Lot 1 - lancement Lot 3 - 25/10/2012 - TGCC

Lot 1 : Support sur les outils élémentaires de traitement des données

Fait :

  • Prise en main de l’outil et des données sur le calculateur titane
  • Portage de l’outil sur Curie - passage en configuration réaliste
  • Validation/amélioration/tests de la robustesse
    • Gestion des pannes, reprises, gestion des erreurs
    • Commande d’information sur l’avancement (création de listes + traitement des données)
    • Outil de check données «avant» - «après» (fichiers netcdf)
  • Tests/amélioration des performances
    • Implémentation d’un parallélisme : soumission de plusieurs tâches en parallèles (utilisation d’un outil TGCC)
  • Portage IDRIS
  • Documentation : ​http://forge.ipsl.jussieu.fr/igcmg/attachment/wiki/BasculeCCRTTGCC/Prestation_CCRT_TGCC/Doc_outil_pack_IPSL_v2.pdf
  • Aide au démarrage de la migration (lien entre le TGCC et l’IPSL)

Documentation

Une documentation de l'outil de traitement des données développé par l'IPSL est disponible là : Doc_outil_pack_IPSL_v2.pdf​

Attachments (8)