Changes between Version 56 and Version 57 of PerformancesIPSLCM6


Ignore:
Timestamp:
10/05/16 12:08:46 (8 years ago)
Author:
mafoipsl
Comment:

--

Legend:

Unmodified
Added
Removed
Modified

  • PerformancesIPSLCM6

    v56 v57  
    66 
    77== Modifications == 
     8 * 5/10/2016 : simplifications et précisisons pour demandes DARI d'octobre 2016 
    89 * 18/3/2016 ajout informations ressources dédiées CMIP6 à l'IPSL 
    910 * 20/10/2015 : vérification des ressources IPSLCM6-VLR et IPSLCM6-LR et mise à jour doc technique. 
    … …  
    2021=== 2016 === 
    2122 
    22 Voir suivi consommation TGCC uniquement (temporaire): http://dods.ipsl.jussieu.fr/igcmg/ConsoGENCMIP6/ 
     23Voir suivi consommation IDRIS et TGCC là : https://vesg.ipsl.upmc.fr/thredds/fileServer/IPSLFS/igcmg/ConsoGENCI/index.html 
    2324 
    24 Voir suivi consommation IDRIS et TGCC là : http://dods.ipsl.jussieu.fr/igcmg/ConsoGENCI/ 
    25  
    26  * curie noeuds fins : 75 millions d'heures. Voir: [http://dods.ipsl.jussieu.fr/igcmg/ConsoGENCMIP6/ consommation, jobs et production de fichiers]. 
    27  * ada : 4 millions d'heures.  
     25 * curie noeuds fins : 60 millions d'heures. Voir: [https://vesg.ipsl.upmc.fr/thredds/fileServer/IPSLFS/igcmg/ConsoGENCMIP6/index.html consommation, jobs et production de fichiers]. 
     26 * ada : 6 millions d'heures.  
    2827 
    2928=== 2015 === 
    … …  
    3534  * 5 millions d'heures curie_nf et 270 To.  
    3635 
    37 == Ressources calcul disponibles en 2016 == 
     36== Ressources calcul disponibles en 2017 == 
    3837 
    3938 * Procédure nationale (tier 1)  : https://www.edari.fr/ 
    40   * Note de cadrage 2016 : http://www.genci.fr/sites/default/files/Courrier-cadrage-campagne-genci.pdf 
    41   * Date limite : entre le 2 et le 26 octobre 2015 
    42   * Session spéciale curie noeud fin, dossier spécial en novembre 2015 : 100 millions d'heures à consommer entre avril et août 2016 
     39  * Attention au changement de calendrieir et de procédure. 
     40  * Note de cadrage 2017 : http://www.genci.fr/sites/default/files/Courrier-cadrage-campagne-genci.pdf 
     41  * Date limite : entre le 3 et le 30 octobre 2016 
     42  * 2 sessions de 10 et 16 mois sur ada 
     43  * 1 session de 14 mois sur curie, en attendant l'arrivée de curie2 
    4344 
    4445|| '''Centre''' || '''Supercalculateurs'''  || '''Estimation des  ressources disponibles DARI 2016'''  || 
    … …  
    5758== Mésocentre IPSL == 
    5859 
    59 Nous avons fait apparaître le mésocentre IPSL dans la liste des méso-centres. Il s'agit de l'ensemble CICLAD+CLIMSERV que nous avons identifié ainsi. N'hésitez pas à le citer dans votre demande d'heures. Il suffit juste de le sélectionner dans la liste des mésocentres proposés sur le site WWW. 
     60Nous avons fait apparaître le mésocentre IPSL dans la liste des méso-centres. N'hésitez pas à le citer dans votre demande d'heures. Il suffit juste de le sélectionner dans la liste des mésocentres proposés sur le site WWW. 
    6061 
    6162== Mais aussi à l'UPMC/SU == 
    … …  
    6465 
    6566== Dossier technique == 
    66 Dossier technique pour les demandes d'heures 2016. Avec les performances IPSLCM6. Version 1 du 19/10/2015 : [attachment:DossierTechnique_2015_v1.pdf dossier technique IPSL en pdf ] et [attachment:DossierTechnique_2015_v1.doc dossier technique IPSL en doc] 
     67Dossier technique pour les demandes d'heures 2017. Avec les performances IPSLCM6. Version 1 du 5/10/2016 : [attachment:DossierTechnique_2015_v1.pdf dossier technique IPSL en pdf ] et [attachment:DossierTechnique_2015_v1.doc dossier technique IPSL en doc] 
    6768  
    6869 
    … …  
    7677 
    7778|| Configuration || Comment || || Océan || || || Atmosphère || || || || Nb OpenMP atm || Nb MPI atm ||  ||Nb MPI oce || ||Nb IO server || || Nb total de coeurs || 
    78 || IPSLCM6-VLR (idem IPSLCM5A-LR CMIP5) || MPI-OpenMP (idem IPSLCM5A-LR CMIP5) ||  182 || 142 || 31 || || 96 || 95|| 39 || || 4 || 32 || || 31 || || 1 || || 160 ||  
    79 || IPSLCM6-XLR  (idem IPSLCM5A-MR CMIP5, non supportée) || MPI-OpenMP ||  182 || 142 || 31 || || 144 || 142 || 39 || || 4 || 47 || || 31 || || 1 || || 220 ||  
    80 || IPSLCM6-LR || MPI-OpenMP (Nouvelle physique)||  362 || 292 || 75 || || 144 || 142|| 79 || || 8 || 47 || || 221 || || 1 || || 608 ||  
    81 || IPSLCM6-LR et aérosols interactifs || MPI-OpenMP  (Nouvelle physique) ||  362 || 292 || 75 || || 144 || 142|| 79 || || 8 || 47 || || 221 ||  || 1 || || 608 ||  
    82 || IPSLCM6-LR et chimie || MPI-OpenMP  (Nouvelle physique) ||  362 || 292 || 75 || || 144 || 142|| 39 || || 4 || 47 || || 67 ||  || 1 || || 256 ||  
    83 || IPSLCM6-MR || MPI-OpenMP  (Nouvelle physique) ||  362 || 292 || 75 || || 280 || 280|| 79 || || 8 || 92 || || 221 || || 1 || || 958 ||  
     79|| IPSLCM5A2 || MPI-OpenMP (idem IPSLCM5A-LR CMIP5) ||  182 || 142 || 31 || || 96 || 95|| 39 || || 8 || 32 || || 45 || || 1 || || 304 ||  
     80|| IPSLCM6-LR || MPI-OpenMP (Nouvelle physique)||  362 || 332 || 75 || || 144 || 142|| 79 || || 8 || 47 || || 180 || || 1 || || 560 ||  
     81|| IPSLCM6-LR et aérosols interactifs || MPI-OpenMP  (Nouvelle physique) ||  362 || 332 || 75 || || 144 || 142|| 79 || || 8 || 47 || || 180 ||  || 1 || || 560 ||  
     82|| IPSLCM6-LR et chimie || MPI-OpenMP  (Nouvelle physique) ||  362 || 332 || 75 || || 144 || 142|| 39 || || 4 || 47 || || 67 ||  || 1 || || 256 ||  
     83|| IPSLCM6-MR || MPI-OpenMP  (Nouvelle physique) ||  362 || 332 || 75 || || 280 || 280|| 79 || || 8 || 92 || || 221 || || 1 || || 958 ||  
    8484|| IPSLCM6-HR || MPI-OpenMP  (Nouvelle physique) ||  1442  || 1021 || 75 || || 280 || 280|| 79 || || 8 || 92 || || 592 || || 1 || || 1 328 ||  
    8585 
    … …  
    8787 
    8888|| Configuration || Commentaire || Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
    89 || '''IPSLCM6-VLR''' (idem IPSLCM5A-LR) || MPI-OpenMP ||  160 || 8h || '''1 300 h''' || 
     89|| '''IPSLCM5A2''' || MPI-OpenMP ||  304 || 6h || '''2 500 h''' || 
    9090|| IPSLCM6-VLR-CHT(idem IPSLCM5CHT-LR) || MPI-OpenMP ||  128 || 25h || 3200 h || 
    91 || IPSLCM6-XLR (idem IPSLCM5A-MR)  || MPI-OpenMP ||  208 || 15h || 3 200 h (estimation) || 
    92 || '''IPSLCM6-LR''' || MPI-OpenMP ||   608 || 43 h || '''28 750 h''' || 
     91|| '''IPSLCM6-LR''' || MPI-OpenMP ||   560 || 44 h || '''27 000 h''' || 
    9392|| IPSLCM6-LR et aérosols interactifs  || MPI-OpenMP ||   443 || 80 h || 35 440 h (estimation) || 
    9493|| IPSLCM6-LR et chimie || MPI-OpenMP ||   256 || 200 h || 51 200 h (estimation) || 
    … …  
    104103 
    105104|| Configuration || Commentaire ||Océan || || || Atmosphère || || || Facteur multiplicatif fichiers atm  3D || atm 2D || Facteur multiplicatif fichiers océan  3D || océan 2D || 
    106 || IPSLCM5A || MPI seul || 182 || 142 || 31 || 96 || 95|| 39 || 1 || 1 || 1 || 1 || 
     105|| IPSLCM5A2 || MPI seul || 182 || 142 || 31 || 96 || 95|| 39 || 1 || 1 || 1 || 1 || 
    107106|| IPSLCM6-VLR (idem IPSLCM5A-LR) || MPI-OpenMP ||  182 || 142 || 31 || 96 || 95|| 39 || 1 || 1 || 1 || 1 || 
    108 || IPSLCM6-XLR (idem IPSLCM5A-MR) || MPI-OpenMP ||  182 || 142 || 31 || 144 || 142|| 39 || 2,2 || 2,2 || 1 || 1 || 
    109107|| IPSLCM6-LR || MPI-OpenMP ||  362 || 292 || 75 || 144 || 142|| 79 || 4,5 || 2,2 || 10 || 4  ||  
    110108|| IPSLCM6-LR et aérosols interactifs  || MPI-OpenMP ||  362 || 292 || 75 || 144 || 142 || 39 || 2,2 et aérosols  || 2,2 et aérosols|| 10 || 4  ||  
    … …  
    124122 *  Il faut bien préciser les besoins, en particulier en production : 
    125123   * Pour faire de la '''production''', il faut enchaîner les jobs de calcul. Le calcul de priorité actuel tient compte des heures déjà consommées, autrement dit plus on a consommé, plus on attendra avant de rentrer en exécution. Ceci rend impossible la production basée sur l'enchaînement de jobs lancés les uns par les autres lorsque le projet est 'en avance' dans sa consommation (ccc_myproject).  
    126  * Une demande collective unique d'extension du nombre d'inodes IPSL sera faite fin 2015. A suivre. 
    127    * Pour avoir plus de quotas sur CCCSTOREDIR, il faut avoir un bon score ( noté sur 20 : 13/20 dans l'exemple) pour les obtenir. De plus, toute dérogation a une date limite. 15/1/2016 pour la plupart. Attention à être inclus dans la demande d'extension inodes IPSL annuelle. 
     124 * Une demande collective unique d'extension du nombre d'inodes IPSL sera faite fin 2016. A suivre. 
     125   * Pour avoir plus de quotas sur CCCSTOREDIR, il faut avoir un bon score ( noté sur 20 : 13/20 dans l'exemple) pour les obtenir. De plus, toute dérogation a une date limite. 31/1/2017 pour la plupart. Attention à être inclus dans la demande d'extension inodes IPSL annuelle. 
    128126   * ccc_quota vous donne votre occupation sur les différents espaces, en espace et en nombre d'inodes. 
    129127{{{ 
    … …  
    154152 
    155153=== CINES Bull occigen === 
    156 Il est possible de demander des heures en 2016 sur cette machine. La chaîne complète ne sera pas portée mais il est possible de compiler les modèles IPSL sur occigen. 
     154Il est possible de demander des heures en 2017 sur cette machine. La chaîne complète ne sera pas portée mais il est possible de compiler les modèles IPSL sur occigen. 
    157155A savoir : 
    158  * peu d'expérience des serveurs de fichiers du CINES à ce jour. Plus d'informations dès que possible. 
     156 * peu d'expérience des serveurs de fichiers du CINES à ce jour. 
    159157 * un datanode ESGF existe au CINES 
    160158