Changes between Version 32 and Version 33 of PerformancesIPSLCM6


Ignore:
Timestamp:
10/05/15 19:11:29 (9 years ago)
Author:
mafoipsl
Comment:

--

Legend:

Unmodified
Added
Removed
Modified

  • PerformancesIPSLCM6

    v32 v33  
    66 
    77== Modifications == 
     8 * 5/10/2015 : Resosurces disponibles en 2015 
    89 * 7/10/2014 :  
    910  * modification chiffrage IPSLCM6-VLR 
    … …  
    1314 
    1415 * Procédure nationale (tier 1)  : https://www.edari.fr/ 
    15   * Note de cadrage 2015 : https://www.edari.fr/information_campagne.html 
    16   * Date limite : entre le 16 septembre et le 18 octobre 2014 
    17   * Nouveauté : occigen au CINES ou 50 000 coeurs Bull. Voir : https://www.cines.fr/occigen-le-nouveau-supercalculateur/ 
    18  * Procédure Prace européenne  (tier 0, curie et 6 autres machines) : http://www.prace-ri.eu/PRACE-Project-Access 
    19    * Date limite : dossier à faire entre le 10 septembre et le 22 octobre 2014 pour allocations en mars 2015 
    20  * Exposé sur les ressources disponibles en 2015, fait au LMD le 15/9/2014, au LSCE le 22/9 et à LOCEAN le 24/9 : [attachment:Ressources-calcul-sept2014.pdf slides] 
     16  * Note de cadrage 2016 : http://www.genci.fr/sites/default/files/Courrier-cadrage-campagne-genci.pdf 
     17  * Date limite : entre le 2 et le 26 octobre 2015 
     18  * Session spéciale curie noeud fin, dossier spécial en novembre 2015 : 100 millions d'heures à consommer entre avril et août 2016 
    2119 
     20|| '''Centre''' || '''Supercalculateurs'''  || '''Estimation des  ressources disponibles DARI 2016'''  || 
     21|| '''CINES'''  || Bull - Occigen  || 245 000 000 || 
     22|| '''IDRIS''' || IBM Noeuds larges - Ada  || 52 000 000 || 
     23|| || IBM BG/Q - Turing  || 530 000 000 || 
     24|| '''TGCC''' || Bull - Curie nœuds fins  || 200 000 000 || 
    2225 
    23 || '''Centre''' || '''Supercalculateurs'''  || '''Estimation des  ressources disponibles DARI 2015''' (tier 1) ||  Prace (tier 0)  || 
    24 || '''CINES'''  || Bull - Occigen  || 233 000 000 || - || 
    25 || '''IDRIS''' || IBM Noeuds larges - Ada  || 53 100 000 || - || 
    26 || || IBM BG/Q - Turing  || 345 560 000 || - || 
    27 || '''TGCC''' || Bull - Curie nœuds  larges  || 10 880 000  || 28 000 000 || 
    28 || || Bull - Curie nœuds fins  || 67 420 000 || 201 000 000 || 
    29 || || Bull - Curie nœuds hybrides GPU || 294 000 || 600 000 || 
    3026 
    3127== Projet 0826 == 
    … …  
    4945Les 3 machines ada (IDRIS), curie (TGCC) et occigen (CINES) ont presque les mêmes performances. Par souci de simplicité on donne un seul tableau de performances. Voir plus loin les spécificités des centres. 
    5046 
    51 ==== IPSLCM5A-LR ==== 
    52  
    53 Pour mémoire, IPSLCM5A-LR sur ada l'an dernier. 
    54  
    55 '''Mesure consommation 10 ans pour résolution 96x95x39 - ORCA2''' 
    56 || machine || Nb CPU || Temps réel/mois || Temps réel || Temps à demander || 
    57 || ada || 32 (5 océan + 26 atmosphère + 1 coupleur) || 1000 s || 36 h  ||  36x32 = 1 200h || 
    58  
    5947== IPSLCM6 == 
    6048 
    … …  
    6250 
    6351|| Configuration || Comment || || Océan || || || Atmosphère || || || || Nb OpenMP atm || Nb MPI atm ||  ||Nb MPI oce || ||Nb IO server || || Nb total de coeurs || 
    64 || IPSLCM5A || MPI seul (CMIP5) || 182 || 142 || 31 || || 96 || 95|| 39 ||  || 1 || 26 || || 5 || || || || 32 || 
    65 || IPSLCM6-VLR (idem IPSLCM5A-LR CMIP5) || MPI-OpenMP (idem IPSLCM5A-LR CMIP5) ||  182 || 142 || 31 || || 96 || 95|| 39 || || 4 || 27 || || 19 || || 1 || || 128 ||  
     52|| IPSLCM6-VLR (idem IPSLCM5A-LR CMIP5) || MPI-OpenMP (idem IPSLCM5A-LR CMIP5) ||  182 || 142 || 31 || || 96 || 95|| 39 || || 4 || 27 || || 19 || || 1 || || 160 ||  
    6653|| IPSLCM6-XLR  (idem IPSLCM5A-MR CMIP5, non supportée) || MPI-OpenMP ||  182 || 142 || 31 || || 144 || 142 || 39 || || 4 || 47 || || 19 || || 1 || || 208 ||  
    6754|| IPSLCM6-LR || MPI-OpenMP (Nouvelle physique)||  362 || 292 || 75 || || 144 || 142|| 79 || || 8 || 47 || || 67 || || 1 || || 443 ||  
    … …  
    7461 
    7562|| Configuration || Commentaire || Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
    76 || IPSLCM5A || MPI seul ||  32 || 36h || 1 000 h || 
    7763|| IPSLCM6-VLR (idem IPSLCM5A-LR) || MPI-OpenMP ||  128 || 10h || 1 300 h || 
    7864|| IPSLCM6-VLR-CHT(idem IPSLCM5CHT-LR) || MPI-OpenMP ||  128 || 25h || 3200 h || 
    … …  
    10793 *  Il faut bien préciser les besoins, en particulier en production : 
    10894   * Pour faire de la '''production''', il faut enchaîner les jobs de calcul. Le calcul de priorité actuel tient compte des heures déjà consommées, autrement dit plus on a consommé, plus on attendra avant de rentrer en exécution. Ceci rend impossible la production basée sur l'enchaînement de jobs lancés les uns par les autres lorsque le projet est 'en avance' dans sa consommation (ccc_myproject).  
    109  * Une demande collective unique d'extension du nombre d'inodes IPSL sera faite fin 2014. A suivre. 
    110    * Pour avoir plus de quotas sur CCCSTOREDIR, il faut avoir un bon score ( noté sur 20 : 13/20 dans l'exemple) pour les obtenir. De plus, toute dérogation a une date limite. 15/1/2015 pour la plupart. Attention à être inclus dans la demande d'extension inodes IPSL annuelle. 
     95 * Une demande collective unique d'extension du nombre d'inodes IPSL sera faite fin 2015. A suivre. 
     96   * Pour avoir plus de quotas sur CCCSTOREDIR, il faut avoir un bon score ( noté sur 20 : 13/20 dans l'exemple) pour les obtenir. De plus, toute dérogation a une date limite. 15/1/2016 pour la plupart. Attention à être inclus dans la demande d'extension inodes IPSL annuelle. 
    11197   * ccc_quota vous donne votre occupation sur les différents espaces, en espace et en nombre d'inodes. 
    11298{{{ 
    … …  
    131117 
    132118 
    133 ==== noeuds larges  : post-traitement ==== 
     119==== post-traitement sur noeuds fins aussi ==== 
    134120 
    135  * Dans la chaîne IPSL, les post-traitements se font sur curie noeuds xlarge. Il faut donc demander des heures sur noeuds xlarge pour le post-traitement et sur noeuds fins pour les calculs. On conseille de demander 10 % du nombre d'heures demandées sur noeuds xlarge.  
    136  * Depuis septembre 2014, il semble que les noeuds xlarge soient très demandés. On conseille donc de demander 10% sur xlarge pour les post-traitements et 10% sur noeuds fins pour ces mêmes post-traitements pour avoir de la souplesse pendant l'année. 
     121 * Dans la chaîne IPSL, les post-traitements se feront sur curie noeuds fins. Il faut donc demander quelques heures en plus (10%)  pour le post-traitement sur noeuds fins.  
    137122 
    138123==== noeuds fins  : calculs ==== 
    … …  
    142127 
    143128=== CINES Bull occigen === 
    144 Il est possible de demander des heures en 2015 sur cette machine. En cours, 3 actions : 
    145  * portage de la chaîne IPSL 
    146  * 2 grands challenges soumis avec WRF/NEMO et DYNAMICO (saturne). En attente de l'accord éventuel. 
     129Il est possible de demander des heures en 2016 sur cette machine. La chaîne complète ne sera pas porté mais il est possible de compiler les modèles IPSL sur occigen. 
    147130A savoir : 
    148131 * peu d'expérience des serveurs de fichiers du CINES à ce jour. Plus d'informations dès que possible.