Changes between Version 191 and Version 192 of PerformancesIPSLCM6


Ignore:
Timestamp:
01/10/19 14:23:41 (5 years ago)
Author:
mafoipsl
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • PerformancesIPSLCM6

    v191 v192  
    44 
    55== Dernière modifications== 
    6  * Préparation appel A56: date limite 7 février 2019 11h  
     6 * Préparation appel A6: date limite 7 février 2019 11h  
    77   * Ressources disponibles 
    88   * Performances des configurations IPSL sur irene  
     
    4848 
    4949 
     50== Performances janvier 2019 sur irene == 
     51 
     52=== Tableau des performances  NEMO  sur Irene  === 
     53 
     54|| Configuration   || Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
     55|| '''eORCA1-LIM3-PISCES''' ||   433 ( 432 nemo + 1 xios ) || 12 h || '''5 200 h'''|| 
     56|| '''eORCA025-LIM3''' || 1 302 ( 1 295 nemo + 7 xios ) || 40 h || '''52100 h'''|| 
     57|| '''eORCA025-LIM3-PISCES''' || 1 302 ( 1 295 nemo + 7 xios ) || 130 h || '''170000 h'''|| 
     58|| '''eORCA025-LIM3-PISCES-CRS''' || 860 ( 853 nemo + 7 xios ) || 84 h || '''73 000 h'''|| 
     59 
     60=== Tableau des performances IPSLCM5A2 === 
     61 
     62IPSLCM5A2:  chiffrages  fournis par Pierre Sepulchre, 25 juillet 2018. 
     63 
     64|| Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
     65|| '''IPSLCM5A2'''  ||  32x8 (LMDZ) + 60 (NEMO) +1 = 317 soit 7 noeuds 336 coeurs || 3.09 h|| '''1 040 h'''|| 
     66 
     67=== Tableau des performances IPSLCM6-LR === 
     68 
     69Mesures janvier 2019 : 
     70 
     71|| Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || Commentaire  || 
     72|| '''IPSL-CM6.1.8-LR'''  ||   960 || 18 h || '''18 000 h''' ||  avec workflow CMIP6, 5 000 s par an avec une marge || 
     73 
     74A noter : l'équilibrage des charges sur Irene est excellent. Il est obtenu avec la même configuration que sur curie : 71 tâches MPI et 8 OpenMP pour LMDZ, 360 tâches MPI pour NEMO et 12 tâches pour XIOS. 
     75 
     76=== Tableau des performances IPSLCM6-MR1  : LMDZ 256x256x79-eORCA1 === 
     77 
     78|| Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || Commentaire  || 
     79|| '''IPSL-CM6.1.8-MR1'''  ||   1 200 || 27 h || '''32 000 h''' ||  avec sorties très limitées, 9 500 s par an avec une marge || 
     80 
     81A noter : ceci est obtenu avec  : 128 tâches MPI et 8 OpenMP pour LMDZ, 171 tâches MPI pour NEMO et 1 tâche pour XIOS. 
     82 
     83=== Tableau des performances IPSLCM6-HR atmosphère seule === 
     84 
     85Mesures issues de HighResMIP, avec Workflow CMIP6. 
     86 
     87|| Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || Commentaire  || 
     88|| '''CM6.1-ATM-H'''  ||   2 512 (180*12 + 44*8)  || 75 h || '''200 000 h''' ||  avec workflow CMIP6, mesuré sur la simulation CM6.1-ATM-HR-highresSST-present.4 || 
     89 
     90=== Tableau des performances LMDZORINCA_v6 ===  
     91Les informations sont disponibles [http://forge.ipsl.jussieu.fr/inca/wiki/INCAperformances#Mise%C3%A0jourjuillet2018 ici] 
     92 
     93=== Tableau des performances ORCHIDEE offline sur Irene  === 
     94 
     95|| Configuration   || Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
     96|| '''Offline historique, forçage 2 degree global'''   ||   32 ( 31 orchidee + 1 xios ) ||  1h || '''32h'''|| 
     97|| '''Offline historique, forçage 0.5 degree global''' ||   64 ( 63 orchidee + 1 xios ) ||  7h || '''450h'''|| 
     98 
     99=== Document technique 2019 === 
     100 
     101Voir là le dossier technique '''mis à jour le 10/1/2019 pour inclure IPSLCM6-LR en production sur Irene''' :  [attachment:DossierTechnique_2019.pdf dossier technique IPSL en pdf ] et [attachment:DossierTechnique_2019.doc dossier technique IPSL en doc] 
     102 
     103 
     104=== Logiciels demandés  === 
     105 Documents 2017 toujours valables  
     106 * [attachment:Logiciels-curie-2017.pdf logiciels demandés sur curie et sur irene ] 
     107 * [attachment:Logiciels-ada-2017.pdf logiciels demandés sur ada ] 
     108 
     109== Pour ada == 
     110 
     111'''Les performances reprises ici sont celles de 2017 valables pour ada!''' 
     112 
     113|| Configuration ||  Océan || || || || Atmosphère || || || || Nb OpenMP atm || Nb MPI atm ||  ||Nb MPI oce || ||Nb IO server || || Nb total de coeurs || Commentaire || 
     114|| IPSL-CM6.0.10-LR  ||  362 || 332 || 75 || || 144 || 143 || 79 || || 8 || 71 || || 480 || || 1 || || (1 049) 1 056 || Mesuré || 
     115|| IPSL-CM6-MR/eORCA1  ||  362 || 332 || 75 || || 256 || 256 || 79 || || 8 || 128 || || 220 || || 1 || || (1 245) 1 248  || Mesure août 2017 sur ada|| 
     116|| IPSL-CM6-MR/eORCA025 || 1442   || 1207 || 75 || || 256 || 256 || 79 || || 8 ||128 || ||  1295 || || 1 || || 1 024  + 1 295 = 1645  || Estimation 2017 || 
     117|| IPSL-CM6-HR  / atmosphère seule ||   ||  || || || 512 || 360|| 79 || || 8 ||180 || || || || 1 || || 1 441 (1 472)  || Estimation 2017 || 
     118 
     119=== Tableau des performances  IPSL-CM6 === 
     120 
     121|| Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || Commentaire || 
     122|| '''IPSL-CM6.0.10-LR'''  ||   1 056 || 19 h || '''21 500 h''' || Mesuré sur CM6010.2-LR-pdCtrl-01, +5% post-traitement inclus || 
     123|| IPSL-CM6-MR/eORCA1  ||  1 248 || 42 h || 55 000 h  || Mesure sur ada inclus +5% post-traitement ||  
     124|| IPSL-CM6-MR/eORCA025  ||  1 648 || 140 h || 238 000 h  || Estimation 2017 ||  
     125|| IPSL-CM6-HR /atmosphère seule ||  1 472 || 100 h || 155 000 h || Estimation 2017 || 
     126 
     127Sans oublier IPSLCM5A2, chiffrage pour tenir compte des pas de temps réduits pour paléo (2 mn pour dynamique LMDZ et 1h20 pour NEMO) : 
     128|| Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
     129|| '''IPSLCM5A2'''  ||  304 || 5.9 h || '''1 800 h''' || 
     130 
     131 
     132=== Tableau des performances  LMDZOR_v6 === 
     133 
     134|| Configuration    || Résolution || Nb total de coeurs || Nb coeurs facture || Temps réel pour 10 ans || '''Temps à demander pour 10 ans ''' || Comment || 
     135|| '''LMDZOR_v6'''  || 144x142x79 || 569 (71 mpi*8omp gcm) +1mpi xios  || 576 || 17 h                  || 11 000 h    || Revu avec temps type IPSLCM6.0.10, ajouter 5% pour simulation guidé || 
     136|| '''LMDZOR_v6'''  || 256x256x79 || 1 024 (124mpi*8omp gcm) +1mpi xios ||     || 34 h                  || 40 000 h    || Mesure sur ada inclus +5% post-traitement || 
     137 
     138=== Tableau des performances LMDZORINCA_v6 ===  
     139|| Configuration    || Résolution || Nb total de coeurs || Nb coeurs facture || Temps réel pour 10 ans || '''Temps à demander pour 10 ans ''' || Comment || 
     140|| '''LMDZORINCA_v6  AER''' || 144x142x79 || 377 (47mpi*8omp gcm) + 1 mpi xios || 384 || 87h || 34 000 h  || temps calculé avec LMDZORINCA_v6.0.11 ||  
     141|| '''LMDZORINCA_v6 NMHC_AER''' || 96x95x39 || 129 (32mpi*4 omp gcm) + 1 mpi xios || 144 || 51h || 7 500  h || temps calculé avec LMDZORINCA_v6.0.11 || 
     142 
     143 
     144=== Tableau des performances  NEMO  === 
     145 
     146|| Configuration   || Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
     147|| '''eORCA1-LIM3-PISCES''' ||   512 ( 496 nemo + 16 xios ) || 14 h || '''7 200 h''' || 
     148|| '''eORCA1-OFF-PISCES'''  ||   498 ( 496 nemo +   2 xios ) ||   4 h || '''2 000 h''' || 
     149 
     150=== Tableau des performances DYNAMICO === 
     151 
     152 
     153 
    50154== Demandes d'heures A5 : date limite 22 août 2018 11h == 
    51155 
     
    69173 
    70174L’appel à projets pour l’allocation A6 sera ouvert dans 6 mois pour une allocation à partir de mai 2019. 
    71  
    72 == Performances janvier 2019 sur irene == 
    73  
    74 === Tableau des performances  NEMO  sur Irene  === 
    75  
    76 || Configuration   || Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
    77 || '''eORCA1-LIM3-PISCES''' ||   433 ( 432 nemo + 1 xios ) || 12 h || '''5 200 h'''|| 
    78 || '''eORCA025-LIM3''' || 1 302 ( 1 295 nemo + 7 xios ) || 40 h || '''52100 h'''|| 
    79 || '''eORCA025-LIM3-PISCES''' || 1 302 ( 1 295 nemo + 7 xios ) || 130 h || '''170000 h'''|| 
    80 || '''eORCA025-LIM3-PISCES-CRS''' || 860 ( 853 nemo + 7 xios ) || 84 h || '''73 000 h'''|| 
    81  
    82 === Tableau des performances IPSLCM5A2 === 
    83  
    84 IPSLCM5A2:  chiffrages  fournis par Pierre Sepulchre, 25 juillet 2018. 
    85  
    86 || Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
    87 || '''IPSLCM5A2'''  ||  32x8 (LMDZ) + 60 (NEMO) +1 = 317 soit 7 noeuds 336 coeurs || 3.09 h|| '''1 040 h'''|| 
    88  
    89 === Tableau des performances IPSLCM6-LR === 
    90  
    91 Mesures janvier 2019 : 
    92  
    93 || Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || Commentaire  || 
    94 || '''IPSL-CM6.1.8-LR'''  ||   960 || 18 h || '''18 000 h''' ||  avec workflow CMIP6, 5 000 s par an avec une marge || 
    95  
    96 A noter : l'équilibrage des charges sur Irene est excellent. Il est obtenu avec la même configuration que sur curie : 71 tâches MPI et 8 OpenMP pour LMDZ, 360 tâches MPI pour NEMO et 12 tâches pour XIOS. 
    97  
    98 === Tableau des performances IPSLCM6-MR1  : LMDZ 256x256x79-eORCA1 === 
    99  
    100 || Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || Commentaire  || 
    101 || '''IPSL-CM6.1.8-MR1'''  ||   1 200 || 27 h || '''32 000 h''' ||  avec sorties très limitées, 9 500 s par an avec une marge || 
    102  
    103 A noter : ceci est obtenu avec  : 128 tâches MPI et 8 OpenMP pour LMDZ, 171 tâches MPI pour NEMO et 1 tâche pour XIOS. 
    104  
    105 === Tableau des performances IPSLCM6-HR atmosphère seule === 
    106  
    107 Mesures issues de HighResMIP, avec Workflow CMIP6. 
    108  
    109 || Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || Commentaire  || 
    110 || '''CM6.1-ATM-H'''  ||   2 512 (180*12 + 44*8)  || 75 h || '''200 000 h''' ||  avec workflow CMIP6, mesuré sur la simulation CM6.1-ATM-HR-highresSST-present.4 || 
    111  
    112 === Tableau des performances LMDZORINCA_v6 ===  
    113 Les informations sont disponibles [http://forge.ipsl.jussieu.fr/inca/wiki/INCAperformances#Mise%C3%A0jourjuillet2018 ici] 
    114  
    115 === Tableau des performances ORCHIDEE offline sur Irene  === 
    116  
    117 || Configuration   || Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
    118 || '''Offline historique, forçage 2 degree global'''   ||   32 ( 31 orchidee + 1 xios ) ||  1h || '''32h'''|| 
    119 || '''Offline historique, forçage 0.5 degree global''' ||   64 ( 63 orchidee + 1 xios ) ||  7h || '''450h'''|| 
    120  
    121 === Document technique 2018 === 
    122  
    123 Voir là le dossier technique '''mis à jour le 10/8/2018 pour inclure IPSLCM6-LR sur Irene et l'étude des coûts calcul/équilibrage sur Curie et Irene''' : [attachment:DossierTechnique_2018_v3.pdf dossier technique IPSL en pdf ] et [attachment:DossierTechnique_2018_v3.doc dossier technique IPSL en doc] 
    124  
    125  
    126 === Logiciels demandés  === 
    127  Documents 2017 toujours valables  
    128  * [attachment:Logiciels-curie-2017.pdf logiciels demandés sur curie et sur irene ] 
    129  * [attachment:Logiciels-ada-2017.pdf logiciels demandés sur ada ] 
    130  
    131 == Pour ada == 
    132  
    133 '''Les performances reprises ici sont celles de 2017 valables pour ada!''' 
    134  
    135 || Configuration ||  Océan || || || || Atmosphère || || || || Nb OpenMP atm || Nb MPI atm ||  ||Nb MPI oce || ||Nb IO server || || Nb total de coeurs || Commentaire || 
    136 || IPSL-CM6.0.10-LR  ||  362 || 332 || 75 || || 144 || 143 || 79 || || 8 || 71 || || 480 || || 1 || || (1 049) 1 056 || Mesuré || 
    137 || IPSL-CM6-MR/eORCA1  ||  362 || 332 || 75 || || 256 || 256 || 79 || || 8 || 128 || || 220 || || 1 || || (1 245) 1 248  || Mesure août 2017 sur ada|| 
    138 || IPSL-CM6-MR/eORCA025 || 1442   || 1207 || 75 || || 256 || 256 || 79 || || 8 ||128 || ||  1295 || || 1 || || 1 024  + 1 295 = 1645  || Estimation 2017 || 
    139 || IPSL-CM6-HR  / atmosphère seule ||   ||  || || || 512 || 360|| 79 || || 8 ||180 || || || || 1 || || 1 441 (1 472)  || Estimation 2017 || 
    140  
    141 === Tableau des performances  IPSL-CM6 === 
    142  
    143 || Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || Commentaire || 
    144 || '''IPSL-CM6.0.10-LR'''  ||   1 056 || 19 h || '''21 500 h''' || Mesuré sur CM6010.2-LR-pdCtrl-01, +5% post-traitement inclus || 
    145 || IPSL-CM6-MR/eORCA1  ||  1 248 || 42 h || 55 000 h  || Mesure sur ada inclus +5% post-traitement ||  
    146 || IPSL-CM6-MR/eORCA025  ||  1 648 || 140 h || 238 000 h  || Estimation 2017 ||  
    147 || IPSL-CM6-HR /atmosphère seule ||  1 472 || 100 h || 155 000 h || Estimation 2017 || 
    148  
    149 Sans oublier IPSLCM5A2, chiffrage pour tenir compte des pas de temps réduits pour paléo (2 mn pour dynamique LMDZ et 1h20 pour NEMO) : 
    150 || Configuration ||  Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
    151 || '''IPSLCM5A2'''  ||  304 || 5.9 h || '''1 800 h''' || 
    152  
    153  
    154 === Tableau des performances  LMDZOR_v6 === 
    155  
    156 || Configuration    || Résolution || Nb total de coeurs || Nb coeurs facture || Temps réel pour 10 ans || '''Temps à demander pour 10 ans ''' || Comment || 
    157 || '''LMDZOR_v6'''  || 144x142x79 || 569 (71 mpi*8omp gcm) +1mpi xios  || 576 || 17 h                  || 11 000 h    || Revu avec temps type IPSLCM6.0.10, ajouter 5% pour simulation guidé || 
    158 || '''LMDZOR_v6'''  || 256x256x79 || 1 024 (124mpi*8omp gcm) +1mpi xios ||     || 34 h                  || 40 000 h    || Mesure sur ada inclus +5% post-traitement || 
    159  
    160 === Tableau des performances LMDZORINCA_v6 ===  
    161 || Configuration    || Résolution || Nb total de coeurs || Nb coeurs facture || Temps réel pour 10 ans || '''Temps à demander pour 10 ans ''' || Comment || 
    162 || '''LMDZORINCA_v6  AER''' || 144x142x79 || 377 (47mpi*8omp gcm) + 1 mpi xios || 384 || 87h || 34 000 h  || temps calculé avec LMDZORINCA_v6.0.11 ||  
    163 || '''LMDZORINCA_v6 NMHC_AER''' || 96x95x39 || 129 (32mpi*4 omp gcm) + 1 mpi xios || 144 || 51h || 7 500  h || temps calculé avec LMDZORINCA_v6.0.11 || 
    164  
    165  
    166 === Tableau des performances  NEMO  === 
    167  
    168 || Configuration   || Nb total de coeurs || Temps réel pour 10 ans || '''Temps à demander pour 10 ans''' || 
    169 || '''eORCA1-LIM3-PISCES''' ||   512 ( 496 nemo + 16 xios ) || 14 h || '''7 200 h''' || 
    170 || '''eORCA1-OFF-PISCES'''  ||   498 ( 496 nemo +   2 xios ) ||   4 h || '''2 000 h''' || 
    171  
    172 === Tableau des performances DYNAMICO === 
    173  
    174175 
    175176== Argumentaire pour une allocation dédiée pour fin 2018-2019-2020-2021 ==