Performances IPSLCM5A

2012

Mise à jour en mai 2012 des performances titane et curie.

Ressources disponibles

/!\ Plus de vectoriel : ni Brodie (IDRIS) ni Mercure SX-8R (CCRT)

Centre	Supercalculateurs	Estimation des ressources disponibles DARI 2012 - 1ère session	Estimation des ressources disponibles DARI 2012 - 2ème session
CINES	IBM Power7 - Yoda	920 300	-
	SGI ICE - Jade	111 055 000	28 000 000
IDRIS	IBM SP – Vargas	18 288 000	0
	IBM BG/P - Babel	198 956 000	50 000 000
CCRT	Bull Xéon – Titane	33 064 000	4 000 000
	Bull Xéon – Titane noeuds hybrides GPU	920 000	accès restreint
TGCC	Bull - Curie nœuds larges	6 902 000	2 200 000
	Bull - Curie nœuds fins	40 500 000	13 000 000
	Bull - Curie nœuds hybrides GPU	144 000	pas disponible

Dossier technique

Dossier technique pour les demandes d'heures 2012 : voir aussi dossier technique IPSL​

Performances connues

IDRIS IBM vargas

• Les post-traitements des simulations faites sur vargas se font actuellement sur ulam. Nous rencontrons des difficultés insurmontables dans les post-traitements sur ulam et en l'état, il est impossible de réaliser des simulations de type CMIP5 (historical) en production.
  • Il faudrait pouvoir post-traiter les simulations faites sur vargas sur vargas elle-même. Il s'agit des jobs de rebuild, TS et Monitoring, SE et ATLAS. Pour cela il faudrait sur vargas :
    • disposer des outils nco et C° nécessaires (rappeler la liste svp)
    • avoir la possibilités de lancer jusque 150 jobs à la fois, en classe scalaire sur vargas. C'est ce que peut soumettre le script TimeSeriesChecker de vérification des TS
    • avoir la possibilité de tourner une vingtaine de jobs de type scalaire simultanément par utilisatueur
    • disposer de l'espace TMPDIR nécessaire à ces jobs de post-traitements qui tourneraient simultanément.
• Chiffrages issus de la simu v3.historicalV52 qui a tourné entre mai et juin 2011 :
  • Une simulation de type historical (1850-2006, 157 ans) tourne en lançant 40 jobs enchainés sur vargas (<10h).
  • L'execution s'est étalée sur une période de 1 mois environ. Elle a lancé au fur et à mesure les jobs de post-traitements sur ulam puis le rattrapage des TS a été lancé à la main. En tout :
    • 156 jobs de rebuilds, (<10h) + 9 à refaire à la main à cause de souci d'accès aux fichiers gaya (arrêts désynchronisés)
    • 15 jobs de SE (moyennes saisonnières), (<10h)
    • 30 jobs de monitoring (<1h)
    • 45 jobs d'atlas (<1h)
    • 464 jobs de TimeSeries (TS) en direct (<20h)
    • 166 jobs de TS (<20h) de rattrapage (via le script TimeSeriesChecker)
  • Les jobs de TS peuvent partir en time limit exceeded. Le max de temps réel étant actuellement de 20h.
  • Estimation du temps réel nécessaire sur vargas pour les post-traitements : 20%
    • pour une simulation de type historical avec sorties HF activées :
      • 4 000 h de post-traitement (temps réel) sur vargas.
      • 20 000 h de temps réel en calcul pour la simu elle-même.

IPSLCM5A

Mesure consommation 10 ans pour résolution 96x95x39 - ORCA2

machine	Nb CPU	Temps réel	Temps à demander
vargas (IDRIS)	32 (5 océan + 26 atmosphère)	40 h	40x32 = 1 300h

Attention aux ressources pour le post-traitement. Estimation pour post-traitement sur vargas : 20%

Estimation consommation 10 ans pour résolution 144x142x39 - ORCA2

machine	Nb CPU	Temps réel	Temps à demander
vargas	64 (16 océan + 1 oasis + 47 atm	7h par an	70x64 = 4 500h

Test 1 an OK. Voir : ​Monitoring VERIF092011 IPSLCM5A-MR

Attention aux ressources pour le post-traitement. Pas encore d'estimation à ce jour.

LMDZOR

Ancienne physique résolution 96x95x39, estimation consommation 10 ans

machine	Nb CPU	Temps réel / mois	Temps réel total	Temps à demander
vargas (IDRIS)	32	15 min	30 h	30x32 = 960h

Nouvelle physique NPv3 résolution 96x95x39, estimation consommation 10 ans

machine	Nb CPU	Temps réel / mois	Temps réel total	Temps à demander
vargas (IDRIS)	32	35 min	70 h	70x32 = 2240h

Ancienne physique résolution 144x142x39, estimation consommation 10 ans

machine	Nb CPU	Temps réel / mois	Temps réel total	Temps à demander
vargas (IDRIS)	32	30 min	62 h	62x32 = 2000h

Nouvelle physique NPv3 résolution 144x142x39, estimation consommation 10 ans, NB: temps avec iphysiq=5

machine	Nb CPU	Temps réel / mois	Temps réel total	Temps à demander
vargas (IDRIS)	32	100 min	210 h	210x32 = 6700h

NEMO

ORCA2_LIM, estimation consommation 10 ans

machine	Nb CPU	Temps réel / an	Temps réel total	Temps à demander
vargas (IDRIS)	1	3h	30h	30x1 = 30h

ORCA2_LIM_PISCES, estimation consommation 10 ans

machine	Nb CPU	Temps réel / an	Temps réel total	Temps à demander
vargas (IDRIS)	32	1h	10h	10x32 = 320h

ORCA2_OFF_PISCES, estimation consommation 10 ans

machine	Nb CPU	Temps réel / an	Temps réel total	Temps à demander
vargas (IDRIS)	32	16 mn	2h40mn	2h40mnx32 = 85h

CCRT Bull titane

Avril 2012 : depuis libIGCM_v2.0_beta1 les post-traitements titane se font sur titane et les fichiers produits sont packés. Une simulation de type historical produisit 120 000 fichiers. Elle produit maintenant 7000 fichiers.

Le post-traitement sur titane pose un problème de comptabilité puisqu'ils sont comptabilisés 8 fois comme tous les jobs monoprocesseur. Il fallait demander 20% de temps en plus pour les traitements. Avec ce souci de facteur 8 il faut demander 260% du temps calcul estimé!

IPSLCM5A

Mesure consommation 10 ans Résolution 96x95x39 - ORCA2 (sorties "légères")

machine	Nb CPU	Temps réel	Temps calcul	Temps à demander incluant les post-traitements
titane	32	35 h	1120 h	2500h

Mesure consommation 10 ans Résolution 144x142x39 - ORCA2

machine	Nb CPU	Temps réel	Temps à demander
titane	64	??	??

Configuration Forcée : LMDZOR

Ancienne physique résolution 96x95x39, estimation consommation 10 ans

machine	Nb CPU	Temps réel / mois	Temps réel total	Temps à demander
titane (CCRT)	32	16 min	32 h	32x32 = 1024h

Ancienne physique résolution 144x142x39, estimation consommation 10 ans

machine	Nb CPU	Temps réel / mois	Temps réel total	Temps à demander
titane(CCRT)	32	40 min	80 h	80x32 = 2560h

Configuration Forcée : LMDZORINCA

Vous trouverez les renseignements sur cette ​page

NEMO

ORCA2_LIM, estimation consommation 10 ans

machine	Nb CPU	Temps réel / an	Temps réel total	Temps à demander
titane (CCRT)	1	2h	20h	20x1 = 20h

ORCA2_LIM_PISCES, estimation consommation 10 ans

machine	Nb CPU	Temps réel / an	Temps réel total	Temps à demander
titane (CCRT)	32	1h	10h	10x32 = 320h

ORCA2_OFF_PISCES, estimation consommation 10 ans

machine	Nb CPU	Temps réel / an	Temps réel total	Temps à demander
titane (CCRT)	32	16 mn	2h40mn	2h40mnx32 = 85h

TGCC Bull curie noeuds larges

libIGCM OK depuis libiGCM 2 beta : avril 2012.

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine	Nb CPU	Temps réel	Temps calcul seul	Temps à demander
curie	32	46 h	1472 h	1800 h

TGCC Bull curie noeuds fins

libIGCM OK depuis libiGCM 2 beta : avril 2012.

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine	Nb CPU	Temps réel	Temps à demander
curie -q standard	32	24 h	900 h

TGCC Bull curie noeuds hybrides

Performances estimées

CINES : l'environnement des simulations IPSL n'est pas installé.

CINES IBM yoda

Pas de performances connues

CINES SGI jade

Grand challenge

NEMO (Drakkar)

Attention : pas d'environnement modipsl/libIGCM à ce jour.

IPSLCM5A : 96x95x39 - ORCA2

Mesure consommation 10 ans

machine	Nb CPU	Temps réel	Temps à demander
jade	32	60h	1920 h

IDRIS BlueGene Babel

Utilisation non conseillée. Tests avec NEMO seulement.

CCRT Bull titane GPUs

Pas d'utilisation recensée à ce jour.

2010

Informations supprimées. Voir l'historique des changements pour les retrouver si besoin.