wiki:PerformancesIPSLCM5A

Version 15 (modified by mafoipsl, 13 years ago) (diff)

--

Performances IPSLCM5A

2011

Ressources disponibles

centre Supercalculateurs Estimation des ressources disponibles DARI 2012- 1ère session
CINES IBM Power7 - Yoda 920 300
SGI ICE - Jade 111 055 000
IDRIS IBM SP – Vargas 18 288 000
IBM BG/P - Babel 198 956 000
CCRT Bull Xéon – Titane 33 064 000
Bull Xéon – Titane noeuds hybrides GPU 920 000
TGCC Bull - Curie nœuds larges 6 902 000
Bull - Curie nœuds fins 40 500 000
Bull - Curie nœuds hybrides GPU 144 000

Performances connues

CINES : l'environnement des simulations IPSL n'est pas installé.

CINES IBM yoda

Pas de performances connues

CINES SGI jade

Grand challenge

NEMO (Drakkar)

Attention : pas d'environnement modipsl/libIGCM à ce jour.

IPSLCM5A : 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps réel Temps à demander
jade 32 60h 1920 h

IDRIS IBM vargas

Les post-traitements des simulations faites sur vargas se font actuellement sur ulam. Nous rencontrons des difficultés insurmontables dans les post-traitements sur ulam et en l'état, il est impossible de réaliser des simulations de type CMIP5 historical en production. Il faudrait pouvoir post-traiter les simulations faites sur vargas sur vargas elle-même. Il s'agit des jobs de rebuild, TS et Monitoring, SE et ATLAS. Pour cela il faudrait sur vargas :

  • disposer des outils nco et C° nécessaires (rappeler la liste svp)
  • avoir la possibilités de lancer jusque 150 jobs à la fois, en classe scalaire sur vargas. C'est ce que peut soumettre le script TimeSeriesChecker de vérification des TS
  • avoir la possibilité de tourner une vingtaine de jobs de type scalaire simultanément
  • disposer de l'espace TMPDIR nécessaire à ces jobs de post-traitements qui tourneraient simultanément.

Une simulation de type historical (1850-2006, 157 ans) tourne en lançant 40 jobs enchainés sur vargas. Chiffres issus de la simu v3.historicalV52 qui a tourné entre mai et juin 2001. L'execution s'est étalée sur une période de 1 mois environ. Elle a lancé au fur et à mesure les jobs de post-traitements sur ulam puis le rattrapage des TS.

  • 157 jobs de rebuilds, (<10h)
  • 15 jobs de SE (moyennes saisonnières), (<10h)
  • 30 jobs de monitoring (<1h)
  • 56 jobs d'atlas (<1h)
  • 464 jobs de TimeSeries (TS) en direct (<20h)
  • 174 jobs de TS (<20h) de rattrapage (via le script TimeSeriesChecker)

Les jobs de TS peuvent partir en time limit exceeded. Le max de temps réel étant actuellement de 20h.

IPSLCM5A : 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps CPU Mémoire Temps réel Temps à demander
vargas (IDRIS) 32 (5 océan + 26 atmosphère) 1300 h - 40 h 1 300h

Attention aux ressources pour le post-traitement.

IDRIS BlueGene babel

Utilisation non conseillée. Tests avec NEMO seulement.

CCRT Bull titane

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps réel Temps à demander
titane 32 35 h 1120 h

Attention aux ressources pour le post-traitement.

Attention au nombre de fichiers sur le stockage.

CCRT Bull titane GPUs

TGCC Bull curie noeuds larges

TGCC Bull curie noeuds fins

TGCC Bull curie noeuds hybrides

2010

C'est la suite de la page PerformancesIPSLCM5 : qui décrivait les performances de IPSLCM5 en automne 2009.

Quand on n'a pas les informations directement sur IPSLCM5A, on décrit quelques performances connues.

A noter :

  • le couplé en 144x142 (IPSLCM5A-MR) prend 2,5 fois plus de temps que le couplé en 96x95.
  • les sorties complètes (type historical) CMIP5 ajoutent 20 % de temps sur les NEC.

CCRT

SX9 : mercure

Ressources : 320 000 h dédiées GIEC

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps CPU Mémoire Temps réel Temps à demander
mercure (CCRT) 4 88 h 13 GB 32 h 140 h

Résolution 144x142x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps CPU Mémoire Temps réel Temps à demander
mercure (CCRT) 8 180 h 35 GB 35 h 300 h

SX8R : mercure

Pour mémoire : pas de ressources disponibles

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps CPU Mémoire Temps réel Temps à demander
mercure (CCRT) 4 130 h 13 GB 40 h 160 h

Xeon : titane

Ressources disponibles : 44 100 000 h

Pour mémoire : Ressources disponibles sur GPU : 1 114 200 h

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps réel Temps à demander
titane 32 35 h 1120 h

IDRIS

SX8 : brodie

Ressources disponibles (projets en prolongation seulement) : 512 000 h

Attention, on compte en temps CPU sur le NEC de l'IDRIS.

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps CPU à demander Mémoire Temps réel
brodie (IDRIS) 4 160 h 11 GB 50 h

IBM : vargas

Ressources disponibles : 22 560 000 h

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps CPU Mémoire Temps réel Temps à demander
vargas (IDRIS) 32 (5 océan + 26 atmosphère) 1300 h - 40 h 1 300h

IBM Blue Gene : babel

Pour mémoire. Ressources disponibles : 248 000 000 h

CINES

Ressources disponibles : 138 100 000 h

Xeon : jade

Attention : pas d'environnement modipsl/libIGCM à ce jour.

Résolution 96x95x39 - ORCA2

Mesure consommation 10 ans

machine Nb CPU Temps réel Temps à demander
jade 32 60h 1920 h

Attachments (12)