wiki:IPSLCM6/ReunionsQuest

Version 28 (modified by jdlod, 4 years ago) (diff)

--

Lundi 23 Mars 2020

Julie, Frederic, Juliette, Eliott, Nicolas, Laurent

actuellement en machine

  • M2C-TI01... Brady Ferster (LR-WP1)
  • CM61-LR-... Marion Devilliers (LR-WP1)
  • Laurent ? (PACKOUTP...)

point sur les simulations à relancer par configuration

  • LR (atm LR, ocean 1)

2 simulations realisees par Laurent avec L95 - terminé
Ionela doit lancer la deuxieme vague d'auto-tuning (pour explorer ECS 3D), a priori demain ; devrait pouvoir enchainer 2 ou 3 autres vagues ensuite
vers une version retunée du LR ? a reflechir pour dans 1 mois environ
pour la glace de mer : Guillaume fait ses propres simulations dans son coin ; Martin est interessé par d'autres tests de sensibilité, en particulier dans contexte du papier tuning, mais pas de simu prête à lancer
analyses de Brady en cours (sur simulations WP1), avec AMOC artificiellement augmentée et diminuée
simulations de Marion avec fonte Groenland (terminées, WP1) : à utiliser pour relancer simulations previsibilité decennale ?

  • MR1 (atm MR, ocean 1)

Laurent a toujours des plantages non resolus avec CM6.2-QUEST-MR01
vers une nouvelle version tunée du MR1 ?

  • MR025 (atm MR, ocean 1/4)

http://webservices2017.ipsl.fr/interMonitoring/tmp/interMonitoring_plot01_B73AgQ_prod/
SST globale un peu plus faible que pour les MR1 et LR > on rechauffe encore ou on conserve comme cela ?
relancer test sans GM ? voir d'abord ajustement de ACC... > Julie

Pilotage / management / suivi des heures utilisées

  • consommation jusqu'a present : 17 583 506 hCPU soit 39% de l'allocation - suggested use : 47.7% >> deficit de 4 050 000 hCPU - pas de penalité à prévoir avant le 15/04
  • Contribution de Eliott à partir du 01/04 (si contrat demarré) ou du 01/05 (sinon) : quel plan de production de simulations ?

Jeudi 16 janvier 2020

Julie, Christian, Laurent, Frederic, Juliette, Nicolas

actuellement en machine

  • CM6.2-preQUEST-01 (MR1) : control MR1 (sans tuning automatic) (baseline) tourne toujours pour voir
  • Q3-CM62-MR025-pd-03 (continuation de pd-01, avec GM, rechauffée) : tourne toujours pour voir

intermonitoring
C-ESM-EP pour OCE

C-ESM-EP : ajouter les biais de SST apres avoir enleve la moyenne globale SST + ressortir ce qu'il faut pour avoir atlas atmospheriques

point sur les simulations à relancer par configuration

C-ESM-EP sur donnees atmospheriques ?

  • LR (atm LR, ocean 1)

IPSLCM6.2-LR-pd-QUEST-01 :
reference pdControl pour QUEST : deja 200 ans produits
a prolonger pour combien de temps encore ? oui tant qu'on est en sous-consommation et surtout compte tenu de la variabilite centennale
pb donnees OCE dans intermonitoring ? a priori solution comprise par Laurent

refaire un intermonitoring + atlas C-ESM-EP avec CM6015S equivalente a LR pour verifier qu'on est bien dans le meme climat

+ tester impact de tuning T2m et couverture de glace de mer sur AMOC ? reboucler avec actions dans WP1 sur tests tuning glace dans LR (MV, GG...) ?

  • MR1 (atm MR, ocean 1)

Ionela en cours d'analyse de la premiere vague de simulations
analyses comparatives CM6.2-preQUEST-01 vs CM6.2-QUEST-MR-01 ?
pour rappel : recalage en 1880 de CM6.2-QUEST-MR-01
pourquoi les simus MR1 repartent de plus froid en SST globale que CM6015S-pd-03 ? parcequ'elles sont reparties de MR de MAF, plus froid que LR
ongoing : comprendre pourquoi plantages reguliers de CM6.2-QUEST-MR01 autour de l’équateur (pour rappel, plantages semblables en MR025 mais pas dans CM6.2-preQUEST-01)

lancer simulation equivalente (avec meme tuning) en LR pour voir si plante aussi ?

  • MR025 (atm MR, ocean 1/4)

equilibrage atmospherique OK a priori, meme si un peu plus froid que les MR1 equivalentes

terminer les 100 ans en cours puis rebrancher un test sans GM pour voir
nouveau test tuning oceanique ?

TODO Julie : regarder sorties MR025 et voir si besoin d'ajouter des diags pour faciliter analyse (par ex. MOC)

Pilotage / management / suivi des heures utilisées

  • Frederic : commencer a identifier les simulations qui serviront dans les papiers, et verifier sorties, tuning, plantages...
  • Julie (et Eliott) : pour faciliter le tracking des simulations QUEST, ajouter QUEST ou Q1/Q2/Q3 dans le nom de la simu

et pour faciliter le Data Management Plan de l'espace gencmip6, renseigner tableau sur page wiki QUEST pour chaque simulation réalisée pour projet QUEST

  • Julie : a decidé de ne pas participer aux PRACE20days (Porto) car pas de focus thématique pertinent >> engagement implicite de participer à PRACE21days...
  • Julie : consommation jusqu'au 9/01/2020

WP1 = 3,940,000 hCPU
WP2 = 2,216,390 hCPU
WP3 = 5,147,500 hCPU
soit 25% de l'allocation alors que 26% attendus
pour info : rappel procedure de reduction des heures en cas de sous-consommmation

  • reunion QUEST au printemps ? a minima reunir tous les acteurs des 3 WP pour avancer tous ensemble sur objectifs scientifiques de QUEST

ouvrir ou non aux autres collaborateurs ICMC/IPSL ? interet a priori des BGC, autres ?
Julie lance sondage pour fixer 1 journee

Vendredi 29 novembre 2019

Juliette, Nicolas, Julie, Eliott, Laurent, Christian

actuellement en machine

  • IPSLCM6.2-preQUEST-01 (param de IPSL-CM6A-LR) a fini ses 200 ans >> arrêtée
  • IPSLCM6.2-QUEST-MR-01 (continuation d'une simu de MAF avec param provenant de UQ) : plante tous les 10 ans mais toujours en machine

-> on a beaucoup de place en machine pour les prochains 7-10 jours
-> relancer des MR025 rechauffés ?
-> feu vert à Brady pour 5+5 membres de 100 ans (1 date de depart)

point sur les configurations

  • LR (atm LR, ocean 1)

1) activer module iceberg dans NEMO ? NON : requiert un peu de travail préliminaire sur couplage hydro et namelist NEMO
2) réaliser equivalent pdCtrl de CM6.2-QUEST-MR01 ? OK -> Laurent : IPSLCM6.2-LR-pd-QUEST-01
repartir de 6015pd03 (choix S)
lancer pour 100-200 ans

  • MR1 (atm MR, ocean 1)

simus de Laurent sont parties du pd Ctrl de MAF
CM6.2-preQUEST-01 : reference ad-hoc (comme LR, ou presque)
CM6.2-QUEST-MR-01 : premier vague UQ MAF >> a poursuivre
à suivre (nom à determiner...) : nouveau MR1 à partir de deuxième vague UQ (après analyse des simus realisees par Ionela)

conclusion intermonitoring et CLIMAF : biais structuraux très proches entre LR, preQUEST et QUEST-MR01 mais QUEST-MR01 déjà un peu plus chaude et pas encore stabilisée
à regarder de plus près : pourquoi les simus MR1 de Laurent repartent de plus froid en SST globale que CM6015S-pd-03 ?

ongoing : comprendre pourquoi plantages reguliers de CM6.2-QUEST-MR01 autour de l’équateur (pour rappel, plantages semblables en MR025 mais pas dans CM6.2-preQUEST-01)

  • MR025 (atm MR, ocean 1/4)

atm idem a CM6.2-preQUEST-01 (sauf que repart de CM6.2-QUEST-MR-01)
ocean 2 styles : pd-01 avec GM et pd-02 sans GM
pd-02 moins stable numeriquement, a priori plus de biais chaud dans l'austral et convection tres forte (trop ?)
-> prolonger pd-02 pour confirmer l'effet de GM ?
mais globalement pd-01 et pd-02 equivalentes en terme de climat moyen, et a priori trop froid
-> rechauffer avant de relancer ? OK
actuellement on utilise cld_lc_lsc=0.00065 et cld_lc_con=0.00065
-> Julie envoie mail à Ionela et Fred pour savoir de combien les modifier puis lancer pd-03 (qui repart de pd-01) pour 100 ans (et on verra ensuite pour pd-02)

point sur les WP

  • WP1

simulations de Yohan realisees
Matthew Menary en redaction d'articles
Marion et Didier en train de faire tourner qq simus, prochaines à suivre en Janvier
+ Brady Fester (postdoc A. Fedorov) : protocole en cours de definition (5 membres pour 100 ans + 5 membres controle, avec eventuellement 2 dates de depart)

  • WP2

[Ionela] "j'ai fait un 2eme ensemble de 240 simulations (de la 1ere vague) pour le Q2-QUEST. J'ai post-traite ces simulations et extrait les metriques. La semaine prochaine j'attaquerai la partie analyse-UQ."

  • WP3

a completer par Julie


Pilotage / management / suivi des heures utilisées

  • Juliette : qui analyse les simulations ? quelle strategie ?

partage de codes pythons pour faire plus rapidement les analyses ? series temporelles MOC et glace de mer, suivi de stratification... Juliette et Julie y reflechissent
TODO Julie : regarder sorties MR025 et voir si besoin d'ajouter des diags pour faciliter analyse (par ex. MOC)

note : Jerome dit qu'il manque des sorties 3D atmosphere sur niveaux de pression standard, utiles pour produire atlas CLIMAF sur la verticale -> Laurent confirme, mais a priori on a toutes les infos necessaires pour faire des interpolations -> updater les atlas CLIMAF pour que ce soit fait automatiquement ?

  • reunion thematique ouverte a tous : revoir au printemps quand on aura qq resultats pour alimenter les discussions

Mardi 8 octobre 2019

Juliette, Olivier, Nicolas, Julie, Arnaud, Frederic, Eliott, Laurent, Christian, Ionela

actuellement en machine

  • MR1 (Laurent) : suite des simulations de Marie-Alice, màj CM6.2 (trunk LMDz), physic.def du trunk avec mini retuning, pdCtrl
    pour verifier que tout fonctionne, a priori on arrete apres 100 ans
    meme source LMDz et ORCHIDEE que IPSLCM6.2
  • MR025 (Christian) : suite des simulations tests, màj CM6.2
    depart eORCA025 forcé at rest, forcage CORE
    5 ans OK, bug à la 6eme année (trop de glace en Arctic), diminution du pdt et reprise en Janvier >> poursuite du run jusqu'à 7eme année
    pending question sur origine de ces instabilites...
    meme source LMDz et ORCHIDEE que IPSLCM6.2
  • simulation pirates de Sebastien Masson en attendant son allocation A
  • prêt à partir: LMDz CM6.1.10 A-LR (Ionela): vague de 200 simulations pendant 2 ans pour revisiter tuning et ECS

Notes : limite de 300 jobs en meme temps - a priori sur chaque type de noeuds (hybrid, large et normal)
1 simu est comptée comme 1 job car calcul fait sur noeuds SKL et post-traitement sur noeuds larges de SKL
sur Irene outil glost pour empaqueter plein de petits jobs dans 1 seul gros - utile pour vagues de simus UQ ?

point sur les configurations

  • LR (atm LR, ocean 1)
    passage en physique "B", 95 niveaux verticaux, et serieux retuning
    pour vagues tuning LMDz (WP2), sorties maison minimales (xml à la main)
    pour vagues tuning en couplé (WP2), quelles sorties ?
  • MR1 (atm MR, ocean 1)
    modification physique LMDz et niveaux verticaux
    pour vagues tuning LMDz (WP2), sorties maison minimales (xml à la main)
  • MR025 (atm MR, ocean 1/4)
    TODO : revision param namelist (pdt oceanique (15 min), viscosite)
    travail sur pdt de couplage : allonger ou raccourcir pour limiter les pb d'explosion en glace de mer ?
    Olivier : quand on couple à 4h, alors amplitude du cycle diurne plus grande que quand on couple à 1h
    actuellement couplage toutes les 30min
    couplage glace de mer tous les 2 pdt ocean

point sur les WP

  • WP1 - porté par Juliette
    essentiellement poursuite de simulations / experiences deja realisees sur Irene
    pour tester sensibilite de parametres ocean-glace par rapport aux simulations CMIP6
    donc configuration IPSLCM6A-LR comme pour prod CMIP6, pour faciliter comparaison (par rapport à reference CMIP6) et publications
    avec dr2xml de CMIP6 (piCtrl, historique ou autres) trafiqués à la main
    YRR : en visite au LOCEAN 1 semaine en novembre pour réaliser ces simulations
    interactions avec les autres WP ? point au bout de 6 mois pour transfert d'expertise vers les 2 autres WP
  • WP2 - porté par Frederic
    exploration des parametres de LMDz ("experiences de sensibilite" au sens maths applis) pour preparer configurations du futur (MR1 et MR025)
    avec montee en resolution verticale pour mieux representer les nuages bas (en 1D dans un premier temps)
    + aller vers version physique "B" de LMDz, en ajoutant notamment dynamique de population des poches froides (dans physique "A" : densite de poches fixes au dessus de terre et ocean)
    revisite de la sensibilite de IPSLCM6A-LR (LMDzA-LR en fait) pour ECS
  • WP3 - porté par Julie
    realisation de simulations longues MR1 et MR025 avec en parallele configurations LMDz de WP2 vs tuning "ad hoc" de atm et ocean
    attention : tuning "ad hoc" implique re-equilibrage du modele, via mini UQ
    MR025 ad-hoc deja en machine...
    simulations tuning issus de UQ à lancer debut janvier

Pilotage / management / suivi des heures utilisées

  • preparer tableau pour resumer specs de toutes les configurations utilisees et simulations realisées
  • reunion de tout le projet pour expliquer interactions entre WP et renforcer motivation (lors de visite de YRR en novembre ?), avec presentations scientifiques
  • suivi de consommation / visualisation des jobs par Eliott (des qu'il a acces à ccc_myproject)
    pour suivre jobs par WP, ajouter Q1/Q2/Q3 dans les intitules de jobs (attention a la limite de 16 char) - eventuellement ajouter LR, MR1 ou MR025
  • reunions mensuelles de pilotage de tout le projet
  • reunions supplémentaires pour WP séparés ou pour configurations séparées
  • points supplémentaires Fred, Juliette, Julie lorsque necessaire (eviter emails au maximum)

Note : formation LMDz mi decembre

Logins autorisés

  • à activer :
    Martin Vancoppenolle (login à créer ???)
    Frederic Hourdin (login à créer)
  • seront activés le 11 octobre :
    Ionela Musat (p86musat)
    Didier Swingedouw (swingedi)
    Marion Devilliers (devillim)
    Victor Estella Perez (estellav)
    Matthew Menary (menaryma)
    Yohan Ruprich Robert (ruprichy)
    Simona Flavoni (sflavoni)
    Guillaume Gastineau (p86ggas)
    Amélie Simon (simoname)
    Weimin Jiang (doctorante Guillaume) (jiangwei)
    Leonard Borchert (post doc Juliette Didier) (borcherl)
    Eric Guilyardi (p86guil)
  • deja activés :
    Juliette Mignot (p86mign)
    Julie Deshayes (deshayej)
    Christian Ethé (p48ethe)
    Laurent Fairhead (p86fair)
    Arnaud Caubel (p86caub)
    Marie-Alice Foujols (p86maf)
    Olivier Marti (p86mart)
    Nicolas Lebas (lebasn)
    Sebastien Masson (massons)
    Gaston Irrmann (irrmanng)
    + le login generique p86ipsl

Vendredi 27 septembre 2019

Juliette, Laurent, Simona, Nicolas, Eliott, Christian, Arnaud, Ionela, Fréderic

Info importante: maintenance TGCC en début de semaine prochaine. Ca ne revient que mercredi après midi...

Nicolas -> on va recevoir un numéro de projet type "RAXXX" a mettre dans le job. Assorti à ca, on aura des espaces .../cont003/.../RAXXX/ . Libre à nous de les utiliser ou pas. Experience du preparatory access: on peut être installé sur $HOME_gencmip6, ecrire sur $WORK_gencmip6 et être imputé sur RAXXX. A noter qu'il nous faudra degager les $HOME_RAXXX des le 1er oct 2020. -> a priori, ca serait mieux de s'installer sur gencmip6, on sera plus confort.

Proposition que Nicolas et Eliott fonctionnent en binome sur suivi de conso et interactions avec le centre (nombre de jobs max, punitions, etc).

MR1 -> Laurent la passe en CM6.2 et lance dans la semaine prochaine. 1800 proc. Pas de sorties CMIP6 (dr2xml pas pret)

MR025 -> Christian l'a déjà en CM6.2. Par contre ca n'a été testé que sur 1 an ( tout juste la mise en place ). Christian lance dans la semaine prochaine. 4720proc. Pas de sorties CMIP6 (dr2xml pas pret)

LR -> rester sur CM6.1.10 pour compatibilité LMDZ et comparaisons ECS. Fréderic et Ionela préparent du UQ et lancent.

Remarque: 1 MR1 + 1 MR025 ~ ce qu'on doit avoir en permanence en machine (5000 proc)