Changes between Version 1 and Version 2 of PerformancesIPSLCM6


Ignore:
Timestamp:
08/27/14 15:42:42 (6 years ago)
Author:
mafoipsl
Comment:

--

Legend:

Unmodified
Added
Removed
Modified
  • PerformancesIPSLCM6

    v1 v2  
    2222== Mésocentre IPSL == 
    2323 
    24 Nous avons fait apparaître le mésocentre IPSL dans la liste des méso-centres. Il s'agit de l'ensemble CICLAD+CLIMSERV que nous avons identifié ainsi. N'hésitez pas à le citer dans votre demande d'heures. Il suffit juste de le sélectionner dans la liste proposé sur le site WWW. 
     24Nous avons fait apparaître le mésocentre IPSL dans la liste des méso-centres. Il s'agit de l'ensemble CICLAD+CLIMSERV que nous avons identifié ainsi. N'hésitez pas à le citer dans votre demande d'heures. Il suffit juste de le sélectionner dans la liste des mésocentres proposés sur le site WWW. 
    2525 
    2626----  
     
    3030---- 
    3131 
    32 Les 3 machines ada IDRIS, curie TGCC et occigen (CINES) ont presque les mêmes performances. Par souci de simplicité on donne un seul tableau de performances. 
     32Les 3 machines ada (IDRIS), curie (TGCC) et occigen (CINES) ont presque les mêmes performances. Par souci de simplicité on donne un seul tableau de performances. 
     33 
     34== Particularités des centres == 
    3335 
    3436=== IDRIS IBM - Ada  === 
     
    3739 * Les post-traitements se font sur des noeuds dédiés adapp et ne sont pas comptés. Il n'est donc pas nécessaire de demander des ressources pour les post-traitements. 
    3840 * Rappel : il faut de l'ordre de 20 To par personne sur le WORKDIR pour faire tourner les chaînes de calcul. Demander les quotas nécessaires dès que possible sur le serveur intranet de l'IDRIS.  
     41 
     42=== TGCC Bull curie  === 
     43 * Une demande collective unique d'inodes IPSL sera faite fin 2014. A suivre. 
     44 * Il faut bien préciser les besoins, en particulier en production : 
     45    * ccc_quota vous donne votre occupation sur les différents espaces, en espace et en nombre d'inodes. 
     46{{{ 
     47> ccc_quota 
     48Disk quotas for user xxxxxx (uid xxxxx): 
     49 
     50             ------------------- SPACE --------------------  ------------------- INODE -------------------- 
     51 Filesystem       usage        soft        hard       grace     entries        soft        hard       grace 
     52 ----------       -----        ----        ----       -----     -------        ----        ----       ----- 
     53       home     543.34M          3G          3G           -           -           -           -           -  
     54    scratch       1.56T         20T         20T           -      76.03k          2M          2M           -  
     55       work     328.15G       9.31T       9.31T           -       1.13M          3M          3M           -  
     56      store           -           -           -           -     512.61k        550k        551k           -  
     57 
     58Account scoring: 
     59---------------- 
     60Filesystem volume(TB)  inodes non_files files<32M  files<1G avg_fsize(MB)    score      score_detail 
     61store         822.325  512612     2.44%    20.14%    43.50%          1724    13/20      6/6, 3/7, 1/3, 3/4 
     62 
     63... 
     64}}} 
     65    * Demander plus de quotas si besoin, mais sur CCCSTOREDIR, il faut avoir un bon score ( noté sur 20 : 13/20 dans l'exemple) pour les obtenir. De plus, toute dérogation a une date limite. 15/1/2015 pour la plupart. Attention à être inclus dans la demande d'extension inodes IPSL annuelle. 
     66    * Pour faire de la '''production''', il faut enchaîner les jobs de calcul. Le calcul de priorité actuel tient compte des heures déjà consommées, autrement dit plus on a consommé, plus on attendra avant de rentrer en exécution. Ceci rend impossible la production basée sur l'enchaînement de jobs lancés les uns par les autres. Bien préciser '''le nombre d'heures qui se feront en production avec le nombre de processeurs utilisés'''. 
     67 
     68==== noeuds larges  : post-traitement ==== 
     69 
     70 * Dans la chaîne IPSL, les post-traitements se font sur curie noeuds larges. Il faut donc demander des heures sur noeuds larges pour le post-traitement et sur noeuds fins pour les calculs. On conseille de demander 10 % du nombre d'heures demandées sur noeuds fins. 
     71 
     72==== noeuds fins  : calculs ==== 
     73 
     74 * Bien préciser le nombre d'heures de calcul sur noeuds fins. 
     75 
     76=== CINES Bull occigen === 
     77Il est possible de demander des heures en 2015 sur cette machine. En cours 2 actions : 
     78 * portage de la chaîne IPSL 
     79 * 2 grands challenges avec NEMO et DYNAMICO (saturne) 
     80A savoir : 
     81 * peu d'expérience des serveurs de fichiers du CINES à ce jour. Plus d'informations dès que possible. 
     82 * un datanode ESGF existe au CINES 
     83 
    3984 
    4085==== IPSLCM6 VLR ====