| | 100 | |
| | 101 | |
| | 102 | == notes telco 7/10/2011 == |
| | 103 | |
| | 104 | * TGCC : |
| | 105 | * Voir présentation COMUT |
| | 106 | * STOREDIR, WORKDIR communs aux machines, |
| | 107 | * STOREDIR : archivage in fine des fichiers en nombre réduits et très gros ( 1-> 100 Go) |
| | 108 | * WORKDIR : 1 TO, genre HOME collectif |
| | 109 | * SCRATCHDIR local à chaque machine. Besoin estimé à 50 To par login faisant des simus de production (30 pour commencer?) |
| | 110 | * sur curie : |
| | 111 | * simulations |
| | 112 | * utilisation de SCRATCHDIR pour stockage des simus pendant toute leur vie, |
| | 113 | * utilisation de SCRATCHDIR par les jobs de post-traitements tournant sur curie aussi, stockage des résultats sur STOREDIR |
| | 114 | * chaine modifiée avec outil de pack inclus, stockage des résultats sur STOREDIR |
| | 115 | * dods . Besoin identifié de 3 serveurs : |
| | 116 | * dods petits fichiers stockés sur WORK (et sous forme tarés sur STOREDIR) |
| | 117 | * dods fichiers entre 1 et 100 Go depuis STOREDIR |
| | 118 | * dods/datanode pour publication, des fichiers au format CMOR, sous le login p86cmip5 |
| | 119 | * Outil pack : |
| | 120 | * besoin de décrire le besoin en détail et le design : |
| | 121 | * simus longues et très longues, simus haute résolution , ... |
| | 122 | * create_pack, check_pack, |
| | 123 | * TS depuis pack, SE depuis pack, ... |
| | 124 | * IGCM_OUT et SORTIES_CPL_IPSL |
| | 125 | * travail collectif à prévoir mi-octobre/novembre |
| | 126 | * Période intermédiaire : |
| | 127 | * simulation sur titane ou mercure, |
| | 128 | * utilisation de STOREDIR et WORKDIR communs, STOREDIR selon nouvelles règles |
| | 129 | * accès à /dmnfs en lecture seulement |
| | 130 | * Déménagement : |
| | 131 | * Dès l'ouverture des accès à STOREDIR, déménager les fichiers utilisés par le serveur dods/datanode |
| | 132 | * le CCRT déménagera les fichiers des autres communautés : 1,5 Po |
| | 133 | * Pour nous, déménagement avec inclusion outil pack dans un 2ème temps, à commencer au plus tard en février 2012 |
| | 134 | * login exemple : p24luc |
| | 135 | * Soucis actuels : |
| | 136 | * surcharge ponctuelle de cesium en interactif. trop de find, ls , rsync simultanés Vérification de l'ouverture des accès vers ciclad depuis noeuds de calcul cesium |
| | 137 | * surcharge structurelle permanente : |
| | 138 | * transferts cesium et SX9 -> /dmnfs majoritaires |
| | 139 | * ccc_archive va être suspendu pour voir si cela va mieux (retour à situation été 2010?) |
| | 140 | * ccc_archive : enregistrement des commandes et passage ultérieur, sous le monitoring du CCRT pour limiter le nb de lecteurs utilisés |
| | 141 | * déménagement : tar par sous-répertoires pour limiter les fichiers résultats (entre 1 et 100 Go) |
| | 142 | |
| | 143 | |
| | 144 | |
| | 145 | |
| | 146 | Prochaine telco : 4/11/2011 9h30 |
| | 147 | |
