source: TOOLS/PACK_IPSL/parallelPack.sh @ 1856

Last change on this file since 1856 was 1856, checked in by gpincka, 12 years ago

Ajout de verifications : glost compile + libccc_user charge

  • Property svn:executable set to *
File size: 7.1 KB
Line 
1#!/bin/bash
2
3function insertDirectives
4{
5   
6    local batchFile="launch_and_measureTime.sh"
7    local lineBeginMutableDrves=`grep -n "batch directives : begin" $batchFile | awk -F":" '{print $1}' `
8    local lineHeaderMutableDrves=`grep -n "mutable directives" $batchFile | awk -F":" '{print $1}' `
9    local lineEndMutableDrves=`grep -n "batch directives : end" $batchFile | awk -F":" '{print $1}' `
10    if [ "x${lineBeginMutableDrves}" == "x" ] || [ "x${lineHeaderMutableDrves}" == "x" ] || [ "x${lineEndMutableDrves}" == "x" ]
11    then
12        echo "Examen du fichier $batchFile :"
13        echo "Il manque les balises commentees 'mutable directives' et 'batch directives : end' "
14        exit 1
15    fi
16   
17    # echo "lineHeaderMutableDrves=$lineHeaderMutableDrves"
18    # echo "lineEndMutableDrves=$lineEndMutableDrves"
19   
20    if [ $lineHeaderMutableDrves -ge $lineEndMutableDrves ]
21    then
22       echo "Examen du fichier $batchFile :"
23       echo "les lignes 'mutable directives' et 'batch directives : end' n'existent pas ou ne sont"
24       echo "pas bien placees l'une par rapport a l'autre ==> STOP."
25       exit 1
26    fi
27   
28    # Suppression des anciennes directives
29    local firstLineToMove=$(( $lineHeaderMutableDrves + 1 ))
30    local lastLineToMove=$(( $lineEndMutableDrves - 1 ))
31    if [ $firstLineToMove -lt $lineEndMutableDrves ]
32    then
33        sed -i "${firstLineToMove},${lastLineToMove}d" $batchFile
34    fi
35       
36    # insertion des directives chargees a partir de "load_batch_directives.sh"
37    local lineEndMutableDrves=`grep -n "batch directives : end" $batchFile | awk -F":" '{print $1}' `
38    sed -i "${lineEndMutableDrves}i\#MSUB -Qos $QosType" $batchFile
39    sed -i "${lineEndMutableDrves}i\#MSUB -q $queueType" $batchFile
40    sed -i "${lineEndMutableDrves}i\#MSUB -A $projectName" $batchFile
41    sed -i "${lineEndMutableDrves}i\#MSUB -T $computationTime" $batchFile
42    sed -i "${lineEndMutableDrves}i\#MSUB -n $nbProcs" $batchFile
43   
44    # insertion des directives specifiant les sorties des operations de pack
45    sed -i "${lineEndMutableDrves}i\#MSUB -e ${DETAILLED_OUTPUT}/pack_ipsl_%I.e" $batchFile
46    sed -i "${lineEndMutableDrves}i\#MSUB -o ${DETAILLED_OUTPUT}/pack_ipsl_%I.o" $batchFile
47
48}
49
50function check_machine
51{
52    local host_name=`hostname `
53    local isMachineTitane=`echo $host_name | grep "titane" | wc -l `
54    local isMachineCurie=`echo $host_name | grep "curie" | wc -l `
55   
56    if [ "x${isMachineTitane}" == "x0" ] && [ "x${isMachineCurie}" == "x0" ]
57    then
58        echo "Ce programme doit etre lance a partir 'curie' ou 'titane'. STOP."
59        exit 1
60    fi
61
62}
63
64function check_glost_launch
65{
66    local file_exec='glost_launch'
67    if [ ! -e $file_exec ]
68    then
69        echo "Il n'y a pas l'executable glost_launch."
70        echo "Vous devez compiler l'outil via make. "
71        exit 1
72    fi
73
74}
75
76
77function getNumeroOfPreviousTry
78{
79   local num_try="0"
80   ici=$PWD
81   cd $USER_OUTPUT_PROGRESS
82   
83   tryDirs=`ls | grep -e 'TRY__[[:digit:]]\{1,2\}$' `
84   for dir in $tryDirs
85   do
86      num=`echo $dir | awk -F"__" '{print $NF}' `
87      if [ $num -gt $num_try ]
88      then
89          num_try=$num 
90      fi
91   done 
92   cd $ici
93   echo $num_try
94   
95}
96
97########  pour option -f #############
98restartExecFromZero=0
99while [ $# -gt 0 ]
100do
101   echo "boucle sur les arguments du script ..."
102   echo "@=$@"
103   case $1 in
104   -f)  restartExecFromZero=1
105        echo "force restart from the beginning ..."
106        ;;
107   esac
108   shift
109done
110export restartExecFromZero=${restartExecFromZero}
111######################################
112
113# On charge les variables d'environnement
114. load_ipslPack_env.sh
115
116# On charge les directives batch
117. load_batch_directives.sh
118
119# on verifie que la machine est 'curie' ou 'titane'
120check_machine
121
122
123
124# on verifie que l outil glost a bien ete compile
125check_glost_launch
126#########  On insert les directives batch en en-tete du script "launch_and_measureTime.sh"         ##########
127#########  lance plus loin. Seules les directives de nom du job et de sorties restent inchangees   ##########
128
129insertDirectives
130
131# exit 0 # gpdebug : a virer
132
133# export inputCmd="${USER_OUTPUT_PROGRESS}/inputCmd.list"
134# export nextInputCmd="${USER_OUTPUT_PROGRESS}/nextInputCmd.list"
135# export output="${USER_OUTPUT_PROGRESS}/packOutput.log"
136# export reportFile="${USER_OUTPUT_PROGRESS}/report.log"
137
138########## Si l'option -f est activee, on detruit tous les fichiers status  ##########
139if [ "x$restartExecFromZero" == "x1" ]
140then
141    echo "Deleting  all status files ..."
142    for CONFIG in $( awk '{print $1}' ${IGCM_DEM}/config_card.liste )
143    do
144       PATH_SIMU=$( dirname $CONFIG )
145       ListStatFileInSimu=`find $PATH_SIMU -type f -name "*status" `
146       if [ "x$ListStatFileInSimu" != "x" ]
147       then
148           for file in $ListStatFileInSimu
149           do
150              if [ -e $file ]
151              then
152                 rm -f $file
153              fi
154       
155           done     
156       fi   
157    done
158    echo "Deletion done."
159fi
160
161
162# Par ailleurs, on vide les fichiers de cmds, d'output et de rapport si option -f activee
163if [ "x${restartExecFromZero}" == "x1" ]
164then
165    rm -rf ${USER_OUTPUT_PROGRESS}/TRY__*
166fi
167
168# exit 0 # a virer
169
170#####################################################################################
171
172export JOB_DIR=${LS_SUBCWD:-${PWD}}
173export EXE_DIR=${JOB_DIR}
174source ${EXE_DIR}/DEM_utilities.sh
175
176############## gpdebug : Pour gestion des erreurs #########################################
177# Execute la function errorReceive() si reception d'un signal TERM
178trap 'DEM_errorReceive' TERM
179# liste des processus à détruire en cas d'erreur bloquante
180export listPID=$$
181# fichier pour la transmission des messages d'erreur d'un fils au prog principal
182export errorMsgFile="${PWD}/errorMsg.txt"
183############## gpdebug : fin ##############################################################
184
185check_nco_version # verification de la version de nco #######################
186check_libccc_user # verif que le module libccc_user est charge ##############
187
188export badFailureFile=${USER_OUTPUT_PROGRESS}/badFailure.txt
189> $badFailureFile # nouvel essai, on vide le fichier d'erreur
190tryNumFile=${USER_OUTPUT_PROGRESS}/numero_current_try.txt
191numPreviousTry=$( getNumeroOfPreviousTry )
192# echo "numPreviousTry=$numPreviousTry"
193numNewTry=$(( $numPreviousTry + 1 ))
194
195# Pas de 4eme essai permis
196# ----------------------------
197if [ $numNewTry -ge 4 ]
198then
199    echo "Pas de 4eme essai permis"
200    exit 1
201fi
202
203# echo "numNewTry=$numNewTry"
204mkdir -p ${USER_OUTPUT_PROGRESS}/TRY__${numNewTry}
205echo $numNewTry > $tryNumFile
206
207# exit 0 # a virer
208
209
210
211export timeHandlingFile="${USER_OUTPUT_PROGRESS}/timeHandlingFile.txt"
212> $timeHandlingFile
213startTime=$( getDateMilliSeconds )
214echo "launch time:$startTime" >> $timeHandlingFile
215
216SCRIPT_NAME=$(basename ${0} )
217
218DEM_log -0 "Demarrage de ${SCRIPT_NAME}"
219
220# ccc_msub -A tgcc0013 launch_and_measureTime.sh
221ccc_msub launch_and_measureTime.sh
222
223DEM_log -0 "Fin de ${SCRIPT_NAME}"
224
225
226elapsedTime=0
227while [ $elapsedTime -lt 500 ]
228do
229    sleep 5
230    elapsedTime=$(( $elapsedTime + 5 ))
231    isFailureFileEmpty=`cat $badFailureFile | wc -l `
232    if [ "x${isFailureFileEmpty}" != "x0" ]
233    then
234       sleep 2 # on attend que le fichier soit correctement rempli
235       cat $badFailureFile
236       exit 0
237    fi
238done
239
240
241
242
Note: See TracBrowser for help on using the repository browser.