/[MITgcm]/mitgcm.org/scripts/check_outp
ViewVC logotype

Diff of /mitgcm.org/scripts/check_outp

Parent Directory Parent Directory | Revision Log Revision Log | View Revision Graph Revision Graph | View Patch Patch

revision 1.10 by jmc, Thu May 21 15:42:46 2009 UTC revision 1.33 by jmc, Tue Sep 4 20:34:31 2012 UTC
# Line 6  Line 6 
6  #  the latest output with the previous one (from the same platform with  #  the latest output with the previous one (from the same platform with
7  #    same optfile)  #    same optfile)
8    
   
9  usage()  usage()
10  {  {
11      echo      echo
12      echo "Usage:  $0 [OPTIONS]"      echo "Usage:  $0 [OPTIONS]"
13      echo      echo
14      echo "where possible OPTIONS are:"      echo "where possible OPTIONS are:"
15      echo "  (-h|-help)            print usage"      echo "  (-h|-help)            print usage"
16      echo "  (-v|-verbose)         verbose mode"      echo "  (-v|-verbose)         verbose mode"
# Line 22  usage() Line 21  usage()
21      echo "                         [def=\"$FIRSTDAY\"]"      echo "                         [def=\"$FIRSTDAY\"]"
22      echo "  (-u |-upto )LASTDAY   until last day=\"YYYYMMDD\" (=selected period)"      echo "  (-u |-upto )LASTDAY   until last day=\"YYYYMMDD\" (=selected period)"
23      echo "                         [def=\"FIRSTDAY\"]"      echo "                         [def=\"FIRSTDAY\"]"
24        echo "  (-b |-before)BEFORE   compare with output from before \"YYYYMMDD\""
25        echo "                         (=previous period) [def=\"FIRSTDAY\"]"
26      echo "  (-o |-outp )OUTPFIL   output file (-1 removed when exit)"      echo "  (-o |-outp )OUTPFIL   output file (-1 removed when exit)"
27      echo "                         [def=\"$OUTPFIL\"]"      echo "                         [def=\"$OUTPFIL\"]"
28      echo "  (-n |-nldf )NBLDIFF   max number of diff lines to echo"      echo "  (-n |-nldf )NBLDIFF   max number of diff lines to echo"
29      echo "                         [def=\"$NBLDIFF\"]"      echo "                         [def=\"$NBLDIFF\"]"
30      echo "  (-a |-addr )ADDRESS   send summary to mail ADDRESS list"      echo "  (-a |-addr )ADDRESS   send summary to mail ADDRESS list"
31      echo "                         [def=\"$ADDRESS\"]"      echo "                         [def=\"$ADDRESS\"]"
32      echo      echo
33      exit 1      exit 1
34  }  }
35    
36    #  create list of results dir for one platform:
37    make_resdir_list()
38    {
39          if test $monthDir == 1 ; then
40            dir_list=`grep '.._'$mname ./dir_all`
41          else
42            dir_list=`( cd $INDIR ; ls -1 -t ../$PREV_P/??_*${mname}*/summary.txt 2> /dev/null | sed 's/\/summary.txt//' )`
43            #echo "dir_list='$dir_list'"
44          fi
45            for i in $dir_list ; do
46    
47                dir=$INDIR"/"$i
48                #--- get the opfile used to run testreport
49                OPTFILE=
50                if test -r $dir/summary.txt ; then
51                    comm=`grep 'OPTFILE=' $dir/summary.txt`
52                    eval $comm
53                fi
54                if test "x$OPTFILE" = x -a -r "$dir/genmake_state" ; then
55                    comm=`grep 'OPTFILE=' $dir/genmake_state 2>/dev/null`
56                    eval $comm
57                fi
58                if test "x$OPTFILE" = x ; then
59                    comm=`grep '^# OPTFILE=' $dir/*/Makefile* 2>/dev/null | head -1`
60                    comm=${comm##*#}
61                    eval $comm
62                fi
63                if test "x$OPTFILE" = x ; then
64                    OPTFILE="not_explicitly_specified"
65                else
66                    OPTFILE=${OPTFILE##*/}
67                fi
68                #--- case select test run by 1 user: get user who did run testreport
69                if test "x$sUser" != x ; then
70                    tUser=
71                    if test -f $dir/genmake_state ; then
72                       nn=`sed -n '/^# executed by:/=' $dir/genmake_state`
73                       if test "x$nn" != x ; then
74                         nn=`expr $nn + 1`
75                         tUser=`sed -n "$nn s/^# *// p" $dir/genmake_state | sed 's/@.*$//'`
76                       fi
77                    fi
78                    if test "x$tUser" = "x" ; then
79                       mkfile=`ls $dir/*/Makefile* 2>/dev/null | head -1`
80                       if test "x$mkfile" = 'x' ; then
81                         echo "no Makefile => discard test from: $i" | tee -a $OUTPFIL
82                         continue
83                       fi
84                       nn=`sed -n '/^# executed by:/=' $mkfile`
85                       if test "x$nn" != x ; then
86                         nn=`expr $nn + 1`
87                         tUser=`sed -n "$nn s/^# *// p" $mkfile | sed 's/@.*$//'`
88                       fi
89                    fi
90                    if test "x$tUser" = x ; then
91                         echo "no User found => discard test from: $i" | tee -a $OUTPFIL
92                         continue
93                    fi
94                    if test $tUser != $sUser ; then
95                       if test $dBug = 't' ; then
96                            echo "  discard test from: $i" | tee -a $OUTPFIL
97                       fi
98                       continue
99                    fi
100                fi
101    
102                ADJOINT=
103                TANGLIN=
104                RESTART=0
105                EXTRA=0
106                FAST=0
107                DVLP=0
108                MPI=0
109                MTH=0
110                UR4=0
111                if test -r $dir/summary.txt ; then
112                    comm=`grep 'ADJOINT=true' $dir/summary.txt 2>/dev/null`
113                    eval $comm
114                    comm=`grep 'TANGLIN=true' $dir/summary.txt 2>/dev/null`
115                    eval $comm
116                    RESTART=`grep -c 'test 2+2=4 summary' $dir/summary.txt`
117                    comm=`grep '^run: .*testreport.* ' $dir/summary.txt`
118                    EXTRA=`echo "$comm" | grep -c " -*-tdir\>"`
119                    if test "x$EXTRA" = x0 ; then
120                       EXTRA=`echo "$comm" | grep -c " -*-t\>"`
121                    fi
122                    FAST=`echo "$comm" | grep -c " -*-fast\>"`
123                    if test "x$FAST" = x0 ; then
124                       FAST=`echo "$comm" | grep -c " '*-noieee'*"`
125                    fi
126                    DVLP=`echo "$comm" | grep -c " -*-devel\>"`
127                    MPI=`echo "$comm" | grep -c " -*-mpi\>"`
128                    if test "x$MPI" = x0 ; then
129                       MPI=`echo "$comm" | grep -c " -*-MPI\>"`
130                    fi
131                    MTH=`echo "$comm" | grep -c " -*-mth\>"`
132                    UR4=`echo "$comm" | grep -c " -*-use_r4\>"`
133                    if test "x$UR4" = x0 ; then
134                       UR4=`echo "$comm" | grep -c " -*-ur4\>"`
135                    fi
136                fi
137                if test "x$ADJOINT" = xtrue ; then
138                    kind="adjoint" ; order=0
139                elif test "x$TANGLIN" = xtrue ; then
140                    kind="tanglin" ; order=1
141                elif test "x$RESTART" = x0 ; then
142                    kind="forward" ; order=2
143                else
144                    kind="restart" ; order=3
145                fi
146                if test "x$EXTRA" != x0 ; then
147                    order=`expr $order + 4`
148                fi
149                order=`printf '%3.3i' $order`
150                if test "x$UR4" = x1 ; then
151                    OPTFILE="${OPTFILE}.use_r4"
152                fi
153                if test "x$MPI" = x1 ; then
154                    yy=`echo $OPTFILE | grep -c '+mpi'`
155                    if test $yy = 0 ; then OPTFILE="${OPTFILE}+mpi" ; fi
156                fi
157                if test "x$MTH" = x1 ; then
158                    yy=`echo $OPTFILE | grep -c '+mth$'`
159                    if test $yy = 0 ; then OPTFILE="${OPTFILE}+mth" ; fi
160                fi
161                if test "x$FAST" = x1 ; then
162                    OPTFILE="${OPTFILE}.fast"
163                fi
164                if test "x$DVLP" = x1 ; then
165                    OPTFILE="${OPTFILE}.dvlp"
166                fi
167                day=`echo $i   | sed -e 's/_[0-9]$//' | sed -e 's/_[0-9][0-9]$//'`
168                ttt=`echo $day | sed -e 's/_[0-9]$//' | sed -e 's/_[0-9][0-9]$//'`
169                day=`echo $ttt | sed -e 's|_| |g' |awk '{print $NF}'`
170    
171                if [ $day -lt $BEFORE ] ; then
172                    echo "$OPTFILE$order $day $OPTFILE $kind $i" >> ./plist
173                elif [ $day -ge $FIRSTDAY -a $day -le $LASTDAY ] ; then
174                    echo "$OPTFILE$order $day $OPTFILE $kind $i" >> ./slist
175                else
176                    if test $dBug = 't' ; then
177                       echo "discard day='$day' from: $i" | tee -a $OUTPFIL
178                    fi
179                fi
180    
181            done
182            if test $dBug = 't' ; then
183              if test $monthDir == 1 ; then
184                echo "---- current list (n=$monthDir) :" | tee -a $OUTPFIL
185                    cat ./slist | tee -a $OUTPFIL
186              fi
187              num1=`wc -l ./slist | awk '{print $1}'`
188              if test $num1 -gt 0 ; then
189              echo   ".... previous list (n=$monthDir):" | tee -a $OUTPFIL
190                    cat ./plist | tee -a $OUTPFIL | head -20
191              fi
192              echo "----" | tee -a $OUTPFIL
193            fi
194    }
195    
196    #--------------------------------------------------------------------------
197    # here starts the sequential part of the script:
198    
199  #CURR_PER=`date +%Y`"_"`date +%m`  #CURR_PER=`date +%Y`"_"`date +%m`
200  CURR_DAY=`date +%Y%m%d`  CURR_DAY=`date +%Y%m%d`
201  # defaults  # defaults
202  MACHINES='_All_'  MACHINES='_All_'
203  FIRSTDAY=$CURR_DAY  FIRSTDAY=$CURR_DAY
204  LASTDAY="30000000"  LASTDAY="30000000"
205    BEFORE="30000000"
206  OUTPFIL=`basename $0`'.log'  OUTPFIL=`basename $0`'.log'
207  NBLDIFF=5  NBLDIFF=5
208  ADDRESS='none'  ADDRESS='none'
209  dBug=f  dBug=f
210  sTime=`date`  sTime=`date`
211    #- to get case insensitive "ls" (and order of tested experiments)
212    export LC_ALL="en_US.UTF-8"
213    
214  #  Parse options  #  Parse options
215  ac_prev=  ac_prev=
# Line 50  for ac_option ; do Line 217  for ac_option ; do
217    
218      # If the previous option needs an argument, assign it.      # If the previous option needs an argument, assign it.
219      if test -n "$ac_prev"; then      if test -n "$ac_prev"; then
220          eval "$ac_prev=\$ac_option"          eval "$ac_prev=\$ac_option"
221          ac_prev=          ac_prev=
222          continue          continue
223      fi      fi
224    
225      ac_optarg=`expr "x$ac_option" : 'x[^=]*=\(.*\)'`      ac_optarg=`expr "x$ac_option" : 'x[^=]*=\(.*\)'`
226    
227      case $ac_option in      case $ac_option in
228                    
229          -help | --help | -h | --h)          -help | --help | -h | --h) usage ;;
230              usage ;;          -verbose | --verbose | -v | --v) dBug=t ;;
         -verbose | --verbose | -v | --v)  
             dBug=t ;;  
231                    
232          -list  | --list  | -l | --l)          -list  | --list  | -l | --l) ac_prev=MACHINES ;;
233              ac_prev=MACHINES ;;          -list=* | --list=*) MACHINES=$ac_optarg ;;
234          -list=* | --list=*)  
235              MACHINES=$ac_optarg ;;          -day  | --day  | -d | --d) ac_prev=FIRSTDAY ;;
236            -day=* | --day=*) FIRSTDAY=$ac_optarg ;;
237          -day  | --day  | -d | --d)  
238              ac_prev=FIRSTDAY ;;          -upto | --upto | -u | --u) ac_prev=LASTDAY ;;
239          -day=* | --day=*)          -upto=* | --upto=*) LASTDAY=$ac_optarg ;;
240              FIRSTDAY=$ac_optarg ;;  
241            -before | --before | -b | --b) ac_prev=BEFORE ;;
242          -upto | --upto | -u | --u)          -before=* | --before=*) BEFORE=$ac_optarg ;;
243              ac_prev=LASTDAY ;;  
244          -upto=* | --upto=*)          -outp | --outp | -o | --o) ac_prev=OUTPFIL ;;
245              LASTDAY=$ac_optarg ;;          -outp=* | --outp=*) OUTPFIL=$ac_optarg ;;
246    
247          -outp | --outp | -o | --o)          -nldf | --nldf | -n | --n) ac_prev=NBLDIFF ;;
248              ac_prev=OUTPFIL ;;          -nldf=* | --nldf=*) NBLDIFF=$ac_optarg ;;
249          -outp=* | --outp=*)  
250              OUTPFIL=$ac_optarg ;;          -addr | --addr | -a | --a) ac_prev=ADDRESS ;;
251            -addr=* | --addr=*) ADDRESS=$ac_optarg ;;
252          -nldf | --nldf | -n | --n)  
253              ac_prev=NBLDIFF ;;          *) echo "Error: don't understand argument \"$ac_option\""
254          -nldf=* | --nldf=*)             usage ;;
             NBLDIFF=$ac_optarg ;;  
   
         -addr | --addr | -a | --a)  
             ac_prev=ADDRESS ;;  
         -addr=* | --addr=*)  
             ADDRESS=$ac_optarg ;;  
   
         *)  
             echo "Error: don't understand argument \"$ac_option\""  
             usage  
             ;;  
255    
256       esac       esac
257    
# Line 113  if test "x$ttt" != 'xyz' ; then Line 267  if test "x$ttt" != 'xyz' ; then
267    exit 2    exit 2
268  fi  fi
269  if test $LASTDAY = "30000000" ; then LASTDAY=$FIRSTDAY ; fi  if test $LASTDAY = "30000000" ; then LASTDAY=$FIRSTDAY ; fi
270    if test  $BEFORE = "30000000" ; then  BEFORE=$FIRSTDAY ; fi
271  CMDLINE=$0  CMDLINE=$0
272  for xx in "$@" ; do nw=`echo $xx | wc -w`  for xx in "$@" ; do nw=`echo $xx | wc -w`
273    if test $nw = '1' ; then CMDLINE="$CMDLINE $xx"    if test $nw = '1' ; then CMDLINE="$CMDLINE $xx"
274                        else CMDLINE="$CMDLINE '$xx'" ; fi                        else CMDLINE="$CMDLINE '$xx'" ; fi
275  done  done
276    
277  PERIOD=`echo $FIRSTDAY | sed 's/[0-9][0-9]$//'`  PERIOD=`echo $LASTDAY | sed 's/[0-9][0-9]$//'`
278  PP=`expr $PERIOD - 1`  PP=`expr $PERIOD - 1`
279  PM=`echo $PP | sed 's/^[0-9][0-9][0-9][0-9]//'`  PM=`echo $PP | sed 's/^[0-9][0-9][0-9][0-9]//'`
280  PY=`echo $PP | sed 's/[0-9][0-9]$//'`  PY=`echo $PP | sed 's/[0-9][0-9]$//'`
# Line 140  echo "CMDLINE='$CMDLINE'" > $OUTPFIL Line 295  echo "CMDLINE='$CMDLINE'" > $OUTPFIL
295  echo "PERIOD='$PERIOD' , PREV_P='$PREV_P'" >> $OUTPFIL  echo "PERIOD='$PERIOD' , PREV_P='$PREV_P'" >> $OUTPFIL
296  echo "INDIR='$INDIR'" >> $OUTPFIL  echo "INDIR='$INDIR'" >> $OUTPFIL
297  echo "Checking latest output from $FIRSTDAY until $LASTDAY" >> $OUTPFIL  echo "Checking latest output from $FIRSTDAY until $LASTDAY" >> $OUTPFIL
298    echo "  versus latest from before $BEFORE" >> $OUTPFIL
299    
300  if test $dBug = 't' ; then  if test $dBug = 't' ; then
301    echo "PERIOD='$PERIOD' , PREV_P='$PREV_P'"    echo "PERIOD='$PERIOD' , PREV_P='$PREV_P'"
302    echo "FIRSTDAY='$FIRSTDAY' , LASTDAY='$LASTDAY'"    echo "FIRSTDAY='$FIRSTDAY' , LASTDAY='$LASTDAY' , BEFORE='$BEFORE'"
303  fi  fi
304  if test -d $INDIR ; then  if test -d $INDIR ; then
305    dirP=`echo $INDIR | sed "s/$PERIOD/$PREV_P/"`    dirP=`echo $INDIR | sed "s/$PERIOD/$PREV_P/"`
# Line 159  else Line 315  else
315  fi  fi
316    
317  #- a short summary of this checking :  #- a short summary of this checking :
318  OUTPSUM=`echo $FIRSTDAY | sed 's/^20../_/'`  OUTPSUM=`echo $LASTDAY | sed 's/^20../_/'`
319  OUTPSUM=`basename $0`"$OUTPSUM.txt"  OUTPSUM=`basename $0`"$OUTPSUM.txt"
320  if test -e $OUTPSUM ; then mv -f $OUTPSUM $OUTPSUM'_bak' ; fi  if test -e $OUTPSUM ; then mv -f $OUTPSUM $OUTPSUM'_bak' ; fi
321  echo ' '$CMDLINE > $OUTPSUM  echo ' '$CMDLINE > $OUTPSUM
# Line 169  if test $FIRSTDAY = $LASTDAY ; then Line 325  if test $FIRSTDAY = $LASTDAY ; then
325  else  else
326    echo -n "Checking latest output from $FIRSTDAY until $LASTDAY" | tee -a $OUTPSUM    echo -n "Checking latest output from $FIRSTDAY until $LASTDAY" | tee -a $OUTPSUM
327  fi  fi
328  echo " versus latest prior to this period" | tee -a $OUTPSUM  if test $FIRSTDAY = $BEFORE ; then
329      echo " versus latest prior to this period" | tee -a $OUTPSUM
330    else
331      echo " versus latest from before $BEFORE" | tee -a $OUTPSUM
332    fi
333  echo "    Machine   Tot. Nb.   no    Nb with  Nb diff" >> $OUTPSUM  echo "    Machine   Tot. Nb.   no    Nb with  Nb diff" >> $OUTPSUM
334  echo "     name     checked   comp    Diff    lines"  >> $OUTPSUM  echo "     name     checked   comp    Diff    lines"  >> $OUTPSUM
335    
336  ( cd $INDIR ; ls -1 -t */summary.txt | sed 's/\/summary.txt//' ) > ./dir_all  ( cd $INDIR ; ls -1 -t */summary.txt | sed 's/\/summary.txt//' ) > ./dir_all
337    
338  if test "x$MACHINES" = "x_All_" ; then  if test "x$MACHINES" = "x_All_" ; then
339    MACHINES="faulks aces eddy bay meander lagoon hugo"    MACHINES="faulks meander aces- acesgrid baudelaire dickens danton beagle harbor"
340    MACHINES="$MACHINES columbia edvir rays solasrv sx8 xd1"    MACHINES="$MACHINES pleiades iblade rays solasrv sx8"
341    MACHINES="$MACHINES beagle batsi starp"    MACHINES="$MACHINES trane dodongo dokdo stomp bigred"
342    
343    MALL=`cat ./dir_all | sed -e 's|_| |g' | awk '{print $2}' | sort | uniq`    MALL=`cat ./dir_all | sed -e 's|_| |g' | awk '{print $2}' | sort | uniq`
344    for madd in $MALL ; do    for madd in $MALL ; do
345      present=0      present=0
346      for m in $MACHINES ; do      for m in $MACHINES ; do
347          echo $madd | grep $m > /dev/null 2>&1          mm=`echo $m | sed 's/\./ /g' | awk '{print $1}'`
348          RETVAL=$?          echo $madd | grep $mm > /dev/null 2>&1
349          test $RETVAL = 0  &&  present=1          RETVAL=$?
350          continue          test $RETVAL = 0  &&  present=1
351            continue
352      done      done
353      test $present = 0  &&  MACHINES="$MACHINES $madd"      test $present = 0  &&  MACHINES="$MACHINES $madd"
354    done    done
355  fi  fi
356    #echo "MACHINES=$MACHINES" ; exit
357    
358  for mname in $MACHINES ; do  for pname in $MACHINES ; do
359    
360        sname=`echo $pname | sed 's/-$//'`
361        mname=`echo $pname | sed 's/\./ /g' | awk '{print $1}'`
362        sUser=
363        if test $mname != $pname ; then
364          # to select results from user "sUser"
365          sUser=`echo $pname | sed 's/\./ /g' | awk '{print $2}'`
366        fi
367    
368      if test $dBug = 't' ; then echo "  $mname" ; fi      if test $dBug = 't' ; then echo "  $pname" ; fi
369      echo " name='$mname'" >> $OUTPFIL      echo " name='$pname'" >> $OUTPFIL
370      ctot=0 ; cmis=0 ; cdif=0      ctot=0 ; cmis=0 ; cdif=0
371    
372      # put results from selected period in "slist",      # put results from selected period in "slist",
373      #     results from previous period in "plist"      #     results from previous period in "plist"
374      rm -f ./plist ./slist ; touch ./plist ./slist      rm -f ./plist ./slist ; touch ./plist ./slist
375    
376      for n in $listNum ; do      #- create list of results (slist & plist) from current month directory
377        num1=`wc -l ./slist | awk '{print $1}'`      monthDir=1
378        num0=`wc -l ./plist | awk '{print $1}'`      make_resdir_list
       if test $n == 2 ; then  
         num2=`expr $num1 \* $n`  
         if [ $num0 -lt $num2 ] ; then  
           dir_list=`( cd $INDIR ; ls -1 -t ../$PREV_P/*${mname}*/summary.txt 2> /dev/null | sed 's/\/summary.txt//' )`  
           #echo "dir_list='$dir_list'"  
         fi  
       else  
         num2=$n  
         dir_list=`grep $mname ./dir_all`  
       fi  
       if [ $num0 -lt $num2 ] ; then  
         for i in $dir_list ; do  
   
             dir=$INDIR"/"$i  
             OPTFILE=  
             if test -r $dir/summary.txt ; then  
                 comm=`grep 'OPTFILE=' $dir/summary.txt`  
                 eval $comm  
                 OPTFILE=${OPTFILE##*/}  
             fi  
             if test "x$OPTFILE" = x -a -r "$dir/genmake_state" ; then  
                 comm=`grep 'OPTFILE=' $dir/genmake_state 2>/dev/null`  
                 eval $comm  
                 OPTFILE=${OPTFILE##*/}  
             fi  
             if test "x$OPTFILE" = x ; then  
                 comm=`grep '^# OPTFILE=' $dir/*/Makefile* 2>/dev/null | head -1`  
                 comm=${comm##*#}  
                 eval $comm  
                 OPTFILE=${OPTFILE##*/}  
             fi  
             if test "x$OPTFILE" = x ; then  
                 OPTFILE="not_explicitly_specified"  
             fi  
   
             ADJOINT=  
             RESTART=0  
             NOI3E=0  
             MTH=0  
             if test -r $dir/summary.txt ; then  
                 comm=`grep 'ADJOINT=true' $dir/summary.txt 2>/dev/null`  
                 eval $comm  
                 RESTART=`grep -c 'test 2+2=4 summary' $dir/summary.txt`  
                 NOI3E=`grep -c "^run: .*testreport.* '*-noieee'* " $dir/summary.txt`  
                 MTH=`grep -c "^run: .*testreport.* -mth " $dir/summary.txt`  
             fi  
             if test "x$RESTART" = x0 ; then  
                 kind="forward"  
                 test "x$ADJOINT" = xtrue  &&  kind="adjoint"  
             else  
                 kind="restart"  
             fi  
             if test "x$NOI3E" = x1 ; then  
                 OPTFILE="${OPTFILE}.noieee"  
             fi  
             if test "x$MTH" = x1 ; then  
                 yy=`echo $OPTFILE | grep -c 'mth$'`  
                 if test $yy = 0 ; then OPTFILE="${OPTFILE}+mth" ; fi  
             fi  
             day=`echo $i   | sed -e 's/_[0-9]$//' | sed -e 's/_[0-9][0-9]$//'`  
             ttt=`echo $day | sed -e 's/_[0-9]$//' | sed -e 's/_[0-9][0-9]$//'`  
             day=`echo $ttt | sed -e 's|_| |g' |awk '{print $NF}'`  
   
             if [ $day -lt $FIRSTDAY ] ; then  
                 echo "$OPTFILE$kind $day $OPTFILE $kind $i" >> ./plist  
             elif [ $day -le $LASTDAY ] ; then  
                 echo "$OPTFILE$kind $day $OPTFILE $kind $i" >> ./slist  
             else  
                 if test $dBug = 't' ; then  
                    echo "discard day='$day' from: $i" | tee -a $OUTPFIL  
                 fi  
             fi  
   
         done  
         if test $dBug = 't' ; then  
           if test $n == 1 ; then  
             echo "---- current list (n=$n) :" | tee -a $OUTPFIL  
                 cat ./slist | tee -a $OUTPFIL  
           fi  
           echo   ".... previous list (n=$n):" | tee -a $OUTPFIL  
                 cat ./plist | tee -a $OUTPFIL | head -20  
         fi  
   
       fi  
     done  
     if test $dBug = 't' ; then echo "----" | tee -a $OUTPFIL ; fi  
379    
380      #  Do we have any data?  If so, create the latest pointer.      #  Do we have any data?  If so, create the latest pointer.
381      num=`wc -l ./slist | awk '{print $1}'`      num=`wc -l ./slist | awk '{print $1}'`
# Line 302  for mname in $MACHINES ; do Line 386  for mname in $MACHINES ; do
386          for key in $keys ; do          for key in $keys ; do
387            ctot=`expr $ctot + 1`            ctot=`expr $ctot + 1`
388            sline=`grep "^$key " ./slist | head -1`            sline=`grep "^$key " ./slist | head -1`
389            sdir=`echo $sline | cut -d " " -f 5`            sdir=`echo $sline | cut -d " " -f 5`
390            kind=`echo $sline | cut -d " " -f 4`            type=`echo $sline | cut -d " " -f 4`
391            optf=`echo $sline | cut -d " " -f 3`            optf=`echo $sline | cut -d " " -f 3`
392            num=`grep -c "^$key" ./plist`            num=`grep -c "^$key" ./plist`
393              if test $num = 0 -a $monthDir = 1 ; then
394              #- add results from previous month directory to "plist".
395                monthDir=2
396                make_resdir_list
397                num=`grep -c "^$key" ./plist`
398              fi
399            #- discard unsafe test:            #- discard unsafe test:
400            dd=`echo $optf | grep -c 'gfortran.*mth'`            dd=`echo $optf | grep -c 'gfortran+mth'`
401            if test $mname = 'lagoon' -a $dd = 1 ; then num=-1 ; fi            if test $mname = 'lagoon' -a $dd = 1 ; then num=-1 ; fi
402            if test $mname = 'harbor' -a $dd = 1 ; then num=-1 ; fi            if test $mname = 'harbor' -a $dd = 1 ; then num=-1 ; fi
403            if test $mname = 'aces' -a $optf = 'linux_ia32_open64' ; then num=-1 ; fi            #if test $mname = 'aces' -a $optf = 'linux_ia32_open64' ; then num=-1 ; fi
404            if test $mname = 'aces' -a $optf = 'linux_ia32_g95' ; then num=-1 ; fi            #if test $mname = 'aces' -a $optf = 'linux_ia32_g95' ; then num=-1 ; fi
405            if test $num -gt 0 ; then            dd=`echo $optf | grep -c 'bigred.*noieee'`
406              #if test $mname = 'bigred' -a $dd = 1 ; then num=-1 ; fi
407              if test $num -lt 0 ; then
408                echo "  discard $sdir : $type , of='$optf'" | tee -a $OUTPFIL
409                cmis=`expr $cmis + 1`
410              elif test $num = '0' ; then
411                echo "no previous test for:" $key | tee -a $OUTPFIL
412                cmis=`expr $cmis + 1`
413              else
414              pline=`grep "^$key " ./plist | head -1`              pline=`grep "^$key " ./plist | head -1`
415              if test $dBug = 't' ; then              if test $dBug = 't' ; then
416                  echo "s='$sline'" | tee -a $OUTPFIL                  echo "s='$sline'" | tee -a $OUTPFIL
417                  echo "p='$pline'" | tee -a $OUTPFIL                  echo "p='$pline'" | tee -a $OUTPFIL
418              fi              fi
419              pdir=`echo $pline | cut -d " " -f 5`              pdir=`echo $pline | cut -d " " -f 5`
420              outs="$INDIR/$sdir/summary.txt"              outs="$INDIR/$sdir/summary.txt"
421              sed -n "5,$ p" $outs | sed '/^[YN] [YN] [YN] [YN]/ s/ \. //g' \              xx=`( echo 5 ; sed -n '/^  OPTFILE=/=' $outs ) | tail -1`
422                                   | sed 's/ OPTFILE=.*\// OPTFILE=/g' \              sed "1,$xx d" $outs | sed '/^[YN] [YN] [YN] [YN]/ s/ \. //g' \
423                                   | grep -v '^[A-S][a-t]* time:  ' > tmpfs                                  | grep -v '^[A-S][a-t]* time:  ' > tmpfs
424              outp="$INDIR/$pdir/summary.txt"              outp="$INDIR/$pdir/summary.txt"
425              sed -n "5,$ p" $outp | sed '/^[YN] [YN] [YN] [YN]/ s/ \. //g' \              xx=`( echo 5 ; sed -n '/^  OPTFILE=/=' $outp ) | tail -1`
426                                   | sed 's/ OPTFILE=.*\// OPTFILE=/g' \              sed "1,$xx d" $outp | sed '/^[YN] [YN] [YN] [YN]/ s/ \. //g' \
427                                   | grep -v '^[A-S][a-t]* time:  ' > tmpfp                                  | grep -v '^[A-S][a-t]* time:  ' > tmpfp
428                #-- re-order list of exp (according to local "sort" order)
429                listD=`grep '^[YN] [YN] [YN] [YN]' tmpfs | awk '{print $NF}' | sort`
430                for xx in $listD
431                do
432                    sed "/ $xx\$/d" tmpfs > tmpfn
433                    sed -n "/ $xx\$/p" tmpfs >> tmpfn
434                    mv tmpfn tmpfs
435                done
436                listD=`grep '^[YN] [YN] [YN] [YN]' tmpfp | awk '{print $NF}' | sort`
437                for xx in $listD
438                do
439                    sed "/ $xx\$/d" tmpfp > tmpfn
440                    sed -n "/ $xx\$/p" tmpfp >> tmpfn
441                    mv tmpfn tmpfp
442                done
443              echo -n "=== diff $sdir $pdir :" | tee -a $OUTPFIL              echo -n "=== diff $sdir $pdir :" | tee -a $OUTPFIL
444              diff tmpfs tmpfp > tmpdf              diff tmpfs tmpfp > tmpdf
445              yy=$?              yy=$?
446              if test $yy != '0' ; then              if test $yy != '0' ; then
447                  echo " $kind , of='$optf'" | tee -a $OUTPFIL                  echo " $type , of='$optf'" | tee -a $OUTPFIL
448                  #grep '^run: ' $outp                  #grep '^run: ' $outp
449                  #grep '^run: ' $outs                  #grep '^run: ' $outs
450                  #-- score for each test:                  #-- score for each test:
# Line 349  for mname in $MACHINES ; do Line 462  for mname in $MACHINES ; do
462                  ndf=`expr $ndf / 2`                  ndf=`expr $ndf / 2`
463                  nn=`grep -c '^---' tmpdf`                  nn=`grep -c '^---' tmpdf`
464                  ndf=`expr $ndf - $nn`                  ndf=`expr $ndf - $nn`
465                  if [ $ndf -le $NBLDIFF ] ; then                  if [ $ndf -le $NBLDIFF ] ; then
466                    cat tmpdf                    cat tmpdf
467                  else                  else
468                    echo " $ndf lines differ ( $score_s , $score_p )"                    echo " $ndf lines differ ( $score_s , $score_p )"
# Line 357  for mname in $MACHINES ; do Line 470  for mname in $MACHINES ; do
470                  echo "< "`head -1 $outs`" ( $score_s )" >> $OUTPFIL                  echo "< "`head -1 $outs`" ( $score_s )" >> $OUTPFIL
471                  echo "> "`head -1 $outp`" ( $score_p )" >> $OUTPFIL                  echo "> "`head -1 $outp`" ( $score_p )" >> $OUTPFIL
472                  cat tmpdf >> $OUTPFIL                  cat tmpdf >> $OUTPFIL
473                  if [ $cdif -eq 0 ] ; then                  if [ $cdif -eq 0 ] ; then
474                    clin=`printf '%3i (%5s,%5s)' $ndf $score_s $score_p`                    clin=`printf '%3i (%5s,%5s)' $ndf $score_s $score_p`
475                  else                  else
476                    clin="$clin,"`printf '%3i (%5s,%5s)' $ndf $score_s $score_p`                    clin="$clin,"`printf '%3i (%5s,%5s)' $ndf $score_s $score_p`
477                  fi                  fi
478                  cdif=`expr $cdif + 1`                  cdif=`expr $cdif + 1`
479                  echo '----------------------------------------' | tee -a $OUTPFIL                  echo '----------------------------------------' | tee -a $OUTPFIL
480              else              else
481                  echo "" | tee -a $OUTPFIL                  echo " $type , of='$optf'" | tee -a $OUTPFIL
482              fi              fi
483              rm -f tmpfs tmpfp tmpdf              rm -f tmpfs tmpfp tmpdf
484            elif test $num = '0' ; then            fi
             echo "no previous test for:" $key | tee -a $OUTPFIL  
             cmis=`expr $cmis + 1`  
           else  
             cmis=`expr $cmis + 1`  
           fi  
485          done          done
486          if [ $cmis -gt 0 ] ; then tmis='(-'$cmis')' ; else tmis='(--)' ; fi          if [ $cmis -gt 0 ] ; then tmis='(-'$cmis')' ; else tmis='(--)' ; fi
487          printf '%11s :  %3i      %4s   %3i  ' $mname $ctot $tmis $cdif >> $OUTPSUM          printf '%11s :  %3i      %4s   %3i  ' $sname $ctot $tmis $cdif >> $OUTPSUM
488          if [ $cdif -gt 0 ] ; then          if [ $cdif -gt 0 ] ; then
489            echo "   $clin" >> $OUTPSUM            echo "   $clin" >> $OUTPSUM
490         else echo "" >> $OUTPSUM ; fi          else echo "" >> $OUTPSUM ; fi
491      fi      fi
492    
493  done  done
Legend:
Removed from v.1.10  
changed lines
  Added in v.1.33
  ViewVC Help
Powered by ViewVC 1.1.22