/[MITgcm]/mitgcm.org/front_content/make_summary
ViewVC logotype

Diff of /mitgcm.org/front_content/make_summary

Parent Directory Parent Directory | Revision Log Revision Log | View Revision Graph Revision Graph | View Patch Patch

revision 1.66 by jmc, Tue Jun 28 18:31:20 2011 UTC revision 1.86 by jmc, Tue Jan 5 23:12:46 2021 UTC
# Line 5  Line 5 
5  #  The purpose of this script is to create HTML summaries of the  #  The purpose of this script is to create HTML summaries of the
6  #  directories produced by the "parse_emails" script.  #  directories produced by the "parse_emails" script.
7    
   
8  usage()  usage()
9  {  {
10      echo      echo
11      echo "Usage:  $0 [OPTIONS]"      echo "Usage:  $0 [OPTIONS]"
12      echo      echo
13      echo "where possible OPTIONS are:"      echo "where possible OPTIONS are:"
14      echo "  (-help|-h)           print usage"      echo "  (-help|-h)           print usage"
15      echo "  (-date |-d )PERIOD   run for PERIOD=\"YYYY_MM\""      echo "  (-date |-d )PERIOD   run for PERIOD=\"YYYY_MM\""
16      echo "                         [def=\"$PERIOD\"]"      echo "                         [def=\"$PERIOD\"]"
17      echo      echo
18      exit 1      exit 1
19  }  }
20    
# Line 30  for ac_option ; do Line 29  for ac_option ; do
29    
30      # If the previous option needs an argument, assign it.      # If the previous option needs an argument, assign it.
31      if test -n "$ac_prev"; then      if test -n "$ac_prev"; then
32          eval "$ac_prev=\$ac_option"          eval "$ac_prev=\$ac_option"
33          ac_prev=          ac_prev=
34          continue          continue
35      fi      fi
36    
37      ac_optarg=`expr "x$ac_option" : 'x[^=]*=\(.*\)'`      ac_optarg=`expr "x$ac_option" : 'x[^=]*=\(.*\)'`
38    
39      case $ac_option in      case $ac_option in
40            
41          -help | --help | -h | --h)          -help | --help | -h | --h)
42              usage ;;              usage ;;
           
         -date | --date | -d | --d)  
             ac_prev=PERIOD ;;  
         --date=* | -date=*)  
             PERIOD=$ac_optarg ;;  
43    
44          *)          -date | --date | -d | --d)
45                ac_prev=PERIOD ;;
46            --date=* | -date=*)
47                PERIOD=$ac_optarg ;;
48    
49            *)
50              echo "Error: don't understand argument \"$ac_option\""              echo "Error: don't understand argument \"$ac_option\""
51              usage              usage
52              ;;              ;;
53    
54       esac       esac
55    
# Line 64  OUTDIR="/u/u0/httpd/html/testing/summary Line 63  OUTDIR="/u/u0/httpd/html/testing/summary
63  OUTFILE=$OUTDIR"/output_"$PERIOD".html"  OUTFILE=$OUTDIR"/output_"$PERIOD".html"
64  res_url="http://mitgcm.org/testing/"  res_url="http://mitgcm.org/testing/"
65    
66    #TMP=./mksum_$$
67    #- try to put temporary files in system-local /tmp dir
68    TMP=/tmp/mksum_$$
69    touch $TMP ; retVal=$?
70    if [ $retVal -eq 0 ] ; then
71      if test ! -r $TMP ; then TMP=./mksum_$$ ; fi
72    else
73      TMP=./mksum_$$
74    fi
75    rm -f $TMP
76    # echo "temp files: $TMP"
77    
78  #  Create the links in $OUTFILE :  #  Create the links in $OUTFILE :
79  echo "Creating the \"latest\" file for each machine: "  echo "Creating the \"latest\" file for each machine: "
80  the_date=`date`  the_date=`date`
# Line 85  EOF Line 96  EOF
96  color="#bbffdd"  color="#bbffdd"
97  ncolor="#bbddff"  ncolor="#bbddff"
98    
99  MACHINES="faulks meander aces baudelaire dickens danton beagle harbor"  MACHINES="villon baudelaire batsi engaging svante glacier"
100  MACHINES="$MACHINES pleiades iblade rays solasrv sx8"  MACHINES="$MACHINES ollie stan1 pleiades archer"
 MACHINES="$MACHINES trane dodongo dokdo stomp bigred"  
101    
102  ( cd $INDIR ; ls -1 -t */summary.txt | sed 's/\/summary.txt//' ) > ./dir_all  ( cd $INDIR ; ls -1 -t */summary.txt | sed 's/\/summary.txt//' ) > $TMP.dir_all
103    
104  MALL=`cat ./dir_all | sed -e 's|_| |g' | awk '{print $2}' | sort | uniq`  MALL=`cat $TMP.dir_all | sed -e 's|_| |g' | awk '{print $2}' | sort | uniq`
105  for madd in $MALL ; do  for madd in $MALL ; do
106      present=0      present=0
107      for m in $MACHINES ; do      for m in $MACHINES ; do
108          echo $madd | grep $m > /dev/null 2>&1          echo $madd | grep $m > /dev/null 2>&1
109          RETVAL=$?          RETVAL=$?
110          test $RETVAL = 0  &&  present=1          test $RETVAL = 0  &&  present=1
111          continue          continue
112      done      done
113      test $present = 0  &&  MACHINES="$MACHINES $madd"      test $present = 0  &&  MACHINES="$MACHINES $madd"
114  done  done
115  #MACHINES="faulks"  #MACHINES="baudelaire"
116    
117  for mname in $MACHINES ; do  for mname in $MACHINES ; do
118    
119      echo "  $mname"      echo "  $mname"
120    
121      dir_list=`grep $mname ./dir_all`      dir_list=`grep $mname $TMP.dir_all`
122      echo -n "" > ./mlist      echo -n "" > $TMP.mlist
123    
124      for i in $dir_list ; do      for i in $dir_list ; do
125    
# Line 135  for mname in $MACHINES ; do Line 145  for mname in $MACHINES ; do
145              OPTFILE="not_explicitly_specified"              OPTFILE="not_explicitly_specified"
146          fi          fi
147    
148          ADJOINT=          # EXTRA = non-standard list of experiment
149            ADJOINT=0
150            TANGLIN=0
151            OPENAD=0
152          RESTART=0          RESTART=0
153            Special=0
154            EXTRA=
155          FAST=0          FAST=0
156          DVLP=0          DVLP=0
157            MPI=0
158          MTH=0          MTH=0
159          UR4=0          UR4=0
160          if test -r $dir/summary.txt ; then          if test -r $dir/summary.txt ; then
161              comm=`grep 'ADJOINT=true' $dir/summary.txt 2>/dev/null`              ADJOINT=`grep -c -i '^ADJOINT' $dir/summary.txt`
162              eval $comm              if test "x$ADJOINT" = x1 ; then
163                  OPENAD=`grep -c '^Adjoint .* OpenAD' $dir/summary.txt`
164                fi
165                TANGLIN=`grep -c -i '^TANGLIN' $dir/summary.txt`
166                if test "x$TANGLIN" = x1 ; then
167                  OPENAD=`grep -c '^TangLin .* OpenAD' $dir/summary.txt`
168                fi
169              RESTART=`grep -c 'test 2+2=4 summary' $dir/summary.txt`              RESTART=`grep -c 'test 2+2=4 summary' $dir/summary.txt`
170              FAST=`grep -c "^run: .*testreport.* '*-fast'*" $dir/summary.txt`              #- special label for "darwin" tests
171                Special=`echo $i | grep -c '\-darwin[0-9]'`
172                if test $Special != 0 ; then
173                    Special=`echo $i | sed -e "s/.*$mname/$mname/" -e "s/_/ /g" -e "s/-/ /g"`
174                    Special=`echo $Special | awk '{print $2}' | sed 's/darwin//'`
175                fi
176                comm=`grep '^run: .*testreport.* ' $dir/summary.txt`
177                EXTRA=`echo "$comm" | grep " -*-tdir\>" | sed -e "s/^.* -*-tdir\>//" -e "s/ -.*$//"`
178                if test "x$EXTRA" = x ; then
179                    EXTRA=`echo "$comm" | grep " -*-t\>" | sed -e "s/^.*-*-t\>//" -e "s/ -.*$//"`
180                fi
181                if test "x$EXTRA" = x ; then EXTRA=0 ; else
182                    #echo -n "EXTRA=$EXTRA"
183                    nn0=`echo $EXTRA | sed "s/ *' *//g" | wc -w`
184                    nn1=`echo $EXTRA | sed "s/ *' *//g" | tr ' ' '\n' | grep -c "\<darwin_"`
185                    nn2=`echo $EXTRA | sed "s/ *' *//g" | tr ' ' '\n' | grep -c "\<monod_"`
186                    EXTRA=9
187                    if [ $nn1 -ge 2 ] ; then EXTRA=1 ; fi
188                    if [ $nn2 -ge 2 ] ; then EXTRA=2 ; fi
189                    #echo " : nn0=$nn0 ; nn1=$nn1 ; nn2=$nn2"
190                fi
191                FAST=`echo "$comm" | grep -c " -*-fast\>"`
192              if test "x$FAST" = x0 ; then              if test "x$FAST" = x0 ; then
193                FAST=`grep -c "^run: .*testreport.* '*-noieee'*" $dir/summary.txt`                  FAST=`echo "$comm" | grep -c " '*-noieee'*"`
194              fi              fi
195              DVLP=`grep -c "^run: .*testreport.* '*-devel'*" $dir/summary.txt`              DVLP=`echo "$comm" | grep -c " -*-devel\>"`
196              MTH=`grep -c "^run: .*testreport.* -mth " $dir/summary.txt`              MPI=`echo "$comm" | grep -c " -*-mpi\>"`
197              UR4=`grep -c "^run: .*testreport.* -use_r4 " $dir/summary.txt`              if test "x$MPI" = x0 ; then
198                    MPI=`echo "$comm" | grep -c " -*-MPI\>"`
199                fi
200                MTH=`echo "$comm" | grep -c " -*-mth\>"`
201                UR4=`echo "$comm" | grep -c " -*-use_r4\>"`
202              if test "x$UR4" = x0 ; then              if test "x$UR4" = x0 ; then
203                 UR4=`grep -c "^run: .*testreport.* -ur4 " $dir/summary.txt`                  UR4=`echo "$comm" | grep -c " -*-ur4\>"`
204              fi              fi
205          fi          else EXTRA=0 ; fi
206          if test "x$RESTART" = x0 ; then          if test "x$ADJOINT" = x1 ; then
207              kind="forward"              kind="adjoint-taf" ; order=0
208              test "x$ADJOINT" = xtrue  &&  kind="adjoint"            if test "x$OPENAD" = x1 ; then
209                kind="adjoint-oad" ; order=2
210              fi
211            elif test "x$TANGLIN" = x1 ; then
212                kind="tanglin-taf" ; order=1
213              if test "x$OPENAD" = x1 ; then
214                kind="tanglin-oad" ; order=3
215              fi
216            elif test "x$RESTART" = x0 ; then
217                kind="forward" ; order=4
218          else          else
219              kind="restart"              kind="restart" ; order=5
220          fi          fi
221          if test "x$UR4" = x1 ; then          if test "x$UR4" = x1 ; then
222              OPTFILE="${OPTFILE}.use_r4"              OPTFILE="${OPTFILE}.use_r4"
223          fi          fi
224            if test "x$MPI" = x1 ; then
225                yy=`echo $OPTFILE | grep -c '+mpi'`
226                if test $yy = 0 ; then yy=`echo $OPTFILE | grep -c '+impi'` ; fi
227                if test $yy = 0 ; then OPTFILE="${OPTFILE}+mpi"
228                                  else order=`expr $order + 200` ; fi
229            fi
230          if test "x$MTH" = x1 ; then          if test "x$MTH" = x1 ; then
231              yy=`echo $OPTFILE | grep -c '+mth$'`              yy=`echo $OPTFILE | grep -c '+mth$'`
232              if test $yy = 0 ; then OPTFILE="${OPTFILE}+mth" ; fi              if test $yy = 0 ; then OPTFILE="${OPTFILE}+mth" ; fi
# Line 175  for mname in $MACHINES ; do Line 237  for mname in $MACHINES ; do
237          if test "x$DVLP" = x1 ; then          if test "x$DVLP" = x1 ; then
238              OPTFILE="${OPTFILE}.dvlp"              OPTFILE="${OPTFILE}.dvlp"
239          fi          fi
240            if [ $Special -eq 0 ] ; then
241                order=`expr $order + 10 \* $EXTRA`
242            else
243                order=`expr $order + 10 \* $Special`
244            fi
245            order=`printf '%3.3i' $order`
246    
247          t_pass="--"          t_pass="--"
248          t_tot="--"          t_tot="--"
# Line 194  for mname in $MACHINES ; do Line 262  for mname in $MACHINES ; do
262          DAY=`cat ./ms_tmp | awk '(length($1)==8 && substr($1,0,2)=="20")'`          DAY=`cat ./ms_tmp | awk '(length($1)==8 && substr($1,0,2)=="20")'`
263          rm -f ./ms_tmp          rm -f ./ms_tmp
264    
265          echo "$OPTFILE$kind $DAY $OPTFILE $kind $i $t_pass:$t_tot" >> ./mlist          echo "$OPTFILE$order $DAY $OPTFILE $kind $i $t_pass:$t_tot" >> $TMP.mlist
266    
267      done      done
268    
269      # helpful for debugging      # helpful for debugging
270      # cat ./mlist      # cat $TMP.mlist
271    
272      #  Do we have any data?  If so, create the latest pointer.      #  Do we have any data?  If so, create the latest pointer.
273      num=`wc -l ./mlist | awk '{print $1}'`      num=`wc -l $TMP.mlist | awk '{print $1}'`
274      if test $num -gt 0 ; then      if test $num -gt 0 ; then
275    
276          # swap colors          # swap colors
277          ctmp=$color          ctmp=$color
278          color=$ncolor          color=$ncolor
279          ncolor=$ctmp          ncolor=$ctmp
280    
281          keys=`cat ./mlist | cut -d " " -f 1 | sort | uniq`          keys=`cat $TMP.mlist | cut -d " " -f 1 | sort | uniq`
282    
283          for key in $keys ; do          for key in $keys ; do
284              tline=`grep "^$key " ./mlist | head -1`              tline=`grep "^$key " $TMP.mlist | head -1`
285              ratio=`echo $tline | cut -d " " -f 6`              ratio=`echo $tline | cut -d " " -f 6`
286              ldir=`echo $tline | cut -d " " -f 5`              ldir=`echo $tline | cut -d " " -f 5`
287              kind=`echo $tline | cut -d " " -f 4`              kind=`echo $tline | cut -d " " -f 4`
288              optf=`echo $tline | cut -d " " -f 3`              optf=`echo $tline | cut -d " " -f 3`
289              DAY=`echo $tline | cut -d " " -f 2`              DAY=`echo $tline | cut -d " " -f 2`
290              URL="results/$PERIOD/$ldir"              URL="results/$PERIOD/$ldir"
291                #-- machine name to print:
292                sname=`echo $mname | sed 's/-$//'`
293                alt=`echo $key | sed "s/$optf//"`
294               #if   [ $alt -ge 30 ] ; then sname="${sname}.darwin"
295               #elif [ $alt -ge 20 ] ; then sname="${sname}.monod" ; fi
296              cat <<EOF >>$OUTFILE              cat <<EOF >>$OUTFILE
297  <tr bgcolor="$color">  <tr bgcolor="$color">
298    <td height="0"> $mname </td>    <td height="0"> $sname </td>
299    <td> $optf </td>    <td> $optf </td>
300    <td> $kind </td>    <td> $kind </td>
301    <td> <a href="$res_url$URL">$DAY</a> </td>    <td> <a href="$res_url$URL">$DAY</a> </td>
# Line 243  cat >> $OUTFILE << EOF Line 316  cat >> $OUTFILE << EOF
316      </table>      </table>
317    
318  <p>Examples of the scripts used for these testing runs can be obtained from: <a  <p>Examples of the scripts used for these testing runs can be obtained from: <a
319  href="http://mitgcm.org/viewvc/MITgcm/MITgcm/tools/example_scripts/">  href="http://mitgcm.org/viewvc/MITgcm/MITgcm_contrib/test_scripts/">
320  MITgcm/tools/example_scripts</a>.</p>  MITgcm_contrib/test_scripts</a>.</p>
   
321    
322    </body>    </body>
323  </html>  </html>
324    
325  EOF  EOF
326    
327  rm -f ./dir_all ./mlist  rm -f $TMP.dir_all $TMP.mlist
328    
329  #- put the file in place  #- put the file in place
330  chgrp gcmpack $OUTFILE  chgrp gcmpack $OUTFILE
Legend:
Removed from v.1.66  
changed lines
  Added in v.1.86
  ViewVC Help
Powered by ViewVC 1.1.22