/[MITgcm]/MITgcm/verification/testreport
ViewVC logotype

Diff of /MITgcm/verification/testreport

Parent Directory Parent Directory | Revision Log Revision Log | View Revision Graph Revision Graph | View Patch Patch

revision 1.175 by jmc, Wed Aug 15 23:19:21 2012 UTC revision 1.189 by jmc, Sat Jul 20 20:32:17 2013 UTC
# Line 322  testoutput_run() Line 322  testoutput_run()
322          'AthSiG') testoutput_var $1 "thSI_Ice_Area_G" "thSIc Area Global" $2 $refoutp ; yy=$? ;;          'AthSiG') testoutput_var $1 "thSI_Ice_Area_G" "thSIc Area Global" $2 $refoutp ; yy=$? ;;
323          'AthSiS') testoutput_var $1 "thSI_Ice_Area_S" "thSIc Area South"  $2 $refoutp ; yy=$? ;;          'AthSiS') testoutput_var $1 "thSI_Ice_Area_S" "thSIc Area South"  $2 $refoutp ; yy=$? ;;
324          'AthSiN') testoutput_var $1 "thSI_Ice_Area_N" "thSIc Area North"  $2 $refoutp ; yy=$? ;;          'AthSiN') testoutput_var $1 "thSI_Ice_Area_N" "thSIc Area North"  $2 $refoutp ; yy=$? ;;
325          'HthSiG') testoutput_var $1 "thSI_IceH_ave_G" "thSIc H Global"    $2 $refoutp ; yy=$? ;;          'HthSiG') testoutput_var $1 "thSI_IceH_ave_G" "thSIc H Glob-ave"  $2 $refoutp ; yy=$? ;;
326          'HthSiS') testoutput_var $1 "thSI_IceH_ave_S" "thSIc H South"     $2 $refoutp ; yy=$? ;;          'HthSiS') testoutput_var $1 "thSI_IceH_ave_S" "thSIc H South-av"  $2 $refoutp ; yy=$? ;;
327          'HthSiN') testoutput_var $1 "thSI_IceH_ave_N" "thSIc H North"     $2 $refoutp ; yy=$? ;;          'HthSiN') testoutput_var $1 "thSI_IceH_ave_N" "thSIc H North-av"  $2 $refoutp ; yy=$? ;;
328            'HthMxS') testoutput_var $1 "thSI_IceH_max_S" "thSIc H South-max" $2 $refoutp ; yy=$? ;;
329            'HthMxN') testoutput_var $1 "thSI_IceH_max_N" "thSIc H North-max" $2 $refoutp ; yy=$? ;;
330            'StrmIc') testoutput_var $1 "STREAMICE_FP_ERR" "StreamIce Solver" $2 $refoutp ; yy=$? ;;
331                *) yy=99; echo "WARNING: asking for var=$xx : not recognized !" 1>&2 ;;                *) yy=99; echo "WARNING: asking for var=$xx : not recognized !" 1>&2 ;;
332            esac            esac
333            if test $xx = $sVar            if test $xx = $sVar
# Line 467  run_clean() Line 470  run_clean()
470              rm -f $RUNLOG *.txt STD* w2_tile_topology.????.log *diagnostics.log datetime              rm -f $RUNLOG *.txt STD* w2_tile_topology.????.log *diagnostics.log datetime
471              rm -rf mnc_test_*              rm -rf mnc_test_*
472              rm -f *_MIT_CE_000.opt0000 costfunction*0000              rm -f *_MIT_CE_000.opt0000 costfunction*0000
473                rm -f oad_cp.000.[0-9][0-9][0-9][0-9][0-9]
474              echo successful              echo successful
475              exit 0              exit 0
476          )          )
# Line 534  makemodel() Line 538  makemodel()
538              mk_fail=2              mk_fail=2
539          fi          fi
540      fi      fi
541        if test $KIND = 1 -a -f taf_ftl.log ; then
542            head -1 taf_ftl.log >> $CDIR"/summary.txt"
543        fi
544      if test $KIND = 2 -a -f taf_ad.log ; then      if test $KIND = 2 -a -f taf_ad.log ; then
545              head -1 taf_ad.log >> $CDIR"/summary.txt"          head -1 taf_ad.log >> $CDIR"/summary.txt"
546              nerr=`grep -c 'TAF *.* ERROR ' taf_ad.log`          nerr=`grep -c 'TAF *.* ERROR ' taf_ad.log`
547              nwar=`grep -c 'TAF RECOMPUTATION *.* WARNING ' taf_ad.log`          nwar=`grep -c 'TAF RECOMPUTATION *.* WARNING ' taf_ad.log`
548              echo " TAF reports $nerr Errors and $nwar Recomputation Warnings" \          if test -f taf_output ; then
549                n2er=`grep -c 'TAF *.* ERROR ' taf_output`
550                n3er=`grep -c '\*ERROR\* ' taf_output`
551                nerr=`expr $nerr + $n2er + $n3er`
552            fi
553            echo " TAF reports $nerr Errors and $nwar Recomputation Warnings" \
554                                  >> $CDIR"/summary.txt"                                  >> $CDIR"/summary.txt"
555      fi      fi
556      if test $mk_fail != 0 ; then return $mk_fail ; fi      if test $mk_fail != 0 ; then return $mk_fail ; fi
# Line 785  runmodel() Line 797  runmodel()
797              # output do not exist or is older than executable:              # output do not exist or is older than executable:
798              rm -f $OUTPUTFILE $RUNLOG ; touch $RUNLOG              rm -f $OUTPUTFILE $RUNLOG ; touch $RUNLOG
799              if test -f run.log_tmp ; then cat run.log_tmp >> $RUNLOG ; fi              if test -f run.log_tmp ; then cat run.log_tmp >> $RUNLOG ; fi
800            #- Divided Adjoint Run:
801            #  get the number of additional runs (add_DIVA_runs) from file "run_ADM_DIVA"
802                if test $KIND = 2 -a -f run_ADM_DIVA ; then
803                  adm_diva_nb=`sed -n '/^ *add_DIVA_runs\>.*=/p' run_ADM_DIVA | sed 's/ //g'`
804                  echo " Divided Adjoint Run: $adm_diva_nb" >> $RUNLOG
805                  eval "let $adm_diva_nb"
806                  if [ $add_DIVA_runs -ge 1 ] ; then
807                    rm -f costf* divided.ctrl snapshot*
808                    echo -n "(add_DIVA_runs=$add_DIVA_runs) ... "
809                    for ii in `seq 1 $add_DIVA_runs` ; do
810                      ( eval $COMMAND ) >> $RUNLOG 2>&1
811                      echo " additional DIVA run # $ii : done" >> $RUNLOG
812                      mv -f $OUTPUTFILE ${OUTPUTFILE}.diva_${ii}
813                    done
814                  fi
815                fi
816            #- special DIVA processing ends here
817              ( eval $COMMAND ) >> $RUNLOG 2>&1              ( eval $COMMAND ) >> $RUNLOG 2>&1
818              RETVAL=$?              RETVAL=$?
819              ENDVAL=`tail $OUTPUTFILE | grep -c 'PROGRAM MAIN: Execution ended Normally'`              ENDVAL=`tail $OUTPUTFILE | grep -c 'PROGRAM MAIN: Execution ended Normally'`
# Line 802  runmodel() Line 831  runmodel()
831            fi            fi
832          fi          fi
833          rm -f run.log_tmp          rm -f run.log_tmp
834          #- in all cases where OutputFile exists, report SIZE (and AD time)          #- in all cases where OutputFile exists, report SIZE and time
835          if test -f $OUTPUTFILE ; then          if test -f $OUTPUTFILE ; then
836            grep '(PID\.TID 0000\.0001)      n.. =' $OUTPUTFILE \            grep '(PID\.TID 0000\.0001)      n.. =' $OUTPUTFILE \
837                  | sed 's/(PID.TID 0000.0001)     //' >> $CDIR"/summary.txt"                  | sed 's/(PID.TID 0000.0001)   //' >> $CDIR"/summary.txt"
838            if test $KIND = 2 ; then            grep -A3 'Seconds in section "ALL' $OUTPUTFILE \
839              grep -A3 'Seconds in section "ALL' $OUTPUTFILE >> $CDIR"/summary.txt"                  | sed 's/(PID.TID 0000.0001)   //' >> $CDIR"/summary.txt"
           fi  
840          fi          fi
841          if test -s STDERR.0000 ; then cp STDERR.0000 $CDIR"/STDERR.0000" ; fi          if test -s STDERR.0000 ; then cp STDERR.0000 $CDIR"/STDERR.0000" ; fi
842          if [ $RETVAL -eq 0 -a $ENDVAL -gt 0 ] ; then          if [ $RETVAL -eq 0 -a $ENDVAL -gt 0 ] ; then
# Line 910  formatresults() Line 938  formatresults()
938          fi          fi
939      fi      fi
940      printf '  %s' $nm      printf '  %s' $nm
941        if test $KIND = 2 ; then
942            #-- apppend taf repport summary:
943            tafrep=`grep -c '^ TAF reports ' $CDIR/summary.txt`
944            if test $tafrep = 1 ; then
945                grep '^ TAF reports ' $CDIR/summary.txt | awk '{printf "  (e=%i, w=%i)",$3,$6}'
946            fi
947        fi
948      printf '\n'      printf '\n'
949    
950  }  }
# Line 1278  else Line 1313  else
1313  fi  fi
1314    
1315  #  create the FORTRAN comparison code  #  create the FORTRAN comparison code
1316  if test -x tr_cmpnum ; then  if test "x$CLEANUP" = xt -o -x tr_cmpnum ; then
1317      echo "skipping comparison code build"      echo "skipping comparison code build"
1318  else  else
1319      createcodelet      createcodelet
# Line 1294  fi Line 1329  fi
1329  #  Create a uniquely named directory to store results  #  Create a uniquely named directory to store results
1330  CMDLINE=$0  CMDLINE=$0
1331  for xx in "$@" ; do nw=`echo $xx | wc -w`  for xx in "$@" ; do nw=`echo $xx | wc -w`
1332      if test $nw = '1' ; then CMDLINE="$CMDLINE $xx"      if test $nw = '1' ; then CMDLINE="$CMDLINE $xx" ; else
1333                          else CMDLINE="$CMDLINE '$xx'" ; fi        nb=`echo $xx | grep -c '='`
1334          if test $nb = 0 ; then CMDLINE="$CMDLINE '$xx'"
1335          else yy=`echo "$xx'" | sed "s/=/='/"` ;
1336                                 CMDLINE="$CMDLINE $yy" ; fi
1337        fi
1338  done  done
1339  #for xx in "$@" ; do CMDLINE="$CMDLINE '$xx'" ; done  #for xx in "$@" ; do CMDLINE="$CMDLINE '$xx'" ; done
1340  MACH=`hostname`  MACH=`hostname`
# Line 1342  if test "x$OPTFILE" != xNONE ; then Line 1381  if test "x$OPTFILE" != xNONE ; then
1381          echo >> $SUMMARY          echo >> $SUMMARY
1382          echo "  OPTFILE=$OPTFILE" >> $SUMMARY          echo "  OPTFILE=$OPTFILE" >> $SUMMARY
1383      else      else
1384          echo | tee $SUMMARY          echo | tee -a $SUMMARY
1385          echo "ERROR: can't read OPTFILE=\"$OPTFILE\"" | tee $SUMMARY          echo "ERROR: can't read OPTFILE=\"$OPTFILE\"" | tee -a $SUMMARY
1386          exit 1          exit 1
1387      fi      fi
1388  else  else
# Line 1370  if test $KIND = 0 ; then Line 1409  if test $KIND = 0 ; then
1409  else  else
1410      line_0=`printf '%s %2i' 'default   ' $MATCH_CRIT`      line_0=`printf '%s %2i' 'default   ' $MATCH_CRIT`
1411    if test $KIND = 1 ; then    if test $KIND = 1 ; then
1412      echo "TANGLIN=true" >> $SUMMARY     #echo "TANGLIN=true" >> $SUMMARY
1413        echo "TangLin generated by TAF" >> $SUMMARY
1414      elif test $KIND = 3 ; then
1415        echo "TangLin generated by OpenAD" >> $SUMMARY
1416      elif test $KIND = 2 ; then
1417       #echo "ADJOINT=true" >> $SUMMARY
1418        echo "Adjoint generated by TAF" >> $SUMMARY
1419      else
1420        echo "Adjoint generated by OpenAD" >> $SUMMARY
1421      fi
1422      if test $KIND = 1 -o $KIND = 3 ; then
1423      line_1="G D M    C  T  F"      line_1="G D M    C  T  F"
1424      line_2="e p a R  o  L  D"      line_2="e p a R  o  L  D"
1425    else    else
     echo "ADJOINT=true" >> $SUMMARY  
1426      line_1="G D M    C  A  F"      line_1="G D M    C  A  F"
1427      line_2="e p a R  o  d  D"      line_2="e p a R  o  d  D"
1428    fi    fi
# Line 1382  else Line 1430  else
1430      line_4="2 d e n  t  r  r"      line_4="2 d e n  t  r  r"
1431      echo >> $SUMMARY      echo >> $SUMMARY
1432  fi  fi
1433    if test "x$CLEANUP" != xt ; then
1434      echo "$line_0" | tee -a $SUMMARY      echo "$line_0" | tee -a $SUMMARY
1435      echo "$line_1" | tee -a $SUMMARY      echo "$line_1" | tee -a $SUMMARY
1436      echo "$line_2" | tee -a $SUMMARY      echo "$line_2" | tee -a $SUMMARY
1437      echo "$line_3" | tee -a $SUMMARY      echo "$line_3" | tee -a $SUMMARY
1438      echo "$line_4" | tee -a $SUMMARY      echo "$line_4" | tee -a $SUMMARY
1439      echo ""        | tee -a $SUMMARY      echo ""        | tee -a $SUMMARY
1440    fi
1441  echo "-------------------------------------------------------------------------------"  echo "-------------------------------------------------------------------------------"
1442    
1443  #  ...and each test directory...  #  ...and each test directory...
# Line 1496  for dir in $TESTDIRS ; do Line 1546  for dir in $TESTDIRS ; do
1546      #  Check whether there are "extra runs" for this testdir      #  Check whether there are "extra runs" for this testdir
1547      extra_runs=      extra_runs=
1548      if test "x$NORUN" = xf ; then      if test "x$NORUN" = xf ; then
1549          ex_run_dirs=`( cd $dir ; echo $inputdir.* )`          ex_run_dirs=`( cd $dir ; ls -d $inputdir.* 2> /dev/null )`
1550      fi      fi
1551      #echo "ex_run_dirs='$ex_run_dirs'"      #echo "ex_run_dirs='$ex_run_dirs'"
1552      for exd in $ex_run_dirs ; do      for exd in $ex_run_dirs ; do
1553          name=`echo $exd | sed -e "s/$inputdir\.//"`          name=`echo $exd | sed -e "s/$inputdir\.//"`
1554          refExOut=`echo $ref_outp | sed "s/\./.${name}./"`          refExOut=`echo $ref_outp | sed "s/\./.${name}./"`
1555          outf="$dir/results/$refExOut"          outf="$dir/results/$refExOut"
         #if test -f $outf -a -r $outf ; then  
1556          if test -r $outf -o -r ${outf}.gz ; then          if test -r $outf -o -r ${outf}.gz ; then
1557            if test "x$MULTI_THREAD" = "xt" ; then            if test "x$MULTI_THREAD" = "xt" ; then
1558              if test -r $dir"/"$exd"/eedata.mth" ; then              if test -r $dir"/"$exd"/eedata.mth" ; then
# Line 1587  for dir in $TESTDIRS ; do Line 1636  for dir in $TESTDIRS ; do
1636              linkdata $dir/$pfxdir.$ex $inputdir.$ex $inputdir              linkdata $dir/$pfxdir.$ex $inputdir.$ex $inputdir
1637              runmodel $dir/$pfxdir.$ex && run=Y \              runmodel $dir/$pfxdir.$ex && run=Y \
1638              && results=`testoutput_run $dir $pfxdir.$ex $refExOut`              && results=`testoutput_run $dir $pfxdir.$ex $refExOut`
1639              fres=`formatresults $dir ${genmake:-N} ${makedepend:-N} ${make:-N} ${run:-N} $results`              fres=`formatresults $dir.$ex ${genmake:-N} ${makedepend:-N} ${make:-N} ${run:-N} $results`
             fres="$fres.$ex"  
1640              echo 1>&2              echo 1>&2
1641              echo "$fres" | sed 's/ 99/ --/g' | sed 's/  > />/' | sed 's/  < /</' >> $SUMMARY              echo "$fres" | sed 's/ 99/ --/g' | sed 's/  > />/' | sed 's/  < /</' >> $SUMMARY
1642              echo "fresults='$fres'" | sed 's/ 99/ --/g' >> $locDIR"/summary.txt"              echo "fresults='$fres'" | sed 's/ 99/ --/g' >> $locDIR"/summary.txt"
# Line 1597  for dir in $TESTDIRS ; do Line 1645  for dir in $TESTDIRS ; do
1645              fi              fi
1646          done          done
1647    
1648      if test -f $DRESULTS"/"genmake_state ; then : ; else      if test ! -f $DRESULTS"/"genmake_state ; then
1649          if test -f $dir/$builddir/Makefile ; then          if test -f $dir/$builddir/Makefile ; then
1650              mkOpt=`grep '^# OPTFILE=' $dir/$builddir/Makefile 2>/dev/null | head -1 | sed 's/^# //'`              mkOpt=`grep '^# OPTFILE=' $dir/$builddir/Makefile 2>/dev/null | head -1 | sed 's/^# //'`
1651              echo "from '$dir/$builddir/Makefile', extract:" > $DRESULTS/genmake_state              echo "from '$dir/$builddir/Makefile', extract:" > $DRESULTS/genmake_state
# Line 1606  for dir in $TESTDIRS ; do Line 1654  for dir in $TESTDIRS ; do
1654              if test "x$OPTFILE" = xNONE ; then              if test "x$OPTFILE" = xNONE ; then
1655                  eval $mkOpt                  eval $mkOpt
1656                  sed "/^No \"OPTFILE\" was specified ; genmake2/a\  OPTFILE=${OPTFILE}"\                  sed "/^No \"OPTFILE\" was specified ; genmake2/a\  OPTFILE=${OPTFILE}"\
1657                          $SUMMARY > tr_0.tmp_log                          $SUMMARY > tmp.tr_log
1658                  RETVAL=$?                  RETVAL=$?
1659                  if test "x$RETVAL" = x0 ; then rm -f $SUMMARY                  if test "x$RETVAL" = x0 ; then rm -f $SUMMARY
1660                          cp tr_0.tmp_log $SUMMARY                          cp tmp.tr_log $SUMMARY
1661                  else rm -f tr_0.tmp_log                  else rm -f tmp.tr_log
1662                  fi                  fi
1663              fi              fi
1664              gmkLog=$dir/$builddir/genmake.log              gmkLog=$dir/$builddir/genmake.log
1665              grep '^Get compiler version using:' $gmkLog > /dev/null 2>&1              if test -r $gmkLog ; then
1666              RETVAL=$?                  grep '^Get compiler version using:' $gmkLog > /dev/null 2>&1
1667              if test "x$RETVAL" = x0 ; then                  RETVAL=$?
1668                  echo "from '$gmkLog', extract compiler version:" >> $DRESULTS/genmake_state                  if test "x$RETVAL" = x0 ; then
1669                  sed -n '/Get compiler version/,/<-- compiler version/p' $gmkLog \                    echo -n "from '$gmkLog', " >> $DRESULTS/genmake_state
1670                          | grep -v '^... compiler version ' > tr_1.tmp_log                    echo "extract compiler version:"   >> $DRESULTS/genmake_state
1671                  sed -n '1p' tr_1.tmp_log >> $DRESULTS/genmake_state                    sed -n '/Get compiler version/,/<-- compiler version/p' \
1672                  sed -n '2,/^$/p' tr_1.tmp_log | sed '/^$/d' | sed 's/^./ &/' \                       $gmkLog | grep -v '^... compiler version ' > tmp.tr_log
1673                          >> $DRESULTS/genmake_state                    sed -n '1p' tmp.tr_log >> $DRESULTS/genmake_state
1674                  rm -f tr_1.tmp_log                    sed -n '2,/^$/p' tmp.tr_log | sed '/^$/d' | sed 's/^./ &/' \
1675                                             >> $DRESULTS/genmake_state
1676                      rm -f tmp.tr_log
1677                    fi
1678                    echo -n "from '$gmkLog', " >> $DRESULTS/genmake_state
1679                    echo "get NETCDF & LAPACK settings:" >> $DRESULTS/genmake_state
1680                    sed -n '/set HAVE_NETCDF=/p' $gmkLog >> $DRESULTS/genmake_state
1681                    sed -n '/set HAVE_LAPACK=/p' $gmkLog >> $DRESULTS/genmake_state
1682              fi              fi
1683          fi          fi
1684      fi      fi
# Line 1685  fi Line 1740  fi
1740  if test "x$DELDIR" = xt ; then  if test "x$DELDIR" = xt ; then
1741      rm -rf $DRESULTS      rm -rf $DRESULTS
1742  fi  fi
1743    echo "======== End of testreport execution ========"
Legend:
Removed from v.1.175  
changed lines
  Added in v.1.189
  ViewVC Help
Powered by ViewVC 1.1.22