tests/compare.tst

   1 #!/bin/sh
   2 #
   3 # Survex test suite - compare 2 versions of cavern on a dataset
   4 # Copyright (C) 1999-2003,2012 Olly Betts
   5 #
   6 # This program is free software; you can redistribute it and/or modify
   7 # it under the terms of the GNU General Public License as published by
   8 # the Free Software Foundation; either version 2 of the License, or
   9 # (at your option) any later version.
  10 #
  11 # This program is distributed in the hope that it will be useful,
  12 # but WITHOUT ANY WARRANTY; without even the implied warranty of
  13 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  14 # GNU General Public License for more details.
  15 #
  16 # You should have received a copy of the GNU General Public License
  17 # along with this program; if not, write to the Free Software
  18 # Foundation, Inc., 51 Franklin St, Fifth Floor, Boston, MA  02110-1301  USA
  19
  20 testdir=`echo $0 | sed 's!/[^/]*$!!' || echo '.'`
  21
  22 # allow us to run tests standalone more easily
  23 : ${srcdir="$testdir"}
  24
  25 # force VERBOSE if we're run on a subset of tests
  26 #test -n "$*" && VERBOSE=1
  27
  28 test -x "$testdir"/../src/cavern || testdir=.
  29
  30 : ${CAVERN="$testdir"/../src/cavern}
  31 : ${CAVERN_ORIG=cavern}
  32 : ${DIFFPOS="$testdir"/../src/diffpos}
  33
  34 : ${TESTS=${*-""}}
  35
  36 vg_error=123
  37 vg_log=vg.log
  38 if [ -n "$VALGRIND" ] ; then
  39   rm -f "$vg_log"
  40   CAVERN="$VALGRIND --log-file=$vg_log --error-exitcode=$vg_error $CAVERN"
  41   DIFFPOS="$VALGRIND --log-file=$vg_log --error-exitcode=$vg_error $DIFFPOS"
  42 fi
  43
  44 for file in $TESTS ; do
  45   if test -n "$file" ; then
  46     echo "$file"
  47     rm -f tmp.* tmp_orig.*
  48     if test -n "$VERBOSE" ; then
  49       $CAVERN_ORIG "$file" --output=tmp_orig | tee tmp_orig.out || exit 1
  50       $CAVERN "$file" --output=tmp | tee tmp.out
  51       exitcode=$?
  52     else
  53       $CAVERN_ORIG "$file" --output=tmp_orig > tmp_orig.out || exit 1
  54       $CAVERN "$file" --output=tmp > tmp.out
  55       exitcode=$?
  56     fi
  57     if [ -n "$VALGRIND" ] ; then
  58       if [ $exitcode = "$vg_error" ] ; then
  59         cat "$vg_log"
  60         rm "$vg_log"
  61         exit 1
  62       fi
  63       rm "$vg_log"
  64     fi
  65     [ "$exitcode" = 0 ] || exit 1
  66     warn_orig=`sed '$!d;s/^There were \([0-9]*\).*/\1/;s/^[^0-9].*$/0/' tmp_orig.out
  67     warn=`sed '$!d;s/^There were \([0-9]*\).*/\1/;s/^[^0-9].*$/0/' tmp.out`
  68     if test x"$warn_orig" != x"$warn" ; then
  69       echo "$CAVERN_ORIG gave $warn_orig warning(s)"
  70       echo "$CAVERN gave $warn warning(s)"
  71       exit 1
  72     fi
  73     if test -n "$VERBOSE" ; then
  74       $DIFFPOS tmp.3d tmp_orig.3d
  75       exitcode=$?
  76     else
  77       $DIFFPOS tmp.3d tmp_orig.3d > /dev/null
  78       exitcode=$?
  79     fi
  80     if [ -n "$VALGRIND" ] ; then
  81       if [ $exitcode = "$vg_error" ] ; then
  82         cat "$vg_log"
  83         rm "$vg_log"
  84         exit 1
  85       fi
  86       rm "$vg_log"
  87     fi
  88     [ "$exitcode" = 0 ] || exit 1
  89   fi
  90 done
  91 test -n "$VERBOSE" && echo "Test passed"
  92 exit 0