.travis.yml

   1 # PLEASE NOTE: Travis is not currently utilised by the Moodle core integration
   2 # process (which uses our internal CI system) this file is here for the benefit
   3 # of community developers git clones - see MDL-51458.
   4
   5 sudo: required
   6
   7 # We currently disable Travis notifications entirely until https://github.com/travis-ci/travis-ci/issues/4976
   8 # is fixed.
   9 notifications:
  10   email: false
  11
  12 language: php
  13
  14 php:
  15     # We only run the highest and lowest supported versions to reduce the load on travis-ci.org.
  16     - 7.3
  17     - 7.1
  18
  19 addons:
  20   postgresql: "9.6"
  21   packages:
  22     - mysql-server-5.6
  23     - mysql-client-core-5.6
  24     - mysql-client-5.6
  25
  26 env:
  27     # Although we want to run these jobs and see failures as quickly as possible, we also want to get the slowest job to
  28     # start first so that the total run time is not too high.
  29     #
  30     # We only run MySQL on PHP 7.2, so run that first.
  31     # CI Tests should be second-highest in priority as these only take <= 60 seconds to run under normal circumstances.
  32     # Postgres is significantly is pretty reasonable in its run-time.
  33
  34     # Run CI Tests without running PHPUnit.
  35     - DB=none     TASK=CITEST
  36
  37     # Run unit tests on Postgres
  38     - DB=pgsql    TASK=PHPUNIT
  39
  40     # Perform an upgrade test too.
  41     - DB=pgsql    TASK=UPGRADE
  42
  43 matrix:
  44     # Enable fast finish.
  45     # This will fail the build if a single job fails (except those in allow_failures).
  46     # It will not stop the jobs from running.
  47     fast_finish: true
  48
  49     include:
  50           # Run mysql only on 7.3 - it's just too slow
  51         - php: 7.3
  52           env: DB=mysqli   TASK=PHPUNIT
  53           # Run grunt/npm install on highest version ('node' is an alias for the latest node.js version.)
  54         - php: 7.2
  55           env: DB=none     TASK=GRUNT   NVM_VERSION='lts/carbon'
  56
  57 cache:
  58     directories:
  59       - $HOME/.composer/cache
  60       - $HOME/.npm
  61
  62 before_install:
  63     # Avoid IPv6 default binding as service (causes redis not to start).
  64     sudo service redis-server start --bind 127.0.0.1
  65
  66 install:
  67     - >
  68         if [ "$DB" = 'mysqli' ];
  69         then
  70             sudo mkdir /mnt/ramdisk
  71             sudo mount -t tmpfs -o size=1024m tmpfs /mnt/ramdisk
  72             sudo stop mysql
  73             sudo mv /var/lib/mysql /mnt/ramdisk
  74             sudo ln -s /mnt/ramdisk/mysql /var/lib/mysql
  75             sudo start mysql
  76         fi
  77     - >
  78         if [ "$DB" = 'pgsql' ];
  79         then
  80             sudo mkdir /mnt/ramdisk
  81             sudo mount -t tmpfs -o size=1024m tmpfs /mnt/ramdisk
  82             sudo service postgresql stop
  83             sudo mv /var/lib/postgresql /mnt/ramdisk
  84             sudo ln -s /mnt/ramdisk/postgresql /var/lib/postgresql
  85             sudo service postgresql start 9.6
  86         fi
  87     - >
  88         if [ "$TASK" = 'PHPUNIT' ];
  89         then
  90             if [ -n "$GITHUB_APITOKEN" ]; then
  91                 composer config github-oauth.github.com $GITHUB_APITOKEN;
  92                 echo 'auth.json' >> .git/info/exclude
  93             fi
  94
  95             echo 'extension="redis.so"' > /tmp/redis.ini
  96             phpenv config-add /tmp/redis.ini
  97
  98             # Install composer dependencies.
  99             # We need --no-interaction in case we hit API limits for composer. This causes it to fall back to a standard clone.
 100             # Typically it should be able to use the Composer cache if any other job has already completed before we started here.
 101             travis_retry composer install --prefer-dist --no-interaction;
 102         fi
 103
 104     - >
 105         if [ "$TASK" = 'GRUNT' ];
 106         then
 107             nvm install $NVM_VERSION ;
 108             nvm use $NVM_VERSION ;
 109         fi
 110
 111 before_script:
 112     - phpenv config-rm xdebug.ini
 113     - >
 114       if [ "$TASK" = 'PHPUNIT' -o "$TASK" = 'UPGRADE' ];
 115       then
 116         # Copy generic configuration in place.
 117         cp config-dist.php config.php ;
 118
 119         # Create the moodledata directory.
 120         mkdir -p "$HOME"/roots/base
 121
 122         # The database name and password.
 123         sed -i \
 124           -e "s%= 'moodle'%= 'travis_ci_test'%" \
 125           -e "s%= 'password'%= ''%" \
 126           config.php ;
 127
 128         # The wwwroot and dataroot.
 129         sed -i \
 130           -e "s%http://example.com/moodle%https://localhost%" \
 131           -e "s%/home/example/moodledata%/home/travis/roots/base%" \
 132           config.php ;
 133
 134         if [ "$DB" = 'pgsql' ];
 135         then
 136           # Postgres-specific setup.
 137           sed -i \
 138             -e "s%= 'username'%= 'postgres'%" \
 139             config.php ;
 140
 141           psql -c 'CREATE DATABASE travis_ci_test;' -U postgres;
 142         fi
 143
 144         if [ "$DB" = 'mysqli' ];
 145         then
 146           # MySQL-specific setup.
 147           sed -i \
 148             -e "s%= 'pgsql'%= 'mysqli'%" \
 149             -e "s%= 'username'%= 'travis'%" \
 150             -e "s%=> 'utf8mb4_unicode_ci'%=> 'utf8mb4_bin'%" \
 151             config.php;
 152
 153           mysql -u root -e 'SET GLOBAL innodb_file_format=barracuda;' ;
 154           mysql -u root -e 'SET GLOBAL innodb_file_per_table=ON;' ;
 155           mysql -u root -e 'SET GLOBAL innodb_large_prefix=ON;' ;
 156           mysql -e 'CREATE DATABASE travis_ci_test DEFAULT CHARACTER SET utf8mb4 DEFAULT COLLATE utf8mb4_bin;' ;
 157         fi
 158       fi
 159
 160     - >
 161       if [ "$TASK" = 'PHPUNIT' ];
 162       then
 163         # Create a directory for the phpunit dataroot.
 164         mkdir -p "$HOME"/roots/phpunit
 165
 166         # The phpunit dataroot and prefix..
 167         sed -i \
 168           -e "/require_once/i \\\$CFG->phpunit_dataroot = '\/home\/travis\/roots\/phpunit';" \
 169           -e "/require_once/i \\\$CFG->phpunit_prefix = 'p_';" \
 170           config.php ;
 171         # Redis cache store tests
 172         sed -i \
 173           -e "/require_once/i \\define('TEST_CACHESTORE_REDIS_TESTSERVERS', '127.0.0.1');" \
 174           config.php ;
 175         # Redis session tests, but not for PHP 7.2 and up. See MDL-60978 for more info.
 176         redissession="if (version_compare(PHP_VERSION, '7.2.0', '<')) { define('TEST_SESSION_REDIS_HOST', '127.0.0.1'); }"
 177         sed -i \
 178           -e "/require_once/i \\${redissession}" \
 179           config.php ;
 180
 181         # Initialise PHPUnit for Moodle.
 182         php admin/tool/phpunit/cli/init.php
 183       fi
 184
 185     - >
 186       if [ "$TASK" = 'GRUNT' ];
 187       then
 188         npm install --no-spin;
 189         npm install --no-spin -g grunt ;
 190       fi
 191
 192     ########################################################################
 193     # CI Tests
 194     ########################################################################
 195     - >
 196       if [ "$TASK" = 'CITEST' ];
 197       then
 198         # Note - this is deliberately placed in the script section as we
 199         # should not add any code until after phpunit has run.
 200
 201         # The following repositories are required.
 202         # The local_ci repository does the actual checking.
 203         git clone https://github.com/moodlehq/moodle-local_ci.git local/ci
 204
 205         # We need the official upstream for comparison
 206         git remote add upstream https://github.com/moodle/moodle.git;
 207
 208         git fetch upstream MOODLE_37_STABLE;
 209         export GIT_PREVIOUS_COMMIT="`git merge-base FETCH_HEAD $TRAVIS_COMMIT`";
 210         export GIT_COMMIT="$TRAVIS_COMMIT";
 211         export UPSTREAM_FETCH_HEAD=`git rev-parse FETCH_HEAD`
 212
 213         # Variables required by our linter.
 214         export gitcmd=`which git`;
 215         export gitdir="$TRAVIS_BUILD_DIR";
 216         export phpcmd=`which php`;
 217       fi
 218
 219     ########################################################################
 220     # Upgrade test
 221     ########################################################################
 222     - >
 223       if [ "$TASK" = 'UPGRADE' ];
 224       then
 225         # We need the official upstream.
 226         git remote add upstream https://github.com/moodle/moodle.git;
 227
 228         # Checkout 30 STABLE branch (the first version compatible with PHP 7.x)
 229         git fetch upstream MOODLE_30_STABLE;
 230         git checkout MOODLE_30_STABLE;
 231
 232         # Perform the upgrade
 233         php admin/cli/install_database.php --agree-license --adminpass=Password --adminemail=admin@example.com --fullname="Upgrade test" --shortname=Upgrade;
 234
 235         # Return to the previous commit
 236         git checkout -;
 237
 238         # Perform the upgrade
 239         php admin/cli/upgrade.php --non-interactive --allow-unstable ;
 240
 241         # The local_ci repository can be used to check upgrade savepoints.
 242         git clone https://github.com/moodlehq/moodle-local_ci.git local/ci ;
 243       fi
 244
 245 script:
 246     - >
 247       if [ "$TASK" = 'PHPUNIT' ];
 248       then
 249         vendor/bin/phpunit --fail-on-risky --disallow-test-output --verbose;
 250       fi
 251
 252     - >
 253       if [ "$TASK" = 'CITEST' ];
 254       then
 255         bash local/ci/php_lint/php_lint.sh;
 256       fi
 257
 258     - >
 259       if [ "$TASK" = 'GRUNT' ];
 260       then
 261         grunt ;
 262         # Add all files to the git index and then run diff --cached to see all changes.
 263         # This ensures that we get the status of all files, including new files.
 264         # We ignore npm-shrinkwrap.json to make the tasks immune to npm changes.
 265         git add . ;
 266         git reset -- npm-shrinkwrap.json ;
 267         git diff --cached --exit-code ;
 268       fi
 269
 270     ########################################################################
 271     # Upgrade test
 272     ########################################################################
 273     - >
 274       if [ "$TASK" = 'UPGRADE' ];
 275       then
 276         cp local/ci/check_upgrade_savepoints/check_upgrade_savepoints.php ./check_upgrade_savepoints.php
 277         result=`php check_upgrade_savepoints.php`;
 278         # Check if there are problems
 279         count=`echo "$result" | grep -P "ERROR|WARN" | wc -l` ;
 280         if (($count > 0));
 281         then
 282           echo "$result"
 283           exit 1 ;
 284         fi
 285       fi