tests/ChangeLog

   1 2011-08-29  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/features/varnesting: Test resetting of variables while
   4         expanding them.  See Savannah patch #7534
   5
   6 2011-06-12  Paul Smith  <psmith@gnu.org>
   7
   8         * scripts/features/archives: Check archives with whitespace at the
   9         beginning, end, and extra in the middle.
  10         Another test for Savannah bug #30612.
  11
  12 2011-05-07  Paul Smith  <psmith@gnu.org>
  13
  14         * scripts/variables/private: Ensure we skip private variables when
  15         appending.  Test for Savannah bug #32872.
  16
  17         * scripts/functions/wildcard: Verify wildcard used to test for
  18         file existence/non-existence.
  19
  20 2011-05-02  Paul Smith  <psmith@gnu.org>
  21
  22         * scripts/functions/sort: Add a test for Savannah bug #33125.
  23
  24 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
  25
  26         * scripts/features/shell_assignment: Regression for "!=" feature
  27
  28 2010-11-06  Paul Smith  <psmith@gnu.org>
  29
  30         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
  31         * scripts/functions/call: Ditto.
  32         * scripts/variables/special: Ditto.
  33
  34         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
  35
  36 2010-08-29  Paul Smith  <psmith@gnu.org>
  37
  38         * scripts/features/errors: Add new error message to output text.
  39         * scripts/variables/SHELL: Ditto.
  40         * scripts/targets/POSIX: Ditto.
  41         * scripts/options/dash-k: Ditto.
  42         * scripts/features/vpathplus: Ditto.
  43         * scripts/features/patternrules: Ditto.
  44         * scripts/features/parallelism: Ditto.
  45
  46 2010-08-13  Paul Smith  <psmith@gnu.org>
  47
  48         * scripts/features/archives: New regression tests for archive
  49         support.  Test for fix to Savannah bug #30612.
  50
  51         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
  52         the features available in $(.FEATURES).
  53
  54 2010-08-10  Paul Smith  <psmith@gnu.org>
  55
  56         * scripts/features/reinvoke: Ensure command line variable settings
  57         are preserved across make re-exec.  Tests Savannah bug #30723.
  58
  59 2010-07-28  Paul Smith  <psmith@gnu.org>
  60
  61         * scripts/targets/POSIX: Compatibility issues with Solaris (and
  62         Tru64?); "false" returns different exit codes, and set -x shows
  63         output with extra whitespace.  Run the commands by hand first to
  64         find out what the real shell would do, then compare what make does.
  65         * scripts/variables/SHELL: Ditto.
  66
  67 2010-07-12  Paul Smith  <psmith@gnu.org>
  68
  69         * test_driver.pl: Add a new $perl_name containing the path to Perl.
  70         * run_make_tests.pl (run_make_test): Replace the special string
  71         #PERL# in a makefile etc. with the path the Perl executable so
  72         makefiles can use it.
  73
  74         * scripts/targets/ONESHELL: Add a new set of regression tests for
  75         the .ONESHELL feature.
  76
  77 2010-07-06  Paul Smith  <psmith@gnu.org>
  78
  79         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
  80
  81         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
  82         Verify that enabling .POSIX changes the shell flags to set -e.
  83
  84 2010-07-01  Paul Smith  <psmith@gnu.org>
  85
  86         * scripts/features/recursion: Add a space to separate command-line
  87         args.  Fixes Savannah bug #29968.
  88
  89 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
  90
  91         * scripts/features/vpath3: Test for the new library search
  92         behavior.
  93
  94 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
  95
  96         * scripts/features/se_explicit: Enable the test for now fixed
  97         Savannah bug 25780.
  98
  99 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 100
 101         * scripts/variables/undefine: Tests for the new undefine feature.
 102
 103 2009-10-03  Paul Smith  <psmith@gnu.org>
 104
 105         * scripts/features/parallelism: Test for open Savannah bug #26846.
 106
 107         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
 108
 109         * scripts/variables/MAKEFLAGS: Created.
 110         Add test for Savannah bug #2216 (still open).
 111
 112         * scripts/features/include: Test for Savannah bug #102 (still open).
 113
 114 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
 115
 116         * scripts/features/include: Add diagnostics issuing tests for
 117         cases where targets have been updated and failed with the
 118         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
 119
 120 2009-09-28  Paul Smith  <psmith@gnu.org>
 121
 122         * scripts/functions/shell: Add regression test for Savannah bug
 123         #20513 (still open).
 124
 125         * scripts/features/se_explicit: Add regression tests for Savannah
 126         bug #25780 (still open).
 127
 128         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
 129         that runs tests we know will fail.  This allows us to add
 130         regression tests to the test suite for bugs that haven't been
 131         fixed yet.
 132
 133 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
 134
 135         * scripts/features/patspecific_vars: Add a test for the shortest
 136         stem first order.
 137
 138         * scripts/features/patternrules: Add a test for the shortest stem
 139         first order.
 140
 141 2009-09-24  Paul Smith  <psmith@gnu.org>
 142
 143         * scripts/features/se_implicit: Add a test for order-only
 144         secondary expansion prerequisites.
 145
 146 2009-09-23  Paul Smith  <psmith@gnu.org>
 147
 148         * scripts/features/patternrules: Test that we can remove pattern
 149         rules, both single and multiple prerequisites.  Savannah bug #18622.
 150
 151         * scripts/features/echoing: Rework for run_make_test().
 152
 153 2009-06-14  Paul Smith  <psmith@gnu.org>
 154
 155         * scripts/features/vpath: Verify we don't get bogus circular
 156         dependency warnings if we choose a different file via vpath during
 157         update.  Savannah bug #13529.
 158
 159 2009-06-13  Paul Smith  <psmith@gnu.org>
 160
 161         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
 162         files (and files included by them) don't set the default goal.
 163         Savannah bug #13401.
 164
 165         * scripts/functions/wildcard: Test that wildcards with
 166         non-existent glob matchers return empty.
 167
 168 2009-06-09  Paul Smith  <psmith@gnu.org>
 169
 170         * scripts/options/dash-B: Test the $? works correctly with -B.
 171         Savannah bug #17825.
 172
 173         * scripts/features/patternrules: Test that dependencies of
 174         "also_make" targets are created properly.  Savannah bug #19108.
 175
 176         * test_driver.pl (compare_output): Create a "run" file for failed
 177         tests containing the command that was run.
 178         (get_runfile): New function.
 179
 180         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
 181         allow memcheck and massif tools.
 182
 183         * scripts/features/patternrules: Have to comment out a line in the
 184         first test due to backing out a change that broke the implicit
 185         rule search algorithm.  Savannah bug #17752.
 186         * scripts/misc/general4: Remove a test that is redundant with
 187         patternrules.
 188
 189         * scripts/features/parallelism: Add a test for re-exec with
 190         jobserver master override.  Savannah bug #18124.
 191
 192 2009-06-08  Paul Smith  <psmith@gnu.org>
 193
 194         * scripts/features/targetvars: Add a test for continued target
 195         vars after a semicolon.  Savannah bug #17521.
 196
 197 2009-06-07  Paul Smith  <psmith@gnu.org>
 198
 199         * scripts/features/se_explicit: Make sure we catch defining
 200         prereqs during snap_deps().  Savannah bug #24622.
 201
 202         * scripts/variables/automatic: Check prereq ordering when the
 203         target with the recipe has no prereqs.  Savannah bug #21198.
 204
 205         * scripts/variables/LIBPATTERNS: Add a new set of test for
 206         $(.LIBPATTERNS) (previously untested!)
 207
 208 2009-06-04  Paul Smith  <psmith@gnu.org>
 209
 210         * scripts/variables/SHELL: The export target-specific SHELL test
 211         has an incorrect known-good-value.
 212
 213         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
 214
 215         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
 216
 217 2009-05-31  Paul Smith  <psmith@gnu.org>
 218
 219         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 220
 221         * scripts/features/targetvars: Add tests of overrides for Savannah
 222         bug #26207.
 223         * scripts/features/patspecific_vars: Ditto.
 224
 225         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 226
 227 2009-05-30  Paul Smith  <psmith@gnu.org>
 228
 229         * scripts/variables/flavors: Update with new variable flavor tests.
 230         * scripts/variables/define: Create a new set of tests for
 231         define/endef and move those aspects of the flavors suite here.
 232
 233 2009-05-25  Paul Smith  <psmith@gnu.org>
 234
 235         * scripts/features/targetvars: Ditto.
 236
 237         * scripts/features/export: Test new variable parsing abilities.
 238
 239 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 240
 241         * scripts/variables/private: Create a new suite of tests for 'private'.
 242
 243 2007-11-04  Paul Smith  <psmith@gnu.org>
 244
 245         * scripts/functions/eval: Update error message for command -> recipe.
 246
 247         * test_driver.pl (compare_output): Allow the answer to be a regex,
 248         if surrounded by '/'.
 249         * scripts/misc/close_stdout: Use a regex for the answer, since
 250         sometimes the error will have a description and sometimes it won't.
 251
 252 2007-09-10  Paul Smith  <psmith@gnu.org>
 253
 254         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 255
 256 2007-08-15  Paul Smith  <psmith@gnu.org>
 257
 258         These test cases were contributed by
 259         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 260         Savannah bugs #3330 and #15919.
 261
 262         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 263         15919.
 264
 265         * scripts/features/parallelism: Add tests for wrong answer/hang
 266         combining INTERMEDIATE, order-only prereqs, and parallelism.
 267         See Savannah bugs 3330 and 15919.
 268
 269 2007-07-13  Paul Smith  <psmith@gnu.org>
 270
 271         Install a timeout so tests can never loop infinitely.
 272         Original idea and patch for a single-test version provided by
 273         Icarus Sparry <savannah@icarus.freeuk.com>
 274
 275         * test_driver.pl (_run_command): New function: this is called by
 276         other functions to actually run a command.  Before we run it,
 277         install a SIGALRM handler and set up a timer to go off in the
 278         future (default is 5s; this can be overridden by individual tests).
 279         (run_command): Call it.
 280         (run_command_with_output): Call it.
 281
 282         * run_make_tests.pl (run_make_with_options): Override the default
 283         timeout if the caller requests it.
 284         (run_make_test): Pass any timeout override to run_make_with_options.
 285
 286         * scripts/features/parallelism: Increase the timeout for long tests.
 287         * scripts/options/dash-l: Ditto.
 288
 289 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 290
 291         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 292         ENV here.  This doesn't always work.
 293         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 294         environment.  Fixes Savannah bug #16698.
 295
 296 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 297
 298         * scripts/variables/automatic: Add back the test for bug #8154.
 299
 300 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 301
 302         * scripts/functions/realpath: Don't run tests with multiple
 303         initial slashes on Windows: those paths mean something different.
 304
 305 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 306
 307         * scripts/features/parallelism: Test that the jobserver is
 308         properly managed when we have to re-exec the master instance of
 309         make.
 310
 311 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 312
 313         * scripts/features/statipattrules: Add tests for bug #16053.
 314
 315 2006-03-09  Paul Smith  <psmith@gnu.org>
 316
 317         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 318         with DOS drive letters.  Fixes Savannah bug #15947.
 319
 320         * test_driver.pl (run_each_test): Set the status properly even
 321         when a test fails to execute.  Fixes Savannah bug #15942.
 322
 323         * scripts/functions/foreach: Use a different environment variable
 324         other than PATH to avoid differences with Windows platforms.
 325         Fixes Savannah bug #15938.
 326
 327 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 328
 329         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 330         type W32.  Fixed Savannah bug #15937.
 331
 332         * scripts/features/default_names: Don't call error() when the test
 333         fails.  Fixes Savannah bug #15941.
 334
 335 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 336
 337         * scripts/features/targetvars: Test a complex construction which
 338         guarantees that we have to merge variable lists of different
 339         sizes.  Tests for Savannah bug #15757.
 340
 341 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 342
 343         * scripts/functions/error: Make sure filename/lineno information
 344         is related to where the error is expanded, not where it's set.
 345         * scripts/functions/warning: Ditto.
 346         * scripts/functions/foreach: Check for different error conditions.
 347         * scripts/functions/word: Ditto.
 348         * scripts/variables/negative: Test some variable reference failure
 349         conditions.
 350         * scripts/options/warn-undefined-variables: Test the
 351         --warn-undefined-variables flag.
 352
 353 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 354
 355         * run_make_tests.pl (set_more_defaults): Update valgrind support
 356         for newer versions.
 357         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 358         beginning with ".").
 359
 360         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 361         functions.
 362
 363 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 364
 365         * scripts/features/parallelism: Add a test for bug #15641.
 366
 367 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 368
 369         * scripts/options/dash-W: Add a test for bug #15341.
 370
 371 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 372
 373         * scripts/variables/automatic: Add a test for bug #8154.
 374
 375         * README: Update to reflect the current state of the test suite.
 376
 377 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 378
 379         * scripts/features/parallelism, scripts/functions/wildcard,
 380         scripts/targets/FORCE, scripts/targets/PHONY,
 381         scripts/targets/SILENT: Use the default setting for
 382         $delete_command.  Fixes bug #15085.
 383
 384         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 385
 386 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 387
 388         * scripts/misc/general4: Test implicit rules with '$' in the
 389         prereq list & prereq patterns.
 390         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 391
 392 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 393
 394         * scripts/features/patternrules: Add a test for bug #13022.
 395
 396 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 397
 398         * scripts/features/double_colon: Add a test for bug #14334.
 399
 400 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 401
 402         * scripts/functions/flavor: Add a test for the flavor function.
 403
 404 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 405
 406         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 407         special variable.
 408
 409 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 410
 411         * scripts/misc/general4: Test '$$' in prerequisites list.
 412         * scripts/features/statipattrules: Rewrite to use run_make_test().
 413         Add various static pattern info.
 414         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 415         * scripts/features/se_explicit: Add tests for handling '$$' in
 416         prerequisite lists with and without setting .SECONDEXPANSION.
 417         * scripts/features/order_only: Convert to run_make_test().
 418         * run_make_tests.pl (set_more_defaults): If we can't get the value
 419         of $(MAKE) from make, then fatal immediately.
 420
 421 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 422
 423         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 424         an eval to trap errors) and if it exists, use POSIX::getcwd to
 425         find the working directory.  If it doesn't exist, go back to the
 426         previous methods.  This tries to be more accurate on Windows
 427         systems.
 428
 429 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 430
 431         * scripts/functions/abspath: Add some text to the error messages
 432         to get a better idea of what's wrong.  Make warnings instead of
 433         errors.
 434
 435         * scripts/features/patspecific_vars: Don't use "test", which is
 436         UNIX specific.  Print the values and let the test script match
 437         them.
 438
 439 2005-08-25  Paul Smith  <psmith@gnu.org>
 440
 441         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 442         former works better with non-UNIX environments.  Fixes Savannah
 443         bug #14129.
 444
 445 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 446
 447         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 448         $(sort) so that the resulting order is no longer filesystem-
 449         dependant.
 450
 451 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 452
 453         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 454
 455 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 456
 457         * scripts/features/parallelism: Add a test for a bug reported by
 458         Michael Matz (matz@suse.de) in which make exits without waiting
 459         for all its children in some situations during parallel builds.
 460
 461 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 462
 463         * test_driver.pl: Reset the environment to a clean value every
 464         time before we invoke make.  I'm suspicious that the environment
 465         isn't handled the same way in Windows as it is in UNIX, and some
 466         variables are leaking out beyond the tests they are intended for.
 467         Create an %extraENV hash tests can set to add more env. vars.
 468         * tests/scripts/features/export: Change to use %extraENV.
 469         * tests/scripts/functions/eval: Ditto.
 470         * tests/scripts/functions/origin: Ditto.
 471         * tests/scripts/options/dash-e: Ditto.
 472         * tests/scripts/variables/SHELL: Ditto.
 473
 474 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 475
 476         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 477         files.
 478         * scripts/features/reinvoke: Rewrite to be safer on systems with
 479         subsecond timestamps.
 480         * scripts/features/patternrules: False exits with different error
 481         codes on different systems (for example, Linux => 1, Solaris => 255).
 482
 483         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 484         to be sure it will be considered updated when it's remade.
 485
 486 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 487
 488         * scripts/functions/shell: New test suite for the shell function.
 489
 490 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 491
 492         * scripts/features/include: Test include/-include/sinclude with no
 493         arguments.  Tests fix for Savannah bug #1761.
 494
 495         * scripts/misc/general3: Implement comprehensive testing of
 496         backslash-newline behavior in command scripts: various types of
 497         quoting, fast path / slow path, etc.
 498         Tests fix for Savannah bug #1332.
 499
 500         * scripts/options/symlinks: Test symlinks to non-existent files.
 501         Tests fix for Savannah bug #13280.
 502
 503         * scripts/misc/general3: Test semicolons in variable references.
 504         Tests fix for Savannah bug #1454.
 505
 506         * scripts/variables/MAKE_RESTARTS: New file: test the
 507         MAKE_RESTARTS variable.
 508         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 509         Tests fix for Savannah bug #7566.
 510         * scripts/options/dash-W: New file: test the -W flag, including
 511         re-exec infinite looping.
 512
 513 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 514
 515         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 516         This test only works on systems that have /dev/full (e.g., Linux).
 517
 518 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 519
 520         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 521
 522 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 523
 524         * scripts/features/include: Add a test for Savannah bug #13216.
 525         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 526
 527 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 528
 529         * scripts/features/conditionals: Add tests for the new if... else
 530         if... endif syntax.
 531
 532 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 533
 534         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 535         DEFAULT_GOAL.
 536
 537 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 538
 539         * scripts/features/parallelism: Add a test for exporting recursive
 540         variables containing $(shell ) calls.  Rewrite this script to use
 541         run_make_test() everywhere.
 542
 543 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 544
 545         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 546
 547 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 548
 549         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 550
 551 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 552
 553         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 554
 555 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 556
 557         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 558         bug #12266.
 559
 560 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 561
 562         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 563
 564 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 565
 566         * scripts/features/se_implicit: Add a test for stem
 567         termination bug. Add a test for stem triple-expansion bug.
 568
 569         * scripts/features/se_statpat: Add a test for stem
 570         triple-expansion bug.
 571
 572         * scripts/features/statipattrules: Change test #4 to reflect
 573         new way empty prerequisite list is handled.
 574
 575
 576 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 577
 578         * scripts/features/statipattrules: Add a test for
 579         Savannah bug #12180.
 580
 581 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 582
 583         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 584
 585         * scripts/options/symlinks: New file to test checking of symlink
 586         timestamps.  Can't use filename dash-L because it conflicts with
 587         dash-l on case-insensitive filesystems.
 588
 589         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 590         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 591         unique filenames.
 592
 593 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 594
 595         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 596         special variable.
 597
 598 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 599
 600         * scripts/features/se_explicit: Test the second expansion in
 601         explicit rules.
 602         * scripts/features/se_implicit: Test the second expansion in
 603         implicit rules.
 604         * scripts/features/se_statpat: Test the second expansion in
 605         static pattern rules.
 606         * scripts/variables/automatic: Fix to work with the second
 607         expansion.
 608
 609         * scripts/misc/general4: Add a test for bug #12091.
 610
 611 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 612
 613         * scripts/functions/eval: Check that eval of targets within
 614         command scripts fails.  See Savannah bug # 12124.
 615
 616 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 617
 618         * test_driver.pl (compare_output): If a basic comparison of the
 619         log and answer doesn't match, try harder: change all backslashes
 620         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 621
 622 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 623
 624         * scripts/features/recursion: Test command line variable settings:
 625         only one instance of a given variable should be provided.
 626
 627 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 628
 629         * tests/scripts/functions/abspath: New file: test `abspath'
 630         built-in function.
 631
 632         * tests/scripts/functions/realpath: New file: test `realpath'
 633         built-in function.
 634
 635 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 636
 637         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 638         this doesn't really test anything useful in UNIX but...
 639
 640         * scripts/variables/SHELL: New file: test proper handling of SHELL
 641         according to POSIX rules.  Fixes bug #1276.
 642
 643 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 644
 645         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 646
 647 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 648
 649         * scripts/features/patspecific_vars: Test simple/recursive
 650         variable expansion.
 651
 652 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 653
 654         * scripts/features/include: Test dontcare flag inheritance
 655         when rebuilding makefiles.
 656
 657 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 658
 659         * scripts/features/patspecific_vars: Test exported variables.
 660
 661 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 662
 663         * run_make_tests.pl (run_make_test): Don't add newlines to the
 664         makestring or answer if they are completely empty.
 665
 666         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 667
 668         * scripts/test_template: Rework the template.
 669
 670 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 671
 672         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 673         `#!/usr/bin/env perl'.
 674
 675         * scripts/features/implicit_prereq_eval: Test implicit rule
 676         prerequisite evaluation code.
 677
 678 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 679
 680         * run_make_tests.pl (run_make_test): Enhance to allow the make
 681         string to be undef: in that case it reuses the previous make
 682         string.  Allows multiple tests on the same makefile.
 683
 684         * scripts/variables/flavors: Add some tests for prefix characters
 685         interacting with define/endef variables.
 686
 687 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 688
 689         * scripts/functions/substitution: Rewrite to use run_make_test()
 690         interface, and add test for substitution failures reported by
 691         Markus Mauhart <qwe123@chello.at>.
 692
 693 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 694
 695         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 696         to track both the testing categories _AND_ the number of
 697         individual tests, and report both sets of numbers.
 698
 699 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 700
 701         * scripts/functions/origin: Set our own environment variable
 702         rather than relying on $HOME.
 703
 704 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 705
 706         * scripts/features/conditionals: Test arguments to ifn?def which
 707         contain whitespace (such as a function that is evaluated).  Bug
 708         #7257.
 709
 710 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 711
 712         * scripts/features/order_only: Test order-only prerequisites in
 713         pattern rules (patch #2349).
 714
 715 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 716
 717         * scripts/functions/if: Test if on conditionals with trailing
 718         whitespace--bug #5798.
 719
 720         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 721
 722 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 723
 724         * scripts/features/patspecific_vars: Test multiple patterns
 725         matching the same target--Bug #1405.
 726
 727 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 728
 729         * run_make_tests.pl (set_more_defaults): A new $port_type of
 730         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 731         for OS/2.
 732
 733 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 734
 735         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 736         not prerequisites)--Bug #2515.
 737
 738 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 739
 740         * scripts/features/targetvars: Test very long target-specific
 741         variable definition lines (longer than the default make buffer
 742         length).  Tests patch # 1022.
 743
 744         * scripts/functions/eval: Test very recursive $(eval ...) calls
 745         with simple variable expansion (bug #2238).
 746
 747         * scripts/functions/word: Test error handling for word and
 748         wordlist functions (bug #2407).
 749
 750 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 751
 752         * scripts/functions/call: Test recursive argument masking (bug
 753         #1744).
 754
 755 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 756
 757         * scripts/functions/eval: Test using $(eval ...) inside
 758         conditionals (Bug #1516).
 759
 760 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 761
 762         * scripts/options/dash-t: Add a test for handling -t on targets
 763         with no commands (Bug #1418).
 764
 765 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 766
 767         * scripts/features/targetvars: Add a test for exporting
 768         target-specific vars (Bug #1391).
 769
 770 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 771
 772         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 773         and $${@F}.
 774
 775 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 776
 777         * scripts/features/escape: Test handling of escaped comment
 778         characters in targets and prerequisites.
 779
 780 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 781
 782         * scripts/features/export: Test export/unexport of multiple
 783         variables in a single command.
 784
 785 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 786
 787         * scripts/features/targetvars: Tests for Bug #940: test
 788         target-specific and pattern-specific variables in conjunction with
 789         double-colon targets.
 790
 791 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 792
 793         * test_driver.pl (compare_output): Match the new format for time
 794         skew error messages.
 795
 796         * scripts/features/export: Created.  Add tests for export/unexport
 797         capabilities, including exporting/unexporting expanded variables.
 798
 799         * scripts/features/conditionals: Add a test for expanded variables
 800         in ifdef conditionals.
 801
 802 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 803
 804         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 805         invocations.
 806         * scripts/features/vpathgpath: Ditto.
 807         * scripts/features/vpathplus: Ditto.
 808         * scripts/options/dash-n: Ditto.
 809         * scripts/targets/INTERMEDIATE: Ditto.
 810         * scripts/targets/SECONDARY: Ditto.
 811
 812         * scripts/options/dash-t: Added a test for the -t bug fixed by
 813         Henning Makholm.  This test was also contributed by Henning.
 814
 815         * scripts/misc/general4: Add a test suite for obscure algorithmic
 816         features of make.  First test: make sure creation subdirectories
 817         as prerequisites of targets works properly.
 818
 819         * scripts/misc/version: Remove this bogus test.
 820
 821 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 822
 823         * scripts/misc/general3: Add a test for makefiles that don't end
 824         in newlines.
 825
 826         * scripts/variables/special: Create tests for the special
 827         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 828         for now as it's not yet supported.
 829
 830 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 831
 832         * scripts/options/dash-B: Add a test for the new -B option.
 833
 834 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 835
 836         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 837         -valgrind option to the test suite.
 838         (set_more_defaults): Set up the file descriptor to capture
 839         Valgrind output.  We have to unset its close-on-exec flag; we
 840         hardcode the value for F_SETFD (2) rather than load it; hopefully
 841         this will help us avoid breaking the Windows/DOS test suite.
 842
 843 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 844
 845         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 846         $$(@F).
 847
 848         * test_driver.pl (utouch): Create a new function that creates a
 849         file with a specific timestamp offset.  Use of this function will
 850         let us avoid lots of annoying sleep() invocations in the tests
 851         just to get proper timestamping, which will make the tests run a
 852         lot faster.  So far it's only used in the automatic test suite.
 853
 854 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 855
 856         * scripts/variables/automatic: Create a test for automatic variables.
 857
 858 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 859
 860         * scripts/features/order_only: Test new order-only prerequisites.
 861
 862 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 863
 864         * scripts/functions/eval: Test new function.
 865         * scripts/functions/value: Test new function.
 866         * scripts/variables/MAKEFILE_LIST: Test new variable.
 867
 868 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 869
 870         * scripts/functions/call: New test: transitive closure
 871         implementation using $(call ...) to test variable recursion.
 872
 873 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 874
 875         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 876         directories in the script directories.
 877
 878 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 879
 880         * scripts/variables/flavors: Test define/endef scripts where only
 881         one of the command lines is quiet.
 882
 883 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 884
 885         * scripts/options/dash-q: New file; test the -q option.  Includes
 886         a test for PR/1780.
 887
 888 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 889
 890         * scripts/features/targetvars: Added a test for PR/1709: allowing
 891         semicolons in target-specific variable values.
 892
 893 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 894
 895         * scripts/functions/addsuffix: Test for an empty final argument.
 896         Actually this bug might have happened for any function, but this
 897         one was handy.
 898
 899 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 900
 901         * scripts/options/general: If parallel jobs are not supported,
 902         expect a warning message from Make.
 903
 904 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 905
 906         * scripts/options/general: Don't try -jN with N != 1 if parallel
 907         jobs are not supported.
 908
 909 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 910
 911         * scripts/options/general: Test general option processing (PR/1716).
 912
 913 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 914
 915         * scripts/functions/strip: Test empty value to strip (PR/1689).
 916
 917 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 918
 919         * scripts/features/reinvoke: Sleep before updating the target
 920         files in the first test, to ensure its time stamp really gets
 921         newer; otherwise Make might re-exec more than once.
 922
 923 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 924
 925         * scripts/features/double_colon: Don't run the parallel tests if
 926         parallel jobs aren't supported.
 927
 928 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 929
 930         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 931
 932 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 933
 934         * scripts/features/statipattrules: Test that static pattern rules
 935         whose prerequisite patterns resolve to empty strings throw an
 936         error (instead of dumping core).  Fixes PR/1670.
 937
 938         * scripts/features/reinvoke: Make more robust by touching "b"
 939         first, to ensure it's not newer than "a".
 940         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 941         * scripts/options/dash-n: Ditto.
 942
 943         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 944         recursive invocations of $(call ...) to break.  I can't come up
 945         with any way to get both working at the same time, so I backed out
 946         the fix to 1527 and added a test case for recursive calls.  This
 947         also tests the fix for PR/1610.
 948
 949         * scripts/features/double_colon: Test that circular dependencies
 950         in double-colon rule sets are detected correctly (PR/1671).
 951
 952 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 953
 954         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 955         .INTERMEDIATE files when given on the command line (PR/1669).
 956
 957 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 958
 959         * scripts/options/dash-k: Add a test for error detection by
 960         multiple targets depending on the same prerequisite with -k.
 961         For PR/1634.
 962
 963 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 964
 965         * scripts/features/escape: Add a test for backslash-escaped spaces
 966         in a target name (PR/1586).
 967
 968 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 969
 970         * scripts/features/patspecific_vars: Add a test for pattern-specific
 971         target variables inherited from the parent target (PR/1407).
 972
 973 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 974
 975         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 976         to make sure sorting order, etc. is predictable.
 977         Reported by Andreas Jaeger <aj@suse.de>.
 978
 979         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 980         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 981         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 982         1 for other systems.
 983         * scripts/features/vpathplus (touchfiles): Use the $wtime value
 984         instead of hardcoding 2.
 985         * scripts/targets/SECONDARY: Ditto.
 986         * scripts/targets/INTERMEDIATE: Ditto.
 987
 988 2000-01-27  Paul D. Smith  <psmith@gnu.org>
 989
 990         * test_driver.pl (toplevel): Don't try to run test scripts which
 991         are really directories.
 992
 993 2000-01-23  Paul D. Smith  <psmith@gnu.org>
 994
 995         * scripts/features/include: Remove a check; the fix caused more
 996         problems than the error, so I removed it and removed the test for
 997         it.
 998
 999 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1000
1001         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1002         sure $(call ...) doesn't eval its arguments and that you can
1003         invoke foreach from it without looping forever.
1004
1005 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1006
1007         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1008         .INTERMEDIATE settings on files don't disable them as implicit
1009         intermediate possibilities.
1010
1011 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1012
1013         * scripts/features/double_colon: Add a test for PR/1476: Try
1014         double-colon rules as non-goal targets and during parallel builds
1015         to make sure they're handled serially.
1016
1017 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1018
1019         * scripts/functions/if: Add a test for PR/1429: put some text
1020         after an if-statement to make sure it works.
1021
1022         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1023         in target-specific variable definitions correctly.
1024
1025 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1026
1027         * scripts/variables/MAKEFILES: This was really broken: it didn't
1028         test anything at all, really.  Rewrote it, plus added a test for
1029         PR/1394.
1030
1031 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1032
1033         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1034         behave properly when used with recursive targets".
1035
1036 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1037
1038         * scripts/features/targetvars: Add a check for PR/1378:
1039         "Target-specific vars don't inherit correctly"
1040
1041 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1042
1043         * test_driver.pl (get_osname): Change $fancy_file_names to
1044         $short_filenames and reverse the logic.
1045         (run_each_test): Change test of non-existent $port_host to use
1046         $short_filenames--problem reported by Eli Zaretskii.
1047
1048 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1049
1050         * scripts/features/parallelism: Add a check to ensure that the
1051         jobserver works when we re-invoke.  Also cleaned up the tests a
1052         little, reducing the number of rules we use so the test won't need
1053         as many "sleep" commands.
1054
1055 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1056
1057         * scripts/features/reinvoke: Remove invocations of "touch" in
1058         makefiles.  See the comments on the touch function rewrite below.
1059         Note that UNIX touch behaves the same way if the file already
1060         exists: it sets the time to the _local_ time.  We don't want
1061         this.  This is probably a good tip for makefile writers in
1062         general, actually... where practical.
1063         * scripts/options/dash-l: Ditto.
1064         * scripts/options/dash-n: Ditto.
1065
1066         * test_driver.pl (run_each_test): In retrospect, I don't like the
1067         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1068         changed it back to use .log, .base, and .diff.
1069
1070         * run_make_tests.pl (set_more_defaults): Move the check for the
1071         make pathname to here from set_defaults (that's too early since it
1072         happens before the command line processing).
1073         Create a new variable $port_type, calculated from $osname, to
1074         specify what kind of system we're running on.  We should integrate
1075         the VOS stuff here, too.
1076         (valid_option): Comment out the workdir/-work stuff so people
1077         won't be fooled into thinking it works... someone needs to fix
1078         this, though!
1079
1080         * scripts/functions/origin: Use $port_type instead of $osname.
1081         * scripts/functions/foreach: Ditto.
1082         * scripts/features/default_names: Ditto.
1083
1084 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1085
1086         * test_driver.pl (touch): Rewrite this function.  Previously it
1087         used to use utime() to hard-set the time based on the current
1088         local clock, or, if the file didn't exist, it merely created it.
1089         This mirrors exactly what real UNIX touch does, but it fails badly
1090         on networked filesystems where the FS server clock is skewed from
1091         the local clock: normally modifying a file causes it to get a mod
1092         time based on the _server's_ clock.  Hard-setting it based on the
1093         _local_ clock causes gratuitous errors and makes the tests
1094         unreliable except on local filesystems.  The new function will
1095         simply modify the file, allowing the filesystem to set the mod
1096         time as it sees fit.
1097
1098         * scripts/features/parallelism: The second test output could
1099         change depending on how fast some scripts completed; use "sleep"
1100         to force the order we want.
1101
1102         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1103         means that "%ENV = ();" doesn't do the right thing.  This worked
1104         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1105         the environment rather than require specific versions.
1106
1107         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1108         modifier "s", so the tests will run with Perl 4.
1109         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1110         option in PURIFYOPTIONS.
1111         (setup_for_test): Don't remove any logs unless $pure_log is set.
1112
1113 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1114
1115         * scripts/features/reinvoke: Put the SHELL definition in the right
1116         test makefile.
1117
1118 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1119
1120         ChangeLog file for the test suite created.
1121 \f
1122
1123 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1124 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1125 This file is part of GNU Make.
1126
1127 GNU Make is free software; you can redistribute it and/or modify it under the
1128 terms of the GNU General Public License as published by the Free Software
1129 Foundation; either version 3 of the License, or (at your option) any later
1130 version.
1131
1132 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1133 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1134 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1135
1136 You should have received a copy of the GNU General Public License along with
1137 this program.  If not, see <http://www.gnu.org/licenses/>.