tests/ChangeLog

   1 2011-11-14  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/features/double_colon: Check double-colon with escaped
   4         filenames.  See Savannah bug #33399.
   5
   6 2011-09-18  Paul Smith  <psmith@gnu.org>
   7
   8         * scripts/features/parallelism: On re-exec make sure we preserve
   9         the value of MAKEFLAGS when necessary.  See Savannah bug #33873.
  10
  11         * scripts/features/vpath3: Verify handling of -lfoo libraries
  12         found via vpath vs. the standard directory search.
  13         See Savannah bug #32511.
  14
  15 2011-09-12  Paul Smith  <psmith@gnu.org>
  16
  17         * scripts/functions/call: Verify that using export in a $(call ...)
  18         context creates a global variable.  See Savannah bug #32498.
  19
  20 2011-09-02  Paul Smith  <psmith@gnu.org>
  21
  22         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
  23         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
  24
  25 2011-08-29  Paul Smith  <psmith@gnu.org>
  26
  27         * scripts/features/varnesting: Test resetting of variables while
  28         expanding them.  See Savannah patch #7534
  29
  30 2011-06-12  Paul Smith  <psmith@gnu.org>
  31
  32         * scripts/features/archives: Check archives with whitespace at the
  33         beginning, end, and extra in the middle.
  34         Another test for Savannah bug #30612.
  35
  36 2011-05-07  Paul Smith  <psmith@gnu.org>
  37
  38         * scripts/variables/private: Ensure we skip private variables when
  39         appending.  Test for Savannah bug #32872.
  40
  41         * scripts/functions/wildcard: Verify wildcard used to test for
  42         file existence/non-existence.
  43
  44 2011-05-02  Paul Smith  <psmith@gnu.org>
  45
  46         * scripts/functions/sort: Add a test for Savannah bug #33125.
  47
  48 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
  49
  50         * scripts/features/shell_assignment: Regression for "!=" feature
  51
  52 2010-11-06  Paul Smith  <psmith@gnu.org>
  53
  54         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
  55         * scripts/functions/call: Ditto.
  56         * scripts/variables/special: Ditto.
  57
  58         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
  59
  60 2010-08-29  Paul Smith  <psmith@gnu.org>
  61
  62         * scripts/features/errors: Add new error message to output text.
  63         * scripts/variables/SHELL: Ditto.
  64         * scripts/targets/POSIX: Ditto.
  65         * scripts/options/dash-k: Ditto.
  66         * scripts/features/vpathplus: Ditto.
  67         * scripts/features/patternrules: Ditto.
  68         * scripts/features/parallelism: Ditto.
  69
  70 2010-08-13  Paul Smith  <psmith@gnu.org>
  71
  72         * scripts/features/archives: New regression tests for archive
  73         support.  Test for fix to Savannah bug #30612.
  74
  75         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
  76         the features available in $(.FEATURES).
  77
  78 2010-08-10  Paul Smith  <psmith@gnu.org>
  79
  80         * scripts/features/reinvoke: Ensure command line variable settings
  81         are preserved across make re-exec.  Tests Savannah bug #30723.
  82
  83 2010-07-28  Paul Smith  <psmith@gnu.org>
  84
  85         * scripts/targets/POSIX: Compatibility issues with Solaris (and
  86         Tru64?); "false" returns different exit codes, and set -x shows
  87         output with extra whitespace.  Run the commands by hand first to
  88         find out what the real shell would do, then compare what make does.
  89         * scripts/variables/SHELL: Ditto.
  90
  91 2010-07-12  Paul Smith  <psmith@gnu.org>
  92
  93         * test_driver.pl: Add a new $perl_name containing the path to Perl.
  94         * run_make_tests.pl (run_make_test): Replace the special string
  95         #PERL# in a makefile etc. with the path the Perl executable so
  96         makefiles can use it.
  97
  98         * scripts/targets/ONESHELL: Add a new set of regression tests for
  99         the .ONESHELL feature.
 100
 101 2010-07-06  Paul Smith  <psmith@gnu.org>
 102
 103         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
 104
 105         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
 106         Verify that enabling .POSIX changes the shell flags to set -e.
 107
 108 2010-07-01  Paul Smith  <psmith@gnu.org>
 109
 110         * scripts/features/recursion: Add a space to separate command-line
 111         args.  Fixes Savannah bug #29968.
 112
 113 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
 114
 115         * scripts/features/vpath3: Test for the new library search
 116         behavior.
 117
 118 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 119
 120         * scripts/features/se_explicit: Enable the test for now fixed
 121         Savannah bug 25780.
 122
 123 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 124
 125         * scripts/variables/undefine: Tests for the new undefine feature.
 126
 127 2009-10-03  Paul Smith  <psmith@gnu.org>
 128
 129         * scripts/features/parallelism: Test for open Savannah bug #26846.
 130
 131         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
 132
 133         * scripts/variables/MAKEFLAGS: Created.
 134         Add test for Savannah bug #2216 (still open).
 135
 136         * scripts/features/include: Test for Savannah bug #102 (still open).
 137
 138 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
 139
 140         * scripts/features/include: Add diagnostics issuing tests for
 141         cases where targets have been updated and failed with the
 142         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
 143
 144 2009-09-28  Paul Smith  <psmith@gnu.org>
 145
 146         * scripts/functions/shell: Add regression test for Savannah bug
 147         #20513 (still open).
 148
 149         * scripts/features/se_explicit: Add regression tests for Savannah
 150         bug #25780 (still open).
 151
 152         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
 153         that runs tests we know will fail.  This allows us to add
 154         regression tests to the test suite for bugs that haven't been
 155         fixed yet.
 156
 157 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
 158
 159         * scripts/features/patspecific_vars: Add a test for the shortest
 160         stem first order.
 161
 162         * scripts/features/patternrules: Add a test for the shortest stem
 163         first order.
 164
 165 2009-09-24  Paul Smith  <psmith@gnu.org>
 166
 167         * scripts/features/se_implicit: Add a test for order-only
 168         secondary expansion prerequisites.
 169
 170 2009-09-23  Paul Smith  <psmith@gnu.org>
 171
 172         * scripts/features/patternrules: Test that we can remove pattern
 173         rules, both single and multiple prerequisites.  Savannah bug #18622.
 174
 175         * scripts/features/echoing: Rework for run_make_test().
 176
 177 2009-06-14  Paul Smith  <psmith@gnu.org>
 178
 179         * scripts/features/vpath: Verify we don't get bogus circular
 180         dependency warnings if we choose a different file via vpath during
 181         update.  Savannah bug #13529.
 182
 183 2009-06-13  Paul Smith  <psmith@gnu.org>
 184
 185         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
 186         files (and files included by them) don't set the default goal.
 187         Savannah bug #13401.
 188
 189         * scripts/functions/wildcard: Test that wildcards with
 190         non-existent glob matchers return empty.
 191
 192 2009-06-09  Paul Smith  <psmith@gnu.org>
 193
 194         * scripts/options/dash-B: Test the $? works correctly with -B.
 195         Savannah bug #17825.
 196
 197         * scripts/features/patternrules: Test that dependencies of
 198         "also_make" targets are created properly.  Savannah bug #19108.
 199
 200         * test_driver.pl (compare_output): Create a "run" file for failed
 201         tests containing the command that was run.
 202         (get_runfile): New function.
 203
 204         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
 205         allow memcheck and massif tools.
 206
 207         * scripts/features/patternrules: Have to comment out a line in the
 208         first test due to backing out a change that broke the implicit
 209         rule search algorithm.  Savannah bug #17752.
 210         * scripts/misc/general4: Remove a test that is redundant with
 211         patternrules.
 212
 213         * scripts/features/parallelism: Add a test for re-exec with
 214         jobserver master override.  Savannah bug #18124.
 215
 216 2009-06-08  Paul Smith  <psmith@gnu.org>
 217
 218         * scripts/features/targetvars: Add a test for continued target
 219         vars after a semicolon.  Savannah bug #17521.
 220
 221 2009-06-07  Paul Smith  <psmith@gnu.org>
 222
 223         * scripts/features/se_explicit: Make sure we catch defining
 224         prereqs during snap_deps().  Savannah bug #24622.
 225
 226         * scripts/variables/automatic: Check prereq ordering when the
 227         target with the recipe has no prereqs.  Savannah bug #21198.
 228
 229         * scripts/variables/LIBPATTERNS: Add a new set of test for
 230         $(.LIBPATTERNS) (previously untested!)
 231
 232 2009-06-04  Paul Smith  <psmith@gnu.org>
 233
 234         * scripts/variables/SHELL: The export target-specific SHELL test
 235         has an incorrect known-good-value.
 236
 237         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
 238
 239         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
 240
 241 2009-05-31  Paul Smith  <psmith@gnu.org>
 242
 243         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 244
 245         * scripts/features/targetvars: Add tests of overrides for Savannah
 246         bug #26207.
 247         * scripts/features/patspecific_vars: Ditto.
 248
 249         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 250
 251 2009-05-30  Paul Smith  <psmith@gnu.org>
 252
 253         * scripts/variables/flavors: Update with new variable flavor tests.
 254         * scripts/variables/define: Create a new set of tests for
 255         define/endef and move those aspects of the flavors suite here.
 256
 257 2009-05-25  Paul Smith  <psmith@gnu.org>
 258
 259         * scripts/features/targetvars: Ditto.
 260
 261         * scripts/features/export: Test new variable parsing abilities.
 262
 263 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 264
 265         * scripts/variables/private: Create a new suite of tests for 'private'.
 266
 267 2007-11-04  Paul Smith  <psmith@gnu.org>
 268
 269         * scripts/functions/eval: Update error message for command -> recipe.
 270
 271         * test_driver.pl (compare_output): Allow the answer to be a regex,
 272         if surrounded by '/'.
 273         * scripts/misc/close_stdout: Use a regex for the answer, since
 274         sometimes the error will have a description and sometimes it won't.
 275
 276 2007-09-10  Paul Smith  <psmith@gnu.org>
 277
 278         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 279
 280 2007-08-15  Paul Smith  <psmith@gnu.org>
 281
 282         These test cases were contributed by
 283         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 284         Savannah bugs #3330 and #15919.
 285
 286         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 287         15919.
 288
 289         * scripts/features/parallelism: Add tests for wrong answer/hang
 290         combining INTERMEDIATE, order-only prereqs, and parallelism.
 291         See Savannah bugs 3330 and 15919.
 292
 293 2007-07-13  Paul Smith  <psmith@gnu.org>
 294
 295         Install a timeout so tests can never loop infinitely.
 296         Original idea and patch for a single-test version provided by
 297         Icarus Sparry <savannah@icarus.freeuk.com>
 298
 299         * test_driver.pl (_run_command): New function: this is called by
 300         other functions to actually run a command.  Before we run it,
 301         install a SIGALRM handler and set up a timer to go off in the
 302         future (default is 5s; this can be overridden by individual tests).
 303         (run_command): Call it.
 304         (run_command_with_output): Call it.
 305
 306         * run_make_tests.pl (run_make_with_options): Override the default
 307         timeout if the caller requests it.
 308         (run_make_test): Pass any timeout override to run_make_with_options.
 309
 310         * scripts/features/parallelism: Increase the timeout for long tests.
 311         * scripts/options/dash-l: Ditto.
 312
 313 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 314
 315         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 316         ENV here.  This doesn't always work.
 317         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 318         environment.  Fixes Savannah bug #16698.
 319
 320 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 321
 322         * scripts/variables/automatic: Add back the test for bug #8154.
 323
 324 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 325
 326         * scripts/functions/realpath: Don't run tests with multiple
 327         initial slashes on Windows: those paths mean something different.
 328
 329 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 330
 331         * scripts/features/parallelism: Test that the jobserver is
 332         properly managed when we have to re-exec the master instance of
 333         make.
 334
 335 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 336
 337         * scripts/features/statipattrules: Add tests for bug #16053.
 338
 339 2006-03-09  Paul Smith  <psmith@gnu.org>
 340
 341         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 342         with DOS drive letters.  Fixes Savannah bug #15947.
 343
 344         * test_driver.pl (run_each_test): Set the status properly even
 345         when a test fails to execute.  Fixes Savannah bug #15942.
 346
 347         * scripts/functions/foreach: Use a different environment variable
 348         other than PATH to avoid differences with Windows platforms.
 349         Fixes Savannah bug #15938.
 350
 351 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 352
 353         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 354         type W32.  Fixed Savannah bug #15937.
 355
 356         * scripts/features/default_names: Don't call error() when the test
 357         fails.  Fixes Savannah bug #15941.
 358
 359 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 360
 361         * scripts/features/targetvars: Test a complex construction which
 362         guarantees that we have to merge variable lists of different
 363         sizes.  Tests for Savannah bug #15757.
 364
 365 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 366
 367         * scripts/functions/error: Make sure filename/lineno information
 368         is related to where the error is expanded, not where it's set.
 369         * scripts/functions/warning: Ditto.
 370         * scripts/functions/foreach: Check for different error conditions.
 371         * scripts/functions/word: Ditto.
 372         * scripts/variables/negative: Test some variable reference failure
 373         conditions.
 374         * scripts/options/warn-undefined-variables: Test the
 375         --warn-undefined-variables flag.
 376
 377 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 378
 379         * run_make_tests.pl (set_more_defaults): Update valgrind support
 380         for newer versions.
 381         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 382         beginning with ".").
 383
 384         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 385         functions.
 386
 387 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 388
 389         * scripts/features/parallelism: Add a test for bug #15641.
 390
 391 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 392
 393         * scripts/options/dash-W: Add a test for bug #15341.
 394
 395 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 396
 397         * scripts/variables/automatic: Add a test for bug #8154.
 398
 399         * README: Update to reflect the current state of the test suite.
 400
 401 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 402
 403         * scripts/features/parallelism, scripts/functions/wildcard,
 404         scripts/targets/FORCE, scripts/targets/PHONY,
 405         scripts/targets/SILENT: Use the default setting for
 406         $delete_command.  Fixes bug #15085.
 407
 408         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 409
 410 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 411
 412         * scripts/misc/general4: Test implicit rules with '$' in the
 413         prereq list & prereq patterns.
 414         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 415
 416 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 417
 418         * scripts/features/patternrules: Add a test for bug #13022.
 419
 420 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 421
 422         * scripts/features/double_colon: Add a test for bug #14334.
 423
 424 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 425
 426         * scripts/functions/flavor: Add a test for the flavor function.
 427
 428 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 429
 430         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 431         special variable.
 432
 433 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 434
 435         * scripts/misc/general4: Test '$$' in prerequisites list.
 436         * scripts/features/statipattrules: Rewrite to use run_make_test().
 437         Add various static pattern info.
 438         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 439         * scripts/features/se_explicit: Add tests for handling '$$' in
 440         prerequisite lists with and without setting .SECONDEXPANSION.
 441         * scripts/features/order_only: Convert to run_make_test().
 442         * run_make_tests.pl (set_more_defaults): If we can't get the value
 443         of $(MAKE) from make, then fatal immediately.
 444
 445 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 446
 447         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 448         an eval to trap errors) and if it exists, use POSIX::getcwd to
 449         find the working directory.  If it doesn't exist, go back to the
 450         previous methods.  This tries to be more accurate on Windows
 451         systems.
 452
 453 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 454
 455         * scripts/functions/abspath: Add some text to the error messages
 456         to get a better idea of what's wrong.  Make warnings instead of
 457         errors.
 458
 459         * scripts/features/patspecific_vars: Don't use "test", which is
 460         UNIX specific.  Print the values and let the test script match
 461         them.
 462
 463 2005-08-25  Paul Smith  <psmith@gnu.org>
 464
 465         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 466         former works better with non-UNIX environments.  Fixes Savannah
 467         bug #14129.
 468
 469 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 470
 471         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 472         $(sort) so that the resulting order is no longer filesystem-
 473         dependant.
 474
 475 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 476
 477         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 478
 479 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 480
 481         * scripts/features/parallelism: Add a test for a bug reported by
 482         Michael Matz (matz@suse.de) in which make exits without waiting
 483         for all its children in some situations during parallel builds.
 484
 485 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 486
 487         * test_driver.pl: Reset the environment to a clean value every
 488         time before we invoke make.  I'm suspicious that the environment
 489         isn't handled the same way in Windows as it is in UNIX, and some
 490         variables are leaking out beyond the tests they are intended for.
 491         Create an %extraENV hash tests can set to add more env. vars.
 492         * tests/scripts/features/export: Change to use %extraENV.
 493         * tests/scripts/functions/eval: Ditto.
 494         * tests/scripts/functions/origin: Ditto.
 495         * tests/scripts/options/dash-e: Ditto.
 496         * tests/scripts/variables/SHELL: Ditto.
 497
 498 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 499
 500         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 501         files.
 502         * scripts/features/reinvoke: Rewrite to be safer on systems with
 503         subsecond timestamps.
 504         * scripts/features/patternrules: False exits with different error
 505         codes on different systems (for example, Linux => 1, Solaris => 255).
 506
 507         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 508         to be sure it will be considered updated when it's remade.
 509
 510 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 511
 512         * scripts/functions/shell: New test suite for the shell function.
 513
 514 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 515
 516         * scripts/features/include: Test include/-include/sinclude with no
 517         arguments.  Tests fix for Savannah bug #1761.
 518
 519         * scripts/misc/general3: Implement comprehensive testing of
 520         backslash-newline behavior in command scripts: various types of
 521         quoting, fast path / slow path, etc.
 522         Tests fix for Savannah bug #1332.
 523
 524         * scripts/options/symlinks: Test symlinks to non-existent files.
 525         Tests fix for Savannah bug #13280.
 526
 527         * scripts/misc/general3: Test semicolons in variable references.
 528         Tests fix for Savannah bug #1454.
 529
 530         * scripts/variables/MAKE_RESTARTS: New file: test the
 531         MAKE_RESTARTS variable.
 532         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 533         Tests fix for Savannah bug #7566.
 534         * scripts/options/dash-W: New file: test the -W flag, including
 535         re-exec infinite looping.
 536
 537 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 538
 539         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 540         This test only works on systems that have /dev/full (e.g., Linux).
 541
 542 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 543
 544         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 545
 546 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 547
 548         * scripts/features/include: Add a test for Savannah bug #13216.
 549         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 550
 551 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 552
 553         * scripts/features/conditionals: Add tests for the new if... else
 554         if... endif syntax.
 555
 556 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 557
 558         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 559         DEFAULT_GOAL.
 560
 561 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 562
 563         * scripts/features/parallelism: Add a test for exporting recursive
 564         variables containing $(shell ) calls.  Rewrite this script to use
 565         run_make_test() everywhere.
 566
 567 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 568
 569         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 570
 571 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 572
 573         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 574
 575 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 576
 577         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 578
 579 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 580
 581         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 582         bug #12266.
 583
 584 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 585
 586         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 587
 588 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 589
 590         * scripts/features/se_implicit: Add a test for stem
 591         termination bug. Add a test for stem triple-expansion bug.
 592
 593         * scripts/features/se_statpat: Add a test for stem
 594         triple-expansion bug.
 595
 596         * scripts/features/statipattrules: Change test #4 to reflect
 597         new way empty prerequisite list is handled.
 598
 599
 600 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 601
 602         * scripts/features/statipattrules: Add a test for
 603         Savannah bug #12180.
 604
 605 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 606
 607         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 608
 609         * scripts/options/symlinks: New file to test checking of symlink
 610         timestamps.  Can't use filename dash-L because it conflicts with
 611         dash-l on case-insensitive filesystems.
 612
 613         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 614         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 615         unique filenames.
 616
 617 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 618
 619         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 620         special variable.
 621
 622 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 623
 624         * scripts/features/se_explicit: Test the second expansion in
 625         explicit rules.
 626         * scripts/features/se_implicit: Test the second expansion in
 627         implicit rules.
 628         * scripts/features/se_statpat: Test the second expansion in
 629         static pattern rules.
 630         * scripts/variables/automatic: Fix to work with the second
 631         expansion.
 632
 633         * scripts/misc/general4: Add a test for bug #12091.
 634
 635 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 636
 637         * scripts/functions/eval: Check that eval of targets within
 638         command scripts fails.  See Savannah bug # 12124.
 639
 640 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 641
 642         * test_driver.pl (compare_output): If a basic comparison of the
 643         log and answer doesn't match, try harder: change all backslashes
 644         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 645
 646 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 647
 648         * scripts/features/recursion: Test command line variable settings:
 649         only one instance of a given variable should be provided.
 650
 651 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 652
 653         * tests/scripts/functions/abspath: New file: test `abspath'
 654         built-in function.
 655
 656         * tests/scripts/functions/realpath: New file: test `realpath'
 657         built-in function.
 658
 659 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 660
 661         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 662         this doesn't really test anything useful in UNIX but...
 663
 664         * scripts/variables/SHELL: New file: test proper handling of SHELL
 665         according to POSIX rules.  Fixes bug #1276.
 666
 667 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 668
 669         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 670
 671 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 672
 673         * scripts/features/patspecific_vars: Test simple/recursive
 674         variable expansion.
 675
 676 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 677
 678         * scripts/features/include: Test dontcare flag inheritance
 679         when rebuilding makefiles.
 680
 681 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 682
 683         * scripts/features/patspecific_vars: Test exported variables.
 684
 685 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 686
 687         * run_make_tests.pl (run_make_test): Don't add newlines to the
 688         makestring or answer if they are completely empty.
 689
 690         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 691
 692         * scripts/test_template: Rework the template.
 693
 694 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 695
 696         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 697         `#!/usr/bin/env perl'.
 698
 699         * scripts/features/implicit_prereq_eval: Test implicit rule
 700         prerequisite evaluation code.
 701
 702 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 703
 704         * run_make_tests.pl (run_make_test): Enhance to allow the make
 705         string to be undef: in that case it reuses the previous make
 706         string.  Allows multiple tests on the same makefile.
 707
 708         * scripts/variables/flavors: Add some tests for prefix characters
 709         interacting with define/endef variables.
 710
 711 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 712
 713         * scripts/functions/substitution: Rewrite to use run_make_test()
 714         interface, and add test for substitution failures reported by
 715         Markus Mauhart <qwe123@chello.at>.
 716
 717 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 718
 719         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 720         to track both the testing categories _AND_ the number of
 721         individual tests, and report both sets of numbers.
 722
 723 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 724
 725         * scripts/functions/origin: Set our own environment variable
 726         rather than relying on $HOME.
 727
 728 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 729
 730         * scripts/features/conditionals: Test arguments to ifn?def which
 731         contain whitespace (such as a function that is evaluated).  Bug
 732         #7257.
 733
 734 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 735
 736         * scripts/features/order_only: Test order-only prerequisites in
 737         pattern rules (patch #2349).
 738
 739 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 740
 741         * scripts/functions/if: Test if on conditionals with trailing
 742         whitespace--bug #5798.
 743
 744         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 745
 746 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 747
 748         * scripts/features/patspecific_vars: Test multiple patterns
 749         matching the same target--Bug #1405.
 750
 751 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 752
 753         * run_make_tests.pl (set_more_defaults): A new $port_type of
 754         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 755         for OS/2.
 756
 757 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 758
 759         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 760         not prerequisites)--Bug #2515.
 761
 762 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 763
 764         * scripts/features/targetvars: Test very long target-specific
 765         variable definition lines (longer than the default make buffer
 766         length).  Tests patch # 1022.
 767
 768         * scripts/functions/eval: Test very recursive $(eval ...) calls
 769         with simple variable expansion (bug #2238).
 770
 771         * scripts/functions/word: Test error handling for word and
 772         wordlist functions (bug #2407).
 773
 774 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 775
 776         * scripts/functions/call: Test recursive argument masking (bug
 777         #1744).
 778
 779 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 780
 781         * scripts/functions/eval: Test using $(eval ...) inside
 782         conditionals (Bug #1516).
 783
 784 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 785
 786         * scripts/options/dash-t: Add a test for handling -t on targets
 787         with no commands (Bug #1418).
 788
 789 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 790
 791         * scripts/features/targetvars: Add a test for exporting
 792         target-specific vars (Bug #1391).
 793
 794 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 795
 796         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 797         and $${@F}.
 798
 799 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 800
 801         * scripts/features/escape: Test handling of escaped comment
 802         characters in targets and prerequisites.
 803
 804 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 805
 806         * scripts/features/export: Test export/unexport of multiple
 807         variables in a single command.
 808
 809 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 810
 811         * scripts/features/targetvars: Tests for Bug #940: test
 812         target-specific and pattern-specific variables in conjunction with
 813         double-colon targets.
 814
 815 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 816
 817         * test_driver.pl (compare_output): Match the new format for time
 818         skew error messages.
 819
 820         * scripts/features/export: Created.  Add tests for export/unexport
 821         capabilities, including exporting/unexporting expanded variables.
 822
 823         * scripts/features/conditionals: Add a test for expanded variables
 824         in ifdef conditionals.
 825
 826 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 827
 828         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 829         invocations.
 830         * scripts/features/vpathgpath: Ditto.
 831         * scripts/features/vpathplus: Ditto.
 832         * scripts/options/dash-n: Ditto.
 833         * scripts/targets/INTERMEDIATE: Ditto.
 834         * scripts/targets/SECONDARY: Ditto.
 835
 836         * scripts/options/dash-t: Added a test for the -t bug fixed by
 837         Henning Makholm.  This test was also contributed by Henning.
 838
 839         * scripts/misc/general4: Add a test suite for obscure algorithmic
 840         features of make.  First test: make sure creation subdirectories
 841         as prerequisites of targets works properly.
 842
 843         * scripts/misc/version: Remove this bogus test.
 844
 845 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 846
 847         * scripts/misc/general3: Add a test for makefiles that don't end
 848         in newlines.
 849
 850         * scripts/variables/special: Create tests for the special
 851         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 852         for now as it's not yet supported.
 853
 854 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 855
 856         * scripts/options/dash-B: Add a test for the new -B option.
 857
 858 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 859
 860         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 861         -valgrind option to the test suite.
 862         (set_more_defaults): Set up the file descriptor to capture
 863         Valgrind output.  We have to unset its close-on-exec flag; we
 864         hardcode the value for F_SETFD (2) rather than load it; hopefully
 865         this will help us avoid breaking the Windows/DOS test suite.
 866
 867 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 868
 869         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 870         $$(@F).
 871
 872         * test_driver.pl (utouch): Create a new function that creates a
 873         file with a specific timestamp offset.  Use of this function will
 874         let us avoid lots of annoying sleep() invocations in the tests
 875         just to get proper timestamping, which will make the tests run a
 876         lot faster.  So far it's only used in the automatic test suite.
 877
 878 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 879
 880         * scripts/variables/automatic: Create a test for automatic variables.
 881
 882 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 883
 884         * scripts/features/order_only: Test new order-only prerequisites.
 885
 886 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 887
 888         * scripts/functions/eval: Test new function.
 889         * scripts/functions/value: Test new function.
 890         * scripts/variables/MAKEFILE_LIST: Test new variable.
 891
 892 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 893
 894         * scripts/functions/call: New test: transitive closure
 895         implementation using $(call ...) to test variable recursion.
 896
 897 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 898
 899         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 900         directories in the script directories.
 901
 902 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 903
 904         * scripts/variables/flavors: Test define/endef scripts where only
 905         one of the command lines is quiet.
 906
 907 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 908
 909         * scripts/options/dash-q: New file; test the -q option.  Includes
 910         a test for PR/1780.
 911
 912 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 913
 914         * scripts/features/targetvars: Added a test for PR/1709: allowing
 915         semicolons in target-specific variable values.
 916
 917 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 918
 919         * scripts/functions/addsuffix: Test for an empty final argument.
 920         Actually this bug might have happened for any function, but this
 921         one was handy.
 922
 923 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 924
 925         * scripts/options/general: If parallel jobs are not supported,
 926         expect a warning message from Make.
 927
 928 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 929
 930         * scripts/options/general: Don't try -jN with N != 1 if parallel
 931         jobs are not supported.
 932
 933 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 934
 935         * scripts/options/general: Test general option processing (PR/1716).
 936
 937 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 938
 939         * scripts/functions/strip: Test empty value to strip (PR/1689).
 940
 941 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 942
 943         * scripts/features/reinvoke: Sleep before updating the target
 944         files in the first test, to ensure its time stamp really gets
 945         newer; otherwise Make might re-exec more than once.
 946
 947 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 948
 949         * scripts/features/double_colon: Don't run the parallel tests if
 950         parallel jobs aren't supported.
 951
 952 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 953
 954         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 955
 956 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 957
 958         * scripts/features/statipattrules: Test that static pattern rules
 959         whose prerequisite patterns resolve to empty strings throw an
 960         error (instead of dumping core).  Fixes PR/1670.
 961
 962         * scripts/features/reinvoke: Make more robust by touching "b"
 963         first, to ensure it's not newer than "a".
 964         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 965         * scripts/options/dash-n: Ditto.
 966
 967         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 968         recursive invocations of $(call ...) to break.  I can't come up
 969         with any way to get both working at the same time, so I backed out
 970         the fix to 1527 and added a test case for recursive calls.  This
 971         also tests the fix for PR/1610.
 972
 973         * scripts/features/double_colon: Test that circular dependencies
 974         in double-colon rule sets are detected correctly (PR/1671).
 975
 976 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 977
 978         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 979         .INTERMEDIATE files when given on the command line (PR/1669).
 980
 981 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 982
 983         * scripts/options/dash-k: Add a test for error detection by
 984         multiple targets depending on the same prerequisite with -k.
 985         For PR/1634.
 986
 987 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 988
 989         * scripts/features/escape: Add a test for backslash-escaped spaces
 990         in a target name (PR/1586).
 991
 992 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 993
 994         * scripts/features/patspecific_vars: Add a test for pattern-specific
 995         target variables inherited from the parent target (PR/1407).
 996
 997 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 998
 999         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
1000         to make sure sorting order, etc. is predictable.
1001         Reported by Andreas Jaeger <aj@suse.de>.
1002
1003         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
1004         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
1005         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
1006         1 for other systems.
1007         * scripts/features/vpathplus (touchfiles): Use the $wtime value
1008         instead of hardcoding 2.
1009         * scripts/targets/SECONDARY: Ditto.
1010         * scripts/targets/INTERMEDIATE: Ditto.
1011
1012 2000-01-27  Paul D. Smith  <psmith@gnu.org>
1013
1014         * test_driver.pl (toplevel): Don't try to run test scripts which
1015         are really directories.
1016
1017 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1018
1019         * scripts/features/include: Remove a check; the fix caused more
1020         problems than the error, so I removed it and removed the test for
1021         it.
1022
1023 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1024
1025         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1026         sure $(call ...) doesn't eval its arguments and that you can
1027         invoke foreach from it without looping forever.
1028
1029 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1030
1031         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1032         .INTERMEDIATE settings on files don't disable them as implicit
1033         intermediate possibilities.
1034
1035 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1036
1037         * scripts/features/double_colon: Add a test for PR/1476: Try
1038         double-colon rules as non-goal targets and during parallel builds
1039         to make sure they're handled serially.
1040
1041 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1042
1043         * scripts/functions/if: Add a test for PR/1429: put some text
1044         after an if-statement to make sure it works.
1045
1046         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1047         in target-specific variable definitions correctly.
1048
1049 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1050
1051         * scripts/variables/MAKEFILES: This was really broken: it didn't
1052         test anything at all, really.  Rewrote it, plus added a test for
1053         PR/1394.
1054
1055 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1056
1057         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1058         behave properly when used with recursive targets".
1059
1060 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1061
1062         * scripts/features/targetvars: Add a check for PR/1378:
1063         "Target-specific vars don't inherit correctly"
1064
1065 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1066
1067         * test_driver.pl (get_osname): Change $fancy_file_names to
1068         $short_filenames and reverse the logic.
1069         (run_each_test): Change test of non-existent $port_host to use
1070         $short_filenames--problem reported by Eli Zaretskii.
1071
1072 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1073
1074         * scripts/features/parallelism: Add a check to ensure that the
1075         jobserver works when we re-invoke.  Also cleaned up the tests a
1076         little, reducing the number of rules we use so the test won't need
1077         as many "sleep" commands.
1078
1079 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1080
1081         * scripts/features/reinvoke: Remove invocations of "touch" in
1082         makefiles.  See the comments on the touch function rewrite below.
1083         Note that UNIX touch behaves the same way if the file already
1084         exists: it sets the time to the _local_ time.  We don't want
1085         this.  This is probably a good tip for makefile writers in
1086         general, actually... where practical.
1087         * scripts/options/dash-l: Ditto.
1088         * scripts/options/dash-n: Ditto.
1089
1090         * test_driver.pl (run_each_test): In retrospect, I don't like the
1091         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1092         changed it back to use .log, .base, and .diff.
1093
1094         * run_make_tests.pl (set_more_defaults): Move the check for the
1095         make pathname to here from set_defaults (that's too early since it
1096         happens before the command line processing).
1097         Create a new variable $port_type, calculated from $osname, to
1098         specify what kind of system we're running on.  We should integrate
1099         the VOS stuff here, too.
1100         (valid_option): Comment out the workdir/-work stuff so people
1101         won't be fooled into thinking it works... someone needs to fix
1102         this, though!
1103
1104         * scripts/functions/origin: Use $port_type instead of $osname.
1105         * scripts/functions/foreach: Ditto.
1106         * scripts/features/default_names: Ditto.
1107
1108 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1109
1110         * test_driver.pl (touch): Rewrite this function.  Previously it
1111         used to use utime() to hard-set the time based on the current
1112         local clock, or, if the file didn't exist, it merely created it.
1113         This mirrors exactly what real UNIX touch does, but it fails badly
1114         on networked filesystems where the FS server clock is skewed from
1115         the local clock: normally modifying a file causes it to get a mod
1116         time based on the _server's_ clock.  Hard-setting it based on the
1117         _local_ clock causes gratuitous errors and makes the tests
1118         unreliable except on local filesystems.  The new function will
1119         simply modify the file, allowing the filesystem to set the mod
1120         time as it sees fit.
1121
1122         * scripts/features/parallelism: The second test output could
1123         change depending on how fast some scripts completed; use "sleep"
1124         to force the order we want.
1125
1126         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1127         means that "%ENV = ();" doesn't do the right thing.  This worked
1128         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1129         the environment rather than require specific versions.
1130
1131         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1132         modifier "s", so the tests will run with Perl 4.
1133         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1134         option in PURIFYOPTIONS.
1135         (setup_for_test): Don't remove any logs unless $pure_log is set.
1136
1137 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1138
1139         * scripts/features/reinvoke: Put the SHELL definition in the right
1140         test makefile.
1141
1142 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1143
1144         ChangeLog file for the test suite created.
1145 \f
1146
1147 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1148 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1149 This file is part of GNU Make.
1150
1151 GNU Make is free software; you can redistribute it and/or modify it under the
1152 terms of the GNU General Public License as published by the Free Software
1153 Foundation; either version 3 of the License, or (at your option) any later
1154 version.
1155
1156 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1157 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1158 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1159
1160 You should have received a copy of the GNU General Public License along with
1161 this program.  If not, see <http://www.gnu.org/licenses/>.