tests/ChangeLog

   1 2010-08-10  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/features/reinvoke: Ensure command line variable settings
   4         are preserved across make re-exec.  Tests Savannah bug #30723.
   5
   6 2010-07-28  Paul Smith  <psmith@gnu.org>
   7
   8         * scripts/targets/POSIX: Compatibility issues with Solaris (and
   9         Tru64?); "false" returns different exit codes, and set -x shows
  10         output with extra whitespace.  Run the commands by hand first to
  11         find out what the real shell would do, then compare what make does.
  12         * scripts/variables/SHELL: Ditto.
  13
  14 2010-07-12  Paul Smith  <psmith@gnu.org>
  15
  16         * test_driver.pl: Add a new $perl_name containing the path to Perl.
  17         * run_make_tests.pl (run_make_test): Replace the special string
  18         #PERL# in a makefile etc. with the path the Perl executable so
  19         makefiles can use it.
  20
  21         * scripts/targets/ONESHELL: Add a new set of regression tests for
  22         the .ONESHELL feature.
  23
  24 2010-07-06  Paul Smith  <psmith@gnu.org>
  25
  26         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
  27
  28         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
  29         Verify that enabling .POSIX changes the shell flags to set -e.
  30
  31 2010-07-01  Paul Smith  <psmith@gnu.org>
  32
  33         * scripts/features/recursion: Add a space to separate command-line
  34         args.  Fixes Savannah bug #29968.
  35
  36 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
  37
  38         * scripts/features/vpath3: Test for the new library search
  39         behavior.
  40
  41 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
  42
  43         * scripts/features/se_explicit: Enable the test for now fixed
  44         Savannah bug 25780.
  45
  46 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
  47
  48         * scripts/variables/undefine: Tests for the new undefine feature.
  49
  50 2009-10-03  Paul Smith  <psmith@gnu.org>
  51
  52         * scripts/features/parallelism: Test for open Savannah bug #26846.
  53
  54         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
  55
  56         * scripts/variables/MAKEFLAGS: Created.
  57         Add test for Savannah bug #2216 (still open).
  58
  59         * scripts/features/include: Test for Savannah bug #102 (still open).
  60
  61 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
  62
  63         * scripts/features/include: Add diagnostics issuing tests for
  64         cases where targets have been updated and failed with the
  65         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
  66
  67 2009-09-28  Paul Smith  <psmith@gnu.org>
  68
  69         * scripts/functions/shell: Add regression test for Savannah bug
  70         #20513 (still open).
  71
  72         * scripts/features/se_explicit: Add regression tests for Savannah
  73         bug #25780 (still open).
  74
  75         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
  76         that runs tests we know will fail.  This allows us to add
  77         regression tests to the test suite for bugs that haven't been
  78         fixed yet.
  79
  80 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
  81
  82         * scripts/features/patspecific_vars: Add a test for the shortest
  83         stem first order.
  84
  85         * scripts/features/patternrules: Add a test for the shortest stem
  86         first order.
  87
  88 2009-09-24  Paul Smith  <psmith@gnu.org>
  89
  90         * scripts/features/se_implicit: Add a test for order-only
  91         secondary expansion prerequisites.
  92
  93 2009-09-23  Paul Smith  <psmith@gnu.org>
  94
  95         * scripts/features/patternrules: Test that we can remove pattern
  96         rules, both single and multiple prerequisites.  Savannah bug #18622.
  97
  98         * scripts/features/echoing: Rework for run_make_test().
  99
 100 2009-06-14  Paul Smith  <psmith@gnu.org>
 101
 102         * scripts/features/vpath: Verify we don't get bogus circular
 103         dependency warnings if we choose a different file via vpath during
 104         update.  Savannah bug #13529.
 105
 106 2009-06-13  Paul Smith  <psmith@gnu.org>
 107
 108         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
 109         files (and files included by them) don't set the default goal.
 110         Savannah bug #13401.
 111
 112         * scripts/functions/wildcard: Test that wildcards with
 113         non-existent glob matchers return empty.
 114
 115 2009-06-09  Paul Smith  <psmith@gnu.org>
 116
 117         * scripts/options/dash-B: Test the $? works correctly with -B.
 118         Savannah bug #17825.
 119
 120         * scripts/features/patternrules: Test that dependencies of
 121         "also_make" targets are created properly.  Savannah bug #19108.
 122
 123         * test_driver.pl (compare_output): Create a "run" file for failed
 124         tests containing the command that was run.
 125         (get_runfile): New function.
 126
 127         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
 128         allow memcheck and massif tools.
 129
 130         * scripts/features/patternrules: Have to comment out a line in the
 131         first test due to backing out a change that broke the implicit
 132         rule search algorithm.  Savannah bug #17752.
 133         * scripts/misc/general4: Remove a test that is redundant with
 134         patternrules.
 135
 136         * scripts/features/parallelism: Add a test for re-exec with
 137         jobserver master override.  Savannah bug #18124.
 138
 139 2009-06-08  Paul Smith  <psmith@gnu.org>
 140
 141         * scripts/features/targetvars: Add a test for continued target
 142         vars after a semicolon.  Savannah bug #17521.
 143
 144 2009-06-07  Paul Smith  <psmith@gnu.org>
 145
 146         * scripts/features/se_explicit: Make sure we catch defining
 147         prereqs during snap_deps().  Savannah bug #24622.
 148
 149         * scripts/variables/automatic: Check prereq ordering when the
 150         target with the recipe has no prereqs.  Savannah bug #21198.
 151
 152         * scripts/variables/LIBPATTERNS: Add a new set of test for
 153         $(.LIBPATTERNS) (previously untested!)
 154
 155 2009-06-04  Paul Smith  <psmith@gnu.org>
 156
 157         * scripts/variables/SHELL: The export target-specific SHELL test
 158         has an incorrect known-good-value.
 159
 160         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
 161
 162         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
 163
 164 2009-05-31  Paul Smith  <psmith@gnu.org>
 165
 166         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 167
 168         * scripts/features/targetvars: Add tests of overrides for Savannah
 169         bug #26207.
 170         * scripts/features/patspecific_vars: Ditto.
 171
 172         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 173
 174 2009-05-30  Paul Smith  <psmith@gnu.org>
 175
 176         * scripts/variables/flavors: Update with new variable flavor tests.
 177         * scripts/variables/define: Create a new set of tests for
 178         define/endef and move those aspects of the flavors suite here.
 179
 180 2009-05-25  Paul Smith  <psmith@gnu.org>
 181
 182         * scripts/features/targetvars: Ditto.
 183
 184         * scripts/features/export: Test new variable parsing abilities.
 185
 186 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 187
 188         * scripts/variables/private: Create a new suite of tests for 'private'.
 189
 190 2007-11-04  Paul Smith  <psmith@gnu.org>
 191
 192         * scripts/functions/eval: Update error message for command -> recipe.
 193
 194         * test_driver.pl (compare_output): Allow the answer to be a regex,
 195         if surrounded by '/'.
 196         * scripts/misc/close_stdout: Use a regex for the answer, since
 197         sometimes the error will have a description and sometimes it won't.
 198
 199 2007-09-10  Paul Smith  <psmith@gnu.org>
 200
 201         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 202
 203 2007-08-15  Paul Smith  <psmith@gnu.org>
 204
 205         These test cases were contributed by
 206         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 207         Savannah bugs #3330 and #15919.
 208
 209         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 210         15919.
 211
 212         * scripts/features/parallelism: Add tests for wrong answer/hang
 213         combining INTERMEDIATE, order-only prereqs, and parallelism.
 214         See Savannah bugs 3330 and 15919.
 215
 216 2007-07-13  Paul Smith  <psmith@gnu.org>
 217
 218         Install a timeout so tests can never loop infinitely.
 219         Original idea and patch for a single-test version provided by
 220         Icarus Sparry <savannah@icarus.freeuk.com>
 221
 222         * test_driver.pl (_run_command): New function: this is called by
 223         other functions to actually run a command.  Before we run it,
 224         install a SIGALRM handler and set up a timer to go off in the
 225         future (default is 5s; this can be overridden by individual tests).
 226         (run_command): Call it.
 227         (run_command_with_output): Call it.
 228
 229         * run_make_tests.pl (run_make_with_options): Override the default
 230         timeout if the caller requests it.
 231         (run_make_test): Pass any timeout override to run_make_with_options.
 232
 233         * scripts/features/parallelism: Increase the timeout for long tests.
 234         * scripts/options/dash-l: Ditto.
 235
 236 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 237
 238         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 239         ENV here.  This doesn't always work.
 240         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 241         environment.  Fixes Savannah bug #16698.
 242
 243 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 244
 245         * scripts/variables/automatic: Add back the test for bug #8154.
 246
 247 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 248
 249         * scripts/functions/realpath: Don't run tests with multiple
 250         initial slashes on Windows: those paths mean something different.
 251
 252 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 253
 254         * scripts/features/parallelism: Test that the jobserver is
 255         properly managed when we have to re-exec the master instance of
 256         make.
 257
 258 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 259
 260         * scripts/features/statipattrules: Add tests for bug #16053.
 261
 262 2006-03-09  Paul Smith  <psmith@gnu.org>
 263
 264         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 265         with DOS drive letters.  Fixes Savannah bug #15947.
 266
 267         * test_driver.pl (run_each_test): Set the status properly even
 268         when a test fails to execute.  Fixes Savannah bug #15942.
 269
 270         * scripts/functions/foreach: Use a different environment variable
 271         other than PATH to avoid differences with Windows platforms.
 272         Fixes Savannah bug #15938.
 273
 274 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 275
 276         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 277         type W32.  Fixed Savannah bug #15937.
 278
 279         * scripts/features/default_names: Don't call error() when the test
 280         fails.  Fixes Savannah bug #15941.
 281
 282 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 283
 284         * scripts/features/targetvars: Test a complex construction which
 285         guarantees that we have to merge variable lists of different
 286         sizes.  Tests for Savannah bug #15757.
 287
 288 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 289
 290         * scripts/functions/error: Make sure filename/lineno information
 291         is related to where the error is expanded, not where it's set.
 292         * scripts/functions/warning: Ditto.
 293         * scripts/functions/foreach: Check for different error conditions.
 294         * scripts/functions/word: Ditto.
 295         * scripts/variables/negative: Test some variable reference failure
 296         conditions.
 297         * scripts/options/warn-undefined-variables: Test the
 298         --warn-undefined-variables flag.
 299
 300 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 301
 302         * run_make_tests.pl (set_more_defaults): Update valgrind support
 303         for newer versions.
 304         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 305         beginning with ".").
 306
 307         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 308         functions.
 309
 310 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 311
 312         * scripts/features/parallelism: Add a test for bug #15641.
 313
 314 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 315
 316         * scripts/options/dash-W: Add a test for bug #15341.
 317
 318 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 319
 320         * scripts/variables/automatic: Add a test for bug #8154.
 321
 322         * README: Update to reflect the current state of the test suite.
 323
 324 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 325
 326         * scripts/features/parallelism, scripts/functions/wildcard,
 327         scripts/targets/FORCE, scripts/targets/PHONY,
 328         scripts/targets/SILENT: Use the default setting for
 329         $delete_command.  Fixes bug #15085.
 330
 331         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 332
 333 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 334
 335         * scripts/misc/general4: Test implicit rules with '$' in the
 336         prereq list & prereq patterns.
 337         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 338
 339 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 340
 341         * scripts/features/patternrules: Add a test for bug #13022.
 342
 343 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 344
 345         * scripts/features/double_colon: Add a test for bug #14334.
 346
 347 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 348
 349         * scripts/functions/flavor: Add a test for the flavor function.
 350
 351 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 352
 353         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 354         special variable.
 355
 356 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 357
 358         * scripts/misc/general4: Test '$$' in prerequisites list.
 359         * scripts/features/statipattrules: Rewrite to use run_make_test().
 360         Add various static pattern info.
 361         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 362         * scripts/features/se_explicit: Add tests for handling '$$' in
 363         prerequisite lists with and without setting .SECONDEXPANSION.
 364         * scripts/features/order_only: Convert to run_make_test().
 365         * run_make_tests.pl (set_more_defaults): If we can't get the value
 366         of $(MAKE) from make, then fatal immediately.
 367
 368 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 369
 370         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 371         an eval to trap errors) and if it exists, use POSIX::getcwd to
 372         find the working directory.  If it doesn't exist, go back to the
 373         previous methods.  This tries to be more accurate on Windows
 374         systems.
 375
 376 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 377
 378         * scripts/functions/abspath: Add some text to the error messages
 379         to get a better idea of what's wrong.  Make warnings instead of
 380         errors.
 381
 382         * scripts/features/patspecific_vars: Don't use "test", which is
 383         UNIX specific.  Print the values and let the test script match
 384         them.
 385
 386 2005-08-25  Paul Smith  <psmith@gnu.org>
 387
 388         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 389         former works better with non-UNIX environments.  Fixes Savannah
 390         bug #14129.
 391
 392 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 393
 394         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 395         $(sort) so that the resulting order is no longer filesystem-
 396         dependant.
 397
 398 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 399
 400         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 401
 402 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 403
 404         * scripts/features/parallelism: Add a test for a bug reported by
 405         Michael Matz (matz@suse.de) in which make exits without waiting
 406         for all its children in some situations during parallel builds.
 407
 408 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 409
 410         * test_driver.pl: Reset the environment to a clean value every
 411         time before we invoke make.  I'm suspicious that the environment
 412         isn't handled the same way in Windows as it is in UNIX, and some
 413         variables are leaking out beyond the tests they are intended for.
 414         Create an %extraENV hash tests can set to add more env. vars.
 415         * tests/scripts/features/export: Change to use %extraENV.
 416         * tests/scripts/functions/eval: Ditto.
 417         * tests/scripts/functions/origin: Ditto.
 418         * tests/scripts/options/dash-e: Ditto.
 419         * tests/scripts/variables/SHELL: Ditto.
 420
 421 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 422
 423         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 424         files.
 425         * scripts/features/reinvoke: Rewrite to be safer on systems with
 426         subsecond timestamps.
 427         * scripts/features/patternrules: False exits with different error
 428         codes on different systems (for example, Linux => 1, Solaris => 255).
 429
 430         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 431         to be sure it will be considered updated when it's remade.
 432
 433 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 434
 435         * scripts/functions/shell: New test suite for the shell function.
 436
 437 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 438
 439         * scripts/features/include: Test include/-include/sinclude with no
 440         arguments.  Tests fix for Savannah bug #1761.
 441
 442         * scripts/misc/general3: Implement comprehensive testing of
 443         backslash-newline behavior in command scripts: various types of
 444         quoting, fast path / slow path, etc.
 445         Tests fix for Savannah bug #1332.
 446
 447         * scripts/options/symlinks: Test symlinks to non-existent files.
 448         Tests fix for Savannah bug #13280.
 449
 450         * scripts/misc/general3: Test semicolons in variable references.
 451         Tests fix for Savannah bug #1454.
 452
 453         * scripts/variables/MAKE_RESTARTS: New file: test the
 454         MAKE_RESTARTS variable.
 455         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 456         Tests fix for Savannah bug #7566.
 457         * scripts/options/dash-W: New file: test the -W flag, including
 458         re-exec infinite looping.
 459
 460 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 461
 462         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 463         This test only works on systems that have /dev/full (e.g., Linux).
 464
 465 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 466
 467         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 468
 469 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 470
 471         * scripts/features/include: Add a test for Savannah bug #13216.
 472         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 473
 474 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 475
 476         * scripts/features/conditionals: Add tests for the new if... else
 477         if... endif syntax.
 478
 479 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 480
 481         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 482         DEFAULT_GOAL.
 483
 484 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 485
 486         * scripts/features/parallelism: Add a test for exporting recursive
 487         variables containing $(shell ) calls.  Rewrite this script to use
 488         run_make_test() everywhere.
 489
 490 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 491
 492         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 493
 494 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 495
 496         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 497
 498 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 499
 500         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 501
 502 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 503
 504         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 505         bug #12266.
 506
 507 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 508
 509         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 510
 511 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 512
 513         * scripts/features/se_implicit: Add a test for stem
 514         termination bug. Add a test for stem triple-expansion bug.
 515
 516         * scripts/features/se_statpat: Add a test for stem
 517         triple-expansion bug.
 518
 519         * scripts/features/statipattrules: Change test #4 to reflect
 520         new way empty prerequisite list is handled.
 521
 522
 523 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 524
 525         * scripts/features/statipattrules: Add a test for
 526         Savannah bug #12180.
 527
 528 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 529
 530         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 531
 532         * scripts/options/symlinks: New file to test checking of symlink
 533         timestamps.  Can't use filename dash-L because it conflicts with
 534         dash-l on case-insensitive filesystems.
 535
 536         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 537         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 538         unique filenames.
 539
 540 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 541
 542         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 543         special variable.
 544
 545 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 546
 547         * scripts/features/se_explicit: Test the second expansion in
 548         explicit rules.
 549         * scripts/features/se_implicit: Test the second expansion in
 550         implicit rules.
 551         * scripts/features/se_statpat: Test the second expansion in
 552         static pattern rules.
 553         * scripts/variables/automatic: Fix to work with the second
 554         expansion.
 555
 556         * scripts/misc/general4: Add a test for bug #12091.
 557
 558 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 559
 560         * scripts/functions/eval: Check that eval of targets within
 561         command scripts fails.  See Savannah bug # 12124.
 562
 563 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 564
 565         * test_driver.pl (compare_output): If a basic comparison of the
 566         log and answer doesn't match, try harder: change all backslashes
 567         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 568
 569 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 570
 571         * scripts/features/recursion: Test command line variable settings:
 572         only one instance of a given variable should be provided.
 573
 574 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 575
 576         * tests/scripts/functions/abspath: New file: test `abspath'
 577         built-in function.
 578
 579         * tests/scripts/functions/realpath: New file: test `realpath'
 580         built-in function.
 581
 582 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 583
 584         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 585         this doesn't really test anything useful in UNIX but...
 586
 587         * scripts/variables/SHELL: New file: test proper handling of SHELL
 588         according to POSIX rules.  Fixes bug #1276.
 589
 590 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 591
 592         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 593
 594 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 595
 596         * scripts/features/patspecific_vars: Test simple/recursive
 597         variable expansion.
 598
 599 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 600
 601         * scripts/features/include: Test dontcare flag inheritance
 602         when rebuilding makefiles.
 603
 604 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 605
 606         * scripts/features/patspecific_vars: Test exported variables.
 607
 608 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 609
 610         * run_make_tests.pl (run_make_test): Don't add newlines to the
 611         makestring or answer if they are completely empty.
 612
 613         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 614
 615         * scripts/test_template: Rework the template.
 616
 617 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 618
 619         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 620         `#!/usr/bin/env perl'.
 621
 622         * scripts/features/implicit_prereq_eval: Test implicit rule
 623         prerequisite evaluation code.
 624
 625 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 626
 627         * run_make_tests.pl (run_make_test): Enhance to allow the make
 628         string to be undef: in that case it reuses the previous make
 629         string.  Allows multiple tests on the same makefile.
 630
 631         * scripts/variables/flavors: Add some tests for prefix characters
 632         interacting with define/endef variables.
 633
 634 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 635
 636         * scripts/functions/substitution: Rewrite to use run_make_test()
 637         interface, and add test for substitution failures reported by
 638         Markus Mauhart <qwe123@chello.at>.
 639
 640 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 641
 642         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 643         to track both the testing categories _AND_ the number of
 644         individual tests, and report both sets of numbers.
 645
 646 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 647
 648         * scripts/functions/origin: Set our own environment variable
 649         rather than relying on $HOME.
 650
 651 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 652
 653         * scripts/features/conditionals: Test arguments to ifn?def which
 654         contain whitespace (such as a function that is evaluated).  Bug
 655         #7257.
 656
 657 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 658
 659         * scripts/features/order_only: Test order-only prerequisites in
 660         pattern rules (patch #2349).
 661
 662 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 663
 664         * scripts/functions/if: Test if on conditionals with trailing
 665         whitespace--bug #5798.
 666
 667         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 668
 669 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 670
 671         * scripts/features/patspecific_vars: Test multiple patterns
 672         matching the same target--Bug #1405.
 673
 674 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 675
 676         * run_make_tests.pl (set_more_defaults): A new $port_type of
 677         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 678         for OS/2.
 679
 680 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 681
 682         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 683         not prerequisites)--Bug #2515.
 684
 685 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 686
 687         * scripts/features/targetvars: Test very long target-specific
 688         variable definition lines (longer than the default make buffer
 689         length).  Tests patch # 1022.
 690
 691         * scripts/functions/eval: Test very recursive $(eval ...) calls
 692         with simple variable expansion (bug #2238).
 693
 694         * scripts/functions/word: Test error handling for word and
 695         wordlist functions (bug #2407).
 696
 697 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 698
 699         * scripts/functions/call: Test recursive argument masking (bug
 700         #1744).
 701
 702 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 703
 704         * scripts/functions/eval: Test using $(eval ...) inside
 705         conditionals (Bug #1516).
 706
 707 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 708
 709         * scripts/options/dash-t: Add a test for handling -t on targets
 710         with no commands (Bug #1418).
 711
 712 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 713
 714         * scripts/features/targetvars: Add a test for exporting
 715         target-specific vars (Bug #1391).
 716
 717 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 718
 719         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 720         and $${@F}.
 721
 722 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 723
 724         * scripts/features/escape: Test handling of escaped comment
 725         characters in targets and prerequisites.
 726
 727 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 728
 729         * scripts/features/export: Test export/unexport of multiple
 730         variables in a single command.
 731
 732 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 733
 734         * scripts/features/targetvars: Tests for Bug #940: test
 735         target-specific and pattern-specific variables in conjunction with
 736         double-colon targets.
 737
 738 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 739
 740         * test_driver.pl (compare_output): Match the new format for time
 741         skew error messages.
 742
 743         * scripts/features/export: Created.  Add tests for export/unexport
 744         capabilities, including exporting/unexporting expanded variables.
 745
 746         * scripts/features/conditionals: Add a test for expanded variables
 747         in ifdef conditionals.
 748
 749 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 750
 751         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 752         invocations.
 753         * scripts/features/vpathgpath: Ditto.
 754         * scripts/features/vpathplus: Ditto.
 755         * scripts/options/dash-n: Ditto.
 756         * scripts/targets/INTERMEDIATE: Ditto.
 757         * scripts/targets/SECONDARY: Ditto.
 758
 759         * scripts/options/dash-t: Added a test for the -t bug fixed by
 760         Henning Makholm.  This test was also contributed by Henning.
 761
 762         * scripts/misc/general4: Add a test suite for obscure algorithmic
 763         features of make.  First test: make sure creation subdirectories
 764         as prerequisites of targets works properly.
 765
 766         * scripts/misc/version: Remove this bogus test.
 767
 768 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 769
 770         * scripts/misc/general3: Add a test for makefiles that don't end
 771         in newlines.
 772
 773         * scripts/variables/special: Create tests for the special
 774         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 775         for now as it's not yet supported.
 776
 777 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 778
 779         * scripts/options/dash-B: Add a test for the new -B option.
 780
 781 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 782
 783         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 784         -valgrind option to the test suite.
 785         (set_more_defaults): Set up the file descriptor to capture
 786         Valgrind output.  We have to unset its close-on-exec flag; we
 787         hardcode the value for F_SETFD (2) rather than load it; hopefully
 788         this will help us avoid breaking the Windows/DOS test suite.
 789
 790 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 791
 792         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 793         $$(@F).
 794
 795         * test_driver.pl (utouch): Create a new function that creates a
 796         file with a specific timestamp offset.  Use of this function will
 797         let us avoid lots of annoying sleep() invocations in the tests
 798         just to get proper timestamping, which will make the tests run a
 799         lot faster.  So far it's only used in the automatic test suite.
 800
 801 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 802
 803         * scripts/variables/automatic: Create a test for automatic variables.
 804
 805 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 806
 807         * scripts/features/order_only: Test new order-only prerequisites.
 808
 809 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 810
 811         * scripts/functions/eval: Test new function.
 812         * scripts/functions/value: Test new function.
 813         * scripts/variables/MAKEFILE_LIST: Test new variable.
 814
 815 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 816
 817         * scripts/functions/call: New test: transitive closure
 818         implementation using $(call ...) to test variable recursion.
 819
 820 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 821
 822         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 823         directories in the script directories.
 824
 825 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 826
 827         * scripts/variables/flavors: Test define/endef scripts where only
 828         one of the command lines is quiet.
 829
 830 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 831
 832         * scripts/options/dash-q: New file; test the -q option.  Includes
 833         a test for PR/1780.
 834
 835 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 836
 837         * scripts/features/targetvars: Added a test for PR/1709: allowing
 838         semicolons in target-specific variable values.
 839
 840 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 841
 842         * scripts/functions/addsuffix: Test for an empty final argument.
 843         Actually this bug might have happened for any function, but this
 844         one was handy.
 845
 846 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 847
 848         * scripts/options/general: If parallel jobs are not supported,
 849         expect a warning message from Make.
 850
 851 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 852
 853         * scripts/options/general: Don't try -jN with N != 1 if parallel
 854         jobs are not supported.
 855
 856 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 857
 858         * scripts/options/general: Test general option processing (PR/1716).
 859
 860 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 861
 862         * scripts/functions/strip: Test empty value to strip (PR/1689).
 863
 864 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 865
 866         * scripts/features/reinvoke: Sleep before updating the target
 867         files in the first test, to ensure its time stamp really gets
 868         newer; otherwise Make might re-exec more than once.
 869
 870 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 871
 872         * scripts/features/double_colon: Don't run the parallel tests if
 873         parallel jobs aren't supported.
 874
 875 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 876
 877         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 878
 879 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 880
 881         * scripts/features/statipattrules: Test that static pattern rules
 882         whose prerequisite patterns resolve to empty strings throw an
 883         error (instead of dumping core).  Fixes PR/1670.
 884
 885         * scripts/features/reinvoke: Make more robust by touching "b"
 886         first, to ensure it's not newer than "a".
 887         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 888         * scripts/options/dash-n: Ditto.
 889
 890         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 891         recursive invocations of $(call ...) to break.  I can't come up
 892         with any way to get both working at the same time, so I backed out
 893         the fix to 1527 and added a test case for recursive calls.  This
 894         also tests the fix for PR/1610.
 895
 896         * scripts/features/double_colon: Test that circular dependencies
 897         in double-colon rule sets are detected correctly (PR/1671).
 898
 899 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 900
 901         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 902         .INTERMEDIATE files when given on the command line (PR/1669).
 903
 904 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 905
 906         * scripts/options/dash-k: Add a test for error detection by
 907         multiple targets depending on the same prerequisite with -k.
 908         For PR/1634.
 909
 910 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 911
 912         * scripts/features/escape: Add a test for backslash-escaped spaces
 913         in a target name (PR/1586).
 914
 915 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 916
 917         * scripts/features/patspecific_vars: Add a test for pattern-specific
 918         target variables inherited from the parent target (PR/1407).
 919
 920 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 921
 922         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 923         to make sure sorting order, etc. is predictable.
 924         Reported by Andreas Jaeger <aj@suse.de>.
 925
 926         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 927         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 928         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 929         1 for other systems.
 930         * scripts/features/vpathplus (touchfiles): Use the $wtime value
 931         instead of hardcoding 2.
 932         * scripts/targets/SECONDARY: Ditto.
 933         * scripts/targets/INTERMEDIATE: Ditto.
 934
 935 2000-01-27  Paul D. Smith  <psmith@gnu.org>
 936
 937         * test_driver.pl (toplevel): Don't try to run test scripts which
 938         are really directories.
 939
 940 2000-01-23  Paul D. Smith  <psmith@gnu.org>
 941
 942         * scripts/features/include: Remove a check; the fix caused more
 943         problems than the error, so I removed it and removed the test for
 944         it.
 945
 946 2000-01-11  Paul D. Smith  <psmith@gnu.org>
 947
 948         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
 949         sure $(call ...) doesn't eval its arguments and that you can
 950         invoke foreach from it without looping forever.
 951
 952 1999-12-15  Paul D. Smith  <psmith@gnu.org>
 953
 954         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
 955         .INTERMEDIATE settings on files don't disable them as implicit
 956         intermediate possibilities.
 957
 958 1999-12-01  Paul D. Smith  <psmith@gnu.org>
 959
 960         * scripts/features/double_colon: Add a test for PR/1476: Try
 961         double-colon rules as non-goal targets and during parallel builds
 962         to make sure they're handled serially.
 963
 964 1999-11-17  Paul D. Smith  <psmith@gnu.org>
 965
 966         * scripts/functions/if: Add a test for PR/1429: put some text
 967         after an if-statement to make sure it works.
 968
 969         * scripts/features/targetvars: Add a test for PR/1380: handling +=
 970         in target-specific variable definitions correctly.
 971
 972 1999-10-15  Paul D. Smith  <psmith@gnu.org>
 973
 974         * scripts/variables/MAKEFILES: This was really broken: it didn't
 975         test anything at all, really.  Rewrote it, plus added a test for
 976         PR/1394.
 977
 978 1999-10-13  Paul D. Smith  <psmith@gnu.org>
 979
 980         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
 981         behave properly when used with recursive targets".
 982
 983 1999-10-08  Paul D. Smith  <psmith@gnu.org>
 984
 985         * scripts/features/targetvars: Add a check for PR/1378:
 986         "Target-specific vars don't inherit correctly"
 987
 988 1999-09-29  Paul D. Smith  <psmith@gnu.org>
 989
 990         * test_driver.pl (get_osname): Change $fancy_file_names to
 991         $short_filenames and reverse the logic.
 992         (run_each_test): Change test of non-existent $port_host to use
 993         $short_filenames--problem reported by Eli Zaretskii.
 994
 995 1999-09-23  Paul D. Smith  <psmith@gnu.org>
 996
 997         * scripts/features/parallelism: Add a check to ensure that the
 998         jobserver works when we re-invoke.  Also cleaned up the tests a
 999         little, reducing the number of rules we use so the test won't need
1000         as many "sleep" commands.
1001
1002 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1003
1004         * scripts/features/reinvoke: Remove invocations of "touch" in
1005         makefiles.  See the comments on the touch function rewrite below.
1006         Note that UNIX touch behaves the same way if the file already
1007         exists: it sets the time to the _local_ time.  We don't want
1008         this.  This is probably a good tip for makefile writers in
1009         general, actually... where practical.
1010         * scripts/options/dash-l: Ditto.
1011         * scripts/options/dash-n: Ditto.
1012
1013         * test_driver.pl (run_each_test): In retrospect, I don't like the
1014         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1015         changed it back to use .log, .base, and .diff.
1016
1017         * run_make_tests.pl (set_more_defaults): Move the check for the
1018         make pathname to here from set_defaults (that's too early since it
1019         happens before the command line processing).
1020         Create a new variable $port_type, calculated from $osname, to
1021         specify what kind of system we're running on.  We should integrate
1022         the VOS stuff here, too.
1023         (valid_option): Comment out the workdir/-work stuff so people
1024         won't be fooled into thinking it works... someone needs to fix
1025         this, though!
1026
1027         * scripts/functions/origin: Use $port_type instead of $osname.
1028         * scripts/functions/foreach: Ditto.
1029         * scripts/features/default_names: Ditto.
1030
1031 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1032
1033         * test_driver.pl (touch): Rewrite this function.  Previously it
1034         used to use utime() to hard-set the time based on the current
1035         local clock, or, if the file didn't exist, it merely created it.
1036         This mirrors exactly what real UNIX touch does, but it fails badly
1037         on networked filesystems where the FS server clock is skewed from
1038         the local clock: normally modifying a file causes it to get a mod
1039         time based on the _server's_ clock.  Hard-setting it based on the
1040         _local_ clock causes gratuitous errors and makes the tests
1041         unreliable except on local filesystems.  The new function will
1042         simply modify the file, allowing the filesystem to set the mod
1043         time as it sees fit.
1044
1045         * scripts/features/parallelism: The second test output could
1046         change depending on how fast some scripts completed; use "sleep"
1047         to force the order we want.
1048
1049         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1050         means that "%ENV = ();" doesn't do the right thing.  This worked
1051         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1052         the environment rather than require specific versions.
1053
1054         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1055         modifier "s", so the tests will run with Perl 4.
1056         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1057         option in PURIFYOPTIONS.
1058         (setup_for_test): Don't remove any logs unless $pure_log is set.
1059
1060 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1061
1062         * scripts/features/reinvoke: Put the SHELL definition in the right
1063         test makefile.
1064
1065 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1066
1067         ChangeLog file for the test suite created.
1068 \f
1069
1070 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1071 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1072 This file is part of GNU Make.
1073
1074 GNU Make is free software; you can redistribute it and/or modify it under the
1075 terms of the GNU General Public License as published by the Free Software
1076 Foundation; either version 3 of the License, or (at your option) any later
1077 version.
1078
1079 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1080 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1081 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1082
1083 You should have received a copy of the GNU General Public License along with
1084 this program.  If not, see <http://www.gnu.org/licenses/>.