tests/ChangeLog

   1 2011-09-02  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
   4         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
   5
   6 2011-08-29  Paul Smith  <psmith@gnu.org>
   7
   8         * scripts/features/varnesting: Test resetting of variables while
   9         expanding them.  See Savannah patch #7534
  10
  11 2011-06-12  Paul Smith  <psmith@gnu.org>
  12
  13         * scripts/features/archives: Check archives with whitespace at the
  14         beginning, end, and extra in the middle.
  15         Another test for Savannah bug #30612.
  16
  17 2011-05-07  Paul Smith  <psmith@gnu.org>
  18
  19         * scripts/variables/private: Ensure we skip private variables when
  20         appending.  Test for Savannah bug #32872.
  21
  22         * scripts/functions/wildcard: Verify wildcard used to test for
  23         file existence/non-existence.
  24
  25 2011-05-02  Paul Smith  <psmith@gnu.org>
  26
  27         * scripts/functions/sort: Add a test for Savannah bug #33125.
  28
  29 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
  30
  31         * scripts/features/shell_assignment: Regression for "!=" feature
  32
  33 2010-11-06  Paul Smith  <psmith@gnu.org>
  34
  35         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
  36         * scripts/functions/call: Ditto.
  37         * scripts/variables/special: Ditto.
  38
  39         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
  40
  41 2010-08-29  Paul Smith  <psmith@gnu.org>
  42
  43         * scripts/features/errors: Add new error message to output text.
  44         * scripts/variables/SHELL: Ditto.
  45         * scripts/targets/POSIX: Ditto.
  46         * scripts/options/dash-k: Ditto.
  47         * scripts/features/vpathplus: Ditto.
  48         * scripts/features/patternrules: Ditto.
  49         * scripts/features/parallelism: Ditto.
  50
  51 2010-08-13  Paul Smith  <psmith@gnu.org>
  52
  53         * scripts/features/archives: New regression tests for archive
  54         support.  Test for fix to Savannah bug #30612.
  55
  56         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
  57         the features available in $(.FEATURES).
  58
  59 2010-08-10  Paul Smith  <psmith@gnu.org>
  60
  61         * scripts/features/reinvoke: Ensure command line variable settings
  62         are preserved across make re-exec.  Tests Savannah bug #30723.
  63
  64 2010-07-28  Paul Smith  <psmith@gnu.org>
  65
  66         * scripts/targets/POSIX: Compatibility issues with Solaris (and
  67         Tru64?); "false" returns different exit codes, and set -x shows
  68         output with extra whitespace.  Run the commands by hand first to
  69         find out what the real shell would do, then compare what make does.
  70         * scripts/variables/SHELL: Ditto.
  71
  72 2010-07-12  Paul Smith  <psmith@gnu.org>
  73
  74         * test_driver.pl: Add a new $perl_name containing the path to Perl.
  75         * run_make_tests.pl (run_make_test): Replace the special string
  76         #PERL# in a makefile etc. with the path the Perl executable so
  77         makefiles can use it.
  78
  79         * scripts/targets/ONESHELL: Add a new set of regression tests for
  80         the .ONESHELL feature.
  81
  82 2010-07-06  Paul Smith  <psmith@gnu.org>
  83
  84         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
  85
  86         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
  87         Verify that enabling .POSIX changes the shell flags to set -e.
  88
  89 2010-07-01  Paul Smith  <psmith@gnu.org>
  90
  91         * scripts/features/recursion: Add a space to separate command-line
  92         args.  Fixes Savannah bug #29968.
  93
  94 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
  95
  96         * scripts/features/vpath3: Test for the new library search
  97         behavior.
  98
  99 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 100
 101         * scripts/features/se_explicit: Enable the test for now fixed
 102         Savannah bug 25780.
 103
 104 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 105
 106         * scripts/variables/undefine: Tests for the new undefine feature.
 107
 108 2009-10-03  Paul Smith  <psmith@gnu.org>
 109
 110         * scripts/features/parallelism: Test for open Savannah bug #26846.
 111
 112         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
 113
 114         * scripts/variables/MAKEFLAGS: Created.
 115         Add test for Savannah bug #2216 (still open).
 116
 117         * scripts/features/include: Test for Savannah bug #102 (still open).
 118
 119 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
 120
 121         * scripts/features/include: Add diagnostics issuing tests for
 122         cases where targets have been updated and failed with the
 123         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
 124
 125 2009-09-28  Paul Smith  <psmith@gnu.org>
 126
 127         * scripts/functions/shell: Add regression test for Savannah bug
 128         #20513 (still open).
 129
 130         * scripts/features/se_explicit: Add regression tests for Savannah
 131         bug #25780 (still open).
 132
 133         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
 134         that runs tests we know will fail.  This allows us to add
 135         regression tests to the test suite for bugs that haven't been
 136         fixed yet.
 137
 138 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
 139
 140         * scripts/features/patspecific_vars: Add a test for the shortest
 141         stem first order.
 142
 143         * scripts/features/patternrules: Add a test for the shortest stem
 144         first order.
 145
 146 2009-09-24  Paul Smith  <psmith@gnu.org>
 147
 148         * scripts/features/se_implicit: Add a test for order-only
 149         secondary expansion prerequisites.
 150
 151 2009-09-23  Paul Smith  <psmith@gnu.org>
 152
 153         * scripts/features/patternrules: Test that we can remove pattern
 154         rules, both single and multiple prerequisites.  Savannah bug #18622.
 155
 156         * scripts/features/echoing: Rework for run_make_test().
 157
 158 2009-06-14  Paul Smith  <psmith@gnu.org>
 159
 160         * scripts/features/vpath: Verify we don't get bogus circular
 161         dependency warnings if we choose a different file via vpath during
 162         update.  Savannah bug #13529.
 163
 164 2009-06-13  Paul Smith  <psmith@gnu.org>
 165
 166         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
 167         files (and files included by them) don't set the default goal.
 168         Savannah bug #13401.
 169
 170         * scripts/functions/wildcard: Test that wildcards with
 171         non-existent glob matchers return empty.
 172
 173 2009-06-09  Paul Smith  <psmith@gnu.org>
 174
 175         * scripts/options/dash-B: Test the $? works correctly with -B.
 176         Savannah bug #17825.
 177
 178         * scripts/features/patternrules: Test that dependencies of
 179         "also_make" targets are created properly.  Savannah bug #19108.
 180
 181         * test_driver.pl (compare_output): Create a "run" file for failed
 182         tests containing the command that was run.
 183         (get_runfile): New function.
 184
 185         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
 186         allow memcheck and massif tools.
 187
 188         * scripts/features/patternrules: Have to comment out a line in the
 189         first test due to backing out a change that broke the implicit
 190         rule search algorithm.  Savannah bug #17752.
 191         * scripts/misc/general4: Remove a test that is redundant with
 192         patternrules.
 193
 194         * scripts/features/parallelism: Add a test for re-exec with
 195         jobserver master override.  Savannah bug #18124.
 196
 197 2009-06-08  Paul Smith  <psmith@gnu.org>
 198
 199         * scripts/features/targetvars: Add a test for continued target
 200         vars after a semicolon.  Savannah bug #17521.
 201
 202 2009-06-07  Paul Smith  <psmith@gnu.org>
 203
 204         * scripts/features/se_explicit: Make sure we catch defining
 205         prereqs during snap_deps().  Savannah bug #24622.
 206
 207         * scripts/variables/automatic: Check prereq ordering when the
 208         target with the recipe has no prereqs.  Savannah bug #21198.
 209
 210         * scripts/variables/LIBPATTERNS: Add a new set of test for
 211         $(.LIBPATTERNS) (previously untested!)
 212
 213 2009-06-04  Paul Smith  <psmith@gnu.org>
 214
 215         * scripts/variables/SHELL: The export target-specific SHELL test
 216         has an incorrect known-good-value.
 217
 218         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
 219
 220         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
 221
 222 2009-05-31  Paul Smith  <psmith@gnu.org>
 223
 224         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 225
 226         * scripts/features/targetvars: Add tests of overrides for Savannah
 227         bug #26207.
 228         * scripts/features/patspecific_vars: Ditto.
 229
 230         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 231
 232 2009-05-30  Paul Smith  <psmith@gnu.org>
 233
 234         * scripts/variables/flavors: Update with new variable flavor tests.
 235         * scripts/variables/define: Create a new set of tests for
 236         define/endef and move those aspects of the flavors suite here.
 237
 238 2009-05-25  Paul Smith  <psmith@gnu.org>
 239
 240         * scripts/features/targetvars: Ditto.
 241
 242         * scripts/features/export: Test new variable parsing abilities.
 243
 244 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 245
 246         * scripts/variables/private: Create a new suite of tests for 'private'.
 247
 248 2007-11-04  Paul Smith  <psmith@gnu.org>
 249
 250         * scripts/functions/eval: Update error message for command -> recipe.
 251
 252         * test_driver.pl (compare_output): Allow the answer to be a regex,
 253         if surrounded by '/'.
 254         * scripts/misc/close_stdout: Use a regex for the answer, since
 255         sometimes the error will have a description and sometimes it won't.
 256
 257 2007-09-10  Paul Smith  <psmith@gnu.org>
 258
 259         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 260
 261 2007-08-15  Paul Smith  <psmith@gnu.org>
 262
 263         These test cases were contributed by
 264         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 265         Savannah bugs #3330 and #15919.
 266
 267         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 268         15919.
 269
 270         * scripts/features/parallelism: Add tests for wrong answer/hang
 271         combining INTERMEDIATE, order-only prereqs, and parallelism.
 272         See Savannah bugs 3330 and 15919.
 273
 274 2007-07-13  Paul Smith  <psmith@gnu.org>
 275
 276         Install a timeout so tests can never loop infinitely.
 277         Original idea and patch for a single-test version provided by
 278         Icarus Sparry <savannah@icarus.freeuk.com>
 279
 280         * test_driver.pl (_run_command): New function: this is called by
 281         other functions to actually run a command.  Before we run it,
 282         install a SIGALRM handler and set up a timer to go off in the
 283         future (default is 5s; this can be overridden by individual tests).
 284         (run_command): Call it.
 285         (run_command_with_output): Call it.
 286
 287         * run_make_tests.pl (run_make_with_options): Override the default
 288         timeout if the caller requests it.
 289         (run_make_test): Pass any timeout override to run_make_with_options.
 290
 291         * scripts/features/parallelism: Increase the timeout for long tests.
 292         * scripts/options/dash-l: Ditto.
 293
 294 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 295
 296         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 297         ENV here.  This doesn't always work.
 298         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 299         environment.  Fixes Savannah bug #16698.
 300
 301 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 302
 303         * scripts/variables/automatic: Add back the test for bug #8154.
 304
 305 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 306
 307         * scripts/functions/realpath: Don't run tests with multiple
 308         initial slashes on Windows: those paths mean something different.
 309
 310 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 311
 312         * scripts/features/parallelism: Test that the jobserver is
 313         properly managed when we have to re-exec the master instance of
 314         make.
 315
 316 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 317
 318         * scripts/features/statipattrules: Add tests for bug #16053.
 319
 320 2006-03-09  Paul Smith  <psmith@gnu.org>
 321
 322         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 323         with DOS drive letters.  Fixes Savannah bug #15947.
 324
 325         * test_driver.pl (run_each_test): Set the status properly even
 326         when a test fails to execute.  Fixes Savannah bug #15942.
 327
 328         * scripts/functions/foreach: Use a different environment variable
 329         other than PATH to avoid differences with Windows platforms.
 330         Fixes Savannah bug #15938.
 331
 332 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 333
 334         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 335         type W32.  Fixed Savannah bug #15937.
 336
 337         * scripts/features/default_names: Don't call error() when the test
 338         fails.  Fixes Savannah bug #15941.
 339
 340 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 341
 342         * scripts/features/targetvars: Test a complex construction which
 343         guarantees that we have to merge variable lists of different
 344         sizes.  Tests for Savannah bug #15757.
 345
 346 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 347
 348         * scripts/functions/error: Make sure filename/lineno information
 349         is related to where the error is expanded, not where it's set.
 350         * scripts/functions/warning: Ditto.
 351         * scripts/functions/foreach: Check for different error conditions.
 352         * scripts/functions/word: Ditto.
 353         * scripts/variables/negative: Test some variable reference failure
 354         conditions.
 355         * scripts/options/warn-undefined-variables: Test the
 356         --warn-undefined-variables flag.
 357
 358 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 359
 360         * run_make_tests.pl (set_more_defaults): Update valgrind support
 361         for newer versions.
 362         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 363         beginning with ".").
 364
 365         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 366         functions.
 367
 368 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 369
 370         * scripts/features/parallelism: Add a test for bug #15641.
 371
 372 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 373
 374         * scripts/options/dash-W: Add a test for bug #15341.
 375
 376 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 377
 378         * scripts/variables/automatic: Add a test for bug #8154.
 379
 380         * README: Update to reflect the current state of the test suite.
 381
 382 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 383
 384         * scripts/features/parallelism, scripts/functions/wildcard,
 385         scripts/targets/FORCE, scripts/targets/PHONY,
 386         scripts/targets/SILENT: Use the default setting for
 387         $delete_command.  Fixes bug #15085.
 388
 389         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 390
 391 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 392
 393         * scripts/misc/general4: Test implicit rules with '$' in the
 394         prereq list & prereq patterns.
 395         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 396
 397 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 398
 399         * scripts/features/patternrules: Add a test for bug #13022.
 400
 401 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 402
 403         * scripts/features/double_colon: Add a test for bug #14334.
 404
 405 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 406
 407         * scripts/functions/flavor: Add a test for the flavor function.
 408
 409 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 410
 411         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 412         special variable.
 413
 414 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 415
 416         * scripts/misc/general4: Test '$$' in prerequisites list.
 417         * scripts/features/statipattrules: Rewrite to use run_make_test().
 418         Add various static pattern info.
 419         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 420         * scripts/features/se_explicit: Add tests for handling '$$' in
 421         prerequisite lists with and without setting .SECONDEXPANSION.
 422         * scripts/features/order_only: Convert to run_make_test().
 423         * run_make_tests.pl (set_more_defaults): If we can't get the value
 424         of $(MAKE) from make, then fatal immediately.
 425
 426 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 427
 428         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 429         an eval to trap errors) and if it exists, use POSIX::getcwd to
 430         find the working directory.  If it doesn't exist, go back to the
 431         previous methods.  This tries to be more accurate on Windows
 432         systems.
 433
 434 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 435
 436         * scripts/functions/abspath: Add some text to the error messages
 437         to get a better idea of what's wrong.  Make warnings instead of
 438         errors.
 439
 440         * scripts/features/patspecific_vars: Don't use "test", which is
 441         UNIX specific.  Print the values and let the test script match
 442         them.
 443
 444 2005-08-25  Paul Smith  <psmith@gnu.org>
 445
 446         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 447         former works better with non-UNIX environments.  Fixes Savannah
 448         bug #14129.
 449
 450 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 451
 452         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 453         $(sort) so that the resulting order is no longer filesystem-
 454         dependant.
 455
 456 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 457
 458         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 459
 460 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 461
 462         * scripts/features/parallelism: Add a test for a bug reported by
 463         Michael Matz (matz@suse.de) in which make exits without waiting
 464         for all its children in some situations during parallel builds.
 465
 466 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 467
 468         * test_driver.pl: Reset the environment to a clean value every
 469         time before we invoke make.  I'm suspicious that the environment
 470         isn't handled the same way in Windows as it is in UNIX, and some
 471         variables are leaking out beyond the tests they are intended for.
 472         Create an %extraENV hash tests can set to add more env. vars.
 473         * tests/scripts/features/export: Change to use %extraENV.
 474         * tests/scripts/functions/eval: Ditto.
 475         * tests/scripts/functions/origin: Ditto.
 476         * tests/scripts/options/dash-e: Ditto.
 477         * tests/scripts/variables/SHELL: Ditto.
 478
 479 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 480
 481         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 482         files.
 483         * scripts/features/reinvoke: Rewrite to be safer on systems with
 484         subsecond timestamps.
 485         * scripts/features/patternrules: False exits with different error
 486         codes on different systems (for example, Linux => 1, Solaris => 255).
 487
 488         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 489         to be sure it will be considered updated when it's remade.
 490
 491 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 492
 493         * scripts/functions/shell: New test suite for the shell function.
 494
 495 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 496
 497         * scripts/features/include: Test include/-include/sinclude with no
 498         arguments.  Tests fix for Savannah bug #1761.
 499
 500         * scripts/misc/general3: Implement comprehensive testing of
 501         backslash-newline behavior in command scripts: various types of
 502         quoting, fast path / slow path, etc.
 503         Tests fix for Savannah bug #1332.
 504
 505         * scripts/options/symlinks: Test symlinks to non-existent files.
 506         Tests fix for Savannah bug #13280.
 507
 508         * scripts/misc/general3: Test semicolons in variable references.
 509         Tests fix for Savannah bug #1454.
 510
 511         * scripts/variables/MAKE_RESTARTS: New file: test the
 512         MAKE_RESTARTS variable.
 513         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 514         Tests fix for Savannah bug #7566.
 515         * scripts/options/dash-W: New file: test the -W flag, including
 516         re-exec infinite looping.
 517
 518 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 519
 520         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 521         This test only works on systems that have /dev/full (e.g., Linux).
 522
 523 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 524
 525         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 526
 527 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 528
 529         * scripts/features/include: Add a test for Savannah bug #13216.
 530         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 531
 532 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 533
 534         * scripts/features/conditionals: Add tests for the new if... else
 535         if... endif syntax.
 536
 537 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 538
 539         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 540         DEFAULT_GOAL.
 541
 542 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 543
 544         * scripts/features/parallelism: Add a test for exporting recursive
 545         variables containing $(shell ) calls.  Rewrite this script to use
 546         run_make_test() everywhere.
 547
 548 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 549
 550         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 551
 552 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 553
 554         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 555
 556 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 557
 558         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 559
 560 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 561
 562         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 563         bug #12266.
 564
 565 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 566
 567         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 568
 569 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 570
 571         * scripts/features/se_implicit: Add a test for stem
 572         termination bug. Add a test for stem triple-expansion bug.
 573
 574         * scripts/features/se_statpat: Add a test for stem
 575         triple-expansion bug.
 576
 577         * scripts/features/statipattrules: Change test #4 to reflect
 578         new way empty prerequisite list is handled.
 579
 580
 581 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 582
 583         * scripts/features/statipattrules: Add a test for
 584         Savannah bug #12180.
 585
 586 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 587
 588         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 589
 590         * scripts/options/symlinks: New file to test checking of symlink
 591         timestamps.  Can't use filename dash-L because it conflicts with
 592         dash-l on case-insensitive filesystems.
 593
 594         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 595         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 596         unique filenames.
 597
 598 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 599
 600         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 601         special variable.
 602
 603 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 604
 605         * scripts/features/se_explicit: Test the second expansion in
 606         explicit rules.
 607         * scripts/features/se_implicit: Test the second expansion in
 608         implicit rules.
 609         * scripts/features/se_statpat: Test the second expansion in
 610         static pattern rules.
 611         * scripts/variables/automatic: Fix to work with the second
 612         expansion.
 613
 614         * scripts/misc/general4: Add a test for bug #12091.
 615
 616 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 617
 618         * scripts/functions/eval: Check that eval of targets within
 619         command scripts fails.  See Savannah bug # 12124.
 620
 621 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 622
 623         * test_driver.pl (compare_output): If a basic comparison of the
 624         log and answer doesn't match, try harder: change all backslashes
 625         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 626
 627 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 628
 629         * scripts/features/recursion: Test command line variable settings:
 630         only one instance of a given variable should be provided.
 631
 632 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 633
 634         * tests/scripts/functions/abspath: New file: test `abspath'
 635         built-in function.
 636
 637         * tests/scripts/functions/realpath: New file: test `realpath'
 638         built-in function.
 639
 640 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 641
 642         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 643         this doesn't really test anything useful in UNIX but...
 644
 645         * scripts/variables/SHELL: New file: test proper handling of SHELL
 646         according to POSIX rules.  Fixes bug #1276.
 647
 648 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 649
 650         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 651
 652 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 653
 654         * scripts/features/patspecific_vars: Test simple/recursive
 655         variable expansion.
 656
 657 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 658
 659         * scripts/features/include: Test dontcare flag inheritance
 660         when rebuilding makefiles.
 661
 662 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 663
 664         * scripts/features/patspecific_vars: Test exported variables.
 665
 666 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 667
 668         * run_make_tests.pl (run_make_test): Don't add newlines to the
 669         makestring or answer if they are completely empty.
 670
 671         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 672
 673         * scripts/test_template: Rework the template.
 674
 675 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 676
 677         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 678         `#!/usr/bin/env perl'.
 679
 680         * scripts/features/implicit_prereq_eval: Test implicit rule
 681         prerequisite evaluation code.
 682
 683 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 684
 685         * run_make_tests.pl (run_make_test): Enhance to allow the make
 686         string to be undef: in that case it reuses the previous make
 687         string.  Allows multiple tests on the same makefile.
 688
 689         * scripts/variables/flavors: Add some tests for prefix characters
 690         interacting with define/endef variables.
 691
 692 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 693
 694         * scripts/functions/substitution: Rewrite to use run_make_test()
 695         interface, and add test for substitution failures reported by
 696         Markus Mauhart <qwe123@chello.at>.
 697
 698 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 699
 700         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 701         to track both the testing categories _AND_ the number of
 702         individual tests, and report both sets of numbers.
 703
 704 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 705
 706         * scripts/functions/origin: Set our own environment variable
 707         rather than relying on $HOME.
 708
 709 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 710
 711         * scripts/features/conditionals: Test arguments to ifn?def which
 712         contain whitespace (such as a function that is evaluated).  Bug
 713         #7257.
 714
 715 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 716
 717         * scripts/features/order_only: Test order-only prerequisites in
 718         pattern rules (patch #2349).
 719
 720 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 721
 722         * scripts/functions/if: Test if on conditionals with trailing
 723         whitespace--bug #5798.
 724
 725         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 726
 727 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 728
 729         * scripts/features/patspecific_vars: Test multiple patterns
 730         matching the same target--Bug #1405.
 731
 732 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 733
 734         * run_make_tests.pl (set_more_defaults): A new $port_type of
 735         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 736         for OS/2.
 737
 738 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 739
 740         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 741         not prerequisites)--Bug #2515.
 742
 743 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 744
 745         * scripts/features/targetvars: Test very long target-specific
 746         variable definition lines (longer than the default make buffer
 747         length).  Tests patch # 1022.
 748
 749         * scripts/functions/eval: Test very recursive $(eval ...) calls
 750         with simple variable expansion (bug #2238).
 751
 752         * scripts/functions/word: Test error handling for word and
 753         wordlist functions (bug #2407).
 754
 755 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 756
 757         * scripts/functions/call: Test recursive argument masking (bug
 758         #1744).
 759
 760 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 761
 762         * scripts/functions/eval: Test using $(eval ...) inside
 763         conditionals (Bug #1516).
 764
 765 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 766
 767         * scripts/options/dash-t: Add a test for handling -t on targets
 768         with no commands (Bug #1418).
 769
 770 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 771
 772         * scripts/features/targetvars: Add a test for exporting
 773         target-specific vars (Bug #1391).
 774
 775 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 776
 777         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 778         and $${@F}.
 779
 780 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 781
 782         * scripts/features/escape: Test handling of escaped comment
 783         characters in targets and prerequisites.
 784
 785 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 786
 787         * scripts/features/export: Test export/unexport of multiple
 788         variables in a single command.
 789
 790 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 791
 792         * scripts/features/targetvars: Tests for Bug #940: test
 793         target-specific and pattern-specific variables in conjunction with
 794         double-colon targets.
 795
 796 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 797
 798         * test_driver.pl (compare_output): Match the new format for time
 799         skew error messages.
 800
 801         * scripts/features/export: Created.  Add tests for export/unexport
 802         capabilities, including exporting/unexporting expanded variables.
 803
 804         * scripts/features/conditionals: Add a test for expanded variables
 805         in ifdef conditionals.
 806
 807 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 808
 809         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 810         invocations.
 811         * scripts/features/vpathgpath: Ditto.
 812         * scripts/features/vpathplus: Ditto.
 813         * scripts/options/dash-n: Ditto.
 814         * scripts/targets/INTERMEDIATE: Ditto.
 815         * scripts/targets/SECONDARY: Ditto.
 816
 817         * scripts/options/dash-t: Added a test for the -t bug fixed by
 818         Henning Makholm.  This test was also contributed by Henning.
 819
 820         * scripts/misc/general4: Add a test suite for obscure algorithmic
 821         features of make.  First test: make sure creation subdirectories
 822         as prerequisites of targets works properly.
 823
 824         * scripts/misc/version: Remove this bogus test.
 825
 826 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 827
 828         * scripts/misc/general3: Add a test for makefiles that don't end
 829         in newlines.
 830
 831         * scripts/variables/special: Create tests for the special
 832         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 833         for now as it's not yet supported.
 834
 835 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 836
 837         * scripts/options/dash-B: Add a test for the new -B option.
 838
 839 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 840
 841         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 842         -valgrind option to the test suite.
 843         (set_more_defaults): Set up the file descriptor to capture
 844         Valgrind output.  We have to unset its close-on-exec flag; we
 845         hardcode the value for F_SETFD (2) rather than load it; hopefully
 846         this will help us avoid breaking the Windows/DOS test suite.
 847
 848 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 849
 850         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 851         $$(@F).
 852
 853         * test_driver.pl (utouch): Create a new function that creates a
 854         file with a specific timestamp offset.  Use of this function will
 855         let us avoid lots of annoying sleep() invocations in the tests
 856         just to get proper timestamping, which will make the tests run a
 857         lot faster.  So far it's only used in the automatic test suite.
 858
 859 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 860
 861         * scripts/variables/automatic: Create a test for automatic variables.
 862
 863 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 864
 865         * scripts/features/order_only: Test new order-only prerequisites.
 866
 867 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 868
 869         * scripts/functions/eval: Test new function.
 870         * scripts/functions/value: Test new function.
 871         * scripts/variables/MAKEFILE_LIST: Test new variable.
 872
 873 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 874
 875         * scripts/functions/call: New test: transitive closure
 876         implementation using $(call ...) to test variable recursion.
 877
 878 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 879
 880         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 881         directories in the script directories.
 882
 883 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 884
 885         * scripts/variables/flavors: Test define/endef scripts where only
 886         one of the command lines is quiet.
 887
 888 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 889
 890         * scripts/options/dash-q: New file; test the -q option.  Includes
 891         a test for PR/1780.
 892
 893 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 894
 895         * scripts/features/targetvars: Added a test for PR/1709: allowing
 896         semicolons in target-specific variable values.
 897
 898 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 899
 900         * scripts/functions/addsuffix: Test for an empty final argument.
 901         Actually this bug might have happened for any function, but this
 902         one was handy.
 903
 904 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 905
 906         * scripts/options/general: If parallel jobs are not supported,
 907         expect a warning message from Make.
 908
 909 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 910
 911         * scripts/options/general: Don't try -jN with N != 1 if parallel
 912         jobs are not supported.
 913
 914 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 915
 916         * scripts/options/general: Test general option processing (PR/1716).
 917
 918 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 919
 920         * scripts/functions/strip: Test empty value to strip (PR/1689).
 921
 922 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 923
 924         * scripts/features/reinvoke: Sleep before updating the target
 925         files in the first test, to ensure its time stamp really gets
 926         newer; otherwise Make might re-exec more than once.
 927
 928 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 929
 930         * scripts/features/double_colon: Don't run the parallel tests if
 931         parallel jobs aren't supported.
 932
 933 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 934
 935         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 936
 937 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 938
 939         * scripts/features/statipattrules: Test that static pattern rules
 940         whose prerequisite patterns resolve to empty strings throw an
 941         error (instead of dumping core).  Fixes PR/1670.
 942
 943         * scripts/features/reinvoke: Make more robust by touching "b"
 944         first, to ensure it's not newer than "a".
 945         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 946         * scripts/options/dash-n: Ditto.
 947
 948         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 949         recursive invocations of $(call ...) to break.  I can't come up
 950         with any way to get both working at the same time, so I backed out
 951         the fix to 1527 and added a test case for recursive calls.  This
 952         also tests the fix for PR/1610.
 953
 954         * scripts/features/double_colon: Test that circular dependencies
 955         in double-colon rule sets are detected correctly (PR/1671).
 956
 957 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 958
 959         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 960         .INTERMEDIATE files when given on the command line (PR/1669).
 961
 962 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 963
 964         * scripts/options/dash-k: Add a test for error detection by
 965         multiple targets depending on the same prerequisite with -k.
 966         For PR/1634.
 967
 968 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 969
 970         * scripts/features/escape: Add a test for backslash-escaped spaces
 971         in a target name (PR/1586).
 972
 973 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 974
 975         * scripts/features/patspecific_vars: Add a test for pattern-specific
 976         target variables inherited from the parent target (PR/1407).
 977
 978 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 979
 980         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 981         to make sure sorting order, etc. is predictable.
 982         Reported by Andreas Jaeger <aj@suse.de>.
 983
 984         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 985         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 986         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 987         1 for other systems.
 988         * scripts/features/vpathplus (touchfiles): Use the $wtime value
 989         instead of hardcoding 2.
 990         * scripts/targets/SECONDARY: Ditto.
 991         * scripts/targets/INTERMEDIATE: Ditto.
 992
 993 2000-01-27  Paul D. Smith  <psmith@gnu.org>
 994
 995         * test_driver.pl (toplevel): Don't try to run test scripts which
 996         are really directories.
 997
 998 2000-01-23  Paul D. Smith  <psmith@gnu.org>
 999
1000         * scripts/features/include: Remove a check; the fix caused more
1001         problems than the error, so I removed it and removed the test for
1002         it.
1003
1004 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1005
1006         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1007         sure $(call ...) doesn't eval its arguments and that you can
1008         invoke foreach from it without looping forever.
1009
1010 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1011
1012         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1013         .INTERMEDIATE settings on files don't disable them as implicit
1014         intermediate possibilities.
1015
1016 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1017
1018         * scripts/features/double_colon: Add a test for PR/1476: Try
1019         double-colon rules as non-goal targets and during parallel builds
1020         to make sure they're handled serially.
1021
1022 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1023
1024         * scripts/functions/if: Add a test for PR/1429: put some text
1025         after an if-statement to make sure it works.
1026
1027         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1028         in target-specific variable definitions correctly.
1029
1030 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1031
1032         * scripts/variables/MAKEFILES: This was really broken: it didn't
1033         test anything at all, really.  Rewrote it, plus added a test for
1034         PR/1394.
1035
1036 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1037
1038         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1039         behave properly when used with recursive targets".
1040
1041 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1042
1043         * scripts/features/targetvars: Add a check for PR/1378:
1044         "Target-specific vars don't inherit correctly"
1045
1046 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1047
1048         * test_driver.pl (get_osname): Change $fancy_file_names to
1049         $short_filenames and reverse the logic.
1050         (run_each_test): Change test of non-existent $port_host to use
1051         $short_filenames--problem reported by Eli Zaretskii.
1052
1053 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1054
1055         * scripts/features/parallelism: Add a check to ensure that the
1056         jobserver works when we re-invoke.  Also cleaned up the tests a
1057         little, reducing the number of rules we use so the test won't need
1058         as many "sleep" commands.
1059
1060 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1061
1062         * scripts/features/reinvoke: Remove invocations of "touch" in
1063         makefiles.  See the comments on the touch function rewrite below.
1064         Note that UNIX touch behaves the same way if the file already
1065         exists: it sets the time to the _local_ time.  We don't want
1066         this.  This is probably a good tip for makefile writers in
1067         general, actually... where practical.
1068         * scripts/options/dash-l: Ditto.
1069         * scripts/options/dash-n: Ditto.
1070
1071         * test_driver.pl (run_each_test): In retrospect, I don't like the
1072         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1073         changed it back to use .log, .base, and .diff.
1074
1075         * run_make_tests.pl (set_more_defaults): Move the check for the
1076         make pathname to here from set_defaults (that's too early since it
1077         happens before the command line processing).
1078         Create a new variable $port_type, calculated from $osname, to
1079         specify what kind of system we're running on.  We should integrate
1080         the VOS stuff here, too.
1081         (valid_option): Comment out the workdir/-work stuff so people
1082         won't be fooled into thinking it works... someone needs to fix
1083         this, though!
1084
1085         * scripts/functions/origin: Use $port_type instead of $osname.
1086         * scripts/functions/foreach: Ditto.
1087         * scripts/features/default_names: Ditto.
1088
1089 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1090
1091         * test_driver.pl (touch): Rewrite this function.  Previously it
1092         used to use utime() to hard-set the time based on the current
1093         local clock, or, if the file didn't exist, it merely created it.
1094         This mirrors exactly what real UNIX touch does, but it fails badly
1095         on networked filesystems where the FS server clock is skewed from
1096         the local clock: normally modifying a file causes it to get a mod
1097         time based on the _server's_ clock.  Hard-setting it based on the
1098         _local_ clock causes gratuitous errors and makes the tests
1099         unreliable except on local filesystems.  The new function will
1100         simply modify the file, allowing the filesystem to set the mod
1101         time as it sees fit.
1102
1103         * scripts/features/parallelism: The second test output could
1104         change depending on how fast some scripts completed; use "sleep"
1105         to force the order we want.
1106
1107         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1108         means that "%ENV = ();" doesn't do the right thing.  This worked
1109         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1110         the environment rather than require specific versions.
1111
1112         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1113         modifier "s", so the tests will run with Perl 4.
1114         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1115         option in PURIFYOPTIONS.
1116         (setup_for_test): Don't remove any logs unless $pure_log is set.
1117
1118 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1119
1120         * scripts/features/reinvoke: Put the SHELL definition in the right
1121         test makefile.
1122
1123 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1124
1125         ChangeLog file for the test suite created.
1126 \f
1127
1128 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1129 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1130 This file is part of GNU Make.
1131
1132 GNU Make is free software; you can redistribute it and/or modify it under the
1133 terms of the GNU General Public License as published by the Free Software
1134 Foundation; either version 3 of the License, or (at your option) any later
1135 version.
1136
1137 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1138 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1139 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1140
1141 You should have received a copy of the GNU General Public License along with
1142 this program.  If not, see <http://www.gnu.org/licenses/>.