tests/ChangeLog

   1 2011-09-12  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/functions/call: Verify that using export in a $(call ...)
   4         context creates a global variable.  See Savannah bug #32498.
   5
   6 2011-09-02  Paul Smith  <psmith@gnu.org>
   7
   8         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
   9         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
  10
  11 2011-08-29  Paul Smith  <psmith@gnu.org>
  12
  13         * scripts/features/varnesting: Test resetting of variables while
  14         expanding them.  See Savannah patch #7534
  15
  16 2011-06-12  Paul Smith  <psmith@gnu.org>
  17
  18         * scripts/features/archives: Check archives with whitespace at the
  19         beginning, end, and extra in the middle.
  20         Another test for Savannah bug #30612.
  21
  22 2011-05-07  Paul Smith  <psmith@gnu.org>
  23
  24         * scripts/variables/private: Ensure we skip private variables when
  25         appending.  Test for Savannah bug #32872.
  26
  27         * scripts/functions/wildcard: Verify wildcard used to test for
  28         file existence/non-existence.
  29
  30 2011-05-02  Paul Smith  <psmith@gnu.org>
  31
  32         * scripts/functions/sort: Add a test for Savannah bug #33125.
  33
  34 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
  35
  36         * scripts/features/shell_assignment: Regression for "!=" feature
  37
  38 2010-11-06  Paul Smith  <psmith@gnu.org>
  39
  40         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
  41         * scripts/functions/call: Ditto.
  42         * scripts/variables/special: Ditto.
  43
  44         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
  45
  46 2010-08-29  Paul Smith  <psmith@gnu.org>
  47
  48         * scripts/features/errors: Add new error message to output text.
  49         * scripts/variables/SHELL: Ditto.
  50         * scripts/targets/POSIX: Ditto.
  51         * scripts/options/dash-k: Ditto.
  52         * scripts/features/vpathplus: Ditto.
  53         * scripts/features/patternrules: Ditto.
  54         * scripts/features/parallelism: Ditto.
  55
  56 2010-08-13  Paul Smith  <psmith@gnu.org>
  57
  58         * scripts/features/archives: New regression tests for archive
  59         support.  Test for fix to Savannah bug #30612.
  60
  61         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
  62         the features available in $(.FEATURES).
  63
  64 2010-08-10  Paul Smith  <psmith@gnu.org>
  65
  66         * scripts/features/reinvoke: Ensure command line variable settings
  67         are preserved across make re-exec.  Tests Savannah bug #30723.
  68
  69 2010-07-28  Paul Smith  <psmith@gnu.org>
  70
  71         * scripts/targets/POSIX: Compatibility issues with Solaris (and
  72         Tru64?); "false" returns different exit codes, and set -x shows
  73         output with extra whitespace.  Run the commands by hand first to
  74         find out what the real shell would do, then compare what make does.
  75         * scripts/variables/SHELL: Ditto.
  76
  77 2010-07-12  Paul Smith  <psmith@gnu.org>
  78
  79         * test_driver.pl: Add a new $perl_name containing the path to Perl.
  80         * run_make_tests.pl (run_make_test): Replace the special string
  81         #PERL# in a makefile etc. with the path the Perl executable so
  82         makefiles can use it.
  83
  84         * scripts/targets/ONESHELL: Add a new set of regression tests for
  85         the .ONESHELL feature.
  86
  87 2010-07-06  Paul Smith  <psmith@gnu.org>
  88
  89         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
  90
  91         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
  92         Verify that enabling .POSIX changes the shell flags to set -e.
  93
  94 2010-07-01  Paul Smith  <psmith@gnu.org>
  95
  96         * scripts/features/recursion: Add a space to separate command-line
  97         args.  Fixes Savannah bug #29968.
  98
  99 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
 100
 101         * scripts/features/vpath3: Test for the new library search
 102         behavior.
 103
 104 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 105
 106         * scripts/features/se_explicit: Enable the test for now fixed
 107         Savannah bug 25780.
 108
 109 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 110
 111         * scripts/variables/undefine: Tests for the new undefine feature.
 112
 113 2009-10-03  Paul Smith  <psmith@gnu.org>
 114
 115         * scripts/features/parallelism: Test for open Savannah bug #26846.
 116
 117         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
 118
 119         * scripts/variables/MAKEFLAGS: Created.
 120         Add test for Savannah bug #2216 (still open).
 121
 122         * scripts/features/include: Test for Savannah bug #102 (still open).
 123
 124 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
 125
 126         * scripts/features/include: Add diagnostics issuing tests for
 127         cases where targets have been updated and failed with the
 128         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
 129
 130 2009-09-28  Paul Smith  <psmith@gnu.org>
 131
 132         * scripts/functions/shell: Add regression test for Savannah bug
 133         #20513 (still open).
 134
 135         * scripts/features/se_explicit: Add regression tests for Savannah
 136         bug #25780 (still open).
 137
 138         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
 139         that runs tests we know will fail.  This allows us to add
 140         regression tests to the test suite for bugs that haven't been
 141         fixed yet.
 142
 143 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
 144
 145         * scripts/features/patspecific_vars: Add a test for the shortest
 146         stem first order.
 147
 148         * scripts/features/patternrules: Add a test for the shortest stem
 149         first order.
 150
 151 2009-09-24  Paul Smith  <psmith@gnu.org>
 152
 153         * scripts/features/se_implicit: Add a test for order-only
 154         secondary expansion prerequisites.
 155
 156 2009-09-23  Paul Smith  <psmith@gnu.org>
 157
 158         * scripts/features/patternrules: Test that we can remove pattern
 159         rules, both single and multiple prerequisites.  Savannah bug #18622.
 160
 161         * scripts/features/echoing: Rework for run_make_test().
 162
 163 2009-06-14  Paul Smith  <psmith@gnu.org>
 164
 165         * scripts/features/vpath: Verify we don't get bogus circular
 166         dependency warnings if we choose a different file via vpath during
 167         update.  Savannah bug #13529.
 168
 169 2009-06-13  Paul Smith  <psmith@gnu.org>
 170
 171         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
 172         files (and files included by them) don't set the default goal.
 173         Savannah bug #13401.
 174
 175         * scripts/functions/wildcard: Test that wildcards with
 176         non-existent glob matchers return empty.
 177
 178 2009-06-09  Paul Smith  <psmith@gnu.org>
 179
 180         * scripts/options/dash-B: Test the $? works correctly with -B.
 181         Savannah bug #17825.
 182
 183         * scripts/features/patternrules: Test that dependencies of
 184         "also_make" targets are created properly.  Savannah bug #19108.
 185
 186         * test_driver.pl (compare_output): Create a "run" file for failed
 187         tests containing the command that was run.
 188         (get_runfile): New function.
 189
 190         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
 191         allow memcheck and massif tools.
 192
 193         * scripts/features/patternrules: Have to comment out a line in the
 194         first test due to backing out a change that broke the implicit
 195         rule search algorithm.  Savannah bug #17752.
 196         * scripts/misc/general4: Remove a test that is redundant with
 197         patternrules.
 198
 199         * scripts/features/parallelism: Add a test for re-exec with
 200         jobserver master override.  Savannah bug #18124.
 201
 202 2009-06-08  Paul Smith  <psmith@gnu.org>
 203
 204         * scripts/features/targetvars: Add a test for continued target
 205         vars after a semicolon.  Savannah bug #17521.
 206
 207 2009-06-07  Paul Smith  <psmith@gnu.org>
 208
 209         * scripts/features/se_explicit: Make sure we catch defining
 210         prereqs during snap_deps().  Savannah bug #24622.
 211
 212         * scripts/variables/automatic: Check prereq ordering when the
 213         target with the recipe has no prereqs.  Savannah bug #21198.
 214
 215         * scripts/variables/LIBPATTERNS: Add a new set of test for
 216         $(.LIBPATTERNS) (previously untested!)
 217
 218 2009-06-04  Paul Smith  <psmith@gnu.org>
 219
 220         * scripts/variables/SHELL: The export target-specific SHELL test
 221         has an incorrect known-good-value.
 222
 223         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
 224
 225         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
 226
 227 2009-05-31  Paul Smith  <psmith@gnu.org>
 228
 229         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 230
 231         * scripts/features/targetvars: Add tests of overrides for Savannah
 232         bug #26207.
 233         * scripts/features/patspecific_vars: Ditto.
 234
 235         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 236
 237 2009-05-30  Paul Smith  <psmith@gnu.org>
 238
 239         * scripts/variables/flavors: Update with new variable flavor tests.
 240         * scripts/variables/define: Create a new set of tests for
 241         define/endef and move those aspects of the flavors suite here.
 242
 243 2009-05-25  Paul Smith  <psmith@gnu.org>
 244
 245         * scripts/features/targetvars: Ditto.
 246
 247         * scripts/features/export: Test new variable parsing abilities.
 248
 249 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 250
 251         * scripts/variables/private: Create a new suite of tests for 'private'.
 252
 253 2007-11-04  Paul Smith  <psmith@gnu.org>
 254
 255         * scripts/functions/eval: Update error message for command -> recipe.
 256
 257         * test_driver.pl (compare_output): Allow the answer to be a regex,
 258         if surrounded by '/'.
 259         * scripts/misc/close_stdout: Use a regex for the answer, since
 260         sometimes the error will have a description and sometimes it won't.
 261
 262 2007-09-10  Paul Smith  <psmith@gnu.org>
 263
 264         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 265
 266 2007-08-15  Paul Smith  <psmith@gnu.org>
 267
 268         These test cases were contributed by
 269         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 270         Savannah bugs #3330 and #15919.
 271
 272         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 273         15919.
 274
 275         * scripts/features/parallelism: Add tests for wrong answer/hang
 276         combining INTERMEDIATE, order-only prereqs, and parallelism.
 277         See Savannah bugs 3330 and 15919.
 278
 279 2007-07-13  Paul Smith  <psmith@gnu.org>
 280
 281         Install a timeout so tests can never loop infinitely.
 282         Original idea and patch for a single-test version provided by
 283         Icarus Sparry <savannah@icarus.freeuk.com>
 284
 285         * test_driver.pl (_run_command): New function: this is called by
 286         other functions to actually run a command.  Before we run it,
 287         install a SIGALRM handler and set up a timer to go off in the
 288         future (default is 5s; this can be overridden by individual tests).
 289         (run_command): Call it.
 290         (run_command_with_output): Call it.
 291
 292         * run_make_tests.pl (run_make_with_options): Override the default
 293         timeout if the caller requests it.
 294         (run_make_test): Pass any timeout override to run_make_with_options.
 295
 296         * scripts/features/parallelism: Increase the timeout for long tests.
 297         * scripts/options/dash-l: Ditto.
 298
 299 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 300
 301         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 302         ENV here.  This doesn't always work.
 303         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 304         environment.  Fixes Savannah bug #16698.
 305
 306 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 307
 308         * scripts/variables/automatic: Add back the test for bug #8154.
 309
 310 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 311
 312         * scripts/functions/realpath: Don't run tests with multiple
 313         initial slashes on Windows: those paths mean something different.
 314
 315 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 316
 317         * scripts/features/parallelism: Test that the jobserver is
 318         properly managed when we have to re-exec the master instance of
 319         make.
 320
 321 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 322
 323         * scripts/features/statipattrules: Add tests for bug #16053.
 324
 325 2006-03-09  Paul Smith  <psmith@gnu.org>
 326
 327         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 328         with DOS drive letters.  Fixes Savannah bug #15947.
 329
 330         * test_driver.pl (run_each_test): Set the status properly even
 331         when a test fails to execute.  Fixes Savannah bug #15942.
 332
 333         * scripts/functions/foreach: Use a different environment variable
 334         other than PATH to avoid differences with Windows platforms.
 335         Fixes Savannah bug #15938.
 336
 337 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 338
 339         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 340         type W32.  Fixed Savannah bug #15937.
 341
 342         * scripts/features/default_names: Don't call error() when the test
 343         fails.  Fixes Savannah bug #15941.
 344
 345 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 346
 347         * scripts/features/targetvars: Test a complex construction which
 348         guarantees that we have to merge variable lists of different
 349         sizes.  Tests for Savannah bug #15757.
 350
 351 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 352
 353         * scripts/functions/error: Make sure filename/lineno information
 354         is related to where the error is expanded, not where it's set.
 355         * scripts/functions/warning: Ditto.
 356         * scripts/functions/foreach: Check for different error conditions.
 357         * scripts/functions/word: Ditto.
 358         * scripts/variables/negative: Test some variable reference failure
 359         conditions.
 360         * scripts/options/warn-undefined-variables: Test the
 361         --warn-undefined-variables flag.
 362
 363 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 364
 365         * run_make_tests.pl (set_more_defaults): Update valgrind support
 366         for newer versions.
 367         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 368         beginning with ".").
 369
 370         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 371         functions.
 372
 373 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 374
 375         * scripts/features/parallelism: Add a test for bug #15641.
 376
 377 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 378
 379         * scripts/options/dash-W: Add a test for bug #15341.
 380
 381 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 382
 383         * scripts/variables/automatic: Add a test for bug #8154.
 384
 385         * README: Update to reflect the current state of the test suite.
 386
 387 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 388
 389         * scripts/features/parallelism, scripts/functions/wildcard,
 390         scripts/targets/FORCE, scripts/targets/PHONY,
 391         scripts/targets/SILENT: Use the default setting for
 392         $delete_command.  Fixes bug #15085.
 393
 394         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 395
 396 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 397
 398         * scripts/misc/general4: Test implicit rules with '$' in the
 399         prereq list & prereq patterns.
 400         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 401
 402 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 403
 404         * scripts/features/patternrules: Add a test for bug #13022.
 405
 406 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 407
 408         * scripts/features/double_colon: Add a test for bug #14334.
 409
 410 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 411
 412         * scripts/functions/flavor: Add a test for the flavor function.
 413
 414 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 415
 416         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 417         special variable.
 418
 419 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 420
 421         * scripts/misc/general4: Test '$$' in prerequisites list.
 422         * scripts/features/statipattrules: Rewrite to use run_make_test().
 423         Add various static pattern info.
 424         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 425         * scripts/features/se_explicit: Add tests for handling '$$' in
 426         prerequisite lists with and without setting .SECONDEXPANSION.
 427         * scripts/features/order_only: Convert to run_make_test().
 428         * run_make_tests.pl (set_more_defaults): If we can't get the value
 429         of $(MAKE) from make, then fatal immediately.
 430
 431 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 432
 433         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 434         an eval to trap errors) and if it exists, use POSIX::getcwd to
 435         find the working directory.  If it doesn't exist, go back to the
 436         previous methods.  This tries to be more accurate on Windows
 437         systems.
 438
 439 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 440
 441         * scripts/functions/abspath: Add some text to the error messages
 442         to get a better idea of what's wrong.  Make warnings instead of
 443         errors.
 444
 445         * scripts/features/patspecific_vars: Don't use "test", which is
 446         UNIX specific.  Print the values and let the test script match
 447         them.
 448
 449 2005-08-25  Paul Smith  <psmith@gnu.org>
 450
 451         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 452         former works better with non-UNIX environments.  Fixes Savannah
 453         bug #14129.
 454
 455 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 456
 457         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 458         $(sort) so that the resulting order is no longer filesystem-
 459         dependant.
 460
 461 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 462
 463         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 464
 465 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 466
 467         * scripts/features/parallelism: Add a test for a bug reported by
 468         Michael Matz (matz@suse.de) in which make exits without waiting
 469         for all its children in some situations during parallel builds.
 470
 471 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 472
 473         * test_driver.pl: Reset the environment to a clean value every
 474         time before we invoke make.  I'm suspicious that the environment
 475         isn't handled the same way in Windows as it is in UNIX, and some
 476         variables are leaking out beyond the tests they are intended for.
 477         Create an %extraENV hash tests can set to add more env. vars.
 478         * tests/scripts/features/export: Change to use %extraENV.
 479         * tests/scripts/functions/eval: Ditto.
 480         * tests/scripts/functions/origin: Ditto.
 481         * tests/scripts/options/dash-e: Ditto.
 482         * tests/scripts/variables/SHELL: Ditto.
 483
 484 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 485
 486         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 487         files.
 488         * scripts/features/reinvoke: Rewrite to be safer on systems with
 489         subsecond timestamps.
 490         * scripts/features/patternrules: False exits with different error
 491         codes on different systems (for example, Linux => 1, Solaris => 255).
 492
 493         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 494         to be sure it will be considered updated when it's remade.
 495
 496 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 497
 498         * scripts/functions/shell: New test suite for the shell function.
 499
 500 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 501
 502         * scripts/features/include: Test include/-include/sinclude with no
 503         arguments.  Tests fix for Savannah bug #1761.
 504
 505         * scripts/misc/general3: Implement comprehensive testing of
 506         backslash-newline behavior in command scripts: various types of
 507         quoting, fast path / slow path, etc.
 508         Tests fix for Savannah bug #1332.
 509
 510         * scripts/options/symlinks: Test symlinks to non-existent files.
 511         Tests fix for Savannah bug #13280.
 512
 513         * scripts/misc/general3: Test semicolons in variable references.
 514         Tests fix for Savannah bug #1454.
 515
 516         * scripts/variables/MAKE_RESTARTS: New file: test the
 517         MAKE_RESTARTS variable.
 518         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 519         Tests fix for Savannah bug #7566.
 520         * scripts/options/dash-W: New file: test the -W flag, including
 521         re-exec infinite looping.
 522
 523 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 524
 525         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 526         This test only works on systems that have /dev/full (e.g., Linux).
 527
 528 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 529
 530         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 531
 532 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 533
 534         * scripts/features/include: Add a test for Savannah bug #13216.
 535         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 536
 537 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 538
 539         * scripts/features/conditionals: Add tests for the new if... else
 540         if... endif syntax.
 541
 542 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 543
 544         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 545         DEFAULT_GOAL.
 546
 547 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 548
 549         * scripts/features/parallelism: Add a test for exporting recursive
 550         variables containing $(shell ) calls.  Rewrite this script to use
 551         run_make_test() everywhere.
 552
 553 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 554
 555         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 556
 557 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 558
 559         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 560
 561 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 562
 563         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 564
 565 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 566
 567         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 568         bug #12266.
 569
 570 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 571
 572         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 573
 574 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 575
 576         * scripts/features/se_implicit: Add a test for stem
 577         termination bug. Add a test for stem triple-expansion bug.
 578
 579         * scripts/features/se_statpat: Add a test for stem
 580         triple-expansion bug.
 581
 582         * scripts/features/statipattrules: Change test #4 to reflect
 583         new way empty prerequisite list is handled.
 584
 585
 586 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 587
 588         * scripts/features/statipattrules: Add a test for
 589         Savannah bug #12180.
 590
 591 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 592
 593         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 594
 595         * scripts/options/symlinks: New file to test checking of symlink
 596         timestamps.  Can't use filename dash-L because it conflicts with
 597         dash-l on case-insensitive filesystems.
 598
 599         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 600         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 601         unique filenames.
 602
 603 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 604
 605         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 606         special variable.
 607
 608 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 609
 610         * scripts/features/se_explicit: Test the second expansion in
 611         explicit rules.
 612         * scripts/features/se_implicit: Test the second expansion in
 613         implicit rules.
 614         * scripts/features/se_statpat: Test the second expansion in
 615         static pattern rules.
 616         * scripts/variables/automatic: Fix to work with the second
 617         expansion.
 618
 619         * scripts/misc/general4: Add a test for bug #12091.
 620
 621 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 622
 623         * scripts/functions/eval: Check that eval of targets within
 624         command scripts fails.  See Savannah bug # 12124.
 625
 626 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 627
 628         * test_driver.pl (compare_output): If a basic comparison of the
 629         log and answer doesn't match, try harder: change all backslashes
 630         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 631
 632 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 633
 634         * scripts/features/recursion: Test command line variable settings:
 635         only one instance of a given variable should be provided.
 636
 637 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 638
 639         * tests/scripts/functions/abspath: New file: test `abspath'
 640         built-in function.
 641
 642         * tests/scripts/functions/realpath: New file: test `realpath'
 643         built-in function.
 644
 645 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 646
 647         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 648         this doesn't really test anything useful in UNIX but...
 649
 650         * scripts/variables/SHELL: New file: test proper handling of SHELL
 651         according to POSIX rules.  Fixes bug #1276.
 652
 653 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 654
 655         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 656
 657 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 658
 659         * scripts/features/patspecific_vars: Test simple/recursive
 660         variable expansion.
 661
 662 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 663
 664         * scripts/features/include: Test dontcare flag inheritance
 665         when rebuilding makefiles.
 666
 667 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 668
 669         * scripts/features/patspecific_vars: Test exported variables.
 670
 671 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 672
 673         * run_make_tests.pl (run_make_test): Don't add newlines to the
 674         makestring or answer if they are completely empty.
 675
 676         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 677
 678         * scripts/test_template: Rework the template.
 679
 680 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 681
 682         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 683         `#!/usr/bin/env perl'.
 684
 685         * scripts/features/implicit_prereq_eval: Test implicit rule
 686         prerequisite evaluation code.
 687
 688 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 689
 690         * run_make_tests.pl (run_make_test): Enhance to allow the make
 691         string to be undef: in that case it reuses the previous make
 692         string.  Allows multiple tests on the same makefile.
 693
 694         * scripts/variables/flavors: Add some tests for prefix characters
 695         interacting with define/endef variables.
 696
 697 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 698
 699         * scripts/functions/substitution: Rewrite to use run_make_test()
 700         interface, and add test for substitution failures reported by
 701         Markus Mauhart <qwe123@chello.at>.
 702
 703 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 704
 705         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 706         to track both the testing categories _AND_ the number of
 707         individual tests, and report both sets of numbers.
 708
 709 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 710
 711         * scripts/functions/origin: Set our own environment variable
 712         rather than relying on $HOME.
 713
 714 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 715
 716         * scripts/features/conditionals: Test arguments to ifn?def which
 717         contain whitespace (such as a function that is evaluated).  Bug
 718         #7257.
 719
 720 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 721
 722         * scripts/features/order_only: Test order-only prerequisites in
 723         pattern rules (patch #2349).
 724
 725 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 726
 727         * scripts/functions/if: Test if on conditionals with trailing
 728         whitespace--bug #5798.
 729
 730         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 731
 732 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 733
 734         * scripts/features/patspecific_vars: Test multiple patterns
 735         matching the same target--Bug #1405.
 736
 737 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 738
 739         * run_make_tests.pl (set_more_defaults): A new $port_type of
 740         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 741         for OS/2.
 742
 743 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 744
 745         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 746         not prerequisites)--Bug #2515.
 747
 748 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 749
 750         * scripts/features/targetvars: Test very long target-specific
 751         variable definition lines (longer than the default make buffer
 752         length).  Tests patch # 1022.
 753
 754         * scripts/functions/eval: Test very recursive $(eval ...) calls
 755         with simple variable expansion (bug #2238).
 756
 757         * scripts/functions/word: Test error handling for word and
 758         wordlist functions (bug #2407).
 759
 760 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 761
 762         * scripts/functions/call: Test recursive argument masking (bug
 763         #1744).
 764
 765 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 766
 767         * scripts/functions/eval: Test using $(eval ...) inside
 768         conditionals (Bug #1516).
 769
 770 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 771
 772         * scripts/options/dash-t: Add a test for handling -t on targets
 773         with no commands (Bug #1418).
 774
 775 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 776
 777         * scripts/features/targetvars: Add a test for exporting
 778         target-specific vars (Bug #1391).
 779
 780 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 781
 782         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 783         and $${@F}.
 784
 785 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 786
 787         * scripts/features/escape: Test handling of escaped comment
 788         characters in targets and prerequisites.
 789
 790 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 791
 792         * scripts/features/export: Test export/unexport of multiple
 793         variables in a single command.
 794
 795 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 796
 797         * scripts/features/targetvars: Tests for Bug #940: test
 798         target-specific and pattern-specific variables in conjunction with
 799         double-colon targets.
 800
 801 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 802
 803         * test_driver.pl (compare_output): Match the new format for time
 804         skew error messages.
 805
 806         * scripts/features/export: Created.  Add tests for export/unexport
 807         capabilities, including exporting/unexporting expanded variables.
 808
 809         * scripts/features/conditionals: Add a test for expanded variables
 810         in ifdef conditionals.
 811
 812 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 813
 814         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 815         invocations.
 816         * scripts/features/vpathgpath: Ditto.
 817         * scripts/features/vpathplus: Ditto.
 818         * scripts/options/dash-n: Ditto.
 819         * scripts/targets/INTERMEDIATE: Ditto.
 820         * scripts/targets/SECONDARY: Ditto.
 821
 822         * scripts/options/dash-t: Added a test for the -t bug fixed by
 823         Henning Makholm.  This test was also contributed by Henning.
 824
 825         * scripts/misc/general4: Add a test suite for obscure algorithmic
 826         features of make.  First test: make sure creation subdirectories
 827         as prerequisites of targets works properly.
 828
 829         * scripts/misc/version: Remove this bogus test.
 830
 831 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 832
 833         * scripts/misc/general3: Add a test for makefiles that don't end
 834         in newlines.
 835
 836         * scripts/variables/special: Create tests for the special
 837         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 838         for now as it's not yet supported.
 839
 840 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 841
 842         * scripts/options/dash-B: Add a test for the new -B option.
 843
 844 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 845
 846         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 847         -valgrind option to the test suite.
 848         (set_more_defaults): Set up the file descriptor to capture
 849         Valgrind output.  We have to unset its close-on-exec flag; we
 850         hardcode the value for F_SETFD (2) rather than load it; hopefully
 851         this will help us avoid breaking the Windows/DOS test suite.
 852
 853 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 854
 855         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 856         $$(@F).
 857
 858         * test_driver.pl (utouch): Create a new function that creates a
 859         file with a specific timestamp offset.  Use of this function will
 860         let us avoid lots of annoying sleep() invocations in the tests
 861         just to get proper timestamping, which will make the tests run a
 862         lot faster.  So far it's only used in the automatic test suite.
 863
 864 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 865
 866         * scripts/variables/automatic: Create a test for automatic variables.
 867
 868 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 869
 870         * scripts/features/order_only: Test new order-only prerequisites.
 871
 872 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 873
 874         * scripts/functions/eval: Test new function.
 875         * scripts/functions/value: Test new function.
 876         * scripts/variables/MAKEFILE_LIST: Test new variable.
 877
 878 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 879
 880         * scripts/functions/call: New test: transitive closure
 881         implementation using $(call ...) to test variable recursion.
 882
 883 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 884
 885         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 886         directories in the script directories.
 887
 888 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 889
 890         * scripts/variables/flavors: Test define/endef scripts where only
 891         one of the command lines is quiet.
 892
 893 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 894
 895         * scripts/options/dash-q: New file; test the -q option.  Includes
 896         a test for PR/1780.
 897
 898 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 899
 900         * scripts/features/targetvars: Added a test for PR/1709: allowing
 901         semicolons in target-specific variable values.
 902
 903 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 904
 905         * scripts/functions/addsuffix: Test for an empty final argument.
 906         Actually this bug might have happened for any function, but this
 907         one was handy.
 908
 909 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 910
 911         * scripts/options/general: If parallel jobs are not supported,
 912         expect a warning message from Make.
 913
 914 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 915
 916         * scripts/options/general: Don't try -jN with N != 1 if parallel
 917         jobs are not supported.
 918
 919 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 920
 921         * scripts/options/general: Test general option processing (PR/1716).
 922
 923 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 924
 925         * scripts/functions/strip: Test empty value to strip (PR/1689).
 926
 927 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 928
 929         * scripts/features/reinvoke: Sleep before updating the target
 930         files in the first test, to ensure its time stamp really gets
 931         newer; otherwise Make might re-exec more than once.
 932
 933 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 934
 935         * scripts/features/double_colon: Don't run the parallel tests if
 936         parallel jobs aren't supported.
 937
 938 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 939
 940         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 941
 942 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 943
 944         * scripts/features/statipattrules: Test that static pattern rules
 945         whose prerequisite patterns resolve to empty strings throw an
 946         error (instead of dumping core).  Fixes PR/1670.
 947
 948         * scripts/features/reinvoke: Make more robust by touching "b"
 949         first, to ensure it's not newer than "a".
 950         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 951         * scripts/options/dash-n: Ditto.
 952
 953         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 954         recursive invocations of $(call ...) to break.  I can't come up
 955         with any way to get both working at the same time, so I backed out
 956         the fix to 1527 and added a test case for recursive calls.  This
 957         also tests the fix for PR/1610.
 958
 959         * scripts/features/double_colon: Test that circular dependencies
 960         in double-colon rule sets are detected correctly (PR/1671).
 961
 962 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 963
 964         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 965         .INTERMEDIATE files when given on the command line (PR/1669).
 966
 967 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 968
 969         * scripts/options/dash-k: Add a test for error detection by
 970         multiple targets depending on the same prerequisite with -k.
 971         For PR/1634.
 972
 973 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 974
 975         * scripts/features/escape: Add a test for backslash-escaped spaces
 976         in a target name (PR/1586).
 977
 978 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 979
 980         * scripts/features/patspecific_vars: Add a test for pattern-specific
 981         target variables inherited from the parent target (PR/1407).
 982
 983 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 984
 985         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 986         to make sure sorting order, etc. is predictable.
 987         Reported by Andreas Jaeger <aj@suse.de>.
 988
 989         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 990         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 991         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 992         1 for other systems.
 993         * scripts/features/vpathplus (touchfiles): Use the $wtime value
 994         instead of hardcoding 2.
 995         * scripts/targets/SECONDARY: Ditto.
 996         * scripts/targets/INTERMEDIATE: Ditto.
 997
 998 2000-01-27  Paul D. Smith  <psmith@gnu.org>
 999
1000         * test_driver.pl (toplevel): Don't try to run test scripts which
1001         are really directories.
1002
1003 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1004
1005         * scripts/features/include: Remove a check; the fix caused more
1006         problems than the error, so I removed it and removed the test for
1007         it.
1008
1009 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1010
1011         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1012         sure $(call ...) doesn't eval its arguments and that you can
1013         invoke foreach from it without looping forever.
1014
1015 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1016
1017         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1018         .INTERMEDIATE settings on files don't disable them as implicit
1019         intermediate possibilities.
1020
1021 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1022
1023         * scripts/features/double_colon: Add a test for PR/1476: Try
1024         double-colon rules as non-goal targets and during parallel builds
1025         to make sure they're handled serially.
1026
1027 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1028
1029         * scripts/functions/if: Add a test for PR/1429: put some text
1030         after an if-statement to make sure it works.
1031
1032         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1033         in target-specific variable definitions correctly.
1034
1035 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1036
1037         * scripts/variables/MAKEFILES: This was really broken: it didn't
1038         test anything at all, really.  Rewrote it, plus added a test for
1039         PR/1394.
1040
1041 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1042
1043         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1044         behave properly when used with recursive targets".
1045
1046 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1047
1048         * scripts/features/targetvars: Add a check for PR/1378:
1049         "Target-specific vars don't inherit correctly"
1050
1051 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1052
1053         * test_driver.pl (get_osname): Change $fancy_file_names to
1054         $short_filenames and reverse the logic.
1055         (run_each_test): Change test of non-existent $port_host to use
1056         $short_filenames--problem reported by Eli Zaretskii.
1057
1058 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1059
1060         * scripts/features/parallelism: Add a check to ensure that the
1061         jobserver works when we re-invoke.  Also cleaned up the tests a
1062         little, reducing the number of rules we use so the test won't need
1063         as many "sleep" commands.
1064
1065 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1066
1067         * scripts/features/reinvoke: Remove invocations of "touch" in
1068         makefiles.  See the comments on the touch function rewrite below.
1069         Note that UNIX touch behaves the same way if the file already
1070         exists: it sets the time to the _local_ time.  We don't want
1071         this.  This is probably a good tip for makefile writers in
1072         general, actually... where practical.
1073         * scripts/options/dash-l: Ditto.
1074         * scripts/options/dash-n: Ditto.
1075
1076         * test_driver.pl (run_each_test): In retrospect, I don't like the
1077         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1078         changed it back to use .log, .base, and .diff.
1079
1080         * run_make_tests.pl (set_more_defaults): Move the check for the
1081         make pathname to here from set_defaults (that's too early since it
1082         happens before the command line processing).
1083         Create a new variable $port_type, calculated from $osname, to
1084         specify what kind of system we're running on.  We should integrate
1085         the VOS stuff here, too.
1086         (valid_option): Comment out the workdir/-work stuff so people
1087         won't be fooled into thinking it works... someone needs to fix
1088         this, though!
1089
1090         * scripts/functions/origin: Use $port_type instead of $osname.
1091         * scripts/functions/foreach: Ditto.
1092         * scripts/features/default_names: Ditto.
1093
1094 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1095
1096         * test_driver.pl (touch): Rewrite this function.  Previously it
1097         used to use utime() to hard-set the time based on the current
1098         local clock, or, if the file didn't exist, it merely created it.
1099         This mirrors exactly what real UNIX touch does, but it fails badly
1100         on networked filesystems where the FS server clock is skewed from
1101         the local clock: normally modifying a file causes it to get a mod
1102         time based on the _server's_ clock.  Hard-setting it based on the
1103         _local_ clock causes gratuitous errors and makes the tests
1104         unreliable except on local filesystems.  The new function will
1105         simply modify the file, allowing the filesystem to set the mod
1106         time as it sees fit.
1107
1108         * scripts/features/parallelism: The second test output could
1109         change depending on how fast some scripts completed; use "sleep"
1110         to force the order we want.
1111
1112         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1113         means that "%ENV = ();" doesn't do the right thing.  This worked
1114         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1115         the environment rather than require specific versions.
1116
1117         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1118         modifier "s", so the tests will run with Perl 4.
1119         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1120         option in PURIFYOPTIONS.
1121         (setup_for_test): Don't remove any logs unless $pure_log is set.
1122
1123 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1124
1125         * scripts/features/reinvoke: Put the SHELL definition in the right
1126         test makefile.
1127
1128 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1129
1130         ChangeLog file for the test suite created.
1131 \f
1132
1133 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1134 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1135 This file is part of GNU Make.
1136
1137 GNU Make is free software; you can redistribute it and/or modify it under the
1138 terms of the GNU General Public License as published by the Free Software
1139 Foundation; either version 3 of the License, or (at your option) any later
1140 version.
1141
1142 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1143 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1144 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1145
1146 You should have received a copy of the GNU General Public License along with
1147 this program.  If not, see <http://www.gnu.org/licenses/>.