tests/ChangeLog

   1 2011-05-07  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/variables/private: Ensure we skip private variables when
   4         appending.  Test for Savannah bug #32872.
   5
   6         * scripts/functions/wildcard: Verify wildcard used to test for
   7         file existence/non-existence.
   8
   9 2011-05-02  Paul Smith  <psmith@gnu.org>
  10
  11         * scripts/functions/sort: Add a test for Savannah bug #33125.
  12
  13 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
  14
  15         * scripts/features/shell_assignment: Regression for "!=" feature
  16
  17 2010-11-06  Paul Smith  <psmith@gnu.org>
  18
  19         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
  20         * scripts/functions/call: Ditto.
  21         * scripts/variables/special: Ditto.
  22
  23         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
  24
  25 2010-08-29  Paul Smith  <psmith@gnu.org>
  26
  27         * scripts/features/errors: Add new error message to output text.
  28         * scripts/variables/SHELL: Ditto.
  29         * scripts/targets/POSIX: Ditto.
  30         * scripts/options/dash-k: Ditto.
  31         * scripts/features/vpathplus: Ditto.
  32         * scripts/features/patternrules: Ditto.
  33         * scripts/features/parallelism: Ditto.
  34
  35 2010-08-13  Paul Smith  <psmith@gnu.org>
  36
  37         * scripts/features/archives: New regression tests for archive
  38         support.  Test for fix to Savannah bug #30612.
  39
  40         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
  41         the features available in $(.FEATURES).
  42
  43 2010-08-10  Paul Smith  <psmith@gnu.org>
  44
  45         * scripts/features/reinvoke: Ensure command line variable settings
  46         are preserved across make re-exec.  Tests Savannah bug #30723.
  47
  48 2010-07-28  Paul Smith  <psmith@gnu.org>
  49
  50         * scripts/targets/POSIX: Compatibility issues with Solaris (and
  51         Tru64?); "false" returns different exit codes, and set -x shows
  52         output with extra whitespace.  Run the commands by hand first to
  53         find out what the real shell would do, then compare what make does.
  54         * scripts/variables/SHELL: Ditto.
  55
  56 2010-07-12  Paul Smith  <psmith@gnu.org>
  57
  58         * test_driver.pl: Add a new $perl_name containing the path to Perl.
  59         * run_make_tests.pl (run_make_test): Replace the special string
  60         #PERL# in a makefile etc. with the path the Perl executable so
  61         makefiles can use it.
  62
  63         * scripts/targets/ONESHELL: Add a new set of regression tests for
  64         the .ONESHELL feature.
  65
  66 2010-07-06  Paul Smith  <psmith@gnu.org>
  67
  68         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
  69
  70         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
  71         Verify that enabling .POSIX changes the shell flags to set -e.
  72
  73 2010-07-01  Paul Smith  <psmith@gnu.org>
  74
  75         * scripts/features/recursion: Add a space to separate command-line
  76         args.  Fixes Savannah bug #29968.
  77
  78 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
  79
  80         * scripts/features/vpath3: Test for the new library search
  81         behavior.
  82
  83 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
  84
  85         * scripts/features/se_explicit: Enable the test for now fixed
  86         Savannah bug 25780.
  87
  88 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
  89
  90         * scripts/variables/undefine: Tests for the new undefine feature.
  91
  92 2009-10-03  Paul Smith  <psmith@gnu.org>
  93
  94         * scripts/features/parallelism: Test for open Savannah bug #26846.
  95
  96         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
  97
  98         * scripts/variables/MAKEFLAGS: Created.
  99         Add test for Savannah bug #2216 (still open).
 100
 101         * scripts/features/include: Test for Savannah bug #102 (still open).
 102
 103 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
 104
 105         * scripts/features/include: Add diagnostics issuing tests for
 106         cases where targets have been updated and failed with the
 107         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
 108
 109 2009-09-28  Paul Smith  <psmith@gnu.org>
 110
 111         * scripts/functions/shell: Add regression test for Savannah bug
 112         #20513 (still open).
 113
 114         * scripts/features/se_explicit: Add regression tests for Savannah
 115         bug #25780 (still open).
 116
 117         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
 118         that runs tests we know will fail.  This allows us to add
 119         regression tests to the test suite for bugs that haven't been
 120         fixed yet.
 121
 122 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
 123
 124         * scripts/features/patspecific_vars: Add a test for the shortest
 125         stem first order.
 126
 127         * scripts/features/patternrules: Add a test for the shortest stem
 128         first order.
 129
 130 2009-09-24  Paul Smith  <psmith@gnu.org>
 131
 132         * scripts/features/se_implicit: Add a test for order-only
 133         secondary expansion prerequisites.
 134
 135 2009-09-23  Paul Smith  <psmith@gnu.org>
 136
 137         * scripts/features/patternrules: Test that we can remove pattern
 138         rules, both single and multiple prerequisites.  Savannah bug #18622.
 139
 140         * scripts/features/echoing: Rework for run_make_test().
 141
 142 2009-06-14  Paul Smith  <psmith@gnu.org>
 143
 144         * scripts/features/vpath: Verify we don't get bogus circular
 145         dependency warnings if we choose a different file via vpath during
 146         update.  Savannah bug #13529.
 147
 148 2009-06-13  Paul Smith  <psmith@gnu.org>
 149
 150         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
 151         files (and files included by them) don't set the default goal.
 152         Savannah bug #13401.
 153
 154         * scripts/functions/wildcard: Test that wildcards with
 155         non-existent glob matchers return empty.
 156
 157 2009-06-09  Paul Smith  <psmith@gnu.org>
 158
 159         * scripts/options/dash-B: Test the $? works correctly with -B.
 160         Savannah bug #17825.
 161
 162         * scripts/features/patternrules: Test that dependencies of
 163         "also_make" targets are created properly.  Savannah bug #19108.
 164
 165         * test_driver.pl (compare_output): Create a "run" file for failed
 166         tests containing the command that was run.
 167         (get_runfile): New function.
 168
 169         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
 170         allow memcheck and massif tools.
 171
 172         * scripts/features/patternrules: Have to comment out a line in the
 173         first test due to backing out a change that broke the implicit
 174         rule search algorithm.  Savannah bug #17752.
 175         * scripts/misc/general4: Remove a test that is redundant with
 176         patternrules.
 177
 178         * scripts/features/parallelism: Add a test for re-exec with
 179         jobserver master override.  Savannah bug #18124.
 180
 181 2009-06-08  Paul Smith  <psmith@gnu.org>
 182
 183         * scripts/features/targetvars: Add a test for continued target
 184         vars after a semicolon.  Savannah bug #17521.
 185
 186 2009-06-07  Paul Smith  <psmith@gnu.org>
 187
 188         * scripts/features/se_explicit: Make sure we catch defining
 189         prereqs during snap_deps().  Savannah bug #24622.
 190
 191         * scripts/variables/automatic: Check prereq ordering when the
 192         target with the recipe has no prereqs.  Savannah bug #21198.
 193
 194         * scripts/variables/LIBPATTERNS: Add a new set of test for
 195         $(.LIBPATTERNS) (previously untested!)
 196
 197 2009-06-04  Paul Smith  <psmith@gnu.org>
 198
 199         * scripts/variables/SHELL: The export target-specific SHELL test
 200         has an incorrect known-good-value.
 201
 202         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
 203
 204         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
 205
 206 2009-05-31  Paul Smith  <psmith@gnu.org>
 207
 208         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 209
 210         * scripts/features/targetvars: Add tests of overrides for Savannah
 211         bug #26207.
 212         * scripts/features/patspecific_vars: Ditto.
 213
 214         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 215
 216 2009-05-30  Paul Smith  <psmith@gnu.org>
 217
 218         * scripts/variables/flavors: Update with new variable flavor tests.
 219         * scripts/variables/define: Create a new set of tests for
 220         define/endef and move those aspects of the flavors suite here.
 221
 222 2009-05-25  Paul Smith  <psmith@gnu.org>
 223
 224         * scripts/features/targetvars: Ditto.
 225
 226         * scripts/features/export: Test new variable parsing abilities.
 227
 228 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 229
 230         * scripts/variables/private: Create a new suite of tests for 'private'.
 231
 232 2007-11-04  Paul Smith  <psmith@gnu.org>
 233
 234         * scripts/functions/eval: Update error message for command -> recipe.
 235
 236         * test_driver.pl (compare_output): Allow the answer to be a regex,
 237         if surrounded by '/'.
 238         * scripts/misc/close_stdout: Use a regex for the answer, since
 239         sometimes the error will have a description and sometimes it won't.
 240
 241 2007-09-10  Paul Smith  <psmith@gnu.org>
 242
 243         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 244
 245 2007-08-15  Paul Smith  <psmith@gnu.org>
 246
 247         These test cases were contributed by
 248         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 249         Savannah bugs #3330 and #15919.
 250
 251         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 252         15919.
 253
 254         * scripts/features/parallelism: Add tests for wrong answer/hang
 255         combining INTERMEDIATE, order-only prereqs, and parallelism.
 256         See Savannah bugs 3330 and 15919.
 257
 258 2007-07-13  Paul Smith  <psmith@gnu.org>
 259
 260         Install a timeout so tests can never loop infinitely.
 261         Original idea and patch for a single-test version provided by
 262         Icarus Sparry <savannah@icarus.freeuk.com>
 263
 264         * test_driver.pl (_run_command): New function: this is called by
 265         other functions to actually run a command.  Before we run it,
 266         install a SIGALRM handler and set up a timer to go off in the
 267         future (default is 5s; this can be overridden by individual tests).
 268         (run_command): Call it.
 269         (run_command_with_output): Call it.
 270
 271         * run_make_tests.pl (run_make_with_options): Override the default
 272         timeout if the caller requests it.
 273         (run_make_test): Pass any timeout override to run_make_with_options.
 274
 275         * scripts/features/parallelism: Increase the timeout for long tests.
 276         * scripts/options/dash-l: Ditto.
 277
 278 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 279
 280         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 281         ENV here.  This doesn't always work.
 282         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 283         environment.  Fixes Savannah bug #16698.
 284
 285 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 286
 287         * scripts/variables/automatic: Add back the test for bug #8154.
 288
 289 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 290
 291         * scripts/functions/realpath: Don't run tests with multiple
 292         initial slashes on Windows: those paths mean something different.
 293
 294 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 295
 296         * scripts/features/parallelism: Test that the jobserver is
 297         properly managed when we have to re-exec the master instance of
 298         make.
 299
 300 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 301
 302         * scripts/features/statipattrules: Add tests for bug #16053.
 303
 304 2006-03-09  Paul Smith  <psmith@gnu.org>
 305
 306         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 307         with DOS drive letters.  Fixes Savannah bug #15947.
 308
 309         * test_driver.pl (run_each_test): Set the status properly even
 310         when a test fails to execute.  Fixes Savannah bug #15942.
 311
 312         * scripts/functions/foreach: Use a different environment variable
 313         other than PATH to avoid differences with Windows platforms.
 314         Fixes Savannah bug #15938.
 315
 316 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 317
 318         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 319         type W32.  Fixed Savannah bug #15937.
 320
 321         * scripts/features/default_names: Don't call error() when the test
 322         fails.  Fixes Savannah bug #15941.
 323
 324 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 325
 326         * scripts/features/targetvars: Test a complex construction which
 327         guarantees that we have to merge variable lists of different
 328         sizes.  Tests for Savannah bug #15757.
 329
 330 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 331
 332         * scripts/functions/error: Make sure filename/lineno information
 333         is related to where the error is expanded, not where it's set.
 334         * scripts/functions/warning: Ditto.
 335         * scripts/functions/foreach: Check for different error conditions.
 336         * scripts/functions/word: Ditto.
 337         * scripts/variables/negative: Test some variable reference failure
 338         conditions.
 339         * scripts/options/warn-undefined-variables: Test the
 340         --warn-undefined-variables flag.
 341
 342 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 343
 344         * run_make_tests.pl (set_more_defaults): Update valgrind support
 345         for newer versions.
 346         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 347         beginning with ".").
 348
 349         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 350         functions.
 351
 352 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 353
 354         * scripts/features/parallelism: Add a test for bug #15641.
 355
 356 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 357
 358         * scripts/options/dash-W: Add a test for bug #15341.
 359
 360 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 361
 362         * scripts/variables/automatic: Add a test for bug #8154.
 363
 364         * README: Update to reflect the current state of the test suite.
 365
 366 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 367
 368         * scripts/features/parallelism, scripts/functions/wildcard,
 369         scripts/targets/FORCE, scripts/targets/PHONY,
 370         scripts/targets/SILENT: Use the default setting for
 371         $delete_command.  Fixes bug #15085.
 372
 373         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 374
 375 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 376
 377         * scripts/misc/general4: Test implicit rules with '$' in the
 378         prereq list & prereq patterns.
 379         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 380
 381 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 382
 383         * scripts/features/patternrules: Add a test for bug #13022.
 384
 385 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 386
 387         * scripts/features/double_colon: Add a test for bug #14334.
 388
 389 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 390
 391         * scripts/functions/flavor: Add a test for the flavor function.
 392
 393 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 394
 395         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 396         special variable.
 397
 398 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 399
 400         * scripts/misc/general4: Test '$$' in prerequisites list.
 401         * scripts/features/statipattrules: Rewrite to use run_make_test().
 402         Add various static pattern info.
 403         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 404         * scripts/features/se_explicit: Add tests for handling '$$' in
 405         prerequisite lists with and without setting .SECONDEXPANSION.
 406         * scripts/features/order_only: Convert to run_make_test().
 407         * run_make_tests.pl (set_more_defaults): If we can't get the value
 408         of $(MAKE) from make, then fatal immediately.
 409
 410 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 411
 412         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 413         an eval to trap errors) and if it exists, use POSIX::getcwd to
 414         find the working directory.  If it doesn't exist, go back to the
 415         previous methods.  This tries to be more accurate on Windows
 416         systems.
 417
 418 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 419
 420         * scripts/functions/abspath: Add some text to the error messages
 421         to get a better idea of what's wrong.  Make warnings instead of
 422         errors.
 423
 424         * scripts/features/patspecific_vars: Don't use "test", which is
 425         UNIX specific.  Print the values and let the test script match
 426         them.
 427
 428 2005-08-25  Paul Smith  <psmith@gnu.org>
 429
 430         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 431         former works better with non-UNIX environments.  Fixes Savannah
 432         bug #14129.
 433
 434 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 435
 436         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 437         $(sort) so that the resulting order is no longer filesystem-
 438         dependant.
 439
 440 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 441
 442         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 443
 444 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 445
 446         * scripts/features/parallelism: Add a test for a bug reported by
 447         Michael Matz (matz@suse.de) in which make exits without waiting
 448         for all its children in some situations during parallel builds.
 449
 450 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 451
 452         * test_driver.pl: Reset the environment to a clean value every
 453         time before we invoke make.  I'm suspicious that the environment
 454         isn't handled the same way in Windows as it is in UNIX, and some
 455         variables are leaking out beyond the tests they are intended for.
 456         Create an %extraENV hash tests can set to add more env. vars.
 457         * tests/scripts/features/export: Change to use %extraENV.
 458         * tests/scripts/functions/eval: Ditto.
 459         * tests/scripts/functions/origin: Ditto.
 460         * tests/scripts/options/dash-e: Ditto.
 461         * tests/scripts/variables/SHELL: Ditto.
 462
 463 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 464
 465         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 466         files.
 467         * scripts/features/reinvoke: Rewrite to be safer on systems with
 468         subsecond timestamps.
 469         * scripts/features/patternrules: False exits with different error
 470         codes on different systems (for example, Linux => 1, Solaris => 255).
 471
 472         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 473         to be sure it will be considered updated when it's remade.
 474
 475 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 476
 477         * scripts/functions/shell: New test suite for the shell function.
 478
 479 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 480
 481         * scripts/features/include: Test include/-include/sinclude with no
 482         arguments.  Tests fix for Savannah bug #1761.
 483
 484         * scripts/misc/general3: Implement comprehensive testing of
 485         backslash-newline behavior in command scripts: various types of
 486         quoting, fast path / slow path, etc.
 487         Tests fix for Savannah bug #1332.
 488
 489         * scripts/options/symlinks: Test symlinks to non-existent files.
 490         Tests fix for Savannah bug #13280.
 491
 492         * scripts/misc/general3: Test semicolons in variable references.
 493         Tests fix for Savannah bug #1454.
 494
 495         * scripts/variables/MAKE_RESTARTS: New file: test the
 496         MAKE_RESTARTS variable.
 497         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 498         Tests fix for Savannah bug #7566.
 499         * scripts/options/dash-W: New file: test the -W flag, including
 500         re-exec infinite looping.
 501
 502 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 503
 504         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 505         This test only works on systems that have /dev/full (e.g., Linux).
 506
 507 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 508
 509         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 510
 511 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 512
 513         * scripts/features/include: Add a test for Savannah bug #13216.
 514         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 515
 516 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 517
 518         * scripts/features/conditionals: Add tests for the new if... else
 519         if... endif syntax.
 520
 521 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 522
 523         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 524         DEFAULT_GOAL.
 525
 526 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 527
 528         * scripts/features/parallelism: Add a test for exporting recursive
 529         variables containing $(shell ) calls.  Rewrite this script to use
 530         run_make_test() everywhere.
 531
 532 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 533
 534         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 535
 536 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 537
 538         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 539
 540 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 541
 542         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 543
 544 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 545
 546         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 547         bug #12266.
 548
 549 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 550
 551         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 552
 553 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 554
 555         * scripts/features/se_implicit: Add a test for stem
 556         termination bug. Add a test for stem triple-expansion bug.
 557
 558         * scripts/features/se_statpat: Add a test for stem
 559         triple-expansion bug.
 560
 561         * scripts/features/statipattrules: Change test #4 to reflect
 562         new way empty prerequisite list is handled.
 563
 564
 565 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 566
 567         * scripts/features/statipattrules: Add a test for
 568         Savannah bug #12180.
 569
 570 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 571
 572         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 573
 574         * scripts/options/symlinks: New file to test checking of symlink
 575         timestamps.  Can't use filename dash-L because it conflicts with
 576         dash-l on case-insensitive filesystems.
 577
 578         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 579         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 580         unique filenames.
 581
 582 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 583
 584         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 585         special variable.
 586
 587 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 588
 589         * scripts/features/se_explicit: Test the second expansion in
 590         explicit rules.
 591         * scripts/features/se_implicit: Test the second expansion in
 592         implicit rules.
 593         * scripts/features/se_statpat: Test the second expansion in
 594         static pattern rules.
 595         * scripts/variables/automatic: Fix to work with the second
 596         expansion.
 597
 598         * scripts/misc/general4: Add a test for bug #12091.
 599
 600 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 601
 602         * scripts/functions/eval: Check that eval of targets within
 603         command scripts fails.  See Savannah bug # 12124.
 604
 605 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 606
 607         * test_driver.pl (compare_output): If a basic comparison of the
 608         log and answer doesn't match, try harder: change all backslashes
 609         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 610
 611 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 612
 613         * scripts/features/recursion: Test command line variable settings:
 614         only one instance of a given variable should be provided.
 615
 616 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 617
 618         * tests/scripts/functions/abspath: New file: test `abspath'
 619         built-in function.
 620
 621         * tests/scripts/functions/realpath: New file: test `realpath'
 622         built-in function.
 623
 624 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 625
 626         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 627         this doesn't really test anything useful in UNIX but...
 628
 629         * scripts/variables/SHELL: New file: test proper handling of SHELL
 630         according to POSIX rules.  Fixes bug #1276.
 631
 632 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 633
 634         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 635
 636 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 637
 638         * scripts/features/patspecific_vars: Test simple/recursive
 639         variable expansion.
 640
 641 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 642
 643         * scripts/features/include: Test dontcare flag inheritance
 644         when rebuilding makefiles.
 645
 646 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 647
 648         * scripts/features/patspecific_vars: Test exported variables.
 649
 650 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 651
 652         * run_make_tests.pl (run_make_test): Don't add newlines to the
 653         makestring or answer if they are completely empty.
 654
 655         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 656
 657         * scripts/test_template: Rework the template.
 658
 659 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 660
 661         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 662         `#!/usr/bin/env perl'.
 663
 664         * scripts/features/implicit_prereq_eval: Test implicit rule
 665         prerequisite evaluation code.
 666
 667 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 668
 669         * run_make_tests.pl (run_make_test): Enhance to allow the make
 670         string to be undef: in that case it reuses the previous make
 671         string.  Allows multiple tests on the same makefile.
 672
 673         * scripts/variables/flavors: Add some tests for prefix characters
 674         interacting with define/endef variables.
 675
 676 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 677
 678         * scripts/functions/substitution: Rewrite to use run_make_test()
 679         interface, and add test for substitution failures reported by
 680         Markus Mauhart <qwe123@chello.at>.
 681
 682 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 683
 684         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 685         to track both the testing categories _AND_ the number of
 686         individual tests, and report both sets of numbers.
 687
 688 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 689
 690         * scripts/functions/origin: Set our own environment variable
 691         rather than relying on $HOME.
 692
 693 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 694
 695         * scripts/features/conditionals: Test arguments to ifn?def which
 696         contain whitespace (such as a function that is evaluated).  Bug
 697         #7257.
 698
 699 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 700
 701         * scripts/features/order_only: Test order-only prerequisites in
 702         pattern rules (patch #2349).
 703
 704 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 705
 706         * scripts/functions/if: Test if on conditionals with trailing
 707         whitespace--bug #5798.
 708
 709         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 710
 711 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 712
 713         * scripts/features/patspecific_vars: Test multiple patterns
 714         matching the same target--Bug #1405.
 715
 716 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 717
 718         * run_make_tests.pl (set_more_defaults): A new $port_type of
 719         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 720         for OS/2.
 721
 722 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 723
 724         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 725         not prerequisites)--Bug #2515.
 726
 727 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 728
 729         * scripts/features/targetvars: Test very long target-specific
 730         variable definition lines (longer than the default make buffer
 731         length).  Tests patch # 1022.
 732
 733         * scripts/functions/eval: Test very recursive $(eval ...) calls
 734         with simple variable expansion (bug #2238).
 735
 736         * scripts/functions/word: Test error handling for word and
 737         wordlist functions (bug #2407).
 738
 739 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 740
 741         * scripts/functions/call: Test recursive argument masking (bug
 742         #1744).
 743
 744 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 745
 746         * scripts/functions/eval: Test using $(eval ...) inside
 747         conditionals (Bug #1516).
 748
 749 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 750
 751         * scripts/options/dash-t: Add a test for handling -t on targets
 752         with no commands (Bug #1418).
 753
 754 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 755
 756         * scripts/features/targetvars: Add a test for exporting
 757         target-specific vars (Bug #1391).
 758
 759 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 760
 761         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 762         and $${@F}.
 763
 764 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 765
 766         * scripts/features/escape: Test handling of escaped comment
 767         characters in targets and prerequisites.
 768
 769 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 770
 771         * scripts/features/export: Test export/unexport of multiple
 772         variables in a single command.
 773
 774 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 775
 776         * scripts/features/targetvars: Tests for Bug #940: test
 777         target-specific and pattern-specific variables in conjunction with
 778         double-colon targets.
 779
 780 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 781
 782         * test_driver.pl (compare_output): Match the new format for time
 783         skew error messages.
 784
 785         * scripts/features/export: Created.  Add tests for export/unexport
 786         capabilities, including exporting/unexporting expanded variables.
 787
 788         * scripts/features/conditionals: Add a test for expanded variables
 789         in ifdef conditionals.
 790
 791 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 792
 793         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 794         invocations.
 795         * scripts/features/vpathgpath: Ditto.
 796         * scripts/features/vpathplus: Ditto.
 797         * scripts/options/dash-n: Ditto.
 798         * scripts/targets/INTERMEDIATE: Ditto.
 799         * scripts/targets/SECONDARY: Ditto.
 800
 801         * scripts/options/dash-t: Added a test for the -t bug fixed by
 802         Henning Makholm.  This test was also contributed by Henning.
 803
 804         * scripts/misc/general4: Add a test suite for obscure algorithmic
 805         features of make.  First test: make sure creation subdirectories
 806         as prerequisites of targets works properly.
 807
 808         * scripts/misc/version: Remove this bogus test.
 809
 810 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 811
 812         * scripts/misc/general3: Add a test for makefiles that don't end
 813         in newlines.
 814
 815         * scripts/variables/special: Create tests for the special
 816         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 817         for now as it's not yet supported.
 818
 819 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 820
 821         * scripts/options/dash-B: Add a test for the new -B option.
 822
 823 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 824
 825         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 826         -valgrind option to the test suite.
 827         (set_more_defaults): Set up the file descriptor to capture
 828         Valgrind output.  We have to unset its close-on-exec flag; we
 829         hardcode the value for F_SETFD (2) rather than load it; hopefully
 830         this will help us avoid breaking the Windows/DOS test suite.
 831
 832 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 833
 834         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 835         $$(@F).
 836
 837         * test_driver.pl (utouch): Create a new function that creates a
 838         file with a specific timestamp offset.  Use of this function will
 839         let us avoid lots of annoying sleep() invocations in the tests
 840         just to get proper timestamping, which will make the tests run a
 841         lot faster.  So far it's only used in the automatic test suite.
 842
 843 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 844
 845         * scripts/variables/automatic: Create a test for automatic variables.
 846
 847 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 848
 849         * scripts/features/order_only: Test new order-only prerequisites.
 850
 851 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 852
 853         * scripts/functions/eval: Test new function.
 854         * scripts/functions/value: Test new function.
 855         * scripts/variables/MAKEFILE_LIST: Test new variable.
 856
 857 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 858
 859         * scripts/functions/call: New test: transitive closure
 860         implementation using $(call ...) to test variable recursion.
 861
 862 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 863
 864         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 865         directories in the script directories.
 866
 867 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 868
 869         * scripts/variables/flavors: Test define/endef scripts where only
 870         one of the command lines is quiet.
 871
 872 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 873
 874         * scripts/options/dash-q: New file; test the -q option.  Includes
 875         a test for PR/1780.
 876
 877 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 878
 879         * scripts/features/targetvars: Added a test for PR/1709: allowing
 880         semicolons in target-specific variable values.
 881
 882 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 883
 884         * scripts/functions/addsuffix: Test for an empty final argument.
 885         Actually this bug might have happened for any function, but this
 886         one was handy.
 887
 888 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 889
 890         * scripts/options/general: If parallel jobs are not supported,
 891         expect a warning message from Make.
 892
 893 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 894
 895         * scripts/options/general: Don't try -jN with N != 1 if parallel
 896         jobs are not supported.
 897
 898 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 899
 900         * scripts/options/general: Test general option processing (PR/1716).
 901
 902 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 903
 904         * scripts/functions/strip: Test empty value to strip (PR/1689).
 905
 906 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 907
 908         * scripts/features/reinvoke: Sleep before updating the target
 909         files in the first test, to ensure its time stamp really gets
 910         newer; otherwise Make might re-exec more than once.
 911
 912 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 913
 914         * scripts/features/double_colon: Don't run the parallel tests if
 915         parallel jobs aren't supported.
 916
 917 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 918
 919         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 920
 921 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 922
 923         * scripts/features/statipattrules: Test that static pattern rules
 924         whose prerequisite patterns resolve to empty strings throw an
 925         error (instead of dumping core).  Fixes PR/1670.
 926
 927         * scripts/features/reinvoke: Make more robust by touching "b"
 928         first, to ensure it's not newer than "a".
 929         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 930         * scripts/options/dash-n: Ditto.
 931
 932         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 933         recursive invocations of $(call ...) to break.  I can't come up
 934         with any way to get both working at the same time, so I backed out
 935         the fix to 1527 and added a test case for recursive calls.  This
 936         also tests the fix for PR/1610.
 937
 938         * scripts/features/double_colon: Test that circular dependencies
 939         in double-colon rule sets are detected correctly (PR/1671).
 940
 941 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 942
 943         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 944         .INTERMEDIATE files when given on the command line (PR/1669).
 945
 946 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 947
 948         * scripts/options/dash-k: Add a test for error detection by
 949         multiple targets depending on the same prerequisite with -k.
 950         For PR/1634.
 951
 952 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 953
 954         * scripts/features/escape: Add a test for backslash-escaped spaces
 955         in a target name (PR/1586).
 956
 957 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 958
 959         * scripts/features/patspecific_vars: Add a test for pattern-specific
 960         target variables inherited from the parent target (PR/1407).
 961
 962 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 963
 964         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 965         to make sure sorting order, etc. is predictable.
 966         Reported by Andreas Jaeger <aj@suse.de>.
 967
 968         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 969         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 970         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 971         1 for other systems.
 972         * scripts/features/vpathplus (touchfiles): Use the $wtime value
 973         instead of hardcoding 2.
 974         * scripts/targets/SECONDARY: Ditto.
 975         * scripts/targets/INTERMEDIATE: Ditto.
 976
 977 2000-01-27  Paul D. Smith  <psmith@gnu.org>
 978
 979         * test_driver.pl (toplevel): Don't try to run test scripts which
 980         are really directories.
 981
 982 2000-01-23  Paul D. Smith  <psmith@gnu.org>
 983
 984         * scripts/features/include: Remove a check; the fix caused more
 985         problems than the error, so I removed it and removed the test for
 986         it.
 987
 988 2000-01-11  Paul D. Smith  <psmith@gnu.org>
 989
 990         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
 991         sure $(call ...) doesn't eval its arguments and that you can
 992         invoke foreach from it without looping forever.
 993
 994 1999-12-15  Paul D. Smith  <psmith@gnu.org>
 995
 996         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
 997         .INTERMEDIATE settings on files don't disable them as implicit
 998         intermediate possibilities.
 999
1000 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1001
1002         * scripts/features/double_colon: Add a test for PR/1476: Try
1003         double-colon rules as non-goal targets and during parallel builds
1004         to make sure they're handled serially.
1005
1006 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1007
1008         * scripts/functions/if: Add a test for PR/1429: put some text
1009         after an if-statement to make sure it works.
1010
1011         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1012         in target-specific variable definitions correctly.
1013
1014 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1015
1016         * scripts/variables/MAKEFILES: This was really broken: it didn't
1017         test anything at all, really.  Rewrote it, plus added a test for
1018         PR/1394.
1019
1020 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1021
1022         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1023         behave properly when used with recursive targets".
1024
1025 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1026
1027         * scripts/features/targetvars: Add a check for PR/1378:
1028         "Target-specific vars don't inherit correctly"
1029
1030 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1031
1032         * test_driver.pl (get_osname): Change $fancy_file_names to
1033         $short_filenames and reverse the logic.
1034         (run_each_test): Change test of non-existent $port_host to use
1035         $short_filenames--problem reported by Eli Zaretskii.
1036
1037 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1038
1039         * scripts/features/parallelism: Add a check to ensure that the
1040         jobserver works when we re-invoke.  Also cleaned up the tests a
1041         little, reducing the number of rules we use so the test won't need
1042         as many "sleep" commands.
1043
1044 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1045
1046         * scripts/features/reinvoke: Remove invocations of "touch" in
1047         makefiles.  See the comments on the touch function rewrite below.
1048         Note that UNIX touch behaves the same way if the file already
1049         exists: it sets the time to the _local_ time.  We don't want
1050         this.  This is probably a good tip for makefile writers in
1051         general, actually... where practical.
1052         * scripts/options/dash-l: Ditto.
1053         * scripts/options/dash-n: Ditto.
1054
1055         * test_driver.pl (run_each_test): In retrospect, I don't like the
1056         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1057         changed it back to use .log, .base, and .diff.
1058
1059         * run_make_tests.pl (set_more_defaults): Move the check for the
1060         make pathname to here from set_defaults (that's too early since it
1061         happens before the command line processing).
1062         Create a new variable $port_type, calculated from $osname, to
1063         specify what kind of system we're running on.  We should integrate
1064         the VOS stuff here, too.
1065         (valid_option): Comment out the workdir/-work stuff so people
1066         won't be fooled into thinking it works... someone needs to fix
1067         this, though!
1068
1069         * scripts/functions/origin: Use $port_type instead of $osname.
1070         * scripts/functions/foreach: Ditto.
1071         * scripts/features/default_names: Ditto.
1072
1073 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1074
1075         * test_driver.pl (touch): Rewrite this function.  Previously it
1076         used to use utime() to hard-set the time based on the current
1077         local clock, or, if the file didn't exist, it merely created it.
1078         This mirrors exactly what real UNIX touch does, but it fails badly
1079         on networked filesystems where the FS server clock is skewed from
1080         the local clock: normally modifying a file causes it to get a mod
1081         time based on the _server's_ clock.  Hard-setting it based on the
1082         _local_ clock causes gratuitous errors and makes the tests
1083         unreliable except on local filesystems.  The new function will
1084         simply modify the file, allowing the filesystem to set the mod
1085         time as it sees fit.
1086
1087         * scripts/features/parallelism: The second test output could
1088         change depending on how fast some scripts completed; use "sleep"
1089         to force the order we want.
1090
1091         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1092         means that "%ENV = ();" doesn't do the right thing.  This worked
1093         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1094         the environment rather than require specific versions.
1095
1096         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1097         modifier "s", so the tests will run with Perl 4.
1098         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1099         option in PURIFYOPTIONS.
1100         (setup_for_test): Don't remove any logs unless $pure_log is set.
1101
1102 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1103
1104         * scripts/features/reinvoke: Put the SHELL definition in the right
1105         test makefile.
1106
1107 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1108
1109         ChangeLog file for the test suite created.
1110 \f
1111
1112 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1113 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1114 This file is part of GNU Make.
1115
1116 GNU Make is free software; you can redistribute it and/or modify it under the
1117 terms of the GNU General Public License as published by the Free Software
1118 Foundation; either version 3 of the License, or (at your option) any later
1119 version.
1120
1121 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1122 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1123 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1124
1125 You should have received a copy of the GNU General Public License along with
1126 this program.  If not, see <http://www.gnu.org/licenses/>.