tests/ChangeLog

   1 2011-09-18  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/features/vpath3: Verify handling of -lfoo libraries
   4         found via vpath vs. the standard directory search.
   5         See Savannah bug #32511.
   6
   7 2011-09-12  Paul Smith  <psmith@gnu.org>
   8
   9         * scripts/functions/call: Verify that using export in a $(call ...)
  10         context creates a global variable.  See Savannah bug #32498.
  11
  12 2011-09-02  Paul Smith  <psmith@gnu.org>
  13
  14         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
  15         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
  16
  17 2011-08-29  Paul Smith  <psmith@gnu.org>
  18
  19         * scripts/features/varnesting: Test resetting of variables while
  20         expanding them.  See Savannah patch #7534
  21
  22 2011-06-12  Paul Smith  <psmith@gnu.org>
  23
  24         * scripts/features/archives: Check archives with whitespace at the
  25         beginning, end, and extra in the middle.
  26         Another test for Savannah bug #30612.
  27
  28 2011-05-07  Paul Smith  <psmith@gnu.org>
  29
  30         * scripts/variables/private: Ensure we skip private variables when
  31         appending.  Test for Savannah bug #32872.
  32
  33         * scripts/functions/wildcard: Verify wildcard used to test for
  34         file existence/non-existence.
  35
  36 2011-05-02  Paul Smith  <psmith@gnu.org>
  37
  38         * scripts/functions/sort: Add a test for Savannah bug #33125.
  39
  40 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
  41
  42         * scripts/features/shell_assignment: Regression for "!=" feature
  43
  44 2010-11-06  Paul Smith  <psmith@gnu.org>
  45
  46         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
  47         * scripts/functions/call: Ditto.
  48         * scripts/variables/special: Ditto.
  49
  50         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
  51
  52 2010-08-29  Paul Smith  <psmith@gnu.org>
  53
  54         * scripts/features/errors: Add new error message to output text.
  55         * scripts/variables/SHELL: Ditto.
  56         * scripts/targets/POSIX: Ditto.
  57         * scripts/options/dash-k: Ditto.
  58         * scripts/features/vpathplus: Ditto.
  59         * scripts/features/patternrules: Ditto.
  60         * scripts/features/parallelism: Ditto.
  61
  62 2010-08-13  Paul Smith  <psmith@gnu.org>
  63
  64         * scripts/features/archives: New regression tests for archive
  65         support.  Test for fix to Savannah bug #30612.
  66
  67         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
  68         the features available in $(.FEATURES).
  69
  70 2010-08-10  Paul Smith  <psmith@gnu.org>
  71
  72         * scripts/features/reinvoke: Ensure command line variable settings
  73         are preserved across make re-exec.  Tests Savannah bug #30723.
  74
  75 2010-07-28  Paul Smith  <psmith@gnu.org>
  76
  77         * scripts/targets/POSIX: Compatibility issues with Solaris (and
  78         Tru64?); "false" returns different exit codes, and set -x shows
  79         output with extra whitespace.  Run the commands by hand first to
  80         find out what the real shell would do, then compare what make does.
  81         * scripts/variables/SHELL: Ditto.
  82
  83 2010-07-12  Paul Smith  <psmith@gnu.org>
  84
  85         * test_driver.pl: Add a new $perl_name containing the path to Perl.
  86         * run_make_tests.pl (run_make_test): Replace the special string
  87         #PERL# in a makefile etc. with the path the Perl executable so
  88         makefiles can use it.
  89
  90         * scripts/targets/ONESHELL: Add a new set of regression tests for
  91         the .ONESHELL feature.
  92
  93 2010-07-06  Paul Smith  <psmith@gnu.org>
  94
  95         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
  96
  97         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
  98         Verify that enabling .POSIX changes the shell flags to set -e.
  99
 100 2010-07-01  Paul Smith  <psmith@gnu.org>
 101
 102         * scripts/features/recursion: Add a space to separate command-line
 103         args.  Fixes Savannah bug #29968.
 104
 105 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
 106
 107         * scripts/features/vpath3: Test for the new library search
 108         behavior.
 109
 110 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 111
 112         * scripts/features/se_explicit: Enable the test for now fixed
 113         Savannah bug 25780.
 114
 115 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
 116
 117         * scripts/variables/undefine: Tests for the new undefine feature.
 118
 119 2009-10-03  Paul Smith  <psmith@gnu.org>
 120
 121         * scripts/features/parallelism: Test for open Savannah bug #26846.
 122
 123         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
 124
 125         * scripts/variables/MAKEFLAGS: Created.
 126         Add test for Savannah bug #2216 (still open).
 127
 128         * scripts/features/include: Test for Savannah bug #102 (still open).
 129
 130 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
 131
 132         * scripts/features/include: Add diagnostics issuing tests for
 133         cases where targets have been updated and failed with the
 134         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
 135
 136 2009-09-28  Paul Smith  <psmith@gnu.org>
 137
 138         * scripts/functions/shell: Add regression test for Savannah bug
 139         #20513 (still open).
 140
 141         * scripts/features/se_explicit: Add regression tests for Savannah
 142         bug #25780 (still open).
 143
 144         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
 145         that runs tests we know will fail.  This allows us to add
 146         regression tests to the test suite for bugs that haven't been
 147         fixed yet.
 148
 149 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
 150
 151         * scripts/features/patspecific_vars: Add a test for the shortest
 152         stem first order.
 153
 154         * scripts/features/patternrules: Add a test for the shortest stem
 155         first order.
 156
 157 2009-09-24  Paul Smith  <psmith@gnu.org>
 158
 159         * scripts/features/se_implicit: Add a test for order-only
 160         secondary expansion prerequisites.
 161
 162 2009-09-23  Paul Smith  <psmith@gnu.org>
 163
 164         * scripts/features/patternrules: Test that we can remove pattern
 165         rules, both single and multiple prerequisites.  Savannah bug #18622.
 166
 167         * scripts/features/echoing: Rework for run_make_test().
 168
 169 2009-06-14  Paul Smith  <psmith@gnu.org>
 170
 171         * scripts/features/vpath: Verify we don't get bogus circular
 172         dependency warnings if we choose a different file via vpath during
 173         update.  Savannah bug #13529.
 174
 175 2009-06-13  Paul Smith  <psmith@gnu.org>
 176
 177         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
 178         files (and files included by them) don't set the default goal.
 179         Savannah bug #13401.
 180
 181         * scripts/functions/wildcard: Test that wildcards with
 182         non-existent glob matchers return empty.
 183
 184 2009-06-09  Paul Smith  <psmith@gnu.org>
 185
 186         * scripts/options/dash-B: Test the $? works correctly with -B.
 187         Savannah bug #17825.
 188
 189         * scripts/features/patternrules: Test that dependencies of
 190         "also_make" targets are created properly.  Savannah bug #19108.
 191
 192         * test_driver.pl (compare_output): Create a "run" file for failed
 193         tests containing the command that was run.
 194         (get_runfile): New function.
 195
 196         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
 197         allow memcheck and massif tools.
 198
 199         * scripts/features/patternrules: Have to comment out a line in the
 200         first test due to backing out a change that broke the implicit
 201         rule search algorithm.  Savannah bug #17752.
 202         * scripts/misc/general4: Remove a test that is redundant with
 203         patternrules.
 204
 205         * scripts/features/parallelism: Add a test for re-exec with
 206         jobserver master override.  Savannah bug #18124.
 207
 208 2009-06-08  Paul Smith  <psmith@gnu.org>
 209
 210         * scripts/features/targetvars: Add a test for continued target
 211         vars after a semicolon.  Savannah bug #17521.
 212
 213 2009-06-07  Paul Smith  <psmith@gnu.org>
 214
 215         * scripts/features/se_explicit: Make sure we catch defining
 216         prereqs during snap_deps().  Savannah bug #24622.
 217
 218         * scripts/variables/automatic: Check prereq ordering when the
 219         target with the recipe has no prereqs.  Savannah bug #21198.
 220
 221         * scripts/variables/LIBPATTERNS: Add a new set of test for
 222         $(.LIBPATTERNS) (previously untested!)
 223
 224 2009-06-04  Paul Smith  <psmith@gnu.org>
 225
 226         * scripts/variables/SHELL: The export target-specific SHELL test
 227         has an incorrect known-good-value.
 228
 229         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
 230
 231         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
 232
 233 2009-05-31  Paul Smith  <psmith@gnu.org>
 234
 235         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 236
 237         * scripts/features/targetvars: Add tests of overrides for Savannah
 238         bug #26207.
 239         * scripts/features/patspecific_vars: Ditto.
 240
 241         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 242
 243 2009-05-30  Paul Smith  <psmith@gnu.org>
 244
 245         * scripts/variables/flavors: Update with new variable flavor tests.
 246         * scripts/variables/define: Create a new set of tests for
 247         define/endef and move those aspects of the flavors suite here.
 248
 249 2009-05-25  Paul Smith  <psmith@gnu.org>
 250
 251         * scripts/features/targetvars: Ditto.
 252
 253         * scripts/features/export: Test new variable parsing abilities.
 254
 255 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 256
 257         * scripts/variables/private: Create a new suite of tests for 'private'.
 258
 259 2007-11-04  Paul Smith  <psmith@gnu.org>
 260
 261         * scripts/functions/eval: Update error message for command -> recipe.
 262
 263         * test_driver.pl (compare_output): Allow the answer to be a regex,
 264         if surrounded by '/'.
 265         * scripts/misc/close_stdout: Use a regex for the answer, since
 266         sometimes the error will have a description and sometimes it won't.
 267
 268 2007-09-10  Paul Smith  <psmith@gnu.org>
 269
 270         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 271
 272 2007-08-15  Paul Smith  <psmith@gnu.org>
 273
 274         These test cases were contributed by
 275         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 276         Savannah bugs #3330 and #15919.
 277
 278         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 279         15919.
 280
 281         * scripts/features/parallelism: Add tests for wrong answer/hang
 282         combining INTERMEDIATE, order-only prereqs, and parallelism.
 283         See Savannah bugs 3330 and 15919.
 284
 285 2007-07-13  Paul Smith  <psmith@gnu.org>
 286
 287         Install a timeout so tests can never loop infinitely.
 288         Original idea and patch for a single-test version provided by
 289         Icarus Sparry <savannah@icarus.freeuk.com>
 290
 291         * test_driver.pl (_run_command): New function: this is called by
 292         other functions to actually run a command.  Before we run it,
 293         install a SIGALRM handler and set up a timer to go off in the
 294         future (default is 5s; this can be overridden by individual tests).
 295         (run_command): Call it.
 296         (run_command_with_output): Call it.
 297
 298         * run_make_tests.pl (run_make_with_options): Override the default
 299         timeout if the caller requests it.
 300         (run_make_test): Pass any timeout override to run_make_with_options.
 301
 302         * scripts/features/parallelism: Increase the timeout for long tests.
 303         * scripts/options/dash-l: Ditto.
 304
 305 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 306
 307         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 308         ENV here.  This doesn't always work.
 309         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 310         environment.  Fixes Savannah bug #16698.
 311
 312 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 313
 314         * scripts/variables/automatic: Add back the test for bug #8154.
 315
 316 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 317
 318         * scripts/functions/realpath: Don't run tests with multiple
 319         initial slashes on Windows: those paths mean something different.
 320
 321 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 322
 323         * scripts/features/parallelism: Test that the jobserver is
 324         properly managed when we have to re-exec the master instance of
 325         make.
 326
 327 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 328
 329         * scripts/features/statipattrules: Add tests for bug #16053.
 330
 331 2006-03-09  Paul Smith  <psmith@gnu.org>
 332
 333         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 334         with DOS drive letters.  Fixes Savannah bug #15947.
 335
 336         * test_driver.pl (run_each_test): Set the status properly even
 337         when a test fails to execute.  Fixes Savannah bug #15942.
 338
 339         * scripts/functions/foreach: Use a different environment variable
 340         other than PATH to avoid differences with Windows platforms.
 341         Fixes Savannah bug #15938.
 342
 343 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 344
 345         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 346         type W32.  Fixed Savannah bug #15937.
 347
 348         * scripts/features/default_names: Don't call error() when the test
 349         fails.  Fixes Savannah bug #15941.
 350
 351 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 352
 353         * scripts/features/targetvars: Test a complex construction which
 354         guarantees that we have to merge variable lists of different
 355         sizes.  Tests for Savannah bug #15757.
 356
 357 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 358
 359         * scripts/functions/error: Make sure filename/lineno information
 360         is related to where the error is expanded, not where it's set.
 361         * scripts/functions/warning: Ditto.
 362         * scripts/functions/foreach: Check for different error conditions.
 363         * scripts/functions/word: Ditto.
 364         * scripts/variables/negative: Test some variable reference failure
 365         conditions.
 366         * scripts/options/warn-undefined-variables: Test the
 367         --warn-undefined-variables flag.
 368
 369 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 370
 371         * run_make_tests.pl (set_more_defaults): Update valgrind support
 372         for newer versions.
 373         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 374         beginning with ".").
 375
 376         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 377         functions.
 378
 379 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 380
 381         * scripts/features/parallelism: Add a test for bug #15641.
 382
 383 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 384
 385         * scripts/options/dash-W: Add a test for bug #15341.
 386
 387 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 388
 389         * scripts/variables/automatic: Add a test for bug #8154.
 390
 391         * README: Update to reflect the current state of the test suite.
 392
 393 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 394
 395         * scripts/features/parallelism, scripts/functions/wildcard,
 396         scripts/targets/FORCE, scripts/targets/PHONY,
 397         scripts/targets/SILENT: Use the default setting for
 398         $delete_command.  Fixes bug #15085.
 399
 400         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 401
 402 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 403
 404         * scripts/misc/general4: Test implicit rules with '$' in the
 405         prereq list & prereq patterns.
 406         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 407
 408 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 409
 410         * scripts/features/patternrules: Add a test for bug #13022.
 411
 412 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 413
 414         * scripts/features/double_colon: Add a test for bug #14334.
 415
 416 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 417
 418         * scripts/functions/flavor: Add a test for the flavor function.
 419
 420 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 421
 422         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 423         special variable.
 424
 425 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 426
 427         * scripts/misc/general4: Test '$$' in prerequisites list.
 428         * scripts/features/statipattrules: Rewrite to use run_make_test().
 429         Add various static pattern info.
 430         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 431         * scripts/features/se_explicit: Add tests for handling '$$' in
 432         prerequisite lists with and without setting .SECONDEXPANSION.
 433         * scripts/features/order_only: Convert to run_make_test().
 434         * run_make_tests.pl (set_more_defaults): If we can't get the value
 435         of $(MAKE) from make, then fatal immediately.
 436
 437 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 438
 439         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 440         an eval to trap errors) and if it exists, use POSIX::getcwd to
 441         find the working directory.  If it doesn't exist, go back to the
 442         previous methods.  This tries to be more accurate on Windows
 443         systems.
 444
 445 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 446
 447         * scripts/functions/abspath: Add some text to the error messages
 448         to get a better idea of what's wrong.  Make warnings instead of
 449         errors.
 450
 451         * scripts/features/patspecific_vars: Don't use "test", which is
 452         UNIX specific.  Print the values and let the test script match
 453         them.
 454
 455 2005-08-25  Paul Smith  <psmith@gnu.org>
 456
 457         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 458         former works better with non-UNIX environments.  Fixes Savannah
 459         bug #14129.
 460
 461 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 462
 463         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 464         $(sort) so that the resulting order is no longer filesystem-
 465         dependant.
 466
 467 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 468
 469         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 470
 471 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 472
 473         * scripts/features/parallelism: Add a test for a bug reported by
 474         Michael Matz (matz@suse.de) in which make exits without waiting
 475         for all its children in some situations during parallel builds.
 476
 477 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 478
 479         * test_driver.pl: Reset the environment to a clean value every
 480         time before we invoke make.  I'm suspicious that the environment
 481         isn't handled the same way in Windows as it is in UNIX, and some
 482         variables are leaking out beyond the tests they are intended for.
 483         Create an %extraENV hash tests can set to add more env. vars.
 484         * tests/scripts/features/export: Change to use %extraENV.
 485         * tests/scripts/functions/eval: Ditto.
 486         * tests/scripts/functions/origin: Ditto.
 487         * tests/scripts/options/dash-e: Ditto.
 488         * tests/scripts/variables/SHELL: Ditto.
 489
 490 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 491
 492         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 493         files.
 494         * scripts/features/reinvoke: Rewrite to be safer on systems with
 495         subsecond timestamps.
 496         * scripts/features/patternrules: False exits with different error
 497         codes on different systems (for example, Linux => 1, Solaris => 255).
 498
 499         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 500         to be sure it will be considered updated when it's remade.
 501
 502 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 503
 504         * scripts/functions/shell: New test suite for the shell function.
 505
 506 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 507
 508         * scripts/features/include: Test include/-include/sinclude with no
 509         arguments.  Tests fix for Savannah bug #1761.
 510
 511         * scripts/misc/general3: Implement comprehensive testing of
 512         backslash-newline behavior in command scripts: various types of
 513         quoting, fast path / slow path, etc.
 514         Tests fix for Savannah bug #1332.
 515
 516         * scripts/options/symlinks: Test symlinks to non-existent files.
 517         Tests fix for Savannah bug #13280.
 518
 519         * scripts/misc/general3: Test semicolons in variable references.
 520         Tests fix for Savannah bug #1454.
 521
 522         * scripts/variables/MAKE_RESTARTS: New file: test the
 523         MAKE_RESTARTS variable.
 524         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 525         Tests fix for Savannah bug #7566.
 526         * scripts/options/dash-W: New file: test the -W flag, including
 527         re-exec infinite looping.
 528
 529 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 530
 531         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 532         This test only works on systems that have /dev/full (e.g., Linux).
 533
 534 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 535
 536         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 537
 538 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 539
 540         * scripts/features/include: Add a test for Savannah bug #13216.
 541         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 542
 543 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 544
 545         * scripts/features/conditionals: Add tests for the new if... else
 546         if... endif syntax.
 547
 548 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 549
 550         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 551         DEFAULT_GOAL.
 552
 553 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 554
 555         * scripts/features/parallelism: Add a test for exporting recursive
 556         variables containing $(shell ) calls.  Rewrite this script to use
 557         run_make_test() everywhere.
 558
 559 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 560
 561         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 562
 563 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 564
 565         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 566
 567 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 568
 569         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 570
 571 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 572
 573         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 574         bug #12266.
 575
 576 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 577
 578         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 579
 580 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 581
 582         * scripts/features/se_implicit: Add a test for stem
 583         termination bug. Add a test for stem triple-expansion bug.
 584
 585         * scripts/features/se_statpat: Add a test for stem
 586         triple-expansion bug.
 587
 588         * scripts/features/statipattrules: Change test #4 to reflect
 589         new way empty prerequisite list is handled.
 590
 591
 592 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 593
 594         * scripts/features/statipattrules: Add a test for
 595         Savannah bug #12180.
 596
 597 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 598
 599         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 600
 601         * scripts/options/symlinks: New file to test checking of symlink
 602         timestamps.  Can't use filename dash-L because it conflicts with
 603         dash-l on case-insensitive filesystems.
 604
 605         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 606         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 607         unique filenames.
 608
 609 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 610
 611         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 612         special variable.
 613
 614 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 615
 616         * scripts/features/se_explicit: Test the second expansion in
 617         explicit rules.
 618         * scripts/features/se_implicit: Test the second expansion in
 619         implicit rules.
 620         * scripts/features/se_statpat: Test the second expansion in
 621         static pattern rules.
 622         * scripts/variables/automatic: Fix to work with the second
 623         expansion.
 624
 625         * scripts/misc/general4: Add a test for bug #12091.
 626
 627 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 628
 629         * scripts/functions/eval: Check that eval of targets within
 630         command scripts fails.  See Savannah bug # 12124.
 631
 632 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 633
 634         * test_driver.pl (compare_output): If a basic comparison of the
 635         log and answer doesn't match, try harder: change all backslashes
 636         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 637
 638 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 639
 640         * scripts/features/recursion: Test command line variable settings:
 641         only one instance of a given variable should be provided.
 642
 643 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 644
 645         * tests/scripts/functions/abspath: New file: test `abspath'
 646         built-in function.
 647
 648         * tests/scripts/functions/realpath: New file: test `realpath'
 649         built-in function.
 650
 651 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 652
 653         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 654         this doesn't really test anything useful in UNIX but...
 655
 656         * scripts/variables/SHELL: New file: test proper handling of SHELL
 657         according to POSIX rules.  Fixes bug #1276.
 658
 659 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 660
 661         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 662
 663 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 664
 665         * scripts/features/patspecific_vars: Test simple/recursive
 666         variable expansion.
 667
 668 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 669
 670         * scripts/features/include: Test dontcare flag inheritance
 671         when rebuilding makefiles.
 672
 673 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 674
 675         * scripts/features/patspecific_vars: Test exported variables.
 676
 677 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 678
 679         * run_make_tests.pl (run_make_test): Don't add newlines to the
 680         makestring or answer if they are completely empty.
 681
 682         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 683
 684         * scripts/test_template: Rework the template.
 685
 686 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 687
 688         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 689         `#!/usr/bin/env perl'.
 690
 691         * scripts/features/implicit_prereq_eval: Test implicit rule
 692         prerequisite evaluation code.
 693
 694 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 695
 696         * run_make_tests.pl (run_make_test): Enhance to allow the make
 697         string to be undef: in that case it reuses the previous make
 698         string.  Allows multiple tests on the same makefile.
 699
 700         * scripts/variables/flavors: Add some tests for prefix characters
 701         interacting with define/endef variables.
 702
 703 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 704
 705         * scripts/functions/substitution: Rewrite to use run_make_test()
 706         interface, and add test for substitution failures reported by
 707         Markus Mauhart <qwe123@chello.at>.
 708
 709 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 710
 711         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 712         to track both the testing categories _AND_ the number of
 713         individual tests, and report both sets of numbers.
 714
 715 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 716
 717         * scripts/functions/origin: Set our own environment variable
 718         rather than relying on $HOME.
 719
 720 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 721
 722         * scripts/features/conditionals: Test arguments to ifn?def which
 723         contain whitespace (such as a function that is evaluated).  Bug
 724         #7257.
 725
 726 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 727
 728         * scripts/features/order_only: Test order-only prerequisites in
 729         pattern rules (patch #2349).
 730
 731 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 732
 733         * scripts/functions/if: Test if on conditionals with trailing
 734         whitespace--bug #5798.
 735
 736         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 737
 738 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 739
 740         * scripts/features/patspecific_vars: Test multiple patterns
 741         matching the same target--Bug #1405.
 742
 743 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 744
 745         * run_make_tests.pl (set_more_defaults): A new $port_type of
 746         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 747         for OS/2.
 748
 749 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 750
 751         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 752         not prerequisites)--Bug #2515.
 753
 754 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 755
 756         * scripts/features/targetvars: Test very long target-specific
 757         variable definition lines (longer than the default make buffer
 758         length).  Tests patch # 1022.
 759
 760         * scripts/functions/eval: Test very recursive $(eval ...) calls
 761         with simple variable expansion (bug #2238).
 762
 763         * scripts/functions/word: Test error handling for word and
 764         wordlist functions (bug #2407).
 765
 766 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 767
 768         * scripts/functions/call: Test recursive argument masking (bug
 769         #1744).
 770
 771 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 772
 773         * scripts/functions/eval: Test using $(eval ...) inside
 774         conditionals (Bug #1516).
 775
 776 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 777
 778         * scripts/options/dash-t: Add a test for handling -t on targets
 779         with no commands (Bug #1418).
 780
 781 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 782
 783         * scripts/features/targetvars: Add a test for exporting
 784         target-specific vars (Bug #1391).
 785
 786 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 787
 788         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 789         and $${@F}.
 790
 791 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 792
 793         * scripts/features/escape: Test handling of escaped comment
 794         characters in targets and prerequisites.
 795
 796 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 797
 798         * scripts/features/export: Test export/unexport of multiple
 799         variables in a single command.
 800
 801 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 802
 803         * scripts/features/targetvars: Tests for Bug #940: test
 804         target-specific and pattern-specific variables in conjunction with
 805         double-colon targets.
 806
 807 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 808
 809         * test_driver.pl (compare_output): Match the new format for time
 810         skew error messages.
 811
 812         * scripts/features/export: Created.  Add tests for export/unexport
 813         capabilities, including exporting/unexporting expanded variables.
 814
 815         * scripts/features/conditionals: Add a test for expanded variables
 816         in ifdef conditionals.
 817
 818 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 819
 820         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 821         invocations.
 822         * scripts/features/vpathgpath: Ditto.
 823         * scripts/features/vpathplus: Ditto.
 824         * scripts/options/dash-n: Ditto.
 825         * scripts/targets/INTERMEDIATE: Ditto.
 826         * scripts/targets/SECONDARY: Ditto.
 827
 828         * scripts/options/dash-t: Added a test for the -t bug fixed by
 829         Henning Makholm.  This test was also contributed by Henning.
 830
 831         * scripts/misc/general4: Add a test suite for obscure algorithmic
 832         features of make.  First test: make sure creation subdirectories
 833         as prerequisites of targets works properly.
 834
 835         * scripts/misc/version: Remove this bogus test.
 836
 837 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 838
 839         * scripts/misc/general3: Add a test for makefiles that don't end
 840         in newlines.
 841
 842         * scripts/variables/special: Create tests for the special
 843         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 844         for now as it's not yet supported.
 845
 846 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 847
 848         * scripts/options/dash-B: Add a test for the new -B option.
 849
 850 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 851
 852         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 853         -valgrind option to the test suite.
 854         (set_more_defaults): Set up the file descriptor to capture
 855         Valgrind output.  We have to unset its close-on-exec flag; we
 856         hardcode the value for F_SETFD (2) rather than load it; hopefully
 857         this will help us avoid breaking the Windows/DOS test suite.
 858
 859 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 860
 861         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 862         $$(@F).
 863
 864         * test_driver.pl (utouch): Create a new function that creates a
 865         file with a specific timestamp offset.  Use of this function will
 866         let us avoid lots of annoying sleep() invocations in the tests
 867         just to get proper timestamping, which will make the tests run a
 868         lot faster.  So far it's only used in the automatic test suite.
 869
 870 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 871
 872         * scripts/variables/automatic: Create a test for automatic variables.
 873
 874 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 875
 876         * scripts/features/order_only: Test new order-only prerequisites.
 877
 878 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 879
 880         * scripts/functions/eval: Test new function.
 881         * scripts/functions/value: Test new function.
 882         * scripts/variables/MAKEFILE_LIST: Test new variable.
 883
 884 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 885
 886         * scripts/functions/call: New test: transitive closure
 887         implementation using $(call ...) to test variable recursion.
 888
 889 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 890
 891         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 892         directories in the script directories.
 893
 894 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 895
 896         * scripts/variables/flavors: Test define/endef scripts where only
 897         one of the command lines is quiet.
 898
 899 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 900
 901         * scripts/options/dash-q: New file; test the -q option.  Includes
 902         a test for PR/1780.
 903
 904 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 905
 906         * scripts/features/targetvars: Added a test for PR/1709: allowing
 907         semicolons in target-specific variable values.
 908
 909 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 910
 911         * scripts/functions/addsuffix: Test for an empty final argument.
 912         Actually this bug might have happened for any function, but this
 913         one was handy.
 914
 915 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 916
 917         * scripts/options/general: If parallel jobs are not supported,
 918         expect a warning message from Make.
 919
 920 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 921
 922         * scripts/options/general: Don't try -jN with N != 1 if parallel
 923         jobs are not supported.
 924
 925 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 926
 927         * scripts/options/general: Test general option processing (PR/1716).
 928
 929 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 930
 931         * scripts/functions/strip: Test empty value to strip (PR/1689).
 932
 933 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 934
 935         * scripts/features/reinvoke: Sleep before updating the target
 936         files in the first test, to ensure its time stamp really gets
 937         newer; otherwise Make might re-exec more than once.
 938
 939 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 940
 941         * scripts/features/double_colon: Don't run the parallel tests if
 942         parallel jobs aren't supported.
 943
 944 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 945
 946         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 947
 948 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 949
 950         * scripts/features/statipattrules: Test that static pattern rules
 951         whose prerequisite patterns resolve to empty strings throw an
 952         error (instead of dumping core).  Fixes PR/1670.
 953
 954         * scripts/features/reinvoke: Make more robust by touching "b"
 955         first, to ensure it's not newer than "a".
 956         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 957         * scripts/options/dash-n: Ditto.
 958
 959         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 960         recursive invocations of $(call ...) to break.  I can't come up
 961         with any way to get both working at the same time, so I backed out
 962         the fix to 1527 and added a test case for recursive calls.  This
 963         also tests the fix for PR/1610.
 964
 965         * scripts/features/double_colon: Test that circular dependencies
 966         in double-colon rule sets are detected correctly (PR/1671).
 967
 968 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 969
 970         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 971         .INTERMEDIATE files when given on the command line (PR/1669).
 972
 973 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 974
 975         * scripts/options/dash-k: Add a test for error detection by
 976         multiple targets depending on the same prerequisite with -k.
 977         For PR/1634.
 978
 979 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 980
 981         * scripts/features/escape: Add a test for backslash-escaped spaces
 982         in a target name (PR/1586).
 983
 984 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 985
 986         * scripts/features/patspecific_vars: Add a test for pattern-specific
 987         target variables inherited from the parent target (PR/1407).
 988
 989 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 990
 991         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 992         to make sure sorting order, etc. is predictable.
 993         Reported by Andreas Jaeger <aj@suse.de>.
 994
 995         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 996         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 997         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 998         1 for other systems.
 999         * scripts/features/vpathplus (touchfiles): Use the $wtime value
1000         instead of hardcoding 2.
1001         * scripts/targets/SECONDARY: Ditto.
1002         * scripts/targets/INTERMEDIATE: Ditto.
1003
1004 2000-01-27  Paul D. Smith  <psmith@gnu.org>
1005
1006         * test_driver.pl (toplevel): Don't try to run test scripts which
1007         are really directories.
1008
1009 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1010
1011         * scripts/features/include: Remove a check; the fix caused more
1012         problems than the error, so I removed it and removed the test for
1013         it.
1014
1015 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1016
1017         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1018         sure $(call ...) doesn't eval its arguments and that you can
1019         invoke foreach from it without looping forever.
1020
1021 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1022
1023         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1024         .INTERMEDIATE settings on files don't disable them as implicit
1025         intermediate possibilities.
1026
1027 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1028
1029         * scripts/features/double_colon: Add a test for PR/1476: Try
1030         double-colon rules as non-goal targets and during parallel builds
1031         to make sure they're handled serially.
1032
1033 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1034
1035         * scripts/functions/if: Add a test for PR/1429: put some text
1036         after an if-statement to make sure it works.
1037
1038         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1039         in target-specific variable definitions correctly.
1040
1041 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1042
1043         * scripts/variables/MAKEFILES: This was really broken: it didn't
1044         test anything at all, really.  Rewrote it, plus added a test for
1045         PR/1394.
1046
1047 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1048
1049         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1050         behave properly when used with recursive targets".
1051
1052 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1053
1054         * scripts/features/targetvars: Add a check for PR/1378:
1055         "Target-specific vars don't inherit correctly"
1056
1057 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1058
1059         * test_driver.pl (get_osname): Change $fancy_file_names to
1060         $short_filenames and reverse the logic.
1061         (run_each_test): Change test of non-existent $port_host to use
1062         $short_filenames--problem reported by Eli Zaretskii.
1063
1064 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1065
1066         * scripts/features/parallelism: Add a check to ensure that the
1067         jobserver works when we re-invoke.  Also cleaned up the tests a
1068         little, reducing the number of rules we use so the test won't need
1069         as many "sleep" commands.
1070
1071 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1072
1073         * scripts/features/reinvoke: Remove invocations of "touch" in
1074         makefiles.  See the comments on the touch function rewrite below.
1075         Note that UNIX touch behaves the same way if the file already
1076         exists: it sets the time to the _local_ time.  We don't want
1077         this.  This is probably a good tip for makefile writers in
1078         general, actually... where practical.
1079         * scripts/options/dash-l: Ditto.
1080         * scripts/options/dash-n: Ditto.
1081
1082         * test_driver.pl (run_each_test): In retrospect, I don't like the
1083         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1084         changed it back to use .log, .base, and .diff.
1085
1086         * run_make_tests.pl (set_more_defaults): Move the check for the
1087         make pathname to here from set_defaults (that's too early since it
1088         happens before the command line processing).
1089         Create a new variable $port_type, calculated from $osname, to
1090         specify what kind of system we're running on.  We should integrate
1091         the VOS stuff here, too.
1092         (valid_option): Comment out the workdir/-work stuff so people
1093         won't be fooled into thinking it works... someone needs to fix
1094         this, though!
1095
1096         * scripts/functions/origin: Use $port_type instead of $osname.
1097         * scripts/functions/foreach: Ditto.
1098         * scripts/features/default_names: Ditto.
1099
1100 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1101
1102         * test_driver.pl (touch): Rewrite this function.  Previously it
1103         used to use utime() to hard-set the time based on the current
1104         local clock, or, if the file didn't exist, it merely created it.
1105         This mirrors exactly what real UNIX touch does, but it fails badly
1106         on networked filesystems where the FS server clock is skewed from
1107         the local clock: normally modifying a file causes it to get a mod
1108         time based on the _server's_ clock.  Hard-setting it based on the
1109         _local_ clock causes gratuitous errors and makes the tests
1110         unreliable except on local filesystems.  The new function will
1111         simply modify the file, allowing the filesystem to set the mod
1112         time as it sees fit.
1113
1114         * scripts/features/parallelism: The second test output could
1115         change depending on how fast some scripts completed; use "sleep"
1116         to force the order we want.
1117
1118         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1119         means that "%ENV = ();" doesn't do the right thing.  This worked
1120         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1121         the environment rather than require specific versions.
1122
1123         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1124         modifier "s", so the tests will run with Perl 4.
1125         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1126         option in PURIFYOPTIONS.
1127         (setup_for_test): Don't remove any logs unless $pure_log is set.
1128
1129 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1130
1131         * scripts/features/reinvoke: Put the SHELL definition in the right
1132         test makefile.
1133
1134 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1135
1136         ChangeLog file for the test suite created.
1137 \f
1138
1139 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1140 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1141 This file is part of GNU Make.
1142
1143 GNU Make is free software; you can redistribute it and/or modify it under the
1144 terms of the GNU General Public License as published by the Free Software
1145 Foundation; either version 3 of the License, or (at your option) any later
1146 version.
1147
1148 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1149 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1150 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1151
1152 You should have received a copy of the GNU General Public License along with
1153 this program.  If not, see <http://www.gnu.org/licenses/>.