tests/ChangeLog

   1 2009-09-28  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/functions/shell: Add regression test for Savannah bug
   4         #20513 (still open).
   5
   6         * scripts/features/se_explicit: Add regression tests for Savannah
   7         bug #25780 (still open).
   8
   9         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
  10         that runs tests we know will fail.  This allows us to add
  11         regression tests to the test suite for bugs that haven't been
  12         fixed yet.
  13
  14 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
  15
  16         * scripts/features/patspecific_vars: Add a test for the shortest
  17         stem first order.
  18
  19         * scripts/features/patternrules: Add a test for the shortest stem
  20         first order.
  21
  22 2009-09-24  Paul Smith  <psmith@gnu.org>
  23
  24         * scripts/features/se_implicit: Add a test for order-only
  25         secondary expansion prerequisites.
  26
  27 2009-09-23  Paul Smith  <psmith@gnu.org>
  28
  29         * scripts/features/patternrules: Test that we can remove pattern
  30         rules, both single and multiple prerequisites.  Savannah bug #18622.
  31
  32         * scripts/features/echoing: Rework for run_make_test().
  33
  34 2009-06-14  Paul Smith  <psmith@gnu.org>
  35
  36         * scripts/features/vpath: Verify we don't get bogus circular
  37         dependency warnings if we choose a different file via vpath during
  38         update.  Savannah bug #13529.
  39
  40 2009-06-13  Paul Smith  <psmith@gnu.org>
  41
  42         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
  43         files (and files included by them) don't set the default goal.
  44         Savannah bug #13401.
  45
  46         * scripts/functions/wildcard: Test that wildcards with
  47         non-existent glob matchers return empty.
  48
  49 2009-06-09  Paul Smith  <psmith@gnu.org>
  50
  51         * scripts/options/dash-B: Test the $? works correctly with -B.
  52         Savannah bug #17825.
  53
  54         * scripts/features/patternrules: Test that dependencies of
  55         "also_make" targets are created properly.  Savannah bug #19108.
  56
  57         * test_driver.pl (compare_output): Create a "run" file for failed
  58         tests containing the command that was run.
  59         (get_runfile): New function.
  60
  61         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
  62         allow memcheck and massif tools.
  63
  64         * scripts/features/patternrules: Have to comment out a line in the
  65         first test due to backing out a change that broke the implicit
  66         rule search algorithm.  Savannah bug #17752.
  67         * scripts/misc/general4: Remove a test that is redundant with
  68         patternrules.
  69
  70         * scripts/features/parallelism: Add a test for re-exec with
  71         jobserver master override.  Savannah bug #18124.
  72
  73 2009-06-08  Paul Smith  <psmith@gnu.org>
  74
  75         * scripts/features/targetvars: Add a test for continued target
  76         vars after a semicolon.  Savannah bug #17521.
  77
  78 2009-06-07  Paul Smith  <psmith@gnu.org>
  79
  80         * scripts/features/se_explicit: Make sure we catch defining
  81         prereqs during snap_deps().  Savannah bug #24622.
  82
  83         * scripts/variables/automatic: Check prereq ordering when the
  84         target with the recipe has no prereqs.  Savannah bug #21198.
  85
  86         * scripts/variables/LIBPATTERNS: Add a new set of test for
  87         $(.LIBPATTERNS) (previously untested!)
  88
  89 2009-06-04  Paul Smith  <psmith@gnu.org>
  90
  91         * scripts/variables/SHELL: The export target-specific SHELL test
  92         has an incorrect known-good-value.
  93
  94         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
  95
  96         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
  97
  98 2009-05-31  Paul Smith  <psmith@gnu.org>
  99
 100         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 101
 102         * scripts/features/targetvars: Add tests of overrides for Savannah
 103         bug #26207.
 104         * scripts/features/patspecific_vars: Ditto.
 105
 106         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 107
 108 2009-05-30  Paul Smith  <psmith@gnu.org>
 109
 110         * scripts/variables/flavors: Update with new variable flavor tests.
 111         * scripts/variables/define: Create a new set of tests for
 112         define/endef and move those aspects of the flavors suite here.
 113
 114 2009-05-25  Paul Smith  <psmith@gnu.org>
 115
 116         * scripts/features/targetvars: Ditto.
 117
 118         * scripts/features/export: Test new variable parsing abilities.
 119
 120 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 121
 122         * scripts/variables/private: Create a new suite of tests for 'private'.
 123
 124 2007-11-04  Paul Smith  <psmith@gnu.org>
 125
 126         * scripts/functions/eval: Update error message for command -> recipe.
 127
 128         * test_driver.pl (compare_output): Allow the answer to be a regex,
 129         if surrounded by '/'.
 130         * scripts/misc/close_stdout: Use a regex for the answer, since
 131         sometimes the error will have a description and sometimes it won't.
 132
 133 2007-09-10  Paul Smith  <psmith@gnu.org>
 134
 135         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 136
 137 2007-08-15  Paul Smith  <psmith@gnu.org>
 138
 139         These test cases were contributed by
 140         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 141         Savannah bugs #3330 and #15919.
 142
 143         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 144         15919.
 145
 146         * scripts/features/parallelism: Add tests for wrong answer/hang
 147         combining INTERMEDIATE, order-only prereqs, and parallelism.
 148         See Savannah bugs 3330 and 15919.
 149
 150 2007-07-13  Paul Smith  <psmith@gnu.org>
 151
 152         Install a timeout so tests can never loop infinitely.
 153         Original idea and patch for a single-test version provided by
 154         Icarus Sparry <savannah@icarus.freeuk.com>
 155
 156         * test_driver.pl (_run_command): New function: this is called by
 157         other functions to actually run a command.  Before we run it,
 158         install a SIGALRM handler and set up a timer to go off in the
 159         future (default is 5s; this can be overridden by individual tests).
 160         (run_command): Call it.
 161         (run_command_with_output): Call it.
 162
 163         * run_make_tests.pl (run_make_with_options): Override the default
 164         timeout if the caller requests it.
 165         (run_make_test): Pass any timeout override to run_make_with_options.
 166
 167         * scripts/features/parallelism: Increase the timeout for long tests.
 168         * scripts/options/dash-l: Ditto.
 169
 170 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 171
 172         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 173         ENV here.  This doesn't always work.
 174         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 175         environment.  Fixes Savannah bug #16698.
 176
 177 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 178
 179         * scripts/variables/automatic: Add back the test for bug #8154.
 180
 181 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 182
 183         * scripts/functions/realpath: Don't run tests with multiple
 184         initial slashes on Windows: those paths mean something different.
 185
 186 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 187
 188         * scripts/features/parallelism: Test that the jobserver is
 189         properly managed when we have to re-exec the master instance of
 190         make.
 191
 192 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 193
 194         * scripts/features/statipattrules: Add tests for bug #16053.
 195
 196 2006-03-09  Paul Smith  <psmith@gnu.org>
 197
 198         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 199         with DOS drive letters.  Fixes Savannah bug #15947.
 200
 201         * test_driver.pl (run_each_test): Set the status properly even
 202         when a test fails to execute.  Fixes Savannah bug #15942.
 203
 204         * scripts/functions/foreach: Use a different environment variable
 205         other than PATH to avoid differences with Windows platforms.
 206         Fixes Savannah bug #15938.
 207
 208 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 209
 210         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 211         type W32.  Fixed Savannah bug #15937.
 212
 213         * scripts/features/default_names: Don't call error() when the test
 214         fails.  Fixes Savannah bug #15941.
 215
 216 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 217
 218         * scripts/features/targetvars: Test a complex construction which
 219         guarantees that we have to merge variable lists of different
 220         sizes.  Tests for Savannah bug #15757.
 221
 222 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 223
 224         * scripts/functions/error: Make sure filename/lineno information
 225         is related to where the error is expanded, not where it's set.
 226         * scripts/functions/warning: Ditto.
 227         * scripts/functions/foreach: Check for different error conditions.
 228         * scripts/functions/word: Ditto.
 229         * scripts/variables/negative: Test some variable reference failure
 230         conditions.
 231         * scripts/options/warn-undefined-variables: Test the
 232         --warn-undefined-variables flag.
 233
 234 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 235
 236         * run_make_tests.pl (set_more_defaults): Update valgrind support
 237         for newer versions.
 238         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 239         beginning with ".").
 240
 241         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 242         functions.
 243
 244 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 245
 246         * scripts/features/parallelism: Add a test for bug #15641.
 247
 248 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 249
 250         * scripts/options/dash-W: Add a test for bug #15341.
 251
 252 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 253
 254         * scripts/variables/automatic: Add a test for bug #8154.
 255
 256         * README: Update to reflect the current state of the test suite.
 257
 258 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 259
 260         * scripts/features/parallelism, scripts/functions/wildcard,
 261         scripts/targets/FORCE, scripts/targets/PHONY,
 262         scripts/targets/SILENT: Use the default setting for
 263         $delete_command.  Fixes bug #15085.
 264
 265         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 266
 267 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 268
 269         * scripts/misc/general4: Test implicit rules with '$' in the
 270         prereq list & prereq patterns.
 271         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 272
 273 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 274
 275         * scripts/features/patternrules: Add a test for bug #13022.
 276
 277 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 278
 279         * scripts/features/double_colon: Add a test for bug #14334.
 280
 281 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 282
 283         * scripts/functions/flavor: Add a test for the flavor function.
 284
 285 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 286
 287         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 288         special variable.
 289
 290 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 291
 292         * scripts/misc/general4: Test '$$' in prerequisites list.
 293         * scripts/features/statipattrules: Rewrite to use run_make_test().
 294         Add various static pattern info.
 295         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 296         * scripts/features/se_explicit: Add tests for handling '$$' in
 297         prerequisite lists with and without setting .SECONDEXPANSION.
 298         * scripts/features/order_only: Convert to run_make_test().
 299         * run_make_tests.pl (set_more_defaults): If we can't get the value
 300         of $(MAKE) from make, then fatal immediately.
 301
 302 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 303
 304         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 305         an eval to trap errors) and if it exists, use POSIX::getcwd to
 306         find the working directory.  If it doesn't exist, go back to the
 307         previous methods.  This tries to be more accurate on Windows
 308         systems.
 309
 310 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 311
 312         * scripts/functions/abspath: Add some text to the error messages
 313         to get a better idea of what's wrong.  Make warnings instead of
 314         errors.
 315
 316         * scripts/features/patspecific_vars: Don't use "test", which is
 317         UNIX specific.  Print the values and let the test script match
 318         them.
 319
 320 2005-08-25  Paul Smith  <psmith@gnu.org>
 321
 322         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 323         former works better with non-UNIX environments.  Fixes Savannah
 324         bug #14129.
 325
 326 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 327
 328         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 329         $(sort) so that the resulting order is no longer filesystem-
 330         dependant.
 331
 332 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 333
 334         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 335
 336 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 337
 338         * scripts/features/parallelism: Add a test for a bug reported by
 339         Michael Matz (matz@suse.de) in which make exits without waiting
 340         for all its children in some situations during parallel builds.
 341
 342 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 343
 344         * test_driver.pl: Reset the environment to a clean value every
 345         time before we invoke make.  I'm suspicious that the environment
 346         isn't handled the same way in Windows as it is in UNIX, and some
 347         variables are leaking out beyond the tests they are intended for.
 348         Create an %extraENV hash tests can set to add more env. vars.
 349         * tests/scripts/features/export: Change to use %extraENV.
 350         * tests/scripts/functions/eval: Ditto.
 351         * tests/scripts/functions/origin: Ditto.
 352         * tests/scripts/options/dash-e: Ditto.
 353         * tests/scripts/variables/SHELL: Ditto.
 354
 355 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 356
 357         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 358         files.
 359         * scripts/features/reinvoke: Rewrite to be safer on systems with
 360         subsecond timestamps.
 361         * scripts/features/patternrules: False exits with different error
 362         codes on different systems (for example, Linux => 1, Solaris => 255).
 363
 364         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 365         to be sure it will be considered updated when it's remade.
 366
 367 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 368
 369         * scripts/functions/shell: New test suite for the shell function.
 370
 371 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 372
 373         * scripts/features/include: Test include/-include/sinclude with no
 374         arguments.  Tests fix for Savannah bug #1761.
 375
 376         * scripts/misc/general3: Implement comprehensive testing of
 377         backslash-newline behavior in command scripts: various types of
 378         quoting, fast path / slow path, etc.
 379         Tests fix for Savannah bug #1332.
 380
 381         * scripts/options/symlinks: Test symlinks to non-existent files.
 382         Tests fix for Savannah bug #13280.
 383
 384         * scripts/misc/general3: Test semicolons in variable references.
 385         Tests fix for Savannah bug #1454.
 386
 387         * scripts/variables/MAKE_RESTARTS: New file: test the
 388         MAKE_RESTARTS variable.
 389         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 390         Tests fix for Savannah bug #7566.
 391         * scripts/options/dash-W: New file: test the -W flag, including
 392         re-exec infinite looping.
 393
 394 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 395
 396         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 397         This test only works on systems that have /dev/full (e.g., Linux).
 398
 399 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 400
 401         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 402
 403 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 404
 405         * scripts/features/include: Add a test for Savannah bug #13216.
 406         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 407
 408 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 409
 410         * scripts/features/conditionals: Add tests for the new if... else
 411         if... endif syntax.
 412
 413 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 414
 415         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 416         DEFAULT_GOAL.
 417
 418 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 419
 420         * scripts/features/parallelism: Add a test for exporting recursive
 421         variables containing $(shell ) calls.  Rewrite this script to use
 422         run_make_test() everywhere.
 423
 424 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 425
 426         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 427
 428 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 429
 430         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 431
 432 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 433
 434         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 435
 436 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 437
 438         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 439         bug #12266.
 440
 441 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 442
 443         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 444
 445 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 446
 447         * scripts/features/se_implicit: Add a test for stem
 448         termination bug. Add a test for stem triple-expansion bug.
 449
 450         * scripts/features/se_statpat: Add a test for stem
 451         triple-expansion bug.
 452
 453         * scripts/features/statipattrules: Change test #4 to reflect
 454         new way empty prerequisite list is handled.
 455
 456
 457 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 458
 459         * scripts/features/statipattrules: Add a test for
 460         Savannah bug #12180.
 461
 462 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 463
 464         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 465
 466         * scripts/options/symlinks: New file to test checking of symlink
 467         timestamps.  Can't use filename dash-L because it conflicts with
 468         dash-l on case-insensitive filesystems.
 469
 470         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 471         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 472         unique filenames.
 473
 474 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 475
 476         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 477         special variable.
 478
 479 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 480
 481         * scripts/features/se_explicit: Test the second expansion in
 482         explicit rules.
 483         * scripts/features/se_implicit: Test the second expansion in
 484         implicit rules.
 485         * scripts/features/se_statpat: Test the second expansion in
 486         static pattern rules.
 487         * scripts/variables/automatic: Fix to work with the second
 488         expansion.
 489
 490         * scripts/misc/general4: Add a test for bug #12091.
 491
 492 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 493
 494         * scripts/functions/eval: Check that eval of targets within
 495         command scripts fails.  See Savannah bug # 12124.
 496
 497 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 498
 499         * test_driver.pl (compare_output): If a basic comparison of the
 500         log and answer doesn't match, try harder: change all backslashes
 501         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 502
 503 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 504
 505         * scripts/features/recursion: Test command line variable settings:
 506         only one instance of a given variable should be provided.
 507
 508 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 509
 510         * tests/scripts/functions/abspath: New file: test `abspath'
 511         built-in function.
 512
 513         * tests/scripts/functions/realpath: New file: test `realpath'
 514         built-in function.
 515
 516 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 517
 518         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 519         this doesn't really test anything useful in UNIX but...
 520
 521         * scripts/variables/SHELL: New file: test proper handling of SHELL
 522         according to POSIX rules.  Fixes bug #1276.
 523
 524 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 525
 526         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 527
 528 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 529
 530         * scripts/features/patspecific_vars: Test simple/recursive
 531         variable expansion.
 532
 533 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 534
 535         * scripts/features/include: Test dontcare flag inheritance
 536         when rebuilding makefiles.
 537
 538 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 539
 540         * scripts/features/patspecific_vars: Test exported variables.
 541
 542 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 543
 544         * run_make_tests.pl (run_make_test): Don't add newlines to the
 545         makestring or answer if they are completely empty.
 546
 547         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 548
 549         * scripts/test_template: Rework the template.
 550
 551 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 552
 553         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 554         `#!/usr/bin/env perl'.
 555
 556         * scripts/features/implicit_prereq_eval: Test implicit rule
 557         prerequisite evaluation code.
 558
 559 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 560
 561         * run_make_tests.pl (run_make_test): Enhance to allow the make
 562         string to be undef: in that case it reuses the previous make
 563         string.  Allows multiple tests on the same makefile.
 564
 565         * scripts/variables/flavors: Add some tests for prefix characters
 566         interacting with define/endef variables.
 567
 568 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 569
 570         * scripts/functions/substitution: Rewrite to use run_make_test()
 571         interface, and add test for substitution failures reported by
 572         Markus Mauhart <qwe123@chello.at>.
 573
 574 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 575
 576         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 577         to track both the testing categories _AND_ the number of
 578         individual tests, and report both sets of numbers.
 579
 580 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 581
 582         * scripts/functions/origin: Set our own environment variable
 583         rather than relying on $HOME.
 584
 585 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 586
 587         * scripts/features/conditionals: Test arguments to ifn?def which
 588         contain whitespace (such as a function that is evaluated).  Bug
 589         #7257.
 590
 591 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 592
 593         * scripts/features/order_only: Test order-only prerequisites in
 594         pattern rules (patch #2349).
 595
 596 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 597
 598         * scripts/functions/if: Test if on conditionals with trailing
 599         whitespace--bug #5798.
 600
 601         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 602
 603 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 604
 605         * scripts/features/patspecific_vars: Test multiple patterns
 606         matching the same target--Bug #1405.
 607
 608 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 609
 610         * run_make_tests.pl (set_more_defaults): A new $port_type of
 611         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 612         for OS/2.
 613
 614 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 615
 616         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 617         not prerequisites)--Bug #2515.
 618
 619 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 620
 621         * scripts/features/targetvars: Test very long target-specific
 622         variable definition lines (longer than the default make buffer
 623         length).  Tests patch # 1022.
 624
 625         * scripts/functions/eval: Test very recursive $(eval ...) calls
 626         with simple variable expansion (bug #2238).
 627
 628         * scripts/functions/word: Test error handling for word and
 629         wordlist functions (bug #2407).
 630
 631 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 632
 633         * scripts/functions/call: Test recursive argument masking (bug
 634         #1744).
 635
 636 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 637
 638         * scripts/functions/eval: Test using $(eval ...) inside
 639         conditionals (Bug #1516).
 640
 641 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 642
 643         * scripts/options/dash-t: Add a test for handling -t on targets
 644         with no commands (Bug #1418).
 645
 646 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 647
 648         * scripts/features/targetvars: Add a test for exporting
 649         target-specific vars (Bug #1391).
 650
 651 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 652
 653         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 654         and $${@F}.
 655
 656 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 657
 658         * scripts/features/escape: Test handling of escaped comment
 659         characters in targets and prerequisites.
 660
 661 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 662
 663         * scripts/features/export: Test export/unexport of multiple
 664         variables in a single command.
 665
 666 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 667
 668         * scripts/features/targetvars: Tests for Bug #940: test
 669         target-specific and pattern-specific variables in conjunction with
 670         double-colon targets.
 671
 672 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 673
 674         * test_driver.pl (compare_output): Match the new format for time
 675         skew error messages.
 676
 677         * scripts/features/export: Created.  Add tests for export/unexport
 678         capabilities, including exporting/unexporting expanded variables.
 679
 680         * scripts/features/conditionals: Add a test for expanded variables
 681         in ifdef conditionals.
 682
 683 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 684
 685         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 686         invocations.
 687         * scripts/features/vpathgpath: Ditto.
 688         * scripts/features/vpathplus: Ditto.
 689         * scripts/options/dash-n: Ditto.
 690         * scripts/targets/INTERMEDIATE: Ditto.
 691         * scripts/targets/SECONDARY: Ditto.
 692
 693         * scripts/options/dash-t: Added a test for the -t bug fixed by
 694         Henning Makholm.  This test was also contributed by Henning.
 695
 696         * scripts/misc/general4: Add a test suite for obscure algorithmic
 697         features of make.  First test: make sure creation subdirectories
 698         as prerequisites of targets works properly.
 699
 700         * scripts/misc/version: Remove this bogus test.
 701
 702 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 703
 704         * scripts/misc/general3: Add a test for makefiles that don't end
 705         in newlines.
 706
 707         * scripts/variables/special: Create tests for the special
 708         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 709         for now as it's not yet supported.
 710
 711 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 712
 713         * scripts/options/dash-B: Add a test for the new -B option.
 714
 715 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 716
 717         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 718         -valgrind option to the test suite.
 719         (set_more_defaults): Set up the file descriptor to capture
 720         Valgrind output.  We have to unset its close-on-exec flag; we
 721         hardcode the value for F_SETFD (2) rather than load it; hopefully
 722         this will help us avoid breaking the Windows/DOS test suite.
 723
 724 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 725
 726         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 727         $$(@F).
 728
 729         * test_driver.pl (utouch): Create a new function that creates a
 730         file with a specific timestamp offset.  Use of this function will
 731         let us avoid lots of annoying sleep() invocations in the tests
 732         just to get proper timestamping, which will make the tests run a
 733         lot faster.  So far it's only used in the automatic test suite.
 734
 735 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 736
 737         * scripts/variables/automatic: Create a test for automatic variables.
 738
 739 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 740
 741         * scripts/features/order_only: Test new order-only prerequisites.
 742
 743 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 744
 745         * scripts/functions/eval: Test new function.
 746         * scripts/functions/value: Test new function.
 747         * scripts/variables/MAKEFILE_LIST: Test new variable.
 748
 749 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 750
 751         * scripts/functions/call: New test: transitive closure
 752         implementation using $(call ...) to test variable recursion.
 753
 754 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 755
 756         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 757         directories in the script directories.
 758
 759 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 760
 761         * scripts/variables/flavors: Test define/endef scripts where only
 762         one of the command lines is quiet.
 763
 764 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 765
 766         * scripts/options/dash-q: New file; test the -q option.  Includes
 767         a test for PR/1780.
 768
 769 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 770
 771         * scripts/features/targetvars: Added a test for PR/1709: allowing
 772         semicolons in target-specific variable values.
 773
 774 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 775
 776         * scripts/functions/addsuffix: Test for an empty final argument.
 777         Actually this bug might have happened for any function, but this
 778         one was handy.
 779
 780 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 781
 782         * scripts/options/general: If parallel jobs are not supported,
 783         expect a warning message from Make.
 784
 785 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 786
 787         * scripts/options/general: Don't try -jN with N != 1 if parallel
 788         jobs are not supported.
 789
 790 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 791
 792         * scripts/options/general: Test general option processing (PR/1716).
 793
 794 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 795
 796         * scripts/functions/strip: Test empty value to strip (PR/1689).
 797
 798 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 799
 800         * scripts/features/reinvoke: Sleep before updating the target
 801         files in the first test, to ensure its time stamp really gets
 802         newer; otherwise Make might re-exec more than once.
 803
 804 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 805
 806         * scripts/features/double_colon: Don't run the parallel tests if
 807         parallel jobs aren't supported.
 808
 809 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 810
 811         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 812
 813 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 814
 815         * scripts/features/statipattrules: Test that static pattern rules
 816         whose prerequisite patterns resolve to empty strings throw an
 817         error (instead of dumping core).  Fixes PR/1670.
 818
 819         * scripts/features/reinvoke: Make more robust by touching "b"
 820         first, to ensure it's not newer than "a".
 821         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 822         * scripts/options/dash-n: Ditto.
 823
 824         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 825         recursive invocations of $(call ...) to break.  I can't come up
 826         with any way to get both working at the same time, so I backed out
 827         the fix to 1527 and added a test case for recursive calls.  This
 828         also tests the fix for PR/1610.
 829
 830         * scripts/features/double_colon: Test that circular dependencies
 831         in double-colon rule sets are detected correctly (PR/1671).
 832
 833 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 834
 835         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 836         .INTERMEDIATE files when given on the command line (PR/1669).
 837
 838 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 839
 840         * scripts/options/dash-k: Add a test for error detection by
 841         multiple targets depending on the same prerequisite with -k.
 842         For PR/1634.
 843
 844 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 845
 846         * scripts/features/escape: Add a test for backslash-escaped spaces
 847         in a target name (PR/1586).
 848
 849 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 850
 851         * scripts/features/patspecific_vars: Add a test for pattern-specific
 852         target variables inherited from the parent target (PR/1407).
 853
 854 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 855
 856         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 857         to make sure sorting order, etc. is predictable.
 858         Reported by Andreas Jaeger <aj@suse.de>.
 859
 860         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 861         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 862         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 863         1 for other systems.
 864         * scripts/features/vpathplus (touchfiles): Use the $wtime value
 865         instead of hardcoding 2.
 866         * scripts/targets/SECONDARY: Ditto.
 867         * scripts/targets/INTERMEDIATE: Ditto.
 868
 869 2000-01-27  Paul D. Smith  <psmith@gnu.org>
 870
 871         * test_driver.pl (toplevel): Don't try to run test scripts which
 872         are really directories.
 873
 874 2000-01-23  Paul D. Smith  <psmith@gnu.org>
 875
 876         * scripts/features/include: Remove a check; the fix caused more
 877         problems than the error, so I removed it and removed the test for
 878         it.
 879
 880 2000-01-11  Paul D. Smith  <psmith@gnu.org>
 881
 882         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
 883         sure $(call ...) doesn't eval its arguments and that you can
 884         invoke foreach from it without looping forever.
 885
 886 1999-12-15  Paul D. Smith  <psmith@gnu.org>
 887
 888         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
 889         .INTERMEDIATE settings on files don't disable them as implicit
 890         intermediate possibilities.
 891
 892 1999-12-01  Paul D. Smith  <psmith@gnu.org>
 893
 894         * scripts/features/double_colon: Add a test for PR/1476: Try
 895         double-colon rules as non-goal targets and during parallel builds
 896         to make sure they're handled serially.
 897
 898 1999-11-17  Paul D. Smith  <psmith@gnu.org>
 899
 900         * scripts/functions/if: Add a test for PR/1429: put some text
 901         after an if-statement to make sure it works.
 902
 903         * scripts/features/targetvars: Add a test for PR/1380: handling +=
 904         in target-specific variable definitions correctly.
 905
 906 1999-10-15  Paul D. Smith  <psmith@gnu.org>
 907
 908         * scripts/variables/MAKEFILES: This was really broken: it didn't
 909         test anything at all, really.  Rewrote it, plus added a test for
 910         PR/1394.
 911
 912 1999-10-13  Paul D. Smith  <psmith@gnu.org>
 913
 914         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
 915         behave properly when used with recursive targets".
 916
 917 1999-10-08  Paul D. Smith  <psmith@gnu.org>
 918
 919         * scripts/features/targetvars: Add a check for PR/1378:
 920         "Target-specific vars don't inherit correctly"
 921
 922 1999-09-29  Paul D. Smith  <psmith@gnu.org>
 923
 924         * test_driver.pl (get_osname): Change $fancy_file_names to
 925         $short_filenames and reverse the logic.
 926         (run_each_test): Change test of non-existent $port_host to use
 927         $short_filenames--problem reported by Eli Zaretskii.
 928
 929 1999-09-23  Paul D. Smith  <psmith@gnu.org>
 930
 931         * scripts/features/parallelism: Add a check to ensure that the
 932         jobserver works when we re-invoke.  Also cleaned up the tests a
 933         little, reducing the number of rules we use so the test won't need
 934         as many "sleep" commands.
 935
 936 1999-09-16  Paul D. Smith  <psmith@gnu.org>
 937
 938         * scripts/features/reinvoke: Remove invocations of "touch" in
 939         makefiles.  See the comments on the touch function rewrite below.
 940         Note that UNIX touch behaves the same way if the file already
 941         exists: it sets the time to the _local_ time.  We don't want
 942         this.  This is probably a good tip for makefile writers in
 943         general, actually... where practical.
 944         * scripts/options/dash-l: Ditto.
 945         * scripts/options/dash-n: Ditto.
 946
 947         * test_driver.pl (run_each_test): In retrospect, I don't like the
 948         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
 949         changed it back to use .log, .base, and .diff.
 950
 951         * run_make_tests.pl (set_more_defaults): Move the check for the
 952         make pathname to here from set_defaults (that's too early since it
 953         happens before the command line processing).
 954         Create a new variable $port_type, calculated from $osname, to
 955         specify what kind of system we're running on.  We should integrate
 956         the VOS stuff here, too.
 957         (valid_option): Comment out the workdir/-work stuff so people
 958         won't be fooled into thinking it works... someone needs to fix
 959         this, though!
 960
 961         * scripts/functions/origin: Use $port_type instead of $osname.
 962         * scripts/functions/foreach: Ditto.
 963         * scripts/features/default_names: Ditto.
 964
 965 1999-09-15  Paul D. Smith  <psmith@gnu.org>
 966
 967         * test_driver.pl (touch): Rewrite this function.  Previously it
 968         used to use utime() to hard-set the time based on the current
 969         local clock, or, if the file didn't exist, it merely created it.
 970         This mirrors exactly what real UNIX touch does, but it fails badly
 971         on networked filesystems where the FS server clock is skewed from
 972         the local clock: normally modifying a file causes it to get a mod
 973         time based on the _server's_ clock.  Hard-setting it based on the
 974         _local_ clock causes gratuitous errors and makes the tests
 975         unreliable except on local filesystems.  The new function will
 976         simply modify the file, allowing the filesystem to set the mod
 977         time as it sees fit.
 978
 979         * scripts/features/parallelism: The second test output could
 980         change depending on how fast some scripts completed; use "sleep"
 981         to force the order we want.
 982
 983         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
 984         means that "%ENV = ();" doesn't do the right thing.  This worked
 985         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
 986         the environment rather than require specific versions.
 987
 988         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
 989         modifier "s", so the tests will run with Perl 4.
 990         (set_more_defaults): Set $pure_log to empty if there's no -logfile
 991         option in PURIFYOPTIONS.
 992         (setup_for_test): Don't remove any logs unless $pure_log is set.
 993
 994 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
 995
 996         * scripts/features/reinvoke: Put the SHELL definition in the right
 997         test makefile.
 998
 999 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1000
1001         ChangeLog file for the test suite created.
1002 \f
1003
1004 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1005 2002, 2003, 2004, 2005, 2006, 2007 Free Software Foundation, Inc.
1006 This file is part of GNU Make.
1007
1008 GNU Make is free software; you can redistribute it and/or modify it under the
1009 terms of the GNU General Public License as published by the Free Software
1010 Foundation; either version 3 of the License, or (at your option) any later
1011 version.
1012
1013 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1014 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1015 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1016
1017 You should have received a copy of the GNU General Public License along with
1018 this program.  If not, see <http://www.gnu.org/licenses/>.