tests/ChangeLog

   1 2010-11-06  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
   4         * scripts/functions/call: Ditto.
   5         * scripts/variables/special: Ditto.
   6
   7         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
   8
   9 2010-08-29  Paul Smith  <psmith@gnu.org>
  10
  11         * scripts/features/errors: Add new error message to output text.
  12         * scripts/variables/SHELL: Ditto.
  13         * scripts/targets/POSIX: Ditto.
  14         * scripts/options/dash-k: Ditto.
  15         * scripts/features/vpathplus: Ditto.
  16         * scripts/features/patternrules: Ditto.
  17         * scripts/features/parallelism: Ditto.
  18
  19 2010-08-13  Paul Smith  <psmith@gnu.org>
  20
  21         * scripts/features/archives: New regression tests for archive
  22         support.  Test for fix to Savannah bug #30612.
  23
  24         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
  25         the features available in $(.FEATURES).
  26
  27 2010-08-10  Paul Smith  <psmith@gnu.org>
  28
  29         * scripts/features/reinvoke: Ensure command line variable settings
  30         are preserved across make re-exec.  Tests Savannah bug #30723.
  31
  32 2010-07-28  Paul Smith  <psmith@gnu.org>
  33
  34         * scripts/targets/POSIX: Compatibility issues with Solaris (and
  35         Tru64?); "false" returns different exit codes, and set -x shows
  36         output with extra whitespace.  Run the commands by hand first to
  37         find out what the real shell would do, then compare what make does.
  38         * scripts/variables/SHELL: Ditto.
  39
  40 2010-07-12  Paul Smith  <psmith@gnu.org>
  41
  42         * test_driver.pl: Add a new $perl_name containing the path to Perl.
  43         * run_make_tests.pl (run_make_test): Replace the special string
  44         #PERL# in a makefile etc. with the path the Perl executable so
  45         makefiles can use it.
  46
  47         * scripts/targets/ONESHELL: Add a new set of regression tests for
  48         the .ONESHELL feature.
  49
  50 2010-07-06  Paul Smith  <psmith@gnu.org>
  51
  52         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
  53
  54         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
  55         Verify that enabling .POSIX changes the shell flags to set -e.
  56
  57 2010-07-01  Paul Smith  <psmith@gnu.org>
  58
  59         * scripts/features/recursion: Add a space to separate command-line
  60         args.  Fixes Savannah bug #29968.
  61
  62 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
  63
  64         * scripts/features/vpath3: Test for the new library search
  65         behavior.
  66
  67 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
  68
  69         * scripts/features/se_explicit: Enable the test for now fixed
  70         Savannah bug 25780.
  71
  72 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
  73
  74         * scripts/variables/undefine: Tests for the new undefine feature.
  75
  76 2009-10-03  Paul Smith  <psmith@gnu.org>
  77
  78         * scripts/features/parallelism: Test for open Savannah bug #26846.
  79
  80         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
  81
  82         * scripts/variables/MAKEFLAGS: Created.
  83         Add test for Savannah bug #2216 (still open).
  84
  85         * scripts/features/include: Test for Savannah bug #102 (still open).
  86
  87 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
  88
  89         * scripts/features/include: Add diagnostics issuing tests for
  90         cases where targets have been updated and failed with the
  91         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
  92
  93 2009-09-28  Paul Smith  <psmith@gnu.org>
  94
  95         * scripts/functions/shell: Add regression test for Savannah bug
  96         #20513 (still open).
  97
  98         * scripts/features/se_explicit: Add regression tests for Savannah
  99         bug #25780 (still open).
 100
 101         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
 102         that runs tests we know will fail.  This allows us to add
 103         regression tests to the test suite for bugs that haven't been
 104         fixed yet.
 105
 106 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
 107
 108         * scripts/features/patspecific_vars: Add a test for the shortest
 109         stem first order.
 110
 111         * scripts/features/patternrules: Add a test for the shortest stem
 112         first order.
 113
 114 2009-09-24  Paul Smith  <psmith@gnu.org>
 115
 116         * scripts/features/se_implicit: Add a test for order-only
 117         secondary expansion prerequisites.
 118
 119 2009-09-23  Paul Smith  <psmith@gnu.org>
 120
 121         * scripts/features/patternrules: Test that we can remove pattern
 122         rules, both single and multiple prerequisites.  Savannah bug #18622.
 123
 124         * scripts/features/echoing: Rework for run_make_test().
 125
 126 2009-06-14  Paul Smith  <psmith@gnu.org>
 127
 128         * scripts/features/vpath: Verify we don't get bogus circular
 129         dependency warnings if we choose a different file via vpath during
 130         update.  Savannah bug #13529.
 131
 132 2009-06-13  Paul Smith  <psmith@gnu.org>
 133
 134         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
 135         files (and files included by them) don't set the default goal.
 136         Savannah bug #13401.
 137
 138         * scripts/functions/wildcard: Test that wildcards with
 139         non-existent glob matchers return empty.
 140
 141 2009-06-09  Paul Smith  <psmith@gnu.org>
 142
 143         * scripts/options/dash-B: Test the $? works correctly with -B.
 144         Savannah bug #17825.
 145
 146         * scripts/features/patternrules: Test that dependencies of
 147         "also_make" targets are created properly.  Savannah bug #19108.
 148
 149         * test_driver.pl (compare_output): Create a "run" file for failed
 150         tests containing the command that was run.
 151         (get_runfile): New function.
 152
 153         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
 154         allow memcheck and massif tools.
 155
 156         * scripts/features/patternrules: Have to comment out a line in the
 157         first test due to backing out a change that broke the implicit
 158         rule search algorithm.  Savannah bug #17752.
 159         * scripts/misc/general4: Remove a test that is redundant with
 160         patternrules.
 161
 162         * scripts/features/parallelism: Add a test for re-exec with
 163         jobserver master override.  Savannah bug #18124.
 164
 165 2009-06-08  Paul Smith  <psmith@gnu.org>
 166
 167         * scripts/features/targetvars: Add a test for continued target
 168         vars after a semicolon.  Savannah bug #17521.
 169
 170 2009-06-07  Paul Smith  <psmith@gnu.org>
 171
 172         * scripts/features/se_explicit: Make sure we catch defining
 173         prereqs during snap_deps().  Savannah bug #24622.
 174
 175         * scripts/variables/automatic: Check prereq ordering when the
 176         target with the recipe has no prereqs.  Savannah bug #21198.
 177
 178         * scripts/variables/LIBPATTERNS: Add a new set of test for
 179         $(.LIBPATTERNS) (previously untested!)
 180
 181 2009-06-04  Paul Smith  <psmith@gnu.org>
 182
 183         * scripts/variables/SHELL: The export target-specific SHELL test
 184         has an incorrect known-good-value.
 185
 186         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
 187
 188         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
 189
 190 2009-05-31  Paul Smith  <psmith@gnu.org>
 191
 192         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
 193
 194         * scripts/features/targetvars: Add tests of overrides for Savannah
 195         bug #26207.
 196         * scripts/features/patspecific_vars: Ditto.
 197
 198         * scripts/features/patternrules: Add a test for Savannah bug #26593.
 199
 200 2009-05-30  Paul Smith  <psmith@gnu.org>
 201
 202         * scripts/variables/flavors: Update with new variable flavor tests.
 203         * scripts/variables/define: Create a new set of tests for
 204         define/endef and move those aspects of the flavors suite here.
 205
 206 2009-05-25  Paul Smith  <psmith@gnu.org>
 207
 208         * scripts/features/targetvars: Ditto.
 209
 210         * scripts/features/export: Test new variable parsing abilities.
 211
 212 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
 213
 214         * scripts/variables/private: Create a new suite of tests for 'private'.
 215
 216 2007-11-04  Paul Smith  <psmith@gnu.org>
 217
 218         * scripts/functions/eval: Update error message for command -> recipe.
 219
 220         * test_driver.pl (compare_output): Allow the answer to be a regex,
 221         if surrounded by '/'.
 222         * scripts/misc/close_stdout: Use a regex for the answer, since
 223         sometimes the error will have a description and sometimes it won't.
 224
 225 2007-09-10  Paul Smith  <psmith@gnu.org>
 226
 227         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
 228
 229 2007-08-15  Paul Smith  <psmith@gnu.org>
 230
 231         These test cases were contributed by
 232         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
 233         Savannah bugs #3330 and #15919.
 234
 235         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
 236         15919.
 237
 238         * scripts/features/parallelism: Add tests for wrong answer/hang
 239         combining INTERMEDIATE, order-only prereqs, and parallelism.
 240         See Savannah bugs 3330 and 15919.
 241
 242 2007-07-13  Paul Smith  <psmith@gnu.org>
 243
 244         Install a timeout so tests can never loop infinitely.
 245         Original idea and patch for a single-test version provided by
 246         Icarus Sparry <savannah@icarus.freeuk.com>
 247
 248         * test_driver.pl (_run_command): New function: this is called by
 249         other functions to actually run a command.  Before we run it,
 250         install a SIGALRM handler and set up a timer to go off in the
 251         future (default is 5s; this can be overridden by individual tests).
 252         (run_command): Call it.
 253         (run_command_with_output): Call it.
 254
 255         * run_make_tests.pl (run_make_with_options): Override the default
 256         timeout if the caller requests it.
 257         (run_make_test): Pass any timeout override to run_make_with_options.
 258
 259         * scripts/features/parallelism: Increase the timeout for long tests.
 260         * scripts/options/dash-l: Ditto.
 261
 262 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
 263
 264         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
 265         ENV here.  This doesn't always work.
 266         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
 267         environment.  Fixes Savannah bug #16698.
 268
 269 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
 270
 271         * scripts/variables/automatic: Add back the test for bug #8154.
 272
 273 2006-04-01  Paul D. Smith  <psmith@gnu.org>
 274
 275         * scripts/functions/realpath: Don't run tests with multiple
 276         initial slashes on Windows: those paths mean something different.
 277
 278 2006-03-19  Paul D. Smith  <psmith@gnu.org>
 279
 280         * scripts/features/parallelism: Test that the jobserver is
 281         properly managed when we have to re-exec the master instance of
 282         make.
 283
 284 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
 285
 286         * scripts/features/statipattrules: Add tests for bug #16053.
 287
 288 2006-03-09  Paul Smith  <psmith@gnu.org>
 289
 290         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
 291         with DOS drive letters.  Fixes Savannah bug #15947.
 292
 293         * test_driver.pl (run_each_test): Set the status properly even
 294         when a test fails to execute.  Fixes Savannah bug #15942.
 295
 296         * scripts/functions/foreach: Use a different environment variable
 297         other than PATH to avoid differences with Windows platforms.
 298         Fixes Savannah bug #15938.
 299
 300 2006-03-05  Paul D. Smith  <psmith@gnu.org>
 301
 302         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
 303         type W32.  Fixed Savannah bug #15937.
 304
 305         * scripts/features/default_names: Don't call error() when the test
 306         fails.  Fixes Savannah bug #15941.
 307
 308 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 309
 310         * scripts/features/targetvars: Test a complex construction which
 311         guarantees that we have to merge variable lists of different
 312         sizes.  Tests for Savannah bug #15757.
 313
 314 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 315
 316         * scripts/functions/error: Make sure filename/lineno information
 317         is related to where the error is expanded, not where it's set.
 318         * scripts/functions/warning: Ditto.
 319         * scripts/functions/foreach: Check for different error conditions.
 320         * scripts/functions/word: Ditto.
 321         * scripts/variables/negative: Test some variable reference failure
 322         conditions.
 323         * scripts/options/warn-undefined-variables: Test the
 324         --warn-undefined-variables flag.
 325
 326 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 327
 328         * run_make_tests.pl (set_more_defaults): Update valgrind support
 329         for newer versions.
 330         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 331         beginning with ".").
 332
 333         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 334         functions.
 335
 336 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 337
 338         * scripts/features/parallelism: Add a test for bug #15641.
 339
 340 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 341
 342         * scripts/options/dash-W: Add a test for bug #15341.
 343
 344 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 345
 346         * scripts/variables/automatic: Add a test for bug #8154.
 347
 348         * README: Update to reflect the current state of the test suite.
 349
 350 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 351
 352         * scripts/features/parallelism, scripts/functions/wildcard,
 353         scripts/targets/FORCE, scripts/targets/PHONY,
 354         scripts/targets/SILENT: Use the default setting for
 355         $delete_command.  Fixes bug #15085.
 356
 357         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 358
 359 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 360
 361         * scripts/misc/general4: Test implicit rules with '$' in the
 362         prereq list & prereq patterns.
 363         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 364
 365 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 366
 367         * scripts/features/patternrules: Add a test for bug #13022.
 368
 369 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 370
 371         * scripts/features/double_colon: Add a test for bug #14334.
 372
 373 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 374
 375         * scripts/functions/flavor: Add a test for the flavor function.
 376
 377 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 378
 379         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 380         special variable.
 381
 382 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 383
 384         * scripts/misc/general4: Test '$$' in prerequisites list.
 385         * scripts/features/statipattrules: Rewrite to use run_make_test().
 386         Add various static pattern info.
 387         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 388         * scripts/features/se_explicit: Add tests for handling '$$' in
 389         prerequisite lists with and without setting .SECONDEXPANSION.
 390         * scripts/features/order_only: Convert to run_make_test().
 391         * run_make_tests.pl (set_more_defaults): If we can't get the value
 392         of $(MAKE) from make, then fatal immediately.
 393
 394 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 395
 396         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 397         an eval to trap errors) and if it exists, use POSIX::getcwd to
 398         find the working directory.  If it doesn't exist, go back to the
 399         previous methods.  This tries to be more accurate on Windows
 400         systems.
 401
 402 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 403
 404         * scripts/functions/abspath: Add some text to the error messages
 405         to get a better idea of what's wrong.  Make warnings instead of
 406         errors.
 407
 408         * scripts/features/patspecific_vars: Don't use "test", which is
 409         UNIX specific.  Print the values and let the test script match
 410         them.
 411
 412 2005-08-25  Paul Smith  <psmith@gnu.org>
 413
 414         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 415         former works better with non-UNIX environments.  Fixes Savannah
 416         bug #14129.
 417
 418 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 419
 420         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 421         $(sort) so that the resulting order is no longer filesystem-
 422         dependant.
 423
 424 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 425
 426         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 427
 428 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 429
 430         * scripts/features/parallelism: Add a test for a bug reported by
 431         Michael Matz (matz@suse.de) in which make exits without waiting
 432         for all its children in some situations during parallel builds.
 433
 434 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 435
 436         * test_driver.pl: Reset the environment to a clean value every
 437         time before we invoke make.  I'm suspicious that the environment
 438         isn't handled the same way in Windows as it is in UNIX, and some
 439         variables are leaking out beyond the tests they are intended for.
 440         Create an %extraENV hash tests can set to add more env. vars.
 441         * tests/scripts/features/export: Change to use %extraENV.
 442         * tests/scripts/functions/eval: Ditto.
 443         * tests/scripts/functions/origin: Ditto.
 444         * tests/scripts/options/dash-e: Ditto.
 445         * tests/scripts/variables/SHELL: Ditto.
 446
 447 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 448
 449         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 450         files.
 451         * scripts/features/reinvoke: Rewrite to be safer on systems with
 452         subsecond timestamps.
 453         * scripts/features/patternrules: False exits with different error
 454         codes on different systems (for example, Linux => 1, Solaris => 255).
 455
 456         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 457         to be sure it will be considered updated when it's remade.
 458
 459 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 460
 461         * scripts/functions/shell: New test suite for the shell function.
 462
 463 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 464
 465         * scripts/features/include: Test include/-include/sinclude with no
 466         arguments.  Tests fix for Savannah bug #1761.
 467
 468         * scripts/misc/general3: Implement comprehensive testing of
 469         backslash-newline behavior in command scripts: various types of
 470         quoting, fast path / slow path, etc.
 471         Tests fix for Savannah bug #1332.
 472
 473         * scripts/options/symlinks: Test symlinks to non-existent files.
 474         Tests fix for Savannah bug #13280.
 475
 476         * scripts/misc/general3: Test semicolons in variable references.
 477         Tests fix for Savannah bug #1454.
 478
 479         * scripts/variables/MAKE_RESTARTS: New file: test the
 480         MAKE_RESTARTS variable.
 481         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 482         Tests fix for Savannah bug #7566.
 483         * scripts/options/dash-W: New file: test the -W flag, including
 484         re-exec infinite looping.
 485
 486 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 487
 488         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 489         This test only works on systems that have /dev/full (e.g., Linux).
 490
 491 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 492
 493         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 494
 495 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 496
 497         * scripts/features/include: Add a test for Savannah bug #13216.
 498         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 499
 500 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 501
 502         * scripts/features/conditionals: Add tests for the new if... else
 503         if... endif syntax.
 504
 505 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 506
 507         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 508         DEFAULT_GOAL.
 509
 510 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 511
 512         * scripts/features/parallelism: Add a test for exporting recursive
 513         variables containing $(shell ) calls.  Rewrite this script to use
 514         run_make_test() everywhere.
 515
 516 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 517
 518         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 519
 520 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 521
 522         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 523
 524 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 525
 526         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 527
 528 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 529
 530         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 531         bug #12266.
 532
 533 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 534
 535         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 536
 537 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 538
 539         * scripts/features/se_implicit: Add a test for stem
 540         termination bug. Add a test for stem triple-expansion bug.
 541
 542         * scripts/features/se_statpat: Add a test for stem
 543         triple-expansion bug.
 544
 545         * scripts/features/statipattrules: Change test #4 to reflect
 546         new way empty prerequisite list is handled.
 547
 548
 549 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 550
 551         * scripts/features/statipattrules: Add a test for
 552         Savannah bug #12180.
 553
 554 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 555
 556         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 557
 558         * scripts/options/symlinks: New file to test checking of symlink
 559         timestamps.  Can't use filename dash-L because it conflicts with
 560         dash-l on case-insensitive filesystems.
 561
 562         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 563         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 564         unique filenames.
 565
 566 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 567
 568         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 569         special variable.
 570
 571 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 572
 573         * scripts/features/se_explicit: Test the second expansion in
 574         explicit rules.
 575         * scripts/features/se_implicit: Test the second expansion in
 576         implicit rules.
 577         * scripts/features/se_statpat: Test the second expansion in
 578         static pattern rules.
 579         * scripts/variables/automatic: Fix to work with the second
 580         expansion.
 581
 582         * scripts/misc/general4: Add a test for bug #12091.
 583
 584 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 585
 586         * scripts/functions/eval: Check that eval of targets within
 587         command scripts fails.  See Savannah bug # 12124.
 588
 589 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 590
 591         * test_driver.pl (compare_output): If a basic comparison of the
 592         log and answer doesn't match, try harder: change all backslashes
 593         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 594
 595 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 596
 597         * scripts/features/recursion: Test command line variable settings:
 598         only one instance of a given variable should be provided.
 599
 600 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 601
 602         * tests/scripts/functions/abspath: New file: test `abspath'
 603         built-in function.
 604
 605         * tests/scripts/functions/realpath: New file: test `realpath'
 606         built-in function.
 607
 608 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 609
 610         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 611         this doesn't really test anything useful in UNIX but...
 612
 613         * scripts/variables/SHELL: New file: test proper handling of SHELL
 614         according to POSIX rules.  Fixes bug #1276.
 615
 616 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 617
 618         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 619
 620 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 621
 622         * scripts/features/patspecific_vars: Test simple/recursive
 623         variable expansion.
 624
 625 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 626
 627         * scripts/features/include: Test dontcare flag inheritance
 628         when rebuilding makefiles.
 629
 630 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 631
 632         * scripts/features/patspecific_vars: Test exported variables.
 633
 634 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 635
 636         * run_make_tests.pl (run_make_test): Don't add newlines to the
 637         makestring or answer if they are completely empty.
 638
 639         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 640
 641         * scripts/test_template: Rework the template.
 642
 643 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 644
 645         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 646         `#!/usr/bin/env perl'.
 647
 648         * scripts/features/implicit_prereq_eval: Test implicit rule
 649         prerequisite evaluation code.
 650
 651 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 652
 653         * run_make_tests.pl (run_make_test): Enhance to allow the make
 654         string to be undef: in that case it reuses the previous make
 655         string.  Allows multiple tests on the same makefile.
 656
 657         * scripts/variables/flavors: Add some tests for prefix characters
 658         interacting with define/endef variables.
 659
 660 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 661
 662         * scripts/functions/substitution: Rewrite to use run_make_test()
 663         interface, and add test for substitution failures reported by
 664         Markus Mauhart <qwe123@chello.at>.
 665
 666 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 667
 668         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 669         to track both the testing categories _AND_ the number of
 670         individual tests, and report both sets of numbers.
 671
 672 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 673
 674         * scripts/functions/origin: Set our own environment variable
 675         rather than relying on $HOME.
 676
 677 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 678
 679         * scripts/features/conditionals: Test arguments to ifn?def which
 680         contain whitespace (such as a function that is evaluated).  Bug
 681         #7257.
 682
 683 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 684
 685         * scripts/features/order_only: Test order-only prerequisites in
 686         pattern rules (patch #2349).
 687
 688 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 689
 690         * scripts/functions/if: Test if on conditionals with trailing
 691         whitespace--bug #5798.
 692
 693         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 694
 695 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 696
 697         * scripts/features/patspecific_vars: Test multiple patterns
 698         matching the same target--Bug #1405.
 699
 700 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 701
 702         * run_make_tests.pl (set_more_defaults): A new $port_type of
 703         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 704         for OS/2.
 705
 706 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 707
 708         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 709         not prerequisites)--Bug #2515.
 710
 711 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 712
 713         * scripts/features/targetvars: Test very long target-specific
 714         variable definition lines (longer than the default make buffer
 715         length).  Tests patch # 1022.
 716
 717         * scripts/functions/eval: Test very recursive $(eval ...) calls
 718         with simple variable expansion (bug #2238).
 719
 720         * scripts/functions/word: Test error handling for word and
 721         wordlist functions (bug #2407).
 722
 723 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 724
 725         * scripts/functions/call: Test recursive argument masking (bug
 726         #1744).
 727
 728 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 729
 730         * scripts/functions/eval: Test using $(eval ...) inside
 731         conditionals (Bug #1516).
 732
 733 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 734
 735         * scripts/options/dash-t: Add a test for handling -t on targets
 736         with no commands (Bug #1418).
 737
 738 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 739
 740         * scripts/features/targetvars: Add a test for exporting
 741         target-specific vars (Bug #1391).
 742
 743 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 744
 745         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 746         and $${@F}.
 747
 748 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 749
 750         * scripts/features/escape: Test handling of escaped comment
 751         characters in targets and prerequisites.
 752
 753 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 754
 755         * scripts/features/export: Test export/unexport of multiple
 756         variables in a single command.
 757
 758 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 759
 760         * scripts/features/targetvars: Tests for Bug #940: test
 761         target-specific and pattern-specific variables in conjunction with
 762         double-colon targets.
 763
 764 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 765
 766         * test_driver.pl (compare_output): Match the new format for time
 767         skew error messages.
 768
 769         * scripts/features/export: Created.  Add tests for export/unexport
 770         capabilities, including exporting/unexporting expanded variables.
 771
 772         * scripts/features/conditionals: Add a test for expanded variables
 773         in ifdef conditionals.
 774
 775 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 776
 777         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 778         invocations.
 779         * scripts/features/vpathgpath: Ditto.
 780         * scripts/features/vpathplus: Ditto.
 781         * scripts/options/dash-n: Ditto.
 782         * scripts/targets/INTERMEDIATE: Ditto.
 783         * scripts/targets/SECONDARY: Ditto.
 784
 785         * scripts/options/dash-t: Added a test for the -t bug fixed by
 786         Henning Makholm.  This test was also contributed by Henning.
 787
 788         * scripts/misc/general4: Add a test suite for obscure algorithmic
 789         features of make.  First test: make sure creation subdirectories
 790         as prerequisites of targets works properly.
 791
 792         * scripts/misc/version: Remove this bogus test.
 793
 794 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 795
 796         * scripts/misc/general3: Add a test for makefiles that don't end
 797         in newlines.
 798
 799         * scripts/variables/special: Create tests for the special
 800         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 801         for now as it's not yet supported.
 802
 803 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 804
 805         * scripts/options/dash-B: Add a test for the new -B option.
 806
 807 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 808
 809         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 810         -valgrind option to the test suite.
 811         (set_more_defaults): Set up the file descriptor to capture
 812         Valgrind output.  We have to unset its close-on-exec flag; we
 813         hardcode the value for F_SETFD (2) rather than load it; hopefully
 814         this will help us avoid breaking the Windows/DOS test suite.
 815
 816 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 817
 818         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 819         $$(@F).
 820
 821         * test_driver.pl (utouch): Create a new function that creates a
 822         file with a specific timestamp offset.  Use of this function will
 823         let us avoid lots of annoying sleep() invocations in the tests
 824         just to get proper timestamping, which will make the tests run a
 825         lot faster.  So far it's only used in the automatic test suite.
 826
 827 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 828
 829         * scripts/variables/automatic: Create a test for automatic variables.
 830
 831 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 832
 833         * scripts/features/order_only: Test new order-only prerequisites.
 834
 835 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 836
 837         * scripts/functions/eval: Test new function.
 838         * scripts/functions/value: Test new function.
 839         * scripts/variables/MAKEFILE_LIST: Test new variable.
 840
 841 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 842
 843         * scripts/functions/call: New test: transitive closure
 844         implementation using $(call ...) to test variable recursion.
 845
 846 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 847
 848         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 849         directories in the script directories.
 850
 851 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 852
 853         * scripts/variables/flavors: Test define/endef scripts where only
 854         one of the command lines is quiet.
 855
 856 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 857
 858         * scripts/options/dash-q: New file; test the -q option.  Includes
 859         a test for PR/1780.
 860
 861 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 862
 863         * scripts/features/targetvars: Added a test for PR/1709: allowing
 864         semicolons in target-specific variable values.
 865
 866 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 867
 868         * scripts/functions/addsuffix: Test for an empty final argument.
 869         Actually this bug might have happened for any function, but this
 870         one was handy.
 871
 872 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 873
 874         * scripts/options/general: If parallel jobs are not supported,
 875         expect a warning message from Make.
 876
 877 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 878
 879         * scripts/options/general: Don't try -jN with N != 1 if parallel
 880         jobs are not supported.
 881
 882 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 883
 884         * scripts/options/general: Test general option processing (PR/1716).
 885
 886 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 887
 888         * scripts/functions/strip: Test empty value to strip (PR/1689).
 889
 890 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 891
 892         * scripts/features/reinvoke: Sleep before updating the target
 893         files in the first test, to ensure its time stamp really gets
 894         newer; otherwise Make might re-exec more than once.
 895
 896 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 897
 898         * scripts/features/double_colon: Don't run the parallel tests if
 899         parallel jobs aren't supported.
 900
 901 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 902
 903         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 904
 905 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 906
 907         * scripts/features/statipattrules: Test that static pattern rules
 908         whose prerequisite patterns resolve to empty strings throw an
 909         error (instead of dumping core).  Fixes PR/1670.
 910
 911         * scripts/features/reinvoke: Make more robust by touching "b"
 912         first, to ensure it's not newer than "a".
 913         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 914         * scripts/options/dash-n: Ditto.
 915
 916         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 917         recursive invocations of $(call ...) to break.  I can't come up
 918         with any way to get both working at the same time, so I backed out
 919         the fix to 1527 and added a test case for recursive calls.  This
 920         also tests the fix for PR/1610.
 921
 922         * scripts/features/double_colon: Test that circular dependencies
 923         in double-colon rule sets are detected correctly (PR/1671).
 924
 925 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 926
 927         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 928         .INTERMEDIATE files when given on the command line (PR/1669).
 929
 930 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 931
 932         * scripts/options/dash-k: Add a test for error detection by
 933         multiple targets depending on the same prerequisite with -k.
 934         For PR/1634.
 935
 936 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 937
 938         * scripts/features/escape: Add a test for backslash-escaped spaces
 939         in a target name (PR/1586).
 940
 941 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 942
 943         * scripts/features/patspecific_vars: Add a test for pattern-specific
 944         target variables inherited from the parent target (PR/1407).
 945
 946 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 947
 948         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 949         to make sure sorting order, etc. is predictable.
 950         Reported by Andreas Jaeger <aj@suse.de>.
 951
 952         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 953         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 954         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 955         1 for other systems.
 956         * scripts/features/vpathplus (touchfiles): Use the $wtime value
 957         instead of hardcoding 2.
 958         * scripts/targets/SECONDARY: Ditto.
 959         * scripts/targets/INTERMEDIATE: Ditto.
 960
 961 2000-01-27  Paul D. Smith  <psmith@gnu.org>
 962
 963         * test_driver.pl (toplevel): Don't try to run test scripts which
 964         are really directories.
 965
 966 2000-01-23  Paul D. Smith  <psmith@gnu.org>
 967
 968         * scripts/features/include: Remove a check; the fix caused more
 969         problems than the error, so I removed it and removed the test for
 970         it.
 971
 972 2000-01-11  Paul D. Smith  <psmith@gnu.org>
 973
 974         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
 975         sure $(call ...) doesn't eval its arguments and that you can
 976         invoke foreach from it without looping forever.
 977
 978 1999-12-15  Paul D. Smith  <psmith@gnu.org>
 979
 980         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
 981         .INTERMEDIATE settings on files don't disable them as implicit
 982         intermediate possibilities.
 983
 984 1999-12-01  Paul D. Smith  <psmith@gnu.org>
 985
 986         * scripts/features/double_colon: Add a test for PR/1476: Try
 987         double-colon rules as non-goal targets and during parallel builds
 988         to make sure they're handled serially.
 989
 990 1999-11-17  Paul D. Smith  <psmith@gnu.org>
 991
 992         * scripts/functions/if: Add a test for PR/1429: put some text
 993         after an if-statement to make sure it works.
 994
 995         * scripts/features/targetvars: Add a test for PR/1380: handling +=
 996         in target-specific variable definitions correctly.
 997
 998 1999-10-15  Paul D. Smith  <psmith@gnu.org>
 999
1000         * scripts/variables/MAKEFILES: This was really broken: it didn't
1001         test anything at all, really.  Rewrote it, plus added a test for
1002         PR/1394.
1003
1004 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1005
1006         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1007         behave properly when used with recursive targets".
1008
1009 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1010
1011         * scripts/features/targetvars: Add a check for PR/1378:
1012         "Target-specific vars don't inherit correctly"
1013
1014 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1015
1016         * test_driver.pl (get_osname): Change $fancy_file_names to
1017         $short_filenames and reverse the logic.
1018         (run_each_test): Change test of non-existent $port_host to use
1019         $short_filenames--problem reported by Eli Zaretskii.
1020
1021 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1022
1023         * scripts/features/parallelism: Add a check to ensure that the
1024         jobserver works when we re-invoke.  Also cleaned up the tests a
1025         little, reducing the number of rules we use so the test won't need
1026         as many "sleep" commands.
1027
1028 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1029
1030         * scripts/features/reinvoke: Remove invocations of "touch" in
1031         makefiles.  See the comments on the touch function rewrite below.
1032         Note that UNIX touch behaves the same way if the file already
1033         exists: it sets the time to the _local_ time.  We don't want
1034         this.  This is probably a good tip for makefile writers in
1035         general, actually... where practical.
1036         * scripts/options/dash-l: Ditto.
1037         * scripts/options/dash-n: Ditto.
1038
1039         * test_driver.pl (run_each_test): In retrospect, I don't like the
1040         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1041         changed it back to use .log, .base, and .diff.
1042
1043         * run_make_tests.pl (set_more_defaults): Move the check for the
1044         make pathname to here from set_defaults (that's too early since it
1045         happens before the command line processing).
1046         Create a new variable $port_type, calculated from $osname, to
1047         specify what kind of system we're running on.  We should integrate
1048         the VOS stuff here, too.
1049         (valid_option): Comment out the workdir/-work stuff so people
1050         won't be fooled into thinking it works... someone needs to fix
1051         this, though!
1052
1053         * scripts/functions/origin: Use $port_type instead of $osname.
1054         * scripts/functions/foreach: Ditto.
1055         * scripts/features/default_names: Ditto.
1056
1057 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1058
1059         * test_driver.pl (touch): Rewrite this function.  Previously it
1060         used to use utime() to hard-set the time based on the current
1061         local clock, or, if the file didn't exist, it merely created it.
1062         This mirrors exactly what real UNIX touch does, but it fails badly
1063         on networked filesystems where the FS server clock is skewed from
1064         the local clock: normally modifying a file causes it to get a mod
1065         time based on the _server's_ clock.  Hard-setting it based on the
1066         _local_ clock causes gratuitous errors and makes the tests
1067         unreliable except on local filesystems.  The new function will
1068         simply modify the file, allowing the filesystem to set the mod
1069         time as it sees fit.
1070
1071         * scripts/features/parallelism: The second test output could
1072         change depending on how fast some scripts completed; use "sleep"
1073         to force the order we want.
1074
1075         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1076         means that "%ENV = ();" doesn't do the right thing.  This worked
1077         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1078         the environment rather than require specific versions.
1079
1080         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1081         modifier "s", so the tests will run with Perl 4.
1082         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1083         option in PURIFYOPTIONS.
1084         (setup_for_test): Don't remove any logs unless $pure_log is set.
1085
1086 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1087
1088         * scripts/features/reinvoke: Put the SHELL definition in the right
1089         test makefile.
1090
1091 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1092
1093         ChangeLog file for the test suite created.
1094 \f
1095
1096 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1097 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1098 This file is part of GNU Make.
1099
1100 GNU Make is free software; you can redistribute it and/or modify it under the
1101 terms of the GNU General Public License as published by the Free Software
1102 Foundation; either version 3 of the License, or (at your option) any later
1103 version.
1104
1105 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1106 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1107 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1108
1109 You should have received a copy of the GNU General Public License along with
1110 this program.  If not, see <http://www.gnu.org/licenses/>.