tests/ChangeLog

   1 2009-05-25  Paul Smith  <psmith@gnu.org>
   2
   3         * scripts/features/export: Test new variable parsing abilities.
   4
   5 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
   6
   7         * scripts/variables/private: Create a new suite of tests for 'private'.
   8
   9 2007-11-04  Paul Smith  <psmith@gnu.org>
  10
  11         * scripts/functions/eval: Update error message for command -> recipe.
  12
  13         * test_driver.pl (compare_output): Allow the answer to be a regex,
  14         if surrounded by '/'.
  15         * scripts/misc/close_stdout: Use a regex for the answer, since
  16         sometimes the error will have a description and sometimes it won't.
  17
  18 2007-09-10  Paul Smith  <psmith@gnu.org>
  19
  20         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
  21
  22 2007-08-15  Paul Smith  <psmith@gnu.org>
  23
  24         These test cases were contributed by
  25         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
  26         Savannah bugs #3330 and #15919.
  27
  28         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
  29         15919.
  30
  31         * scripts/features/parallelism: Add tests for wrong answer/hang
  32         combining INTERMEDIATE, order-only prereqs, and parallelism.
  33         See Savannah bugs 3330 and 15919.
  34
  35 2007-07-13  Paul Smith  <psmith@gnu.org>
  36
  37         Install a timeout so tests can never loop infinitely.
  38         Original idea and patch for a single-test version provided by
  39         Icarus Sparry <savannah@icarus.freeuk.com>
  40
  41         * test_driver.pl (_run_command): New function: this is called by
  42         other functions to actually run a command.  Before we run it,
  43         install a SIGALRM handler and set up a timer to go off in the
  44         future (default is 5s; this can be overridden by individual tests).
  45         (run_command): Call it.
  46         (run_command_with_output): Call it.
  47
  48         * run_make_tests.pl (run_make_with_options): Override the default
  49         timeout if the caller requests it.
  50         (run_make_test): Pass any timeout override to run_make_with_options.
  51
  52         * scripts/features/parallelism: Increase the timeout for long tests.
  53         * scripts/options/dash-l: Ditto.
  54
  55 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
  56
  57         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
  58         ENV here.  This doesn't always work.
  59         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
  60         environment.  Fixes Savannah bug #16698.
  61
  62 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
  63
  64         * scripts/variables/automatic: Add back the test for bug #8154.
  65
  66 2006-04-01  Paul D. Smith  <psmith@gnu.org>
  67
  68         * scripts/functions/realpath: Don't run tests with multiple
  69         initial slashes on Windows: those paths mean something different.
  70
  71 2006-03-19  Paul D. Smith  <psmith@gnu.org>
  72
  73         * scripts/features/parallelism: Test that the jobserver is
  74         properly managed when we have to re-exec the master instance of
  75         make.
  76
  77 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
  78
  79         * scripts/features/statipattrules: Add tests for bug #16053.
  80
  81 2006-03-09  Paul Smith  <psmith@gnu.org>
  82
  83         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
  84         with DOS drive letters.  Fixes Savannah bug #15947.
  85
  86         * test_driver.pl (run_each_test): Set the status properly even
  87         when a test fails to execute.  Fixes Savannah bug #15942.
  88
  89         * scripts/functions/foreach: Use a different environment variable
  90         other than PATH to avoid differences with Windows platforms.
  91         Fixes Savannah bug #15938.
  92
  93 2006-03-05  Paul D. Smith  <psmith@gnu.org>
  94
  95         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
  96         type W32.  Fixed Savannah bug #15937.
  97
  98         * scripts/features/default_names: Don't call error() when the test
  99         fails.  Fixes Savannah bug #15941.
 100
 101 2006-02-17  Paul D. Smith  <psmith@gnu.org>
 102
 103         * scripts/features/targetvars: Test a complex construction which
 104         guarantees that we have to merge variable lists of different
 105         sizes.  Tests for Savannah bug #15757.
 106
 107 2006-02-15  Paul D. Smith  <psmith@gnu.org>
 108
 109         * scripts/functions/error: Make sure filename/lineno information
 110         is related to where the error is expanded, not where it's set.
 111         * scripts/functions/warning: Ditto.
 112         * scripts/functions/foreach: Check for different error conditions.
 113         * scripts/functions/word: Ditto.
 114         * scripts/variables/negative: Test some variable reference failure
 115         conditions.
 116         * scripts/options/warn-undefined-variables: Test the
 117         --warn-undefined-variables flag.
 118
 119 2006-02-09  Paul D. Smith  <psmith@gnu.org>
 120
 121         * run_make_tests.pl (set_more_defaults): Update valgrind support
 122         for newer versions.
 123         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
 124         beginning with ".").
 125
 126         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
 127         functions.
 128
 129 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
 130
 131         * scripts/features/parallelism: Add a test for bug #15641.
 132
 133 2006-02-06  Paul D. Smith  <psmith@gnu.org>
 134
 135         * scripts/options/dash-W: Add a test for bug #15341.
 136
 137 2006-01-03  Paul D. Smith  <psmith@gnu.org>
 138
 139         * scripts/variables/automatic: Add a test for bug #8154.
 140
 141         * README: Update to reflect the current state of the test suite.
 142
 143 2005-12-12  Paul D. Smith  <psmith@gnu.org>
 144
 145         * scripts/features/parallelism, scripts/functions/wildcard,
 146         scripts/targets/FORCE, scripts/targets/PHONY,
 147         scripts/targets/SILENT: Use the default setting for
 148         $delete_command.  Fixes bug #15085.
 149
 150         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
 151
 152 2005-12-11  Paul D. Smith  <psmith@gnu.org>
 153
 154         * scripts/misc/general4: Test implicit rules with '$' in the
 155         prereq list & prereq patterns.
 156         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
 157
 158 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
 159
 160         * scripts/features/patternrules: Add a test for bug #13022.
 161
 162 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
 163
 164         * scripts/features/double_colon: Add a test for bug #14334.
 165
 166 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
 167
 168         * scripts/functions/flavor: Add a test for the flavor function.
 169
 170 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
 171
 172         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
 173         special variable.
 174
 175 2005-10-24  Paul D. Smith  <psmith@gnu.org>
 176
 177         * scripts/misc/general4: Test '$$' in prerequisites list.
 178         * scripts/features/statipattrules: Rewrite to use run_make_test().
 179         Add various static pattern info.
 180         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
 181         * scripts/features/se_explicit: Add tests for handling '$$' in
 182         prerequisite lists with and without setting .SECONDEXPANSION.
 183         * scripts/features/order_only: Convert to run_make_test().
 184         * run_make_tests.pl (set_more_defaults): If we can't get the value
 185         of $(MAKE) from make, then fatal immediately.
 186
 187 2005-08-31  Paul D. Smith  <psmith@gnu.org>
 188
 189         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
 190         an eval to trap errors) and if it exists, use POSIX::getcwd to
 191         find the working directory.  If it doesn't exist, go back to the
 192         previous methods.  This tries to be more accurate on Windows
 193         systems.
 194
 195 2005-08-29  Paul D. Smith  <psmith@gnu.org>
 196
 197         * scripts/functions/abspath: Add some text to the error messages
 198         to get a better idea of what's wrong.  Make warnings instead of
 199         errors.
 200
 201         * scripts/features/patspecific_vars: Don't use "test", which is
 202         UNIX specific.  Print the values and let the test script match
 203         them.
 204
 205 2005-08-25  Paul Smith  <psmith@gnu.org>
 206
 207         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
 208         former works better with non-UNIX environments.  Fixes Savannah
 209         bug #14129.
 210
 211 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
 212
 213         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
 214         $(sort) so that the resulting order is no longer filesystem-
 215         dependant.
 216
 217 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
 218
 219         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
 220
 221 2005-08-07  Paul D. Smith  <psmith@gnu.org>
 222
 223         * scripts/features/parallelism: Add a test for a bug reported by
 224         Michael Matz (matz@suse.de) in which make exits without waiting
 225         for all its children in some situations during parallel builds.
 226
 227 2005-07-08  Paul D. Smith  <psmith@gnu.org>
 228
 229         * test_driver.pl: Reset the environment to a clean value every
 230         time before we invoke make.  I'm suspicious that the environment
 231         isn't handled the same way in Windows as it is in UNIX, and some
 232         variables are leaking out beyond the tests they are intended for.
 233         Create an %extraENV hash tests can set to add more env. vars.
 234         * tests/scripts/features/export: Change to use %extraENV.
 235         * tests/scripts/functions/eval: Ditto.
 236         * tests/scripts/functions/origin: Ditto.
 237         * tests/scripts/options/dash-e: Ditto.
 238         * tests/scripts/variables/SHELL: Ditto.
 239
 240 2005-06-27  Paul D. Smith  <psmith@gnu.org>
 241
 242         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
 243         files.
 244         * scripts/features/reinvoke: Rewrite to be safer on systems with
 245         subsecond timestamps.
 246         * scripts/features/patternrules: False exits with different error
 247         codes on different systems (for example, Linux => 1, Solaris => 255).
 248
 249         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
 250         to be sure it will be considered updated when it's remade.
 251
 252 2005-06-26  Paul D. Smith  <psmith@gnu.org>
 253
 254         * scripts/functions/shell: New test suite for the shell function.
 255
 256 2005-06-25  Paul D. Smith  <psmith@gnu.org>
 257
 258         * scripts/features/include: Test include/-include/sinclude with no
 259         arguments.  Tests fix for Savannah bug #1761.
 260
 261         * scripts/misc/general3: Implement comprehensive testing of
 262         backslash-newline behavior in command scripts: various types of
 263         quoting, fast path / slow path, etc.
 264         Tests fix for Savannah bug #1332.
 265
 266         * scripts/options/symlinks: Test symlinks to non-existent files.
 267         Tests fix for Savannah bug #13280.
 268
 269         * scripts/misc/general3: Test semicolons in variable references.
 270         Tests fix for Savannah bug #1454.
 271
 272         * scripts/variables/MAKE_RESTARTS: New file: test the
 273         MAKE_RESTARTS variable.
 274         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
 275         Tests fix for Savannah bug #7566.
 276         * scripts/options/dash-W: New file: test the -W flag, including
 277         re-exec infinite looping.
 278
 279 2005-06-12  Paul D. Smith  <psmith@gnu.org>
 280
 281         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
 282         This test only works on systems that have /dev/full (e.g., Linux).
 283
 284 2005-06-09  Paul D. Smith  <psmith@gnu.org>
 285
 286         * scripts/functions/foreach: Add a test for Savannah bug #11913.
 287
 288 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
 289
 290         * scripts/features/include: Add a test for Savannah bug #13216.
 291         * scripts/features/patternrules: Add a test for Savannah bug #13218.
 292
 293 2005-05-13  Paul D. Smith  <psmith@gnu.org>
 294
 295         * scripts/features/conditionals: Add tests for the new if... else
 296         if... endif syntax.
 297
 298 2005-05-03  Paul D. Smith  <psmith@gnu.org>
 299
 300         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
 301         DEFAULT_GOAL.
 302
 303 2005-05-02  Paul D. Smith  <psmith@gnu.org>
 304
 305         * scripts/features/parallelism: Add a test for exporting recursive
 306         variables containing $(shell ) calls.  Rewrite this script to use
 307         run_make_test() everywhere.
 308
 309 2005-04-07  Paul D. Smith  <psmith@gnu.org>
 310
 311         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
 312
 313 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
 314
 315         * scripts/variables/automatic: Add a test for Savannah bug #12320.
 316
 317 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
 318
 319         * scripts/features/patternrules: Add a test for Savannah bug #12267.
 320
 321 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
 322
 323         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
 324         bug #12266.
 325
 326 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
 327
 328         * scripts/features/patternrules: Add a test for Savannah bug #12202.
 329
 330 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
 331
 332         * scripts/features/se_implicit: Add a test for stem
 333         termination bug. Add a test for stem triple-expansion bug.
 334
 335         * scripts/features/se_statpat: Add a test for stem
 336         triple-expansion bug.
 337
 338         * scripts/features/statipattrules: Change test #4 to reflect
 339         new way empty prerequisite list is handled.
 340
 341
 342 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
 343
 344         * scripts/features/statipattrules: Add a test for
 345         Savannah bug #12180.
 346
 347 2005-02-28  Paul D. Smith  <psmith@gnu.org>
 348
 349         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
 350
 351         * scripts/options/symlinks: New file to test checking of symlink
 352         timestamps.  Can't use filename dash-L because it conflicts with
 353         dash-l on case-insensitive filesystems.
 354
 355         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
 356         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
 357         unique filenames.
 358
 359 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
 360
 361         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
 362         special variable.
 363
 364 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
 365
 366         * scripts/features/se_explicit: Test the second expansion in
 367         explicit rules.
 368         * scripts/features/se_implicit: Test the second expansion in
 369         implicit rules.
 370         * scripts/features/se_statpat: Test the second expansion in
 371         static pattern rules.
 372         * scripts/variables/automatic: Fix to work with the second
 373         expansion.
 374
 375         * scripts/misc/general4: Add a test for bug #12091.
 376
 377 2005-02-27  Paul D. Smith  <psmith@gnu.org>
 378
 379         * scripts/functions/eval: Check that eval of targets within
 380         command scripts fails.  See Savannah bug # 12124.
 381
 382 2005-02-26  Paul D. Smith  <psmith@gnu.org>
 383
 384         * test_driver.pl (compare_output): If a basic comparison of the
 385         log and answer doesn't match, try harder: change all backslashes
 386         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
 387
 388 2005-02-09  Paul D. Smith  <psmith@gnu.org>
 389
 390         * scripts/features/recursion: Test command line variable settings:
 391         only one instance of a given variable should be provided.
 392
 393 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
 394
 395         * tests/scripts/functions/abspath: New file: test `abspath'
 396         built-in function.
 397
 398         * tests/scripts/functions/realpath: New file: test `realpath'
 399         built-in function.
 400
 401 2004-11-28  Paul D. Smith  <psmith@gnu.org>
 402
 403         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
 404         this doesn't really test anything useful in UNIX but...
 405
 406         * scripts/variables/SHELL: New file: test proper handling of SHELL
 407         according to POSIX rules.  Fixes bug #1276.
 408
 409 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
 410
 411         * scripts/functions/word: Test $(firstword ) and $(lastword ).
 412
 413 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
 414
 415         * scripts/features/patspecific_vars: Test simple/recursive
 416         variable expansion.
 417
 418 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
 419
 420         * scripts/features/include: Test dontcare flag inheritance
 421         when rebuilding makefiles.
 422
 423 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
 424
 425         * scripts/features/patspecific_vars: Test exported variables.
 426
 427 2004-09-22  Paul D. Smith  <psmith@gnu.org>
 428
 429         * run_make_tests.pl (run_make_test): Don't add newlines to the
 430         makestring or answer if they are completely empty.
 431
 432         * scripts/features/patternrules: Rename from implicit_prereq_eval.
 433
 434         * scripts/test_template: Rework the template.
 435
 436 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
 437
 438         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
 439         `#!/usr/bin/env perl'.
 440
 441         * scripts/features/implicit_prereq_eval: Test implicit rule
 442         prerequisite evaluation code.
 443
 444 2004-09-21  Paul D. Smith  <psmith@gnu.org>
 445
 446         * run_make_tests.pl (run_make_test): Enhance to allow the make
 447         string to be undef: in that case it reuses the previous make
 448         string.  Allows multiple tests on the same makefile.
 449
 450         * scripts/variables/flavors: Add some tests for prefix characters
 451         interacting with define/endef variables.
 452
 453 2004-09-20  Paul D. Smith  <psmith@gnu.org>
 454
 455         * scripts/functions/substitution: Rewrite to use run_make_test()
 456         interface, and add test for substitution failures reported by
 457         Markus Mauhart <qwe123@chello.at>.
 458
 459 2004-03-22  Paul D. Smith  <psmith@gnu.org>
 460
 461         * test_driver.pl (run_each_test, toplevel, compare_output): Change
 462         to track both the testing categories _AND_ the number of
 463         individual tests, and report both sets of numbers.
 464
 465 2004-02-21  Paul D. Smith  <psmith@gnu.org>
 466
 467         * scripts/functions/origin: Set our own environment variable
 468         rather than relying on $HOME.
 469
 470 2004-01-21  Paul D. Smith  <psmith@gnu.org>
 471
 472         * scripts/features/conditionals: Test arguments to ifn?def which
 473         contain whitespace (such as a function that is evaluated).  Bug
 474         #7257.
 475
 476 2004-01-07  Paul D. Smith  <psmith@gnu.org>
 477
 478         * scripts/features/order_only: Test order-only prerequisites in
 479         pattern rules (patch #2349).
 480
 481 2003-11-02  Paul D. Smith  <psmith@gnu.org>
 482
 483         * scripts/functions/if: Test if on conditionals with trailing
 484         whitespace--bug #5798.
 485
 486         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
 487
 488 2003-04-19  Paul D. Smith  <psmith@gnu.org>
 489
 490         * scripts/features/patspecific_vars: Test multiple patterns
 491         matching the same target--Bug #1405.
 492
 493 2003-04-09  Paul D. Smith  <psmith@gnu.org>
 494
 495         * run_make_tests.pl (set_more_defaults): A new $port_type of
 496         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
 497         for OS/2.
 498
 499 2003-03-28  Paul D. Smith  <psmith@gnu.org>
 500
 501         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
 502         not prerequisites)--Bug #2515.
 503
 504 2003-01-30  Paul D. Smith  <psmith@gnu.org>
 505
 506         * scripts/features/targetvars: Test very long target-specific
 507         variable definition lines (longer than the default make buffer
 508         length).  Tests patch # 1022.
 509
 510         * scripts/functions/eval: Test very recursive $(eval ...) calls
 511         with simple variable expansion (bug #2238).
 512
 513         * scripts/functions/word: Test error handling for word and
 514         wordlist functions (bug #2407).
 515
 516 2003-01-22  Paul D. Smith  <psmith@gnu.org>
 517
 518         * scripts/functions/call: Test recursive argument masking (bug
 519         #1744).
 520
 521 2002-10-25  Paul D. Smith  <psmith@gnu.org>
 522
 523         * scripts/functions/eval: Test using $(eval ...) inside
 524         conditionals (Bug #1516).
 525
 526 2002-10-14  Paul D. Smith  <psmith@gnu.org>
 527
 528         * scripts/options/dash-t: Add a test for handling -t on targets
 529         with no commands (Bug #1418).
 530
 531 2002-10-13  Paul D. Smith  <psmith@gnu.org>
 532
 533         * scripts/features/targetvars: Add a test for exporting
 534         target-specific vars (Bug #1391).
 535
 536 2002-10-05  Paul D. Smith  <psmith@gnu.org>
 537
 538         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
 539         and $${@F}.
 540
 541 2002-09-23  Paul D. Smith  <psmith@gnu.org>
 542
 543         * scripts/features/escape: Test handling of escaped comment
 544         characters in targets and prerequisites.
 545
 546 2002-09-18  Paul D. Smith  <psmith@gnu.org>
 547
 548         * scripts/features/export: Test export/unexport of multiple
 549         variables in a single command.
 550
 551 2002-09-17  Paul D. Smith  <psmith@gnu.org>
 552
 553         * scripts/features/targetvars: Tests for Bug #940: test
 554         target-specific and pattern-specific variables in conjunction with
 555         double-colon targets.
 556
 557 2002-09-10  Paul D. Smith  <psmith@gnu.org>
 558
 559         * test_driver.pl (compare_output): Match the new format for time
 560         skew error messages.
 561
 562         * scripts/features/export: Created.  Add tests for export/unexport
 563         capabilities, including exporting/unexporting expanded variables.
 564
 565         * scripts/features/conditionals: Add a test for expanded variables
 566         in ifdef conditionals.
 567
 568 2002-09-04  Paul D. Smith  <psmith@gnu.org>
 569
 570         * scripts/features/reinvoke: Change touch/sleep combos to utouch
 571         invocations.
 572         * scripts/features/vpathgpath: Ditto.
 573         * scripts/features/vpathplus: Ditto.
 574         * scripts/options/dash-n: Ditto.
 575         * scripts/targets/INTERMEDIATE: Ditto.
 576         * scripts/targets/SECONDARY: Ditto.
 577
 578         * scripts/options/dash-t: Added a test for the -t bug fixed by
 579         Henning Makholm.  This test was also contributed by Henning.
 580
 581         * scripts/misc/general4: Add a test suite for obscure algorithmic
 582         features of make.  First test: make sure creation subdirectories
 583         as prerequisites of targets works properly.
 584
 585         * scripts/misc/version: Remove this bogus test.
 586
 587 2002-08-07  Paul D. Smith  <psmith@gnu.org>
 588
 589         * scripts/misc/general3: Add a test for makefiles that don't end
 590         in newlines.
 591
 592         * scripts/variables/special: Create tests for the special
 593         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
 594         for now as it's not yet supported.
 595
 596 2002-08-01  Paul D. Smith  <psmith@gnu.org>
 597
 598         * scripts/options/dash-B: Add a test for the new -B option.
 599
 600 2002-07-11  Paul D. Smith  <psmith@gnu.org>
 601
 602         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
 603         -valgrind option to the test suite.
 604         (set_more_defaults): Set up the file descriptor to capture
 605         Valgrind output.  We have to unset its close-on-exec flag; we
 606         hardcode the value for F_SETFD (2) rather than load it; hopefully
 607         this will help us avoid breaking the Windows/DOS test suite.
 608
 609 2002-07-10  Paul D. Smith  <psmith@gnu.org>
 610
 611         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
 612         $$(@F).
 613
 614         * test_driver.pl (utouch): Create a new function that creates a
 615         file with a specific timestamp offset.  Use of this function will
 616         let us avoid lots of annoying sleep() invocations in the tests
 617         just to get proper timestamping, which will make the tests run a
 618         lot faster.  So far it's only used in the automatic test suite.
 619
 620 2002-07-09  Paul D. Smith  <psmith@gnu.org>
 621
 622         * scripts/variables/automatic: Create a test for automatic variables.
 623
 624 2002-07-08  Paul D. Smith  <psmith@gnu.org>
 625
 626         * scripts/features/order_only: Test new order-only prerequisites.
 627
 628 2002-07-07  Paul D. Smith  <psmith@gnu.org>
 629
 630         * scripts/functions/eval: Test new function.
 631         * scripts/functions/value: Test new function.
 632         * scripts/variables/MAKEFILE_LIST: Test new variable.
 633
 634 2002-04-28  Paul D. Smith  <psmith@gnu.org>
 635
 636         * scripts/functions/call: New test: transitive closure
 637         implementation using $(call ...) to test variable recursion.
 638
 639 2002-04-21  Paul D. Smith  <psmith@gnu.org>
 640
 641         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
 642         directories in the script directories.
 643
 644 2001-05-02  Paul D. Smith  <psmith@gnu.org>
 645
 646         * scripts/variables/flavors: Test define/endef scripts where only
 647         one of the command lines is quiet.
 648
 649 2000-06-22  Paul D. Smith  <psmith@gnu.org>
 650
 651         * scripts/options/dash-q: New file; test the -q option.  Includes
 652         a test for PR/1780.
 653
 654 2000-06-21  Paul D. Smith  <psmith@gnu.org>
 655
 656         * scripts/features/targetvars: Added a test for PR/1709: allowing
 657         semicolons in target-specific variable values.
 658
 659 2000-06-19  Paul D. Smith  <psmith@gnu.org>
 660
 661         * scripts/functions/addsuffix: Test for an empty final argument.
 662         Actually this bug might have happened for any function, but this
 663         one was handy.
 664
 665 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
 666
 667         * scripts/options/general: If parallel jobs are not supported,
 668         expect a warning message from Make.
 669
 670 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
 671
 672         * scripts/options/general: Don't try -jN with N != 1 if parallel
 673         jobs are not supported.
 674
 675 2000-05-24  Paul D. Smith  <psmith@gnu.org>
 676
 677         * scripts/options/general: Test general option processing (PR/1716).
 678
 679 2000-04-11  Paul D. Smith  <psmith@gnu.org>
 680
 681         * scripts/functions/strip: Test empty value to strip (PR/1689).
 682
 683 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
 684
 685         * scripts/features/reinvoke: Sleep before updating the target
 686         files in the first test, to ensure its time stamp really gets
 687         newer; otherwise Make might re-exec more than once.
 688
 689 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
 690
 691         * scripts/features/double_colon: Don't run the parallel tests if
 692         parallel jobs aren't supported.
 693
 694 2000-04-04  Paul D. Smith  <psmith@gnu.org>
 695
 696         * scripts/functions/word: wordlist doesn't swap arguments anymore.
 697
 698 2000-03-27  Paul D. Smith  <psmith@gnu.org>
 699
 700         * scripts/features/statipattrules: Test that static pattern rules
 701         whose prerequisite patterns resolve to empty strings throw an
 702         error (instead of dumping core).  Fixes PR/1670.
 703
 704         * scripts/features/reinvoke: Make more robust by touching "b"
 705         first, to ensure it's not newer than "a".
 706         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
 707         * scripts/options/dash-n: Ditto.
 708
 709         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
 710         recursive invocations of $(call ...) to break.  I can't come up
 711         with any way to get both working at the same time, so I backed out
 712         the fix to 1527 and added a test case for recursive calls.  This
 713         also tests the fix for PR/1610.
 714
 715         * scripts/features/double_colon: Test that circular dependencies
 716         in double-colon rule sets are detected correctly (PR/1671).
 717
 718 2000-03-26  Paul D. Smith  <psmith@gnu.org>
 719
 720         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
 721         .INTERMEDIATE files when given on the command line (PR/1669).
 722
 723 2000-03-08  Paul D. Smith  <psmith@gnu.org>
 724
 725         * scripts/options/dash-k: Add a test for error detection by
 726         multiple targets depending on the same prerequisite with -k.
 727         For PR/1634.
 728
 729 2000-02-07  Paul D. Smith  <psmith@gnu.org>
 730
 731         * scripts/features/escape: Add a test for backslash-escaped spaces
 732         in a target name (PR/1586).
 733
 734 2000-02-04  Paul D. Smith  <psmith@gnu.org>
 735
 736         * scripts/features/patspecific_vars: Add a test for pattern-specific
 737         target variables inherited from the parent target (PR/1407).
 738
 739 2000-02-02  Paul D. Smith  <psmith@gnu.org>
 740
 741         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
 742         to make sure sorting order, etc. is predictable.
 743         Reported by Andreas Jaeger <aj@suse.de>.
 744
 745         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
 746         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
 747         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
 748         1 for other systems.
 749         * scripts/features/vpathplus (touchfiles): Use the $wtime value
 750         instead of hardcoding 2.
 751         * scripts/targets/SECONDARY: Ditto.
 752         * scripts/targets/INTERMEDIATE: Ditto.
 753
 754 2000-01-27  Paul D. Smith  <psmith@gnu.org>
 755
 756         * test_driver.pl (toplevel): Don't try to run test scripts which
 757         are really directories.
 758
 759 2000-01-23  Paul D. Smith  <psmith@gnu.org>
 760
 761         * scripts/features/include: Remove a check; the fix caused more
 762         problems than the error, so I removed it and removed the test for
 763         it.
 764
 765 2000-01-11  Paul D. Smith  <psmith@gnu.org>
 766
 767         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
 768         sure $(call ...) doesn't eval its arguments and that you can
 769         invoke foreach from it without looping forever.
 770
 771 1999-12-15  Paul D. Smith  <psmith@gnu.org>
 772
 773         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
 774         .INTERMEDIATE settings on files don't disable them as implicit
 775         intermediate possibilities.
 776
 777 1999-12-01  Paul D. Smith  <psmith@gnu.org>
 778
 779         * scripts/features/double_colon: Add a test for PR/1476: Try
 780         double-colon rules as non-goal targets and during parallel builds
 781         to make sure they're handled serially.
 782
 783 1999-11-17  Paul D. Smith  <psmith@gnu.org>
 784
 785         * scripts/functions/if: Add a test for PR/1429: put some text
 786         after an if-statement to make sure it works.
 787
 788         * scripts/features/targetvars: Add a test for PR/1380: handling +=
 789         in target-specific variable definitions correctly.
 790
 791 1999-10-15  Paul D. Smith  <psmith@gnu.org>
 792
 793         * scripts/variables/MAKEFILES: This was really broken: it didn't
 794         test anything at all, really.  Rewrote it, plus added a test for
 795         PR/1394.
 796
 797 1999-10-13  Paul D. Smith  <psmith@gnu.org>
 798
 799         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
 800         behave properly when used with recursive targets".
 801
 802 1999-10-08  Paul D. Smith  <psmith@gnu.org>
 803
 804         * scripts/features/targetvars: Add a check for PR/1378:
 805         "Target-specific vars don't inherit correctly"
 806
 807 1999-09-29  Paul D. Smith  <psmith@gnu.org>
 808
 809         * test_driver.pl (get_osname): Change $fancy_file_names to
 810         $short_filenames and reverse the logic.
 811         (run_each_test): Change test of non-existent $port_host to use
 812         $short_filenames--problem reported by Eli Zaretskii.
 813
 814 1999-09-23  Paul D. Smith  <psmith@gnu.org>
 815
 816         * scripts/features/parallelism: Add a check to ensure that the
 817         jobserver works when we re-invoke.  Also cleaned up the tests a
 818         little, reducing the number of rules we use so the test won't need
 819         as many "sleep" commands.
 820
 821 1999-09-16  Paul D. Smith  <psmith@gnu.org>
 822
 823         * scripts/features/reinvoke: Remove invocations of "touch" in
 824         makefiles.  See the comments on the touch function rewrite below.
 825         Note that UNIX touch behaves the same way if the file already
 826         exists: it sets the time to the _local_ time.  We don't want
 827         this.  This is probably a good tip for makefile writers in
 828         general, actually... where practical.
 829         * scripts/options/dash-l: Ditto.
 830         * scripts/options/dash-n: Ditto.
 831
 832         * test_driver.pl (run_each_test): In retrospect, I don't like the
 833         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
 834         changed it back to use .log, .base, and .diff.
 835
 836         * run_make_tests.pl (set_more_defaults): Move the check for the
 837         make pathname to here from set_defaults (that's too early since it
 838         happens before the command line processing).
 839         Create a new variable $port_type, calculated from $osname, to
 840         specify what kind of system we're running on.  We should integrate
 841         the VOS stuff here, too.
 842         (valid_option): Comment out the workdir/-work stuff so people
 843         won't be fooled into thinking it works... someone needs to fix
 844         this, though!
 845
 846         * scripts/functions/origin: Use $port_type instead of $osname.
 847         * scripts/functions/foreach: Ditto.
 848         * scripts/features/default_names: Ditto.
 849
 850 1999-09-15  Paul D. Smith  <psmith@gnu.org>
 851
 852         * test_driver.pl (touch): Rewrite this function.  Previously it
 853         used to use utime() to hard-set the time based on the current
 854         local clock, or, if the file didn't exist, it merely created it.
 855         This mirrors exactly what real UNIX touch does, but it fails badly
 856         on networked filesystems where the FS server clock is skewed from
 857         the local clock: normally modifying a file causes it to get a mod
 858         time based on the _server's_ clock.  Hard-setting it based on the
 859         _local_ clock causes gratuitous errors and makes the tests
 860         unreliable except on local filesystems.  The new function will
 861         simply modify the file, allowing the filesystem to set the mod
 862         time as it sees fit.
 863
 864         * scripts/features/parallelism: The second test output could
 865         change depending on how fast some scripts completed; use "sleep"
 866         to force the order we want.
 867
 868         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
 869         means that "%ENV = ();" doesn't do the right thing.  This worked
 870         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
 871         the environment rather than require specific versions.
 872
 873         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
 874         modifier "s", so the tests will run with Perl 4.
 875         (set_more_defaults): Set $pure_log to empty if there's no -logfile
 876         option in PURIFYOPTIONS.
 877         (setup_for_test): Don't remove any logs unless $pure_log is set.
 878
 879 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
 880
 881         * scripts/features/reinvoke: Put the SHELL definition in the right
 882         test makefile.
 883
 884 1999-09-15  Paul D. Smith  <psmith@gnu.org>
 885
 886         ChangeLog file for the test suite created.
 887 \f
 888
 889 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
 890 2002, 2003, 2004, 2005, 2006, 2007 Free Software Foundation, Inc.
 891 This file is part of GNU Make.
 892
 893 GNU Make is free software; you can redistribute it and/or modify it under the
 894 terms of the GNU General Public License as published by the Free Software
 895 Foundation; either version 3 of the License, or (at your option) any later
 896 version.
 897
 898 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
 899 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
 900 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
 901
 902 You should have received a copy of the GNU General Public License along with
 903 this program.  If not, see <http://www.gnu.org/licenses/>.