- Enhance .POSIX to set -e when invoking shells, as demanded by a
[make.git] / tests / ChangeLog
bloba61142260fee324fd6f1ba18476b7d2d7c3d6983
1 2010-07-06  Paul Smith  <psmith@gnu.org>
3         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
5         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
6         Verify that enabling .POSIX changes the shell flags to set -e.
8 2010-07-01  Paul Smith  <psmith@gnu.org>
10         * scripts/features/recursion: Add a space to separate command-line
11         args.  Fixes Savannah bug #29968.
13 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
15         * scripts/features/vpath3: Test for the new library search
16         behavior.
18 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
20         * scripts/features/se_explicit: Enable the test for now fixed
21         Savannah bug 25780.
23 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
25         * scripts/variables/undefine: Tests for the new undefine feature.
27 2009-10-03  Paul Smith  <psmith@gnu.org>
29         * scripts/features/parallelism: Test for open Savannah bug #26846.
31         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
33         * scripts/variables/MAKEFLAGS: Created.
34         Add test for Savannah bug #2216 (still open).
36         * scripts/features/include: Test for Savannah bug #102 (still open).
38 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
40         * scripts/features/include: Add diagnostics issuing tests for
41         cases where targets have been updated and failed with the
42         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
44 2009-09-28  Paul Smith  <psmith@gnu.org>
46         * scripts/functions/shell: Add regression test for Savannah bug
47         #20513 (still open).
49         * scripts/features/se_explicit: Add regression tests for Savannah
50         bug #25780 (still open).
52         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
53         that runs tests we know will fail.  This allows us to add
54         regression tests to the test suite for bugs that haven't been
55         fixed yet.
57 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
59         * scripts/features/patspecific_vars: Add a test for the shortest
60         stem first order.
62         * scripts/features/patternrules: Add a test for the shortest stem
63         first order.
65 2009-09-24  Paul Smith  <psmith@gnu.org>
67         * scripts/features/se_implicit: Add a test for order-only
68         secondary expansion prerequisites.
70 2009-09-23  Paul Smith  <psmith@gnu.org>
72         * scripts/features/patternrules: Test that we can remove pattern
73         rules, both single and multiple prerequisites.  Savannah bug #18622.
75         * scripts/features/echoing: Rework for run_make_test().
77 2009-06-14  Paul Smith  <psmith@gnu.org>
79         * scripts/features/vpath: Verify we don't get bogus circular
80         dependency warnings if we choose a different file via vpath during
81         update.  Savannah bug #13529.
83 2009-06-13  Paul Smith  <psmith@gnu.org>
85         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
86         files (and files included by them) don't set the default goal.
87         Savannah bug #13401.
89         * scripts/functions/wildcard: Test that wildcards with
90         non-existent glob matchers return empty.
92 2009-06-09  Paul Smith  <psmith@gnu.org>
94         * scripts/options/dash-B: Test the $? works correctly with -B.
95         Savannah bug #17825.
97         * scripts/features/patternrules: Test that dependencies of
98         "also_make" targets are created properly.  Savannah bug #19108.
100         * test_driver.pl (compare_output): Create a "run" file for failed
101         tests containing the command that was run.
102         (get_runfile): New function.
104         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
105         allow memcheck and massif tools.
107         * scripts/features/patternrules: Have to comment out a line in the
108         first test due to backing out a change that broke the implicit
109         rule search algorithm.  Savannah bug #17752.
110         * scripts/misc/general4: Remove a test that is redundant with
111         patternrules.
113         * scripts/features/parallelism: Add a test for re-exec with
114         jobserver master override.  Savannah bug #18124.
116 2009-06-08  Paul Smith  <psmith@gnu.org>
118         * scripts/features/targetvars: Add a test for continued target
119         vars after a semicolon.  Savannah bug #17521.
121 2009-06-07  Paul Smith  <psmith@gnu.org>
123         * scripts/features/se_explicit: Make sure we catch defining
124         prereqs during snap_deps().  Savannah bug #24622.
126         * scripts/variables/automatic: Check prereq ordering when the
127         target with the recipe has no prereqs.  Savannah bug #21198.
129         * scripts/variables/LIBPATTERNS: Add a new set of test for
130         $(.LIBPATTERNS) (previously untested!)
132 2009-06-04  Paul Smith  <psmith@gnu.org>
134         * scripts/variables/SHELL: The export target-specific SHELL test
135         has an incorrect known-good-value.
137         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
139         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
141 2009-05-31  Paul Smith  <psmith@gnu.org>
143         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
145         * scripts/features/targetvars: Add tests of overrides for Savannah
146         bug #26207.
147         * scripts/features/patspecific_vars: Ditto.
149         * scripts/features/patternrules: Add a test for Savannah bug #26593.
151 2009-05-30  Paul Smith  <psmith@gnu.org>
153         * scripts/variables/flavors: Update with new variable flavor tests.
154         * scripts/variables/define: Create a new set of tests for
155         define/endef and move those aspects of the flavors suite here.
157 2009-05-25  Paul Smith  <psmith@gnu.org>
159         * scripts/features/targetvars: Ditto.
161         * scripts/features/export: Test new variable parsing abilities.
163 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
165         * scripts/variables/private: Create a new suite of tests for 'private'.
167 2007-11-04  Paul Smith  <psmith@gnu.org>
169         * scripts/functions/eval: Update error message for command -> recipe.
171         * test_driver.pl (compare_output): Allow the answer to be a regex,
172         if surrounded by '/'.
173         * scripts/misc/close_stdout: Use a regex for the answer, since
174         sometimes the error will have a description and sometimes it won't.
176 2007-09-10  Paul Smith  <psmith@gnu.org>
178         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
180 2007-08-15  Paul Smith  <psmith@gnu.org>
182         These test cases were contributed by
183         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
184         Savannah bugs #3330 and #15919.
186         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
187         15919.
189         * scripts/features/parallelism: Add tests for wrong answer/hang
190         combining INTERMEDIATE, order-only prereqs, and parallelism.
191         See Savannah bugs 3330 and 15919.
193 2007-07-13  Paul Smith  <psmith@gnu.org>
195         Install a timeout so tests can never loop infinitely.
196         Original idea and patch for a single-test version provided by
197         Icarus Sparry <savannah@icarus.freeuk.com>
199         * test_driver.pl (_run_command): New function: this is called by
200         other functions to actually run a command.  Before we run it,
201         install a SIGALRM handler and set up a timer to go off in the
202         future (default is 5s; this can be overridden by individual tests).
203         (run_command): Call it.
204         (run_command_with_output): Call it.
206         * run_make_tests.pl (run_make_with_options): Override the default
207         timeout if the caller requests it.
208         (run_make_test): Pass any timeout override to run_make_with_options.
210         * scripts/features/parallelism: Increase the timeout for long tests.
211         * scripts/options/dash-l: Ditto.
213 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
215         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
216         ENV here.  This doesn't always work.
217         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
218         environment.  Fixes Savannah bug #16698.
220 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
222         * scripts/variables/automatic: Add back the test for bug #8154.
224 2006-04-01  Paul D. Smith  <psmith@gnu.org>
226         * scripts/functions/realpath: Don't run tests with multiple
227         initial slashes on Windows: those paths mean something different.
229 2006-03-19  Paul D. Smith  <psmith@gnu.org>
231         * scripts/features/parallelism: Test that the jobserver is
232         properly managed when we have to re-exec the master instance of
233         make.
235 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
237         * scripts/features/statipattrules: Add tests for bug #16053.
239 2006-03-09  Paul Smith  <psmith@gnu.org>
241         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
242         with DOS drive letters.  Fixes Savannah bug #15947.
244         * test_driver.pl (run_each_test): Set the status properly even
245         when a test fails to execute.  Fixes Savannah bug #15942.
247         * scripts/functions/foreach: Use a different environment variable
248         other than PATH to avoid differences with Windows platforms.
249         Fixes Savannah bug #15938.
251 2006-03-05  Paul D. Smith  <psmith@gnu.org>
253         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
254         type W32.  Fixed Savannah bug #15937.
256         * scripts/features/default_names: Don't call error() when the test
257         fails.  Fixes Savannah bug #15941.
259 2006-02-17  Paul D. Smith  <psmith@gnu.org>
261         * scripts/features/targetvars: Test a complex construction which
262         guarantees that we have to merge variable lists of different
263         sizes.  Tests for Savannah bug #15757.
265 2006-02-15  Paul D. Smith  <psmith@gnu.org>
267         * scripts/functions/error: Make sure filename/lineno information
268         is related to where the error is expanded, not where it's set.
269         * scripts/functions/warning: Ditto.
270         * scripts/functions/foreach: Check for different error conditions.
271         * scripts/functions/word: Ditto.
272         * scripts/variables/negative: Test some variable reference failure
273         conditions.
274         * scripts/options/warn-undefined-variables: Test the
275         --warn-undefined-variables flag.
277 2006-02-09  Paul D. Smith  <psmith@gnu.org>
279         * run_make_tests.pl (set_more_defaults): Update valgrind support
280         for newer versions.
281         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
282         beginning with ".").
284         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
285         functions.
287 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
289         * scripts/features/parallelism: Add a test for bug #15641.
291 2006-02-06  Paul D. Smith  <psmith@gnu.org>
293         * scripts/options/dash-W: Add a test for bug #15341.
295 2006-01-03  Paul D. Smith  <psmith@gnu.org>
297         * scripts/variables/automatic: Add a test for bug #8154.
299         * README: Update to reflect the current state of the test suite.
301 2005-12-12  Paul D. Smith  <psmith@gnu.org>
303         * scripts/features/parallelism, scripts/functions/wildcard,
304         scripts/targets/FORCE, scripts/targets/PHONY,
305         scripts/targets/SILENT: Use the default setting for
306         $delete_command.  Fixes bug #15085.
308         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
310 2005-12-11  Paul D. Smith  <psmith@gnu.org>
312         * scripts/misc/general4: Test implicit rules with '$' in the
313         prereq list & prereq patterns.
314         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
316 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
318         * scripts/features/patternrules: Add a test for bug #13022.
320 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
322         * scripts/features/double_colon: Add a test for bug #14334.
324 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
326         * scripts/functions/flavor: Add a test for the flavor function.
328 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
330         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
331         special variable.
333 2005-10-24  Paul D. Smith  <psmith@gnu.org>
335         * scripts/misc/general4: Test '$$' in prerequisites list.
336         * scripts/features/statipattrules: Rewrite to use run_make_test().
337         Add various static pattern info.
338         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
339         * scripts/features/se_explicit: Add tests for handling '$$' in
340         prerequisite lists with and without setting .SECONDEXPANSION.
341         * scripts/features/order_only: Convert to run_make_test().
342         * run_make_tests.pl (set_more_defaults): If we can't get the value
343         of $(MAKE) from make, then fatal immediately.
345 2005-08-31  Paul D. Smith  <psmith@gnu.org>
347         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
348         an eval to trap errors) and if it exists, use POSIX::getcwd to
349         find the working directory.  If it doesn't exist, go back to the
350         previous methods.  This tries to be more accurate on Windows
351         systems.
353 2005-08-29  Paul D. Smith  <psmith@gnu.org>
355         * scripts/functions/abspath: Add some text to the error messages
356         to get a better idea of what's wrong.  Make warnings instead of
357         errors.
359         * scripts/features/patspecific_vars: Don't use "test", which is
360         UNIX specific.  Print the values and let the test script match
361         them.
363 2005-08-25  Paul Smith  <psmith@gnu.org>
365         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
366         former works better with non-UNIX environments.  Fixes Savannah
367         bug #14129.
369 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
371         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
372         $(sort) so that the resulting order is no longer filesystem-
373         dependant.
375 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
377         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
379 2005-08-07  Paul D. Smith  <psmith@gnu.org>
381         * scripts/features/parallelism: Add a test for a bug reported by
382         Michael Matz (matz@suse.de) in which make exits without waiting
383         for all its children in some situations during parallel builds.
385 2005-07-08  Paul D. Smith  <psmith@gnu.org>
387         * test_driver.pl: Reset the environment to a clean value every
388         time before we invoke make.  I'm suspicious that the environment
389         isn't handled the same way in Windows as it is in UNIX, and some
390         variables are leaking out beyond the tests they are intended for.
391         Create an %extraENV hash tests can set to add more env. vars.
392         * tests/scripts/features/export: Change to use %extraENV.
393         * tests/scripts/functions/eval: Ditto.
394         * tests/scripts/functions/origin: Ditto.
395         * tests/scripts/options/dash-e: Ditto.
396         * tests/scripts/variables/SHELL: Ditto.
398 2005-06-27  Paul D. Smith  <psmith@gnu.org>
400         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
401         files.
402         * scripts/features/reinvoke: Rewrite to be safer on systems with
403         subsecond timestamps.
404         * scripts/features/patternrules: False exits with different error
405         codes on different systems (for example, Linux => 1, Solaris => 255).
407         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
408         to be sure it will be considered updated when it's remade.
410 2005-06-26  Paul D. Smith  <psmith@gnu.org>
412         * scripts/functions/shell: New test suite for the shell function.
414 2005-06-25  Paul D. Smith  <psmith@gnu.org>
416         * scripts/features/include: Test include/-include/sinclude with no
417         arguments.  Tests fix for Savannah bug #1761.
419         * scripts/misc/general3: Implement comprehensive testing of
420         backslash-newline behavior in command scripts: various types of
421         quoting, fast path / slow path, etc.
422         Tests fix for Savannah bug #1332.
424         * scripts/options/symlinks: Test symlinks to non-existent files.
425         Tests fix for Savannah bug #13280.
427         * scripts/misc/general3: Test semicolons in variable references.
428         Tests fix for Savannah bug #1454.
430         * scripts/variables/MAKE_RESTARTS: New file: test the
431         MAKE_RESTARTS variable.
432         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
433         Tests fix for Savannah bug #7566.
434         * scripts/options/dash-W: New file: test the -W flag, including
435         re-exec infinite looping.
437 2005-06-12  Paul D. Smith  <psmith@gnu.org>
439         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
440         This test only works on systems that have /dev/full (e.g., Linux).
442 2005-06-09  Paul D. Smith  <psmith@gnu.org>
444         * scripts/functions/foreach: Add a test for Savannah bug #11913.
446 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
448         * scripts/features/include: Add a test for Savannah bug #13216.
449         * scripts/features/patternrules: Add a test for Savannah bug #13218.
451 2005-05-13  Paul D. Smith  <psmith@gnu.org>
453         * scripts/features/conditionals: Add tests for the new if... else
454         if... endif syntax.
456 2005-05-03  Paul D. Smith  <psmith@gnu.org>
458         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
459         DEFAULT_GOAL.
461 2005-05-02  Paul D. Smith  <psmith@gnu.org>
463         * scripts/features/parallelism: Add a test for exporting recursive
464         variables containing $(shell ) calls.  Rewrite this script to use
465         run_make_test() everywhere.
467 2005-04-07  Paul D. Smith  <psmith@gnu.org>
469         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
471 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
473         * scripts/variables/automatic: Add a test for Savannah bug #12320.
475 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
477         * scripts/features/patternrules: Add a test for Savannah bug #12267.
479 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
481         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
482         bug #12266.
484 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
486         * scripts/features/patternrules: Add a test for Savannah bug #12202.
488 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
490         * scripts/features/se_implicit: Add a test for stem
491         termination bug. Add a test for stem triple-expansion bug.
493         * scripts/features/se_statpat: Add a test for stem
494         triple-expansion bug.
496         * scripts/features/statipattrules: Change test #4 to reflect
497         new way empty prerequisite list is handled.
500 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
502         * scripts/features/statipattrules: Add a test for
503         Savannah bug #12180.
505 2005-02-28  Paul D. Smith  <psmith@gnu.org>
507         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
509         * scripts/options/symlinks: New file to test checking of symlink
510         timestamps.  Can't use filename dash-L because it conflicts with
511         dash-l on case-insensitive filesystems.
513         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
514         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
515         unique filenames.
517 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
519         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
520         special variable.
522 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
524         * scripts/features/se_explicit: Test the second expansion in
525         explicit rules.
526         * scripts/features/se_implicit: Test the second expansion in
527         implicit rules.
528         * scripts/features/se_statpat: Test the second expansion in
529         static pattern rules.
530         * scripts/variables/automatic: Fix to work with the second
531         expansion.
533         * scripts/misc/general4: Add a test for bug #12091.
535 2005-02-27  Paul D. Smith  <psmith@gnu.org>
537         * scripts/functions/eval: Check that eval of targets within
538         command scripts fails.  See Savannah bug # 12124.
540 2005-02-26  Paul D. Smith  <psmith@gnu.org>
542         * test_driver.pl (compare_output): If a basic comparison of the
543         log and answer doesn't match, try harder: change all backslashes
544         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
546 2005-02-09  Paul D. Smith  <psmith@gnu.org>
548         * scripts/features/recursion: Test command line variable settings:
549         only one instance of a given variable should be provided.
551 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
553         * tests/scripts/functions/abspath: New file: test `abspath'
554         built-in function.
556         * tests/scripts/functions/realpath: New file: test `realpath'
557         built-in function.
559 2004-11-28  Paul D. Smith  <psmith@gnu.org>
561         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
562         this doesn't really test anything useful in UNIX but...
564         * scripts/variables/SHELL: New file: test proper handling of SHELL
565         according to POSIX rules.  Fixes bug #1276.
567 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
569         * scripts/functions/word: Test $(firstword ) and $(lastword ).
571 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
573         * scripts/features/patspecific_vars: Test simple/recursive
574         variable expansion.
576 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
578         * scripts/features/include: Test dontcare flag inheritance
579         when rebuilding makefiles.
581 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
583         * scripts/features/patspecific_vars: Test exported variables.
585 2004-09-22  Paul D. Smith  <psmith@gnu.org>
587         * run_make_tests.pl (run_make_test): Don't add newlines to the
588         makestring or answer if they are completely empty.
590         * scripts/features/patternrules: Rename from implicit_prereq_eval.
592         * scripts/test_template: Rework the template.
594 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
596         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
597         `#!/usr/bin/env perl'.
599         * scripts/features/implicit_prereq_eval: Test implicit rule
600         prerequisite evaluation code.
602 2004-09-21  Paul D. Smith  <psmith@gnu.org>
604         * run_make_tests.pl (run_make_test): Enhance to allow the make
605         string to be undef: in that case it reuses the previous make
606         string.  Allows multiple tests on the same makefile.
608         * scripts/variables/flavors: Add some tests for prefix characters
609         interacting with define/endef variables.
611 2004-09-20  Paul D. Smith  <psmith@gnu.org>
613         * scripts/functions/substitution: Rewrite to use run_make_test()
614         interface, and add test for substitution failures reported by
615         Markus Mauhart <qwe123@chello.at>.
617 2004-03-22  Paul D. Smith  <psmith@gnu.org>
619         * test_driver.pl (run_each_test, toplevel, compare_output): Change
620         to track both the testing categories _AND_ the number of
621         individual tests, and report both sets of numbers.
623 2004-02-21  Paul D. Smith  <psmith@gnu.org>
625         * scripts/functions/origin: Set our own environment variable
626         rather than relying on $HOME.
628 2004-01-21  Paul D. Smith  <psmith@gnu.org>
630         * scripts/features/conditionals: Test arguments to ifn?def which
631         contain whitespace (such as a function that is evaluated).  Bug
632         #7257.
634 2004-01-07  Paul D. Smith  <psmith@gnu.org>
636         * scripts/features/order_only: Test order-only prerequisites in
637         pattern rules (patch #2349).
639 2003-11-02  Paul D. Smith  <psmith@gnu.org>
641         * scripts/functions/if: Test if on conditionals with trailing
642         whitespace--bug #5798.
644         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
646 2003-04-19  Paul D. Smith  <psmith@gnu.org>
648         * scripts/features/patspecific_vars: Test multiple patterns
649         matching the same target--Bug #1405.
651 2003-04-09  Paul D. Smith  <psmith@gnu.org>
653         * run_make_tests.pl (set_more_defaults): A new $port_type of
654         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
655         for OS/2.
657 2003-03-28  Paul D. Smith  <psmith@gnu.org>
659         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
660         not prerequisites)--Bug #2515.
662 2003-01-30  Paul D. Smith  <psmith@gnu.org>
664         * scripts/features/targetvars: Test very long target-specific
665         variable definition lines (longer than the default make buffer
666         length).  Tests patch # 1022.
668         * scripts/functions/eval: Test very recursive $(eval ...) calls
669         with simple variable expansion (bug #2238).
671         * scripts/functions/word: Test error handling for word and
672         wordlist functions (bug #2407).
674 2003-01-22  Paul D. Smith  <psmith@gnu.org>
676         * scripts/functions/call: Test recursive argument masking (bug
677         #1744).
679 2002-10-25  Paul D. Smith  <psmith@gnu.org>
681         * scripts/functions/eval: Test using $(eval ...) inside
682         conditionals (Bug #1516).
684 2002-10-14  Paul D. Smith  <psmith@gnu.org>
686         * scripts/options/dash-t: Add a test for handling -t on targets
687         with no commands (Bug #1418).
689 2002-10-13  Paul D. Smith  <psmith@gnu.org>
691         * scripts/features/targetvars: Add a test for exporting
692         target-specific vars (Bug #1391).
694 2002-10-05  Paul D. Smith  <psmith@gnu.org>
696         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
697         and $${@F}.
699 2002-09-23  Paul D. Smith  <psmith@gnu.org>
701         * scripts/features/escape: Test handling of escaped comment
702         characters in targets and prerequisites.
704 2002-09-18  Paul D. Smith  <psmith@gnu.org>
706         * scripts/features/export: Test export/unexport of multiple
707         variables in a single command.
709 2002-09-17  Paul D. Smith  <psmith@gnu.org>
711         * scripts/features/targetvars: Tests for Bug #940: test
712         target-specific and pattern-specific variables in conjunction with
713         double-colon targets.
715 2002-09-10  Paul D. Smith  <psmith@gnu.org>
717         * test_driver.pl (compare_output): Match the new format for time
718         skew error messages.
720         * scripts/features/export: Created.  Add tests for export/unexport
721         capabilities, including exporting/unexporting expanded variables.
723         * scripts/features/conditionals: Add a test for expanded variables
724         in ifdef conditionals.
726 2002-09-04  Paul D. Smith  <psmith@gnu.org>
728         * scripts/features/reinvoke: Change touch/sleep combos to utouch
729         invocations.
730         * scripts/features/vpathgpath: Ditto.
731         * scripts/features/vpathplus: Ditto.
732         * scripts/options/dash-n: Ditto.
733         * scripts/targets/INTERMEDIATE: Ditto.
734         * scripts/targets/SECONDARY: Ditto.
736         * scripts/options/dash-t: Added a test for the -t bug fixed by
737         Henning Makholm.  This test was also contributed by Henning.
739         * scripts/misc/general4: Add a test suite for obscure algorithmic
740         features of make.  First test: make sure creation subdirectories
741         as prerequisites of targets works properly.
743         * scripts/misc/version: Remove this bogus test.
745 2002-08-07  Paul D. Smith  <psmith@gnu.org>
747         * scripts/misc/general3: Add a test for makefiles that don't end
748         in newlines.
750         * scripts/variables/special: Create tests for the special
751         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
752         for now as it's not yet supported.
754 2002-08-01  Paul D. Smith  <psmith@gnu.org>
756         * scripts/options/dash-B: Add a test for the new -B option.
758 2002-07-11  Paul D. Smith  <psmith@gnu.org>
760         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
761         -valgrind option to the test suite.
762         (set_more_defaults): Set up the file descriptor to capture
763         Valgrind output.  We have to unset its close-on-exec flag; we
764         hardcode the value for F_SETFD (2) rather than load it; hopefully
765         this will help us avoid breaking the Windows/DOS test suite.
767 2002-07-10  Paul D. Smith  <psmith@gnu.org>
769         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
770         $$(@F).
772         * test_driver.pl (utouch): Create a new function that creates a
773         file with a specific timestamp offset.  Use of this function will
774         let us avoid lots of annoying sleep() invocations in the tests
775         just to get proper timestamping, which will make the tests run a
776         lot faster.  So far it's only used in the automatic test suite.
778 2002-07-09  Paul D. Smith  <psmith@gnu.org>
780         * scripts/variables/automatic: Create a test for automatic variables.
782 2002-07-08  Paul D. Smith  <psmith@gnu.org>
784         * scripts/features/order_only: Test new order-only prerequisites.
786 2002-07-07  Paul D. Smith  <psmith@gnu.org>
788         * scripts/functions/eval: Test new function.
789         * scripts/functions/value: Test new function.
790         * scripts/variables/MAKEFILE_LIST: Test new variable.
792 2002-04-28  Paul D. Smith  <psmith@gnu.org>
794         * scripts/functions/call: New test: transitive closure
795         implementation using $(call ...) to test variable recursion.
797 2002-04-21  Paul D. Smith  <psmith@gnu.org>
799         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
800         directories in the script directories.
802 2001-05-02  Paul D. Smith  <psmith@gnu.org>
804         * scripts/variables/flavors: Test define/endef scripts where only
805         one of the command lines is quiet.
807 2000-06-22  Paul D. Smith  <psmith@gnu.org>
809         * scripts/options/dash-q: New file; test the -q option.  Includes
810         a test for PR/1780.
812 2000-06-21  Paul D. Smith  <psmith@gnu.org>
814         * scripts/features/targetvars: Added a test for PR/1709: allowing
815         semicolons in target-specific variable values.
817 2000-06-19  Paul D. Smith  <psmith@gnu.org>
819         * scripts/functions/addsuffix: Test for an empty final argument.
820         Actually this bug might have happened for any function, but this
821         one was handy.
823 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
825         * scripts/options/general: If parallel jobs are not supported,
826         expect a warning message from Make.
828 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
830         * scripts/options/general: Don't try -jN with N != 1 if parallel
831         jobs are not supported.
833 2000-05-24  Paul D. Smith  <psmith@gnu.org>
835         * scripts/options/general: Test general option processing (PR/1716).
837 2000-04-11  Paul D. Smith  <psmith@gnu.org>
839         * scripts/functions/strip: Test empty value to strip (PR/1689).
841 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
843         * scripts/features/reinvoke: Sleep before updating the target
844         files in the first test, to ensure its time stamp really gets
845         newer; otherwise Make might re-exec more than once.
847 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
849         * scripts/features/double_colon: Don't run the parallel tests if
850         parallel jobs aren't supported.
852 2000-04-04  Paul D. Smith  <psmith@gnu.org>
854         * scripts/functions/word: wordlist doesn't swap arguments anymore.
856 2000-03-27  Paul D. Smith  <psmith@gnu.org>
858         * scripts/features/statipattrules: Test that static pattern rules
859         whose prerequisite patterns resolve to empty strings throw an
860         error (instead of dumping core).  Fixes PR/1670.
862         * scripts/features/reinvoke: Make more robust by touching "b"
863         first, to ensure it's not newer than "a".
864         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
865         * scripts/options/dash-n: Ditto.
867         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
868         recursive invocations of $(call ...) to break.  I can't come up
869         with any way to get both working at the same time, so I backed out
870         the fix to 1527 and added a test case for recursive calls.  This
871         also tests the fix for PR/1610.
873         * scripts/features/double_colon: Test that circular dependencies
874         in double-colon rule sets are detected correctly (PR/1671).
876 2000-03-26  Paul D. Smith  <psmith@gnu.org>
878         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
879         .INTERMEDIATE files when given on the command line (PR/1669).
881 2000-03-08  Paul D. Smith  <psmith@gnu.org>
883         * scripts/options/dash-k: Add a test for error detection by
884         multiple targets depending on the same prerequisite with -k.
885         For PR/1634.
887 2000-02-07  Paul D. Smith  <psmith@gnu.org>
889         * scripts/features/escape: Add a test for backslash-escaped spaces
890         in a target name (PR/1586).
892 2000-02-04  Paul D. Smith  <psmith@gnu.org>
894         * scripts/features/patspecific_vars: Add a test for pattern-specific
895         target variables inherited from the parent target (PR/1407).
897 2000-02-02  Paul D. Smith  <psmith@gnu.org>
899         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
900         to make sure sorting order, etc. is predictable.
901         Reported by Andreas Jaeger <aj@suse.de>.
903         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
904         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
905         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
906         1 for other systems.
907         * scripts/features/vpathplus (touchfiles): Use the $wtime value
908         instead of hardcoding 2.
909         * scripts/targets/SECONDARY: Ditto.
910         * scripts/targets/INTERMEDIATE: Ditto.
912 2000-01-27  Paul D. Smith  <psmith@gnu.org>
914         * test_driver.pl (toplevel): Don't try to run test scripts which
915         are really directories.
917 2000-01-23  Paul D. Smith  <psmith@gnu.org>
919         * scripts/features/include: Remove a check; the fix caused more
920         problems than the error, so I removed it and removed the test for
921         it.
923 2000-01-11  Paul D. Smith  <psmith@gnu.org>
925         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
926         sure $(call ...) doesn't eval its arguments and that you can
927         invoke foreach from it without looping forever.
929 1999-12-15  Paul D. Smith  <psmith@gnu.org>
931         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
932         .INTERMEDIATE settings on files don't disable them as implicit
933         intermediate possibilities.
935 1999-12-01  Paul D. Smith  <psmith@gnu.org>
937         * scripts/features/double_colon: Add a test for PR/1476: Try
938         double-colon rules as non-goal targets and during parallel builds
939         to make sure they're handled serially.
941 1999-11-17  Paul D. Smith  <psmith@gnu.org>
943         * scripts/functions/if: Add a test for PR/1429: put some text
944         after an if-statement to make sure it works.
946         * scripts/features/targetvars: Add a test for PR/1380: handling +=
947         in target-specific variable definitions correctly.
949 1999-10-15  Paul D. Smith  <psmith@gnu.org>
951         * scripts/variables/MAKEFILES: This was really broken: it didn't
952         test anything at all, really.  Rewrote it, plus added a test for
953         PR/1394.
955 1999-10-13  Paul D. Smith  <psmith@gnu.org>
957         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
958         behave properly when used with recursive targets".
960 1999-10-08  Paul D. Smith  <psmith@gnu.org>
962         * scripts/features/targetvars: Add a check for PR/1378:
963         "Target-specific vars don't inherit correctly"
965 1999-09-29  Paul D. Smith  <psmith@gnu.org>
967         * test_driver.pl (get_osname): Change $fancy_file_names to
968         $short_filenames and reverse the logic.
969         (run_each_test): Change test of non-existent $port_host to use
970         $short_filenames--problem reported by Eli Zaretskii.
972 1999-09-23  Paul D. Smith  <psmith@gnu.org>
974         * scripts/features/parallelism: Add a check to ensure that the
975         jobserver works when we re-invoke.  Also cleaned up the tests a
976         little, reducing the number of rules we use so the test won't need
977         as many "sleep" commands.
979 1999-09-16  Paul D. Smith  <psmith@gnu.org>
981         * scripts/features/reinvoke: Remove invocations of "touch" in
982         makefiles.  See the comments on the touch function rewrite below.
983         Note that UNIX touch behaves the same way if the file already
984         exists: it sets the time to the _local_ time.  We don't want
985         this.  This is probably a good tip for makefile writers in
986         general, actually... where practical.
987         * scripts/options/dash-l: Ditto.
988         * scripts/options/dash-n: Ditto.
990         * test_driver.pl (run_each_test): In retrospect, I don't like the
991         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
992         changed it back to use .log, .base, and .diff.
994         * run_make_tests.pl (set_more_defaults): Move the check for the
995         make pathname to here from set_defaults (that's too early since it
996         happens before the command line processing).
997         Create a new variable $port_type, calculated from $osname, to
998         specify what kind of system we're running on.  We should integrate
999         the VOS stuff here, too.
1000         (valid_option): Comment out the workdir/-work stuff so people
1001         won't be fooled into thinking it works... someone needs to fix
1002         this, though!
1004         * scripts/functions/origin: Use $port_type instead of $osname.
1005         * scripts/functions/foreach: Ditto.
1006         * scripts/features/default_names: Ditto.
1008 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1010         * test_driver.pl (touch): Rewrite this function.  Previously it
1011         used to use utime() to hard-set the time based on the current
1012         local clock, or, if the file didn't exist, it merely created it.
1013         This mirrors exactly what real UNIX touch does, but it fails badly
1014         on networked filesystems where the FS server clock is skewed from
1015         the local clock: normally modifying a file causes it to get a mod
1016         time based on the _server's_ clock.  Hard-setting it based on the
1017         _local_ clock causes gratuitous errors and makes the tests
1018         unreliable except on local filesystems.  The new function will
1019         simply modify the file, allowing the filesystem to set the mod
1020         time as it sees fit.
1022         * scripts/features/parallelism: The second test output could
1023         change depending on how fast some scripts completed; use "sleep"
1024         to force the order we want.
1026         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1027         means that "%ENV = ();" doesn't do the right thing.  This worked
1028         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1029         the environment rather than require specific versions.
1031         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1032         modifier "s", so the tests will run with Perl 4.
1033         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1034         option in PURIFYOPTIONS.
1035         (setup_for_test): Don't remove any logs unless $pure_log is set.
1037 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1039         * scripts/features/reinvoke: Put the SHELL definition in the right
1040         test makefile.
1042 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1044         ChangeLog file for the test suite created.
1047 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1048 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1049 This file is part of GNU Make.
1051 GNU Make is free software; you can redistribute it and/or modify it under the
1052 terms of the GNU General Public License as published by the Free Software
1053 Foundation; either version 3 of the License, or (at your option) any later
1054 version.
1056 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1057 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1058 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1060 You should have received a copy of the GNU General Public License along with
1061 this program.  If not, see <http://www.gnu.org/licenses/>.