Ensure that -n takes precedence over -t.
[make.git] / tests / ChangeLog
blob03983ec0ae42144dd5fd753676f38410f956705e
1 2011-09-02  Paul Smith  <psmith@gnu.org>
3         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
4         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
6 2011-08-29  Paul Smith  <psmith@gnu.org>
8         * scripts/features/varnesting: Test resetting of variables while
9         expanding them.  See Savannah patch #7534
11 2011-06-12  Paul Smith  <psmith@gnu.org>
13         * scripts/features/archives: Check archives with whitespace at the
14         beginning, end, and extra in the middle.
15         Another test for Savannah bug #30612.
17 2011-05-07  Paul Smith  <psmith@gnu.org>
19         * scripts/variables/private: Ensure we skip private variables when
20         appending.  Test for Savannah bug #32872.
22         * scripts/functions/wildcard: Verify wildcard used to test for
23         file existence/non-existence.
25 2011-05-02  Paul Smith  <psmith@gnu.org>
27         * scripts/functions/sort: Add a test for Savannah bug #33125.
29 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
31         * scripts/features/shell_assignment: Regression for "!=" feature
33 2010-11-06  Paul Smith  <psmith@gnu.org>
35         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
36         * scripts/functions/call: Ditto.
37         * scripts/variables/special: Ditto.
39         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
41 2010-08-29  Paul Smith  <psmith@gnu.org>
43         * scripts/features/errors: Add new error message to output text.
44         * scripts/variables/SHELL: Ditto.
45         * scripts/targets/POSIX: Ditto.
46         * scripts/options/dash-k: Ditto.
47         * scripts/features/vpathplus: Ditto.
48         * scripts/features/patternrules: Ditto.
49         * scripts/features/parallelism: Ditto.
51 2010-08-13  Paul Smith  <psmith@gnu.org>
53         * scripts/features/archives: New regression tests for archive
54         support.  Test for fix to Savannah bug #30612.
56         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
57         the features available in $(.FEATURES).
59 2010-08-10  Paul Smith  <psmith@gnu.org>
61         * scripts/features/reinvoke: Ensure command line variable settings
62         are preserved across make re-exec.  Tests Savannah bug #30723.
64 2010-07-28  Paul Smith  <psmith@gnu.org>
66         * scripts/targets/POSIX: Compatibility issues with Solaris (and
67         Tru64?); "false" returns different exit codes, and set -x shows
68         output with extra whitespace.  Run the commands by hand first to
69         find out what the real shell would do, then compare what make does.
70         * scripts/variables/SHELL: Ditto.
72 2010-07-12  Paul Smith  <psmith@gnu.org>
74         * test_driver.pl: Add a new $perl_name containing the path to Perl.
75         * run_make_tests.pl (run_make_test): Replace the special string
76         #PERL# in a makefile etc. with the path the Perl executable so
77         makefiles can use it.
79         * scripts/targets/ONESHELL: Add a new set of regression tests for
80         the .ONESHELL feature.
82 2010-07-06  Paul Smith  <psmith@gnu.org>
84         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
86         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
87         Verify that enabling .POSIX changes the shell flags to set -e.
89 2010-07-01  Paul Smith  <psmith@gnu.org>
91         * scripts/features/recursion: Add a space to separate command-line
92         args.  Fixes Savannah bug #29968.
94 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
96         * scripts/features/vpath3: Test for the new library search
97         behavior.
99 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
101         * scripts/features/se_explicit: Enable the test for now fixed
102         Savannah bug 25780.
104 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
106         * scripts/variables/undefine: Tests for the new undefine feature.
108 2009-10-03  Paul Smith  <psmith@gnu.org>
110         * scripts/features/parallelism: Test for open Savannah bug #26846.
112         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
114         * scripts/variables/MAKEFLAGS: Created.
115         Add test for Savannah bug #2216 (still open).
117         * scripts/features/include: Test for Savannah bug #102 (still open).
119 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
121         * scripts/features/include: Add diagnostics issuing tests for
122         cases where targets have been updated and failed with the
123         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
125 2009-09-28  Paul Smith  <psmith@gnu.org>
127         * scripts/functions/shell: Add regression test for Savannah bug
128         #20513 (still open).
130         * scripts/features/se_explicit: Add regression tests for Savannah
131         bug #25780 (still open).
133         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
134         that runs tests we know will fail.  This allows us to add
135         regression tests to the test suite for bugs that haven't been
136         fixed yet.
138 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
140         * scripts/features/patspecific_vars: Add a test for the shortest
141         stem first order.
143         * scripts/features/patternrules: Add a test for the shortest stem
144         first order.
146 2009-09-24  Paul Smith  <psmith@gnu.org>
148         * scripts/features/se_implicit: Add a test for order-only
149         secondary expansion prerequisites.
151 2009-09-23  Paul Smith  <psmith@gnu.org>
153         * scripts/features/patternrules: Test that we can remove pattern
154         rules, both single and multiple prerequisites.  Savannah bug #18622.
156         * scripts/features/echoing: Rework for run_make_test().
158 2009-06-14  Paul Smith  <psmith@gnu.org>
160         * scripts/features/vpath: Verify we don't get bogus circular
161         dependency warnings if we choose a different file via vpath during
162         update.  Savannah bug #13529.
164 2009-06-13  Paul Smith  <psmith@gnu.org>
166         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
167         files (and files included by them) don't set the default goal.
168         Savannah bug #13401.
170         * scripts/functions/wildcard: Test that wildcards with
171         non-existent glob matchers return empty.
173 2009-06-09  Paul Smith  <psmith@gnu.org>
175         * scripts/options/dash-B: Test the $? works correctly with -B.
176         Savannah bug #17825.
178         * scripts/features/patternrules: Test that dependencies of
179         "also_make" targets are created properly.  Savannah bug #19108.
181         * test_driver.pl (compare_output): Create a "run" file for failed
182         tests containing the command that was run.
183         (get_runfile): New function.
185         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
186         allow memcheck and massif tools.
188         * scripts/features/patternrules: Have to comment out a line in the
189         first test due to backing out a change that broke the implicit
190         rule search algorithm.  Savannah bug #17752.
191         * scripts/misc/general4: Remove a test that is redundant with
192         patternrules.
194         * scripts/features/parallelism: Add a test for re-exec with
195         jobserver master override.  Savannah bug #18124.
197 2009-06-08  Paul Smith  <psmith@gnu.org>
199         * scripts/features/targetvars: Add a test for continued target
200         vars after a semicolon.  Savannah bug #17521.
202 2009-06-07  Paul Smith  <psmith@gnu.org>
204         * scripts/features/se_explicit: Make sure we catch defining
205         prereqs during snap_deps().  Savannah bug #24622.
207         * scripts/variables/automatic: Check prereq ordering when the
208         target with the recipe has no prereqs.  Savannah bug #21198.
210         * scripts/variables/LIBPATTERNS: Add a new set of test for
211         $(.LIBPATTERNS) (previously untested!)
213 2009-06-04  Paul Smith  <psmith@gnu.org>
215         * scripts/variables/SHELL: The export target-specific SHELL test
216         has an incorrect known-good-value.
218         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
220         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
222 2009-05-31  Paul Smith  <psmith@gnu.org>
224         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
226         * scripts/features/targetvars: Add tests of overrides for Savannah
227         bug #26207.
228         * scripts/features/patspecific_vars: Ditto.
230         * scripts/features/patternrules: Add a test for Savannah bug #26593.
232 2009-05-30  Paul Smith  <psmith@gnu.org>
234         * scripts/variables/flavors: Update with new variable flavor tests.
235         * scripts/variables/define: Create a new set of tests for
236         define/endef and move those aspects of the flavors suite here.
238 2009-05-25  Paul Smith  <psmith@gnu.org>
240         * scripts/features/targetvars: Ditto.
242         * scripts/features/export: Test new variable parsing abilities.
244 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
246         * scripts/variables/private: Create a new suite of tests for 'private'.
248 2007-11-04  Paul Smith  <psmith@gnu.org>
250         * scripts/functions/eval: Update error message for command -> recipe.
252         * test_driver.pl (compare_output): Allow the answer to be a regex,
253         if surrounded by '/'.
254         * scripts/misc/close_stdout: Use a regex for the answer, since
255         sometimes the error will have a description and sometimes it won't.
257 2007-09-10  Paul Smith  <psmith@gnu.org>
259         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
261 2007-08-15  Paul Smith  <psmith@gnu.org>
263         These test cases were contributed by
264         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
265         Savannah bugs #3330 and #15919.
267         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
268         15919.
270         * scripts/features/parallelism: Add tests for wrong answer/hang
271         combining INTERMEDIATE, order-only prereqs, and parallelism.
272         See Savannah bugs 3330 and 15919.
274 2007-07-13  Paul Smith  <psmith@gnu.org>
276         Install a timeout so tests can never loop infinitely.
277         Original idea and patch for a single-test version provided by
278         Icarus Sparry <savannah@icarus.freeuk.com>
280         * test_driver.pl (_run_command): New function: this is called by
281         other functions to actually run a command.  Before we run it,
282         install a SIGALRM handler and set up a timer to go off in the
283         future (default is 5s; this can be overridden by individual tests).
284         (run_command): Call it.
285         (run_command_with_output): Call it.
287         * run_make_tests.pl (run_make_with_options): Override the default
288         timeout if the caller requests it.
289         (run_make_test): Pass any timeout override to run_make_with_options.
291         * scripts/features/parallelism: Increase the timeout for long tests.
292         * scripts/options/dash-l: Ditto.
294 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
296         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
297         ENV here.  This doesn't always work.
298         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
299         environment.  Fixes Savannah bug #16698.
301 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
303         * scripts/variables/automatic: Add back the test for bug #8154.
305 2006-04-01  Paul D. Smith  <psmith@gnu.org>
307         * scripts/functions/realpath: Don't run tests with multiple
308         initial slashes on Windows: those paths mean something different.
310 2006-03-19  Paul D. Smith  <psmith@gnu.org>
312         * scripts/features/parallelism: Test that the jobserver is
313         properly managed when we have to re-exec the master instance of
314         make.
316 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
318         * scripts/features/statipattrules: Add tests for bug #16053.
320 2006-03-09  Paul Smith  <psmith@gnu.org>
322         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
323         with DOS drive letters.  Fixes Savannah bug #15947.
325         * test_driver.pl (run_each_test): Set the status properly even
326         when a test fails to execute.  Fixes Savannah bug #15942.
328         * scripts/functions/foreach: Use a different environment variable
329         other than PATH to avoid differences with Windows platforms.
330         Fixes Savannah bug #15938.
332 2006-03-05  Paul D. Smith  <psmith@gnu.org>
334         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
335         type W32.  Fixed Savannah bug #15937.
337         * scripts/features/default_names: Don't call error() when the test
338         fails.  Fixes Savannah bug #15941.
340 2006-02-17  Paul D. Smith  <psmith@gnu.org>
342         * scripts/features/targetvars: Test a complex construction which
343         guarantees that we have to merge variable lists of different
344         sizes.  Tests for Savannah bug #15757.
346 2006-02-15  Paul D. Smith  <psmith@gnu.org>
348         * scripts/functions/error: Make sure filename/lineno information
349         is related to where the error is expanded, not where it's set.
350         * scripts/functions/warning: Ditto.
351         * scripts/functions/foreach: Check for different error conditions.
352         * scripts/functions/word: Ditto.
353         * scripts/variables/negative: Test some variable reference failure
354         conditions.
355         * scripts/options/warn-undefined-variables: Test the
356         --warn-undefined-variables flag.
358 2006-02-09  Paul D. Smith  <psmith@gnu.org>
360         * run_make_tests.pl (set_more_defaults): Update valgrind support
361         for newer versions.
362         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
363         beginning with ".").
365         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
366         functions.
368 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
370         * scripts/features/parallelism: Add a test for bug #15641.
372 2006-02-06  Paul D. Smith  <psmith@gnu.org>
374         * scripts/options/dash-W: Add a test for bug #15341.
376 2006-01-03  Paul D. Smith  <psmith@gnu.org>
378         * scripts/variables/automatic: Add a test for bug #8154.
380         * README: Update to reflect the current state of the test suite.
382 2005-12-12  Paul D. Smith  <psmith@gnu.org>
384         * scripts/features/parallelism, scripts/functions/wildcard,
385         scripts/targets/FORCE, scripts/targets/PHONY,
386         scripts/targets/SILENT: Use the default setting for
387         $delete_command.  Fixes bug #15085.
389         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
391 2005-12-11  Paul D. Smith  <psmith@gnu.org>
393         * scripts/misc/general4: Test implicit rules with '$' in the
394         prereq list & prereq patterns.
395         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
397 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
399         * scripts/features/patternrules: Add a test for bug #13022.
401 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
403         * scripts/features/double_colon: Add a test for bug #14334.
405 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
407         * scripts/functions/flavor: Add a test for the flavor function.
409 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
411         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
412         special variable.
414 2005-10-24  Paul D. Smith  <psmith@gnu.org>
416         * scripts/misc/general4: Test '$$' in prerequisites list.
417         * scripts/features/statipattrules: Rewrite to use run_make_test().
418         Add various static pattern info.
419         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
420         * scripts/features/se_explicit: Add tests for handling '$$' in
421         prerequisite lists with and without setting .SECONDEXPANSION.
422         * scripts/features/order_only: Convert to run_make_test().
423         * run_make_tests.pl (set_more_defaults): If we can't get the value
424         of $(MAKE) from make, then fatal immediately.
426 2005-08-31  Paul D. Smith  <psmith@gnu.org>
428         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
429         an eval to trap errors) and if it exists, use POSIX::getcwd to
430         find the working directory.  If it doesn't exist, go back to the
431         previous methods.  This tries to be more accurate on Windows
432         systems.
434 2005-08-29  Paul D. Smith  <psmith@gnu.org>
436         * scripts/functions/abspath: Add some text to the error messages
437         to get a better idea of what's wrong.  Make warnings instead of
438         errors.
440         * scripts/features/patspecific_vars: Don't use "test", which is
441         UNIX specific.  Print the values and let the test script match
442         them.
444 2005-08-25  Paul Smith  <psmith@gnu.org>
446         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
447         former works better with non-UNIX environments.  Fixes Savannah
448         bug #14129.
450 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
452         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
453         $(sort) so that the resulting order is no longer filesystem-
454         dependant.
456 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
458         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
460 2005-08-07  Paul D. Smith  <psmith@gnu.org>
462         * scripts/features/parallelism: Add a test for a bug reported by
463         Michael Matz (matz@suse.de) in which make exits without waiting
464         for all its children in some situations during parallel builds.
466 2005-07-08  Paul D. Smith  <psmith@gnu.org>
468         * test_driver.pl: Reset the environment to a clean value every
469         time before we invoke make.  I'm suspicious that the environment
470         isn't handled the same way in Windows as it is in UNIX, and some
471         variables are leaking out beyond the tests they are intended for.
472         Create an %extraENV hash tests can set to add more env. vars.
473         * tests/scripts/features/export: Change to use %extraENV.
474         * tests/scripts/functions/eval: Ditto.
475         * tests/scripts/functions/origin: Ditto.
476         * tests/scripts/options/dash-e: Ditto.
477         * tests/scripts/variables/SHELL: Ditto.
479 2005-06-27  Paul D. Smith  <psmith@gnu.org>
481         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
482         files.
483         * scripts/features/reinvoke: Rewrite to be safer on systems with
484         subsecond timestamps.
485         * scripts/features/patternrules: False exits with different error
486         codes on different systems (for example, Linux => 1, Solaris => 255).
488         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
489         to be sure it will be considered updated when it's remade.
491 2005-06-26  Paul D. Smith  <psmith@gnu.org>
493         * scripts/functions/shell: New test suite for the shell function.
495 2005-06-25  Paul D. Smith  <psmith@gnu.org>
497         * scripts/features/include: Test include/-include/sinclude with no
498         arguments.  Tests fix for Savannah bug #1761.
500         * scripts/misc/general3: Implement comprehensive testing of
501         backslash-newline behavior in command scripts: various types of
502         quoting, fast path / slow path, etc.
503         Tests fix for Savannah bug #1332.
505         * scripts/options/symlinks: Test symlinks to non-existent files.
506         Tests fix for Savannah bug #13280.
508         * scripts/misc/general3: Test semicolons in variable references.
509         Tests fix for Savannah bug #1454.
511         * scripts/variables/MAKE_RESTARTS: New file: test the
512         MAKE_RESTARTS variable.
513         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
514         Tests fix for Savannah bug #7566.
515         * scripts/options/dash-W: New file: test the -W flag, including
516         re-exec infinite looping.
518 2005-06-12  Paul D. Smith  <psmith@gnu.org>
520         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
521         This test only works on systems that have /dev/full (e.g., Linux).
523 2005-06-09  Paul D. Smith  <psmith@gnu.org>
525         * scripts/functions/foreach: Add a test for Savannah bug #11913.
527 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
529         * scripts/features/include: Add a test for Savannah bug #13216.
530         * scripts/features/patternrules: Add a test for Savannah bug #13218.
532 2005-05-13  Paul D. Smith  <psmith@gnu.org>
534         * scripts/features/conditionals: Add tests for the new if... else
535         if... endif syntax.
537 2005-05-03  Paul D. Smith  <psmith@gnu.org>
539         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
540         DEFAULT_GOAL.
542 2005-05-02  Paul D. Smith  <psmith@gnu.org>
544         * scripts/features/parallelism: Add a test for exporting recursive
545         variables containing $(shell ) calls.  Rewrite this script to use
546         run_make_test() everywhere.
548 2005-04-07  Paul D. Smith  <psmith@gnu.org>
550         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
552 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
554         * scripts/variables/automatic: Add a test for Savannah bug #12320.
556 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
558         * scripts/features/patternrules: Add a test for Savannah bug #12267.
560 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
562         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
563         bug #12266.
565 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
567         * scripts/features/patternrules: Add a test for Savannah bug #12202.
569 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
571         * scripts/features/se_implicit: Add a test for stem
572         termination bug. Add a test for stem triple-expansion bug.
574         * scripts/features/se_statpat: Add a test for stem
575         triple-expansion bug.
577         * scripts/features/statipattrules: Change test #4 to reflect
578         new way empty prerequisite list is handled.
581 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
583         * scripts/features/statipattrules: Add a test for
584         Savannah bug #12180.
586 2005-02-28  Paul D. Smith  <psmith@gnu.org>
588         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
590         * scripts/options/symlinks: New file to test checking of symlink
591         timestamps.  Can't use filename dash-L because it conflicts with
592         dash-l on case-insensitive filesystems.
594         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
595         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
596         unique filenames.
598 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
600         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
601         special variable.
603 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
605         * scripts/features/se_explicit: Test the second expansion in
606         explicit rules.
607         * scripts/features/se_implicit: Test the second expansion in
608         implicit rules.
609         * scripts/features/se_statpat: Test the second expansion in
610         static pattern rules.
611         * scripts/variables/automatic: Fix to work with the second
612         expansion.
614         * scripts/misc/general4: Add a test for bug #12091.
616 2005-02-27  Paul D. Smith  <psmith@gnu.org>
618         * scripts/functions/eval: Check that eval of targets within
619         command scripts fails.  See Savannah bug # 12124.
621 2005-02-26  Paul D. Smith  <psmith@gnu.org>
623         * test_driver.pl (compare_output): If a basic comparison of the
624         log and answer doesn't match, try harder: change all backslashes
625         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
627 2005-02-09  Paul D. Smith  <psmith@gnu.org>
629         * scripts/features/recursion: Test command line variable settings:
630         only one instance of a given variable should be provided.
632 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
634         * tests/scripts/functions/abspath: New file: test `abspath'
635         built-in function.
637         * tests/scripts/functions/realpath: New file: test `realpath'
638         built-in function.
640 2004-11-28  Paul D. Smith  <psmith@gnu.org>
642         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
643         this doesn't really test anything useful in UNIX but...
645         * scripts/variables/SHELL: New file: test proper handling of SHELL
646         according to POSIX rules.  Fixes bug #1276.
648 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
650         * scripts/functions/word: Test $(firstword ) and $(lastword ).
652 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
654         * scripts/features/patspecific_vars: Test simple/recursive
655         variable expansion.
657 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
659         * scripts/features/include: Test dontcare flag inheritance
660         when rebuilding makefiles.
662 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
664         * scripts/features/patspecific_vars: Test exported variables.
666 2004-09-22  Paul D. Smith  <psmith@gnu.org>
668         * run_make_tests.pl (run_make_test): Don't add newlines to the
669         makestring or answer if they are completely empty.
671         * scripts/features/patternrules: Rename from implicit_prereq_eval.
673         * scripts/test_template: Rework the template.
675 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
677         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
678         `#!/usr/bin/env perl'.
680         * scripts/features/implicit_prereq_eval: Test implicit rule
681         prerequisite evaluation code.
683 2004-09-21  Paul D. Smith  <psmith@gnu.org>
685         * run_make_tests.pl (run_make_test): Enhance to allow the make
686         string to be undef: in that case it reuses the previous make
687         string.  Allows multiple tests on the same makefile.
689         * scripts/variables/flavors: Add some tests for prefix characters
690         interacting with define/endef variables.
692 2004-09-20  Paul D. Smith  <psmith@gnu.org>
694         * scripts/functions/substitution: Rewrite to use run_make_test()
695         interface, and add test for substitution failures reported by
696         Markus Mauhart <qwe123@chello.at>.
698 2004-03-22  Paul D. Smith  <psmith@gnu.org>
700         * test_driver.pl (run_each_test, toplevel, compare_output): Change
701         to track both the testing categories _AND_ the number of
702         individual tests, and report both sets of numbers.
704 2004-02-21  Paul D. Smith  <psmith@gnu.org>
706         * scripts/functions/origin: Set our own environment variable
707         rather than relying on $HOME.
709 2004-01-21  Paul D. Smith  <psmith@gnu.org>
711         * scripts/features/conditionals: Test arguments to ifn?def which
712         contain whitespace (such as a function that is evaluated).  Bug
713         #7257.
715 2004-01-07  Paul D. Smith  <psmith@gnu.org>
717         * scripts/features/order_only: Test order-only prerequisites in
718         pattern rules (patch #2349).
720 2003-11-02  Paul D. Smith  <psmith@gnu.org>
722         * scripts/functions/if: Test if on conditionals with trailing
723         whitespace--bug #5798.
725         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
727 2003-04-19  Paul D. Smith  <psmith@gnu.org>
729         * scripts/features/patspecific_vars: Test multiple patterns
730         matching the same target--Bug #1405.
732 2003-04-09  Paul D. Smith  <psmith@gnu.org>
734         * run_make_tests.pl (set_more_defaults): A new $port_type of
735         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
736         for OS/2.
738 2003-03-28  Paul D. Smith  <psmith@gnu.org>
740         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
741         not prerequisites)--Bug #2515.
743 2003-01-30  Paul D. Smith  <psmith@gnu.org>
745         * scripts/features/targetvars: Test very long target-specific
746         variable definition lines (longer than the default make buffer
747         length).  Tests patch # 1022.
749         * scripts/functions/eval: Test very recursive $(eval ...) calls
750         with simple variable expansion (bug #2238).
752         * scripts/functions/word: Test error handling for word and
753         wordlist functions (bug #2407).
755 2003-01-22  Paul D. Smith  <psmith@gnu.org>
757         * scripts/functions/call: Test recursive argument masking (bug
758         #1744).
760 2002-10-25  Paul D. Smith  <psmith@gnu.org>
762         * scripts/functions/eval: Test using $(eval ...) inside
763         conditionals (Bug #1516).
765 2002-10-14  Paul D. Smith  <psmith@gnu.org>
767         * scripts/options/dash-t: Add a test for handling -t on targets
768         with no commands (Bug #1418).
770 2002-10-13  Paul D. Smith  <psmith@gnu.org>
772         * scripts/features/targetvars: Add a test for exporting
773         target-specific vars (Bug #1391).
775 2002-10-05  Paul D. Smith  <psmith@gnu.org>
777         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
778         and $${@F}.
780 2002-09-23  Paul D. Smith  <psmith@gnu.org>
782         * scripts/features/escape: Test handling of escaped comment
783         characters in targets and prerequisites.
785 2002-09-18  Paul D. Smith  <psmith@gnu.org>
787         * scripts/features/export: Test export/unexport of multiple
788         variables in a single command.
790 2002-09-17  Paul D. Smith  <psmith@gnu.org>
792         * scripts/features/targetvars: Tests for Bug #940: test
793         target-specific and pattern-specific variables in conjunction with
794         double-colon targets.
796 2002-09-10  Paul D. Smith  <psmith@gnu.org>
798         * test_driver.pl (compare_output): Match the new format for time
799         skew error messages.
801         * scripts/features/export: Created.  Add tests for export/unexport
802         capabilities, including exporting/unexporting expanded variables.
804         * scripts/features/conditionals: Add a test for expanded variables
805         in ifdef conditionals.
807 2002-09-04  Paul D. Smith  <psmith@gnu.org>
809         * scripts/features/reinvoke: Change touch/sleep combos to utouch
810         invocations.
811         * scripts/features/vpathgpath: Ditto.
812         * scripts/features/vpathplus: Ditto.
813         * scripts/options/dash-n: Ditto.
814         * scripts/targets/INTERMEDIATE: Ditto.
815         * scripts/targets/SECONDARY: Ditto.
817         * scripts/options/dash-t: Added a test for the -t bug fixed by
818         Henning Makholm.  This test was also contributed by Henning.
820         * scripts/misc/general4: Add a test suite for obscure algorithmic
821         features of make.  First test: make sure creation subdirectories
822         as prerequisites of targets works properly.
824         * scripts/misc/version: Remove this bogus test.
826 2002-08-07  Paul D. Smith  <psmith@gnu.org>
828         * scripts/misc/general3: Add a test for makefiles that don't end
829         in newlines.
831         * scripts/variables/special: Create tests for the special
832         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
833         for now as it's not yet supported.
835 2002-08-01  Paul D. Smith  <psmith@gnu.org>
837         * scripts/options/dash-B: Add a test for the new -B option.
839 2002-07-11  Paul D. Smith  <psmith@gnu.org>
841         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
842         -valgrind option to the test suite.
843         (set_more_defaults): Set up the file descriptor to capture
844         Valgrind output.  We have to unset its close-on-exec flag; we
845         hardcode the value for F_SETFD (2) rather than load it; hopefully
846         this will help us avoid breaking the Windows/DOS test suite.
848 2002-07-10  Paul D. Smith  <psmith@gnu.org>
850         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
851         $$(@F).
853         * test_driver.pl (utouch): Create a new function that creates a
854         file with a specific timestamp offset.  Use of this function will
855         let us avoid lots of annoying sleep() invocations in the tests
856         just to get proper timestamping, which will make the tests run a
857         lot faster.  So far it's only used in the automatic test suite.
859 2002-07-09  Paul D. Smith  <psmith@gnu.org>
861         * scripts/variables/automatic: Create a test for automatic variables.
863 2002-07-08  Paul D. Smith  <psmith@gnu.org>
865         * scripts/features/order_only: Test new order-only prerequisites.
867 2002-07-07  Paul D. Smith  <psmith@gnu.org>
869         * scripts/functions/eval: Test new function.
870         * scripts/functions/value: Test new function.
871         * scripts/variables/MAKEFILE_LIST: Test new variable.
873 2002-04-28  Paul D. Smith  <psmith@gnu.org>
875         * scripts/functions/call: New test: transitive closure
876         implementation using $(call ...) to test variable recursion.
878 2002-04-21  Paul D. Smith  <psmith@gnu.org>
880         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
881         directories in the script directories.
883 2001-05-02  Paul D. Smith  <psmith@gnu.org>
885         * scripts/variables/flavors: Test define/endef scripts where only
886         one of the command lines is quiet.
888 2000-06-22  Paul D. Smith  <psmith@gnu.org>
890         * scripts/options/dash-q: New file; test the -q option.  Includes
891         a test for PR/1780.
893 2000-06-21  Paul D. Smith  <psmith@gnu.org>
895         * scripts/features/targetvars: Added a test for PR/1709: allowing
896         semicolons in target-specific variable values.
898 2000-06-19  Paul D. Smith  <psmith@gnu.org>
900         * scripts/functions/addsuffix: Test for an empty final argument.
901         Actually this bug might have happened for any function, but this
902         one was handy.
904 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
906         * scripts/options/general: If parallel jobs are not supported,
907         expect a warning message from Make.
909 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
911         * scripts/options/general: Don't try -jN with N != 1 if parallel
912         jobs are not supported.
914 2000-05-24  Paul D. Smith  <psmith@gnu.org>
916         * scripts/options/general: Test general option processing (PR/1716).
918 2000-04-11  Paul D. Smith  <psmith@gnu.org>
920         * scripts/functions/strip: Test empty value to strip (PR/1689).
922 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
924         * scripts/features/reinvoke: Sleep before updating the target
925         files in the first test, to ensure its time stamp really gets
926         newer; otherwise Make might re-exec more than once.
928 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
930         * scripts/features/double_colon: Don't run the parallel tests if
931         parallel jobs aren't supported.
933 2000-04-04  Paul D. Smith  <psmith@gnu.org>
935         * scripts/functions/word: wordlist doesn't swap arguments anymore.
937 2000-03-27  Paul D. Smith  <psmith@gnu.org>
939         * scripts/features/statipattrules: Test that static pattern rules
940         whose prerequisite patterns resolve to empty strings throw an
941         error (instead of dumping core).  Fixes PR/1670.
943         * scripts/features/reinvoke: Make more robust by touching "b"
944         first, to ensure it's not newer than "a".
945         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
946         * scripts/options/dash-n: Ditto.
948         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
949         recursive invocations of $(call ...) to break.  I can't come up
950         with any way to get both working at the same time, so I backed out
951         the fix to 1527 and added a test case for recursive calls.  This
952         also tests the fix for PR/1610.
954         * scripts/features/double_colon: Test that circular dependencies
955         in double-colon rule sets are detected correctly (PR/1671).
957 2000-03-26  Paul D. Smith  <psmith@gnu.org>
959         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
960         .INTERMEDIATE files when given on the command line (PR/1669).
962 2000-03-08  Paul D. Smith  <psmith@gnu.org>
964         * scripts/options/dash-k: Add a test for error detection by
965         multiple targets depending on the same prerequisite with -k.
966         For PR/1634.
968 2000-02-07  Paul D. Smith  <psmith@gnu.org>
970         * scripts/features/escape: Add a test for backslash-escaped spaces
971         in a target name (PR/1586).
973 2000-02-04  Paul D. Smith  <psmith@gnu.org>
975         * scripts/features/patspecific_vars: Add a test for pattern-specific
976         target variables inherited from the parent target (PR/1407).
978 2000-02-02  Paul D. Smith  <psmith@gnu.org>
980         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
981         to make sure sorting order, etc. is predictable.
982         Reported by Andreas Jaeger <aj@suse.de>.
984         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
985         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
986         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
987         1 for other systems.
988         * scripts/features/vpathplus (touchfiles): Use the $wtime value
989         instead of hardcoding 2.
990         * scripts/targets/SECONDARY: Ditto.
991         * scripts/targets/INTERMEDIATE: Ditto.
993 2000-01-27  Paul D. Smith  <psmith@gnu.org>
995         * test_driver.pl (toplevel): Don't try to run test scripts which
996         are really directories.
998 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1000         * scripts/features/include: Remove a check; the fix caused more
1001         problems than the error, so I removed it and removed the test for
1002         it.
1004 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1006         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1007         sure $(call ...) doesn't eval its arguments and that you can
1008         invoke foreach from it without looping forever.
1010 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1012         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1013         .INTERMEDIATE settings on files don't disable them as implicit
1014         intermediate possibilities.
1016 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1018         * scripts/features/double_colon: Add a test for PR/1476: Try
1019         double-colon rules as non-goal targets and during parallel builds
1020         to make sure they're handled serially.
1022 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1024         * scripts/functions/if: Add a test for PR/1429: put some text
1025         after an if-statement to make sure it works.
1027         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1028         in target-specific variable definitions correctly.
1030 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1032         * scripts/variables/MAKEFILES: This was really broken: it didn't
1033         test anything at all, really.  Rewrote it, plus added a test for
1034         PR/1394.
1036 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1038         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1039         behave properly when used with recursive targets".
1041 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1043         * scripts/features/targetvars: Add a check for PR/1378:
1044         "Target-specific vars don't inherit correctly"
1046 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1048         * test_driver.pl (get_osname): Change $fancy_file_names to
1049         $short_filenames and reverse the logic.
1050         (run_each_test): Change test of non-existent $port_host to use
1051         $short_filenames--problem reported by Eli Zaretskii.
1053 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1055         * scripts/features/parallelism: Add a check to ensure that the
1056         jobserver works when we re-invoke.  Also cleaned up the tests a
1057         little, reducing the number of rules we use so the test won't need
1058         as many "sleep" commands.
1060 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1062         * scripts/features/reinvoke: Remove invocations of "touch" in
1063         makefiles.  See the comments on the touch function rewrite below.
1064         Note that UNIX touch behaves the same way if the file already
1065         exists: it sets the time to the _local_ time.  We don't want
1066         this.  This is probably a good tip for makefile writers in
1067         general, actually... where practical.
1068         * scripts/options/dash-l: Ditto.
1069         * scripts/options/dash-n: Ditto.
1071         * test_driver.pl (run_each_test): In retrospect, I don't like the
1072         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1073         changed it back to use .log, .base, and .diff.
1075         * run_make_tests.pl (set_more_defaults): Move the check for the
1076         make pathname to here from set_defaults (that's too early since it
1077         happens before the command line processing).
1078         Create a new variable $port_type, calculated from $osname, to
1079         specify what kind of system we're running on.  We should integrate
1080         the VOS stuff here, too.
1081         (valid_option): Comment out the workdir/-work stuff so people
1082         won't be fooled into thinking it works... someone needs to fix
1083         this, though!
1085         * scripts/functions/origin: Use $port_type instead of $osname.
1086         * scripts/functions/foreach: Ditto.
1087         * scripts/features/default_names: Ditto.
1089 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1091         * test_driver.pl (touch): Rewrite this function.  Previously it
1092         used to use utime() to hard-set the time based on the current
1093         local clock, or, if the file didn't exist, it merely created it.
1094         This mirrors exactly what real UNIX touch does, but it fails badly
1095         on networked filesystems where the FS server clock is skewed from
1096         the local clock: normally modifying a file causes it to get a mod
1097         time based on the _server's_ clock.  Hard-setting it based on the
1098         _local_ clock causes gratuitous errors and makes the tests
1099         unreliable except on local filesystems.  The new function will
1100         simply modify the file, allowing the filesystem to set the mod
1101         time as it sees fit.
1103         * scripts/features/parallelism: The second test output could
1104         change depending on how fast some scripts completed; use "sleep"
1105         to force the order we want.
1107         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1108         means that "%ENV = ();" doesn't do the right thing.  This worked
1109         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1110         the environment rather than require specific versions.
1112         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1113         modifier "s", so the tests will run with Perl 4.
1114         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1115         option in PURIFYOPTIONS.
1116         (setup_for_test): Don't remove any logs unless $pure_log is set.
1118 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1120         * scripts/features/reinvoke: Put the SHELL definition in the right
1121         test makefile.
1123 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1125         ChangeLog file for the test suite created.
1128 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1129 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1130 This file is part of GNU Make.
1132 GNU Make is free software; you can redistribute it and/or modify it under the
1133 terms of the GNU General Public License as published by the Free Software
1134 Foundation; either version 3 of the License, or (at your option) any later
1135 version.
1137 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1138 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1139 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1141 You should have received a copy of the GNU General Public License along with
1142 this program.  If not, see <http://www.gnu.org/licenses/>.