Ensure private variables are not used when appending target-specific
[make.git] / tests / ChangeLog
blob629242c02f293030d4abf13ae408fe75ad2650de
1 2011-05-07  Paul Smith  <psmith@gnu.org>
3         * scripts/variables/private: Ensure we skip private variables when
4         appending.  Test for Savannah bug #32872.
6         * scripts/functions/wildcard: Verify wildcard used to test for
7         file existence/non-existence.
9 2011-05-02  Paul Smith  <psmith@gnu.org>
11         * scripts/functions/sort: Add a test for Savannah bug #33125.
13 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
15         * scripts/features/shell_assignment: Regression for "!=" feature
17 2010-11-06  Paul Smith  <psmith@gnu.org>
19         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
20         * scripts/functions/call: Ditto.
21         * scripts/variables/special: Ditto.
23         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
25 2010-08-29  Paul Smith  <psmith@gnu.org>
27         * scripts/features/errors: Add new error message to output text.
28         * scripts/variables/SHELL: Ditto.
29         * scripts/targets/POSIX: Ditto.
30         * scripts/options/dash-k: Ditto.
31         * scripts/features/vpathplus: Ditto.
32         * scripts/features/patternrules: Ditto.
33         * scripts/features/parallelism: Ditto.
35 2010-08-13  Paul Smith  <psmith@gnu.org>
37         * scripts/features/archives: New regression tests for archive
38         support.  Test for fix to Savannah bug #30612.
40         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
41         the features available in $(.FEATURES).
43 2010-08-10  Paul Smith  <psmith@gnu.org>
45         * scripts/features/reinvoke: Ensure command line variable settings
46         are preserved across make re-exec.  Tests Savannah bug #30723.
48 2010-07-28  Paul Smith  <psmith@gnu.org>
50         * scripts/targets/POSIX: Compatibility issues with Solaris (and
51         Tru64?); "false" returns different exit codes, and set -x shows
52         output with extra whitespace.  Run the commands by hand first to
53         find out what the real shell would do, then compare what make does.
54         * scripts/variables/SHELL: Ditto.
56 2010-07-12  Paul Smith  <psmith@gnu.org>
58         * test_driver.pl: Add a new $perl_name containing the path to Perl.
59         * run_make_tests.pl (run_make_test): Replace the special string
60         #PERL# in a makefile etc. with the path the Perl executable so
61         makefiles can use it.
63         * scripts/targets/ONESHELL: Add a new set of regression tests for
64         the .ONESHELL feature.
66 2010-07-06  Paul Smith  <psmith@gnu.org>
68         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
70         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
71         Verify that enabling .POSIX changes the shell flags to set -e.
73 2010-07-01  Paul Smith  <psmith@gnu.org>
75         * scripts/features/recursion: Add a space to separate command-line
76         args.  Fixes Savannah bug #29968.
78 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
80         * scripts/features/vpath3: Test for the new library search
81         behavior.
83 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
85         * scripts/features/se_explicit: Enable the test for now fixed
86         Savannah bug 25780.
88 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
90         * scripts/variables/undefine: Tests for the new undefine feature.
92 2009-10-03  Paul Smith  <psmith@gnu.org>
94         * scripts/features/parallelism: Test for open Savannah bug #26846.
96         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
98         * scripts/variables/MAKEFLAGS: Created.
99         Add test for Savannah bug #2216 (still open).
101         * scripts/features/include: Test for Savannah bug #102 (still open).
103 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
105         * scripts/features/include: Add diagnostics issuing tests for
106         cases where targets have been updated and failed with the
107         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
109 2009-09-28  Paul Smith  <psmith@gnu.org>
111         * scripts/functions/shell: Add regression test for Savannah bug
112         #20513 (still open).
114         * scripts/features/se_explicit: Add regression tests for Savannah
115         bug #25780 (still open).
117         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
118         that runs tests we know will fail.  This allows us to add
119         regression tests to the test suite for bugs that haven't been
120         fixed yet.
122 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
124         * scripts/features/patspecific_vars: Add a test for the shortest
125         stem first order.
127         * scripts/features/patternrules: Add a test for the shortest stem
128         first order.
130 2009-09-24  Paul Smith  <psmith@gnu.org>
132         * scripts/features/se_implicit: Add a test for order-only
133         secondary expansion prerequisites.
135 2009-09-23  Paul Smith  <psmith@gnu.org>
137         * scripts/features/patternrules: Test that we can remove pattern
138         rules, both single and multiple prerequisites.  Savannah bug #18622.
140         * scripts/features/echoing: Rework for run_make_test().
142 2009-06-14  Paul Smith  <psmith@gnu.org>
144         * scripts/features/vpath: Verify we don't get bogus circular
145         dependency warnings if we choose a different file via vpath during
146         update.  Savannah bug #13529.
148 2009-06-13  Paul Smith  <psmith@gnu.org>
150         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
151         files (and files included by them) don't set the default goal.
152         Savannah bug #13401.
154         * scripts/functions/wildcard: Test that wildcards with
155         non-existent glob matchers return empty.
157 2009-06-09  Paul Smith  <psmith@gnu.org>
159         * scripts/options/dash-B: Test the $? works correctly with -B.
160         Savannah bug #17825.
162         * scripts/features/patternrules: Test that dependencies of
163         "also_make" targets are created properly.  Savannah bug #19108.
165         * test_driver.pl (compare_output): Create a "run" file for failed
166         tests containing the command that was run.
167         (get_runfile): New function.
169         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
170         allow memcheck and massif tools.
172         * scripts/features/patternrules: Have to comment out a line in the
173         first test due to backing out a change that broke the implicit
174         rule search algorithm.  Savannah bug #17752.
175         * scripts/misc/general4: Remove a test that is redundant with
176         patternrules.
178         * scripts/features/parallelism: Add a test for re-exec with
179         jobserver master override.  Savannah bug #18124.
181 2009-06-08  Paul Smith  <psmith@gnu.org>
183         * scripts/features/targetvars: Add a test for continued target
184         vars after a semicolon.  Savannah bug #17521.
186 2009-06-07  Paul Smith  <psmith@gnu.org>
188         * scripts/features/se_explicit: Make sure we catch defining
189         prereqs during snap_deps().  Savannah bug #24622.
191         * scripts/variables/automatic: Check prereq ordering when the
192         target with the recipe has no prereqs.  Savannah bug #21198.
194         * scripts/variables/LIBPATTERNS: Add a new set of test for
195         $(.LIBPATTERNS) (previously untested!)
197 2009-06-04  Paul Smith  <psmith@gnu.org>
199         * scripts/variables/SHELL: The export target-specific SHELL test
200         has an incorrect known-good-value.
202         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
204         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
206 2009-05-31  Paul Smith  <psmith@gnu.org>
208         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
210         * scripts/features/targetvars: Add tests of overrides for Savannah
211         bug #26207.
212         * scripts/features/patspecific_vars: Ditto.
214         * scripts/features/patternrules: Add a test for Savannah bug #26593.
216 2009-05-30  Paul Smith  <psmith@gnu.org>
218         * scripts/variables/flavors: Update with new variable flavor tests.
219         * scripts/variables/define: Create a new set of tests for
220         define/endef and move those aspects of the flavors suite here.
222 2009-05-25  Paul Smith  <psmith@gnu.org>
224         * scripts/features/targetvars: Ditto.
226         * scripts/features/export: Test new variable parsing abilities.
228 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
230         * scripts/variables/private: Create a new suite of tests for 'private'.
232 2007-11-04  Paul Smith  <psmith@gnu.org>
234         * scripts/functions/eval: Update error message for command -> recipe.
236         * test_driver.pl (compare_output): Allow the answer to be a regex,
237         if surrounded by '/'.
238         * scripts/misc/close_stdout: Use a regex for the answer, since
239         sometimes the error will have a description and sometimes it won't.
241 2007-09-10  Paul Smith  <psmith@gnu.org>
243         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
245 2007-08-15  Paul Smith  <psmith@gnu.org>
247         These test cases were contributed by
248         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
249         Savannah bugs #3330 and #15919.
251         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
252         15919.
254         * scripts/features/parallelism: Add tests for wrong answer/hang
255         combining INTERMEDIATE, order-only prereqs, and parallelism.
256         See Savannah bugs 3330 and 15919.
258 2007-07-13  Paul Smith  <psmith@gnu.org>
260         Install a timeout so tests can never loop infinitely.
261         Original idea and patch for a single-test version provided by
262         Icarus Sparry <savannah@icarus.freeuk.com>
264         * test_driver.pl (_run_command): New function: this is called by
265         other functions to actually run a command.  Before we run it,
266         install a SIGALRM handler and set up a timer to go off in the
267         future (default is 5s; this can be overridden by individual tests).
268         (run_command): Call it.
269         (run_command_with_output): Call it.
271         * run_make_tests.pl (run_make_with_options): Override the default
272         timeout if the caller requests it.
273         (run_make_test): Pass any timeout override to run_make_with_options.
275         * scripts/features/parallelism: Increase the timeout for long tests.
276         * scripts/options/dash-l: Ditto.
278 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
280         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
281         ENV here.  This doesn't always work.
282         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
283         environment.  Fixes Savannah bug #16698.
285 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
287         * scripts/variables/automatic: Add back the test for bug #8154.
289 2006-04-01  Paul D. Smith  <psmith@gnu.org>
291         * scripts/functions/realpath: Don't run tests with multiple
292         initial slashes on Windows: those paths mean something different.
294 2006-03-19  Paul D. Smith  <psmith@gnu.org>
296         * scripts/features/parallelism: Test that the jobserver is
297         properly managed when we have to re-exec the master instance of
298         make.
300 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
302         * scripts/features/statipattrules: Add tests for bug #16053.
304 2006-03-09  Paul Smith  <psmith@gnu.org>
306         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
307         with DOS drive letters.  Fixes Savannah bug #15947.
309         * test_driver.pl (run_each_test): Set the status properly even
310         when a test fails to execute.  Fixes Savannah bug #15942.
312         * scripts/functions/foreach: Use a different environment variable
313         other than PATH to avoid differences with Windows platforms.
314         Fixes Savannah bug #15938.
316 2006-03-05  Paul D. Smith  <psmith@gnu.org>
318         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
319         type W32.  Fixed Savannah bug #15937.
321         * scripts/features/default_names: Don't call error() when the test
322         fails.  Fixes Savannah bug #15941.
324 2006-02-17  Paul D. Smith  <psmith@gnu.org>
326         * scripts/features/targetvars: Test a complex construction which
327         guarantees that we have to merge variable lists of different
328         sizes.  Tests for Savannah bug #15757.
330 2006-02-15  Paul D. Smith  <psmith@gnu.org>
332         * scripts/functions/error: Make sure filename/lineno information
333         is related to where the error is expanded, not where it's set.
334         * scripts/functions/warning: Ditto.
335         * scripts/functions/foreach: Check for different error conditions.
336         * scripts/functions/word: Ditto.
337         * scripts/variables/negative: Test some variable reference failure
338         conditions.
339         * scripts/options/warn-undefined-variables: Test the
340         --warn-undefined-variables flag.
342 2006-02-09  Paul D. Smith  <psmith@gnu.org>
344         * run_make_tests.pl (set_more_defaults): Update valgrind support
345         for newer versions.
346         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
347         beginning with ".").
349         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
350         functions.
352 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
354         * scripts/features/parallelism: Add a test for bug #15641.
356 2006-02-06  Paul D. Smith  <psmith@gnu.org>
358         * scripts/options/dash-W: Add a test for bug #15341.
360 2006-01-03  Paul D. Smith  <psmith@gnu.org>
362         * scripts/variables/automatic: Add a test for bug #8154.
364         * README: Update to reflect the current state of the test suite.
366 2005-12-12  Paul D. Smith  <psmith@gnu.org>
368         * scripts/features/parallelism, scripts/functions/wildcard,
369         scripts/targets/FORCE, scripts/targets/PHONY,
370         scripts/targets/SILENT: Use the default setting for
371         $delete_command.  Fixes bug #15085.
373         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
375 2005-12-11  Paul D. Smith  <psmith@gnu.org>
377         * scripts/misc/general4: Test implicit rules with '$' in the
378         prereq list & prereq patterns.
379         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
381 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
383         * scripts/features/patternrules: Add a test for bug #13022.
385 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
387         * scripts/features/double_colon: Add a test for bug #14334.
389 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
391         * scripts/functions/flavor: Add a test for the flavor function.
393 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
395         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
396         special variable.
398 2005-10-24  Paul D. Smith  <psmith@gnu.org>
400         * scripts/misc/general4: Test '$$' in prerequisites list.
401         * scripts/features/statipattrules: Rewrite to use run_make_test().
402         Add various static pattern info.
403         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
404         * scripts/features/se_explicit: Add tests for handling '$$' in
405         prerequisite lists with and without setting .SECONDEXPANSION.
406         * scripts/features/order_only: Convert to run_make_test().
407         * run_make_tests.pl (set_more_defaults): If we can't get the value
408         of $(MAKE) from make, then fatal immediately.
410 2005-08-31  Paul D. Smith  <psmith@gnu.org>
412         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
413         an eval to trap errors) and if it exists, use POSIX::getcwd to
414         find the working directory.  If it doesn't exist, go back to the
415         previous methods.  This tries to be more accurate on Windows
416         systems.
418 2005-08-29  Paul D. Smith  <psmith@gnu.org>
420         * scripts/functions/abspath: Add some text to the error messages
421         to get a better idea of what's wrong.  Make warnings instead of
422         errors.
424         * scripts/features/patspecific_vars: Don't use "test", which is
425         UNIX specific.  Print the values and let the test script match
426         them.
428 2005-08-25  Paul Smith  <psmith@gnu.org>
430         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
431         former works better with non-UNIX environments.  Fixes Savannah
432         bug #14129.
434 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
436         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
437         $(sort) so that the resulting order is no longer filesystem-
438         dependant.
440 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
442         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
444 2005-08-07  Paul D. Smith  <psmith@gnu.org>
446         * scripts/features/parallelism: Add a test for a bug reported by
447         Michael Matz (matz@suse.de) in which make exits without waiting
448         for all its children in some situations during parallel builds.
450 2005-07-08  Paul D. Smith  <psmith@gnu.org>
452         * test_driver.pl: Reset the environment to a clean value every
453         time before we invoke make.  I'm suspicious that the environment
454         isn't handled the same way in Windows as it is in UNIX, and some
455         variables are leaking out beyond the tests they are intended for.
456         Create an %extraENV hash tests can set to add more env. vars.
457         * tests/scripts/features/export: Change to use %extraENV.
458         * tests/scripts/functions/eval: Ditto.
459         * tests/scripts/functions/origin: Ditto.
460         * tests/scripts/options/dash-e: Ditto.
461         * tests/scripts/variables/SHELL: Ditto.
463 2005-06-27  Paul D. Smith  <psmith@gnu.org>
465         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
466         files.
467         * scripts/features/reinvoke: Rewrite to be safer on systems with
468         subsecond timestamps.
469         * scripts/features/patternrules: False exits with different error
470         codes on different systems (for example, Linux => 1, Solaris => 255).
472         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
473         to be sure it will be considered updated when it's remade.
475 2005-06-26  Paul D. Smith  <psmith@gnu.org>
477         * scripts/functions/shell: New test suite for the shell function.
479 2005-06-25  Paul D. Smith  <psmith@gnu.org>
481         * scripts/features/include: Test include/-include/sinclude with no
482         arguments.  Tests fix for Savannah bug #1761.
484         * scripts/misc/general3: Implement comprehensive testing of
485         backslash-newline behavior in command scripts: various types of
486         quoting, fast path / slow path, etc.
487         Tests fix for Savannah bug #1332.
489         * scripts/options/symlinks: Test symlinks to non-existent files.
490         Tests fix for Savannah bug #13280.
492         * scripts/misc/general3: Test semicolons in variable references.
493         Tests fix for Savannah bug #1454.
495         * scripts/variables/MAKE_RESTARTS: New file: test the
496         MAKE_RESTARTS variable.
497         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
498         Tests fix for Savannah bug #7566.
499         * scripts/options/dash-W: New file: test the -W flag, including
500         re-exec infinite looping.
502 2005-06-12  Paul D. Smith  <psmith@gnu.org>
504         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
505         This test only works on systems that have /dev/full (e.g., Linux).
507 2005-06-09  Paul D. Smith  <psmith@gnu.org>
509         * scripts/functions/foreach: Add a test for Savannah bug #11913.
511 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
513         * scripts/features/include: Add a test for Savannah bug #13216.
514         * scripts/features/patternrules: Add a test for Savannah bug #13218.
516 2005-05-13  Paul D. Smith  <psmith@gnu.org>
518         * scripts/features/conditionals: Add tests for the new if... else
519         if... endif syntax.
521 2005-05-03  Paul D. Smith  <psmith@gnu.org>
523         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
524         DEFAULT_GOAL.
526 2005-05-02  Paul D. Smith  <psmith@gnu.org>
528         * scripts/features/parallelism: Add a test for exporting recursive
529         variables containing $(shell ) calls.  Rewrite this script to use
530         run_make_test() everywhere.
532 2005-04-07  Paul D. Smith  <psmith@gnu.org>
534         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
536 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
538         * scripts/variables/automatic: Add a test for Savannah bug #12320.
540 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
542         * scripts/features/patternrules: Add a test for Savannah bug #12267.
544 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
546         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
547         bug #12266.
549 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
551         * scripts/features/patternrules: Add a test for Savannah bug #12202.
553 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
555         * scripts/features/se_implicit: Add a test for stem
556         termination bug. Add a test for stem triple-expansion bug.
558         * scripts/features/se_statpat: Add a test for stem
559         triple-expansion bug.
561         * scripts/features/statipattrules: Change test #4 to reflect
562         new way empty prerequisite list is handled.
565 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
567         * scripts/features/statipattrules: Add a test for
568         Savannah bug #12180.
570 2005-02-28  Paul D. Smith  <psmith@gnu.org>
572         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
574         * scripts/options/symlinks: New file to test checking of symlink
575         timestamps.  Can't use filename dash-L because it conflicts with
576         dash-l on case-insensitive filesystems.
578         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
579         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
580         unique filenames.
582 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
584         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
585         special variable.
587 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
589         * scripts/features/se_explicit: Test the second expansion in
590         explicit rules.
591         * scripts/features/se_implicit: Test the second expansion in
592         implicit rules.
593         * scripts/features/se_statpat: Test the second expansion in
594         static pattern rules.
595         * scripts/variables/automatic: Fix to work with the second
596         expansion.
598         * scripts/misc/general4: Add a test for bug #12091.
600 2005-02-27  Paul D. Smith  <psmith@gnu.org>
602         * scripts/functions/eval: Check that eval of targets within
603         command scripts fails.  See Savannah bug # 12124.
605 2005-02-26  Paul D. Smith  <psmith@gnu.org>
607         * test_driver.pl (compare_output): If a basic comparison of the
608         log and answer doesn't match, try harder: change all backslashes
609         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
611 2005-02-09  Paul D. Smith  <psmith@gnu.org>
613         * scripts/features/recursion: Test command line variable settings:
614         only one instance of a given variable should be provided.
616 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
618         * tests/scripts/functions/abspath: New file: test `abspath'
619         built-in function.
621         * tests/scripts/functions/realpath: New file: test `realpath'
622         built-in function.
624 2004-11-28  Paul D. Smith  <psmith@gnu.org>
626         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
627         this doesn't really test anything useful in UNIX but...
629         * scripts/variables/SHELL: New file: test proper handling of SHELL
630         according to POSIX rules.  Fixes bug #1276.
632 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
634         * scripts/functions/word: Test $(firstword ) and $(lastword ).
636 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
638         * scripts/features/patspecific_vars: Test simple/recursive
639         variable expansion.
641 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
643         * scripts/features/include: Test dontcare flag inheritance
644         when rebuilding makefiles.
646 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
648         * scripts/features/patspecific_vars: Test exported variables.
650 2004-09-22  Paul D. Smith  <psmith@gnu.org>
652         * run_make_tests.pl (run_make_test): Don't add newlines to the
653         makestring or answer if they are completely empty.
655         * scripts/features/patternrules: Rename from implicit_prereq_eval.
657         * scripts/test_template: Rework the template.
659 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
661         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
662         `#!/usr/bin/env perl'.
664         * scripts/features/implicit_prereq_eval: Test implicit rule
665         prerequisite evaluation code.
667 2004-09-21  Paul D. Smith  <psmith@gnu.org>
669         * run_make_tests.pl (run_make_test): Enhance to allow the make
670         string to be undef: in that case it reuses the previous make
671         string.  Allows multiple tests on the same makefile.
673         * scripts/variables/flavors: Add some tests for prefix characters
674         interacting with define/endef variables.
676 2004-09-20  Paul D. Smith  <psmith@gnu.org>
678         * scripts/functions/substitution: Rewrite to use run_make_test()
679         interface, and add test for substitution failures reported by
680         Markus Mauhart <qwe123@chello.at>.
682 2004-03-22  Paul D. Smith  <psmith@gnu.org>
684         * test_driver.pl (run_each_test, toplevel, compare_output): Change
685         to track both the testing categories _AND_ the number of
686         individual tests, and report both sets of numbers.
688 2004-02-21  Paul D. Smith  <psmith@gnu.org>
690         * scripts/functions/origin: Set our own environment variable
691         rather than relying on $HOME.
693 2004-01-21  Paul D. Smith  <psmith@gnu.org>
695         * scripts/features/conditionals: Test arguments to ifn?def which
696         contain whitespace (such as a function that is evaluated).  Bug
697         #7257.
699 2004-01-07  Paul D. Smith  <psmith@gnu.org>
701         * scripts/features/order_only: Test order-only prerequisites in
702         pattern rules (patch #2349).
704 2003-11-02  Paul D. Smith  <psmith@gnu.org>
706         * scripts/functions/if: Test if on conditionals with trailing
707         whitespace--bug #5798.
709         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
711 2003-04-19  Paul D. Smith  <psmith@gnu.org>
713         * scripts/features/patspecific_vars: Test multiple patterns
714         matching the same target--Bug #1405.
716 2003-04-09  Paul D. Smith  <psmith@gnu.org>
718         * run_make_tests.pl (set_more_defaults): A new $port_type of
719         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
720         for OS/2.
722 2003-03-28  Paul D. Smith  <psmith@gnu.org>
724         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
725         not prerequisites)--Bug #2515.
727 2003-01-30  Paul D. Smith  <psmith@gnu.org>
729         * scripts/features/targetvars: Test very long target-specific
730         variable definition lines (longer than the default make buffer
731         length).  Tests patch # 1022.
733         * scripts/functions/eval: Test very recursive $(eval ...) calls
734         with simple variable expansion (bug #2238).
736         * scripts/functions/word: Test error handling for word and
737         wordlist functions (bug #2407).
739 2003-01-22  Paul D. Smith  <psmith@gnu.org>
741         * scripts/functions/call: Test recursive argument masking (bug
742         #1744).
744 2002-10-25  Paul D. Smith  <psmith@gnu.org>
746         * scripts/functions/eval: Test using $(eval ...) inside
747         conditionals (Bug #1516).
749 2002-10-14  Paul D. Smith  <psmith@gnu.org>
751         * scripts/options/dash-t: Add a test for handling -t on targets
752         with no commands (Bug #1418).
754 2002-10-13  Paul D. Smith  <psmith@gnu.org>
756         * scripts/features/targetvars: Add a test for exporting
757         target-specific vars (Bug #1391).
759 2002-10-05  Paul D. Smith  <psmith@gnu.org>
761         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
762         and $${@F}.
764 2002-09-23  Paul D. Smith  <psmith@gnu.org>
766         * scripts/features/escape: Test handling of escaped comment
767         characters in targets and prerequisites.
769 2002-09-18  Paul D. Smith  <psmith@gnu.org>
771         * scripts/features/export: Test export/unexport of multiple
772         variables in a single command.
774 2002-09-17  Paul D. Smith  <psmith@gnu.org>
776         * scripts/features/targetvars: Tests for Bug #940: test
777         target-specific and pattern-specific variables in conjunction with
778         double-colon targets.
780 2002-09-10  Paul D. Smith  <psmith@gnu.org>
782         * test_driver.pl (compare_output): Match the new format for time
783         skew error messages.
785         * scripts/features/export: Created.  Add tests for export/unexport
786         capabilities, including exporting/unexporting expanded variables.
788         * scripts/features/conditionals: Add a test for expanded variables
789         in ifdef conditionals.
791 2002-09-04  Paul D. Smith  <psmith@gnu.org>
793         * scripts/features/reinvoke: Change touch/sleep combos to utouch
794         invocations.
795         * scripts/features/vpathgpath: Ditto.
796         * scripts/features/vpathplus: Ditto.
797         * scripts/options/dash-n: Ditto.
798         * scripts/targets/INTERMEDIATE: Ditto.
799         * scripts/targets/SECONDARY: Ditto.
801         * scripts/options/dash-t: Added a test for the -t bug fixed by
802         Henning Makholm.  This test was also contributed by Henning.
804         * scripts/misc/general4: Add a test suite for obscure algorithmic
805         features of make.  First test: make sure creation subdirectories
806         as prerequisites of targets works properly.
808         * scripts/misc/version: Remove this bogus test.
810 2002-08-07  Paul D. Smith  <psmith@gnu.org>
812         * scripts/misc/general3: Add a test for makefiles that don't end
813         in newlines.
815         * scripts/variables/special: Create tests for the special
816         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
817         for now as it's not yet supported.
819 2002-08-01  Paul D. Smith  <psmith@gnu.org>
821         * scripts/options/dash-B: Add a test for the new -B option.
823 2002-07-11  Paul D. Smith  <psmith@gnu.org>
825         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
826         -valgrind option to the test suite.
827         (set_more_defaults): Set up the file descriptor to capture
828         Valgrind output.  We have to unset its close-on-exec flag; we
829         hardcode the value for F_SETFD (2) rather than load it; hopefully
830         this will help us avoid breaking the Windows/DOS test suite.
832 2002-07-10  Paul D. Smith  <psmith@gnu.org>
834         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
835         $$(@F).
837         * test_driver.pl (utouch): Create a new function that creates a
838         file with a specific timestamp offset.  Use of this function will
839         let us avoid lots of annoying sleep() invocations in the tests
840         just to get proper timestamping, which will make the tests run a
841         lot faster.  So far it's only used in the automatic test suite.
843 2002-07-09  Paul D. Smith  <psmith@gnu.org>
845         * scripts/variables/automatic: Create a test for automatic variables.
847 2002-07-08  Paul D. Smith  <psmith@gnu.org>
849         * scripts/features/order_only: Test new order-only prerequisites.
851 2002-07-07  Paul D. Smith  <psmith@gnu.org>
853         * scripts/functions/eval: Test new function.
854         * scripts/functions/value: Test new function.
855         * scripts/variables/MAKEFILE_LIST: Test new variable.
857 2002-04-28  Paul D. Smith  <psmith@gnu.org>
859         * scripts/functions/call: New test: transitive closure
860         implementation using $(call ...) to test variable recursion.
862 2002-04-21  Paul D. Smith  <psmith@gnu.org>
864         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
865         directories in the script directories.
867 2001-05-02  Paul D. Smith  <psmith@gnu.org>
869         * scripts/variables/flavors: Test define/endef scripts where only
870         one of the command lines is quiet.
872 2000-06-22  Paul D. Smith  <psmith@gnu.org>
874         * scripts/options/dash-q: New file; test the -q option.  Includes
875         a test for PR/1780.
877 2000-06-21  Paul D. Smith  <psmith@gnu.org>
879         * scripts/features/targetvars: Added a test for PR/1709: allowing
880         semicolons in target-specific variable values.
882 2000-06-19  Paul D. Smith  <psmith@gnu.org>
884         * scripts/functions/addsuffix: Test for an empty final argument.
885         Actually this bug might have happened for any function, but this
886         one was handy.
888 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
890         * scripts/options/general: If parallel jobs are not supported,
891         expect a warning message from Make.
893 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
895         * scripts/options/general: Don't try -jN with N != 1 if parallel
896         jobs are not supported.
898 2000-05-24  Paul D. Smith  <psmith@gnu.org>
900         * scripts/options/general: Test general option processing (PR/1716).
902 2000-04-11  Paul D. Smith  <psmith@gnu.org>
904         * scripts/functions/strip: Test empty value to strip (PR/1689).
906 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
908         * scripts/features/reinvoke: Sleep before updating the target
909         files in the first test, to ensure its time stamp really gets
910         newer; otherwise Make might re-exec more than once.
912 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
914         * scripts/features/double_colon: Don't run the parallel tests if
915         parallel jobs aren't supported.
917 2000-04-04  Paul D. Smith  <psmith@gnu.org>
919         * scripts/functions/word: wordlist doesn't swap arguments anymore.
921 2000-03-27  Paul D. Smith  <psmith@gnu.org>
923         * scripts/features/statipattrules: Test that static pattern rules
924         whose prerequisite patterns resolve to empty strings throw an
925         error (instead of dumping core).  Fixes PR/1670.
927         * scripts/features/reinvoke: Make more robust by touching "b"
928         first, to ensure it's not newer than "a".
929         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
930         * scripts/options/dash-n: Ditto.
932         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
933         recursive invocations of $(call ...) to break.  I can't come up
934         with any way to get both working at the same time, so I backed out
935         the fix to 1527 and added a test case for recursive calls.  This
936         also tests the fix for PR/1610.
938         * scripts/features/double_colon: Test that circular dependencies
939         in double-colon rule sets are detected correctly (PR/1671).
941 2000-03-26  Paul D. Smith  <psmith@gnu.org>
943         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
944         .INTERMEDIATE files when given on the command line (PR/1669).
946 2000-03-08  Paul D. Smith  <psmith@gnu.org>
948         * scripts/options/dash-k: Add a test for error detection by
949         multiple targets depending on the same prerequisite with -k.
950         For PR/1634.
952 2000-02-07  Paul D. Smith  <psmith@gnu.org>
954         * scripts/features/escape: Add a test for backslash-escaped spaces
955         in a target name (PR/1586).
957 2000-02-04  Paul D. Smith  <psmith@gnu.org>
959         * scripts/features/patspecific_vars: Add a test for pattern-specific
960         target variables inherited from the parent target (PR/1407).
962 2000-02-02  Paul D. Smith  <psmith@gnu.org>
964         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
965         to make sure sorting order, etc. is predictable.
966         Reported by Andreas Jaeger <aj@suse.de>.
968         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
969         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
970         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
971         1 for other systems.
972         * scripts/features/vpathplus (touchfiles): Use the $wtime value
973         instead of hardcoding 2.
974         * scripts/targets/SECONDARY: Ditto.
975         * scripts/targets/INTERMEDIATE: Ditto.
977 2000-01-27  Paul D. Smith  <psmith@gnu.org>
979         * test_driver.pl (toplevel): Don't try to run test scripts which
980         are really directories.
982 2000-01-23  Paul D. Smith  <psmith@gnu.org>
984         * scripts/features/include: Remove a check; the fix caused more
985         problems than the error, so I removed it and removed the test for
986         it.
988 2000-01-11  Paul D. Smith  <psmith@gnu.org>
990         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
991         sure $(call ...) doesn't eval its arguments and that you can
992         invoke foreach from it without looping forever.
994 1999-12-15  Paul D. Smith  <psmith@gnu.org>
996         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
997         .INTERMEDIATE settings on files don't disable them as implicit
998         intermediate possibilities.
1000 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1002         * scripts/features/double_colon: Add a test for PR/1476: Try
1003         double-colon rules as non-goal targets and during parallel builds
1004         to make sure they're handled serially.
1006 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1008         * scripts/functions/if: Add a test for PR/1429: put some text
1009         after an if-statement to make sure it works.
1011         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1012         in target-specific variable definitions correctly.
1014 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1016         * scripts/variables/MAKEFILES: This was really broken: it didn't
1017         test anything at all, really.  Rewrote it, plus added a test for
1018         PR/1394.
1020 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1022         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1023         behave properly when used with recursive targets".
1025 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1027         * scripts/features/targetvars: Add a check for PR/1378:
1028         "Target-specific vars don't inherit correctly"
1030 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1032         * test_driver.pl (get_osname): Change $fancy_file_names to
1033         $short_filenames and reverse the logic.
1034         (run_each_test): Change test of non-existent $port_host to use
1035         $short_filenames--problem reported by Eli Zaretskii.
1037 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1039         * scripts/features/parallelism: Add a check to ensure that the
1040         jobserver works when we re-invoke.  Also cleaned up the tests a
1041         little, reducing the number of rules we use so the test won't need
1042         as many "sleep" commands.
1044 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1046         * scripts/features/reinvoke: Remove invocations of "touch" in
1047         makefiles.  See the comments on the touch function rewrite below.
1048         Note that UNIX touch behaves the same way if the file already
1049         exists: it sets the time to the _local_ time.  We don't want
1050         this.  This is probably a good tip for makefile writers in
1051         general, actually... where practical.
1052         * scripts/options/dash-l: Ditto.
1053         * scripts/options/dash-n: Ditto.
1055         * test_driver.pl (run_each_test): In retrospect, I don't like the
1056         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1057         changed it back to use .log, .base, and .diff.
1059         * run_make_tests.pl (set_more_defaults): Move the check for the
1060         make pathname to here from set_defaults (that's too early since it
1061         happens before the command line processing).
1062         Create a new variable $port_type, calculated from $osname, to
1063         specify what kind of system we're running on.  We should integrate
1064         the VOS stuff here, too.
1065         (valid_option): Comment out the workdir/-work stuff so people
1066         won't be fooled into thinking it works... someone needs to fix
1067         this, though!
1069         * scripts/functions/origin: Use $port_type instead of $osname.
1070         * scripts/functions/foreach: Ditto.
1071         * scripts/features/default_names: Ditto.
1073 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1075         * test_driver.pl (touch): Rewrite this function.  Previously it
1076         used to use utime() to hard-set the time based on the current
1077         local clock, or, if the file didn't exist, it merely created it.
1078         This mirrors exactly what real UNIX touch does, but it fails badly
1079         on networked filesystems where the FS server clock is skewed from
1080         the local clock: normally modifying a file causes it to get a mod
1081         time based on the _server's_ clock.  Hard-setting it based on the
1082         _local_ clock causes gratuitous errors and makes the tests
1083         unreliable except on local filesystems.  The new function will
1084         simply modify the file, allowing the filesystem to set the mod
1085         time as it sees fit.
1087         * scripts/features/parallelism: The second test output could
1088         change depending on how fast some scripts completed; use "sleep"
1089         to force the order we want.
1091         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1092         means that "%ENV = ();" doesn't do the right thing.  This worked
1093         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1094         the environment rather than require specific versions.
1096         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1097         modifier "s", so the tests will run with Perl 4.
1098         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1099         option in PURIFYOPTIONS.
1100         (setup_for_test): Don't remove any logs unless $pure_log is set.
1102 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1104         * scripts/features/reinvoke: Put the SHELL definition in the right
1105         test makefile.
1107 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1109         ChangeLog file for the test suite created.
1112 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1113 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1114 This file is part of GNU Make.
1116 GNU Make is free software; you can redistribute it and/or modify it under the
1117 terms of the GNU General Public License as published by the Free Software
1118 Foundation; either version 3 of the License, or (at your option) any later
1119 version.
1121 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1122 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1123 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1125 You should have received a copy of the GNU General Public License along with
1126 this program.  If not, see <http://www.gnu.org/licenses/>.