Create a new function $(file ...)
[make.git] / tests / ChangeLog
blob3e0643cdb7deec400db9e922640e559c1d598fa4
1 2012-01-29  Paul Smith  <psmith@gnu.org>
3         * scripts/functions/file: Test the new $(file ...) function.
5 2012-01-12  Paul Smith  <psmith@gnu.org>
7         * scripts/functions/guile: New regression tests for Guile support.
9 2011-12-10  Paul Smith  <psmith@gnu.org>
11         * scripts/targets/SECONDARY: Add prereq statements to ensure rules
12         are printed in the right order for test #9
14 2011-11-14  Paul Smith  <psmith@gnu.org>
16         * scripts/features/double_colon: Check double-colon with escaped
17         filenames.  See Savannah bug #33399.
19 2011-09-18  Paul Smith  <psmith@gnu.org>
21         * scripts/features/parallelism: On re-exec make sure we preserve
22         the value of MAKEFLAGS when necessary.  See Savannah bug #33873.
24         * scripts/features/vpath3: Verify handling of -lfoo libraries
25         found via vpath vs. the standard directory search.
26         See Savannah bug #32511.
28 2011-09-12  Paul Smith  <psmith@gnu.org>
30         * scripts/functions/call: Verify that using export in a $(call ...)
31         context creates a global variable.  See Savannah bug #32498.
33 2011-09-02  Paul Smith  <psmith@gnu.org>
35         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
36         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
38 2011-08-29  Paul Smith  <psmith@gnu.org>
40         * scripts/features/varnesting: Test resetting of variables while
41         expanding them.  See Savannah patch #7534
43 2011-06-12  Paul Smith  <psmith@gnu.org>
45         * scripts/features/archives: Check archives with whitespace at the
46         beginning, end, and extra in the middle.
47         Another test for Savannah bug #30612.
49 2011-05-07  Paul Smith  <psmith@gnu.org>
51         * scripts/variables/private: Ensure we skip private variables when
52         appending.  Test for Savannah bug #32872.
54         * scripts/functions/wildcard: Verify wildcard used to test for
55         file existence/non-existence.
57 2011-05-02  Paul Smith  <psmith@gnu.org>
59         * scripts/functions/sort: Add a test for Savannah bug #33125.
61 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
63         * scripts/features/shell_assignment: Regression for "!=" feature
65 2010-11-06  Paul Smith  <psmith@gnu.org>
67         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
68         * scripts/functions/call: Ditto.
69         * scripts/variables/special: Ditto.
71         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
73 2010-08-29  Paul Smith  <psmith@gnu.org>
75         * scripts/features/errors: Add new error message to output text.
76         * scripts/variables/SHELL: Ditto.
77         * scripts/targets/POSIX: Ditto.
78         * scripts/options/dash-k: Ditto.
79         * scripts/features/vpathplus: Ditto.
80         * scripts/features/patternrules: Ditto.
81         * scripts/features/parallelism: Ditto.
83 2010-08-13  Paul Smith  <psmith@gnu.org>
85         * scripts/features/archives: New regression tests for archive
86         support.  Test for fix to Savannah bug #30612.
88         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
89         the features available in $(.FEATURES).
91 2010-08-10  Paul Smith  <psmith@gnu.org>
93         * scripts/features/reinvoke: Ensure command line variable settings
94         are preserved across make re-exec.  Tests Savannah bug #30723.
96 2010-07-28  Paul Smith  <psmith@gnu.org>
98         * scripts/targets/POSIX: Compatibility issues with Solaris (and
99         Tru64?); "false" returns different exit codes, and set -x shows
100         output with extra whitespace.  Run the commands by hand first to
101         find out what the real shell would do, then compare what make does.
102         * scripts/variables/SHELL: Ditto.
104 2010-07-12  Paul Smith  <psmith@gnu.org>
106         * test_driver.pl: Add a new $perl_name containing the path to Perl.
107         * run_make_tests.pl (run_make_test): Replace the special string
108         #PERL# in a makefile etc. with the path the Perl executable so
109         makefiles can use it.
111         * scripts/targets/ONESHELL: Add a new set of regression tests for
112         the .ONESHELL feature.
114 2010-07-06  Paul Smith  <psmith@gnu.org>
116         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
118         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
119         Verify that enabling .POSIX changes the shell flags to set -e.
121 2010-07-01  Paul Smith  <psmith@gnu.org>
123         * scripts/features/recursion: Add a space to separate command-line
124         args.  Fixes Savannah bug #29968.
126 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
128         * scripts/features/vpath3: Test for the new library search
129         behavior.
131 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
133         * scripts/features/se_explicit: Enable the test for now fixed
134         Savannah bug 25780.
136 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
138         * scripts/variables/undefine: Tests for the new undefine feature.
140 2009-10-03  Paul Smith  <psmith@gnu.org>
142         * scripts/features/parallelism: Test for open Savannah bug #26846.
144         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
146         * scripts/variables/MAKEFLAGS: Created.
147         Add test for Savannah bug #2216 (still open).
149         * scripts/features/include: Test for Savannah bug #102 (still open).
151 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
153         * scripts/features/include: Add diagnostics issuing tests for
154         cases where targets have been updated and failed with the
155         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
157 2009-09-28  Paul Smith  <psmith@gnu.org>
159         * scripts/functions/shell: Add regression test for Savannah bug
160         #20513 (still open).
162         * scripts/features/se_explicit: Add regression tests for Savannah
163         bug #25780 (still open).
165         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
166         that runs tests we know will fail.  This allows us to add
167         regression tests to the test suite for bugs that haven't been
168         fixed yet.
170 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
172         * scripts/features/patspecific_vars: Add a test for the shortest
173         stem first order.
175         * scripts/features/patternrules: Add a test for the shortest stem
176         first order.
178 2009-09-24  Paul Smith  <psmith@gnu.org>
180         * scripts/features/se_implicit: Add a test for order-only
181         secondary expansion prerequisites.
183 2009-09-23  Paul Smith  <psmith@gnu.org>
185         * scripts/features/patternrules: Test that we can remove pattern
186         rules, both single and multiple prerequisites.  Savannah bug #18622.
188         * scripts/features/echoing: Rework for run_make_test().
190 2009-06-14  Paul Smith  <psmith@gnu.org>
192         * scripts/features/vpath: Verify we don't get bogus circular
193         dependency warnings if we choose a different file via vpath during
194         update.  Savannah bug #13529.
196 2009-06-13  Paul Smith  <psmith@gnu.org>
198         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
199         files (and files included by them) don't set the default goal.
200         Savannah bug #13401.
202         * scripts/functions/wildcard: Test that wildcards with
203         non-existent glob matchers return empty.
205 2009-06-09  Paul Smith  <psmith@gnu.org>
207         * scripts/options/dash-B: Test the $? works correctly with -B.
208         Savannah bug #17825.
210         * scripts/features/patternrules: Test that dependencies of
211         "also_make" targets are created properly.  Savannah bug #19108.
213         * test_driver.pl (compare_output): Create a "run" file for failed
214         tests containing the command that was run.
215         (get_runfile): New function.
217         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
218         allow memcheck and massif tools.
220         * scripts/features/patternrules: Have to comment out a line in the
221         first test due to backing out a change that broke the implicit
222         rule search algorithm.  Savannah bug #17752.
223         * scripts/misc/general4: Remove a test that is redundant with
224         patternrules.
226         * scripts/features/parallelism: Add a test for re-exec with
227         jobserver master override.  Savannah bug #18124.
229 2009-06-08  Paul Smith  <psmith@gnu.org>
231         * scripts/features/targetvars: Add a test for continued target
232         vars after a semicolon.  Savannah bug #17521.
234 2009-06-07  Paul Smith  <psmith@gnu.org>
236         * scripts/features/se_explicit: Make sure we catch defining
237         prereqs during snap_deps().  Savannah bug #24622.
239         * scripts/variables/automatic: Check prereq ordering when the
240         target with the recipe has no prereqs.  Savannah bug #21198.
242         * scripts/variables/LIBPATTERNS: Add a new set of test for
243         $(.LIBPATTERNS) (previously untested!)
245 2009-06-04  Paul Smith  <psmith@gnu.org>
247         * scripts/variables/SHELL: The export target-specific SHELL test
248         has an incorrect known-good-value.
250         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
252         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
254 2009-05-31  Paul Smith  <psmith@gnu.org>
256         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
258         * scripts/features/targetvars: Add tests of overrides for Savannah
259         bug #26207.
260         * scripts/features/patspecific_vars: Ditto.
262         * scripts/features/patternrules: Add a test for Savannah bug #26593.
264 2009-05-30  Paul Smith  <psmith@gnu.org>
266         * scripts/variables/flavors: Update with new variable flavor tests.
267         * scripts/variables/define: Create a new set of tests for
268         define/endef and move those aspects of the flavors suite here.
270 2009-05-25  Paul Smith  <psmith@gnu.org>
272         * scripts/features/targetvars: Ditto.
274         * scripts/features/export: Test new variable parsing abilities.
276 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
278         * scripts/variables/private: Create a new suite of tests for 'private'.
280 2007-11-04  Paul Smith  <psmith@gnu.org>
282         * scripts/functions/eval: Update error message for command -> recipe.
284         * test_driver.pl (compare_output): Allow the answer to be a regex,
285         if surrounded by '/'.
286         * scripts/misc/close_stdout: Use a regex for the answer, since
287         sometimes the error will have a description and sometimes it won't.
289 2007-09-10  Paul Smith  <psmith@gnu.org>
291         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
293 2007-08-15  Paul Smith  <psmith@gnu.org>
295         These test cases were contributed by
296         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
297         Savannah bugs #3330 and #15919.
299         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
300         15919.
302         * scripts/features/parallelism: Add tests for wrong answer/hang
303         combining INTERMEDIATE, order-only prereqs, and parallelism.
304         See Savannah bugs 3330 and 15919.
306 2007-07-13  Paul Smith  <psmith@gnu.org>
308         Install a timeout so tests can never loop infinitely.
309         Original idea and patch for a single-test version provided by
310         Icarus Sparry <savannah@icarus.freeuk.com>
312         * test_driver.pl (_run_command): New function: this is called by
313         other functions to actually run a command.  Before we run it,
314         install a SIGALRM handler and set up a timer to go off in the
315         future (default is 5s; this can be overridden by individual tests).
316         (run_command): Call it.
317         (run_command_with_output): Call it.
319         * run_make_tests.pl (run_make_with_options): Override the default
320         timeout if the caller requests it.
321         (run_make_test): Pass any timeout override to run_make_with_options.
323         * scripts/features/parallelism: Increase the timeout for long tests.
324         * scripts/options/dash-l: Ditto.
326 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
328         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
329         ENV here.  This doesn't always work.
330         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
331         environment.  Fixes Savannah bug #16698.
333 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
335         * scripts/variables/automatic: Add back the test for bug #8154.
337 2006-04-01  Paul D. Smith  <psmith@gnu.org>
339         * scripts/functions/realpath: Don't run tests with multiple
340         initial slashes on Windows: those paths mean something different.
342 2006-03-19  Paul D. Smith  <psmith@gnu.org>
344         * scripts/features/parallelism: Test that the jobserver is
345         properly managed when we have to re-exec the master instance of
346         make.
348 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
350         * scripts/features/statipattrules: Add tests for bug #16053.
352 2006-03-09  Paul Smith  <psmith@gnu.org>
354         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
355         with DOS drive letters.  Fixes Savannah bug #15947.
357         * test_driver.pl (run_each_test): Set the status properly even
358         when a test fails to execute.  Fixes Savannah bug #15942.
360         * scripts/functions/foreach: Use a different environment variable
361         other than PATH to avoid differences with Windows platforms.
362         Fixes Savannah bug #15938.
364 2006-03-05  Paul D. Smith  <psmith@gnu.org>
366         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
367         type W32.  Fixed Savannah bug #15937.
369         * scripts/features/default_names: Don't call error() when the test
370         fails.  Fixes Savannah bug #15941.
372 2006-02-17  Paul D. Smith  <psmith@gnu.org>
374         * scripts/features/targetvars: Test a complex construction which
375         guarantees that we have to merge variable lists of different
376         sizes.  Tests for Savannah bug #15757.
378 2006-02-15  Paul D. Smith  <psmith@gnu.org>
380         * scripts/functions/error: Make sure filename/lineno information
381         is related to where the error is expanded, not where it's set.
382         * scripts/functions/warning: Ditto.
383         * scripts/functions/foreach: Check for different error conditions.
384         * scripts/functions/word: Ditto.
385         * scripts/variables/negative: Test some variable reference failure
386         conditions.
387         * scripts/options/warn-undefined-variables: Test the
388         --warn-undefined-variables flag.
390 2006-02-09  Paul D. Smith  <psmith@gnu.org>
392         * run_make_tests.pl (set_more_defaults): Update valgrind support
393         for newer versions.
394         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
395         beginning with ".").
397         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
398         functions.
400 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
402         * scripts/features/parallelism: Add a test for bug #15641.
404 2006-02-06  Paul D. Smith  <psmith@gnu.org>
406         * scripts/options/dash-W: Add a test for bug #15341.
408 2006-01-03  Paul D. Smith  <psmith@gnu.org>
410         * scripts/variables/automatic: Add a test for bug #8154.
412         * README: Update to reflect the current state of the test suite.
414 2005-12-12  Paul D. Smith  <psmith@gnu.org>
416         * scripts/features/parallelism, scripts/functions/wildcard,
417         scripts/targets/FORCE, scripts/targets/PHONY,
418         scripts/targets/SILENT: Use the default setting for
419         $delete_command.  Fixes bug #15085.
421         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
423 2005-12-11  Paul D. Smith  <psmith@gnu.org>
425         * scripts/misc/general4: Test implicit rules with '$' in the
426         prereq list & prereq patterns.
427         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
429 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
431         * scripts/features/patternrules: Add a test for bug #13022.
433 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
435         * scripts/features/double_colon: Add a test for bug #14334.
437 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
439         * scripts/functions/flavor: Add a test for the flavor function.
441 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
443         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
444         special variable.
446 2005-10-24  Paul D. Smith  <psmith@gnu.org>
448         * scripts/misc/general4: Test '$$' in prerequisites list.
449         * scripts/features/statipattrules: Rewrite to use run_make_test().
450         Add various static pattern info.
451         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
452         * scripts/features/se_explicit: Add tests for handling '$$' in
453         prerequisite lists with and without setting .SECONDEXPANSION.
454         * scripts/features/order_only: Convert to run_make_test().
455         * run_make_tests.pl (set_more_defaults): If we can't get the value
456         of $(MAKE) from make, then fatal immediately.
458 2005-08-31  Paul D. Smith  <psmith@gnu.org>
460         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
461         an eval to trap errors) and if it exists, use POSIX::getcwd to
462         find the working directory.  If it doesn't exist, go back to the
463         previous methods.  This tries to be more accurate on Windows
464         systems.
466 2005-08-29  Paul D. Smith  <psmith@gnu.org>
468         * scripts/functions/abspath: Add some text to the error messages
469         to get a better idea of what's wrong.  Make warnings instead of
470         errors.
472         * scripts/features/patspecific_vars: Don't use "test", which is
473         UNIX specific.  Print the values and let the test script match
474         them.
476 2005-08-25  Paul Smith  <psmith@gnu.org>
478         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
479         former works better with non-UNIX environments.  Fixes Savannah
480         bug #14129.
482 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
484         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
485         $(sort) so that the resulting order is no longer filesystem-
486         dependant.
488 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
490         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
492 2005-08-07  Paul D. Smith  <psmith@gnu.org>
494         * scripts/features/parallelism: Add a test for a bug reported by
495         Michael Matz (matz@suse.de) in which make exits without waiting
496         for all its children in some situations during parallel builds.
498 2005-07-08  Paul D. Smith  <psmith@gnu.org>
500         * test_driver.pl: Reset the environment to a clean value every
501         time before we invoke make.  I'm suspicious that the environment
502         isn't handled the same way in Windows as it is in UNIX, and some
503         variables are leaking out beyond the tests they are intended for.
504         Create an %extraENV hash tests can set to add more env. vars.
505         * tests/scripts/features/export: Change to use %extraENV.
506         * tests/scripts/functions/eval: Ditto.
507         * tests/scripts/functions/origin: Ditto.
508         * tests/scripts/options/dash-e: Ditto.
509         * tests/scripts/variables/SHELL: Ditto.
511 2005-06-27  Paul D. Smith  <psmith@gnu.org>
513         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
514         files.
515         * scripts/features/reinvoke: Rewrite to be safer on systems with
516         subsecond timestamps.
517         * scripts/features/patternrules: False exits with different error
518         codes on different systems (for example, Linux => 1, Solaris => 255).
520         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
521         to be sure it will be considered updated when it's remade.
523 2005-06-26  Paul D. Smith  <psmith@gnu.org>
525         * scripts/functions/shell: New test suite for the shell function.
527 2005-06-25  Paul D. Smith  <psmith@gnu.org>
529         * scripts/features/include: Test include/-include/sinclude with no
530         arguments.  Tests fix for Savannah bug #1761.
532         * scripts/misc/general3: Implement comprehensive testing of
533         backslash-newline behavior in command scripts: various types of
534         quoting, fast path / slow path, etc.
535         Tests fix for Savannah bug #1332.
537         * scripts/options/symlinks: Test symlinks to non-existent files.
538         Tests fix for Savannah bug #13280.
540         * scripts/misc/general3: Test semicolons in variable references.
541         Tests fix for Savannah bug #1454.
543         * scripts/variables/MAKE_RESTARTS: New file: test the
544         MAKE_RESTARTS variable.
545         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
546         Tests fix for Savannah bug #7566.
547         * scripts/options/dash-W: New file: test the -W flag, including
548         re-exec infinite looping.
550 2005-06-12  Paul D. Smith  <psmith@gnu.org>
552         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
553         This test only works on systems that have /dev/full (e.g., Linux).
555 2005-06-09  Paul D. Smith  <psmith@gnu.org>
557         * scripts/functions/foreach: Add a test for Savannah bug #11913.
559 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
561         * scripts/features/include: Add a test for Savannah bug #13216.
562         * scripts/features/patternrules: Add a test for Savannah bug #13218.
564 2005-05-13  Paul D. Smith  <psmith@gnu.org>
566         * scripts/features/conditionals: Add tests for the new if... else
567         if... endif syntax.
569 2005-05-03  Paul D. Smith  <psmith@gnu.org>
571         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
572         DEFAULT_GOAL.
574 2005-05-02  Paul D. Smith  <psmith@gnu.org>
576         * scripts/features/parallelism: Add a test for exporting recursive
577         variables containing $(shell ) calls.  Rewrite this script to use
578         run_make_test() everywhere.
580 2005-04-07  Paul D. Smith  <psmith@gnu.org>
582         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
584 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
586         * scripts/variables/automatic: Add a test for Savannah bug #12320.
588 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
590         * scripts/features/patternrules: Add a test for Savannah bug #12267.
592 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
594         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
595         bug #12266.
597 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
599         * scripts/features/patternrules: Add a test for Savannah bug #12202.
601 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
603         * scripts/features/se_implicit: Add a test for stem
604         termination bug. Add a test for stem triple-expansion bug.
606         * scripts/features/se_statpat: Add a test for stem
607         triple-expansion bug.
609         * scripts/features/statipattrules: Change test #4 to reflect
610         new way empty prerequisite list is handled.
613 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
615         * scripts/features/statipattrules: Add a test for
616         Savannah bug #12180.
618 2005-02-28  Paul D. Smith  <psmith@gnu.org>
620         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
622         * scripts/options/symlinks: New file to test checking of symlink
623         timestamps.  Can't use filename dash-L because it conflicts with
624         dash-l on case-insensitive filesystems.
626         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
627         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
628         unique filenames.
630 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
632         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
633         special variable.
635 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
637         * scripts/features/se_explicit: Test the second expansion in
638         explicit rules.
639         * scripts/features/se_implicit: Test the second expansion in
640         implicit rules.
641         * scripts/features/se_statpat: Test the second expansion in
642         static pattern rules.
643         * scripts/variables/automatic: Fix to work with the second
644         expansion.
646         * scripts/misc/general4: Add a test for bug #12091.
648 2005-02-27  Paul D. Smith  <psmith@gnu.org>
650         * scripts/functions/eval: Check that eval of targets within
651         command scripts fails.  See Savannah bug # 12124.
653 2005-02-26  Paul D. Smith  <psmith@gnu.org>
655         * test_driver.pl (compare_output): If a basic comparison of the
656         log and answer doesn't match, try harder: change all backslashes
657         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
659 2005-02-09  Paul D. Smith  <psmith@gnu.org>
661         * scripts/features/recursion: Test command line variable settings:
662         only one instance of a given variable should be provided.
664 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
666         * tests/scripts/functions/abspath: New file: test `abspath'
667         built-in function.
669         * tests/scripts/functions/realpath: New file: test `realpath'
670         built-in function.
672 2004-11-28  Paul D. Smith  <psmith@gnu.org>
674         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
675         this doesn't really test anything useful in UNIX but...
677         * scripts/variables/SHELL: New file: test proper handling of SHELL
678         according to POSIX rules.  Fixes bug #1276.
680 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
682         * scripts/functions/word: Test $(firstword ) and $(lastword ).
684 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
686         * scripts/features/patspecific_vars: Test simple/recursive
687         variable expansion.
689 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
691         * scripts/features/include: Test dontcare flag inheritance
692         when rebuilding makefiles.
694 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
696         * scripts/features/patspecific_vars: Test exported variables.
698 2004-09-22  Paul D. Smith  <psmith@gnu.org>
700         * run_make_tests.pl (run_make_test): Don't add newlines to the
701         makestring or answer if they are completely empty.
703         * scripts/features/patternrules: Rename from implicit_prereq_eval.
705         * scripts/test_template: Rework the template.
707 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
709         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
710         `#!/usr/bin/env perl'.
712         * scripts/features/implicit_prereq_eval: Test implicit rule
713         prerequisite evaluation code.
715 2004-09-21  Paul D. Smith  <psmith@gnu.org>
717         * run_make_tests.pl (run_make_test): Enhance to allow the make
718         string to be undef: in that case it reuses the previous make
719         string.  Allows multiple tests on the same makefile.
721         * scripts/variables/flavors: Add some tests for prefix characters
722         interacting with define/endef variables.
724 2004-09-20  Paul D. Smith  <psmith@gnu.org>
726         * scripts/functions/substitution: Rewrite to use run_make_test()
727         interface, and add test for substitution failures reported by
728         Markus Mauhart <qwe123@chello.at>.
730 2004-03-22  Paul D. Smith  <psmith@gnu.org>
732         * test_driver.pl (run_each_test, toplevel, compare_output): Change
733         to track both the testing categories _AND_ the number of
734         individual tests, and report both sets of numbers.
736 2004-02-21  Paul D. Smith  <psmith@gnu.org>
738         * scripts/functions/origin: Set our own environment variable
739         rather than relying on $HOME.
741 2004-01-21  Paul D. Smith  <psmith@gnu.org>
743         * scripts/features/conditionals: Test arguments to ifn?def which
744         contain whitespace (such as a function that is evaluated).  Bug
745         #7257.
747 2004-01-07  Paul D. Smith  <psmith@gnu.org>
749         * scripts/features/order_only: Test order-only prerequisites in
750         pattern rules (patch #2349).
752 2003-11-02  Paul D. Smith  <psmith@gnu.org>
754         * scripts/functions/if: Test if on conditionals with trailing
755         whitespace--bug #5798.
757         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
759 2003-04-19  Paul D. Smith  <psmith@gnu.org>
761         * scripts/features/patspecific_vars: Test multiple patterns
762         matching the same target--Bug #1405.
764 2003-04-09  Paul D. Smith  <psmith@gnu.org>
766         * run_make_tests.pl (set_more_defaults): A new $port_type of
767         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
768         for OS/2.
770 2003-03-28  Paul D. Smith  <psmith@gnu.org>
772         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
773         not prerequisites)--Bug #2515.
775 2003-01-30  Paul D. Smith  <psmith@gnu.org>
777         * scripts/features/targetvars: Test very long target-specific
778         variable definition lines (longer than the default make buffer
779         length).  Tests patch # 1022.
781         * scripts/functions/eval: Test very recursive $(eval ...) calls
782         with simple variable expansion (bug #2238).
784         * scripts/functions/word: Test error handling for word and
785         wordlist functions (bug #2407).
787 2003-01-22  Paul D. Smith  <psmith@gnu.org>
789         * scripts/functions/call: Test recursive argument masking (bug
790         #1744).
792 2002-10-25  Paul D. Smith  <psmith@gnu.org>
794         * scripts/functions/eval: Test using $(eval ...) inside
795         conditionals (Bug #1516).
797 2002-10-14  Paul D. Smith  <psmith@gnu.org>
799         * scripts/options/dash-t: Add a test for handling -t on targets
800         with no commands (Bug #1418).
802 2002-10-13  Paul D. Smith  <psmith@gnu.org>
804         * scripts/features/targetvars: Add a test for exporting
805         target-specific vars (Bug #1391).
807 2002-10-05  Paul D. Smith  <psmith@gnu.org>
809         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
810         and $${@F}.
812 2002-09-23  Paul D. Smith  <psmith@gnu.org>
814         * scripts/features/escape: Test handling of escaped comment
815         characters in targets and prerequisites.
817 2002-09-18  Paul D. Smith  <psmith@gnu.org>
819         * scripts/features/export: Test export/unexport of multiple
820         variables in a single command.
822 2002-09-17  Paul D. Smith  <psmith@gnu.org>
824         * scripts/features/targetvars: Tests for Bug #940: test
825         target-specific and pattern-specific variables in conjunction with
826         double-colon targets.
828 2002-09-10  Paul D. Smith  <psmith@gnu.org>
830         * test_driver.pl (compare_output): Match the new format for time
831         skew error messages.
833         * scripts/features/export: Created.  Add tests for export/unexport
834         capabilities, including exporting/unexporting expanded variables.
836         * scripts/features/conditionals: Add a test for expanded variables
837         in ifdef conditionals.
839 2002-09-04  Paul D. Smith  <psmith@gnu.org>
841         * scripts/features/reinvoke: Change touch/sleep combos to utouch
842         invocations.
843         * scripts/features/vpathgpath: Ditto.
844         * scripts/features/vpathplus: Ditto.
845         * scripts/options/dash-n: Ditto.
846         * scripts/targets/INTERMEDIATE: Ditto.
847         * scripts/targets/SECONDARY: Ditto.
849         * scripts/options/dash-t: Added a test for the -t bug fixed by
850         Henning Makholm.  This test was also contributed by Henning.
852         * scripts/misc/general4: Add a test suite for obscure algorithmic
853         features of make.  First test: make sure creation subdirectories
854         as prerequisites of targets works properly.
856         * scripts/misc/version: Remove this bogus test.
858 2002-08-07  Paul D. Smith  <psmith@gnu.org>
860         * scripts/misc/general3: Add a test for makefiles that don't end
861         in newlines.
863         * scripts/variables/special: Create tests for the special
864         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
865         for now as it's not yet supported.
867 2002-08-01  Paul D. Smith  <psmith@gnu.org>
869         * scripts/options/dash-B: Add a test for the new -B option.
871 2002-07-11  Paul D. Smith  <psmith@gnu.org>
873         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
874         -valgrind option to the test suite.
875         (set_more_defaults): Set up the file descriptor to capture
876         Valgrind output.  We have to unset its close-on-exec flag; we
877         hardcode the value for F_SETFD (2) rather than load it; hopefully
878         this will help us avoid breaking the Windows/DOS test suite.
880 2002-07-10  Paul D. Smith  <psmith@gnu.org>
882         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
883         $$(@F).
885         * test_driver.pl (utouch): Create a new function that creates a
886         file with a specific timestamp offset.  Use of this function will
887         let us avoid lots of annoying sleep() invocations in the tests
888         just to get proper timestamping, which will make the tests run a
889         lot faster.  So far it's only used in the automatic test suite.
891 2002-07-09  Paul D. Smith  <psmith@gnu.org>
893         * scripts/variables/automatic: Create a test for automatic variables.
895 2002-07-08  Paul D. Smith  <psmith@gnu.org>
897         * scripts/features/order_only: Test new order-only prerequisites.
899 2002-07-07  Paul D. Smith  <psmith@gnu.org>
901         * scripts/functions/eval: Test new function.
902         * scripts/functions/value: Test new function.
903         * scripts/variables/MAKEFILE_LIST: Test new variable.
905 2002-04-28  Paul D. Smith  <psmith@gnu.org>
907         * scripts/functions/call: New test: transitive closure
908         implementation using $(call ...) to test variable recursion.
910 2002-04-21  Paul D. Smith  <psmith@gnu.org>
912         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
913         directories in the script directories.
915 2001-05-02  Paul D. Smith  <psmith@gnu.org>
917         * scripts/variables/flavors: Test define/endef scripts where only
918         one of the command lines is quiet.
920 2000-06-22  Paul D. Smith  <psmith@gnu.org>
922         * scripts/options/dash-q: New file; test the -q option.  Includes
923         a test for PR/1780.
925 2000-06-21  Paul D. Smith  <psmith@gnu.org>
927         * scripts/features/targetvars: Added a test for PR/1709: allowing
928         semicolons in target-specific variable values.
930 2000-06-19  Paul D. Smith  <psmith@gnu.org>
932         * scripts/functions/addsuffix: Test for an empty final argument.
933         Actually this bug might have happened for any function, but this
934         one was handy.
936 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
938         * scripts/options/general: If parallel jobs are not supported,
939         expect a warning message from Make.
941 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
943         * scripts/options/general: Don't try -jN with N != 1 if parallel
944         jobs are not supported.
946 2000-05-24  Paul D. Smith  <psmith@gnu.org>
948         * scripts/options/general: Test general option processing (PR/1716).
950 2000-04-11  Paul D. Smith  <psmith@gnu.org>
952         * scripts/functions/strip: Test empty value to strip (PR/1689).
954 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
956         * scripts/features/reinvoke: Sleep before updating the target
957         files in the first test, to ensure its time stamp really gets
958         newer; otherwise Make might re-exec more than once.
960 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
962         * scripts/features/double_colon: Don't run the parallel tests if
963         parallel jobs aren't supported.
965 2000-04-04  Paul D. Smith  <psmith@gnu.org>
967         * scripts/functions/word: wordlist doesn't swap arguments anymore.
969 2000-03-27  Paul D. Smith  <psmith@gnu.org>
971         * scripts/features/statipattrules: Test that static pattern rules
972         whose prerequisite patterns resolve to empty strings throw an
973         error (instead of dumping core).  Fixes PR/1670.
975         * scripts/features/reinvoke: Make more robust by touching "b"
976         first, to ensure it's not newer than "a".
977         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
978         * scripts/options/dash-n: Ditto.
980         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
981         recursive invocations of $(call ...) to break.  I can't come up
982         with any way to get both working at the same time, so I backed out
983         the fix to 1527 and added a test case for recursive calls.  This
984         also tests the fix for PR/1610.
986         * scripts/features/double_colon: Test that circular dependencies
987         in double-colon rule sets are detected correctly (PR/1671).
989 2000-03-26  Paul D. Smith  <psmith@gnu.org>
991         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
992         .INTERMEDIATE files when given on the command line (PR/1669).
994 2000-03-08  Paul D. Smith  <psmith@gnu.org>
996         * scripts/options/dash-k: Add a test for error detection by
997         multiple targets depending on the same prerequisite with -k.
998         For PR/1634.
1000 2000-02-07  Paul D. Smith  <psmith@gnu.org>
1002         * scripts/features/escape: Add a test for backslash-escaped spaces
1003         in a target name (PR/1586).
1005 2000-02-04  Paul D. Smith  <psmith@gnu.org>
1007         * scripts/features/patspecific_vars: Add a test for pattern-specific
1008         target variables inherited from the parent target (PR/1407).
1010 2000-02-02  Paul D. Smith  <psmith@gnu.org>
1012         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
1013         to make sure sorting order, etc. is predictable.
1014         Reported by Andreas Jaeger <aj@suse.de>.
1016         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
1017         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
1018         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
1019         1 for other systems.
1020         * scripts/features/vpathplus (touchfiles): Use the $wtime value
1021         instead of hardcoding 2.
1022         * scripts/targets/SECONDARY: Ditto.
1023         * scripts/targets/INTERMEDIATE: Ditto.
1025 2000-01-27  Paul D. Smith  <psmith@gnu.org>
1027         * test_driver.pl (toplevel): Don't try to run test scripts which
1028         are really directories.
1030 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1032         * scripts/features/include: Remove a check; the fix caused more
1033         problems than the error, so I removed it and removed the test for
1034         it.
1036 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1038         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1039         sure $(call ...) doesn't eval its arguments and that you can
1040         invoke foreach from it without looping forever.
1042 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1044         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1045         .INTERMEDIATE settings on files don't disable them as implicit
1046         intermediate possibilities.
1048 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1050         * scripts/features/double_colon: Add a test for PR/1476: Try
1051         double-colon rules as non-goal targets and during parallel builds
1052         to make sure they're handled serially.
1054 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1056         * scripts/functions/if: Add a test for PR/1429: put some text
1057         after an if-statement to make sure it works.
1059         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1060         in target-specific variable definitions correctly.
1062 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1064         * scripts/variables/MAKEFILES: This was really broken: it didn't
1065         test anything at all, really.  Rewrote it, plus added a test for
1066         PR/1394.
1068 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1070         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1071         behave properly when used with recursive targets".
1073 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1075         * scripts/features/targetvars: Add a check for PR/1378:
1076         "Target-specific vars don't inherit correctly"
1078 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1080         * test_driver.pl (get_osname): Change $fancy_file_names to
1081         $short_filenames and reverse the logic.
1082         (run_each_test): Change test of non-existent $port_host to use
1083         $short_filenames--problem reported by Eli Zaretskii.
1085 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1087         * scripts/features/parallelism: Add a check to ensure that the
1088         jobserver works when we re-invoke.  Also cleaned up the tests a
1089         little, reducing the number of rules we use so the test won't need
1090         as many "sleep" commands.
1092 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1094         * scripts/features/reinvoke: Remove invocations of "touch" in
1095         makefiles.  See the comments on the touch function rewrite below.
1096         Note that UNIX touch behaves the same way if the file already
1097         exists: it sets the time to the _local_ time.  We don't want
1098         this.  This is probably a good tip for makefile writers in
1099         general, actually... where practical.
1100         * scripts/options/dash-l: Ditto.
1101         * scripts/options/dash-n: Ditto.
1103         * test_driver.pl (run_each_test): In retrospect, I don't like the
1104         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1105         changed it back to use .log, .base, and .diff.
1107         * run_make_tests.pl (set_more_defaults): Move the check for the
1108         make pathname to here from set_defaults (that's too early since it
1109         happens before the command line processing).
1110         Create a new variable $port_type, calculated from $osname, to
1111         specify what kind of system we're running on.  We should integrate
1112         the VOS stuff here, too.
1113         (valid_option): Comment out the workdir/-work stuff so people
1114         won't be fooled into thinking it works... someone needs to fix
1115         this, though!
1117         * scripts/functions/origin: Use $port_type instead of $osname.
1118         * scripts/functions/foreach: Ditto.
1119         * scripts/features/default_names: Ditto.
1121 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1123         * test_driver.pl (touch): Rewrite this function.  Previously it
1124         used to use utime() to hard-set the time based on the current
1125         local clock, or, if the file didn't exist, it merely created it.
1126         This mirrors exactly what real UNIX touch does, but it fails badly
1127         on networked filesystems where the FS server clock is skewed from
1128         the local clock: normally modifying a file causes it to get a mod
1129         time based on the _server's_ clock.  Hard-setting it based on the
1130         _local_ clock causes gratuitous errors and makes the tests
1131         unreliable except on local filesystems.  The new function will
1132         simply modify the file, allowing the filesystem to set the mod
1133         time as it sees fit.
1135         * scripts/features/parallelism: The second test output could
1136         change depending on how fast some scripts completed; use "sleep"
1137         to force the order we want.
1139         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1140         means that "%ENV = ();" doesn't do the right thing.  This worked
1141         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1142         the environment rather than require specific versions.
1144         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1145         modifier "s", so the tests will run with Perl 4.
1146         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1147         option in PURIFYOPTIONS.
1148         (setup_for_test): Don't remove any logs unless $pure_log is set.
1150 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1152         * scripts/features/reinvoke: Put the SHELL definition in the right
1153         test makefile.
1155 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1157         ChangeLog file for the test suite created.
1160 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001, 2002,
1161 2003, 2004, 2005, 2006, 2007, 2008, 2009, 2011, 2012 Free Software Foundation,
1162 Inc.
1163 This file is part of GNU Make.
1165 GNU Make is free software; you can redistribute it and/or modify it under the
1166 terms of the GNU General Public License as published by the Free Software
1167 Foundation; either version 3 of the License, or (at your option) any later
1168 version.
1170 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1171 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1172 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1174 You should have received a copy of the GNU General Public License along with
1175 this program.  If not, see <http://www.gnu.org/licenses/>.