Fix Savannah bug #35410: handle escape chars in filter/filter-out
[make.git] / tests / ChangeLog
blob2c2284fa1d1c45f5044ea78fa2ffbaf0219c5b4c
1 2012-03-03  Paul Smith  <psmith@gnu.org>
3         * scripts/functions/filter-out: Add filter tests and test escape
4         operations.  See Savannah bug #35410.
6         * guile.supp: Suppress valgrind errors from Guile
7         * run_make_tests.pl: Use the Guile suppression file.
9         * scripts/misc/bs-nl: Check for POSIX and non-POSIX
10         backslash/newline handling.  Addresses Savannah bug #16670.
12 2012-01-29  Paul Smith  <psmith@gnu.org>
14         * scripts/variables/flavors: Add tests for ::=
15         * scripts/variables/define: Ditto
17         * scripts/functions/file: Test the new $(file ...) function.
19 2012-01-12  Paul Smith  <psmith@gnu.org>
21         * scripts/functions/guile: New regression tests for Guile support.
23 2011-12-10  Paul Smith  <psmith@gnu.org>
25         * scripts/targets/SECONDARY: Add prereq statements to ensure rules
26         are printed in the right order for test #9
28 2011-11-14  Paul Smith  <psmith@gnu.org>
30         * scripts/features/double_colon: Check double-colon with escaped
31         filenames.  See Savannah bug #33399.
33 2011-09-18  Paul Smith  <psmith@gnu.org>
35         * scripts/features/parallelism: On re-exec make sure we preserve
36         the value of MAKEFLAGS when necessary.  See Savannah bug #33873.
38         * scripts/features/vpath3: Verify handling of -lfoo libraries
39         found via vpath vs. the standard directory search.
40         See Savannah bug #32511.
42 2011-09-12  Paul Smith  <psmith@gnu.org>
44         * scripts/functions/call: Verify that using export in a $(call ...)
45         context creates a global variable.  See Savannah bug #32498.
47 2011-09-02  Paul Smith  <psmith@gnu.org>
49         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
50         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
52 2011-08-29  Paul Smith  <psmith@gnu.org>
54         * scripts/features/varnesting: Test resetting of variables while
55         expanding them.  See Savannah patch #7534
57 2011-06-12  Paul Smith  <psmith@gnu.org>
59         * scripts/features/archives: Check archives with whitespace at the
60         beginning, end, and extra in the middle.
61         Another test for Savannah bug #30612.
63 2011-05-07  Paul Smith  <psmith@gnu.org>
65         * scripts/variables/private: Ensure we skip private variables when
66         appending.  Test for Savannah bug #32872.
68         * scripts/functions/wildcard: Verify wildcard used to test for
69         file existence/non-existence.
71 2011-05-02  Paul Smith  <psmith@gnu.org>
73         * scripts/functions/sort: Add a test for Savannah bug #33125.
75 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
77         * scripts/features/shell_assignment: Regression for "!=" feature
79 2010-11-06  Paul Smith  <psmith@gnu.org>
81         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
82         * scripts/functions/call: Ditto.
83         * scripts/variables/special: Ditto.
85         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
87 2010-08-29  Paul Smith  <psmith@gnu.org>
89         * scripts/features/errors: Add new error message to output text.
90         * scripts/variables/SHELL: Ditto.
91         * scripts/targets/POSIX: Ditto.
92         * scripts/options/dash-k: Ditto.
93         * scripts/features/vpathplus: Ditto.
94         * scripts/features/patternrules: Ditto.
95         * scripts/features/parallelism: Ditto.
97 2010-08-13  Paul Smith  <psmith@gnu.org>
99         * scripts/features/archives: New regression tests for archive
100         support.  Test for fix to Savannah bug #30612.
102         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
103         the features available in $(.FEATURES).
105 2010-08-10  Paul Smith  <psmith@gnu.org>
107         * scripts/features/reinvoke: Ensure command line variable settings
108         are preserved across make re-exec.  Tests Savannah bug #30723.
110 2010-07-28  Paul Smith  <psmith@gnu.org>
112         * scripts/targets/POSIX: Compatibility issues with Solaris (and
113         Tru64?); "false" returns different exit codes, and set -x shows
114         output with extra whitespace.  Run the commands by hand first to
115         find out what the real shell would do, then compare what make does.
116         * scripts/variables/SHELL: Ditto.
118 2010-07-12  Paul Smith  <psmith@gnu.org>
120         * test_driver.pl: Add a new $perl_name containing the path to Perl.
121         * run_make_tests.pl (run_make_test): Replace the special string
122         #PERL# in a makefile etc. with the path the Perl executable so
123         makefiles can use it.
125         * scripts/targets/ONESHELL: Add a new set of regression tests for
126         the .ONESHELL feature.
128 2010-07-06  Paul Smith  <psmith@gnu.org>
130         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
132         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
133         Verify that enabling .POSIX changes the shell flags to set -e.
135 2010-07-01  Paul Smith  <psmith@gnu.org>
137         * scripts/features/recursion: Add a space to separate command-line
138         args.  Fixes Savannah bug #29968.
140 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
142         * scripts/features/vpath3: Test for the new library search
143         behavior.
145 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
147         * scripts/features/se_explicit: Enable the test for now fixed
148         Savannah bug 25780.
150 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
152         * scripts/variables/undefine: Tests for the new undefine feature.
154 2009-10-03  Paul Smith  <psmith@gnu.org>
156         * scripts/features/parallelism: Test for open Savannah bug #26846.
158         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
160         * scripts/variables/MAKEFLAGS: Created.
161         Add test for Savannah bug #2216 (still open).
163         * scripts/features/include: Test for Savannah bug #102 (still open).
165 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
167         * scripts/features/include: Add diagnostics issuing tests for
168         cases where targets have been updated and failed with the
169         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
171 2009-09-28  Paul Smith  <psmith@gnu.org>
173         * scripts/functions/shell: Add regression test for Savannah bug
174         #20513 (still open).
176         * scripts/features/se_explicit: Add regression tests for Savannah
177         bug #25780 (still open).
179         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
180         that runs tests we know will fail.  This allows us to add
181         regression tests to the test suite for bugs that haven't been
182         fixed yet.
184 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
186         * scripts/features/patspecific_vars: Add a test for the shortest
187         stem first order.
189         * scripts/features/patternrules: Add a test for the shortest stem
190         first order.
192 2009-09-24  Paul Smith  <psmith@gnu.org>
194         * scripts/features/se_implicit: Add a test for order-only
195         secondary expansion prerequisites.
197 2009-09-23  Paul Smith  <psmith@gnu.org>
199         * scripts/features/patternrules: Test that we can remove pattern
200         rules, both single and multiple prerequisites.  Savannah bug #18622.
202         * scripts/features/echoing: Rework for run_make_test().
204 2009-06-14  Paul Smith  <psmith@gnu.org>
206         * scripts/features/vpath: Verify we don't get bogus circular
207         dependency warnings if we choose a different file via vpath during
208         update.  Savannah bug #13529.
210 2009-06-13  Paul Smith  <psmith@gnu.org>
212         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
213         files (and files included by them) don't set the default goal.
214         Savannah bug #13401.
216         * scripts/functions/wildcard: Test that wildcards with
217         non-existent glob matchers return empty.
219 2009-06-09  Paul Smith  <psmith@gnu.org>
221         * scripts/options/dash-B: Test the $? works correctly with -B.
222         Savannah bug #17825.
224         * scripts/features/patternrules: Test that dependencies of
225         "also_make" targets are created properly.  Savannah bug #19108.
227         * test_driver.pl (compare_output): Create a "run" file for failed
228         tests containing the command that was run.
229         (get_runfile): New function.
231         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
232         allow memcheck and massif tools.
234         * scripts/features/patternrules: Have to comment out a line in the
235         first test due to backing out a change that broke the implicit
236         rule search algorithm.  Savannah bug #17752.
237         * scripts/misc/general4: Remove a test that is redundant with
238         patternrules.
240         * scripts/features/parallelism: Add a test for re-exec with
241         jobserver master override.  Savannah bug #18124.
243 2009-06-08  Paul Smith  <psmith@gnu.org>
245         * scripts/features/targetvars: Add a test for continued target
246         vars after a semicolon.  Savannah bug #17521.
248 2009-06-07  Paul Smith  <psmith@gnu.org>
250         * scripts/features/se_explicit: Make sure we catch defining
251         prereqs during snap_deps().  Savannah bug #24622.
253         * scripts/variables/automatic: Check prereq ordering when the
254         target with the recipe has no prereqs.  Savannah bug #21198.
256         * scripts/variables/LIBPATTERNS: Add a new set of test for
257         $(.LIBPATTERNS) (previously untested!)
259 2009-06-04  Paul Smith  <psmith@gnu.org>
261         * scripts/variables/SHELL: The export target-specific SHELL test
262         has an incorrect known-good-value.
264         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
266         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
268 2009-05-31  Paul Smith  <psmith@gnu.org>
270         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
272         * scripts/features/targetvars: Add tests of overrides for Savannah
273         bug #26207.
274         * scripts/features/patspecific_vars: Ditto.
276         * scripts/features/patternrules: Add a test for Savannah bug #26593.
278 2009-05-30  Paul Smith  <psmith@gnu.org>
280         * scripts/variables/flavors: Update with new variable flavor tests.
281         * scripts/variables/define: Create a new set of tests for
282         define/endef and move those aspects of the flavors suite here.
284 2009-05-25  Paul Smith  <psmith@gnu.org>
286         * scripts/features/targetvars: Ditto.
288         * scripts/features/export: Test new variable parsing abilities.
290 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
292         * scripts/variables/private: Create a new suite of tests for 'private'.
294 2007-11-04  Paul Smith  <psmith@gnu.org>
296         * scripts/functions/eval: Update error message for command -> recipe.
298         * test_driver.pl (compare_output): Allow the answer to be a regex,
299         if surrounded by '/'.
300         * scripts/misc/close_stdout: Use a regex for the answer, since
301         sometimes the error will have a description and sometimes it won't.
303 2007-09-10  Paul Smith  <psmith@gnu.org>
305         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
307 2007-08-15  Paul Smith  <psmith@gnu.org>
309         These test cases were contributed by
310         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
311         Savannah bugs #3330 and #15919.
313         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
314         15919.
316         * scripts/features/parallelism: Add tests for wrong answer/hang
317         combining INTERMEDIATE, order-only prereqs, and parallelism.
318         See Savannah bugs 3330 and 15919.
320 2007-07-13  Paul Smith  <psmith@gnu.org>
322         Install a timeout so tests can never loop infinitely.
323         Original idea and patch for a single-test version provided by
324         Icarus Sparry <savannah@icarus.freeuk.com>
326         * test_driver.pl (_run_command): New function: this is called by
327         other functions to actually run a command.  Before we run it,
328         install a SIGALRM handler and set up a timer to go off in the
329         future (default is 5s; this can be overridden by individual tests).
330         (run_command): Call it.
331         (run_command_with_output): Call it.
333         * run_make_tests.pl (run_make_with_options): Override the default
334         timeout if the caller requests it.
335         (run_make_test): Pass any timeout override to run_make_with_options.
337         * scripts/features/parallelism: Increase the timeout for long tests.
338         * scripts/options/dash-l: Ditto.
340 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
342         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
343         ENV here.  This doesn't always work.
344         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
345         environment.  Fixes Savannah bug #16698.
347 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
349         * scripts/variables/automatic: Add back the test for bug #8154.
351 2006-04-01  Paul D. Smith  <psmith@gnu.org>
353         * scripts/functions/realpath: Don't run tests with multiple
354         initial slashes on Windows: those paths mean something different.
356 2006-03-19  Paul D. Smith  <psmith@gnu.org>
358         * scripts/features/parallelism: Test that the jobserver is
359         properly managed when we have to re-exec the master instance of
360         make.
362 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
364         * scripts/features/statipattrules: Add tests for bug #16053.
366 2006-03-09  Paul Smith  <psmith@gnu.org>
368         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
369         with DOS drive letters.  Fixes Savannah bug #15947.
371         * test_driver.pl (run_each_test): Set the status properly even
372         when a test fails to execute.  Fixes Savannah bug #15942.
374         * scripts/functions/foreach: Use a different environment variable
375         other than PATH to avoid differences with Windows platforms.
376         Fixes Savannah bug #15938.
378 2006-03-05  Paul D. Smith  <psmith@gnu.org>
380         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
381         type W32.  Fixed Savannah bug #15937.
383         * scripts/features/default_names: Don't call error() when the test
384         fails.  Fixes Savannah bug #15941.
386 2006-02-17  Paul D. Smith  <psmith@gnu.org>
388         * scripts/features/targetvars: Test a complex construction which
389         guarantees that we have to merge variable lists of different
390         sizes.  Tests for Savannah bug #15757.
392 2006-02-15  Paul D. Smith  <psmith@gnu.org>
394         * scripts/functions/error: Make sure filename/lineno information
395         is related to where the error is expanded, not where it's set.
396         * scripts/functions/warning: Ditto.
397         * scripts/functions/foreach: Check for different error conditions.
398         * scripts/functions/word: Ditto.
399         * scripts/variables/negative: Test some variable reference failure
400         conditions.
401         * scripts/options/warn-undefined-variables: Test the
402         --warn-undefined-variables flag.
404 2006-02-09  Paul D. Smith  <psmith@gnu.org>
406         * run_make_tests.pl (set_more_defaults): Update valgrind support
407         for newer versions.
408         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
409         beginning with ".").
411         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
412         functions.
414 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
416         * scripts/features/parallelism: Add a test for bug #15641.
418 2006-02-06  Paul D. Smith  <psmith@gnu.org>
420         * scripts/options/dash-W: Add a test for bug #15341.
422 2006-01-03  Paul D. Smith  <psmith@gnu.org>
424         * scripts/variables/automatic: Add a test for bug #8154.
426         * README: Update to reflect the current state of the test suite.
428 2005-12-12  Paul D. Smith  <psmith@gnu.org>
430         * scripts/features/parallelism, scripts/functions/wildcard,
431         scripts/targets/FORCE, scripts/targets/PHONY,
432         scripts/targets/SILENT: Use the default setting for
433         $delete_command.  Fixes bug #15085.
435         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
437 2005-12-11  Paul D. Smith  <psmith@gnu.org>
439         * scripts/misc/general4: Test implicit rules with '$' in the
440         prereq list & prereq patterns.
441         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
443 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
445         * scripts/features/patternrules: Add a test for bug #13022.
447 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
449         * scripts/features/double_colon: Add a test for bug #14334.
451 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
453         * scripts/functions/flavor: Add a test for the flavor function.
455 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
457         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
458         special variable.
460 2005-10-24  Paul D. Smith  <psmith@gnu.org>
462         * scripts/misc/general4: Test '$$' in prerequisites list.
463         * scripts/features/statipattrules: Rewrite to use run_make_test().
464         Add various static pattern info.
465         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
466         * scripts/features/se_explicit: Add tests for handling '$$' in
467         prerequisite lists with and without setting .SECONDEXPANSION.
468         * scripts/features/order_only: Convert to run_make_test().
469         * run_make_tests.pl (set_more_defaults): If we can't get the value
470         of $(MAKE) from make, then fatal immediately.
472 2005-08-31  Paul D. Smith  <psmith@gnu.org>
474         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
475         an eval to trap errors) and if it exists, use POSIX::getcwd to
476         find the working directory.  If it doesn't exist, go back to the
477         previous methods.  This tries to be more accurate on Windows
478         systems.
480 2005-08-29  Paul D. Smith  <psmith@gnu.org>
482         * scripts/functions/abspath: Add some text to the error messages
483         to get a better idea of what's wrong.  Make warnings instead of
484         errors.
486         * scripts/features/patspecific_vars: Don't use "test", which is
487         UNIX specific.  Print the values and let the test script match
488         them.
490 2005-08-25  Paul Smith  <psmith@gnu.org>
492         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
493         former works better with non-UNIX environments.  Fixes Savannah
494         bug #14129.
496 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
498         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
499         $(sort) so that the resulting order is no longer filesystem-
500         dependant.
502 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
504         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
506 2005-08-07  Paul D. Smith  <psmith@gnu.org>
508         * scripts/features/parallelism: Add a test for a bug reported by
509         Michael Matz (matz@suse.de) in which make exits without waiting
510         for all its children in some situations during parallel builds.
512 2005-07-08  Paul D. Smith  <psmith@gnu.org>
514         * test_driver.pl: Reset the environment to a clean value every
515         time before we invoke make.  I'm suspicious that the environment
516         isn't handled the same way in Windows as it is in UNIX, and some
517         variables are leaking out beyond the tests they are intended for.
518         Create an %extraENV hash tests can set to add more env. vars.
519         * tests/scripts/features/export: Change to use %extraENV.
520         * tests/scripts/functions/eval: Ditto.
521         * tests/scripts/functions/origin: Ditto.
522         * tests/scripts/options/dash-e: Ditto.
523         * tests/scripts/variables/SHELL: Ditto.
525 2005-06-27  Paul D. Smith  <psmith@gnu.org>
527         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
528         files.
529         * scripts/features/reinvoke: Rewrite to be safer on systems with
530         subsecond timestamps.
531         * scripts/features/patternrules: False exits with different error
532         codes on different systems (for example, Linux => 1, Solaris => 255).
534         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
535         to be sure it will be considered updated when it's remade.
537 2005-06-26  Paul D. Smith  <psmith@gnu.org>
539         * scripts/functions/shell: New test suite for the shell function.
541 2005-06-25  Paul D. Smith  <psmith@gnu.org>
543         * scripts/features/include: Test include/-include/sinclude with no
544         arguments.  Tests fix for Savannah bug #1761.
546         * scripts/misc/general3: Implement comprehensive testing of
547         backslash-newline behavior in command scripts: various types of
548         quoting, fast path / slow path, etc.
549         Tests fix for Savannah bug #1332.
551         * scripts/options/symlinks: Test symlinks to non-existent files.
552         Tests fix for Savannah bug #13280.
554         * scripts/misc/general3: Test semicolons in variable references.
555         Tests fix for Savannah bug #1454.
557         * scripts/variables/MAKE_RESTARTS: New file: test the
558         MAKE_RESTARTS variable.
559         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
560         Tests fix for Savannah bug #7566.
561         * scripts/options/dash-W: New file: test the -W flag, including
562         re-exec infinite looping.
564 2005-06-12  Paul D. Smith  <psmith@gnu.org>
566         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
567         This test only works on systems that have /dev/full (e.g., Linux).
569 2005-06-09  Paul D. Smith  <psmith@gnu.org>
571         * scripts/functions/foreach: Add a test for Savannah bug #11913.
573 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
575         * scripts/features/include: Add a test for Savannah bug #13216.
576         * scripts/features/patternrules: Add a test for Savannah bug #13218.
578 2005-05-13  Paul D. Smith  <psmith@gnu.org>
580         * scripts/features/conditionals: Add tests for the new if... else
581         if... endif syntax.
583 2005-05-03  Paul D. Smith  <psmith@gnu.org>
585         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
586         DEFAULT_GOAL.
588 2005-05-02  Paul D. Smith  <psmith@gnu.org>
590         * scripts/features/parallelism: Add a test for exporting recursive
591         variables containing $(shell ) calls.  Rewrite this script to use
592         run_make_test() everywhere.
594 2005-04-07  Paul D. Smith  <psmith@gnu.org>
596         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
598 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
600         * scripts/variables/automatic: Add a test for Savannah bug #12320.
602 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
604         * scripts/features/patternrules: Add a test for Savannah bug #12267.
606 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
608         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
609         bug #12266.
611 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
613         * scripts/features/patternrules: Add a test for Savannah bug #12202.
615 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
617         * scripts/features/se_implicit: Add a test for stem
618         termination bug. Add a test for stem triple-expansion bug.
620         * scripts/features/se_statpat: Add a test for stem
621         triple-expansion bug.
623         * scripts/features/statipattrules: Change test #4 to reflect
624         new way empty prerequisite list is handled.
627 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
629         * scripts/features/statipattrules: Add a test for
630         Savannah bug #12180.
632 2005-02-28  Paul D. Smith  <psmith@gnu.org>
634         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
636         * scripts/options/symlinks: New file to test checking of symlink
637         timestamps.  Can't use filename dash-L because it conflicts with
638         dash-l on case-insensitive filesystems.
640         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
641         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
642         unique filenames.
644 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
646         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
647         special variable.
649 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
651         * scripts/features/se_explicit: Test the second expansion in
652         explicit rules.
653         * scripts/features/se_implicit: Test the second expansion in
654         implicit rules.
655         * scripts/features/se_statpat: Test the second expansion in
656         static pattern rules.
657         * scripts/variables/automatic: Fix to work with the second
658         expansion.
660         * scripts/misc/general4: Add a test for bug #12091.
662 2005-02-27  Paul D. Smith  <psmith@gnu.org>
664         * scripts/functions/eval: Check that eval of targets within
665         command scripts fails.  See Savannah bug # 12124.
667 2005-02-26  Paul D. Smith  <psmith@gnu.org>
669         * test_driver.pl (compare_output): If a basic comparison of the
670         log and answer doesn't match, try harder: change all backslashes
671         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
673 2005-02-09  Paul D. Smith  <psmith@gnu.org>
675         * scripts/features/recursion: Test command line variable settings:
676         only one instance of a given variable should be provided.
678 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
680         * tests/scripts/functions/abspath: New file: test `abspath'
681         built-in function.
683         * tests/scripts/functions/realpath: New file: test `realpath'
684         built-in function.
686 2004-11-28  Paul D. Smith  <psmith@gnu.org>
688         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
689         this doesn't really test anything useful in UNIX but...
691         * scripts/variables/SHELL: New file: test proper handling of SHELL
692         according to POSIX rules.  Fixes bug #1276.
694 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
696         * scripts/functions/word: Test $(firstword ) and $(lastword ).
698 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
700         * scripts/features/patspecific_vars: Test simple/recursive
701         variable expansion.
703 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
705         * scripts/features/include: Test dontcare flag inheritance
706         when rebuilding makefiles.
708 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
710         * scripts/features/patspecific_vars: Test exported variables.
712 2004-09-22  Paul D. Smith  <psmith@gnu.org>
714         * run_make_tests.pl (run_make_test): Don't add newlines to the
715         makestring or answer if they are completely empty.
717         * scripts/features/patternrules: Rename from implicit_prereq_eval.
719         * scripts/test_template: Rework the template.
721 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
723         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
724         `#!/usr/bin/env perl'.
726         * scripts/features/implicit_prereq_eval: Test implicit rule
727         prerequisite evaluation code.
729 2004-09-21  Paul D. Smith  <psmith@gnu.org>
731         * run_make_tests.pl (run_make_test): Enhance to allow the make
732         string to be undef: in that case it reuses the previous make
733         string.  Allows multiple tests on the same makefile.
735         * scripts/variables/flavors: Add some tests for prefix characters
736         interacting with define/endef variables.
738 2004-09-20  Paul D. Smith  <psmith@gnu.org>
740         * scripts/functions/substitution: Rewrite to use run_make_test()
741         interface, and add test for substitution failures reported by
742         Markus Mauhart <qwe123@chello.at>.
744 2004-03-22  Paul D. Smith  <psmith@gnu.org>
746         * test_driver.pl (run_each_test, toplevel, compare_output): Change
747         to track both the testing categories _AND_ the number of
748         individual tests, and report both sets of numbers.
750 2004-02-21  Paul D. Smith  <psmith@gnu.org>
752         * scripts/functions/origin: Set our own environment variable
753         rather than relying on $HOME.
755 2004-01-21  Paul D. Smith  <psmith@gnu.org>
757         * scripts/features/conditionals: Test arguments to ifn?def which
758         contain whitespace (such as a function that is evaluated).  Bug
759         #7257.
761 2004-01-07  Paul D. Smith  <psmith@gnu.org>
763         * scripts/features/order_only: Test order-only prerequisites in
764         pattern rules (patch #2349).
766 2003-11-02  Paul D. Smith  <psmith@gnu.org>
768         * scripts/functions/if: Test if on conditionals with trailing
769         whitespace--bug #5798.
771         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
773 2003-04-19  Paul D. Smith  <psmith@gnu.org>
775         * scripts/features/patspecific_vars: Test multiple patterns
776         matching the same target--Bug #1405.
778 2003-04-09  Paul D. Smith  <psmith@gnu.org>
780         * run_make_tests.pl (set_more_defaults): A new $port_type of
781         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
782         for OS/2.
784 2003-03-28  Paul D. Smith  <psmith@gnu.org>
786         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
787         not prerequisites)--Bug #2515.
789 2003-01-30  Paul D. Smith  <psmith@gnu.org>
791         * scripts/features/targetvars: Test very long target-specific
792         variable definition lines (longer than the default make buffer
793         length).  Tests patch # 1022.
795         * scripts/functions/eval: Test very recursive $(eval ...) calls
796         with simple variable expansion (bug #2238).
798         * scripts/functions/word: Test error handling for word and
799         wordlist functions (bug #2407).
801 2003-01-22  Paul D. Smith  <psmith@gnu.org>
803         * scripts/functions/call: Test recursive argument masking (bug
804         #1744).
806 2002-10-25  Paul D. Smith  <psmith@gnu.org>
808         * scripts/functions/eval: Test using $(eval ...) inside
809         conditionals (Bug #1516).
811 2002-10-14  Paul D. Smith  <psmith@gnu.org>
813         * scripts/options/dash-t: Add a test for handling -t on targets
814         with no commands (Bug #1418).
816 2002-10-13  Paul D. Smith  <psmith@gnu.org>
818         * scripts/features/targetvars: Add a test for exporting
819         target-specific vars (Bug #1391).
821 2002-10-05  Paul D. Smith  <psmith@gnu.org>
823         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
824         and $${@F}.
826 2002-09-23  Paul D. Smith  <psmith@gnu.org>
828         * scripts/features/escape: Test handling of escaped comment
829         characters in targets and prerequisites.
831 2002-09-18  Paul D. Smith  <psmith@gnu.org>
833         * scripts/features/export: Test export/unexport of multiple
834         variables in a single command.
836 2002-09-17  Paul D. Smith  <psmith@gnu.org>
838         * scripts/features/targetvars: Tests for Bug #940: test
839         target-specific and pattern-specific variables in conjunction with
840         double-colon targets.
842 2002-09-10  Paul D. Smith  <psmith@gnu.org>
844         * test_driver.pl (compare_output): Match the new format for time
845         skew error messages.
847         * scripts/features/export: Created.  Add tests for export/unexport
848         capabilities, including exporting/unexporting expanded variables.
850         * scripts/features/conditionals: Add a test for expanded variables
851         in ifdef conditionals.
853 2002-09-04  Paul D. Smith  <psmith@gnu.org>
855         * scripts/features/reinvoke: Change touch/sleep combos to utouch
856         invocations.
857         * scripts/features/vpathgpath: Ditto.
858         * scripts/features/vpathplus: Ditto.
859         * scripts/options/dash-n: Ditto.
860         * scripts/targets/INTERMEDIATE: Ditto.
861         * scripts/targets/SECONDARY: Ditto.
863         * scripts/options/dash-t: Added a test for the -t bug fixed by
864         Henning Makholm.  This test was also contributed by Henning.
866         * scripts/misc/general4: Add a test suite for obscure algorithmic
867         features of make.  First test: make sure creation subdirectories
868         as prerequisites of targets works properly.
870         * scripts/misc/version: Remove this bogus test.
872 2002-08-07  Paul D. Smith  <psmith@gnu.org>
874         * scripts/misc/general3: Add a test for makefiles that don't end
875         in newlines.
877         * scripts/variables/special: Create tests for the special
878         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
879         for now as it's not yet supported.
881 2002-08-01  Paul D. Smith  <psmith@gnu.org>
883         * scripts/options/dash-B: Add a test for the new -B option.
885 2002-07-11  Paul D. Smith  <psmith@gnu.org>
887         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
888         -valgrind option to the test suite.
889         (set_more_defaults): Set up the file descriptor to capture
890         Valgrind output.  We have to unset its close-on-exec flag; we
891         hardcode the value for F_SETFD (2) rather than load it; hopefully
892         this will help us avoid breaking the Windows/DOS test suite.
894 2002-07-10  Paul D. Smith  <psmith@gnu.org>
896         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
897         $$(@F).
899         * test_driver.pl (utouch): Create a new function that creates a
900         file with a specific timestamp offset.  Use of this function will
901         let us avoid lots of annoying sleep() invocations in the tests
902         just to get proper timestamping, which will make the tests run a
903         lot faster.  So far it's only used in the automatic test suite.
905 2002-07-09  Paul D. Smith  <psmith@gnu.org>
907         * scripts/variables/automatic: Create a test for automatic variables.
909 2002-07-08  Paul D. Smith  <psmith@gnu.org>
911         * scripts/features/order_only: Test new order-only prerequisites.
913 2002-07-07  Paul D. Smith  <psmith@gnu.org>
915         * scripts/functions/eval: Test new function.
916         * scripts/functions/value: Test new function.
917         * scripts/variables/MAKEFILE_LIST: Test new variable.
919 2002-04-28  Paul D. Smith  <psmith@gnu.org>
921         * scripts/functions/call: New test: transitive closure
922         implementation using $(call ...) to test variable recursion.
924 2002-04-21  Paul D. Smith  <psmith@gnu.org>
926         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
927         directories in the script directories.
929 2001-05-02  Paul D. Smith  <psmith@gnu.org>
931         * scripts/variables/flavors: Test define/endef scripts where only
932         one of the command lines is quiet.
934 2000-06-22  Paul D. Smith  <psmith@gnu.org>
936         * scripts/options/dash-q: New file; test the -q option.  Includes
937         a test for PR/1780.
939 2000-06-21  Paul D. Smith  <psmith@gnu.org>
941         * scripts/features/targetvars: Added a test for PR/1709: allowing
942         semicolons in target-specific variable values.
944 2000-06-19  Paul D. Smith  <psmith@gnu.org>
946         * scripts/functions/addsuffix: Test for an empty final argument.
947         Actually this bug might have happened for any function, but this
948         one was handy.
950 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
952         * scripts/options/general: If parallel jobs are not supported,
953         expect a warning message from Make.
955 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
957         * scripts/options/general: Don't try -jN with N != 1 if parallel
958         jobs are not supported.
960 2000-05-24  Paul D. Smith  <psmith@gnu.org>
962         * scripts/options/general: Test general option processing (PR/1716).
964 2000-04-11  Paul D. Smith  <psmith@gnu.org>
966         * scripts/functions/strip: Test empty value to strip (PR/1689).
968 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
970         * scripts/features/reinvoke: Sleep before updating the target
971         files in the first test, to ensure its time stamp really gets
972         newer; otherwise Make might re-exec more than once.
974 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
976         * scripts/features/double_colon: Don't run the parallel tests if
977         parallel jobs aren't supported.
979 2000-04-04  Paul D. Smith  <psmith@gnu.org>
981         * scripts/functions/word: wordlist doesn't swap arguments anymore.
983 2000-03-27  Paul D. Smith  <psmith@gnu.org>
985         * scripts/features/statipattrules: Test that static pattern rules
986         whose prerequisite patterns resolve to empty strings throw an
987         error (instead of dumping core).  Fixes PR/1670.
989         * scripts/features/reinvoke: Make more robust by touching "b"
990         first, to ensure it's not newer than "a".
991         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
992         * scripts/options/dash-n: Ditto.
994         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
995         recursive invocations of $(call ...) to break.  I can't come up
996         with any way to get both working at the same time, so I backed out
997         the fix to 1527 and added a test case for recursive calls.  This
998         also tests the fix for PR/1610.
1000         * scripts/features/double_colon: Test that circular dependencies
1001         in double-colon rule sets are detected correctly (PR/1671).
1003 2000-03-26  Paul D. Smith  <psmith@gnu.org>
1005         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
1006         .INTERMEDIATE files when given on the command line (PR/1669).
1008 2000-03-08  Paul D. Smith  <psmith@gnu.org>
1010         * scripts/options/dash-k: Add a test for error detection by
1011         multiple targets depending on the same prerequisite with -k.
1012         For PR/1634.
1014 2000-02-07  Paul D. Smith  <psmith@gnu.org>
1016         * scripts/features/escape: Add a test for backslash-escaped spaces
1017         in a target name (PR/1586).
1019 2000-02-04  Paul D. Smith  <psmith@gnu.org>
1021         * scripts/features/patspecific_vars: Add a test for pattern-specific
1022         target variables inherited from the parent target (PR/1407).
1024 2000-02-02  Paul D. Smith  <psmith@gnu.org>
1026         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
1027         to make sure sorting order, etc. is predictable.
1028         Reported by Andreas Jaeger <aj@suse.de>.
1030         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
1031         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
1032         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
1033         1 for other systems.
1034         * scripts/features/vpathplus (touchfiles): Use the $wtime value
1035         instead of hardcoding 2.
1036         * scripts/targets/SECONDARY: Ditto.
1037         * scripts/targets/INTERMEDIATE: Ditto.
1039 2000-01-27  Paul D. Smith  <psmith@gnu.org>
1041         * test_driver.pl (toplevel): Don't try to run test scripts which
1042         are really directories.
1044 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1046         * scripts/features/include: Remove a check; the fix caused more
1047         problems than the error, so I removed it and removed the test for
1048         it.
1050 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1052         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1053         sure $(call ...) doesn't eval its arguments and that you can
1054         invoke foreach from it without looping forever.
1056 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1058         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1059         .INTERMEDIATE settings on files don't disable them as implicit
1060         intermediate possibilities.
1062 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1064         * scripts/features/double_colon: Add a test for PR/1476: Try
1065         double-colon rules as non-goal targets and during parallel builds
1066         to make sure they're handled serially.
1068 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1070         * scripts/functions/if: Add a test for PR/1429: put some text
1071         after an if-statement to make sure it works.
1073         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1074         in target-specific variable definitions correctly.
1076 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1078         * scripts/variables/MAKEFILES: This was really broken: it didn't
1079         test anything at all, really.  Rewrote it, plus added a test for
1080         PR/1394.
1082 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1084         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1085         behave properly when used with recursive targets".
1087 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1089         * scripts/features/targetvars: Add a check for PR/1378:
1090         "Target-specific vars don't inherit correctly"
1092 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1094         * test_driver.pl (get_osname): Change $fancy_file_names to
1095         $short_filenames and reverse the logic.
1096         (run_each_test): Change test of non-existent $port_host to use
1097         $short_filenames--problem reported by Eli Zaretskii.
1099 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1101         * scripts/features/parallelism: Add a check to ensure that the
1102         jobserver works when we re-invoke.  Also cleaned up the tests a
1103         little, reducing the number of rules we use so the test won't need
1104         as many "sleep" commands.
1106 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1108         * scripts/features/reinvoke: Remove invocations of "touch" in
1109         makefiles.  See the comments on the touch function rewrite below.
1110         Note that UNIX touch behaves the same way if the file already
1111         exists: it sets the time to the _local_ time.  We don't want
1112         this.  This is probably a good tip for makefile writers in
1113         general, actually... where practical.
1114         * scripts/options/dash-l: Ditto.
1115         * scripts/options/dash-n: Ditto.
1117         * test_driver.pl (run_each_test): In retrospect, I don't like the
1118         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1119         changed it back to use .log, .base, and .diff.
1121         * run_make_tests.pl (set_more_defaults): Move the check for the
1122         make pathname to here from set_defaults (that's too early since it
1123         happens before the command line processing).
1124         Create a new variable $port_type, calculated from $osname, to
1125         specify what kind of system we're running on.  We should integrate
1126         the VOS stuff here, too.
1127         (valid_option): Comment out the workdir/-work stuff so people
1128         won't be fooled into thinking it works... someone needs to fix
1129         this, though!
1131         * scripts/functions/origin: Use $port_type instead of $osname.
1132         * scripts/functions/foreach: Ditto.
1133         * scripts/features/default_names: Ditto.
1135 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1137         * test_driver.pl (touch): Rewrite this function.  Previously it
1138         used to use utime() to hard-set the time based on the current
1139         local clock, or, if the file didn't exist, it merely created it.
1140         This mirrors exactly what real UNIX touch does, but it fails badly
1141         on networked filesystems where the FS server clock is skewed from
1142         the local clock: normally modifying a file causes it to get a mod
1143         time based on the _server's_ clock.  Hard-setting it based on the
1144         _local_ clock causes gratuitous errors and makes the tests
1145         unreliable except on local filesystems.  The new function will
1146         simply modify the file, allowing the filesystem to set the mod
1147         time as it sees fit.
1149         * scripts/features/parallelism: The second test output could
1150         change depending on how fast some scripts completed; use "sleep"
1151         to force the order we want.
1153         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1154         means that "%ENV = ();" doesn't do the right thing.  This worked
1155         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1156         the environment rather than require specific versions.
1158         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1159         modifier "s", so the tests will run with Perl 4.
1160         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1161         option in PURIFYOPTIONS.
1162         (setup_for_test): Don't remove any logs unless $pure_log is set.
1164 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1166         * scripts/features/reinvoke: Put the SHELL definition in the right
1167         test makefile.
1169 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1171         ChangeLog file for the test suite created.
1174 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001, 2002,
1175 2003, 2004, 2005, 2006, 2007, 2008, 2009, 2011, 2012 Free Software Foundation,
1176 Inc.
1177 This file is part of GNU Make.
1179 GNU Make is free software; you can redistribute it and/or modify it under the
1180 terms of the GNU General Public License as published by the Free Software
1181 Foundation; either version 3 of the License, or (at your option) any later
1182 version.
1184 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1185 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1186 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1188 You should have received a copy of the GNU General Public License along with
1189 this program.  If not, see <http://www.gnu.org/licenses/>.