Improve handling for escaped colons in prerequisite lists.
[make.git] / tests / ChangeLog
blob78bd4cabe0a41fc701c72fd7dde7ce83dee6c3bd
1 2012-03-04  Paul Smith  <psmith@gnu.org>
3         * scripts/features/se_explicit: Test $(x:%=%) format in secondary
4         expansion prerequisite lists.  See Savannah bug #16545.
6         * scripts/features/escape: Test escaped ":" in prerequisite lists.
7         See Savannah bug #12126.
9         * scripts/variables/private: Test appending private variables in
10         pattern-specific target rules.  See Savannah bug #35468.
12 2012-03-03  Paul Smith  <psmith@gnu.org>
14         * scripts/variables/SHELL: Ensure .SHELLFLAGS works with options
15         separated by whitespace.
17         * scripts/targets/ONESHELL: Try .ONESHELL in combination with
18         whitespace-separated options in .SHELLFLAGS.  See Savannah bug #35397.
20         * scripts/functions/filter-out: Add filter tests and test escape
21         operations.  See Savannah bug #35410.
23         * guile.supp: Suppress valgrind errors from Guile
24         * run_make_tests.pl: Use the Guile suppression file.
26         * scripts/misc/bs-nl: Check for POSIX and non-POSIX
27         backslash/newline handling.  Addresses Savannah bug #16670.
29 2012-01-29  Paul Smith  <psmith@gnu.org>
31         * scripts/variables/flavors: Add tests for ::=
32         * scripts/variables/define: Ditto
34         * scripts/functions/file: Test the new $(file ...) function.
36 2012-01-12  Paul Smith  <psmith@gnu.org>
38         * scripts/functions/guile: New regression tests for Guile support.
40 2011-12-10  Paul Smith  <psmith@gnu.org>
42         * scripts/targets/SECONDARY: Add prereq statements to ensure rules
43         are printed in the right order for test #9
45 2011-11-14  Paul Smith  <psmith@gnu.org>
47         * scripts/features/double_colon: Check double-colon with escaped
48         filenames.  See Savannah bug #33399.
50 2011-09-18  Paul Smith  <psmith@gnu.org>
52         * scripts/features/parallelism: On re-exec make sure we preserve
53         the value of MAKEFLAGS when necessary.  See Savannah bug #33873.
55         * scripts/features/vpath3: Verify handling of -lfoo libraries
56         found via vpath vs. the standard directory search.
57         See Savannah bug #32511.
59 2011-09-12  Paul Smith  <psmith@gnu.org>
61         * scripts/functions/call: Verify that using export in a $(call ...)
62         context creates a global variable.  See Savannah bug #32498.
64 2011-09-02  Paul Smith  <psmith@gnu.org>
66         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
67         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
69 2011-08-29  Paul Smith  <psmith@gnu.org>
71         * scripts/features/varnesting: Test resetting of variables while
72         expanding them.  See Savannah patch #7534
74 2011-06-12  Paul Smith  <psmith@gnu.org>
76         * scripts/features/archives: Check archives with whitespace at the
77         beginning, end, and extra in the middle.
78         Another test for Savannah bug #30612.
80 2011-05-07  Paul Smith  <psmith@gnu.org>
82         * scripts/variables/private: Ensure we skip private variables when
83         appending.  Test for Savannah bug #32872.
85         * scripts/functions/wildcard: Verify wildcard used to test for
86         file existence/non-existence.
88 2011-05-02  Paul Smith  <psmith@gnu.org>
90         * scripts/functions/sort: Add a test for Savannah bug #33125.
92 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
94         * scripts/features/shell_assignment: Regression for "!=" feature
96 2010-11-06  Paul Smith  <psmith@gnu.org>
98         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
99         * scripts/functions/call: Ditto.
100         * scripts/variables/special: Ditto.
102         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
104 2010-08-29  Paul Smith  <psmith@gnu.org>
106         * scripts/features/errors: Add new error message to output text.
107         * scripts/variables/SHELL: Ditto.
108         * scripts/targets/POSIX: Ditto.
109         * scripts/options/dash-k: Ditto.
110         * scripts/features/vpathplus: Ditto.
111         * scripts/features/patternrules: Ditto.
112         * scripts/features/parallelism: Ditto.
114 2010-08-13  Paul Smith  <psmith@gnu.org>
116         * scripts/features/archives: New regression tests for archive
117         support.  Test for fix to Savannah bug #30612.
119         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
120         the features available in $(.FEATURES).
122 2010-08-10  Paul Smith  <psmith@gnu.org>
124         * scripts/features/reinvoke: Ensure command line variable settings
125         are preserved across make re-exec.  Tests Savannah bug #30723.
127 2010-07-28  Paul Smith  <psmith@gnu.org>
129         * scripts/targets/POSIX: Compatibility issues with Solaris (and
130         Tru64?); "false" returns different exit codes, and set -x shows
131         output with extra whitespace.  Run the commands by hand first to
132         find out what the real shell would do, then compare what make does.
133         * scripts/variables/SHELL: Ditto.
135 2010-07-12  Paul Smith  <psmith@gnu.org>
137         * test_driver.pl: Add a new $perl_name containing the path to Perl.
138         * run_make_tests.pl (run_make_test): Replace the special string
139         #PERL# in a makefile etc. with the path the Perl executable so
140         makefiles can use it.
142         * scripts/targets/ONESHELL: Add a new set of regression tests for
143         the .ONESHELL feature.
145 2010-07-06  Paul Smith  <psmith@gnu.org>
147         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
149         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
150         Verify that enabling .POSIX changes the shell flags to set -e.
152 2010-07-01  Paul Smith  <psmith@gnu.org>
154         * scripts/features/recursion: Add a space to separate command-line
155         args.  Fixes Savannah bug #29968.
157 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
159         * scripts/features/vpath3: Test for the new library search
160         behavior.
162 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
164         * scripts/features/se_explicit: Enable the test for now fixed
165         Savannah bug 25780.
167 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
169         * scripts/variables/undefine: Tests for the new undefine feature.
171 2009-10-03  Paul Smith  <psmith@gnu.org>
173         * scripts/features/parallelism: Test for open Savannah bug #26846.
175         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
177         * scripts/variables/MAKEFLAGS: Created.
178         Add test for Savannah bug #2216 (still open).
180         * scripts/features/include: Test for Savannah bug #102 (still open).
182 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
184         * scripts/features/include: Add diagnostics issuing tests for
185         cases where targets have been updated and failed with the
186         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
188 2009-09-28  Paul Smith  <psmith@gnu.org>
190         * scripts/functions/shell: Add regression test for Savannah bug
191         #20513 (still open).
193         * scripts/features/se_explicit: Add regression tests for Savannah
194         bug #25780 (still open).
196         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
197         that runs tests we know will fail.  This allows us to add
198         regression tests to the test suite for bugs that haven't been
199         fixed yet.
201 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
203         * scripts/features/patspecific_vars: Add a test for the shortest
204         stem first order.
206         * scripts/features/patternrules: Add a test for the shortest stem
207         first order.
209 2009-09-24  Paul Smith  <psmith@gnu.org>
211         * scripts/features/se_implicit: Add a test for order-only
212         secondary expansion prerequisites.
214 2009-09-23  Paul Smith  <psmith@gnu.org>
216         * scripts/features/patternrules: Test that we can remove pattern
217         rules, both single and multiple prerequisites.  Savannah bug #18622.
219         * scripts/features/echoing: Rework for run_make_test().
221 2009-06-14  Paul Smith  <psmith@gnu.org>
223         * scripts/features/vpath: Verify we don't get bogus circular
224         dependency warnings if we choose a different file via vpath during
225         update.  Savannah bug #13529.
227 2009-06-13  Paul Smith  <psmith@gnu.org>
229         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
230         files (and files included by them) don't set the default goal.
231         Savannah bug #13401.
233         * scripts/functions/wildcard: Test that wildcards with
234         non-existent glob matchers return empty.
236 2009-06-09  Paul Smith  <psmith@gnu.org>
238         * scripts/options/dash-B: Test the $? works correctly with -B.
239         Savannah bug #17825.
241         * scripts/features/patternrules: Test that dependencies of
242         "also_make" targets are created properly.  Savannah bug #19108.
244         * test_driver.pl (compare_output): Create a "run" file for failed
245         tests containing the command that was run.
246         (get_runfile): New function.
248         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
249         allow memcheck and massif tools.
251         * scripts/features/patternrules: Have to comment out a line in the
252         first test due to backing out a change that broke the implicit
253         rule search algorithm.  Savannah bug #17752.
254         * scripts/misc/general4: Remove a test that is redundant with
255         patternrules.
257         * scripts/features/parallelism: Add a test for re-exec with
258         jobserver master override.  Savannah bug #18124.
260 2009-06-08  Paul Smith  <psmith@gnu.org>
262         * scripts/features/targetvars: Add a test for continued target
263         vars after a semicolon.  Savannah bug #17521.
265 2009-06-07  Paul Smith  <psmith@gnu.org>
267         * scripts/features/se_explicit: Make sure we catch defining
268         prereqs during snap_deps().  Savannah bug #24622.
270         * scripts/variables/automatic: Check prereq ordering when the
271         target with the recipe has no prereqs.  Savannah bug #21198.
273         * scripts/variables/LIBPATTERNS: Add a new set of test for
274         $(.LIBPATTERNS) (previously untested!)
276 2009-06-04  Paul Smith  <psmith@gnu.org>
278         * scripts/variables/SHELL: The export target-specific SHELL test
279         has an incorrect known-good-value.
281         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
283         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
285 2009-05-31  Paul Smith  <psmith@gnu.org>
287         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
289         * scripts/features/targetvars: Add tests of overrides for Savannah
290         bug #26207.
291         * scripts/features/patspecific_vars: Ditto.
293         * scripts/features/patternrules: Add a test for Savannah bug #26593.
295 2009-05-30  Paul Smith  <psmith@gnu.org>
297         * scripts/variables/flavors: Update with new variable flavor tests.
298         * scripts/variables/define: Create a new set of tests for
299         define/endef and move those aspects of the flavors suite here.
301 2009-05-25  Paul Smith  <psmith@gnu.org>
303         * scripts/features/targetvars: Ditto.
305         * scripts/features/export: Test new variable parsing abilities.
307 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
309         * scripts/variables/private: Create a new suite of tests for 'private'.
311 2007-11-04  Paul Smith  <psmith@gnu.org>
313         * scripts/functions/eval: Update error message for command -> recipe.
315         * test_driver.pl (compare_output): Allow the answer to be a regex,
316         if surrounded by '/'.
317         * scripts/misc/close_stdout: Use a regex for the answer, since
318         sometimes the error will have a description and sometimes it won't.
320 2007-09-10  Paul Smith  <psmith@gnu.org>
322         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
324 2007-08-15  Paul Smith  <psmith@gnu.org>
326         These test cases were contributed by
327         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
328         Savannah bugs #3330 and #15919.
330         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
331         15919.
333         * scripts/features/parallelism: Add tests for wrong answer/hang
334         combining INTERMEDIATE, order-only prereqs, and parallelism.
335         See Savannah bugs 3330 and 15919.
337 2007-07-13  Paul Smith  <psmith@gnu.org>
339         Install a timeout so tests can never loop infinitely.
340         Original idea and patch for a single-test version provided by
341         Icarus Sparry <savannah@icarus.freeuk.com>
343         * test_driver.pl (_run_command): New function: this is called by
344         other functions to actually run a command.  Before we run it,
345         install a SIGALRM handler and set up a timer to go off in the
346         future (default is 5s; this can be overridden by individual tests).
347         (run_command): Call it.
348         (run_command_with_output): Call it.
350         * run_make_tests.pl (run_make_with_options): Override the default
351         timeout if the caller requests it.
352         (run_make_test): Pass any timeout override to run_make_with_options.
354         * scripts/features/parallelism: Increase the timeout for long tests.
355         * scripts/options/dash-l: Ditto.
357 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
359         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
360         ENV here.  This doesn't always work.
361         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
362         environment.  Fixes Savannah bug #16698.
364 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
366         * scripts/variables/automatic: Add back the test for bug #8154.
368 2006-04-01  Paul D. Smith  <psmith@gnu.org>
370         * scripts/functions/realpath: Don't run tests with multiple
371         initial slashes on Windows: those paths mean something different.
373 2006-03-19  Paul D. Smith  <psmith@gnu.org>
375         * scripts/features/parallelism: Test that the jobserver is
376         properly managed when we have to re-exec the master instance of
377         make.
379 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
381         * scripts/features/statipattrules: Add tests for bug #16053.
383 2006-03-09  Paul Smith  <psmith@gnu.org>
385         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
386         with DOS drive letters.  Fixes Savannah bug #15947.
388         * test_driver.pl (run_each_test): Set the status properly even
389         when a test fails to execute.  Fixes Savannah bug #15942.
391         * scripts/functions/foreach: Use a different environment variable
392         other than PATH to avoid differences with Windows platforms.
393         Fixes Savannah bug #15938.
395 2006-03-05  Paul D. Smith  <psmith@gnu.org>
397         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
398         type W32.  Fixed Savannah bug #15937.
400         * scripts/features/default_names: Don't call error() when the test
401         fails.  Fixes Savannah bug #15941.
403 2006-02-17  Paul D. Smith  <psmith@gnu.org>
405         * scripts/features/targetvars: Test a complex construction which
406         guarantees that we have to merge variable lists of different
407         sizes.  Tests for Savannah bug #15757.
409 2006-02-15  Paul D. Smith  <psmith@gnu.org>
411         * scripts/functions/error: Make sure filename/lineno information
412         is related to where the error is expanded, not where it's set.
413         * scripts/functions/warning: Ditto.
414         * scripts/functions/foreach: Check for different error conditions.
415         * scripts/functions/word: Ditto.
416         * scripts/variables/negative: Test some variable reference failure
417         conditions.
418         * scripts/options/warn-undefined-variables: Test the
419         --warn-undefined-variables flag.
421 2006-02-09  Paul D. Smith  <psmith@gnu.org>
423         * run_make_tests.pl (set_more_defaults): Update valgrind support
424         for newer versions.
425         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
426         beginning with ".").
428         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
429         functions.
431 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
433         * scripts/features/parallelism: Add a test for bug #15641.
435 2006-02-06  Paul D. Smith  <psmith@gnu.org>
437         * scripts/options/dash-W: Add a test for bug #15341.
439 2006-01-03  Paul D. Smith  <psmith@gnu.org>
441         * scripts/variables/automatic: Add a test for bug #8154.
443         * README: Update to reflect the current state of the test suite.
445 2005-12-12  Paul D. Smith  <psmith@gnu.org>
447         * scripts/features/parallelism, scripts/functions/wildcard,
448         scripts/targets/FORCE, scripts/targets/PHONY,
449         scripts/targets/SILENT: Use the default setting for
450         $delete_command.  Fixes bug #15085.
452         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
454 2005-12-11  Paul D. Smith  <psmith@gnu.org>
456         * scripts/misc/general4: Test implicit rules with '$' in the
457         prereq list & prereq patterns.
458         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
460 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
462         * scripts/features/patternrules: Add a test for bug #13022.
464 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
466         * scripts/features/double_colon: Add a test for bug #14334.
468 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
470         * scripts/functions/flavor: Add a test for the flavor function.
472 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
474         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
475         special variable.
477 2005-10-24  Paul D. Smith  <psmith@gnu.org>
479         * scripts/misc/general4: Test '$$' in prerequisites list.
480         * scripts/features/statipattrules: Rewrite to use run_make_test().
481         Add various static pattern info.
482         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
483         * scripts/features/se_explicit: Add tests for handling '$$' in
484         prerequisite lists with and without setting .SECONDEXPANSION.
485         * scripts/features/order_only: Convert to run_make_test().
486         * run_make_tests.pl (set_more_defaults): If we can't get the value
487         of $(MAKE) from make, then fatal immediately.
489 2005-08-31  Paul D. Smith  <psmith@gnu.org>
491         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
492         an eval to trap errors) and if it exists, use POSIX::getcwd to
493         find the working directory.  If it doesn't exist, go back to the
494         previous methods.  This tries to be more accurate on Windows
495         systems.
497 2005-08-29  Paul D. Smith  <psmith@gnu.org>
499         * scripts/functions/abspath: Add some text to the error messages
500         to get a better idea of what's wrong.  Make warnings instead of
501         errors.
503         * scripts/features/patspecific_vars: Don't use "test", which is
504         UNIX specific.  Print the values and let the test script match
505         them.
507 2005-08-25  Paul Smith  <psmith@gnu.org>
509         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
510         former works better with non-UNIX environments.  Fixes Savannah
511         bug #14129.
513 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
515         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
516         $(sort) so that the resulting order is no longer filesystem-
517         dependant.
519 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
521         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
523 2005-08-07  Paul D. Smith  <psmith@gnu.org>
525         * scripts/features/parallelism: Add a test for a bug reported by
526         Michael Matz (matz@suse.de) in which make exits without waiting
527         for all its children in some situations during parallel builds.
529 2005-07-08  Paul D. Smith  <psmith@gnu.org>
531         * test_driver.pl: Reset the environment to a clean value every
532         time before we invoke make.  I'm suspicious that the environment
533         isn't handled the same way in Windows as it is in UNIX, and some
534         variables are leaking out beyond the tests they are intended for.
535         Create an %extraENV hash tests can set to add more env. vars.
536         * tests/scripts/features/export: Change to use %extraENV.
537         * tests/scripts/functions/eval: Ditto.
538         * tests/scripts/functions/origin: Ditto.
539         * tests/scripts/options/dash-e: Ditto.
540         * tests/scripts/variables/SHELL: Ditto.
542 2005-06-27  Paul D. Smith  <psmith@gnu.org>
544         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
545         files.
546         * scripts/features/reinvoke: Rewrite to be safer on systems with
547         subsecond timestamps.
548         * scripts/features/patternrules: False exits with different error
549         codes on different systems (for example, Linux => 1, Solaris => 255).
551         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
552         to be sure it will be considered updated when it's remade.
554 2005-06-26  Paul D. Smith  <psmith@gnu.org>
556         * scripts/functions/shell: New test suite for the shell function.
558 2005-06-25  Paul D. Smith  <psmith@gnu.org>
560         * scripts/features/include: Test include/-include/sinclude with no
561         arguments.  Tests fix for Savannah bug #1761.
563         * scripts/misc/general3: Implement comprehensive testing of
564         backslash-newline behavior in command scripts: various types of
565         quoting, fast path / slow path, etc.
566         Tests fix for Savannah bug #1332.
568         * scripts/options/symlinks: Test symlinks to non-existent files.
569         Tests fix for Savannah bug #13280.
571         * scripts/misc/general3: Test semicolons in variable references.
572         Tests fix for Savannah bug #1454.
574         * scripts/variables/MAKE_RESTARTS: New file: test the
575         MAKE_RESTARTS variable.
576         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
577         Tests fix for Savannah bug #7566.
578         * scripts/options/dash-W: New file: test the -W flag, including
579         re-exec infinite looping.
581 2005-06-12  Paul D. Smith  <psmith@gnu.org>
583         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
584         This test only works on systems that have /dev/full (e.g., Linux).
586 2005-06-09  Paul D. Smith  <psmith@gnu.org>
588         * scripts/functions/foreach: Add a test for Savannah bug #11913.
590 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
592         * scripts/features/include: Add a test for Savannah bug #13216.
593         * scripts/features/patternrules: Add a test for Savannah bug #13218.
595 2005-05-13  Paul D. Smith  <psmith@gnu.org>
597         * scripts/features/conditionals: Add tests for the new if... else
598         if... endif syntax.
600 2005-05-03  Paul D. Smith  <psmith@gnu.org>
602         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
603         DEFAULT_GOAL.
605 2005-05-02  Paul D. Smith  <psmith@gnu.org>
607         * scripts/features/parallelism: Add a test for exporting recursive
608         variables containing $(shell ) calls.  Rewrite this script to use
609         run_make_test() everywhere.
611 2005-04-07  Paul D. Smith  <psmith@gnu.org>
613         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
615 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
617         * scripts/variables/automatic: Add a test for Savannah bug #12320.
619 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
621         * scripts/features/patternrules: Add a test for Savannah bug #12267.
623 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
625         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
626         bug #12266.
628 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
630         * scripts/features/patternrules: Add a test for Savannah bug #12202.
632 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
634         * scripts/features/se_implicit: Add a test for stem
635         termination bug. Add a test for stem triple-expansion bug.
637         * scripts/features/se_statpat: Add a test for stem
638         triple-expansion bug.
640         * scripts/features/statipattrules: Change test #4 to reflect
641         new way empty prerequisite list is handled.
644 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
646         * scripts/features/statipattrules: Add a test for
647         Savannah bug #12180.
649 2005-02-28  Paul D. Smith  <psmith@gnu.org>
651         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
653         * scripts/options/symlinks: New file to test checking of symlink
654         timestamps.  Can't use filename dash-L because it conflicts with
655         dash-l on case-insensitive filesystems.
657         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
658         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
659         unique filenames.
661 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
663         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
664         special variable.
666 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
668         * scripts/features/se_explicit: Test the second expansion in
669         explicit rules.
670         * scripts/features/se_implicit: Test the second expansion in
671         implicit rules.
672         * scripts/features/se_statpat: Test the second expansion in
673         static pattern rules.
674         * scripts/variables/automatic: Fix to work with the second
675         expansion.
677         * scripts/misc/general4: Add a test for bug #12091.
679 2005-02-27  Paul D. Smith  <psmith@gnu.org>
681         * scripts/functions/eval: Check that eval of targets within
682         command scripts fails.  See Savannah bug # 12124.
684 2005-02-26  Paul D. Smith  <psmith@gnu.org>
686         * test_driver.pl (compare_output): If a basic comparison of the
687         log and answer doesn't match, try harder: change all backslashes
688         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
690 2005-02-09  Paul D. Smith  <psmith@gnu.org>
692         * scripts/features/recursion: Test command line variable settings:
693         only one instance of a given variable should be provided.
695 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
697         * tests/scripts/functions/abspath: New file: test `abspath'
698         built-in function.
700         * tests/scripts/functions/realpath: New file: test `realpath'
701         built-in function.
703 2004-11-28  Paul D. Smith  <psmith@gnu.org>
705         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
706         this doesn't really test anything useful in UNIX but...
708         * scripts/variables/SHELL: New file: test proper handling of SHELL
709         according to POSIX rules.  Fixes bug #1276.
711 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
713         * scripts/functions/word: Test $(firstword ) and $(lastword ).
715 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
717         * scripts/features/patspecific_vars: Test simple/recursive
718         variable expansion.
720 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
722         * scripts/features/include: Test dontcare flag inheritance
723         when rebuilding makefiles.
725 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
727         * scripts/features/patspecific_vars: Test exported variables.
729 2004-09-22  Paul D. Smith  <psmith@gnu.org>
731         * run_make_tests.pl (run_make_test): Don't add newlines to the
732         makestring or answer if they are completely empty.
734         * scripts/features/patternrules: Rename from implicit_prereq_eval.
736         * scripts/test_template: Rework the template.
738 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
740         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
741         `#!/usr/bin/env perl'.
743         * scripts/features/implicit_prereq_eval: Test implicit rule
744         prerequisite evaluation code.
746 2004-09-21  Paul D. Smith  <psmith@gnu.org>
748         * run_make_tests.pl (run_make_test): Enhance to allow the make
749         string to be undef: in that case it reuses the previous make
750         string.  Allows multiple tests on the same makefile.
752         * scripts/variables/flavors: Add some tests for prefix characters
753         interacting with define/endef variables.
755 2004-09-20  Paul D. Smith  <psmith@gnu.org>
757         * scripts/functions/substitution: Rewrite to use run_make_test()
758         interface, and add test for substitution failures reported by
759         Markus Mauhart <qwe123@chello.at>.
761 2004-03-22  Paul D. Smith  <psmith@gnu.org>
763         * test_driver.pl (run_each_test, toplevel, compare_output): Change
764         to track both the testing categories _AND_ the number of
765         individual tests, and report both sets of numbers.
767 2004-02-21  Paul D. Smith  <psmith@gnu.org>
769         * scripts/functions/origin: Set our own environment variable
770         rather than relying on $HOME.
772 2004-01-21  Paul D. Smith  <psmith@gnu.org>
774         * scripts/features/conditionals: Test arguments to ifn?def which
775         contain whitespace (such as a function that is evaluated).  Bug
776         #7257.
778 2004-01-07  Paul D. Smith  <psmith@gnu.org>
780         * scripts/features/order_only: Test order-only prerequisites in
781         pattern rules (patch #2349).
783 2003-11-02  Paul D. Smith  <psmith@gnu.org>
785         * scripts/functions/if: Test if on conditionals with trailing
786         whitespace--bug #5798.
788         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
790 2003-04-19  Paul D. Smith  <psmith@gnu.org>
792         * scripts/features/patspecific_vars: Test multiple patterns
793         matching the same target--Bug #1405.
795 2003-04-09  Paul D. Smith  <psmith@gnu.org>
797         * run_make_tests.pl (set_more_defaults): A new $port_type of
798         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
799         for OS/2.
801 2003-03-28  Paul D. Smith  <psmith@gnu.org>
803         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
804         not prerequisites)--Bug #2515.
806 2003-01-30  Paul D. Smith  <psmith@gnu.org>
808         * scripts/features/targetvars: Test very long target-specific
809         variable definition lines (longer than the default make buffer
810         length).  Tests patch # 1022.
812         * scripts/functions/eval: Test very recursive $(eval ...) calls
813         with simple variable expansion (bug #2238).
815         * scripts/functions/word: Test error handling for word and
816         wordlist functions (bug #2407).
818 2003-01-22  Paul D. Smith  <psmith@gnu.org>
820         * scripts/functions/call: Test recursive argument masking (bug
821         #1744).
823 2002-10-25  Paul D. Smith  <psmith@gnu.org>
825         * scripts/functions/eval: Test using $(eval ...) inside
826         conditionals (Bug #1516).
828 2002-10-14  Paul D. Smith  <psmith@gnu.org>
830         * scripts/options/dash-t: Add a test for handling -t on targets
831         with no commands (Bug #1418).
833 2002-10-13  Paul D. Smith  <psmith@gnu.org>
835         * scripts/features/targetvars: Add a test for exporting
836         target-specific vars (Bug #1391).
838 2002-10-05  Paul D. Smith  <psmith@gnu.org>
840         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
841         and $${@F}.
843 2002-09-23  Paul D. Smith  <psmith@gnu.org>
845         * scripts/features/escape: Test handling of escaped comment
846         characters in targets and prerequisites.
848 2002-09-18  Paul D. Smith  <psmith@gnu.org>
850         * scripts/features/export: Test export/unexport of multiple
851         variables in a single command.
853 2002-09-17  Paul D. Smith  <psmith@gnu.org>
855         * scripts/features/targetvars: Tests for Bug #940: test
856         target-specific and pattern-specific variables in conjunction with
857         double-colon targets.
859 2002-09-10  Paul D. Smith  <psmith@gnu.org>
861         * test_driver.pl (compare_output): Match the new format for time
862         skew error messages.
864         * scripts/features/export: Created.  Add tests for export/unexport
865         capabilities, including exporting/unexporting expanded variables.
867         * scripts/features/conditionals: Add a test for expanded variables
868         in ifdef conditionals.
870 2002-09-04  Paul D. Smith  <psmith@gnu.org>
872         * scripts/features/reinvoke: Change touch/sleep combos to utouch
873         invocations.
874         * scripts/features/vpathgpath: Ditto.
875         * scripts/features/vpathplus: Ditto.
876         * scripts/options/dash-n: Ditto.
877         * scripts/targets/INTERMEDIATE: Ditto.
878         * scripts/targets/SECONDARY: Ditto.
880         * scripts/options/dash-t: Added a test for the -t bug fixed by
881         Henning Makholm.  This test was also contributed by Henning.
883         * scripts/misc/general4: Add a test suite for obscure algorithmic
884         features of make.  First test: make sure creation subdirectories
885         as prerequisites of targets works properly.
887         * scripts/misc/version: Remove this bogus test.
889 2002-08-07  Paul D. Smith  <psmith@gnu.org>
891         * scripts/misc/general3: Add a test for makefiles that don't end
892         in newlines.
894         * scripts/variables/special: Create tests for the special
895         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
896         for now as it's not yet supported.
898 2002-08-01  Paul D. Smith  <psmith@gnu.org>
900         * scripts/options/dash-B: Add a test for the new -B option.
902 2002-07-11  Paul D. Smith  <psmith@gnu.org>
904         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
905         -valgrind option to the test suite.
906         (set_more_defaults): Set up the file descriptor to capture
907         Valgrind output.  We have to unset its close-on-exec flag; we
908         hardcode the value for F_SETFD (2) rather than load it; hopefully
909         this will help us avoid breaking the Windows/DOS test suite.
911 2002-07-10  Paul D. Smith  <psmith@gnu.org>
913         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
914         $$(@F).
916         * test_driver.pl (utouch): Create a new function that creates a
917         file with a specific timestamp offset.  Use of this function will
918         let us avoid lots of annoying sleep() invocations in the tests
919         just to get proper timestamping, which will make the tests run a
920         lot faster.  So far it's only used in the automatic test suite.
922 2002-07-09  Paul D. Smith  <psmith@gnu.org>
924         * scripts/variables/automatic: Create a test for automatic variables.
926 2002-07-08  Paul D. Smith  <psmith@gnu.org>
928         * scripts/features/order_only: Test new order-only prerequisites.
930 2002-07-07  Paul D. Smith  <psmith@gnu.org>
932         * scripts/functions/eval: Test new function.
933         * scripts/functions/value: Test new function.
934         * scripts/variables/MAKEFILE_LIST: Test new variable.
936 2002-04-28  Paul D. Smith  <psmith@gnu.org>
938         * scripts/functions/call: New test: transitive closure
939         implementation using $(call ...) to test variable recursion.
941 2002-04-21  Paul D. Smith  <psmith@gnu.org>
943         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
944         directories in the script directories.
946 2001-05-02  Paul D. Smith  <psmith@gnu.org>
948         * scripts/variables/flavors: Test define/endef scripts where only
949         one of the command lines is quiet.
951 2000-06-22  Paul D. Smith  <psmith@gnu.org>
953         * scripts/options/dash-q: New file; test the -q option.  Includes
954         a test for PR/1780.
956 2000-06-21  Paul D. Smith  <psmith@gnu.org>
958         * scripts/features/targetvars: Added a test for PR/1709: allowing
959         semicolons in target-specific variable values.
961 2000-06-19  Paul D. Smith  <psmith@gnu.org>
963         * scripts/functions/addsuffix: Test for an empty final argument.
964         Actually this bug might have happened for any function, but this
965         one was handy.
967 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
969         * scripts/options/general: If parallel jobs are not supported,
970         expect a warning message from Make.
972 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
974         * scripts/options/general: Don't try -jN with N != 1 if parallel
975         jobs are not supported.
977 2000-05-24  Paul D. Smith  <psmith@gnu.org>
979         * scripts/options/general: Test general option processing (PR/1716).
981 2000-04-11  Paul D. Smith  <psmith@gnu.org>
983         * scripts/functions/strip: Test empty value to strip (PR/1689).
985 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
987         * scripts/features/reinvoke: Sleep before updating the target
988         files in the first test, to ensure its time stamp really gets
989         newer; otherwise Make might re-exec more than once.
991 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
993         * scripts/features/double_colon: Don't run the parallel tests if
994         parallel jobs aren't supported.
996 2000-04-04  Paul D. Smith  <psmith@gnu.org>
998         * scripts/functions/word: wordlist doesn't swap arguments anymore.
1000 2000-03-27  Paul D. Smith  <psmith@gnu.org>
1002         * scripts/features/statipattrules: Test that static pattern rules
1003         whose prerequisite patterns resolve to empty strings throw an
1004         error (instead of dumping core).  Fixes PR/1670.
1006         * scripts/features/reinvoke: Make more robust by touching "b"
1007         first, to ensure it's not newer than "a".
1008         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
1009         * scripts/options/dash-n: Ditto.
1011         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
1012         recursive invocations of $(call ...) to break.  I can't come up
1013         with any way to get both working at the same time, so I backed out
1014         the fix to 1527 and added a test case for recursive calls.  This
1015         also tests the fix for PR/1610.
1017         * scripts/features/double_colon: Test that circular dependencies
1018         in double-colon rule sets are detected correctly (PR/1671).
1020 2000-03-26  Paul D. Smith  <psmith@gnu.org>
1022         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
1023         .INTERMEDIATE files when given on the command line (PR/1669).
1025 2000-03-08  Paul D. Smith  <psmith@gnu.org>
1027         * scripts/options/dash-k: Add a test for error detection by
1028         multiple targets depending on the same prerequisite with -k.
1029         For PR/1634.
1031 2000-02-07  Paul D. Smith  <psmith@gnu.org>
1033         * scripts/features/escape: Add a test for backslash-escaped spaces
1034         in a target name (PR/1586).
1036 2000-02-04  Paul D. Smith  <psmith@gnu.org>
1038         * scripts/features/patspecific_vars: Add a test for pattern-specific
1039         target variables inherited from the parent target (PR/1407).
1041 2000-02-02  Paul D. Smith  <psmith@gnu.org>
1043         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
1044         to make sure sorting order, etc. is predictable.
1045         Reported by Andreas Jaeger <aj@suse.de>.
1047         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
1048         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
1049         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
1050         1 for other systems.
1051         * scripts/features/vpathplus (touchfiles): Use the $wtime value
1052         instead of hardcoding 2.
1053         * scripts/targets/SECONDARY: Ditto.
1054         * scripts/targets/INTERMEDIATE: Ditto.
1056 2000-01-27  Paul D. Smith  <psmith@gnu.org>
1058         * test_driver.pl (toplevel): Don't try to run test scripts which
1059         are really directories.
1061 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1063         * scripts/features/include: Remove a check; the fix caused more
1064         problems than the error, so I removed it and removed the test for
1065         it.
1067 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1069         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1070         sure $(call ...) doesn't eval its arguments and that you can
1071         invoke foreach from it without looping forever.
1073 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1075         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1076         .INTERMEDIATE settings on files don't disable them as implicit
1077         intermediate possibilities.
1079 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1081         * scripts/features/double_colon: Add a test for PR/1476: Try
1082         double-colon rules as non-goal targets and during parallel builds
1083         to make sure they're handled serially.
1085 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1087         * scripts/functions/if: Add a test for PR/1429: put some text
1088         after an if-statement to make sure it works.
1090         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1091         in target-specific variable definitions correctly.
1093 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1095         * scripts/variables/MAKEFILES: This was really broken: it didn't
1096         test anything at all, really.  Rewrote it, plus added a test for
1097         PR/1394.
1099 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1101         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1102         behave properly when used with recursive targets".
1104 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1106         * scripts/features/targetvars: Add a check for PR/1378:
1107         "Target-specific vars don't inherit correctly"
1109 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1111         * test_driver.pl (get_osname): Change $fancy_file_names to
1112         $short_filenames and reverse the logic.
1113         (run_each_test): Change test of non-existent $port_host to use
1114         $short_filenames--problem reported by Eli Zaretskii.
1116 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1118         * scripts/features/parallelism: Add a check to ensure that the
1119         jobserver works when we re-invoke.  Also cleaned up the tests a
1120         little, reducing the number of rules we use so the test won't need
1121         as many "sleep" commands.
1123 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1125         * scripts/features/reinvoke: Remove invocations of "touch" in
1126         makefiles.  See the comments on the touch function rewrite below.
1127         Note that UNIX touch behaves the same way if the file already
1128         exists: it sets the time to the _local_ time.  We don't want
1129         this.  This is probably a good tip for makefile writers in
1130         general, actually... where practical.
1131         * scripts/options/dash-l: Ditto.
1132         * scripts/options/dash-n: Ditto.
1134         * test_driver.pl (run_each_test): In retrospect, I don't like the
1135         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1136         changed it back to use .log, .base, and .diff.
1138         * run_make_tests.pl (set_more_defaults): Move the check for the
1139         make pathname to here from set_defaults (that's too early since it
1140         happens before the command line processing).
1141         Create a new variable $port_type, calculated from $osname, to
1142         specify what kind of system we're running on.  We should integrate
1143         the VOS stuff here, too.
1144         (valid_option): Comment out the workdir/-work stuff so people
1145         won't be fooled into thinking it works... someone needs to fix
1146         this, though!
1148         * scripts/functions/origin: Use $port_type instead of $osname.
1149         * scripts/functions/foreach: Ditto.
1150         * scripts/features/default_names: Ditto.
1152 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1154         * test_driver.pl (touch): Rewrite this function.  Previously it
1155         used to use utime() to hard-set the time based on the current
1156         local clock, or, if the file didn't exist, it merely created it.
1157         This mirrors exactly what real UNIX touch does, but it fails badly
1158         on networked filesystems where the FS server clock is skewed from
1159         the local clock: normally modifying a file causes it to get a mod
1160         time based on the _server's_ clock.  Hard-setting it based on the
1161         _local_ clock causes gratuitous errors and makes the tests
1162         unreliable except on local filesystems.  The new function will
1163         simply modify the file, allowing the filesystem to set the mod
1164         time as it sees fit.
1166         * scripts/features/parallelism: The second test output could
1167         change depending on how fast some scripts completed; use "sleep"
1168         to force the order we want.
1170         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1171         means that "%ENV = ();" doesn't do the right thing.  This worked
1172         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1173         the environment rather than require specific versions.
1175         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1176         modifier "s", so the tests will run with Perl 4.
1177         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1178         option in PURIFYOPTIONS.
1179         (setup_for_test): Don't remove any logs unless $pure_log is set.
1181 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1183         * scripts/features/reinvoke: Put the SHELL definition in the right
1184         test makefile.
1186 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1188         ChangeLog file for the test suite created.
1191 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001, 2002,
1192 2003, 2004, 2005, 2006, 2007, 2008, 2009, 2011, 2012 Free Software Foundation,
1193 Inc.
1194 This file is part of GNU Make.
1196 GNU Make is free software; you can redistribute it and/or modify it under the
1197 terms of the GNU General Public License as published by the Free Software
1198 Foundation; either version 3 of the License, or (at your option) any later
1199 version.
1201 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1202 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1203 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1205 You should have received a copy of the GNU General Public License along with
1206 this program.  If not, see <http://www.gnu.org/licenses/>.