Add support for "::=" simple assignment operator.
[make.git] / tests / ChangeLog
blob7ad4085b967bf89dbec7f3b3598d914da644f0b6
1 2012-01-29  Paul Smith  <psmith@gnu.org>
3         * scripts/variables/flavors: Add tests for ::=
4         * scripts/variables/define: Ditto
6         * scripts/functions/file: Test the new $(file ...) function.
8 2012-01-12  Paul Smith  <psmith@gnu.org>
10         * scripts/functions/guile: New regression tests for Guile support.
12 2011-12-10  Paul Smith  <psmith@gnu.org>
14         * scripts/targets/SECONDARY: Add prereq statements to ensure rules
15         are printed in the right order for test #9
17 2011-11-14  Paul Smith  <psmith@gnu.org>
19         * scripts/features/double_colon: Check double-colon with escaped
20         filenames.  See Savannah bug #33399.
22 2011-09-18  Paul Smith  <psmith@gnu.org>
24         * scripts/features/parallelism: On re-exec make sure we preserve
25         the value of MAKEFLAGS when necessary.  See Savannah bug #33873.
27         * scripts/features/vpath3: Verify handling of -lfoo libraries
28         found via vpath vs. the standard directory search.
29         See Savannah bug #32511.
31 2011-09-12  Paul Smith  <psmith@gnu.org>
33         * scripts/functions/call: Verify that using export in a $(call ...)
34         context creates a global variable.  See Savannah bug #32498.
36 2011-09-02  Paul Smith  <psmith@gnu.org>
38         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
39         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
41 2011-08-29  Paul Smith  <psmith@gnu.org>
43         * scripts/features/varnesting: Test resetting of variables while
44         expanding them.  See Savannah patch #7534
46 2011-06-12  Paul Smith  <psmith@gnu.org>
48         * scripts/features/archives: Check archives with whitespace at the
49         beginning, end, and extra in the middle.
50         Another test for Savannah bug #30612.
52 2011-05-07  Paul Smith  <psmith@gnu.org>
54         * scripts/variables/private: Ensure we skip private variables when
55         appending.  Test for Savannah bug #32872.
57         * scripts/functions/wildcard: Verify wildcard used to test for
58         file existence/non-existence.
60 2011-05-02  Paul Smith  <psmith@gnu.org>
62         * scripts/functions/sort: Add a test for Savannah bug #33125.
64 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
66         * scripts/features/shell_assignment: Regression for "!=" feature
68 2010-11-06  Paul Smith  <psmith@gnu.org>
70         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
71         * scripts/functions/call: Ditto.
72         * scripts/variables/special: Ditto.
74         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
76 2010-08-29  Paul Smith  <psmith@gnu.org>
78         * scripts/features/errors: Add new error message to output text.
79         * scripts/variables/SHELL: Ditto.
80         * scripts/targets/POSIX: Ditto.
81         * scripts/options/dash-k: Ditto.
82         * scripts/features/vpathplus: Ditto.
83         * scripts/features/patternrules: Ditto.
84         * scripts/features/parallelism: Ditto.
86 2010-08-13  Paul Smith  <psmith@gnu.org>
88         * scripts/features/archives: New regression tests for archive
89         support.  Test for fix to Savannah bug #30612.
91         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
92         the features available in $(.FEATURES).
94 2010-08-10  Paul Smith  <psmith@gnu.org>
96         * scripts/features/reinvoke: Ensure command line variable settings
97         are preserved across make re-exec.  Tests Savannah bug #30723.
99 2010-07-28  Paul Smith  <psmith@gnu.org>
101         * scripts/targets/POSIX: Compatibility issues with Solaris (and
102         Tru64?); "false" returns different exit codes, and set -x shows
103         output with extra whitespace.  Run the commands by hand first to
104         find out what the real shell would do, then compare what make does.
105         * scripts/variables/SHELL: Ditto.
107 2010-07-12  Paul Smith  <psmith@gnu.org>
109         * test_driver.pl: Add a new $perl_name containing the path to Perl.
110         * run_make_tests.pl (run_make_test): Replace the special string
111         #PERL# in a makefile etc. with the path the Perl executable so
112         makefiles can use it.
114         * scripts/targets/ONESHELL: Add a new set of regression tests for
115         the .ONESHELL feature.
117 2010-07-06  Paul Smith  <psmith@gnu.org>
119         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
121         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
122         Verify that enabling .POSIX changes the shell flags to set -e.
124 2010-07-01  Paul Smith  <psmith@gnu.org>
126         * scripts/features/recursion: Add a space to separate command-line
127         args.  Fixes Savannah bug #29968.
129 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
131         * scripts/features/vpath3: Test for the new library search
132         behavior.
134 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
136         * scripts/features/se_explicit: Enable the test for now fixed
137         Savannah bug 25780.
139 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
141         * scripts/variables/undefine: Tests for the new undefine feature.
143 2009-10-03  Paul Smith  <psmith@gnu.org>
145         * scripts/features/parallelism: Test for open Savannah bug #26846.
147         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
149         * scripts/variables/MAKEFLAGS: Created.
150         Add test for Savannah bug #2216 (still open).
152         * scripts/features/include: Test for Savannah bug #102 (still open).
154 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
156         * scripts/features/include: Add diagnostics issuing tests for
157         cases where targets have been updated and failed with the
158         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
160 2009-09-28  Paul Smith  <psmith@gnu.org>
162         * scripts/functions/shell: Add regression test for Savannah bug
163         #20513 (still open).
165         * scripts/features/se_explicit: Add regression tests for Savannah
166         bug #25780 (still open).
168         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
169         that runs tests we know will fail.  This allows us to add
170         regression tests to the test suite for bugs that haven't been
171         fixed yet.
173 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
175         * scripts/features/patspecific_vars: Add a test for the shortest
176         stem first order.
178         * scripts/features/patternrules: Add a test for the shortest stem
179         first order.
181 2009-09-24  Paul Smith  <psmith@gnu.org>
183         * scripts/features/se_implicit: Add a test for order-only
184         secondary expansion prerequisites.
186 2009-09-23  Paul Smith  <psmith@gnu.org>
188         * scripts/features/patternrules: Test that we can remove pattern
189         rules, both single and multiple prerequisites.  Savannah bug #18622.
191         * scripts/features/echoing: Rework for run_make_test().
193 2009-06-14  Paul Smith  <psmith@gnu.org>
195         * scripts/features/vpath: Verify we don't get bogus circular
196         dependency warnings if we choose a different file via vpath during
197         update.  Savannah bug #13529.
199 2009-06-13  Paul Smith  <psmith@gnu.org>
201         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
202         files (and files included by them) don't set the default goal.
203         Savannah bug #13401.
205         * scripts/functions/wildcard: Test that wildcards with
206         non-existent glob matchers return empty.
208 2009-06-09  Paul Smith  <psmith@gnu.org>
210         * scripts/options/dash-B: Test the $? works correctly with -B.
211         Savannah bug #17825.
213         * scripts/features/patternrules: Test that dependencies of
214         "also_make" targets are created properly.  Savannah bug #19108.
216         * test_driver.pl (compare_output): Create a "run" file for failed
217         tests containing the command that was run.
218         (get_runfile): New function.
220         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
221         allow memcheck and massif tools.
223         * scripts/features/patternrules: Have to comment out a line in the
224         first test due to backing out a change that broke the implicit
225         rule search algorithm.  Savannah bug #17752.
226         * scripts/misc/general4: Remove a test that is redundant with
227         patternrules.
229         * scripts/features/parallelism: Add a test for re-exec with
230         jobserver master override.  Savannah bug #18124.
232 2009-06-08  Paul Smith  <psmith@gnu.org>
234         * scripts/features/targetvars: Add a test for continued target
235         vars after a semicolon.  Savannah bug #17521.
237 2009-06-07  Paul Smith  <psmith@gnu.org>
239         * scripts/features/se_explicit: Make sure we catch defining
240         prereqs during snap_deps().  Savannah bug #24622.
242         * scripts/variables/automatic: Check prereq ordering when the
243         target with the recipe has no prereqs.  Savannah bug #21198.
245         * scripts/variables/LIBPATTERNS: Add a new set of test for
246         $(.LIBPATTERNS) (previously untested!)
248 2009-06-04  Paul Smith  <psmith@gnu.org>
250         * scripts/variables/SHELL: The export target-specific SHELL test
251         has an incorrect known-good-value.
253         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
255         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
257 2009-05-31  Paul Smith  <psmith@gnu.org>
259         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
261         * scripts/features/targetvars: Add tests of overrides for Savannah
262         bug #26207.
263         * scripts/features/patspecific_vars: Ditto.
265         * scripts/features/patternrules: Add a test for Savannah bug #26593.
267 2009-05-30  Paul Smith  <psmith@gnu.org>
269         * scripts/variables/flavors: Update with new variable flavor tests.
270         * scripts/variables/define: Create a new set of tests for
271         define/endef and move those aspects of the flavors suite here.
273 2009-05-25  Paul Smith  <psmith@gnu.org>
275         * scripts/features/targetvars: Ditto.
277         * scripts/features/export: Test new variable parsing abilities.
279 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
281         * scripts/variables/private: Create a new suite of tests for 'private'.
283 2007-11-04  Paul Smith  <psmith@gnu.org>
285         * scripts/functions/eval: Update error message for command -> recipe.
287         * test_driver.pl (compare_output): Allow the answer to be a regex,
288         if surrounded by '/'.
289         * scripts/misc/close_stdout: Use a regex for the answer, since
290         sometimes the error will have a description and sometimes it won't.
292 2007-09-10  Paul Smith  <psmith@gnu.org>
294         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
296 2007-08-15  Paul Smith  <psmith@gnu.org>
298         These test cases were contributed by
299         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
300         Savannah bugs #3330 and #15919.
302         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
303         15919.
305         * scripts/features/parallelism: Add tests for wrong answer/hang
306         combining INTERMEDIATE, order-only prereqs, and parallelism.
307         See Savannah bugs 3330 and 15919.
309 2007-07-13  Paul Smith  <psmith@gnu.org>
311         Install a timeout so tests can never loop infinitely.
312         Original idea and patch for a single-test version provided by
313         Icarus Sparry <savannah@icarus.freeuk.com>
315         * test_driver.pl (_run_command): New function: this is called by
316         other functions to actually run a command.  Before we run it,
317         install a SIGALRM handler and set up a timer to go off in the
318         future (default is 5s; this can be overridden by individual tests).
319         (run_command): Call it.
320         (run_command_with_output): Call it.
322         * run_make_tests.pl (run_make_with_options): Override the default
323         timeout if the caller requests it.
324         (run_make_test): Pass any timeout override to run_make_with_options.
326         * scripts/features/parallelism: Increase the timeout for long tests.
327         * scripts/options/dash-l: Ditto.
329 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
331         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
332         ENV here.  This doesn't always work.
333         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
334         environment.  Fixes Savannah bug #16698.
336 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
338         * scripts/variables/automatic: Add back the test for bug #8154.
340 2006-04-01  Paul D. Smith  <psmith@gnu.org>
342         * scripts/functions/realpath: Don't run tests with multiple
343         initial slashes on Windows: those paths mean something different.
345 2006-03-19  Paul D. Smith  <psmith@gnu.org>
347         * scripts/features/parallelism: Test that the jobserver is
348         properly managed when we have to re-exec the master instance of
349         make.
351 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
353         * scripts/features/statipattrules: Add tests for bug #16053.
355 2006-03-09  Paul Smith  <psmith@gnu.org>
357         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
358         with DOS drive letters.  Fixes Savannah bug #15947.
360         * test_driver.pl (run_each_test): Set the status properly even
361         when a test fails to execute.  Fixes Savannah bug #15942.
363         * scripts/functions/foreach: Use a different environment variable
364         other than PATH to avoid differences with Windows platforms.
365         Fixes Savannah bug #15938.
367 2006-03-05  Paul D. Smith  <psmith@gnu.org>
369         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
370         type W32.  Fixed Savannah bug #15937.
372         * scripts/features/default_names: Don't call error() when the test
373         fails.  Fixes Savannah bug #15941.
375 2006-02-17  Paul D. Smith  <psmith@gnu.org>
377         * scripts/features/targetvars: Test a complex construction which
378         guarantees that we have to merge variable lists of different
379         sizes.  Tests for Savannah bug #15757.
381 2006-02-15  Paul D. Smith  <psmith@gnu.org>
383         * scripts/functions/error: Make sure filename/lineno information
384         is related to where the error is expanded, not where it's set.
385         * scripts/functions/warning: Ditto.
386         * scripts/functions/foreach: Check for different error conditions.
387         * scripts/functions/word: Ditto.
388         * scripts/variables/negative: Test some variable reference failure
389         conditions.
390         * scripts/options/warn-undefined-variables: Test the
391         --warn-undefined-variables flag.
393 2006-02-09  Paul D. Smith  <psmith@gnu.org>
395         * run_make_tests.pl (set_more_defaults): Update valgrind support
396         for newer versions.
397         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
398         beginning with ".").
400         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
401         functions.
403 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
405         * scripts/features/parallelism: Add a test for bug #15641.
407 2006-02-06  Paul D. Smith  <psmith@gnu.org>
409         * scripts/options/dash-W: Add a test for bug #15341.
411 2006-01-03  Paul D. Smith  <psmith@gnu.org>
413         * scripts/variables/automatic: Add a test for bug #8154.
415         * README: Update to reflect the current state of the test suite.
417 2005-12-12  Paul D. Smith  <psmith@gnu.org>
419         * scripts/features/parallelism, scripts/functions/wildcard,
420         scripts/targets/FORCE, scripts/targets/PHONY,
421         scripts/targets/SILENT: Use the default setting for
422         $delete_command.  Fixes bug #15085.
424         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
426 2005-12-11  Paul D. Smith  <psmith@gnu.org>
428         * scripts/misc/general4: Test implicit rules with '$' in the
429         prereq list & prereq patterns.
430         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
432 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
434         * scripts/features/patternrules: Add a test for bug #13022.
436 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
438         * scripts/features/double_colon: Add a test for bug #14334.
440 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
442         * scripts/functions/flavor: Add a test for the flavor function.
444 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
446         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
447         special variable.
449 2005-10-24  Paul D. Smith  <psmith@gnu.org>
451         * scripts/misc/general4: Test '$$' in prerequisites list.
452         * scripts/features/statipattrules: Rewrite to use run_make_test().
453         Add various static pattern info.
454         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
455         * scripts/features/se_explicit: Add tests for handling '$$' in
456         prerequisite lists with and without setting .SECONDEXPANSION.
457         * scripts/features/order_only: Convert to run_make_test().
458         * run_make_tests.pl (set_more_defaults): If we can't get the value
459         of $(MAKE) from make, then fatal immediately.
461 2005-08-31  Paul D. Smith  <psmith@gnu.org>
463         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
464         an eval to trap errors) and if it exists, use POSIX::getcwd to
465         find the working directory.  If it doesn't exist, go back to the
466         previous methods.  This tries to be more accurate on Windows
467         systems.
469 2005-08-29  Paul D. Smith  <psmith@gnu.org>
471         * scripts/functions/abspath: Add some text to the error messages
472         to get a better idea of what's wrong.  Make warnings instead of
473         errors.
475         * scripts/features/patspecific_vars: Don't use "test", which is
476         UNIX specific.  Print the values and let the test script match
477         them.
479 2005-08-25  Paul Smith  <psmith@gnu.org>
481         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
482         former works better with non-UNIX environments.  Fixes Savannah
483         bug #14129.
485 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
487         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
488         $(sort) so that the resulting order is no longer filesystem-
489         dependant.
491 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
493         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
495 2005-08-07  Paul D. Smith  <psmith@gnu.org>
497         * scripts/features/parallelism: Add a test for a bug reported by
498         Michael Matz (matz@suse.de) in which make exits without waiting
499         for all its children in some situations during parallel builds.
501 2005-07-08  Paul D. Smith  <psmith@gnu.org>
503         * test_driver.pl: Reset the environment to a clean value every
504         time before we invoke make.  I'm suspicious that the environment
505         isn't handled the same way in Windows as it is in UNIX, and some
506         variables are leaking out beyond the tests they are intended for.
507         Create an %extraENV hash tests can set to add more env. vars.
508         * tests/scripts/features/export: Change to use %extraENV.
509         * tests/scripts/functions/eval: Ditto.
510         * tests/scripts/functions/origin: Ditto.
511         * tests/scripts/options/dash-e: Ditto.
512         * tests/scripts/variables/SHELL: Ditto.
514 2005-06-27  Paul D. Smith  <psmith@gnu.org>
516         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
517         files.
518         * scripts/features/reinvoke: Rewrite to be safer on systems with
519         subsecond timestamps.
520         * scripts/features/patternrules: False exits with different error
521         codes on different systems (for example, Linux => 1, Solaris => 255).
523         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
524         to be sure it will be considered updated when it's remade.
526 2005-06-26  Paul D. Smith  <psmith@gnu.org>
528         * scripts/functions/shell: New test suite for the shell function.
530 2005-06-25  Paul D. Smith  <psmith@gnu.org>
532         * scripts/features/include: Test include/-include/sinclude with no
533         arguments.  Tests fix for Savannah bug #1761.
535         * scripts/misc/general3: Implement comprehensive testing of
536         backslash-newline behavior in command scripts: various types of
537         quoting, fast path / slow path, etc.
538         Tests fix for Savannah bug #1332.
540         * scripts/options/symlinks: Test symlinks to non-existent files.
541         Tests fix for Savannah bug #13280.
543         * scripts/misc/general3: Test semicolons in variable references.
544         Tests fix for Savannah bug #1454.
546         * scripts/variables/MAKE_RESTARTS: New file: test the
547         MAKE_RESTARTS variable.
548         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
549         Tests fix for Savannah bug #7566.
550         * scripts/options/dash-W: New file: test the -W flag, including
551         re-exec infinite looping.
553 2005-06-12  Paul D. Smith  <psmith@gnu.org>
555         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
556         This test only works on systems that have /dev/full (e.g., Linux).
558 2005-06-09  Paul D. Smith  <psmith@gnu.org>
560         * scripts/functions/foreach: Add a test for Savannah bug #11913.
562 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
564         * scripts/features/include: Add a test for Savannah bug #13216.
565         * scripts/features/patternrules: Add a test for Savannah bug #13218.
567 2005-05-13  Paul D. Smith  <psmith@gnu.org>
569         * scripts/features/conditionals: Add tests for the new if... else
570         if... endif syntax.
572 2005-05-03  Paul D. Smith  <psmith@gnu.org>
574         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
575         DEFAULT_GOAL.
577 2005-05-02  Paul D. Smith  <psmith@gnu.org>
579         * scripts/features/parallelism: Add a test for exporting recursive
580         variables containing $(shell ) calls.  Rewrite this script to use
581         run_make_test() everywhere.
583 2005-04-07  Paul D. Smith  <psmith@gnu.org>
585         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
587 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
589         * scripts/variables/automatic: Add a test for Savannah bug #12320.
591 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
593         * scripts/features/patternrules: Add a test for Savannah bug #12267.
595 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
597         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
598         bug #12266.
600 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
602         * scripts/features/patternrules: Add a test for Savannah bug #12202.
604 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
606         * scripts/features/se_implicit: Add a test for stem
607         termination bug. Add a test for stem triple-expansion bug.
609         * scripts/features/se_statpat: Add a test for stem
610         triple-expansion bug.
612         * scripts/features/statipattrules: Change test #4 to reflect
613         new way empty prerequisite list is handled.
616 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
618         * scripts/features/statipattrules: Add a test for
619         Savannah bug #12180.
621 2005-02-28  Paul D. Smith  <psmith@gnu.org>
623         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
625         * scripts/options/symlinks: New file to test checking of symlink
626         timestamps.  Can't use filename dash-L because it conflicts with
627         dash-l on case-insensitive filesystems.
629         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
630         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
631         unique filenames.
633 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
635         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
636         special variable.
638 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
640         * scripts/features/se_explicit: Test the second expansion in
641         explicit rules.
642         * scripts/features/se_implicit: Test the second expansion in
643         implicit rules.
644         * scripts/features/se_statpat: Test the second expansion in
645         static pattern rules.
646         * scripts/variables/automatic: Fix to work with the second
647         expansion.
649         * scripts/misc/general4: Add a test for bug #12091.
651 2005-02-27  Paul D. Smith  <psmith@gnu.org>
653         * scripts/functions/eval: Check that eval of targets within
654         command scripts fails.  See Savannah bug # 12124.
656 2005-02-26  Paul D. Smith  <psmith@gnu.org>
658         * test_driver.pl (compare_output): If a basic comparison of the
659         log and answer doesn't match, try harder: change all backslashes
660         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
662 2005-02-09  Paul D. Smith  <psmith@gnu.org>
664         * scripts/features/recursion: Test command line variable settings:
665         only one instance of a given variable should be provided.
667 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
669         * tests/scripts/functions/abspath: New file: test `abspath'
670         built-in function.
672         * tests/scripts/functions/realpath: New file: test `realpath'
673         built-in function.
675 2004-11-28  Paul D. Smith  <psmith@gnu.org>
677         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
678         this doesn't really test anything useful in UNIX but...
680         * scripts/variables/SHELL: New file: test proper handling of SHELL
681         according to POSIX rules.  Fixes bug #1276.
683 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
685         * scripts/functions/word: Test $(firstword ) and $(lastword ).
687 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
689         * scripts/features/patspecific_vars: Test simple/recursive
690         variable expansion.
692 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
694         * scripts/features/include: Test dontcare flag inheritance
695         when rebuilding makefiles.
697 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
699         * scripts/features/patspecific_vars: Test exported variables.
701 2004-09-22  Paul D. Smith  <psmith@gnu.org>
703         * run_make_tests.pl (run_make_test): Don't add newlines to the
704         makestring or answer if they are completely empty.
706         * scripts/features/patternrules: Rename from implicit_prereq_eval.
708         * scripts/test_template: Rework the template.
710 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
712         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
713         `#!/usr/bin/env perl'.
715         * scripts/features/implicit_prereq_eval: Test implicit rule
716         prerequisite evaluation code.
718 2004-09-21  Paul D. Smith  <psmith@gnu.org>
720         * run_make_tests.pl (run_make_test): Enhance to allow the make
721         string to be undef: in that case it reuses the previous make
722         string.  Allows multiple tests on the same makefile.
724         * scripts/variables/flavors: Add some tests for prefix characters
725         interacting with define/endef variables.
727 2004-09-20  Paul D. Smith  <psmith@gnu.org>
729         * scripts/functions/substitution: Rewrite to use run_make_test()
730         interface, and add test for substitution failures reported by
731         Markus Mauhart <qwe123@chello.at>.
733 2004-03-22  Paul D. Smith  <psmith@gnu.org>
735         * test_driver.pl (run_each_test, toplevel, compare_output): Change
736         to track both the testing categories _AND_ the number of
737         individual tests, and report both sets of numbers.
739 2004-02-21  Paul D. Smith  <psmith@gnu.org>
741         * scripts/functions/origin: Set our own environment variable
742         rather than relying on $HOME.
744 2004-01-21  Paul D. Smith  <psmith@gnu.org>
746         * scripts/features/conditionals: Test arguments to ifn?def which
747         contain whitespace (such as a function that is evaluated).  Bug
748         #7257.
750 2004-01-07  Paul D. Smith  <psmith@gnu.org>
752         * scripts/features/order_only: Test order-only prerequisites in
753         pattern rules (patch #2349).
755 2003-11-02  Paul D. Smith  <psmith@gnu.org>
757         * scripts/functions/if: Test if on conditionals with trailing
758         whitespace--bug #5798.
760         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
762 2003-04-19  Paul D. Smith  <psmith@gnu.org>
764         * scripts/features/patspecific_vars: Test multiple patterns
765         matching the same target--Bug #1405.
767 2003-04-09  Paul D. Smith  <psmith@gnu.org>
769         * run_make_tests.pl (set_more_defaults): A new $port_type of
770         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
771         for OS/2.
773 2003-03-28  Paul D. Smith  <psmith@gnu.org>
775         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
776         not prerequisites)--Bug #2515.
778 2003-01-30  Paul D. Smith  <psmith@gnu.org>
780         * scripts/features/targetvars: Test very long target-specific
781         variable definition lines (longer than the default make buffer
782         length).  Tests patch # 1022.
784         * scripts/functions/eval: Test very recursive $(eval ...) calls
785         with simple variable expansion (bug #2238).
787         * scripts/functions/word: Test error handling for word and
788         wordlist functions (bug #2407).
790 2003-01-22  Paul D. Smith  <psmith@gnu.org>
792         * scripts/functions/call: Test recursive argument masking (bug
793         #1744).
795 2002-10-25  Paul D. Smith  <psmith@gnu.org>
797         * scripts/functions/eval: Test using $(eval ...) inside
798         conditionals (Bug #1516).
800 2002-10-14  Paul D. Smith  <psmith@gnu.org>
802         * scripts/options/dash-t: Add a test for handling -t on targets
803         with no commands (Bug #1418).
805 2002-10-13  Paul D. Smith  <psmith@gnu.org>
807         * scripts/features/targetvars: Add a test for exporting
808         target-specific vars (Bug #1391).
810 2002-10-05  Paul D. Smith  <psmith@gnu.org>
812         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
813         and $${@F}.
815 2002-09-23  Paul D. Smith  <psmith@gnu.org>
817         * scripts/features/escape: Test handling of escaped comment
818         characters in targets and prerequisites.
820 2002-09-18  Paul D. Smith  <psmith@gnu.org>
822         * scripts/features/export: Test export/unexport of multiple
823         variables in a single command.
825 2002-09-17  Paul D. Smith  <psmith@gnu.org>
827         * scripts/features/targetvars: Tests for Bug #940: test
828         target-specific and pattern-specific variables in conjunction with
829         double-colon targets.
831 2002-09-10  Paul D. Smith  <psmith@gnu.org>
833         * test_driver.pl (compare_output): Match the new format for time
834         skew error messages.
836         * scripts/features/export: Created.  Add tests for export/unexport
837         capabilities, including exporting/unexporting expanded variables.
839         * scripts/features/conditionals: Add a test for expanded variables
840         in ifdef conditionals.
842 2002-09-04  Paul D. Smith  <psmith@gnu.org>
844         * scripts/features/reinvoke: Change touch/sleep combos to utouch
845         invocations.
846         * scripts/features/vpathgpath: Ditto.
847         * scripts/features/vpathplus: Ditto.
848         * scripts/options/dash-n: Ditto.
849         * scripts/targets/INTERMEDIATE: Ditto.
850         * scripts/targets/SECONDARY: Ditto.
852         * scripts/options/dash-t: Added a test for the -t bug fixed by
853         Henning Makholm.  This test was also contributed by Henning.
855         * scripts/misc/general4: Add a test suite for obscure algorithmic
856         features of make.  First test: make sure creation subdirectories
857         as prerequisites of targets works properly.
859         * scripts/misc/version: Remove this bogus test.
861 2002-08-07  Paul D. Smith  <psmith@gnu.org>
863         * scripts/misc/general3: Add a test for makefiles that don't end
864         in newlines.
866         * scripts/variables/special: Create tests for the special
867         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
868         for now as it's not yet supported.
870 2002-08-01  Paul D. Smith  <psmith@gnu.org>
872         * scripts/options/dash-B: Add a test for the new -B option.
874 2002-07-11  Paul D. Smith  <psmith@gnu.org>
876         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
877         -valgrind option to the test suite.
878         (set_more_defaults): Set up the file descriptor to capture
879         Valgrind output.  We have to unset its close-on-exec flag; we
880         hardcode the value for F_SETFD (2) rather than load it; hopefully
881         this will help us avoid breaking the Windows/DOS test suite.
883 2002-07-10  Paul D. Smith  <psmith@gnu.org>
885         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
886         $$(@F).
888         * test_driver.pl (utouch): Create a new function that creates a
889         file with a specific timestamp offset.  Use of this function will
890         let us avoid lots of annoying sleep() invocations in the tests
891         just to get proper timestamping, which will make the tests run a
892         lot faster.  So far it's only used in the automatic test suite.
894 2002-07-09  Paul D. Smith  <psmith@gnu.org>
896         * scripts/variables/automatic: Create a test for automatic variables.
898 2002-07-08  Paul D. Smith  <psmith@gnu.org>
900         * scripts/features/order_only: Test new order-only prerequisites.
902 2002-07-07  Paul D. Smith  <psmith@gnu.org>
904         * scripts/functions/eval: Test new function.
905         * scripts/functions/value: Test new function.
906         * scripts/variables/MAKEFILE_LIST: Test new variable.
908 2002-04-28  Paul D. Smith  <psmith@gnu.org>
910         * scripts/functions/call: New test: transitive closure
911         implementation using $(call ...) to test variable recursion.
913 2002-04-21  Paul D. Smith  <psmith@gnu.org>
915         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
916         directories in the script directories.
918 2001-05-02  Paul D. Smith  <psmith@gnu.org>
920         * scripts/variables/flavors: Test define/endef scripts where only
921         one of the command lines is quiet.
923 2000-06-22  Paul D. Smith  <psmith@gnu.org>
925         * scripts/options/dash-q: New file; test the -q option.  Includes
926         a test for PR/1780.
928 2000-06-21  Paul D. Smith  <psmith@gnu.org>
930         * scripts/features/targetvars: Added a test for PR/1709: allowing
931         semicolons in target-specific variable values.
933 2000-06-19  Paul D. Smith  <psmith@gnu.org>
935         * scripts/functions/addsuffix: Test for an empty final argument.
936         Actually this bug might have happened for any function, but this
937         one was handy.
939 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
941         * scripts/options/general: If parallel jobs are not supported,
942         expect a warning message from Make.
944 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
946         * scripts/options/general: Don't try -jN with N != 1 if parallel
947         jobs are not supported.
949 2000-05-24  Paul D. Smith  <psmith@gnu.org>
951         * scripts/options/general: Test general option processing (PR/1716).
953 2000-04-11  Paul D. Smith  <psmith@gnu.org>
955         * scripts/functions/strip: Test empty value to strip (PR/1689).
957 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
959         * scripts/features/reinvoke: Sleep before updating the target
960         files in the first test, to ensure its time stamp really gets
961         newer; otherwise Make might re-exec more than once.
963 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
965         * scripts/features/double_colon: Don't run the parallel tests if
966         parallel jobs aren't supported.
968 2000-04-04  Paul D. Smith  <psmith@gnu.org>
970         * scripts/functions/word: wordlist doesn't swap arguments anymore.
972 2000-03-27  Paul D. Smith  <psmith@gnu.org>
974         * scripts/features/statipattrules: Test that static pattern rules
975         whose prerequisite patterns resolve to empty strings throw an
976         error (instead of dumping core).  Fixes PR/1670.
978         * scripts/features/reinvoke: Make more robust by touching "b"
979         first, to ensure it's not newer than "a".
980         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
981         * scripts/options/dash-n: Ditto.
983         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
984         recursive invocations of $(call ...) to break.  I can't come up
985         with any way to get both working at the same time, so I backed out
986         the fix to 1527 and added a test case for recursive calls.  This
987         also tests the fix for PR/1610.
989         * scripts/features/double_colon: Test that circular dependencies
990         in double-colon rule sets are detected correctly (PR/1671).
992 2000-03-26  Paul D. Smith  <psmith@gnu.org>
994         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
995         .INTERMEDIATE files when given on the command line (PR/1669).
997 2000-03-08  Paul D. Smith  <psmith@gnu.org>
999         * scripts/options/dash-k: Add a test for error detection by
1000         multiple targets depending on the same prerequisite with -k.
1001         For PR/1634.
1003 2000-02-07  Paul D. Smith  <psmith@gnu.org>
1005         * scripts/features/escape: Add a test for backslash-escaped spaces
1006         in a target name (PR/1586).
1008 2000-02-04  Paul D. Smith  <psmith@gnu.org>
1010         * scripts/features/patspecific_vars: Add a test for pattern-specific
1011         target variables inherited from the parent target (PR/1407).
1013 2000-02-02  Paul D. Smith  <psmith@gnu.org>
1015         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
1016         to make sure sorting order, etc. is predictable.
1017         Reported by Andreas Jaeger <aj@suse.de>.
1019         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
1020         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
1021         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
1022         1 for other systems.
1023         * scripts/features/vpathplus (touchfiles): Use the $wtime value
1024         instead of hardcoding 2.
1025         * scripts/targets/SECONDARY: Ditto.
1026         * scripts/targets/INTERMEDIATE: Ditto.
1028 2000-01-27  Paul D. Smith  <psmith@gnu.org>
1030         * test_driver.pl (toplevel): Don't try to run test scripts which
1031         are really directories.
1033 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1035         * scripts/features/include: Remove a check; the fix caused more
1036         problems than the error, so I removed it and removed the test for
1037         it.
1039 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1041         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1042         sure $(call ...) doesn't eval its arguments and that you can
1043         invoke foreach from it without looping forever.
1045 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1047         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1048         .INTERMEDIATE settings on files don't disable them as implicit
1049         intermediate possibilities.
1051 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1053         * scripts/features/double_colon: Add a test for PR/1476: Try
1054         double-colon rules as non-goal targets and during parallel builds
1055         to make sure they're handled serially.
1057 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1059         * scripts/functions/if: Add a test for PR/1429: put some text
1060         after an if-statement to make sure it works.
1062         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1063         in target-specific variable definitions correctly.
1065 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1067         * scripts/variables/MAKEFILES: This was really broken: it didn't
1068         test anything at all, really.  Rewrote it, plus added a test for
1069         PR/1394.
1071 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1073         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1074         behave properly when used with recursive targets".
1076 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1078         * scripts/features/targetvars: Add a check for PR/1378:
1079         "Target-specific vars don't inherit correctly"
1081 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1083         * test_driver.pl (get_osname): Change $fancy_file_names to
1084         $short_filenames and reverse the logic.
1085         (run_each_test): Change test of non-existent $port_host to use
1086         $short_filenames--problem reported by Eli Zaretskii.
1088 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1090         * scripts/features/parallelism: Add a check to ensure that the
1091         jobserver works when we re-invoke.  Also cleaned up the tests a
1092         little, reducing the number of rules we use so the test won't need
1093         as many "sleep" commands.
1095 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1097         * scripts/features/reinvoke: Remove invocations of "touch" in
1098         makefiles.  See the comments on the touch function rewrite below.
1099         Note that UNIX touch behaves the same way if the file already
1100         exists: it sets the time to the _local_ time.  We don't want
1101         this.  This is probably a good tip for makefile writers in
1102         general, actually... where practical.
1103         * scripts/options/dash-l: Ditto.
1104         * scripts/options/dash-n: Ditto.
1106         * test_driver.pl (run_each_test): In retrospect, I don't like the
1107         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1108         changed it back to use .log, .base, and .diff.
1110         * run_make_tests.pl (set_more_defaults): Move the check for the
1111         make pathname to here from set_defaults (that's too early since it
1112         happens before the command line processing).
1113         Create a new variable $port_type, calculated from $osname, to
1114         specify what kind of system we're running on.  We should integrate
1115         the VOS stuff here, too.
1116         (valid_option): Comment out the workdir/-work stuff so people
1117         won't be fooled into thinking it works... someone needs to fix
1118         this, though!
1120         * scripts/functions/origin: Use $port_type instead of $osname.
1121         * scripts/functions/foreach: Ditto.
1122         * scripts/features/default_names: Ditto.
1124 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1126         * test_driver.pl (touch): Rewrite this function.  Previously it
1127         used to use utime() to hard-set the time based on the current
1128         local clock, or, if the file didn't exist, it merely created it.
1129         This mirrors exactly what real UNIX touch does, but it fails badly
1130         on networked filesystems where the FS server clock is skewed from
1131         the local clock: normally modifying a file causes it to get a mod
1132         time based on the _server's_ clock.  Hard-setting it based on the
1133         _local_ clock causes gratuitous errors and makes the tests
1134         unreliable except on local filesystems.  The new function will
1135         simply modify the file, allowing the filesystem to set the mod
1136         time as it sees fit.
1138         * scripts/features/parallelism: The second test output could
1139         change depending on how fast some scripts completed; use "sleep"
1140         to force the order we want.
1142         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1143         means that "%ENV = ();" doesn't do the right thing.  This worked
1144         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1145         the environment rather than require specific versions.
1147         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1148         modifier "s", so the tests will run with Perl 4.
1149         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1150         option in PURIFYOPTIONS.
1151         (setup_for_test): Don't remove any logs unless $pure_log is set.
1153 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1155         * scripts/features/reinvoke: Put the SHELL definition in the right
1156         test makefile.
1158 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1160         ChangeLog file for the test suite created.
1163 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001, 2002,
1164 2003, 2004, 2005, 2006, 2007, 2008, 2009, 2011, 2012 Free Software Foundation,
1165 Inc.
1166 This file is part of GNU Make.
1168 GNU Make is free software; you can redistribute it and/or modify it under the
1169 terms of the GNU General Public License as published by the Free Software
1170 Foundation; either version 3 of the License, or (at your option) any later
1171 version.
1173 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1174 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1175 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1177 You should have received a copy of the GNU General Public License along with
1178 this program.  If not, see <http://www.gnu.org/licenses/>.