Add prerequisites to ensure ordering of results.
[make.git] / tests / ChangeLog
blob9ad40b7d833347476f8d8750faad72bb56b7464e
1 2011-12-10  Paul Smith  <psmith@gnu.org>
3         * scripts/targets/SECONDARY: Add prereq statements to ensure rules
4         are printed in the right order for test #9
6 2011-11-14  Paul Smith  <psmith@gnu.org>
8         * scripts/features/double_colon: Check double-colon with escaped
9         filenames.  See Savannah bug #33399.
11 2011-09-18  Paul Smith  <psmith@gnu.org>
13         * scripts/features/parallelism: On re-exec make sure we preserve
14         the value of MAKEFLAGS when necessary.  See Savannah bug #33873.
16         * scripts/features/vpath3: Verify handling of -lfoo libraries
17         found via vpath vs. the standard directory search.
18         See Savannah bug #32511.
20 2011-09-12  Paul Smith  <psmith@gnu.org>
22         * scripts/functions/call: Verify that using export in a $(call ...)
23         context creates a global variable.  See Savannah bug #32498.
25 2011-09-02  Paul Smith  <psmith@gnu.org>
27         * scripts/options/dash-n: Verify that in "-n -t", the -n takes
28         priority.  Patch from Michael Witten <mfwitten@gmail.com>.
30 2011-08-29  Paul Smith  <psmith@gnu.org>
32         * scripts/features/varnesting: Test resetting of variables while
33         expanding them.  See Savannah patch #7534
35 2011-06-12  Paul Smith  <psmith@gnu.org>
37         * scripts/features/archives: Check archives with whitespace at the
38         beginning, end, and extra in the middle.
39         Another test for Savannah bug #30612.
41 2011-05-07  Paul Smith  <psmith@gnu.org>
43         * scripts/variables/private: Ensure we skip private variables when
44         appending.  Test for Savannah bug #32872.
46         * scripts/functions/wildcard: Verify wildcard used to test for
47         file existence/non-existence.
49 2011-05-02  Paul Smith  <psmith@gnu.org>
51         * scripts/functions/sort: Add a test for Savannah bug #33125.
53 2011-04-17  David A. Wheeler  <dwheeler@dwheeler.com>
55         * scripts/features/shell_assignment: Regression for "!=" feature
57 2010-11-06  Paul Smith  <psmith@gnu.org>
59         * scripts/features/targetvars: Fix known-good output for BS/NL changes.
60         * scripts/functions/call: Ditto.
61         * scripts/variables/special: Ditto.
63         * scripts/misc/bs-nl: New test suite for backslash/newline testing.
65 2010-08-29  Paul Smith  <psmith@gnu.org>
67         * scripts/features/errors: Add new error message to output text.
68         * scripts/variables/SHELL: Ditto.
69         * scripts/targets/POSIX: Ditto.
70         * scripts/options/dash-k: Ditto.
71         * scripts/features/vpathplus: Ditto.
72         * scripts/features/patternrules: Ditto.
73         * scripts/features/parallelism: Ditto.
75 2010-08-13  Paul Smith  <psmith@gnu.org>
77         * scripts/features/archives: New regression tests for archive
78         support.  Test for fix to Savannah bug #30612.
80         * run_make_tests.pl (set_more_defaults): Set a %FEATURES hash to
81         the features available in $(.FEATURES).
83 2010-08-10  Paul Smith  <psmith@gnu.org>
85         * scripts/features/reinvoke: Ensure command line variable settings
86         are preserved across make re-exec.  Tests Savannah bug #30723.
88 2010-07-28  Paul Smith  <psmith@gnu.org>
90         * scripts/targets/POSIX: Compatibility issues with Solaris (and
91         Tru64?); "false" returns different exit codes, and set -x shows
92         output with extra whitespace.  Run the commands by hand first to
93         find out what the real shell would do, then compare what make does.
94         * scripts/variables/SHELL: Ditto.
96 2010-07-12  Paul Smith  <psmith@gnu.org>
98         * test_driver.pl: Add a new $perl_name containing the path to Perl.
99         * run_make_tests.pl (run_make_test): Replace the special string
100         #PERL# in a makefile etc. with the path the Perl executable so
101         makefiles can use it.
103         * scripts/targets/ONESHELL: Add a new set of regression tests for
104         the .ONESHELL feature.
106 2010-07-06  Paul Smith  <psmith@gnu.org>
108         * scripts/variables/SHELL: Test the new .SHELLFLAGS variable.
110         * scripts/targets/POSIX: New file.  Test the .POSIX special target.
111         Verify that enabling .POSIX changes the shell flags to set -e.
113 2010-07-01  Paul Smith  <psmith@gnu.org>
115         * scripts/features/recursion: Add a space to separate command-line
116         args.  Fixes Savannah bug #29968.
118 2009-11-12  Boris Kolpackov  <boris@codesynthesis.com>
120         * scripts/features/vpath3: Test for the new library search
121         behavior.
123 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
125         * scripts/features/se_explicit: Enable the test for now fixed
126         Savannah bug 25780.
128 2009-10-06  Boris Kolpackov  <boris@codesynthesis.com>
130         * scripts/variables/undefine: Tests for the new undefine feature.
132 2009-10-03  Paul Smith  <psmith@gnu.org>
134         * scripts/features/parallelism: Test for open Savannah bug #26846.
136         * scripts/variables/MAKE: Rewrite for new run_make_test() format.
138         * scripts/variables/MAKEFLAGS: Created.
139         Add test for Savannah bug #2216 (still open).
141         * scripts/features/include: Test for Savannah bug #102 (still open).
143 2009-09-30  Boris Kolpackov  <boris@codesynthesis.com>
145         * scripts/features/include: Add diagnostics issuing tests for
146         cases where targets have been updated and failed with the
147         dontcare flag. Savannah bugs #15110, #25493, #12686, #17740.
149 2009-09-28  Paul Smith  <psmith@gnu.org>
151         * scripts/functions/shell: Add regression test for Savannah bug
152         #20513 (still open).
154         * scripts/features/se_explicit: Add regression tests for Savannah
155         bug #25780 (still open).
157         * run_make_tests.pl (valid_option): Add a new flag, -all([-_]?tests)?
158         that runs tests we know will fail.  This allows us to add
159         regression tests to the test suite for bugs that haven't been
160         fixed yet.
162 2009-09-28  Boris Kolpackov  <boris@codesynthesis.com>
164         * scripts/features/patspecific_vars: Add a test for the shortest
165         stem first order.
167         * scripts/features/patternrules: Add a test for the shortest stem
168         first order.
170 2009-09-24  Paul Smith  <psmith@gnu.org>
172         * scripts/features/se_implicit: Add a test for order-only
173         secondary expansion prerequisites.
175 2009-09-23  Paul Smith  <psmith@gnu.org>
177         * scripts/features/patternrules: Test that we can remove pattern
178         rules, both single and multiple prerequisites.  Savannah bug #18622.
180         * scripts/features/echoing: Rework for run_make_test().
182 2009-06-14  Paul Smith  <psmith@gnu.org>
184         * scripts/features/vpath: Verify we don't get bogus circular
185         dependency warnings if we choose a different file via vpath during
186         update.  Savannah bug #13529.
188 2009-06-13  Paul Smith  <psmith@gnu.org>
190         * scripts/variables/MAKEFILES: Verify that MAKEFILES included
191         files (and files included by them) don't set the default goal.
192         Savannah bug #13401.
194         * scripts/functions/wildcard: Test that wildcards with
195         non-existent glob matchers return empty.
197 2009-06-09  Paul Smith  <psmith@gnu.org>
199         * scripts/options/dash-B: Test the $? works correctly with -B.
200         Savannah bug #17825.
202         * scripts/features/patternrules: Test that dependencies of
203         "also_make" targets are created properly.  Savannah bug #19108.
205         * test_driver.pl (compare_output): Create a "run" file for failed
206         tests containing the command that was run.
207         (get_runfile): New function.
209         * run_make_tests.pl (valid_option): Enhanced support for valgrind:
210         allow memcheck and massif tools.
212         * scripts/features/patternrules: Have to comment out a line in the
213         first test due to backing out a change that broke the implicit
214         rule search algorithm.  Savannah bug #17752.
215         * scripts/misc/general4: Remove a test that is redundant with
216         patternrules.
218         * scripts/features/parallelism: Add a test for re-exec with
219         jobserver master override.  Savannah bug #18124.
221 2009-06-08  Paul Smith  <psmith@gnu.org>
223         * scripts/features/targetvars: Add a test for continued target
224         vars after a semicolon.  Savannah bug #17521.
226 2009-06-07  Paul Smith  <psmith@gnu.org>
228         * scripts/features/se_explicit: Make sure we catch defining
229         prereqs during snap_deps().  Savannah bug #24622.
231         * scripts/variables/automatic: Check prereq ordering when the
232         target with the recipe has no prereqs.  Savannah bug #21198.
234         * scripts/variables/LIBPATTERNS: Add a new set of test for
235         $(.LIBPATTERNS) (previously untested!)
237 2009-06-04  Paul Smith  <psmith@gnu.org>
239         * scripts/variables/SHELL: The export target-specific SHELL test
240         has an incorrect known-good-value.
242         * scripts/misc/general4: Check for whitespace (ffeed, vtab, etc.)
244         * scripts/features/se_explicit: Add tests for Savannah bug #24588.
246 2009-05-31  Paul Smith  <psmith@gnu.org>
248         * scripts/variables/DEFAULT_GOAL: Add tests for Savannah bug #25697.
250         * scripts/features/targetvars: Add tests of overrides for Savannah
251         bug #26207.
252         * scripts/features/patspecific_vars: Ditto.
254         * scripts/features/patternrules: Add a test for Savannah bug #26593.
256 2009-05-30  Paul Smith  <psmith@gnu.org>
258         * scripts/variables/flavors: Update with new variable flavor tests.
259         * scripts/variables/define: Create a new set of tests for
260         define/endef and move those aspects of the flavors suite here.
262 2009-05-25  Paul Smith  <psmith@gnu.org>
264         * scripts/features/targetvars: Ditto.
266         * scripts/features/export: Test new variable parsing abilities.
268 2009-02-23  Ramon Garcia  <ramon.garcia.f@gmail.com>
270         * scripts/variables/private: Create a new suite of tests for 'private'.
272 2007-11-04  Paul Smith  <psmith@gnu.org>
274         * scripts/functions/eval: Update error message for command -> recipe.
276         * test_driver.pl (compare_output): Allow the answer to be a regex,
277         if surrounded by '/'.
278         * scripts/misc/close_stdout: Use a regex for the answer, since
279         sometimes the error will have a description and sometimes it won't.
281 2007-09-10  Paul Smith  <psmith@gnu.org>
283         * scripts/variables/special: Add tests for .RECIPEPREFIX variable.
285 2007-08-15  Paul Smith  <psmith@gnu.org>
287         These test cases were contributed by
288         Icarus Sparry <savannah@icarus.freeuk.com> and J. David Bryan for
289         Savannah bugs #3330 and #15919.
291         * scripts/targets/SECONDARY: Add tests for Savannah bugs 3330 and
292         15919.
294         * scripts/features/parallelism: Add tests for wrong answer/hang
295         combining INTERMEDIATE, order-only prereqs, and parallelism.
296         See Savannah bugs 3330 and 15919.
298 2007-07-13  Paul Smith  <psmith@gnu.org>
300         Install a timeout so tests can never loop infinitely.
301         Original idea and patch for a single-test version provided by
302         Icarus Sparry <savannah@icarus.freeuk.com>
304         * test_driver.pl (_run_command): New function: this is called by
305         other functions to actually run a command.  Before we run it,
306         install a SIGALRM handler and set up a timer to go off in the
307         future (default is 5s; this can be overridden by individual tests).
308         (run_command): Call it.
309         (run_command_with_output): Call it.
311         * run_make_tests.pl (run_make_with_options): Override the default
312         timeout if the caller requests it.
313         (run_make_test): Pass any timeout override to run_make_with_options.
315         * scripts/features/parallelism: Increase the timeout for long tests.
316         * scripts/options/dash-l: Ditto.
318 2006-10-01  Paul Smith  <psmith@paulandlesley.org>
320         * run_make_tests.pl (set_more_defaults): Remove setting of LANG in
321         ENV here.  This doesn't always work.
322         * test_driver.pl (toplevel): Set LC_ALL to 'C' in the make
323         environment.  Fixes Savannah bug #16698.
325 2006-09-30  Paul Smith  <psmith@paulandlesley.org>
327         * scripts/variables/automatic: Add back the test for bug #8154.
329 2006-04-01  Paul D. Smith  <psmith@gnu.org>
331         * scripts/functions/realpath: Don't run tests with multiple
332         initial slashes on Windows: those paths mean something different.
334 2006-03-19  Paul D. Smith  <psmith@gnu.org>
336         * scripts/features/parallelism: Test that the jobserver is
337         properly managed when we have to re-exec the master instance of
338         make.
340 2006-03-17  Boris Kolpackov  <boris@kolpackov.net>
342         * scripts/features/statipattrules: Add tests for bug #16053.
344 2006-03-09  Paul Smith  <psmith@gnu.org>
346         * scripts/features/escape: Use "pre:" not "p:" to avoid conflicts
347         with DOS drive letters.  Fixes Savannah bug #15947.
349         * test_driver.pl (run_each_test): Set the status properly even
350         when a test fails to execute.  Fixes Savannah bug #15942.
352         * scripts/functions/foreach: Use a different environment variable
353         other than PATH to avoid differences with Windows platforms.
354         Fixes Savannah bug #15938.
356 2006-03-05  Paul D. Smith  <psmith@gnu.org>
358         * run_make_tests.pl (set_more_defaults): Add CYGWIN_NT as a port
359         type W32.  Fixed Savannah bug #15937.
361         * scripts/features/default_names: Don't call error() when the test
362         fails.  Fixes Savannah bug #15941.
364 2006-02-17  Paul D. Smith  <psmith@gnu.org>
366         * scripts/features/targetvars: Test a complex construction which
367         guarantees that we have to merge variable lists of different
368         sizes.  Tests for Savannah bug #15757.
370 2006-02-15  Paul D. Smith  <psmith@gnu.org>
372         * scripts/functions/error: Make sure filename/lineno information
373         is related to where the error is expanded, not where it's set.
374         * scripts/functions/warning: Ditto.
375         * scripts/functions/foreach: Check for different error conditions.
376         * scripts/functions/word: Ditto.
377         * scripts/variables/negative: Test some variable reference failure
378         conditions.
379         * scripts/options/warn-undefined-variables: Test the
380         --warn-undefined-variables flag.
382 2006-02-09  Paul D. Smith  <psmith@gnu.org>
384         * run_make_tests.pl (set_more_defaults): Update valgrind support
385         for newer versions.
386         * test_driver.pl (toplevel): Skip all hidden files/directories (ones
387         beginning with ".").
389         * scripts/functions/andor: Tests for $(and ..) and $(or ...)
390         functions.
392 2006-02-08  Boris Kolpackov  <boris@kolpackov.net>
394         * scripts/features/parallelism: Add a test for bug #15641.
396 2006-02-06  Paul D. Smith  <psmith@gnu.org>
398         * scripts/options/dash-W: Add a test for bug #15341.
400 2006-01-03  Paul D. Smith  <psmith@gnu.org>
402         * scripts/variables/automatic: Add a test for bug #8154.
404         * README: Update to reflect the current state of the test suite.
406 2005-12-12  Paul D. Smith  <psmith@gnu.org>
408         * scripts/features/parallelism, scripts/functions/wildcard,
409         scripts/targets/FORCE, scripts/targets/PHONY,
410         scripts/targets/SILENT: Use the default setting for
411         $delete_command.  Fixes bug #15085.
413         * run_make_tests.pl (get_this_pwd) [VMS]: Use -no_ask with delete_file.
415 2005-12-11  Paul D. Smith  <psmith@gnu.org>
417         * scripts/misc/general4: Test implicit rules with '$' in the
418         prereq list & prereq patterns.
419         * scripts/features/se_implicit: Add in .SECONDEXPANSION settings.
421 2005-12-09  Boris Kolpackov  <boris@kolpackov.net>
423         * scripts/features/patternrules: Add a test for bug #13022.
425 2005-12-07  Boris Kolpackov  <boris@kolpackov.net>
427         * scripts/features/double_colon: Add a test for bug #14334.
429 2005-11-17  Boris Kolpackov  <boris@kolpackov.net>
431         * scripts/functions/flavor: Add a test for the flavor function.
433 2005-11-14  Boris Kolpackov  <boris@kolpackov.net>
435         * scripts/variables/INCLUDE_DIRS: Add a test for the .INCLUDE_DIRS
436         special variable.
438 2005-10-24  Paul D. Smith  <psmith@gnu.org>
440         * scripts/misc/general4: Test '$$' in prerequisites list.
441         * scripts/features/statipattrules: Rewrite to use run_make_test().
442         Add various static pattern info.
443         * scripts/features/se_statpat: Enable .SECONDEXPANSION target.
444         * scripts/features/se_explicit: Add tests for handling '$$' in
445         prerequisite lists with and without setting .SECONDEXPANSION.
446         * scripts/features/order_only: Convert to run_make_test().
447         * run_make_tests.pl (set_more_defaults): If we can't get the value
448         of $(MAKE) from make, then fatal immediately.
450 2005-08-31  Paul D. Smith  <psmith@gnu.org>
452         * run_make_tests.pl (get_this_pwd): Require the POSIX module (in
453         an eval to trap errors) and if it exists, use POSIX::getcwd to
454         find the working directory.  If it doesn't exist, go back to the
455         previous methods.  This tries to be more accurate on Windows
456         systems.
458 2005-08-29  Paul D. Smith  <psmith@gnu.org>
460         * scripts/functions/abspath: Add some text to the error messages
461         to get a better idea of what's wrong.  Make warnings instead of
462         errors.
464         * scripts/features/patspecific_vars: Don't use "test", which is
465         UNIX specific.  Print the values and let the test script match
466         them.
468 2005-08-25  Paul Smith  <psmith@gnu.org>
470         * scripts/variables/SHELL: Use a /./ prefix instead of //: the
471         former works better with non-UNIX environments.  Fixes Savannah
472         bug #14129.
474 2005-08-13  Boris Kolpackov  <boris@kolpackov.net>
476         * scripts/functions/wildcard: Wrap calls to $(wildcard ) with
477         $(sort) so that the resulting order is no longer filesystem-
478         dependant.
480 2005-08-10  Boris Kolpackov  <boris@kolpackov.net>
482         * scripts/features/statipattrules: Add a test for Savannah bug #13881.
484 2005-08-07  Paul D. Smith  <psmith@gnu.org>
486         * scripts/features/parallelism: Add a test for a bug reported by
487         Michael Matz (matz@suse.de) in which make exits without waiting
488         for all its children in some situations during parallel builds.
490 2005-07-08  Paul D. Smith  <psmith@gnu.org>
492         * test_driver.pl: Reset the environment to a clean value every
493         time before we invoke make.  I'm suspicious that the environment
494         isn't handled the same way in Windows as it is in UNIX, and some
495         variables are leaking out beyond the tests they are intended for.
496         Create an %extraENV hash tests can set to add more env. vars.
497         * tests/scripts/features/export: Change to use %extraENV.
498         * tests/scripts/functions/eval: Ditto.
499         * tests/scripts/functions/origin: Ditto.
500         * tests/scripts/options/dash-e: Ditto.
501         * tests/scripts/variables/SHELL: Ditto.
503 2005-06-27  Paul D. Smith  <psmith@gnu.org>
505         * scripts/options/dash-W: Use 'echo >>' instead of touch to update
506         files.
507         * scripts/features/reinvoke: Rewrite to be safer on systems with
508         subsecond timestamps.
509         * scripts/features/patternrules: False exits with different error
510         codes on different systems (for example, Linux => 1, Solaris => 255).
512         * scripts/options/dash-W: Set the timestamp to foo.x in the future,
513         to be sure it will be considered updated when it's remade.
515 2005-06-26  Paul D. Smith  <psmith@gnu.org>
517         * scripts/functions/shell: New test suite for the shell function.
519 2005-06-25  Paul D. Smith  <psmith@gnu.org>
521         * scripts/features/include: Test include/-include/sinclude with no
522         arguments.  Tests fix for Savannah bug #1761.
524         * scripts/misc/general3: Implement comprehensive testing of
525         backslash-newline behavior in command scripts: various types of
526         quoting, fast path / slow path, etc.
527         Tests fix for Savannah bug #1332.
529         * scripts/options/symlinks: Test symlinks to non-existent files.
530         Tests fix for Savannah bug #13280.
532         * scripts/misc/general3: Test semicolons in variable references.
533         Tests fix for Savannah bug #1454.
535         * scripts/variables/MAKE_RESTARTS: New file: test the
536         MAKE_RESTARTS variable.
537         * scripts/options/dash-B: Test re-exec doesn't loop infinitely.
538         Tests fix for Savannah bug #7566.
539         * scripts/options/dash-W: New file: test the -W flag, including
540         re-exec infinite looping.
542 2005-06-12  Paul D. Smith  <psmith@gnu.org>
544         * scripts/misc/close_stdout: Add a test for Savannah bug #1328.
545         This test only works on systems that have /dev/full (e.g., Linux).
547 2005-06-09  Paul D. Smith  <psmith@gnu.org>
549         * scripts/functions/foreach: Add a test for Savannah bug #11913.
551 2005-05-31  Boris Kolpackov  <boris@kolpackov.net>
553         * scripts/features/include: Add a test for Savannah bug #13216.
554         * scripts/features/patternrules: Add a test for Savannah bug #13218.
556 2005-05-13  Paul D. Smith  <psmith@gnu.org>
558         * scripts/features/conditionals: Add tests for the new if... else
559         if... endif syntax.
561 2005-05-03  Paul D. Smith  <psmith@gnu.org>
563         * scripts/variables/DEFAULT_GOAL: Rename DEFAULT_TARGET to
564         DEFAULT_GOAL.
566 2005-05-02  Paul D. Smith  <psmith@gnu.org>
568         * scripts/features/parallelism: Add a test for exporting recursive
569         variables containing $(shell ) calls.  Rewrite this script to use
570         run_make_test() everywhere.
572 2005-04-07  Paul D. Smith  <psmith@gnu.org>
574         * scripts/targets/SECONDARY: Add a test for Savannah bug #12331.
576 2005-03-15  Boris Kolpackov  <boris@kolpackov.net>
578         * scripts/variables/automatic: Add a test for Savannah bug #12320.
580 2005-03-10  Boris Kolpackov  <boris@kolpackov.net>
582         * scripts/features/patternrules: Add a test for Savannah bug #12267.
584 2005-03-09  Boris Kolpackov  <boris@kolpackov.net>
586         * scripts/variables/DEFAULT_TARGET: Add a test for Savannah
587         bug #12266.
589 2005-03-04  Boris Kolpackov  <boris@kolpackov.net>
591         * scripts/features/patternrules: Add a test for Savannah bug #12202.
593 2005-03-03  Boris Kolpackov  <boris@kolpackov.net>
595         * scripts/features/se_implicit: Add a test for stem
596         termination bug. Add a test for stem triple-expansion bug.
598         * scripts/features/se_statpat: Add a test for stem
599         triple-expansion bug.
601         * scripts/features/statipattrules: Change test #4 to reflect
602         new way empty prerequisite list is handled.
605 2005-03-01  Boris Kolpackov  <boris@kolpackov.net>
607         * scripts/features/statipattrules: Add a test for
608         Savannah bug #12180.
610 2005-02-28  Paul D. Smith  <psmith@gnu.org>
612         * scripts/options/dash-q: Add a test for Savannah bug # 7144.
614         * scripts/options/symlinks: New file to test checking of symlink
615         timestamps.  Can't use filename dash-L because it conflicts with
616         dash-l on case-insensitive filesystems.
618         * scripts/variables/MAKEFILE_LIST, scripts/variables/MFILE_LIST:
619         Rename MAKEFILE_LIST test to MFILE_LIST, for systems that need 8.3
620         unique filenames.
622 2005-02-28  Boris Kolpackov  <boris@kolpackov.net>
624         * scripts/variables/DEFAULT_TARGET: Test the .DEFAULT_TARGET
625         special variable.
627 2005-02-27  Boris Kolpackov  <boris@kolpackov.net>
629         * scripts/features/se_explicit: Test the second expansion in
630         explicit rules.
631         * scripts/features/se_implicit: Test the second expansion in
632         implicit rules.
633         * scripts/features/se_statpat: Test the second expansion in
634         static pattern rules.
635         * scripts/variables/automatic: Fix to work with the second
636         expansion.
638         * scripts/misc/general4: Add a test for bug #12091.
640 2005-02-27  Paul D. Smith  <psmith@gnu.org>
642         * scripts/functions/eval: Check that eval of targets within
643         command scripts fails.  See Savannah bug # 12124.
645 2005-02-26  Paul D. Smith  <psmith@gnu.org>
647         * test_driver.pl (compare_output): If a basic comparison of the
648         log and answer doesn't match, try harder: change all backslashes
649         to slashes and all CRLF to LF.  This helps on DOS/Windows systems.
651 2005-02-09  Paul D. Smith  <psmith@gnu.org>
653         * scripts/features/recursion: Test command line variable settings:
654         only one instance of a given variable should be provided.
656 2004-11-30  Boris Kolpackov  <boris@kolpackov.net>
658         * tests/scripts/functions/abspath: New file: test `abspath'
659         built-in function.
661         * tests/scripts/functions/realpath: New file: test `realpath'
662         built-in function.
664 2004-11-28  Paul D. Smith  <psmith@gnu.org>
666         * scripts/options/dash-C [WINDOWS32]: Add a test for bug #10252;
667         this doesn't really test anything useful in UNIX but...
669         * scripts/variables/SHELL: New file: test proper handling of SHELL
670         according to POSIX rules.  Fixes bug #1276.
672 2004-10-21  Boris Kolpackov  <boris@kolpackov.net>
674         * scripts/functions/word: Test $(firstword ) and $(lastword ).
676 2004-10-05  Boris Kolpackov  <boris@kolpackov.net>
678         * scripts/features/patspecific_vars: Test simple/recursive
679         variable expansion.
681 2004-09-28  Boris Kolpackov  <boris@kolpackov.net>
683         * scripts/features/include: Test dontcare flag inheritance
684         when rebuilding makefiles.
686 2004-09-27  Boris Kolpackov  <boris@kolpackov.net>
688         * scripts/features/patspecific_vars: Test exported variables.
690 2004-09-22  Paul D. Smith  <psmith@gnu.org>
692         * run_make_tests.pl (run_make_test): Don't add newlines to the
693         makestring or answer if they are completely empty.
695         * scripts/features/patternrules: Rename from implicit_prereq_eval.
697         * scripts/test_template: Rework the template.
699 2004-09-21  Boris Kolpackov  <boris@kolpackov.net>
701         * run_make_tests.pl: Change `#!/usr/local/bin/perl' to be
702         `#!/usr/bin/env perl'.
704         * scripts/features/implicit_prereq_eval: Test implicit rule
705         prerequisite evaluation code.
707 2004-09-21  Paul D. Smith  <psmith@gnu.org>
709         * run_make_tests.pl (run_make_test): Enhance to allow the make
710         string to be undef: in that case it reuses the previous make
711         string.  Allows multiple tests on the same makefile.
713         * scripts/variables/flavors: Add some tests for prefix characters
714         interacting with define/endef variables.
716 2004-09-20  Paul D. Smith  <psmith@gnu.org>
718         * scripts/functions/substitution: Rewrite to use run_make_test()
719         interface, and add test for substitution failures reported by
720         Markus Mauhart <qwe123@chello.at>.
722 2004-03-22  Paul D. Smith  <psmith@gnu.org>
724         * test_driver.pl (run_each_test, toplevel, compare_output): Change
725         to track both the testing categories _AND_ the number of
726         individual tests, and report both sets of numbers.
728 2004-02-21  Paul D. Smith  <psmith@gnu.org>
730         * scripts/functions/origin: Set our own environment variable
731         rather than relying on $HOME.
733 2004-01-21  Paul D. Smith  <psmith@gnu.org>
735         * scripts/features/conditionals: Test arguments to ifn?def which
736         contain whitespace (such as a function that is evaluated).  Bug
737         #7257.
739 2004-01-07  Paul D. Smith  <psmith@gnu.org>
741         * scripts/features/order_only: Test order-only prerequisites in
742         pattern rules (patch #2349).
744 2003-11-02  Paul D. Smith  <psmith@gnu.org>
746         * scripts/functions/if: Test if on conditionals with trailing
747         whitespace--bug #5798.
749         * scripts/functions/eval: Test eval in a non-file context--bug #6195.
751 2003-04-19  Paul D. Smith  <psmith@gnu.org>
753         * scripts/features/patspecific_vars: Test multiple patterns
754         matching the same target--Bug #1405.
756 2003-04-09  Paul D. Smith  <psmith@gnu.org>
758         * run_make_tests.pl (set_more_defaults): A new $port_type of
759         'OS/2' for (surprise!) OS/2.  Also choose a wait time of 2 seconds
760         for OS/2.
762 2003-03-28  Paul D. Smith  <psmith@gnu.org>
764         * scripts/targets/SECONDARY: Test the "global" .SECONDARY (with
765         not prerequisites)--Bug #2515.
767 2003-01-30  Paul D. Smith  <psmith@gnu.org>
769         * scripts/features/targetvars: Test very long target-specific
770         variable definition lines (longer than the default make buffer
771         length).  Tests patch # 1022.
773         * scripts/functions/eval: Test very recursive $(eval ...) calls
774         with simple variable expansion (bug #2238).
776         * scripts/functions/word: Test error handling for word and
777         wordlist functions (bug #2407).
779 2003-01-22  Paul D. Smith  <psmith@gnu.org>
781         * scripts/functions/call: Test recursive argument masking (bug
782         #1744).
784 2002-10-25  Paul D. Smith  <psmith@gnu.org>
786         * scripts/functions/eval: Test using $(eval ...) inside
787         conditionals (Bug #1516).
789 2002-10-14  Paul D. Smith  <psmith@gnu.org>
791         * scripts/options/dash-t: Add a test for handling -t on targets
792         with no commands (Bug #1418).
794 2002-10-13  Paul D. Smith  <psmith@gnu.org>
796         * scripts/features/targetvars: Add a test for exporting
797         target-specific vars (Bug #1391).
799 2002-10-05  Paul D. Smith  <psmith@gnu.org>
801         * scripts/variables/automatic: Add tests for $$(@), $${@}, $${@D},
802         and $${@F}.
804 2002-09-23  Paul D. Smith  <psmith@gnu.org>
806         * scripts/features/escape: Test handling of escaped comment
807         characters in targets and prerequisites.
809 2002-09-18  Paul D. Smith  <psmith@gnu.org>
811         * scripts/features/export: Test export/unexport of multiple
812         variables in a single command.
814 2002-09-17  Paul D. Smith  <psmith@gnu.org>
816         * scripts/features/targetvars: Tests for Bug #940: test
817         target-specific and pattern-specific variables in conjunction with
818         double-colon targets.
820 2002-09-10  Paul D. Smith  <psmith@gnu.org>
822         * test_driver.pl (compare_output): Match the new format for time
823         skew error messages.
825         * scripts/features/export: Created.  Add tests for export/unexport
826         capabilities, including exporting/unexporting expanded variables.
828         * scripts/features/conditionals: Add a test for expanded variables
829         in ifdef conditionals.
831 2002-09-04  Paul D. Smith  <psmith@gnu.org>
833         * scripts/features/reinvoke: Change touch/sleep combos to utouch
834         invocations.
835         * scripts/features/vpathgpath: Ditto.
836         * scripts/features/vpathplus: Ditto.
837         * scripts/options/dash-n: Ditto.
838         * scripts/targets/INTERMEDIATE: Ditto.
839         * scripts/targets/SECONDARY: Ditto.
841         * scripts/options/dash-t: Added a test for the -t bug fixed by
842         Henning Makholm.  This test was also contributed by Henning.
844         * scripts/misc/general4: Add a test suite for obscure algorithmic
845         features of make.  First test: make sure creation subdirectories
846         as prerequisites of targets works properly.
848         * scripts/misc/version: Remove this bogus test.
850 2002-08-07  Paul D. Smith  <psmith@gnu.org>
852         * scripts/misc/general3: Add a test for makefiles that don't end
853         in newlines.
855         * scripts/variables/special: Create tests for the special
856         variables (.VARIABLES and .TARGETS).  Comment out .TARGETS test
857         for now as it's not yet supported.
859 2002-08-01  Paul D. Smith  <psmith@gnu.org>
861         * scripts/options/dash-B: Add a test for the new -B option.
863 2002-07-11  Paul D. Smith  <psmith@gnu.org>
865         * run_make_tests.pl (valid_option): Add support for Valgrind.  Use
866         -valgrind option to the test suite.
867         (set_more_defaults): Set up the file descriptor to capture
868         Valgrind output.  We have to unset its close-on-exec flag; we
869         hardcode the value for F_SETFD (2) rather than load it; hopefully
870         this will help us avoid breaking the Windows/DOS test suite.
872 2002-07-10  Paul D. Smith  <psmith@gnu.org>
874         * scripts/variables/automatic: Add some tests for $$@, $$(@D), and
875         $$(@F).
877         * test_driver.pl (utouch): Create a new function that creates a
878         file with a specific timestamp offset.  Use of this function will
879         let us avoid lots of annoying sleep() invocations in the tests
880         just to get proper timestamping, which will make the tests run a
881         lot faster.  So far it's only used in the automatic test suite.
883 2002-07-09  Paul D. Smith  <psmith@gnu.org>
885         * scripts/variables/automatic: Create a test for automatic variables.
887 2002-07-08  Paul D. Smith  <psmith@gnu.org>
889         * scripts/features/order_only: Test new order-only prerequisites.
891 2002-07-07  Paul D. Smith  <psmith@gnu.org>
893         * scripts/functions/eval: Test new function.
894         * scripts/functions/value: Test new function.
895         * scripts/variables/MAKEFILE_LIST: Test new variable.
897 2002-04-28  Paul D. Smith  <psmith@gnu.org>
899         * scripts/functions/call: New test: transitive closure
900         implementation using $(call ...) to test variable recursion.
902 2002-04-21  Paul D. Smith  <psmith@gnu.org>
904         * test_driver.pl (compare_dir_tree): Ignore CVS and RCS
905         directories in the script directories.
907 2001-05-02  Paul D. Smith  <psmith@gnu.org>
909         * scripts/variables/flavors: Test define/endef scripts where only
910         one of the command lines is quiet.
912 2000-06-22  Paul D. Smith  <psmith@gnu.org>
914         * scripts/options/dash-q: New file; test the -q option.  Includes
915         a test for PR/1780.
917 2000-06-21  Paul D. Smith  <psmith@gnu.org>
919         * scripts/features/targetvars: Added a test for PR/1709: allowing
920         semicolons in target-specific variable values.
922 2000-06-19  Paul D. Smith  <psmith@gnu.org>
924         * scripts/functions/addsuffix: Test for an empty final argument.
925         Actually this bug might have happened for any function, but this
926         one was handy.
928 2000-06-17  Eli Zaretskii  <eliz@is.elta.co.il>
930         * scripts/options/general: If parallel jobs are not supported,
931         expect a warning message from Make.
933 2000-06-15  Eli Zaretskii  <eliz@is.elta.co.il>
935         * scripts/options/general: Don't try -jN with N != 1 if parallel
936         jobs are not supported.
938 2000-05-24  Paul D. Smith  <psmith@gnu.org>
940         * scripts/options/general: Test general option processing (PR/1716).
942 2000-04-11  Paul D. Smith  <psmith@gnu.org>
944         * scripts/functions/strip: Test empty value to strip (PR/1689).
946 2000-04-08  Eli Zaretskii  <eliz@is.elta.co.il>
948         * scripts/features/reinvoke: Sleep before updating the target
949         files in the first test, to ensure its time stamp really gets
950         newer; otherwise Make might re-exec more than once.
952 2000-04-07  Eli Zaretskii  <eliz@is.elta.co.il>
954         * scripts/features/double_colon: Don't run the parallel tests if
955         parallel jobs aren't supported.
957 2000-04-04  Paul D. Smith  <psmith@gnu.org>
959         * scripts/functions/word: wordlist doesn't swap arguments anymore.
961 2000-03-27  Paul D. Smith  <psmith@gnu.org>
963         * scripts/features/statipattrules: Test that static pattern rules
964         whose prerequisite patterns resolve to empty strings throw an
965         error (instead of dumping core).  Fixes PR/1670.
967         * scripts/features/reinvoke: Make more robust by touching "b"
968         first, to ensure it's not newer than "a".
969         Reported by Marco Franzen <Marco.Franzen@Thyron.com>.
970         * scripts/options/dash-n: Ditto.
972         * scripts/functions/call: Whoops.  The fix to PR/1527 caused
973         recursive invocations of $(call ...) to break.  I can't come up
974         with any way to get both working at the same time, so I backed out
975         the fix to 1527 and added a test case for recursive calls.  This
976         also tests the fix for PR/1610.
978         * scripts/features/double_colon: Test that circular dependencies
979         in double-colon rule sets are detected correctly (PR/1671).
981 2000-03-26  Paul D. Smith  <psmith@gnu.org>
983         * scripts/targets/INTERMEDIATE: Test that make doesn't remove
984         .INTERMEDIATE files when given on the command line (PR/1669).
986 2000-03-08  Paul D. Smith  <psmith@gnu.org>
988         * scripts/options/dash-k: Add a test for error detection by
989         multiple targets depending on the same prerequisite with -k.
990         For PR/1634.
992 2000-02-07  Paul D. Smith  <psmith@gnu.org>
994         * scripts/features/escape: Add a test for backslash-escaped spaces
995         in a target name (PR/1586).
997 2000-02-04  Paul D. Smith  <psmith@gnu.org>
999         * scripts/features/patspecific_vars: Add a test for pattern-specific
1000         target variables inherited from the parent target (PR/1407).
1002 2000-02-02  Paul D. Smith  <psmith@gnu.org>
1004         * run_make_tests.pl (set_more_defaults): Hard-code the LANG to C
1005         to make sure sorting order, etc. is predictable.
1006         Reported by Andreas Jaeger <aj@suse.de>.
1008         * run_make_tests.pl (set_more_defaults): Set the $wtime variable
1009         depending on the OS.  Eli Zaretskii <eliz@is.elta.co.il> reports
1010         this seems to need to be *4* on DOS/Windows, not just 2.  Keep it
1011         1 for other systems.
1012         * scripts/features/vpathplus (touchfiles): Use the $wtime value
1013         instead of hardcoding 2.
1014         * scripts/targets/SECONDARY: Ditto.
1015         * scripts/targets/INTERMEDIATE: Ditto.
1017 2000-01-27  Paul D. Smith  <psmith@gnu.org>
1019         * test_driver.pl (toplevel): Don't try to run test scripts which
1020         are really directories.
1022 2000-01-23  Paul D. Smith  <psmith@gnu.org>
1024         * scripts/features/include: Remove a check; the fix caused more
1025         problems than the error, so I removed it and removed the test for
1026         it.
1028 2000-01-11  Paul D. Smith  <psmith@gnu.org>
1030         * scripts/functions/call: Add a test for PR/1517 and PR/1527: make
1031         sure $(call ...) doesn't eval its arguments and that you can
1032         invoke foreach from it without looping forever.
1034 1999-12-15  Paul D. Smith  <psmith@gnu.org>
1036         * scripts/targets/INTERMEDIATE: Add a test for PR/1423: make sure
1037         .INTERMEDIATE settings on files don't disable them as implicit
1038         intermediate possibilities.
1040 1999-12-01  Paul D. Smith  <psmith@gnu.org>
1042         * scripts/features/double_colon: Add a test for PR/1476: Try
1043         double-colon rules as non-goal targets and during parallel builds
1044         to make sure they're handled serially.
1046 1999-11-17  Paul D. Smith  <psmith@gnu.org>
1048         * scripts/functions/if: Add a test for PR/1429: put some text
1049         after an if-statement to make sure it works.
1051         * scripts/features/targetvars: Add a test for PR/1380: handling +=
1052         in target-specific variable definitions correctly.
1054 1999-10-15  Paul D. Smith  <psmith@gnu.org>
1056         * scripts/variables/MAKEFILES: This was really broken: it didn't
1057         test anything at all, really.  Rewrote it, plus added a test for
1058         PR/1394.
1060 1999-10-13  Paul D. Smith  <psmith@gnu.org>
1062         * scripts/options/dash-n: Add a test for PR/1379: "-n doesn't
1063         behave properly when used with recursive targets".
1065 1999-10-08  Paul D. Smith  <psmith@gnu.org>
1067         * scripts/features/targetvars: Add a check for PR/1378:
1068         "Target-specific vars don't inherit correctly"
1070 1999-09-29  Paul D. Smith  <psmith@gnu.org>
1072         * test_driver.pl (get_osname): Change $fancy_file_names to
1073         $short_filenames and reverse the logic.
1074         (run_each_test): Change test of non-existent $port_host to use
1075         $short_filenames--problem reported by Eli Zaretskii.
1077 1999-09-23  Paul D. Smith  <psmith@gnu.org>
1079         * scripts/features/parallelism: Add a check to ensure that the
1080         jobserver works when we re-invoke.  Also cleaned up the tests a
1081         little, reducing the number of rules we use so the test won't need
1082         as many "sleep" commands.
1084 1999-09-16  Paul D. Smith  <psmith@gnu.org>
1086         * scripts/features/reinvoke: Remove invocations of "touch" in
1087         makefiles.  See the comments on the touch function rewrite below.
1088         Note that UNIX touch behaves the same way if the file already
1089         exists: it sets the time to the _local_ time.  We don't want
1090         this.  This is probably a good tip for makefile writers in
1091         general, actually... where practical.
1092         * scripts/options/dash-l: Ditto.
1093         * scripts/options/dash-n: Ditto.
1095         * test_driver.pl (run_each_test): In retrospect, I don't like the
1096         .lN/.bN/.dN postfix required by DOS.  So, for non-DOS systems I
1097         changed it back to use .log, .base, and .diff.
1099         * run_make_tests.pl (set_more_defaults): Move the check for the
1100         make pathname to here from set_defaults (that's too early since it
1101         happens before the command line processing).
1102         Create a new variable $port_type, calculated from $osname, to
1103         specify what kind of system we're running on.  We should integrate
1104         the VOS stuff here, too.
1105         (valid_option): Comment out the workdir/-work stuff so people
1106         won't be fooled into thinking it works... someone needs to fix
1107         this, though!
1109         * scripts/functions/origin: Use $port_type instead of $osname.
1110         * scripts/functions/foreach: Ditto.
1111         * scripts/features/default_names: Ditto.
1113 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1115         * test_driver.pl (touch): Rewrite this function.  Previously it
1116         used to use utime() to hard-set the time based on the current
1117         local clock, or, if the file didn't exist, it merely created it.
1118         This mirrors exactly what real UNIX touch does, but it fails badly
1119         on networked filesystems where the FS server clock is skewed from
1120         the local clock: normally modifying a file causes it to get a mod
1121         time based on the _server's_ clock.  Hard-setting it based on the
1122         _local_ clock causes gratuitous errors and makes the tests
1123         unreliable except on local filesystems.  The new function will
1124         simply modify the file, allowing the filesystem to set the mod
1125         time as it sees fit.
1127         * scripts/features/parallelism: The second test output could
1128         change depending on how fast some scripts completed; use "sleep"
1129         to force the order we want.
1131         * test_driver.pl (toplevel): A bug in Perl 5.000 to Perl 5.004
1132         means that "%ENV = ();" doesn't do the right thing.  This worked
1133         in Perl 4 and was fixed in Perl 5.004_01, but use a loop to delete
1134         the environment rather than require specific versions.
1136         * run_make_tests.pl (set_more_defaults): Don't use Perl 5 s///
1137         modifier "s", so the tests will run with Perl 4.
1138         (set_more_defaults): Set $pure_log to empty if there's no -logfile
1139         option in PURIFYOPTIONS.
1140         (setup_for_test): Don't remove any logs unless $pure_log is set.
1142 1999-09-15  Eli Zaretskii  <eliz@is.elta.co.il>
1144         * scripts/features/reinvoke: Put the SHELL definition in the right
1145         test makefile.
1147 1999-09-15  Paul D. Smith  <psmith@gnu.org>
1149         ChangeLog file for the test suite created.
1152 Copyright (C) 1992, 1993, 1994, 1995, 1996, 1997, 1998, 1999, 2000, 2001,
1153 2002, 2003, 2004, 2005, 2006, 2007, 2008, 2009 Free Software Foundation, Inc.
1154 This file is part of GNU Make.
1156 GNU Make is free software; you can redistribute it and/or modify it under the
1157 terms of the GNU General Public License as published by the Free Software
1158 Foundation; either version 3 of the License, or (at your option) any later
1159 version.
1161 GNU Make is distributed in the hope that it will be useful, but WITHOUT ANY
1162 WARRANTY; without even the implied warranty of MERCHANTABILITY or FITNESS FOR
1163 A PARTICULAR PURPOSE.  See the GNU General Public License for more details.
1165 You should have received a copy of the GNU General Public License along with
1166 this program.  If not, see <http://www.gnu.org/licenses/>.