tests/scripts/features/parallelism

   1 #                                                                    -*-perl-*-
   2
   3 $description = "Test parallelism (-j) option.";
   4
   5
   6 $details = "This test creates a makefile with two double-colon default
   7 rules.  The first rule has a series of sleep and echo commands
   8 intended to run in series.  The second and third have just an
   9 echo statement.  When make is called in this test, it is given
  10 the -j option with a value of 4.  This tells make that it may
  11 start up to four jobs simultaneously.  In this case, since the
  12 first command is a sleep command, the output of the second
  13 and third commands will appear before the first if indeed
  14 make is running all of these commands in parallel.";
  15
  16 if (!$parallel_jobs) {
  17   return -1;
  18 }
  19
  20 if ($vos) {
  21   $sleep_command = "sleep -seconds";
  22 }
  23 else {
  24   $sleep_command = "sleep";
  25 }
  26
  27
  28 run_make_test("
  29 all : def_1 def_2 def_3
  30 def_1 : ; \@echo ONE; $sleep_command 3 ; echo TWO
  31 def_2 : ; \@$sleep_command 2 ; echo THREE
  32 def_3 : ; \@$sleep_command 1 ; echo FOUR",
  33               '-j4', "ONE\nFOUR\nTHREE\nTWO");
  34
  35 # Test parallelism with included files.  Here we sleep/echo while
  36 # building the included files, to test that they are being built in
  37 # parallel.
  38 run_make_test("
  39 all: 1 2; \@echo success
  40 -include 1.inc 2.inc
  41 1.inc: ; \@echo ONE.inc; $sleep_command 2; echo TWO.inc; echo '1: ; \@echo ONE; $sleep_command 2; echo TWO' > \$\@
  42 2.inc: ; \@$sleep_command 1; echo THREE.inc; echo '2: ; \@$sleep_command 1; echo THREE' > \$\@",
  43               "-j4",
  44               "ONE.inc\nTHREE.inc\nTWO.inc\nONE\nTHREE\nTWO\nsuccess\n");
  45
  46 unlink('1.inc', '2.inc');
  47
  48
  49 # Test parallelism with included files--this time recurse first and make
  50 # sure the jobserver works.
  51 run_make_test("
  52 recurse: ; \@\$(MAKE) --no-print-directory -f #MAKEFILE# INC=yes all
  53 all: 1 2; \@echo success
  54
  55 INC = no
  56 ifeq (\$(INC),yes)
  57 -include 1.inc 2.inc
  58 endif
  59
  60 1.inc: ; \@echo ONE.inc; $sleep_command 2; echo TWO.inc; echo '1: ; \@echo ONE; $sleep_command 2; echo TWO' > \$\@
  61 2.inc: ; \@$sleep_command 1; echo THREE.inc; echo '2: ; \@$sleep_command 1; echo THREE' > \$\@",
  62               "-j4",
  63               "ONE.inc\nTHREE.inc\nTWO.inc\nONE\nTHREE\nTWO\nsuccess\n");
  64
  65 unlink('1.inc', '2.inc');
  66
  67 # Grant Taylor reports a problem where tokens can be lost (not written back
  68 # to the pipe when they should be): this happened when there is a $(shell ...)
  69 # function in an exported recursive variable.  I added some code to check
  70 # for this situation and print a message if it occurred.  This test used
  71 # to trigger this code when I added it but no longer does after the fix.
  72 # We have to increase the timeout from the default (5s) on this test.
  73
  74 run_make_test("
  75 export HI = \$(shell \$(\$\@.CMD))
  76 first.CMD = echo hi
  77 second.CMD = $sleep_command 4; echo hi
  78
  79 .PHONY: all first second
  80 all: first second
  81
  82 first second: ; \@echo \$\@; $sleep_command 1; echo \$\@",
  83               '-j2', "first\nfirst\nsecond\nsecond", 0, 7);
  84
  85 # Michael Matz <matz@suse.de> reported a bug where if make is running in
  86 # parallel without -k and two jobs die in a row, but not too close to each
  87 # other, then make will quit without waiting for the rest of the jobs to die.
  88
  89 run_make_test("
  90 .PHONY: all fail.1 fail.2 fail.3 ok
  91 all: fail.1 ok fail.2 fail.3
  92
  93 fail.1 fail.2 fail.3:
  94         \@sleep \$(patsubst fail.%,%,\$\@)
  95         \@echo Fail
  96         \@exit 1
  97
  98 ok:
  99         \@sleep 4
 100         \@echo Ok done",
 101               '-rR -j5', 'Fail
 102 #MAKE#: *** [fail.1] Error 1
 103 #MAKE#: *** Waiting for unfinished jobs....
 104 Fail
 105 #MAKE#: *** [fail.2] Error 1
 106 Fail
 107 #MAKE#: *** [fail.3] Error 1
 108 Ok done',
 109              512);
 110
 111
 112 # Test for Savannah bug #15641.
 113 #
 114 run_make_test('
 115 .PHONY: all
 116 all:; @:
 117
 118 -include foo.d
 119
 120 foo.d: comp
 121         @echo building $@
 122
 123 comp: mod_a.o mod_b.o; @:
 124
 125 mod_a.o mod_b.o:
 126         @exit 1
 127 ', '-j2', '');
 128
 129
 130 # Make sure that all jobserver FDs are closed if we need to re-exec the
 131 # master copy.
 132 #
 133 # First, find the "default" file descriptors we normally use
 134 # Then make sure they're still used.
 135 #
 136 # Right now we don't have a way to run a makefile and capture the output
 137 # without checking it, so we can't really write this test.
 138
 139 # run_make_test('
 140 # submake: ; @$(MAKE) --no-print-directory -f #MAKEFILE# fdprint 5>output
 141
 142 # dependfile: ; @echo FOO=bar > $@
 143
 144 # INCL := true
 145
 146 # FOO=foo
 147 # ifeq ($(INCL),true)
 148 # -include dependfile
 149 # endif
 150
 151 # fdprint: ; @echo $(filter --jobserver%,$(MAKEFLAGS))
 152
 153 # recurse: ; @$(MAKE) --no-print-directory -f #MAKEFILE# submake INCL=true',
 154 #               '-j2 INCL=false fdprint',
 155 #               'bar');
 156
 157 # unlink('dependfile', 'output');
 158
 159
 160 # # Do it again, this time where the include is done by the non-master make.
 161 # run_make_test(undef, '-j2 recurse INCL=false', 'bar');
 162
 163 # unlink('dependfile', 'output');
 164
 165 1;