Ergänze "Schilfinsel" und "ungar".
[wortliste.git] / Makefile
blobecdcfb817e4e6ce163b20f50850bb4797c4c13ab
1 # -*- coding: utf-8 -*-
3 # This Makefile creates German hyphenation patterns in subdirectories
4 # $(TRAD) and $(REFO) for traditional and new orthography, respectively.
5 # Hyphenation patterns for traditional Swiss German are generated in
6 # directory $(SWISS).
8 # The input data is in $(SRCDIR); the possible targets are `pattern-trad',
9 # `pattern-refo', and `pattern-swiss'. If no target (or target `all') is
10 # given, all patterns for all three targets are built.
12 # SRCDIR (and the other variables) can be easily modified as parameters
13 # while calling `make', e.g.
15 # make pattern-trad SRCDIR=~/git/wortliste
17 # If you add one of the (phony) targets `major', `fugen', or `suffix',
18 # patterns that only use major hyphenation points (`Haupttrennstellen')
19 # are created. Example:
21 # make major pattern-refo
23 # The output directories have `-major' (etc.) appended to their names.
25 # To control the used weights in the major hyphenation patterns, add
26 # variable `W=N', where `N' gives the quality: value 1 specifies the best
27 # hyphenation points only, value 2 both the best and second-best points,
28 # etc. The default is value 0, using all major hyphenation points.
32 # Dieses Makefile erzeugt deutsche Trennmuster in den
33 # Unterverzeichnissen $(TRAD) und $(REFO) für die traditionelle
34 # bzw. reformierte Rechtschreibung. Trennmuster für tradionelles
35 # deutschschweizerisches Deutsch werden Verzeichnis $(SWISS) erzeugt.
37 # Die Eingabedaten werden im Verzeichnis $(SRCDIR) erwartet; die möglichen
38 # Make-Ziele sind `pattern-trad', `pattern-refo' und `pattern-swiss'. Wenn
39 # kein Ziel angegeben ist (oder man das Ziel `all' verwendet), werden alle
40 # drei Trennmuster erzeugt.
42 # SRCDIR (und die anderen Variablen) kann man leicht beim Aufruf von
43 # `make' als Parameter modifizieren, z.B.
45 # make pattern-trad SRCDIR=~/git/wortliste
47 # Wird eines der zusätzlichen (künstlichen) Ziele `major', `fugen' oder
48 # `suffix' angegeben, werden Haupttrennstellmuster erzeugt.
50 # Beispiel:
52 # make major pattern-refo
54 # Die verwendeten Verzeichnisnamen sind die gleichen wie oben, allerdings
55 # mit einem angehängten `-major', `-fugen' bzw. `-suffix'.
57 # Diese Spezialmuster spiegeln die Auszeichnung in der Liste direkt wider.
58 # Sie haben nicht das Ziel, "gute" Trennungen in Texten zu erzeugen, sondern
59 # sind zum Testen der Konsistenz der Auszeichnung sowie zum "kategorisierten"
60 # Markieren der Trennstellen neuer Wörter gedacht.
62 # Bei `major' kann die Menge der verwendeten Haupttrennstellen mittels der
63 # Variable `W=N' (Wichtungs-Schwellwert)
64 # kontrolliert werden, wo `N' die Qualität angibt: Wert 1 selektiert
65 # nur die besten Haupttrennstellen, Wert 2 die besten und zweitbesten
66 # Haupttrennstellen usw. Der Standardwert für `W' ist 0; er gibt an, dass
67 # alle Haupttrennstellen verwendet werden sollen.
69 # Die Ziele `de-Latf' und `de-x-long-s' erzeugen (experimentelle) Wortlisten
70 # und (Quasi-) Trennmuster für die Wandlung von Wörtern in traditioneller oder
71 # reformierter Standardorthographie in der Variante mit Unterscheidung von
72 # langem und runden S (Binnen-S vs. Schluß-S) wie sie im Satz mit gebrochenen
73 # Schriften benötigt wird. Ein Beispiel für die Anwendung dieser Muster ist
74 # das Skript `skripte/python/patuse/long_s_conversion.py`
76 SRCDIR = .
77 W = 0
79 DATADIR = $(SRCDIR)/daten
80 SCRIPTDIR = $(SRCDIR)/skripte
81 PATTDIR = $(SRCDIR)/patterns
82 LANGSDIR = $(SCRIPTDIR)/python/lang_s
83 EXZERPTDIR = exzerpte
84 WORDLIST = wortliste
86 ifneq ($(findstring major,$(MAKECMDGOALS)),)
87 MAJOR = -major
88 # A single `-' gets removed; all other combinations of `-', `<', `>',
89 # and `=' are converted to a hyphen.
90 SEDMAJOR = $(SED) -e '/[=<>-]/!n' \
91 -e 's/---*/=/g' \
92 -e 's/-//g' \
93 -e 's/[=<>][=<>]*/-/g'
94 PERLMAJOR = -g $(W)
96 ifeq ($(words $(MAKECMDGOALS)),1)
97 major: all
98 else
99 # This is to suppress the `nothing to be done' warning.
100 major:
102 endif
103 else ifneq ($(findstring fugen,$(MAKECMDGOALS)),)
104 MAJOR = -fugen
105 # All combinations of `-', `<', `>', `<=', `=>' get removed,
106 # runs of `=' are converted to a hyphen.
107 SEDMAJOR = $(SED) -e '/[=<>-]/!n' \
108 -e 's/--*//g' \
109 -e 's/<=*//g' \
110 -e 's/=*>//g' \
111 -e 's/[<>][<>]*//g' \
112 -e 's/[=][=]*/-/g'
113 PERLMAJOR = -g $(W)
115 ifeq ($(words $(MAKECMDGOALS)),1)
116 fugen: all
117 else
118 # This is to suppress the `nothing to be done' warning.
119 fugen:
121 endif
122 else ifneq ($(findstring suffix,$(MAKECMDGOALS)),)
123 MAJOR = -suffix
124 # All combinations of `-', `<', `=' get removed,
125 # runs of `>' are converted to a hyphen.
126 SEDMAJOR = $(SED) -e '/[=<>-]/!n' \
127 -e 's/-//g' \
128 -e 's/[<=][<=]*//g' \
129 -e 's/[>][>]*/-/g'
130 PERLMAJOR = -g $(W)
132 ifeq ($(words $(MAKECMDGOALS)),1)
133 suffix: all
134 else
135 # This is to suppress the `nothing to be done' warning.
136 suffix:
138 endif
139 else
140 MAJOR =
141 SEDMAJOR = cat
142 PERLMAJOR =
143 endif
145 TRAD = dehypht-x$(MAJOR)
146 REFO = dehyphn-x$(MAJOR)
147 SWISS = dehyphts-x$(MAJOR)
148 LATF = de-Latf
149 LONG_S = de-long-s
150 LIGA = $(PATTDIR)/ligaturaufbruch
152 LC_ENVVARS = LC_COLLATE=de_DE.UTF-8 \
153 LC_CTYPE=de_DE.UTF-8
155 CAT = cat
156 CHDIR = cd
157 COPY = cp
158 DATE = $(shell date '+%Y-%m-%d')
159 ECHO = echo
160 GIT = git
161 MKDIR = mkdir -p
162 PERL = perl
163 PWD = pwd
164 PYTHON = python3
165 SPRACHAUSZUG = $(PYTHON) skripte/trennmuster/sprachauszug.py
166 SED = sed
167 SH = bash
168 SORT = $(LC_ENVVARS) sort -d \
169 | $(LC_ENVVARS) uniq -i
171 LEFTHYPHENMIN = $(strip $(shell $(SED) 's/^\(..\).*/\1/;q' < $(DATADIR)/german.tr))
172 RIGHTHYPHENMIN = $(strip $(shell $(SED) 's/^..\(..\).*/\1/;q' < $(DATADIR)/german.tr))
174 GIT_VERSION := `$(CHDIR) $(SRCDIR); \
175 $(GIT) log --format=%H -1 HEAD --`
176 TRADFILES = $(TRAD)/$(TRAD)-$(DATE).pat $(TRAD)/$(TRAD)-$(DATE).tex
177 REFOFILES = $(REFO)/$(REFO)-$(DATE).pat $(REFO)/$(REFO)-$(DATE).tex
178 SWISSFILES = $(SWISS)/$(SWISS)-$(DATE).pat $(SWISS)/$(SWISS)-$(DATE).tex
181 override SRCDIR := $(shell cd $(SRCDIR); $(PWD))
184 all: pattern-trad pattern-refo pattern-swiss
186 .PHONY: pattern-trad pattern-refo pattern-swiss major fugen suffix
187 pattern-trad: $(TRADFILES)
188 pattern-refo: $(REFOFILES)
189 pattern-swiss: $(SWISSFILES)
191 # intermediate targets
193 # auxiliary targets
195 .PHONY: words-trad words-refo
196 words-trad: $(TRAD)/words.hyphenated.trad
197 words-refo: $(REFO)/words.hyphenated.refo
200 .PHONY: pre-trad pre-refo pre-swiss
201 pre-trad:
202 $(MKDIR) $(TRAD)
203 pre-refo:
204 $(MKDIR) $(REFO)
205 pre-swiss:
206 $(MKDIR) $(SWISS)
208 $(TRADFILES) $(TRAD)/words.hyphenated.trad: pre-trad
209 $(REFOFILES) $(REFO)/words.hyphenated.refo: pre-refo
210 $(SWISSFILES) $(SWISS)/words.hyphenated.swiss: pre-swiss
213 # GNU make supports creation of multiple targets by a single
214 # invocation of a recipe only for pattern rules, thus we have
215 # to use a `sentinel file' (using `echo' for the time stamp).
218 $(TRAD)/pattern.8 $(TRAD)/pattern.rules: $(TRAD)/make-full-pattern-trad
220 $(TRAD)/make-full-pattern-trad: $(TRAD)/words.hyphenated.trad
221 $(CHDIR) $(TRAD); \
222 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/german.tr
223 $(ECHO) done > $@
225 $(TRAD)/$(TRAD)-$(DATE).pat: $(TRAD)/pattern.8 $(TRAD)/pattern.rules
226 $(CAT) $(DATADIR)/$(TRAD).1 \
227 | $(SED) -e "s/@DATE@/$(DATE)/" \
228 -e "s/@GIT_VERSION@/$(GIT_VERSION)/" \
229 -e "s/@LEFTHYPHENMIN@/$(LEFTHYPHENMIN)/" \
230 -e "s/@RIGHTHYPHENMIN@/$(RIGHTHYPHENMIN)/" > $@; \
231 $(CAT) $(TRAD)/pattern.rules >> $@; \
232 $(CAT) $(DATADIR)/$(TRAD).2 >> $@; \
233 $(CAT) $(TRAD)/pattern.8 >> $@; \
234 $(CAT) $(DATADIR)/$(TRAD).3 >> $@
237 $(REFO)/pattern.8 $(REFO)/pattern.rules: $(REFO)/make-full-pattern-refo
239 $(REFO)/make-full-pattern-refo: $(REFO)/words.hyphenated.refo
240 $(CHDIR) $(REFO); \
241 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/german.tr
242 $(ECHO) done > $@
244 $(REFO)/$(REFO)-$(DATE).pat: $(REFO)/pattern.8 $(REFO)/pattern.rules
245 $(CAT) $(DATADIR)/$(REFO).1 \
246 | $(SED) -e "s/@DATE@/$(DATE)/" \
247 -e "s/@GIT_VERSION@/$(GIT_VERSION)/" \
248 -e "s/@LEFTHYPHENMIN@/$(LEFTHYPHENMIN)/" \
249 -e "s/@RIGHTHYPHENMIN@/$(RIGHTHYPHENMIN)/" > $@; \
250 $(CAT) $(REFO)/pattern.rules >> $@; \
251 $(CAT) $(DATADIR)/$(REFO).2 >> $@; \
252 $(CAT) $(REFO)/pattern.8 >> $@; \
253 $(CAT) $(DATADIR)/$(REFO).3 >> $@
256 $(SWISS)/pattern.8 $(SWISS)/pattern.rules: $(SWISS)/make-full-pattern-swiss
258 $(SWISS)/make-full-pattern-swiss: $(SWISS)/words.hyphenated.swiss
259 $(CHDIR) $(SWISS); \
260 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/german.tr
261 $(ECHO) done > $@
263 $(SWISS)/$(SWISS)-$(DATE).pat: $(SWISS)/pattern.8 $(SWISS)/pattern.rules
264 $(CAT) $(DATADIR)/$(SWISS).1 \
265 | $(SED) -e "s/@DATE@/$(DATE)/" \
266 -e "s/@GIT_VERSION@/$(GIT_VERSION)/" \
267 -e "s/@LEFTHYPHENMIN@/$(LEFTHYPHENMIN)/" \
268 -e "s/@RIGHTHYPHENMIN@/$(RIGHTHYPHENMIN)/" > $@; \
269 $(CAT) $(SWISS)/pattern.rules >> $@; \
270 $(CAT) $(DATADIR)/$(SWISS).2 >> $@; \
271 $(CAT) $(SWISS)/pattern.8 >> $@; \
272 $(CAT) $(DATADIR)/$(SWISS).3 >> $@
275 $(TRAD)/words.hyphenated.trad: $(SRCDIR)/$(WORDLIST)
276 $(CAT) $< \
277 | $(PERL) $(SCRIPTDIR)/extract-tex.pl -t -1 -U $(PERLMAJOR) \
278 | $(SEDMAJOR) \
279 | $(SORT) > $@
281 $(REFO)/words.hyphenated.refo: $(SRCDIR)/$(WORDLIST)
282 $(CAT) $< \
283 | $(PERL) $(SCRIPTDIR)/extract-tex.pl -1 -U $(PERLMAJOR) \
284 | $(SEDMAJOR) \
285 | $(SORT) > $@
287 $(SWISS)/words.hyphenated.swiss: $(SRCDIR)/$(WORDLIST)
288 $(CAT) $< \
289 | $(PERL) $(SCRIPTDIR)/extract-tex.pl -s -1 -U $(PERLMAJOR) \
290 | $(SEDMAJOR) \
291 | $(SORT) > $@
294 $(TRAD)/$(TRAD)-$(DATE).tex: $(DATADIR)/$(TRAD).tex.in
295 $(CAT) $< \
296 | $(SED) -e "s/@DATE@/$(DATE)/" > $@
298 $(REFO)/$(REFO)-$(DATE).tex: $(DATADIR)/$(REFO).tex.in
299 $(CAT) $< \
300 | $(SED) -e "s/@DATE@/$(DATE)/" > $@
302 $(SWISS)/$(SWISS)-$(DATE).tex: $(DATADIR)/$(SWISS).tex.in
303 $(CAT) $< \
304 | $(SED) -e "s/@DATE@/$(DATE)/" > $@
306 # Listen und Patterns de-Latf (deutsch, Latin script, fraktur;
307 # Orthographie für Satz mit gebrochenen Schriften und rundem und langem S)
309 # Wortlisten mit Langem-S: gemischt, de-1901 (alt), de-1996 (reform)
311 $(LATF)/words-de-Latf.txt: wortliste $(LANGSDIR)/s2long-s.py
312 $(MKDIR) $(LATF)
313 $(PYTHON) $(LANGSDIR)/s2long-s.py --drop-homonyms \
314 -l "de-1901,de-1996" -i wortliste -o $(LATF)/words-de-Latf.txt
316 $(LATF)/words-de-1901-Latf.txt: wortliste $(LANGSDIR)/s2long-s.py
317 $(MKDIR) $(LATF)
318 $(PYTHON) $(LANGSDIR)/s2long-s.py --drop-homonyms -l de-1901 \
319 -i wortliste -o $(LATF)/words-de-1901-Latf.txt
321 $(LATF)/words-de-1996-Latf.txt: wortliste $(LANGSDIR)/s2long-s.py
322 $(PYTHON) $(LANGSDIR)/s2long-s.py --drop-homonyms -l de-1996 \
323 -i wortliste -o $(LATF)/words-de-1996-Latf.txt
325 # de-Latf...: Variante mit Quasi-Trennstellen nach rund-s (aus-sagen)
327 .PHONY: de-Latf de-1901-Latf de-1996-Latf
329 de-Latf: $(LATF)/de-Latf.pat
331 $(LATF)/words-de-Latf.hyphenated: $(LATF)/words-de-Latf.txt
332 $(PYTHON) $(LANGSDIR)/de_Latf_quasihyph.py < $< > $@
334 $(LATF)/de-Latf.pat: $(LATF)/words-de-Latf.hyphenated
335 $(CHDIR) $(LATF); \
336 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/de-Latf.tr
337 $(CAT) $(LATF)/pattern.8 >> $@;
339 de-1901-Latf: $(LATF)/de-1901-Latf.pat
341 $(LATF)/words-de-1901-Latf.hyphenated: $(LATF)/words-de-1901-Latf.txt
342 $(PYTHON) $(LANGSDIR)/de_Latf_quasihyph.py < $< > $@
344 $(LATF)/de-1901-Latf.pat: $(LATF)/words-de-1901-Latf.hyphenated
345 $(CHDIR) $(LATF); \
346 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/de-Latf.tr
347 $(CAT) $(LATF)/pattern.8 >> $@;
349 de-1996-Latf: $(LATF)/de-1996-Latf.pat
351 $(LATF)/words-de-1996-Latf.hyphenated: $(LATF)/words-de-1996-Latf.txt
352 $(PYTHON) $(LANGSDIR)/de_Latf_quasihyph.py < $< > $@
354 $(LATF)/de-1996-Latf.pat: $(LATF)/words-de-1996-Latf.hyphenated
355 $(CHDIR) $(LATF); \
356 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/de-Latf.tr
357 $(CAT) $(LATF)/pattern.8 >> $@;
359 # long-s: Variante mit Quasi-Trennstellen nach Lang-S (auss-agen)
361 .PHONY: de-x-long-s de-1901-x-long-s de-1996-x-long-s
363 de-x-long-s: $(LONG_S)/de-x-long-s.pat
365 $(LONG_S)/words-de-x-long-s.hyphenated: $(LATF)/words-de-Latf.txt
366 $(MKDIR) $(LONG_S)
367 $(PYTHON) $(LANGSDIR)/long_s_quasihyph.py < $< > $@
369 $(LONG_S)/de-x-long-s.pat: $(LONG_S)/words-de-x-long-s.hyphenated
370 $(CHDIR) $(LONG_S); \
371 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/de-Latf.tr
372 $(CAT) $(LONG_S)/pattern.8 >> $@;
374 de-1901-x-long-s: $(LONG_S)/de-1901-x-long-s.pat
376 $(LONG_S)/words-de-1901-x-long-s.hyphenated: $(LATF)/words-de-1901-Latf.txt
377 $(MKDIR) $(LONG_S)
378 $(PYTHON) $(LANGSDIR)/long_s_quasihyph.py < $< > $@
380 $(LONG_S)/de-1901-x-long-s.pat: $(LONG_S)/words-de-1901-x-long-s.hyphenated
381 $(CHDIR) $(LONG_S); \
382 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/de-Latf.tr
383 $(CAT) $(LONG_S)/pattern.8 >> $@;
385 de-1996-x-long-s: $(LONG_S)/de-1996-x-long-s.pat
387 $(LONG_S)/words-de-1996-x-long-s.hyphenated: $(LATF)/words-de-1996-Latf.txt
388 $(MKDIR) $(LONG_S)
389 $(PYTHON) $(LANGSDIR)/long_s_quasihyph.py < $< > $@
391 $(LONG_S)/de-1996-x-long-s.pat: $(LONG_S)/words-de-1996-x-long-s.hyphenated
392 $(CHDIR) $(LONG_S); \
393 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/de-Latf.tr
394 $(CAT) $(LONG_S)/pattern.8 >> $@;
396 # Ligaturaufbruchmuster
398 .PHONY: de-1901_ligaturaufbruch de-1996_ligaturaufbruch
400 de-1901_ligaturaufbruch: $(LIGA)/de-1901_ligaturaufbruch-$(DATE).pat
402 $(LIGA)/de-1901_ligaturaufbruch.eingabe: $(SRCDIR)/$(WORDLIST)
403 $(MKDIR) $(LIGA)
404 $(SPRACHAUSZUG) -l 'de-1901,de-CH-1901' -s 'morphemgrenzen,einfach' \
405 $(WORDLIST) > $@
407 $(LIGA)/de-1901_ligaturaufbruch-$(DATE).pat: $(LIGA)/de-1901_ligaturaufbruch.eingabe
408 $(CHDIR) $(LIGA); \
409 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/de-Latf.tr
410 $(CAT) $(LIGA)/pattern.8 >> $@;
412 de-1996_ligaturaufbruch: $(LIGA)/de-1996_ligaturaufbruch-$(DATE).pat
414 $(LIGA)/de-1996_ligaturaufbruch.eingabe: $(SRCDIR)/$(WORDLIST)
415 $(MKDIR) $(LIGA)
416 $(SPRACHAUSZUG) -l 'de-1996,de-CH-1996' -s 'morphemgrenzen,einfach' \
417 $(WORDLIST) > $@
419 $(LIGA)/de-1996_ligaturaufbruch-$(DATE).pat: $(LIGA)/de-1996_ligaturaufbruch.eingabe
420 $(CHDIR) $(LIGA); \
421 $(SH) $(SCRIPTDIR)/make-full-pattern.sh $(<F) $(DATADIR)/de-Latf.tr
422 $(CAT) $(LIGA)/pattern.8 >> $@;
424 # Exzerpte mit `sprachauszug.py`
426 $(EXZERPTDIR)/de-1996_morphemgrenzen:
427 $(MKDIR) $(EXZERPTDIR)
428 $(SPRACHAUSZUG) -l de-1996 \
429 -s 'morphemgrenzen,einfach' < $(WORDLIST) > $@
431 $(EXZERPTDIR)/de-1901_morphemgrenzen:
432 $(MKDIR) $(EXZERPTDIR)
433 $(SPRACHAUSZUG) -l de-1901 \
434 -s 'morphemgrenzen,einfach' < $(WORDLIST) > $@
436 $(EXZERPTDIR)/de-1996_hyphenmin3:
437 $(MKDIR) $(EXZERPTDIR)
438 $(SPRACHAUSZUG) -l 'de-1996,de-1996-x-versal' \
439 -s 'standard,morphemisch,hyphenmin3,einfach' < $(WORDLIST) > $@
441 $(EXZERPTDIR)/de-1996_gesangstext:
442 $(MKDIR) $(EXZERPTDIR)
443 $(SPRACHAUSZUG) -l 'de-1996,de-1996-x-versal' \
444 -s 'syllabisch,gesangstext,einfach' < $(WORDLIST) > $@
446 # EOF