skripte/merge-wordslists.sh

   1 #!/bin/sh
   2 #
   3 # merge-wordlists.sh datei ...
   4 #
   5 # Fügt mehrere Wortlisten (in UTF8-Kodierung) zu einer sortierten
   6 # Gesamtliste der einfachen (ungetrennten) Wörter zusammen.
   7 #
   8 # Eingabe: ein oder mehrere Dateinamen.
   9 # Ausgabe ist nach stdout.
  10
  11 LANG=de_DE.utf-8
  12 export LANG
  13
  14 cat $@ \
  15 | sed -e '/^#/d' \
  16       -e 's/     /\
  17 /' \
  18 | sed -e 's/;.*//' \
  19       -e 's/[-=·.|<>]//g' \
  20 | sort \
  21 | uniq -i
  22
  23 # eof