robots: update exclusions
tree4cd106392135180e4959edca30ee6adf40468e03
-rw-r--r-- 54 .gitattributes
-rw-r--r-- 13 .gitignore
-rw-r--r-- 562 .gitmodules
-rw-r--r-- 476 .mailmap
-rw-r--r-- 18092 COPYING
-rw-r--r-- 1032 GNUmakefile
drwxr-xr-x - Girocco
-rw-r--r-- 1459 INSTALL
-rw-r--r-- 6891 README
lrwxrwxrwx 6 README.md -> README
-rw-r--r-- 902 TODO
-rw-r--r-- 17484 apache.conf.in
drwxr-xr-x - bin
m--------- - bzr-fastimport.git
drwxr-xr-x - cgi
-rw-r--r-- 4835 chrootsetup_dragonfly.sh
-rw-r--r-- 4640 chrootsetup_freebsd.sh
-rw-r--r-- 4895 chrootsetup_linux.sh
drwxr-xr-x - cron
m--------- - ezcert.git
m--------- - fast-export.git
drwxr-xr-x - fstab
m--------- - git-browser.git
-rw-r--r-- 1150 git-favicon.ico
m--------- - git.git
drwxr-xr-x - gitweb
drwxr-xr-x - hooks
-rw-r--r-- 514 htaccess
drwxr-xr-x - html
-rwxr-xr-x 33993 install.sh
-rwxr-xr-x 17416 jailsetup.sh
drwxr-xr-x - jobd
drwxr-xr-x - jobs
-rwxr-xr-x 1657 make-apache-conf.sh
-rw-r--r-- 4145 makefile
m--------- - markdown.git
-rw-r--r-- 64217 mootools.js
-rw-r--r-- 539 robots.txt
drwxr-xr-x - rsyslog
drwxr-xr-x - screen
-rw-r--r-- 27186 shlib.sh
drwxr-xr-x - src
drwxr-xr-x - systemd
drwxr-xr-x - taskd
drwxr-xr-x - toolbox
drwxr-xr-x - xinetd