Add support for Boost.Tokenizer.
treea30f7cde39809959860f8d9afed148e69b05121b
-rw-r--r-- 20 .gitignore
-rw-r--r-- 37 AUTHORS
-rw-r--r-- 35147 COPYING
-rw-r--r-- 12321 ChangeLog
-rw-r--r-- 746 Makefile.am
-rw-r--r-- 794 NEWS
-rw-r--r-- 7281 README
-rw-r--r-- 218 THANKS
-rwxr-xr-x 722 bootstrap
drwxr-xr-x - build-aux
-rw-r--r-- 1152 configure.ac
drwxr-xr-x - tests