hadoop/PKGBUILD

   1 # Contributor: Mantas Vidutis <mantas.a.vidutis-at-gmail.com>
   2
   3 pkgname=hadoop
   4 pkgver=1.0.0
   5 _devver=1.0.0-dev
   6 pkgrel=1
   7 pkgdesc="Hadoop - MapReduce implementation and distributed filesystem"
   8 arch=('i686' 'x86_64')
   9 url="http://hadoop.apache.org"
  10 license=('APACHE')
  11 depends=('jre' 'zlib' 'gzip' 'lzo' 'bzip2')
  12 makedepends=('jdk' 'apache-ant')
  13 optdepends=('kfs')
  14 conflicts=('hadoop-svn')
  15 install=hadoop.install
  16 source=("http://mirror.csclub.uwaterloo.ca/apache/hadoop/common/hadoop-${pkgver}/hadoop-${pkgver}.tar.gz")
  17 md5sums=('fa150612de0efe80be88144c28225780')
  18
  19 compile() {
  20   cd ${srcdir}/hadoop-${pkgver} || return 1
  21
  22   msg "Cleaning..."
  23
  24   ant clean || return 1
  25
  26   msg "Patching..."
  27
  28   sed -i "s/${_devver}/${pkgver}/" build.xml
  29
  30   sed -i "s|<ivysettings>|<ivysettings>\n<caches defaultCacheDir=\"${srcdir}/ivy_cache\"/>|" ivy/ivysettings.xml
  31
  32   msg "Building..."
  33
  34   ant -Dcompile.native=true bin-package || return 1
  35
  36   cd ${srcdir}/hadoop-${pkgver}/build || return 1
  37
  38   msg "Installing..."
  39
  40   mkdir -p ${pkgdir}/usr/share
  41   mkdir -p ${pkgdir}/usr/share/hadoop/etc/hadoop/
  42
  43   mv hadoop-${pkgver} ${pkgdir}/usr/share/hadoop || return 1
  44   mv ${pkgdir}/usr/share/hadoop/conf ${pkgdir}/usr/share/hadoop/etc/hadoop/default || return 1
  45 }
  46
  47 use_compiled() {
  48   msg "Installing..."
  49
  50   mkdir -p ${pkgdir}/usr/share/hadoop
  51   mkdir -p ${pkgdir}/usr/share/hadoop/etc/hadoop/
  52
  53   cd ${srcdir}/hadoop-${pkgver}
  54
  55   mv bin lib webapps *.jar *.txt ${pkgdir}/usr/share/hadoop/ || return 1
  56   mv conf ${pkgdir}/usr/share/hadoop/etc/hadoop/default || return 1
  57 }
  58
  59 build() {
  60   # compile
  61   use_compiled
  62
  63   msg "Configuring..."
  64
  65   cd ${pkgdir}/usr/share/hadoop/etc/hadoop/default || return 1
  66
  67   # Set Java home:
  68   echo 'export JAVA_HOME=/opt/java/jre' >> hadoop-env.sh
  69
  70   # Set directories:
  71   echo 'export HADOOP_LOG_DIR="/var/log/hadoop"' >> hadoop-env.sh
  72   echo 'export HADOOP_PID_DIR="/var/run"' >> hadoop-env.sh
  73
  74   # Disable IPv6 (comment out for IPv6 support):
  75   sed -i 's|_OPTS="-D|_OPTS="-Djava.net.preferIPv4Stack=true -D|' hadoop-env.sh
  76
  77   cd ${pkgdir}/usr/share/hadoop || return 1
  78
  79   sed -i 's#^export HADOOP_HOME=`dirname "$this"`/..#export HADOOP_HOME="/usr/share/hadoop"\nexport HADOOP_CONF_DIR="/etc/hadoop"#' bin/hadoop-config.sh
  80
  81   if [ "$CARCH" = "i686" ]; then
  82     rm -rf lib/native/Linux-amd64-64
  83     cd lib/native/Linux-i386-32
  84     sed -i "s|dependency_libs='|dependency_libs='-L/opt/java/jre/lib/i386/server |" libhadoop.la
  85   fi
  86
  87   if [ "$CARCH" = "x86_64" ]; then
  88     rm -rf lib/native/Linux-i386-32
  89     cd lib/native/Linux-amd64-64
  90     sed -i "s|dependency_libs='|dependency_libs='-L/opt/java/jre/lib/amd64/server |" libhadoop.la
  91   fi
  92
  93   # Create some links, so Hadoop's KFS jar could access KFS libraries properly
  94   # (it is still fine if KFS is not installed)
  95
  96   msg "Creating KFS links..."
  97
  98   for lib in libkfsClient libkfsCommon libkfsEmulator libkfsIO libkfsMeta; do
  99     for ext in a so; do
 100       ln -s /usr/lib/${lib}.${ext}
 101     done
 102   done
 103
 104   ln -s /usr/lib/libkfs_access.so
 105 }