doc/build-openbsd.md

   1 OpenBSD build guide
   2 ======================
   3 (updated for OpenBSD 6.1)
   4
   5 This guide describes how to build bitcoind and command-line utilities on OpenBSD.
   6
   7 As OpenBSD is most common as a server OS, we will not bother with the GUI.
   8
   9 Preparation
  10 -------------
  11
  12 Run the following as root to install the base dependencies for building:
  13
  14 ```bash
  15 pkg_add gmake libtool libevent
  16 pkg_add autoconf # (select highest version, e.g. 2.69)
  17 pkg_add automake # (select highest version, e.g. 1.15)
  18 pkg_add python # (select highest version, e.g. 3.5)
  19 ```
  20
  21 See [dependencies.md](dependencies.md) for a complete overview.
  22
  23 GCC
  24 -------
  25
  26 The default C++ compiler that comes with OpenBSD 5.9 is g++ 4.2. This version is old (from 2007), and is not able to compile the current version of Bitcoin Core, primarily as it has no C++11 support, but even before there were issues. So here we will be installing a newer compiler:
  27
  28 ```bash
  29 pkg_add g++ # (select newest 4.x version, e.g. 4.9.3)
  30 ```
  31
  32 This compiler will not overwrite the system compiler, it will be installed as `egcc` and `eg++` in `/usr/local/bin`.
  33
  34 ### Building boost
  35
  36 Do not use `pkg_add boost`! The boost version installed thus is compiled using the `g++` compiler not `eg++`, which will result in a conflict between `/usr/local/lib/libestdc++.so.XX.0` and `/usr/lib/libstdc++.so.XX.0`, resulting in a test crash:
  37
  38     test_bitcoin:/usr/lib/libstdc++.so.57.0: /usr/local/lib/libestdc++.so.17.0 : WARNING: symbol(_ZN11__gnu_debug17_S_debug_me ssagesE) size mismatch, relink your program
  39     ...
  40     Segmentation fault (core dumped)
  41
  42 This makes it necessary to build boost, or at least the parts used by Bitcoin Core, manually:
  43
  44 ```
  45 # Pick some path to install boost to, here we create a directory within the bitcoin directory
  46 BITCOIN_ROOT=$(pwd)
  47 BOOST_PREFIX="${BITCOIN_ROOT}/boost"
  48 mkdir -p $BOOST_PREFIX
  49
  50 # Fetch the source and verify that it is not tampered with
  51 curl -o boost_1_64_0.tar.bz2 https://netcologne.dl.sourceforge.net/project/boost/boost/1.64.0/boost_1_64_0.tar.bz2
  52 echo '7bcc5caace97baa948931d712ea5f37038dbb1c5d89b43ad4def4ed7cb683332 boost_1_64_0.tar.bz2' | sha256 -c
  53 # MUST output: (SHA256) boost_1_64_0.tar.bz2: OK
  54 tar -xjf boost_1_64_0.tar.bz2
  55
  56 # Boost 1.64 needs one small patch for OpenBSD
  57 cd boost_1_64_0
  58 # Also here: https://gist.githubusercontent.com/laanwj/bf359281dc319b8ff2e1/raw/92250de8404b97bb99d72ab898f4a8cb35ae1ea3/patch-boost_test_impl_execution_monitor_ipp.patch
  59 patch -p0 < /usr/ports/devel/boost/patches/patch-boost_test_impl_execution_monitor_ipp
  60
  61 # Build w/ minimum configuration necessary for bitcoin
  62 echo 'using gcc : : eg++ : <cxxflags>"-fvisibility=hidden -fPIC" <linkflags>"" <archiver>"ar" <striper>"strip"  <ranlib>"ranlib" <rc>"" : ;' > user-config.jam
  63 config_opts="runtime-link=shared threadapi=pthread threading=multi link=static variant=release --layout=tagged --build-type=complete --user-config=user-config.jam -sNO_BZIP2=1"
  64 ./bootstrap.sh --without-icu --with-libraries=chrono,filesystem,program_options,system,thread,test
  65 ./b2 -d2 -j2 -d1 ${config_opts} --prefix=${BOOST_PREFIX} stage
  66 ./b2 -d0 -j4 ${config_opts} --prefix=${BOOST_PREFIX} install
  67 ```
  68
  69 ### Building BerkeleyDB
  70
  71 BerkeleyDB is only necessary for the wallet functionality. To skip this, pass `--disable-wallet` to `./configure`.
  72
  73 See "Berkeley DB" in [build_unix.md](build_unix.md) for instructions on how to build BerkeleyDB 4.8.
  74 You cannot use the BerkeleyDB library from ports, for the same reason as boost above (g++/libstd++ incompatibility).
  75
  76 ```bash
  77 # Pick some path to install BDB to, here we create a directory within the bitcoin directory
  78 BITCOIN_ROOT=$(pwd)
  79 BDB_PREFIX="${BITCOIN_ROOT}/db4"
  80 mkdir -p $BDB_PREFIX
  81
  82 # Fetch the source and verify that it is not tampered with
  83 curl -o db-4.8.30.NC.tar.gz 'http://download.oracle.com/berkeley-db/db-4.8.30.NC.tar.gz'
  84 echo '12edc0df75bf9abd7f82f821795bcee50f42cb2e5f76a6a281b85732798364ef  db-4.8.30.NC.tar.gz' | sha256 -c
  85 # MUST output: (SHA256) db-4.8.30.NC.tar.gz: OK
  86 tar -xzf db-4.8.30.NC.tar.gz
  87
  88 # Build the library and install to specified prefix
  89 cd db-4.8.30.NC/build_unix/
  90 #  Note: Do a static build so that it can be embedded into the executable, instead of having to find a .so at runtime
  91 ../dist/configure --enable-cxx --disable-shared --with-pic --prefix=$BDB_PREFIX CC=egcc CXX=eg++ CPP=ecpp
  92 make install # do NOT use -jX, this is broken
  93 ```
  94
  95 ### Resource limits
  96
  97 The standard ulimit restrictions in OpenBSD are very strict:
  98
  99     data(kbytes)         1572864
 100
 101 This is, unfortunately, no longer enough to compile some `.cpp` files in the project,
 102 at least with gcc 4.9.3 (see issue https://github.com/bitcoin/bitcoin/issues/6658).
 103 If your user is in the `staff` group the limit can be raised with:
 104
 105     ulimit -d 3000000
 106
 107 The change will only affect the current shell and processes spawned by it. To
 108 make the change system-wide, change `datasize-cur` and `datasize-max` in
 109 `/etc/login.conf`, and reboot.
 110
 111 ### Building Bitcoin Core
 112
 113 **Important**: use `gmake`, not `make`. The non-GNU `make` will exit with a horrible error.
 114
 115 Preparation:
 116 ```bash
 117 export AUTOCONF_VERSION=2.69 # replace this with the autoconf version that you installed
 118 export AUTOMAKE_VERSION=1.15 # replace this with the automake version that you installed
 119 ./autogen.sh
 120 ```
 121 Make sure `BDB_PREFIX` and `BOOST_PREFIX` are set to the appropriate paths from the above steps.
 122
 123 To configure with wallet:
 124 ```bash
 125 ./configure --with-gui=no --with-boost=$BOOST_PREFIX \
 126     CC=egcc CXX=eg++ CPP=ecpp \
 127     BDB_LIBS="-L${BDB_PREFIX}/lib -ldb_cxx-4.8" BDB_CFLAGS="-I${BDB_PREFIX}/include"
 128 ```
 129
 130 To configure without wallet:
 131 ```bash
 132 ./configure --disable-wallet --with-gui=no --with-boost=$BOOST_PREFIX \
 133     CC=egcc CXX=eg++ CPP=ecpp
 134 ```
 135
 136 Build and run the tests:
 137 ```bash
 138 gmake # can use -jX here for parallelism
 139 gmake check
 140 ```
 141
 142 Clang (not currently working)
 143 ------------------------------
 144
 145 WARNING: This is outdated, needs to be updated for OpenBSD 6.0 and re-tried.
 146
 147 Using a newer g++ results in linking the new code to a new libstdc++.
 148 Libraries built with the old g++, will still import the old library.
 149 This gives conflicts, necessitating rebuild of all C++ dependencies of the application.
 150
 151 With clang this can - at least theoretically - be avoided because it uses the
 152 base system's libstdc++.
 153
 154 ```bash
 155 pkg_add llvm boost
 156 ```
 157
 158 ```bash
 159 ./configure --disable-wallet --with-gui=no CC=clang CXX=clang++
 160 gmake
 161 ```
 162
 163 However, this does not appear to work. Compilation succeeds, but link fails
 164 with many 'local symbol discarded' errors:
 165
 166     local symbol 150: discarded in section `.text._ZN10tinyformat6detail14FormatIterator6finishEv' from libbitcoin_util.a(libbitcoin_util_a-random.o)
 167     local symbol 151: discarded in section `.text._ZN10tinyformat6detail14FormatIterator21streamStateFromFormatERSoRjPKcii' from libbitcoin_util.a(libbitcoin_util_a-random.o)
 168     local symbol 152: discarded in section `.text._ZN10tinyformat6detail12convertToIntIA13_cLb0EE6invokeERA13_Kc' from libbitcoin_util.a(libbitcoin_util_a-random.o)
 169
 170 According to similar reported errors this is a binutils (ld) issue in 2.15, the
 171 version installed by OpenBSD 5.7:
 172
 173 - http://openbsd-archive.7691.n7.nabble.com/UPDATE-cppcheck-1-65-td248900.html
 174 - https://llvm.org/bugs/show_bug.cgi?id=9758
 175
 176 There is no known workaround for this.