mk-release.inc

   1 #@ Include file for the mk-release.sh generic release builder.
   2 #@ It also needs two hooks: update_stable_hook(), update_release_hook(),
   3 #@ which need to "git add" what they have modified.
   4
   5 : ${PROGRAM:?"Need \$PROGRAM"}
   6 : ${UPROGRAM:?"Need \$UPROGRAM"}
   7 : ${MANUAL:?"May need \$MANUAL for announcement references"}
   8
   9 : ${UPLOAD:?"Need \$UPLOAD URL for scp(1)"}
  10
  11 : ${MAILX:=mailx}
  12 : ${ACCOUNT:?"May need mailx(1) -A \$ACCOUNT"}
  13 : ${MAILTO:?"May need \$MAILTO for announcement"}
  14 : ${MAILBCC:?"May need \$MAILBCC for announcement"}
  15
  16 ##  --  >8  --  8<  --  ##
  17
  18 ORIG_LC_ALL=${LC_ALL} LC_ALL=C
  19 export LC_ALL
  20
  21 DATE_MAN=`date -u +'%b %d, %Y'`
  22 DATE_ISO=`date -u +%Y-%m-%d`
  23
  24 yesno() {
  25    while [ 1 ]; do
  26       [ ${#} -gt 0 ] && printf '%s ' "${@}"
  27       printf '[y/n] '
  28       read i
  29       case ${i} in
  30       [Yy]*) return 0;;
  31       [Nn]*) return 1;;
  32       *) ;;
  33       esac
  34    done
  35 }
  36
  37 headref="`git rev-parse --verify HEAD`"
  38 brref=
  39 for i in `git rev-parse --branches=stable master^{commit}`; do
  40    if [ ${headref} = ${i} ]; then
  41       brref=${headref}
  42       break
  43    fi
  44 done
  45 if [ -z "${brref}" ]; then
  46    echo >&2 'Not on the [master] or a [stable/*] branch'
  47    exit 1
  48 fi
  49 if [ "`git status --porcelain --ignored |
  50       awk 'BEGIN{no=0}{++no}END{print no}'`" -ne 0 ]; then
  51    echo >&2 'Directory not clean, see git status --ignored'
  52    exit 2
  53 fi
  54
  55 echo 'Preparing a release on commit '"${headref}"
  56 #brname="`git branch | sed -e '/^* /b X' -e d -e :X -e 's/^* //'`"
  57 brname=`git symbolic-ref --short HEAD`
  58 echo '  That is '"${brname}"
  59 printf '  Name of release tag: '
  60 read REL
  61 VERSION=${REL}
  62 vmaj=`{ echo ${VERSION}; } | sed -e 's/^\([^.]\{1,\}\).*/\1/'`
  63 vmin=`{ echo ${VERSION}; } | sed -e 's/^[^.]\{1,\}\.\([^.]\{1,\}\).*/\1/'`
  64 [ ${vmin} = ${VERSION} ] && VERSION=${VERSION}.0 vmin=0
  65 vupd=`{ echo ${VERSION}; } |
  66       sed -e 's/^[^.]\{1,\}\.[^.]\{1,\}\.\([^.-]\{1,\}\).*/\1/'`
  67 [ ${vupd} = ${VERSION} ] && VERSION=${VERSION}.0 vupd=0
  68 REL=${VERSION}
  69 export VERSION
  70 if yesno 'Is '${PROGRAM}' <v'${REL}'> correct?'; then :; else
  71    echo >&2 'Bailing out'
  72    exit 3
  73 fi
  74
  75 stblbrname=stable/v${vmaj}.${vmin}
  76 brref=`git rev-parse --verify ${stblbrname} 2>/dev/null`
  77 if [ -z "${brref}" ]; then
  78    if yesno 'Create and switch to new branch '"${stblbrname}"; then
  79       git checkout -b ${stblbrname}
  80    fi
  81 elif [ ${brref} != ${headref} ] || [ ${brname} != ${stblbrname} ]; then
  82    echo >&2 "For ${REL} we should be on ${stblbrname}, not ${brname}"
  83    echo >&2 'Bailing out'
  84    exit 4
  85 fi
  86
  87 relbrname=release/v${VERSION}
  88 brref=`git rev-parse --verify ${relbrname} 2>/dev/null`
  89 if [ -z "${brref}" ]; then :; else
  90    echo >&2 "The ${relbrname} already exists"
  91    echo >&2 'Bailing out'
  92    exit 5
  93 fi
  94
  95 RELSYM=
  96 stblmsg= relmsg=
  97 if yesno 'Shall '${PROGRAM}' v'${REL}' have a symbolic name?'; then
  98    printf '  ..and it shall be known as: '
  99    read RELSYM
 100    if yesno 'Is '"${RELSYM}"' correct?'; then :; else
 101       echo >&2 'Bailing out'
 102       exit 3
 103    fi
 104    stblmsg="Bump ${UPROGRAM} v${REL} (\"${RELSYM}\"), ${DATE_ISO}"
 105    relmsg="Bump ${UPROGRAM} v${REL}.ar (\"${RELSYM}\"), ${DATE_ISO}"
 106    RELSYM=" (\"${RELSYM}\")"
 107 else
 108    stblmsg="Bump ${UPROGRAM} v${REL}, ${DATE_ISO}"
 109    relmsg="Bump ${UPROGRAM} v${REL}.ar, ${DATE_ISO}"
 110 fi
 111
 112 ##
 113 echo 'Updating stable/ files to match the release'
 114
 115 if [ -f version.h ] && [ -f mk-mk.in ]; then
 116    grep=grep sed=sed cmp=cmp mv=mv make -f mk-mk.in _update-version
 117    git add version.h
 118 fi
 119 update_stable_hook
 120
 121 LC_ALL=${ORIG_LC_ALL} git commit -S -m "${stblmsg}"
 122 LC_ALL=${ORIG_LC_ALL} git tag -s -f -m "${stblmsg}" v${REL}
 123
 124 ##
 125
 126 if yesno 'Create release/ branch?'; then
 127    git checkout -b ${relbrname}
 128
 129    git rm -f .gitignore .mailmap TODO mk-release.*
 130    update_release_hook
 131
 132    LC_ALL=${ORIG_LC_ALL} git commit -S -m "${relmsg}"
 133    LC_ALL=${ORIG_LC_ALL} git tag -s -f -m "${relmsg}" v${REL}.ar
 134
 135    if yesno 'Shall i update release/latest "symlink"?'; then
 136       git update-ref refs/heads/release/latest ${relbrname}
 137    fi
 138    if yesno 'Shall i update release/stable "symlink"?'; then
 139       git update-ref refs/heads/release/stable ${relbrname}
 140    fi
 141 else
 142    relbrname=${stblbrname}
 143 fi
 144
 145 ##
 146 # [timeline]
 147
 148 if [ ${relbrname} != ${stblbrname} ] &&
 149       `git rev-parse --verify timeline^{commit} >/dev/null 2>&1` &&
 150       yesno 'Shall i update [timeline]?'; then
 151    git checkout timeline
 152    git rm -rf '*'
 153    git archive --format=tar "v${REL}.ar" | tar -x -f -
 154    git add .
 155    LC_ALL=${ORIG_LC_ALL} git commit -S -m "${relmsg}"
 156 fi
 157
 158 ##
 159 # repo push
 160
 161 [ ${relbrname} != ${stblbrname} ] && git checkout ${stblbrname}
 162 git log --no-walk --decorate --oneline --branches --remotes
 163 yesno 'Push git(1) repo?' && git push
 164
 165 ##
 166 # Big balls
 167
 168 if [ ${relbrname} != ${stblbrname} ] && yesno 'Create tarballs?'; then
 169    bigballs=y
 170    (
 171    # Repack with standard tar(1) to avoid new-style headers
 172    git archive --format=tar --prefix="${PROGRAM}-${REL}/" v${REL}.ar |
 173       ( cd "${TMPDIR}" && tar -x -f - )
 174    cd "${TMPDIR}"
 175
 176    tar -c -f "${PROGRAM}-${REL}.tar" "${PROGRAM}-${REL}"
 177    < "${PROGRAM}-${REL}.tar" xz -e -C sha256 > "${PROGRAM}-${REL}.tar.xz"
 178    < "${PROGRAM}-${REL}.tar" gzip > "${PROGRAM}-${REL}.tar.gz"
 179    rm "${PROGRAM}-${REL}.tar"
 180
 181    openssl sha1 "${PROGRAM}-${REL}.tar.xz" >> "${PROGRAM}-${REL}.cksum"
 182    openssl sha256 "${PROGRAM}-${REL}.tar.xz" >> "${PROGRAM}-${REL}.cksum"
 183    openssl sha512 "${PROGRAM}-${REL}.tar.xz" >> "${PROGRAM}-${REL}.cksum"
 184    gpg --detach-sign --armor "${PROGRAM}-${REL}.tar.xz"
 185    cat "${PROGRAM}-${REL}.tar.xz.asc" >> "${PROGRAM}-${REL}.cksum"
 186
 187    openssl sha1 "${PROGRAM}-${REL}.tar.gz" >> "${PROGRAM}-${REL}.cksum"
 188    openssl sha256 "${PROGRAM}-${REL}.tar.gz" >> "${PROGRAM}-${REL}.cksum"
 189    openssl sha512 "${PROGRAM}-${REL}.tar.gz" >> "${PROGRAM}-${REL}.cksum"
 190    gpg --detach-sign --armor "${PROGRAM}-${REL}.tar.gz"
 191    cat "${PROGRAM}-${REL}.tar.gz.asc" >> "${PROGRAM}-${REL}.cksum"
 192    )
 193 else
 194    bigballs=
 195 fi
 196
 197 ##
 198 # Announcement .txt and .html
 199
 200 if yesno 'Prepare announcement?'; then
 201    anntxt=y
 202    { echo "${relmsg}"; echo; } > "${TMPDIR}/${PROGRAM}-${REL}.txt"
 203    if [ -f .git/mk-release.txt ]; then
 204       cat .git/mk-release.txt >> "${TMPDIR}/${PROGRAM}-${REL}.txt"
 205    fi
 206    if [ -n "${bigballs}" ] && [ -f "${TMPDIR}/${PROGRAM}-${REL}.cksum" ]; then
 207       echo >> "${TMPDIR}/${PROGRAM}-${REL}.txt"
 208       cat "${TMPDIR}/${PROGRAM}-${REL}.cksum" >>\
 209          "${TMPDIR}/${PROGRAM}-${REL}.txt"
 210    fi
 211    if `git cat-file -e ${relbr}:NEWS 2>/dev/null`; then
 212       echo >> "${TMPDIR}/${PROGRAM}-${REL}.txt"
 213       git show ${relbr}:NEWS >> "${TMPDIR}/${PROGRAM}-${REL}.txt"
 214    fi
 215
 216    LC_ALL=${ORIG_LC_ALL} ${EDITOR} "${TMPDIR}/${PROGRAM}-${REL}.txt"
 217
 218    # HTML convert ready for S-Web42
 219    APO=\'
 220    < "${TMPDIR}/${PROGRAM}-${REL}.txt" awk -v manual="${MANUAL}" '
 221    BEGIN{
 222       header = 1
 223       hot = 0
 224       print "<?begin?><?mode icewatsm?><pre>"
 225    }
 226    function strips(){
 227       gsub("&", "\\&amp;")
 228       gsub("<", "\\&lt;")
 229       gsub(">", "\\&gt;")
 230    }
 231    function urls(){
 232       any = 0
 233       res = ""
 234       s = $0
 235
 236       while(match(s, /(\\?(http|ftp)s?\??:\/\/[^ ]*)/)){
 237          pre = substr(s, 1, RSTART - 1)
 238          mat = substr(s, RSTART, RLENGTH)
 239          s = substr(s, RSTART + RLENGTH)
 240          if("\\" == substr(mat, 1, 1))
 241             mat = substr(mat, 2)
 242          else{
 243             xt = 0
 244             if(match(mat, /^https\?/))
 245                mat = "https" substr(xt = mat, RSTART + 6)
 246             else if(match(mat, /^ftps\?/))
 247                mat = "ftps" substr(xt = mat, RSTART + 5)
 248             if(match(mat, /sdaoden\.eu/))
 249                mat = "<?lref" (xt ? "t " : " ") mat (xt ? "<>" xt : "") "?>"
 250             else
 251                mat = "<?href" (xt ? "t " : " ") mat (xt ? "<>" xt : "") "?>"
 252          }
 253          res = res pre mat
 254          any = 1
 255       }
 256       if(any && length(s))
 257          res = res s
 258       $0 = any ? res : s
 259    }
 260    /^[[:space:]]*s-.*-mode[[:space:]]*$/{
 261       header = 1
 262       next
 263    }
 264    /ChangeLog|shortlog/{
 265       if(header)
 266          next
 267       if(hot == 0)
 268          hot = 1
 269       strips()
 270    }
 271    /Appendix/{
 272       if(header)
 273          next
 274       hot = -1
 275       strips()
 276    }
 277    {
 278       if(header){
 279          if(length == 0)
 280             header = 0
 281          next
 282       }
 283       strips()
 284       urls()
 285       if(hot <= 0){
 286          print
 287          next
 288       }
 289       any = 0
 290       res = ""
 291       s = $0
 292       while(match(s,
 293             /("[^"]+"|\*[^\*]+\*|`[^'${APO}']+'${APO}'|[-~][-\/:_.[:alnum:]]+|\$[_[:alnum:]]+)#[0-9]+(\|#_?[0-9]+)?/))
 294       {
 295          pre = substr(s, 1, RSTART - 1)
 296          mat = substr(s, RSTART, RLENGTH)
 297          s = substr(s, RSTART + RLENGTH)
 298
 299          if(match(mat, /\|#_?[0-9]+/)){
 300             targ = substr(mat, RSTART + 2)
 301             mat = substr(mat, 1, RSTART - 1)
 302          }else{
 303             match(mat, /#[0-9]+/)
 304             targ = substr(mat, RSTART + 1, RLENGTH)
 305          }
 306          res = res pre "<?lreft " manual "#" targ "<>" mat "?>"
 307          any = 1
 308       }
 309       if(any && length(s))
 310          res = res s
 311       print any ? res : s
 312    }
 313    END{
 314       print "</pre><?end?>"
 315    }
 316    ' > "${TMPDIR}/.${PROGRAM}-ann.html"
 317 else
 318    anntxt=
 319 fi
 320
 321 ##
 322 # Upload
 323
 324 if [ -n "${bigballs}" ] && yesno 'Upload archives'; then
 325    (
 326    cd "${TMPDIR}"
 327
 328    {
 329       echo "-put ${PROGRAM}-${REL}.tar.xz"
 330       echo "-rm ${PROGRAM}-latest.tar.xz"
 331       echo "-ln -s ${PROGRAM}-${REL}.tar.xz ${PROGRAM}-latest.tar.xz"
 332
 333       echo "-put ${PROGRAM}-${REL}.tar.gz"
 334       echo "-rm ${PROGRAM}-latest.tar.gz"
 335       echo "-ln -s ${PROGRAM}-${REL}.tar.gz ${PROGRAM}-latest.tar.gz"
 336
 337       echo "-put ${PROGRAM}-${REL}.tar.xz.asc"
 338       echo "-rm ${PROGRAM}-latest.tar.xz.asc"
 339       echo "-ln -s ${PROGRAM}-${REL}.tar.xz.asc ${PROGRAM}-latest.tar.xz.asc"
 340
 341       echo "-put ${PROGRAM}-${REL}.tar.gz.asc"
 342       echo "-rm ${PROGRAM}-latest.tar.gz.asc"
 343       echo "-ln -s ${PROGRAM}-${REL}.tar.gz.asc ${PROGRAM}-latest.tar.gz.asc"
 344
 345       if [ -n "${anntxt}" ]; then
 346          echo "-put ${PROGRAM}-${REL}.txt"
 347          echo "-rm ${PROGRAM}-latest.txt"
 348          echo "-ln -s ${PROGRAM}-${REL}.txt ${PROGRAM}-latest.txt"
 349       fi
 350
 351       echo "-chmod 0644 ${PROGRAM}-${REL}.*"
 352    } |
 353    sftp -b - ${UPLOAD}
 354    )
 355 fi
 356
 357 ##
 358 # Announcement mail
 359
 360 if [ -n "${anntxt}" ] && yesno 'Send announcement mail?'; then
 361    LC_ALL=${ORIG_LC_ALL} ${MAILX} -A ${ACCOUNT} \
 362       -s "[ANN]ounce of ${UPROGRAM} v${REL}${RELSYM}" \
 363       -q "${TMPDIR}/${PROGRAM}-${REL}.txt" \
 364       -b ${MAILBCC} ${MAILTO}
 365 fi
 366
 367 # Finally remove the temporary instances than ran this
 368 rm -f .git/mk-release.*
 369 echo 'Done'
 370 exit
 371 # s-sh-mode