dpkg-buildpackage: Add new --sign-option

This should allow to pass things such as debrsign or debsign as
--sign-command instead of gpg/gpg2.

FIXME: how do we specify our userid/keyid to those commands?

dpkg-maintscript-helper: Validate versions in all commands

The symlink_to_dir and dir_to_symlink commands were not validating the
versions, be consistent.

dpkg-maintscript-helper: Handle empty versions as they are optional arguments

Regression introduced in commit b51bc4ff0cd540b82e131470053eeed1c3d2f026.

Closes: #848422

man: Clarify that dpkg-buildpackage -T does not run dpkg-source --before-build

Closes: #649531

debian: Do not insert a perl:Depends for libdpkg-perl

Because tying the modules to a specific interpreter is wrong.

Update German translation of manual pages

Update to 2828t1f.

Fix typo

Update German scripts translation

Update to 586t.

debian: Fix bug closure

Bump version to 1.18.17

Release 1.18.16

po: Regenerate .pot files and merge .po files with them

po: Update Dutch translations

Closes: #848378, #848379
Signed-off-by: Guillem Jover <guillem@debian.org>

po: Update Simplified Chinese programs translation

Closes: #844955
Signed-off-by: Guillem Jover <guillem@debian.org>

po: Correct spelling mistake in Swedish translation

Closes: #847220
Signed-off-by: Guillem Jover <guillem@debian.org>

libdpkg: Add virtual source:Upstream-Version field

Closes: #844348

libdpkg: Add a new source version accessor

libdpkg: Refactor varbuf_add_source_version() out from virt_source_version()

dpkg: Allow readlink(2) returning a size smaller than stat(2)

Some bogus filesystems do not return the actual symlink size in st_size,
which contradicts POSIX. But allowing the case where the returned size
is smaller than the one used to allocate memory is harmless, although
suspect. Let it through, but still print a warning so that users can
install stuff but are reminded they need to get a fixed filesystem in
place.

This has affected at least ecryptfs in the past and now file-based
encryption support in ext4 on Android N.

Reported-by: Jay Freeman <saurik@saurik.com>

dpkg-maintscript-helper: Use the new --validate-version command

Do not abuse the --compare-versions command to perform version
validation, use the new --validate-version command expressly added
now to perform such task. Because the latter returns appropriate exit
codes, does not print messages in debug mode and is the correct
interface to use.

Closes: #844701

dpkg: Add new --validate-<thing> commands

These commands make it possible to test if several of those <thing>s
have a valid syntax. The current list of supported things is «pkgname»,
«trigname», «archname» and «version».

libdpkg: Decrease xz encoder threads to not exceed memory limits

Automatically decrease xz encoder threads to try to not exceed available
memory limits. This should alleviated the insane requirements of memory
needed on 32-bit architectures with many cores, which results in more
than the userspace addressable memory, when using settings such as
-z9 and/or -Sextreme in dpkg-deb.

Closes: #846564

libdpkg: Use lzma_cputhreads() instead of sysconf(_SC_NPROCESSORS_ONLN)

The former is way more portable than the latter.

libdpkg, Dpkg::Version: Reject empty upstream versions

These are not permitted by deb-version(5), but the code was letting
those through.

dpkg: Fix typo in code comment

dpkg-buildpackage: Add support for multiple targets on -T

This makes it possible to run several desired targets in a single run,
which avoids the overhead of the rest of the steps run. It also makes
it possible to test if packages can be built twice in a row.

Closes: #671074

Dpkg::Build::Info: Whitelist other DPKG_ namespaced variables

build: Honor DPKG_DATADIR again in the installed Dpkg modules

This was an explicit public interface, documented in the man page. It
is also the only way to cleanly override the architecture tables,
which might be needed in certain circumstances. Partially revert the
commit c3a9a82fcf58df34077638cdbfd7bb752624629e, but preserve the code
simplification.

build: Enable compression libs also in automatic check mode

The code setting the compression macros when found was only acting when
explicitly enabling the compression libraries.

man: Update dpkg-parsechangelog parser options

This got missed in commit d1629d0ec1b2619a1f2bd6839f975335e9cb6484.

The options specific to the changelog parser program did not get updated
when the parser got switched to be a perl module.

Closes: #848189

man: Fix bogus description of --force-confmiss

This force option is the only one that performs its action independently
of the conffile changing or not in the new package. The description was
bogusly updated when trying to clarify the other conf force options.

Regression introduced in commit 4bcc6b8e0a587b432b145fafa642674607cddddd.

Reported-by: Sven Joachim <svenjoac@gmx.de>
Closes: #846395

man: Document DPKG_GENSYMBOLS_CHECK_LEVEL in dpkg-gensymbols(1)

man: Document the working directory when running dpkg-buildpackage hooks

Update German translation of manual pages

Update to 2820t1f.

Update German scripts translation

Update to 585t.

Bump version to 1.18.16

Release 1.18.15

po: Regenerate .pot files and merge .po files with them

libdpkg: Only preallocate disk size for files bigger than 16 KiB

Preallocating for very small fails causes some filesystems to degrade
performance. Do so only for "big enough" files.

Closes: #824636

dpkg-buildpackage: Fallback to one job on unknown number of online processors

On unsupported or exotic systems where we might be unable to retrieve
the number of online processors and have been requested to infer them
ourselves via the --jobs or --jobs-try “auto” argument, default to
serial execution instead of unlimited jobs, to be on the safe side.

Proposed-by: Simon McVittie <smcv@debian.org>

dpkg-genbuildinfo: Bump Format to version 0.2

dpkg-genbuildinfo: Use deterministic .buildinfo filenames

Using undeterministic filenames based on the buildinfo-id produces ugly
looking filenames, which get left behind when rebuilding the same source
multiple times as they vary by date.

There's really no great point in using unique filenames as they will end
up with different contents depending on the builder.

dpkg-genbuildinfo: Add Build-Date field

This records the time the build happened. This might be useful when
there is a need to track down problems caused by external time-based
events not visible from inside the build system. Things like hardware,
software deployment or other such failures.

dpkg-genbuildinfo: On source builds add source to the Architecture field

man: Escape dashes in field names in dpkg-buildinfo(1)

Dpkg::Deps: Fix typo in croak()

Spotted-by: James Clarke <jrtc27@jrtc27.com>

Dpkg::Deps: Validate architecture arguments in deps_parse()

This function only works with real and known Debian architectures. It
will not work with wildcards, nor the special architectures 'all' nor
'source'. Validate the arguments and croak early on to spot bogus usage.

Prompted-by: Johannes Schauer <josch@debian.org>

data: Do not enable PIE when linking static programs

It seems like at least glibc does not support statically linked PIE
programs, and produces random junk. Disable globally for now, if
there's a desire to enable static PIE binaries, which is known to
work on some architectures (such as musl-based ones) we can add
specialized specs files in the future.

Closes: #843714
Proposed-by: Szabolcs Nagy <nsz@port70.net>

t: Mark partially documented POD modules as TODO

This makes sure we will not forget to get them out of the ignore list
once they get documented.

Dpkg::Vendor::Debian: Use a hash instead of a long regex

Addresses RegularExpressions::RequireExtendedFormatting.

Warned-by: perlcritic

Update German translation of manual pages

Update to 2823t1f.

Bump version to 1.18.15

Release 1.18.14

po: Regenerate .pot files and merge .po files with them

debian: List public Dpkg::Control::Tests module in libdpkg-perl description

man: Clarify how to revert to the serial dpkg-buildpackage behavior

Explicitly mention in dpkg-buildpackage(1) that setting the number
of parallel jobs to 1, restores the serial behavior.

Prompted-by: Thorsten Glaser <t.glaser@tarent.de>

man: Improve the DEB_BUILD_OPTIONS description in dpkg-buildpackage(1)

Mention that this flag might also affect the beahavior of debian/rules,
and also mention the parallel option.

Dpkg::Build::Info: New module refactored from dpkg-genbuildinfo

This will allow other projects to use the same whitelist as dpkg does.

Requested-by: Johannes Schauer <josch@debian.org>

Dpkg::Changelog::Entry::Debian: Fix parse error message when date is on May

When a broken date is on May the error message ended up being very
confusing as it mentioned that it was using a full instead of an
abbreviated month name, because for May both are the same.

Nest the conditionals to avoid this problem.

Closes: #843829
Signed-off-by: Guillem Jover <guillem@debian.org>

libdpkg, scripts: Change default color behavior to auto

Our test run with the setting activated by apt, has not shown any signs
of pitch forks nor angry mobs. Let's switch this by default to auto, so
that the more clear but still hopefully unobtrusive colors can help
people deal with interesting messages, warnings or error conditions.

dpkg: Fix use after free issue on error summary

We are releasing the dpkg database now after running the commands, which
means that the postponed error reporting summary was trying to print
messages that had already been freed from the database memory pool.

Duplicate the passed strings so that we are impervious to the database
life-cycle.

Regression introduced in commit 3404fd24ef8020b4d6dc17adb82d7e6c035d90dc.

Closes: #843874

data: Improve PIE handling

- Rename the spec name cc1_options to self_spec.
- Do not set PIE options if they have been negated, and do not reset
  them if they have been requested.

Closes: #843791, #843826

Fix missing markup

build: Change DPKG_BUILD_RELEASE_DATE to use perl instead of date(1)

As the former is more portable, and we were using GNUisms.

build: Fix DPKG_BUILD_RELEASE_DATE to require DPKG_PROG_PERL

It uses perl.

build: Do not enable compression libraries if the headers are not usable

build: Fix inversion logic in libmd configure check when requested explicitly

test: Do not fail on missing fakeroot just skip them

Update German translation of manual pages

Update to 2822t1f.

Bump version to 1.18.14

Release 1.18.13

po: Regenerate .pot files and merge .po files with them

Dpkg::Vendor::Debian: Improve PIE flags support

Fix changelog for dpkg 1.18.11 to mention PIE got enabled by default for
all architectures, not just the ones where gcc does that itself.

When emitting PIE flags on architectures where gcc does not inject those
itself, do it via a specs file too, so that maintainers can use them
unconditionally regardless of the object being compiled or linked.

When injecting -no-pie for linking via gcc specs also inject -fno-PIE.

Update the documentation to make the current situation more clear.

build: Use deterministic dates for generated man pages

Pin the timezone to UTC so that the computed dates are deterministic
and produce deterministic generated man pages.

Closes: #843469
Signed-off-by: Guillem Jover <guillem@debian.org>

debian: Ship deb-src-files(5) man page in dpkg-dev

Missed in commit 10264ea2e5dc7b5df31bffae6fd644638d89ee15.

debian: Add missing Breaks on old libdpkg-perl to dpkg

Commit 9d7ba99cc3ff84fc553ed39da9d2e4f4008d35b6 renamed the
triplettable file to tupletable and added the necessary dpkg
dependency to libdpkg-perl, but did not forbid the other now broken
combination of old libdpkg-perl and new dpkg.

Closes: #843429
Signed-off-by: Guillem Jover <guillem@debian.org>

debian: Add bug closure for Dpkg::Dist:Files load_dir bug

Closes: #843436

Update German translation of manual pages

Update to 2822t1f.

Unify translation between man pages and scripts

Dpkg::Dist::Files: Do not try to load non-files in load_dir method

Non-Linux systems allow to open directories, which return their
contents, this makes the load method fail with parsing errors. Make
the code only try to ever load regular files.

Bump version to 1.18.13

Release 1.18.12

po: Regenerate .pot files and merge .po files with them

doc: Add missing comma between optional and author

man: Document environment variables used by source format modules

man: Use %VERSION% in dpkg-statoverride(1) source item .TH macro

man: Use "dpkg suite" as the manual item in .TH macro

man: Rename FILE FORMATS section to FILES

build: Set umask to 0022 for functional test suite

Bump version to 1.18.12

Release 1.18.11

po: Regenerate .pot files and merge .po files with them

build: Distribute missing test files

debian: Add perl:Depends substvar to dpkg-dev package Depends

The scripts use modules not present in perl-base, so to be entirely
correct we require the perl package, even though it gets pulled anyway
by the libdpkg-perl package.

Warned-by: dpkg-gencontrol

Dpkg::Vendor::Debian: Handle PIE enabled by default in gcc

Add support for compiler built-in features, so that we do not set
them when enabled and set negated flags when disabled.

We use gcc spec files to set these flags so that we avoid any conflict
with other incompatible flags that would make the build fail.

Closes: #835149
Based-on-patch-by: Bálint Réczey <balint@balintreczey.hu>

Update German translation of manual pages

Update to 2790t17f10u.

Update German scripts translation

Update to 586t.

Dpkg::Changelog: Cope gracefully with a missing trailer timestamp

The get_timepiece methods might return an undef value if there was no
timestamp in the trailer. Do not call the Time::Piece epoch method in
that case, as that causes a perl error.

Regression introduced in commit ea22158eb8b0dcaf42b0cdacd5b4560764f353c8.

Closes: #843248
Based-on-patch-by: Ian Jackson <ijackson@chiark.greenend.org.uk>

dpkg: Do not fail when removing non-existent files on read-only filesystems

Trying to rmdir(2) or unlink(2) a non-existent pathname on at least
Linux returns with EROFS. Handle this case specifically to check if
the pathname exists with access(2).

Closes: #838877

dpkg-buildpackage: Enable -Jauto by default

The Debian build daemons have already been enabling parallel builds for
a some time now. This has the advantage that it should make the builds
faster, and that it gives similar conditions to local builders to the
ones on build daemon networks, helping to catch problems with parallel
build support in packages before the upload.

Closes: #842845
Suggested-by: Simon McVittie <smcv@debian.org>