dpkg: Fix Conflicts/Breaks for Multi-Arch: same packages

Add missing markup to option

Update German translation of manual pages

Update to 2843t1f.

Bump version to 1.18.21

Release 1.18.20

po: Regenerate .pot files and merge .po files with them

debian: Clarify previous Built-For-Profiles entry

The information is also available in the .changes files.

man: Document that Built-For-Profile is also included in .changes files

Missed in commit 7662e0937bb064a0754d12605d80a96a17e2aadf.

Dpkg::File: Disable the NFS-unsafe warning on Linux

On Linux systems the flock() locks get converted to file-range locks on
NFS mounts, which makes it safe.

The correct solution here will be to completely get rid of the need to
do any locking, which should also make parallel builds faster.

Addresses: #677865 (on Linux)

dpkg-buildpackage: Make --unsigned-changes not sign .buildinfo either

There was no option to disable signing globally, so many users and
tools rely on the two existing options to disable it. But with the
introduction of signed .buildinfo files, there is no way for old tools
to request the right thing.

Abuse --unsigned-changes to mean not signing .buildinfo either.

Closes: #852822

dpkg-buildpackage: Add new --no-sign option

This option disables signing any file. This makes this option
a future-proof way to disable all signing, in case we add yet more
files to sign, so that programs do not have to keep learning what
options to pass.

Dpkg::Shlibs::Objdump: Encode the ELF ABI as a big-endian byte stream

This way when unpacking for output, the result gives meaningful results.

Dpkg::Shlibs::Objdump: Mask ELF machine bits for SH and MIPS

These do not define the ABI, and seem to be set depending on the ISA
used. Mask them for now, and postpone possibly making more fine-grained
matching in the future.

Update German translation of manual pages

Update to 2839t1f.

Update German scripts translation

Update to 588t.

Bump version to 1.18.20

Release 1.18.19

po: Regenerate .pot files and merge .po files with them

dpkg-buildpackage: Add support for signed .buildinfo files

Add new options -ui and --unsigned-buildinfo.

Closes: #843925

dpkg-genbuildinfo: Fix parsing of Pre-Depends and Depends

The loop is per package stanza, so we need to parse both fields
separately.

Based-on-patch-by: Johannes Schauer <josch@debian.org>
Signed-off-by: Guillem Jover <guillem@debian.org>

dpkg-genchanges: Fix check for expected number of binary artifacts

Only count the binaries that we are going to include in the upload,
instead of guessing using implicit counts.

dpkg-genchanges: Include .buildinfo files also for source-only uploads

The .buildinfo file also makes sense on source-only uploads, because it is
still a build. And more so when we have done a full build, but filtered the
changes to only include the sources in the upload.

In any case, this was the intended behavior from the beginning.

Closes: #846164

dpkg-genchanges: Do not compute the architecture list twice

Just generate the list correctly when doing the initial filtering
instead of having to do a useless two-pass.

dpkg-genchanges: Fold dist filtering and checksumming into initial loop

We should not include architectures for artifacts we are not going to
distribute. And we should not recompute the checksums for artifacts we
have already computed.

Revert "dpkg-genchanges: Only add architectures for .deb/.udeb artifacts"

This reverts commit cae957871dad79bbd48e264611ad3b4ca146dd7c.

This was done to handle the .buildinfo files, but the changes is bogus,
as it breaks the historical behavior of taking into account non-deb
files such as by-hand ones.

dpkg-genchanges: Invert the binary distribution loop inside-out

Move the if conditional from outside to inside the loop, this way
removing one nesting level.

test: Rename parse_option to parse_features

Missed in commit dad593660d922abce634542b43e9d56b03228a8c.

dpkg-genbuildinfo: Add initial support for DEB_BUILD_OPTIONS

This will make it possible to enable or disable specific features that
should be recorded in the .buildinfo file. For now only “all” and “path”
are supported.

Closes: #848705

Dpkg::BuildOptions: Add new parse_features() method

This has been refactored from Dpkg::Vendor::Debian, to have a generic
option parser.

dpkg-shlibdeps: Improve ELF ABI mismatch detector

The previous ELF ABI mismatch detector was very naïve, as the string
returned by «objdump -a» is a very simplistic representation of the
ELF ABI used.

Switch to our own ELF header parser, so that we can distinguish based
on the fields that define the object ABI.

This is still not enough, and we will have collisions with things such
as linux-i386 and hurd-i386, but most of the previously colliding
objects are now filtered.

This also makes us independent of objdump not supporting any unknown
ELF object ABI.

Closes: #849913

Dpkg::ErrorHandling: Add a new debug() function

Switch scripts to use the new function instead of using ad-hoc
implementations.

test: Disable perlcritic ValuesAndExpressions::RequireNumberSeparators

This test produces false positives on long hex numbers, even when they
have been separated with underscores.

build: Disable disk pre-allocation by default

Contrary to what one would expect, this seems to be causing major issues
in several "modern" filesystems, as it collides with the heuristics and
optimizations that these try to perform.

Disable this by default, but let the builder enable it again in case
this is not a problem on certain systems.

build: Rename DPKG_MMAP macro to DPKG_USE_MMAP

debian: Add missing bug closure

po: Update Dutch translations

Closes: #851889, #851891
Signed-off-by: Guillem Jover <guillem@debian.org>

Update German translation of manual pages

Update to 2836t1f.

dpkg-source: Generate Testsuite-Restrictions fields from test restrictions

This information is currently only available in the Restrictions field in
the debian/tests/control file.

When dispatching tests, it might be inconvenient to have to download and
unpack the source package beforehand. Let's expose this via the .dsc in
a similar way we do for the Testsuite-Triggers field.

Closes: #847926
Based-on-patch-by: Iain Lane <laney@debian.org>

dpkg-source: Refactor testsuite functions

Call set_testsuite_triggers_field() from inside set_testsuite_fields(),
so that we do not have to perform the same checks more than once.

test: Correctly iterate over all default and passed .dsc template substvars

The code was returning all keys and values for %default_substvars,
when instead we should have been requesting all %default_substvars
and %options keys.

test: Refactor unit test data path into test_get_data_path()

Update German translation of manual pages

Update to 2833t1f.

Update German scripts translation

Update to 589t.

German dpkg translation update

Update to 1103t.

u-a: Use areadlink() instead of lstat() + xreadlink()

We avoid an lstat() call as we catch the error from areadlink and can
react on that instead of an uncontrolled failure from xreadlink().

u-a: Refactor pathname existence check into a new function

u-a: Move xvasprintf() and xasprintf() definitions earlier in the code

This will make it possible to use these functions without having to use
forward declarations.

dpkg-buildpackage, dpkg-source: Always set SOURCE_DATE_EPOCH

If we do not have a date from the changelog set it to the current time.

Closes: #849081

libdpkg, Dpkg::Version: Do not allow empty epochs and revisions

When there's at least one colon or one dash, we should expect epoch
and revision numbers.

man, Dpkg::Control::FieldsCore: Add new Auto-Built-Package field

This field is used to distinguish packages that have been automatically
injected by some build tool, and are not present in the debian/control
file.

Dpkg: Call anonymous subs via -> operator instead of casting with &

And fix the documentation while at it, which was incorrect code.

doc: Fix typos in documentation and code comments

Warned-by: codespell, spellintian

dpkg-gencontrol: Stop emitting Built-For-Profiles

The information is already provided in .buildinfo files, and including
it in the binary packages makes them unreproducible even when the
profile used would not alter its contents.

Closes: #831524

s-s-d: Use the new process executable support in GNU/Hurd

This gives the actual executable name instead of having to look into
argv[0], which is not really correct, as the program doing execve()
can set that to anything it likes.

We have to check for the name being NULL or empty due to an initial
implementation bug.

s-s-d: Use proc_stat_pid() instead of accessing the member directly

Dpkg::Source::Package::V2: Abort on EOF in patch name prompt

Instead of entering into an infinite loop.

Closes: #851441

Dpkg::Source::Package: Clarify major/minor format version parsing code

Dpkg::Arch: Add new import tags

This makes using the module a bit easier.

Dpkg::Arch: Fix debwildcard_to_debtuple() on quadruplets

The function was splitting tuples at most into three elements, which
made it unable to handle quadruplets.

Extend the unit tests to cover wildcard quadruplets.

Missed in commit 9d7ba99cc3ff84fc553ed39da9d2e4f4008d35b6.

Reported-by: Julian Andres Klode <jak@debian.org>

debian: Add debsig-verify to dpkg Suggests

The code supports optionally calling this program. Listing it in the
Suggests will also help people that are looking for a maintained and
supported .deb signing tooling.

Prompted-by: Stuart Prescott <stuart@debian.org>

man: Move control member file references from dpkg(1) to deb(5)

The information in dpkg(1) was out of place, and deb(5) already
contained a skeleton of this information, which is in any case the more
logical place to be.

doc: Cleanup software requirements in README

Add a reference to the coding-style.txt for the perl requirements. Move
po4a to building from git section.

German dpkg translation update

Update to 1101t.

Update German translation of manual pages

Update to 2832t1f.

Bump version to 1.18.19

Release 1.18.18

po: Regenerate .pot files and merge .po files with them

man: Add a rationale for the purpose of Testsuite-Triggers in dsc(5)

Prompted-by: Mattia Rizzolo <mattia@debian.org>

man: Document DPKG_DATADIR in an ENVIRONMENT section in dpkg-architecture(1)

debian: Revert the perl to perl:any dependency change in libdpkg-perl

Even though this was a correct change, it currently breaks debootstrap in
stable (jessie), testing (stretch) and unstable, which does not support
arch-qualified dependencies.

We'll have to live with the Multi-Arch hinter being unhappy for now.

Update German translation of manual pages

Update to 2829t1f.

Bump version to 1.18.18

Release 1.18.17

po: Regenerate .pot files and merge .po files with them

man: Document that dpkg sets DPKG_ADMINDIR on maintainer scripts environment

dpkg-shlibdeps: Improve logic to identify packages owning a library

With things like merged-/usr, a system might have libraries that are
stored for example in /usr/lib but that dpkg knows under /lib. This
breaks some of the initial assumptions made in dpkg-shlibdeps.

We now scan all possible paths for a given library (instead of trying
to guess which one is the canonical one) and whenever we find a match
in the dpkg database, we also associate the package for the associated
realpath(). That way when a library is not properly identified, we can
fallback on looking if its realpath is known and be confident that if
the library was packaged, we did identify it correctly.

[guillem@debian.org:
 - Fold find_library_locations() into find_library().
 - Minor coding style fixes.
 - Squash the two separate commits and cleanup the commit message. ]

Closes: #843073
Signed-off-by: Guillem Jover <guillem@debian.org>

debian: Hardcode a perl:any dependency in the libdpkg-perl package

The perl policy states that lib*-perl packages have to depend on the
perl package. Depending on a perl-modules packages is currently not
possible. And dh_perl will not emit a perl:any dependency for us, so
the current best option is to just hardcode it ourselves.

Reported-by: Sven Joachim <svenjoac@gmx.de>

Update German translation of manual pages

Update to 2828t1f.

dpkg-maintscript-helper: Validate versions in all commands

The symlink_to_dir and dir_to_symlink commands were not validating the
versions, be consistent.

dpkg-maintscript-helper: Handle empty versions as they are optional arguments

Regression introduced in commit b51bc4ff0cd540b82e131470053eeed1c3d2f026.

Closes: #848422

man: Clarify that dpkg-buildpackage -T does not run dpkg-source --before-build

Closes: #649531

debian: Do not insert a perl:Depends for libdpkg-perl

Because tying the modules to a specific interpreter is wrong.

Update German translation of manual pages

Update to 2828t1f.

Fix typo

Update German scripts translation

Update to 586t.

debian: Fix bug closure

Bump version to 1.18.17

Release 1.18.16

po: Regenerate .pot files and merge .po files with them

po: Update Dutch translations

Closes: #848378, #848379
Signed-off-by: Guillem Jover <guillem@debian.org>

po: Update Simplified Chinese programs translation

Closes: #844955
Signed-off-by: Guillem Jover <guillem@debian.org>

po: Correct spelling mistake in Swedish translation

Closes: #847220
Signed-off-by: Guillem Jover <guillem@debian.org>

libdpkg: Add virtual source:Upstream-Version field

Closes: #844348

libdpkg: Add a new source version accessor

libdpkg: Refactor varbuf_add_source_version() out from virt_source_version()

dpkg: Allow readlink(2) returning a size smaller than stat(2)

Some bogus filesystems do not return the actual symlink size in st_size,
which contradicts POSIX. But allowing the case where the returned size
is smaller than the one used to allocate memory is harmless, although
suspect. Let it through, but still print a warning so that users can
install stuff but are reminded they need to get a fixed filesystem in
place.

This has affected at least ecryptfs in the past and now file-based
encryption support in ext4 on Android N.

Reported-by: Jay Freeman <saurik@saurik.com>

dpkg-maintscript-helper: Use the new --validate-version command

Do not abuse the --compare-versions command to perform version
validation, use the new --validate-version command expressly added
now to perform such task. Because the latter returns appropriate exit
codes, does not print messages in debug mode and is the correct
interface to use.

Closes: #844701

dpkg: Add new --validate-<thing> commands

These commands make it possible to test if several of those <thing>s
have a valid syntax. The current list of supported things is «pkgname»,
«trigname», «archname» and «version».

libdpkg: Decrease xz encoder threads to not exceed memory limits

Automatically decrease xz encoder threads to try to not exceed available
memory limits. This should alleviated the insane requirements of memory
needed on 32-bit architectures with many cores, which results in more
than the userspace addressable memory, when using settings such as
-z9 and/or -Sextreme in dpkg-deb.

Closes: #846564

libdpkg: Use lzma_cputhreads() instead of sysconf(_SC_NPROCESSORS_ONLN)

The former is way more portable than the latter.