systemctl-show: make show_memory_available cover memory_available itself
[systemd.io.git] / TODO
blob5a422e94db475d8d9d1142aa532128c37245ae2b
1 Bugfixes:
3 * Many manager configuration settings that are only applicable to user
4   manager or system manager can be always set. It would be better to reject
5   them when parsing config.
7 * Jun 01 09:43:02 krowka systemd[1]: Unit user@1000.service has alias user@.service.
8   Jun 01 09:43:02 krowka systemd[1]: Unit user@6.service has alias user@.service.
9   Jun 01 09:43:02 krowka systemd[1]: Unit user-runtime-dir@6.service has alias user-runtime-dir@.service.
11 External:
13 * Fedora: add an rpmlint check that verifies that all unit files in the RPM are listed in %systemd_post macros.
15 * dbus:
16    - natively watch for dbus-*.service symlinks (PENDING)
17    - teach dbus to activate all services it finds in /etc/systemd/services/org-*.service
19 * fedora: suggest auto-restart on failure, but not on success and not on coredump. also, ask people to think about changing the start limit logic. Also point people to RestartPreventExitStatus=, SuccessExitStatus=
21 * neither pkexec nor sudo initialize environ[] from the PAM environment?
23 * fedora: update policy to declare access mode and ownership of unit files to root:root 0644, and add an rpmlint check for it
25 * register catalog database signature as file magic
27 * zsh shell completion:
28   - <command> <verb> -<TAB> should complete options, but currently does not
29   - systemctl add-wants,add-requires
30   - systemctl reboot --boot-loader-entry=
32 * systemctl status should know about 'systemd-analyze calendar ... --iterations='
33 * If timer has just OnInactiveSec=..., it should fire after a specified time
34   after being started.
36 * write blog stories about:
37   - hwdb: what belongs into it, lsusb
38   - enabling dbus services
39   - how to make changes to sysctl and sysfs attributes
40   - remote access
41   - how to pass throw-away units to systemd, or dynamically change properties of existing units
42   - testing with Harald's awesome test kit
43   - auto-restart
44   - how to develop against journal browsing APIs
45   - the journal HTTP iface
46   - non-cgroup resource management
47   - dynamic resource management with cgroups
48   - refreshed, longer missions statement
49   - calendar time events
50   - init=/bin/sh vs. "emergency" mode, vs. "rescue" mode, vs. "multi-user" mode, vs. "graphical" mode, and the debug shell
51   - how to create your own target
52   - instantiated apache, dovecot and so on
53   - hooking a script into various stages of shutdown/early boot
55 Regularly:
57 * look for close() vs. close_nointr() vs. close_nointr_nofail()
59 * check for strerror(r) instead of strerror(-r)
61 * pahole
63 * set_put(), hashmap_put() return values check. i.e. == 0 does not free()!
65 * use secure_getenv() instead of getenv() where appropriate
67 * link up selected blog stories from man pages and unit files Documentation= fields
69 Janitorial Clean-ups:
71 * rework mount.c and swap.c to follow proper state enumeration/deserialization
72   semantics, like we do for device.c now
74 * get rid of prefix_roota() and similar, only use chase() and related
75   calls instead.
77 * get rid of basename() and replace by path_extract_filename()
79 * Replace our fstype_is_network() with a call to libmount's mnt_fstype_is_netfs()?
80   Having two lists is not nice, but maybe it's now worth making a dependency on
81   libmount for something so trivial.
83 * drop set_free_free() and switch things over from string_hash_ops to
84   string_hash_ops_free everywhere, so that destruction is implicit rather than
85   explicit. Similar, for other special hashmap/set/ordered_hashmap destructors.
87 * generators sometimes apply C escaping and sometimes specifier escaping to
88   paths and similar strings they write out. Sometimes both. We should clean
89   this up, and should probably always apply both, i.e. introduce
90   unit_file_escape() or so, which applies both.
92 * xopenat() should pin the parent dir of the inode it creates before doing its
93   thing, so that it can create, open, label somewhat atomically.
95 Deprecations and removals:
97 * Remove any support for booting without /usr pre-mounted in the initrd entirely.
98   Update INITRD_INTERFACE.md accordingly.
100 * remove cgroups v1 support EOY 2023. As per
101   https://lists.freedesktop.org/archives/systemd-devel/2022-July/048120.html
102   and then rework cgroupsv2 support around fds, i.e. keep one fd per active
103   unit around, and always operate on that, instead of cgroup fs paths.
105 * drop support for kernels that lack ambient capabilities support (i.e. make
106   4.3 new baseline). Then drop support for "!!" modifier for ExecStart= which
107   is only supported for such old kernels.
109 * drop support for kernels lacking memfd_create() (i.e. make 3.17 new
110   baseline), then drop all pipe() based fallbacks.
112 * drop support for getrandom()-less kernels. (GRND_INSECURE means once kernel
113   5.6 becomes our baseline). See
114   https://github.com/systemd/systemd/pull/24101#issuecomment-1193966468 for
115   details. Maybe before that: at taint-flags/warn about kernels that lack
116   getrandom()/environments where it is blocked.
118 * drop support for LOOP_CONFIGURE-less loopback block devices, once kernel
119   baseline is 5.8.
121 * drop fd_is_mount_point() fallback mess once we can rely on
122   STATX_ATTR_MOUNT_ROOT to exist i.e. kernel baseline 5.8
124 * Remove /dev/mem ACPI FPDT parsing when /sys/firmware/acpi/fpdt is ubiquitous.
125   That requires distros to enable CONFIG_ACPI_FPDT, and have kernels v5.12 for
126   x86 and v6.2 for arm.
128 * Once baseline is 4.13, remove support for INTERFACE_OLD= checks in "udevadm
129   trigger"'s waiting logic, since we can then rely on uuid-tagged uevents
131 Features:
133 * cryptenroll/cryptsetup/homed: add unlock mechanism that combines tpm2 and
134   fido2, as well as tpm2 + ssh-agent, insipred by ChromeOS' logic: encrypt the
135   volume key with the TPM, with a policy that insists that a nonce is signed by
136   the fido2 device's key or ssh-agent key. Thus, add unlock/login time the TPM
137   generates a nonce, which is sent as a challenge to the fido2/ssh-agent, which
138   returns a signature which is handed to the tpm, which then reveals the volume
139   key to the PC.
141 * cryptenroll/cryptsetup/homed: similar to this, implement TOTP backed by TPM.
143 * expose the handoff timestamp fully via the D-Bus properties that contain
144   ExecStatus information
146 * properly serialize the ExecStatus data from all ExecCommand objects
147   associated with services, sockets, mounts and swaps. Currently, the data is
148   flushed out on reload, which is quite a limitation.
150 * Clean up "reboot argument" handling, i.e. set it through some IPC service
151   instead of directly via /run/, so that it can be sensible set remotely.
153 * userdb: add concept for user "aliases", to cover for cases where you can log
154   in under the name lennart@somenetworkfsserver, and it would automatically
155   generate a local user, and from the one both names can be used to allow
156   logins into the same account.
158 * systemd-tpm2-support: add a some logic that detects if system is in DA
159   lockout mode, and queries the user for TPM recovery PIN then.
161 * systemd-repart should probably enable btrfs' "temp_fsid" feature for all file
162   systems it creates, as we have no interest in RAID for repart, and it should
163   make sure that we can mount them trivially everywhere.
165 * systemd-nspawn should get the same SSH key support that vmspawn now has.
167 * insert the new pidfs inode number as a third field into PidRef, so that
168   PidRef are reasonably serializable without having to pass around fds.
170 * systemd-analyze smbios11 to dump smbios type 11 vendor strings
172 * move documentation about our common env vars (SYSTEMD_LOG_LEVEL,
173   SYSTEMD_PAGER, …) into a man page of its own, and just link it from our
174   various man pages that so far embed the whole list again and again, in an
175   attempt to reduce clutter and noise a bid.
177 * vmspawn switch default swtpm PCR bank to SHA384-only (away from SHA256), at
178   least on 64bit archs, simply because SHA384 is typically double the hashing
179   speed than SHA256 on 64bit archs (since based on 64bit words unlike SHA256
180   which uses 32bit words).
182 * In vmspawn/nspawn/machined wait for X_SYSTEMD_UNIT_ACTIVE=ssh-active.target
183   and X_SYSTEMD_SIGNAL_LEVEL=2 as indication whether/when SSH and the POSIX
184   signals are available. Similar for D-Bus (but just use sockets.target for
185   that). Report as property for the machine.
187 * teach nspawn/machined a new bus call/verb that gets you a
188   shell in containers that have no sensible pid1, via joining the container,
189   and invoking a shell directly. Then provide another new bus call/vern that is
190   somewhat automatic: if we detect that pid1 is running and fully booted up we
191   provide a proper login shell, otherwise just a joined shell. Then expose that
192   as primary way into the container.
194 * make vmspawn/nspawn/importd/machined a bit more usable in a WSL-like
195   fashion. i.e. teach unpriv systemd-vmspawn/systemd-nspawn a reasonable
196   --bind-user= behaviour that mounts the calling user through into the
197   machine. Then, ship importd with a small database of well known distro images
198   along with their pinned signature keys. Then add some minimal glue that binds
199   this together: downloads a suitable image if not done so yet, starts it in
200   the bg via vmspawn/nspawn if not done so yet and then requests a shell inside
201   it for the invoking user.
203 * make varlink.h a public API, i.e. give all symbols an sd_ prefix, and rename
204   header file to sd-varlink.h. This of course also means we have to make json.h
205   public the same way. Convert the function param checks from assert() to
206   assert_ret(). Only export the stuff we are sure about, and keep some symbols
207   internally where things are not clear whether we want other projects to use.
209 * machined: allow running in a per-user instance too, to allow unpriv
210   systemd-nspawn and systemd-vmspawn do something useful. (Alternatively: open
211   up system machined to unpriv client's registering their machines, and enforce
212   they come with some prefix or suffix that clarifies they are the
213   user's. i.e. when a user registers a machine it must be called
214   foobar.<username> or so.).
216 * importd/…: define per-user dirs for container/VM images too.
218 * add a new specifier to unit files that figures out the DDI the unit file is
219   from, tracing through overlayfs, DM, loopback block device.
221 * importd/importctl
222   - import generator
223   - port tar handling to libarchive
224   - add varlink interface
225   - download images into .v/ dirs
227 * in os-release define a field that can be initialized at build time from
228   SOURCE_DATE_EPOCH (maybe even under that name?). Would then be used to
229   initialize the timestamp logic of ConditionNeedsUpdate=.
231 * nspawn/vmspawn/pid1: add ability to easily insert fully booted VMs/FOSC into
232   shell pipelines, i.e. add easy to use switch that turns off console status
233   output, and generates the right credentials for systemd-run-generator so that
234   a program is invoked, and its output captured, with correct EOF handling and
235   exit code propagation
237 * new systemd-analyze "join" verb or so, for debugging services. Would be
238   nsenter on steroids, i.e invoke a shell or command line in an environment as
239   close as we can make it for the MainPID of a service. Should be built around
240   pidfd, so that we can reasonably robustly do this. Would only cover the
241   execution environment like namespaces, but not the privilege settings.
243 * varlink: extend varlink IDL macros to include documentation strings
245 * Introduce a CGroupRef structure, inspired by PidRef. Should contain cgroup
246   path, cgroup id, and cgroup fd. Use it to continuously pin all v2 cgroups via
247   a cgroup_ref field in the CGroupRuntime structure. Eventually switch things
248   over to do all cgroupfs access only via that structure's fd.
250 * Get rid of the symlinks in /run/systemd/units/* and exclusively use cgroupfs
251   xattrs to convey info about invocation ids, logging settings and so on.
252   support for cgroupfs xattrs in the "trusted." namespace was added in linux
253   3.7, i.e. which we don't pretend to support anymore.
255 * rewrite bpf-devices in libbpf/C code, rather than home-grown BPF assembly, to
256   match bpf-restrict-fs, bpf-restrict-ifaces, bpf-socket-bind
258 * ditto: rewrite bpf-firewall in libbpf/C code
260 * credentials: if we ever acquire a secure way to derive cgroup id of socket
261   peers (i.e. SO_PEERCGROUPID), then extend the "scoped" credential logic to
262   allow cgroup-scoped (i.e. app or service scoped) credentials. Then, as next
263   step use this to implement per-app/per-service encrypted directories, where
264   we set up fscrypt on the StateDirectory= with a randomized key which is
265   stored as xattr on the directory, encrypted as a credential.
267 * credentials: optionally include a per-user secret in scoped user-credential
268   encryption keys. should come from homed in some way, derived from the luks
269   volume key or fscrypt directory key.
271 * credentials: add a flag to the scoped credentials that if set require PK
272   reauthentication when unlocking a secret.
274 * teach systemd --user to properly load credentials off disk, with
275   /etc/credstore equivalent and similar. Make sure that $CREDENTIALS_DIRECTORY=
276   actually works too when run with user privs.
278 * extend the smbios11 logic for passing credentials so that instead of passing
279   the credential data literally it can also just reference an AF_VSOCK CID/port
280   to read them from. This way the data doesn't remain in the SMBIOS blob during
281   runtime, but only in the credentials fs.
283 * machined: make machine registration available via varlink to simplify
284   nspawn/vmspawn, and to have an extensible way to register VM/machine metadata
286 * ssh-proxy: add support for "ssh machine/foobar" to automatically connect to
287   machined registered machine "foobar". Requires updating machined to track CID
288   and unix-export dir of containers.
290 * add a new ExecStart= flag that inserts the configured user's shell as first
291   word in the command line. (maybe use character '.'). Usecase: tool such as
292   run0 can use that to spawn the target user's default shell.
294 * varlink: figure out how to do docs for our varlink interfaces. Idea: install
295   interface files augmented with docs in /usr/share/ somewhere. And have
296   functionality in varlinkctl to merge interface info extracted from binaries
297   with interface info on disk. And store the doc strings only in the latter.
299 * introduce mntid_t, and make it 64bit, as apparently the kernel switched to
300   64bit mount ids
302 * use udev rule networkd ownership property to take ownership of network
303   interfaces nspawn creates
305 * mountfsd/nsresourced
306   - userdb: maybe allow callers to map one uid to their own uid
307   - bpflsm: allow writes if resulting UID on disk would be userns' owner UID
308   - make encrypted DDIs work (password…)
309   - add API for creating a new file system from scratch (together with some
310     dm-integrity/HMAC key). Should probably work using systemd-repart (access
311     via varlink).
312   - add api to make an existing file "trusted" via dm-integry/HMAC key
313   - port: portabled
314   - port: tmpfiles, sysusers and similar
315   - lets see if we can make runtime bind mounts into unpriv nspawn work
317 * add a kernel cmdline switch (and cred?) for marking a system to be
318   "headless", in which case we never open /dev/console for reading, only for
319   writing. This would then mean: systemd-firstboot would process creds but not
320   ask interactively, getty would not be started and so on.
322 * cryptsetup: new crypttab option to auto-grow a luks device to its backing
323   partition size. new crypttab option to reencrypt a luks device with a new
324   volume key.
326 * we probably should have some infrastructure to acquire sysexts with
327   drivers/firmware for local hardware automatically. Idea: reuse the modalias
328   logic of the kernel for this: make the main OS image install a hwdb file
329   that matches against local modalias strings, and adds properties to relevant
330   devices listing names of sysexts needed to support the hw. Then provide some
331   tool that goes through all devices and tries to acquire/download the
332   specified images.
334 * repart + cryptsetup: support file systems that are encrypted and use verity
335   on top. Usecase: confexts that shall be signed by the admin but also be
336   confidential. Then, add a new --make-ddi=confext-encrypted for this.
338 * tmpfiles: add new line type for moving files from some source dir to some
339   target dir. then use that to move sysexts/confexts and stuff from initrd
340   tmpfs to /run/, so that host can pick things up.
342 * tiny varlink service that takes a fd passed in and serves it via http. Then
343   make use of that in networkd, and expose some EFI binary of choice for
344   DHCP/HTTP base EFI boot.
346 * bootctl: add reboot-to-disk which takes a block device name, and
347   automatically sets things up so that system reboots into that device next.
349 * maybe: in PID1, when we detect we run in an initrd, make superblock read-only
350   early on, but provide opt-out via kernel cmdline.
352 * systemd-pcrextend:
353   - support measuring to nvindex with PCR update semantics ("fake PCRs")
354   - add api for "allocating" such an nvindex
355   - once we have that start measuring every sysext we apply, every confext,
356     every RootImage= we apply, every nspawn and so on. All in separate fake
357     PCRs.
359 * vmspawn:
360   - run in scope unit when invoked from command line, and machined registration is off
361   - sd_notify support
362   - --ephemeral support
363   - --read-only support
364   - automatically suspend/resume the VM if the host suspends. Use logind
365     suspend inhibitor to implement this. request clean suspend by generating
366     suspend key presses.
367   - support for "real" networking via "-n" and --network-bridge=
368   - translate SIGTERM to clean ACPI shutdown event
370 * systemd-pcrmachine should probably also measure the SMBIOS system UUID.
372 * sd-boot: allow synthesizing additional type1 entries via SMBIOS vendor strings
374 * storagetm:
375   - add USB mass storage device logic, so that all local disks are also exposed
376     as mass storage devices on systems that have a USB controller that can
377     operate in device mode
378   - add NVMe authentication
380 * add support for activating nvme-oF devices at boot automatically via kernel
381   cmdline, and maybe even support a syntax such as
382   root=nvme:<trtype>:<traddr>:<trsvcid>:<nqn>:<partition> to boot directly from
383   nvme-oF
385 * pcrlock:
386   - make signed PCR work together with pcrlock
387   - add kernel-install plugin that automatically creates UKI .pcrlock file when
388     UKI is installed, and removes it when it is removed again
389   - automatically install PE measurement of sd-boot on "bootctl install"
390   - write generated pcrlock signature files to the ESP as credential, one for
391     each installed OS & pick up generated pcrlock signature file in sd-stub,
392     pass it via initrd to OS
393   - pre-calc sysext + kernel cmdline measurements
394   - pre-calc cryptsetup root key measurement
395   - maybe make systemd-repart generate .pcrlock for old and new GPT header in
396     /run?
397   - Add support for more than 8 branches per PCR OR
398   - add "systemd-pcrlock lock-kernel-current" or so which synthesizes .pcrlock
399     policy from currently booted kernel/event log, to close gap for first boot
400     for pre-built images
402 * in sd-boot and sd-stub measure the SMBIOS vendor strings to some PCR (at
403   least some subset of them that look like systemd stuff), because apparently
404   some firmware does not, but systemd honours it. avoid duplicate measurement
405   by sd-boot and sd-stub by adding LoaderFeatures/StubFeatures flag for this,
406   so that sd-stub can avoid it if sd-boot already did it.
408 * cryptsetup: a mechanism that allows signing a volume key with some key that
409   has to be present in the kernel keyring, or similar, to ensure that confext
410   DDIs can be encrypted against the local SRK but signed with the admin's key
411   and thus can authenticated locally before they are decrypted.
413 * image policy should be extended to allow dictating *how* a disk is unlocked,
414   i.e. root=encrypted-tpm2+encrypted-fido2 would mean "root fs must be
415   encrypted and unlocked via fido2 or tpm2, but not otherwise"
417 * systemd-repart: add support for formatting dm-crypt + dm-integrity file
418   systems.
420 * homed: use systemd-storagetm to expose home dirs via nvme-tcp. Then,
421   teach homed/pam_systemd_homed with a user name such as
422   lennart%nvme_tcp_192.168.100.77_8787 to log in from any linux host with the
423   same home dir. Similar maybe for nbd, iscsi? this should then first ask for
424   the local root pw, to authenticate that logging in like this is ok, and would
425   then be followed by another password prompt asking for the user's own
426   password. Also, do something similar for CIFS: if you log in via
427   lennart%cifs-someserver_someshare, then set up the homed dir for it
428   automatically. The PAM module should update the user name used for login to
429   the short version once it set up the user. Some care should be taken, so that
430   the long version can be still be resolved via NSS afterwards, to deal with
431   PAM clients that do not support PAM sessions where PAM_USER changes half-way.
433 * redefine /var/lib/extensions/ as the dir one can place all three of sysext,
434   confext as well is multi-modal DDIs that qualify as both. Then introduce
435   /var/lib/sysexts/ which can be used to place only DDIs that shall be used as
436   sysext
438 * Varlinkification of the following command line tools, to open them up to
439   other programs via IPC:
440   - bootctl
441   - journalctl (allowing journal read access via IPC)
442   - coredumpcl
443   - systemd-bless-boot
444   - systemd-measure
445   - systemd-cryptenroll (to allow UIs to enroll FIDO2 keys and such)
446   - systemd-dissect
447   - systemd-sysupdate
448   - systemd-analyze
449   - kernel-install
450   - systemd-mount (with PK so that desktop environments could use it to mount disks)
452 * in the service manager, pick up ERRNO= + BUSERROR= + VARLINKERROR= error
453   identifiers, and store them along with the exit status of a server and report
454   via "systemctl status".
456 * enumerate virtiofs devices during boot-up in a generator, and synthesize
457   mounts for rootfs, /usr/, /home/, /srv/ and some others from it, depending on
458   the "tag". (waits for: https://gitlab.com/virtio-fs/virtiofsd/-/issues/128)
460 * automatically mount one virtiofs during early boot phase to /run/host/,
461   similar to how we do that for nspawn, based on some clear tag.
463 * add some service that makes an atomic snapshot of PCR state and event log up
464   to that point available, possibly even with quote by the TPM.
466 * encode type1 entries in some UKI section to add additional entries to the
467   menu.
469 * Add ACL-based access management to .socket units. i.e. add AllowPeerUser= +
470   AllowPeerGroup= that installs additional user/group ACL entries on AF_UNIX
471   sockets.
473 * systemd-tpm2-setup should probably have a factory reset logic, i.e. when some
474   kernel command line option is set we reset the TPM (equivalent of tpm2_clear
475   -c owner? or rather echo 5 >/sys/class/tpm/tpm0/ppi/request?).
477 * systemd-tpm2-setup should support a mode where we refuse booting if the SRK
478   changed. (Must be opt-in, to not break systems which are supposed to be
479   migratable between PCs)
481 * when systemd-sysext learns mutable /usr/ (and systemd-confext mutable /etc/)
482   then allow them to store the result in a .v/ versioned subdir, for some basic
483   snapshot logic
485 * add a new PE binary section ".mokkeys" or so which sd-stub will insert into
486   Mok keyring, by overriding/extending whatever shim sets in the EFI
487   var. Benefit: we can extend the kernel module keyring at ukify time,
488   i.e. without recompiling the kernel, taking an upstream OS' kernel and adding
489   a local key to it.
491 * PidRef conversion work:
492   - cg_pid_get_xyz()
493   - pid_from_same_root_fs()
494   - get_ctty_devnr()
495   - pid1: sd_notify() receiver should use SCM_PIDFD to authenticate client
496   - actually wait for POLLIN on pidref's pidfd in service logic
497   - exec_spawn() + safe_fork()
498   - openpt_allocate_in_namespace()
499   - unit_attach_pid_to_cgroup_via_bus()
500   - cg_attach() – requires new kernel feature
502 * ddi must be listed as block device fstype
504 * measure some string via pcrphase whenever we end up booting into emergency
505   mode.
507 * homed: add a basic form of secrets management to homed, that stores
508   secrets in $HOME somewhere, is protected by the accounts own authentication
509   mechanisms. Should implement something PKCS#11-like that can be used to
510   implement emulated FIDO2 in unpriv userspace on top (which should happen
511   outside of homed), emulated PKCS11, and libsecrets support. Operate with a
512   2nd key derived from volume key of the user, with which to wrap all
513   keys. maintain keys in kernel keyring if possible.
515 * use sd-event ratelimit feature optionally for journal stream clients that log
516   too much
518 * systemd-mount should only consider modern file systems when mounting, similar
519   to systemd-dissect
521 * add another PE section ".fname" or so that encodes the intended filename for
522   PE file, and validate that when loading add-ons and similar before using
523   it. This is particularly relevant when we load multiple add-ons and want to
524   sort them to apply them in a define order. The order should not be under
525   control of the attacker.
527 * also include packaging metadata (á la
528   https://systemd.io/ELF_PACKAGE_METADATA/) in our UEFI PE binaries, using the
529   same JSON format.
531 * make "bootctl install" + "bootctl update" useful for installing shim too. For
532   that introduce new dir /usr/lib/systemd/efi/extra/ which we copy mostly 1:1
533   into the ESP at install time. Then make the logic smart enough so that we
534   don't overwrite bootx64.efi with our own if the extra tree already contains
535   one. Also, follow symlinks when copying, so that shim rpm can symlink their
536   stuff into our dir (which is safe since the target ESP is generally VFAT and
537   thus does not have symlinks anyway). Later, teach the update logic to look at
538   the ELF package metadata (which we also should include in all PE files, see
539   above) for version info in all *.EFI files, and use it to only update if
540   newer.
542 * in sd-stub: optionally add support for a new PE section .keyring or so that
543   contains additional certificates to include in the Mok keyring, extending
544   what shim might have placed there. why? let's say I use "ukify" to build +
545   sign my own fedora-based UKIs, and only enroll my personal lennart key via
546   shim.  Then, I want to include the fedora keyring in it, so that kmods work.
547   But I might not want to enroll the fedora key in shim, because this would
548   also mean that the key would be in effect whenever I boot an archlinux UKI
549   built the same way, signed with the same lennart key.
551 * resolved: take possession of some IPv6 ULA address (let's say
552   fd00:5353:5353:5353:5353:5353:5353:5353), and listen on port 53 on it for the
553   local stubs, so that we can make the stub available via ipv6 too.
555 * Maybe add SwitchRootEx() as new bus call that takes env vars to set for new
556   PID 1 as argument. When adding SwitchRootEx() we should maybe also add a
557   flags param that allows disabling and enabling whether serialization is
558   requested during switch root.
560 * introduce a .acpitable section for early ACPI table override
562 * add proper .osrel matching for PE addons. i.e. refuse applying an addon
563   intended for a different OS. Take inspiration from how confext/sysext are
564   matched against OS.
566 * figure out what to do about credentials sealed to PCRs in kexec + soft-reboot
567   scenarios. Maybe insist sealing is done additionally against some keypair in
568   the TPM to which access is updated on each boot, for the next, or so?
570 * logind: when logging in, always take an fd to the home dir, to keep the dir
571   busy, so that autofs release can never happen. (this is generally a good
572   idea, and specifically works around the fact the autofs ignores busy by mount
573   namespaces)
575 * mount most file systems with a restrictive uidmap. e.g. mount /usr/ with a
576   uidmap that blocks out anything outside 0…1000 (i.e. system users) and similar.
578 * mount the root fs with MS_NOSUID by default, and then mount /usr/ without
579   both so that suid executables can only be placed there. Do this already in
580   the initrd. If /usr/ is not split out create a bind mount automatically.
582 * fix our various hwdb lookup keys to end with ":" again. The original idea was
583   that hwdb patterns can match arbitrary fields with expressions like
584   "*:foobar:*", to wildcard match both the start and the end of the string.
585   This only works safely for later extensions of the string if the strings
586   always end in a colon. This requires updating our udev rules, as well as
587   checking if the various hwdb files are fine with that.
589 * mount /tmp/ and /var/tmp with a uidmap applied that blocks out "nobody" user
590   among other things such as dynamic uid ranges for containers and so on. That
591   way no one can create files there with these uids and we enforce they are only
592   used transiently, never persistently.
594 * rework loopback support in fstab: when "loop" option is used, then
595   instantiate a new systemd-loop@.service for the source path, set the
596   lo_file_name field for it to something recognizable derived from the fstab
597   line, and then generate a mount unit for it using a udev generated symlink
598   based on lo_file_name.
600 * teach systemd-nspawn the boot assessment logic: hook up vpick's try counters
601   with success notifications from nspawn payloads. When this is enabled,
602   automatically support reverting back to older OS version images if newer ones
603   fail to boot.
605 * implement new "systemd-fsrebind" tool that works like gpt-auto-generator but
606   looks at a root dir and then applies vpick on various dirs/images to pick a
607   root tree, a /usr/ tree, a /home/, a /srv/, a /var/ tree and so on. Dirs
608   could also be btrfs subvols (combine with btrfs auto-snapshort approach for
609   creating versions like these automatically).
611 * remove tomoyo support, it's obsolete and unmaintained apparently
613 * In .socket units, add ConnectStream=, ConnectDatagram=,
614   ConnectSequentialPacket= that create a socket, and then *connect to* rather than
615   listen on some socket. Then, add a new setting WriteData= that takes some
616   base64 data that systemd will write into the socket early on. This can then
617   be used to create connections to arbitrary services and issue requests into
618   them, as long as the data is static. This can then be combined with the
619   aforementioned journald subscription varlink service, to enable
620   activation-by-message id and similar.
622 * .service with invalid Sockets= starts successfully.
624 * landlock: lock down RuntimeDirectory= via landlock, so that services lose
625   ability to write anywhere else below /run/. Similar for
626   StateDirectory=. Benefit would be clear delegation via unit files: services
627   get the directories they get, and nothing else even if they wanted to.
629 * landlock: for unprivileged systemd (i.e. systemd --user), use landlock to
630   implement ProtectSystem=, ProtectHome= and so on. Landlock does not require
631   privs, and we can implement pretty similar behaviour. Also, maybe add a mode
632   where ProtectSystem= combined with an explicit PrivateMounts=no could request
633   similar behaviour for system services, too.
635 * Add systemd-mount@.service which is instantiated for a block device and
636   invokes systemd-mount and exits. This is then useful to use in
637   ENV{SYSTEMD_WANTS} in udev rules, and a bit prettier than using RUN+=
639 * udevd: extend memory pressure logic: also kill any idle worker processes
641 * udevadm: to make symlink querying with udevadm nicer:
642   - do not enable the pager for queries like 'udevadm info -q -r symlink'
643   - add mode with newlines instead of spaces (for grep)?
645 * SIGRTMIN+18 and memory pressure handling should still be added to: hostnamed,
646   localed, oomd, timedated.
648 * repart/gpt-auto/DDIs: maybe introduce a concept of "extension" partitions,
649   that have a new type uuid and can "extend" earlier partitions, to work around
650   the fact that systemd-repart can only grow the last partition defined. During
651   activation we'd simply set up a dm-linear mapping to merge them again. A
652   partition that is to be extended would just set a bit in the partition flags
653   field to indicate that there's another extension partition to look for. The
654   identifying UUID of the extension partition would be hashed in counter mode
655   from the uuid of the original partition it extends. Inspiration for this is
656   the "dynamic partitions" concept of new Android. This would be a minimalistic
657   concept of a volume manager, with the extents it manages being exposes as GPT
658   partitions. I a partition is extended multiple times they should probably
659   grow exponentially in size to ensure O(log(n)) time for finding them on
660   access.
662 * Make nspawn to a frontend for systemd-executor, so that we have to ways into
663   the executor: via unit files/dbus/varlink through PID1 and via cmdline/OCI
664   through nspawn.
666 * sd-stub: detect if we are running with uefi console output on serial, and if so
667   automatically add console= to kernel cmdline matching the same port.
669 * add a utility that can be used with the kernel's
670   CONFIG_STATIC_USERMODEHELPER_PATH and then handles them within pid1 so that
671   security, resource management and cgroup settings can be enforced properly
672   for all umh processes.
674 * systemd-shutdown: keep sending sd_notify() status updates immediately before
675   going down, in particular include the "reboot param" string.
677 * homed: when resizing an fs don't sync identity beforehand there might simply
678   not be enough disk space for that. try to be defensive and sync only after
679   resize.
681 * homed: if for some reason the partition ended up being much smaller than
682   whole disk, recover from that, and grow it again.
684 * timesyncd: when saving/restoring clock try to take boot time into account.
685   Specifically, along with the saved clock, store the current boot ID. When
686   starting, check if the boot id matches. If so, don't do anything (we are on
687   the same boot and clock just kept running anyway). If not, then read
688   CLOCK_BOOTTIME (which started at boot), and add it to the saved clock
689   timestamp, to compensate for the time we spent booting. If EFI timestamps are
690   available, also include that in the calculation. With this we'll then only
691   miss the time spent during shutdown after timesync stopped and before the
692   system actually reset.
694 * systemd-stub: maybe store a "boot counter" in the ESP, and pass it down to
695   userspace to allow ordering boots (for example in journalctl). The counter
696   would be monotonically increased on every boot.
698 * pam_systemd_home: add module parameter to control whether to only accept
699   only password or only pcks11/fido2 auth, and then use this to hook nicely
700   into two of the three PAM stacks gdm provides.
701   See discussion at https://github.com/authselect/authselect/pull/311
703 * sd-boot: make boot loader spec type #1 accept http urls in "linux"
704   lines. Then, do the uefi http dance to download kernels and boot them. This
705   is then useful for network boot, by embedding a cpio with type #1 snippets
706   in sd-boot, which reference remote kernels.
708 * maybe prohibit setuid() to the nobody user, to lock things down, via seccomp.
709   the nobody is not a user any code should run under, ever, as that user would
710   possibly get a lot of access to resources it really shouldn't be getting
711   access to due to the userns + nfs semantics of the user. Alternatively: use
712   the seccomp log action, and allow it.
714 * sd-boot: add a new PE section .bls or so that carries a cpio with additional
715   boot loader entries (both type1 and type2). Then when initializing, find this
716   section, iterate through it and populate menu with it. cpio is simple enough
717   to make a parser for this reasonably robust. use same path structures as in
718   the ESP. Similar add one for signature key drop-ins.
720 * sd-boot: also allow passing in the cpio as in the previous item via SMBIOS
722 * add a new EFI tool "sd-fetch" or so. It looks in a PE section ".url" for an
723   URL, then downloads the file from it using UEFI HTTP APIs, and executes it.
724   Use case: provide a minimal ESP with sd-boot and a couple of these sd-fetch
725   binaries in place of UKIs, and download them on-the-fly.
727 * maybe: systemd-loop-generator that sets up loopback devices if requested via kernel
728   cmdline. use case: include encrypted/verity root fs in UKI.
730 * systemd-gpt-auto-generator: add kernel cmdline option to override block
731   device to dissect. also support dissecting a regular file. useccase: include
732   encrypted/verity root fs in UKI.
734 * sd-stub: add ".bootcfg" section for kernel bootconfig data (as per
735   https://docs.kernel.org/admin-guide/bootconfig.html)
737 * tpm2: add (optional) support for generating a local signing key from PCR 15
738   state. use private key part to sign PCR 7+14 policies. stash signatures for
739   expected PCR7+14 policies in EFI var. use public key part in disk encryption.
740   generate new sigs whenever db/dbx/mok/mokx gets updated. that way we can
741   securely bind against SecureBoot/shim state, without having to renroll
742   everything on each update (but we still have to generate one sig on each
743   update, but that should be robust/idempotent). needs rollback protection, as
744   usual.
746 * Lennart: big blog story about DDIs
748 * Lennart: big blog story about building initrds
750 * Lennart: big blog story about "why systemd-boot"
752 * bpf: see if we can use BPF to solve the syslog message cgroup source problem:
753   one idea would be to patch source sockaddr of all AF_UNIX/SOCK_DGRAM to
754   implicitly contain the source cgroup id. Another idea would be to patch
755   sendto()/connect()/sendmsg() sockaddr on-the-fly to use a different target
756   sockaddr.
758 * bpf: see if we can address opportunistic inode sharing of immutable fs images
759   with BPF. i.e. if bpf gives us power to hook into openat() and return a
760   different inode than is requested for which we however it has same contents
761   then we can use that to implement opportunistic inode sharing among DDIs:
762   make all DDIs ship xattr on all reg files with a SHA256 hash. Then, also
763   dictate that DDIs should come with a top-level subdir where all reg files are
764   linked into by their SHA256 sum. Then, whenever an inode is opened with the
765   xattr set, check bpf table to find dirs with hashes for other prior DDIs and
766   try to use inode from there.
768 * extend the verity signature partition to permit multiple signatures for the
769   same root hash, so that people can sign a single image with multiple keys.
771 * consider adding a new partition type, just for /opt/ for usage in system
772   extensions
774 * gpt-auto-discovery: also use the pkcs7 signature stuff, and pass signature to
775   kernel. So far we only did this for the various --image= switches, but not
776   for the root fs or /usr/.
778 * dissection policy should enforce that unlocking can only take place by
779   certain means, i.e. only via pw, only via tpm2, or only via fido, or a
780   combination thereof.
782 * make the systemd-repart "seed" value provisionable via credentials, so that
783   confidential computing environments can set it and deterministically
784   enforce the uuids for partitions created, so that they can calculate PCR 15
785   ahead of time.
787 * systemd-repart: also derive the volume key from the seed value, for the
788   aforementioned purpose.
790 * in the initrd: derive the default machine ID to pass to the host PID 1 via
791   $machine_id from the same seed credential.
793 * Add systemd-sysupdate-initrd.service or so that runs systemd-sysupdate in the
794   initrd to bootstrap the initrd to populate the initial partitions. Some things
795   to figure out:
796   - Should it run on firstboot or on every boot?
797   - If run on every boot, should it use the sysupdate config from the host on
798     subsequent boots?
800 * revisit default PCR bindings in cryptenroll and systemd-creds. Currently they
801   use PCR 7 which should contain secureboot state db/dbx. Which sounded like a
802   safe bet, given that it should change only on policy changes, and not
803   software updates. But that's wrong. Recent fwupd (rightfully) contains code
804   for updating the dbx denylist. This means even without any active policy
805   change PCR 7 might change. Hence, better idea might be in systemd-creds to
806   default to PCR 15 at least if sd-stub is used (i.e. bind to system identity),
807   and in cryptsetup simply the empty list? Also, PCR 14 almost certainly should
808   be included as much as PCR 7 (as it contains shim's policy, which is
809   certainly as relevant as PCR 7 on many systems)
811 * To mimic the new tpm2-measure-pcr= crypttab option add the same to veritytab
812   (measuring the root hash) and integritytab (measuring the HMAC key if one is
813   used)
815 * We should start measuring all services, containers, and system extensions we
816   activate. probably into PCR 13. i.e. add --tpm2-measure-pcr= or so to
817   systemd-nspawn, and MeasurePCR= to unit files. Should contain a measurement
818   of the activated configuration and the image that is being activated (in case
819   verity is used, hash of the root hash).
821 * bootspec: permit graceful "update" from type #2 to type #1. If both a type #1
822   and a type #2 entry exist under otherwise the exact same name, then use the
823   type #1 entry, and ignore the type #2 entry. This way, people can "upgrade"
824   from the UKI with all parameters baked in to a Type #1 .conf file with manual
825   parametrization, if needed. This matches our usual rule that admin config
826   should win over vendor defaults.
828 * write a "search path" spec, that documents the prefixes to search in
829   (i.e. the usual /etc/, /run/, /usr/lib/ dance, potentially /usr/etc/), how to
830   sort found entries, how masking works and overriding.
832 * automatic boot assessment: add one more default success check that just waits
833   for a bit after boot, and blesses the boot if the system stayed up that long.
835 * systemd-repart: add support for generating ISO9660 images
837 * systemd-repart: in addition to the existing "factory reset" mode (which
838   simply empties existing partitions marked for that). add a mode where
839   partitions marked for it are entirely removed. Use case: remove secondary OS
840   copy, and redundant partitions entirely, and recreate them anew.
842 * systemd-boot: maybe add support for collapsing menu entries of the same OS
843   into one item that can be opened (like in a "tree view" UI element) or
844   collapsed. If only a single OS is installed, disable this mode, but if
845   multiple OSes are installed might make sense to default to it, so that user
846   is not immediately bombarded with a multitude of Linux kernel versions but
847   only one for each OS.
849 * systemd-repart: if the GPT *disk* UUID (i.e. the one global for the entire
850   disk) is set to all FFFFF then use this as trigger for factory reset, in
851   addition to the existing mechanisms via EFI variables and kernel command
852   line. Benefit: works also on non-EFI systems, and can be requested on one
853   boot, for the next.
855 * systemd-sysupdate: make transport pluggable, so people can plug casync or
856   similar behind it, instead of http.
858 * systemd-tmpfiles: add concept for conditionalizing lines on factory reset
859   boot, or on first boot.
861 * in UKIs: add way to define allowlist of additional words that can be added to
862   the kernel cmdline even in SecureBoot mode
864 * we probably needs .pcrpkeyrd or so as additional PE section in UKIs,
865   which contains a separate public key for PCR values that only apply in the
866   initrd, i.e. in the boot phase "enter-initrd". Then, consumers in userspace
867   can easily bind resources to just the initrd. Similar, maybe one more for
868   "enter-initrd:leave-initrd" for resources that shall be accessible only
869   before unprivileged user code is allowed. (we only need this for .pcrpkey,
870   not for .pcrsig, since the latter is a list of signatures anyway). With that,
871   when you enroll a LUKS volume or similar, pick either the .pcrkey (for
872   coverage through all phases of the boot, but excluding shutdown), the
873   .pcrpkeyrd (for coverage in the initrd only) and .pcrpkeybt (for coverage
874   until users are allowed to log in).
876 * Once the root fs LUKS volume key is measured into PCR 15, default to binding
877   credentials to PCR 15 in "systemd-creds"
879 * add support for asymmetric LUKS2 TPM based encryption. i.e. allow preparing
880   an encrypted image on some host given a public key belonging to a specific
881   other host, so that only hosts possessing the private key in the TPM2 chip
882   can decrypt the volume key and activate the volume. Use case: systemd-confext
883   for a central orchestrator to generate confext images securely that can only
884   be activated on one specific host (which can be used for installing a bunch
885   of creds in /etc/credstore/ for example). Extending on this: allow binding
886   LUKS2 TPM based encryption also to the TPM2 internal clock. Net result:
887   prepare a confext image that can only be activated on a specific host that
888   runs a specific software in a specific time window. confext would be
889   automatically invalidated outside of it.
891 * maybe add a "systemd-report" tool, that generates a TPM2-backed "report" of
892   current system state, i.e. a combination of PCR information, local system
893   time and TPM clock, running services, recent high-priority log
894   messages/coredumps, system load/PSI, signed by the local TPM chip, to form an
895   enhanced remote attestation quote. Use case: a simple orchestrator could use
896   this: have the report tool upload these reports every 3min somewhere. Then
897   have the orchestrator collect these reports centrally over a 3min time
898   window, and use them to determine what which node should now start/stop what,
899   and generate a small confext for each node, that uses Uphold= to pin services
900   on each node.  The confext would be encrypted using the asymmetric encryption
901   proposed above, so that it can only be activated on the specific host, if the
902   software is in a good state, and within a specific time frame. Then run a
903   loop on each node that sends report to orchestrator and then sysupdate to
904   update confext.  Orchestrator would be stateless, i.e. operate on desired
905   config and collected reports in the last 3min time window only, and thus can
906   be trivially scaled up since all instances of the orchestrator should come to
907   the same conclusions given the same inputs of reports/desired workload info.
908   Could also be used to deliver Wireguard secrets and thus to clients, thus
909   permitting zero-trust networking: secrets are rolled over via confext updates,
910   and via the time window TPM logic invalidated if node doesn't keep itself
911   updated, or becomes corrupted in some way.
913 * in the initrd, once the rootfs encryption key has been measured to PCR 15,
914   derive default machine ID to use from it, and pass it to host PID 1.
916 * tree-wide: convert as much as possible over to use sd_event_set_signal_exit(), instead
917   of manually hooking into SIGINT/SIGTERM
919 * tree-wide: convert as much as possible over to SD_EVENT_SIGNAL_PROCMASK
920   instead of manual blocking.
922 * sd-boot: for each installed OS, grey out older entries (i.e. all but the
923   newest), to indicate they are obsolete
925 * automatically propagate LUKS password credential into cryptsetup from host
926   (i.e. SMBIOS type #11, …), so that one can unlock LUKS via VM hypervisor
927   supplied password.
929 * add ability to path_is_valid() to classify paths that refer to a dir from
930   those which may refer to anything, and use that in various places to filter
931   early. i.e. stuff ending in "/", "/." and "/.." definitely refers to a
932   directory, and paths ending that way can be refused early in many contexts.
934 * systemd-measure: add --pcrpkey-auto as an alternative to --pcrpkey=, where it
935   would just use the same public key specified with --public-key= (or the one
936   automatically derived from --private-key=).
938 * Add "purpose" flag to partition flags in discoverable partition spec that
939   indicate if partition is intended for sysext, for portable service, for
940   booting and so on. Then, when dissecting DDI allow specifying a purpose to
941   use as additional search condition. Use case: images that combined a sysext
942   partition with a portable service partition in one.
944 * On boot, auto-generate an asymmetric key pair from the TPM,
945   and use it for validating DDIs and credentials. Maybe upload it to the kernel
946   keyring, so that the kernel does this validation for us for verity and kernel
947   modules
949 * lock down acceptable encrypted credentials at boot, via simple allowlist,
950   maybe on kernel command line:
951   systemd.import_encrypted_creds=foobar.waldo,tmpfiles.extra to protect locked
952   down kernels from credentials generated on the host with a weak kernel
954 * Merge systemd-creds options --uid= (which accepts user names) and --user.
956 * Add support for extra verity configuration options to systemd-repart (FEC,
957   hash type, etc)
959 * chase(): take inspiration from path_extract_filename() and return
960   O_DIRECTORY if input path contains trailing slash.
962 * chase(): refuse resolution if trailing slash is specified on input,
963   but final node is not a directory
965 * document in boot loader spec that symlinks in XBOOTLDR/ESP are not OK even if
966   non-VFAT fs is used.
968 * measure credentials picked up from SMBIOS to some suitable PCR
970 * measure GPT and LUKS headers somewhere when we use them (i.e. in
971   systemd-gpt-auto-generator/systemd-repart and in systemd-cryptsetup?)
973 * pick up creds from EFI vars
975 * Add and pickup tpm2 metadata for creds structure.
977 * sd-boot: we probably should include all BootXY EFI variable defined boot
978   entries in our menu, and then suppress ourselves. Benefit: instant
979   compatibility with all other OSes which register things there, in particular
980   on other disks. Always boot into them via NextBoot EFI variable, to not
981   affect PCR values.
983 * systemd-measure tool:
984   - pre-calculate PCR 12 (command line) + PCR 13 (sysext) the same way we can precalculate PCR 11
986 * in sd-boot: load EFI drivers from a new PE section. That way, one can have a
987   "supercharged" sd-boot binary, that could carry ext4 drivers built-in.
989 * sd-bus: document that sd_bus_process() only returns messages that non of the
990   filters/handlers installed on the connection took possession of.
992 * sd-device: add an API for acquiring list of child devices, given a device
993   objects (i.e. all child dirents that dirs or symlinks to dirs)
995 * sd-device: maybe pin the sysfs dir with an fd, during the entire runtime of
996   an sd_device, then always work based on that.
998 * maybe add new flags to gpt partition tables for rootfs and usrfs indicating
999   purpose, i.e. whether something is supposed to be bootable in a VM, on
1000   baremetal, on an nspawn-style container, if it is a portable service image,
1001   or a sysext for initrd, for host os, or for portable container. Then hook
1002   portabled/… up to udev to watch block devices coming up with the flags set, and
1003   use it.
1005 * sd-boot should look for information what to boot in SMBIOS, too, so that VM
1006   managers can tell sd-boot what to boot into and suchlike
1008 * add "systemd-sysext identify" verb, that you can point on any file in /usr/
1009   and that determines from which overlayfs layer it originates, which image, and with
1010   what it was signed.
1012 * systemd-creds: extend encryption logic to support asymmetric
1013   encryption/authentication. Idea: add new verb "systemd-creds public-key"
1014   which generates a priv/pub key pair on the TPM2 and stores the priv key
1015   locally in /var. It then outputs a certificate for the pub part to stdout.
1016   This can then be copied/taken elsewhere, and can be used for encrypting creds
1017   that only the host on its specific hw can decrypt. Then, support a drop-in
1018   dir with certificates that can be used to authenticate credentials. Flow of
1019   operations is then this: build image with owner certificate, then after
1020   boot up issue "systemd-creds public-key" to acquire pubkey of the machine.
1021   Then, when passing data to the machine, sign with privkey belonging to one of
1022   the dropped in certs and encrypted with machine pubkey, and pass to machine.
1023   Machine is then able to authenticate you, and confidentiality is guaranteed.
1025 * building on top of the above, the pub/priv key pair generated on the TPM2
1026   should probably also one you can use to get a remote attestation quote.
1028 * Process credentials in:
1029   • crypttab-generator: allow defining additional crypttab-like volumes via
1030     credentials (similar: verity-generator, integrity-generator). Use
1031     fstab-generator logic as inspiration.
1032   • run-generator: allow defining additional commands to run via a credential
1033   • resolved: allow defining additional /etc/hosts entries via a credential (it
1034     might make sense to then synthesize a new combined /etc/hosts file in /run
1035     and bind mount it on /etc/hosts for other clients that want to read it.
1036   • repart: allow defining additional partitions via credential
1037   • timesyncd: pick NTP server info from credential
1038   • portabled: read a credential "portable.extra" or so, that takes a list of
1039     file system paths to enable on start.
1040   • make systemd-fstab-generator look for a system credential encoding root= or
1041     usr=
1042   • in gpt-auto-generator: check partition uuids against such uuids supplied via
1043     sd-stub credentials. That way, we can support parallel OS installations with
1044     pre-built kernels.
1046 * define a JSON format for units, separating out unit definitions from unit
1047   runtime state. Then, expose it:
1049   1. Add Describe() method to Unit D-Bus object that returns a JSON object
1050      about the unit.
1051   2. Expose this natively via Varlink, in similar style
1052   3. Use it when invoking binaries (i.e. make PID 1 fork off systemd-executor
1053      binary which reads the JSON definition and runs it), to address the cow
1054      trap issue and the fact that NSS is actually forbidden in
1055      forked-but-not-exec'ed children
1056   4. Add varlink API to run transient units based on provided JSON definitions
1058 * Add SUPPORT_END_URL= field to os-release with more *actionable* information
1059   what to do if support ended
1061 * pam_systemd: on interactive logins, maybe show SUPPORT_END information at
1062   login time, à la motd
1064 * sd-boot: instead of unconditionally deriving the ESP to search boot loader
1065   spec entries in from the paths of sd-boot binary, let's optionally allow it
1066   to be configured on sd-boot cmdline + efi var. Use case: embed sd-boot in the
1067   UEFI firmware (for example, ovmf supports that via qemu cmdline option), and
1068   use it to load stuff from the ESP.
1070 * mount /var/ from initrd, so that we can apply sysext and stuff before the
1071   initrd transition. Specifically:
1072   1. There should be a var= kernel cmdline option, matching root= and usr=
1073   2. systemd-gpt-auto-generator should auto-mount /var if it finds it on disk
1074   3. mount.x-initrd mount option in fstab should be implied for /var
1076 * make persistent restarts easier by adding a new setting OpenPersistentFile=
1077   or so, which allows opening one or more files that is "persistent" across
1078   service restarts, hot reboot, cold reboots (depending on configuration): the
1079   files are created empty on first invocation, and on subsequent invocations
1080   the files are reboot. The files would be backed by tmpfs, pmem or /var
1081   depending on desired level of persistency.
1083 * sd-event: add ability to "chain" event sources. Specifically, add a call
1084   sd_event_source_chain(x, y), which will automatically enable event source y
1085   in oneshot mode once x is triggered. Use case: in src/core/mount.c implement
1086   the /proc/self/mountinfo rescan on SIGCHLD with this: whenever a SIGCHLD is
1087   seen, trigger the rescan defer event source automatically, and allow it to be
1088   dispatched *before* the SIGCHLD is handled (based on priorities). Benefit:
1089   dispatch order is strictly controlled by priorities again. (next step: chain
1090   event sources to the ratelimit being over)
1092 * if we fork of a service with StandardOutput=journal, and it forks off a
1093   subprocess that quickly dies, we might not be able to identify the cgroup it
1094   comes from, but we can still derive that from the stdin socket its output
1095   came from. We apparently don't do that right now.
1097 * add ability to set hostname with suffix derived from machine id at boot
1099 * add PR_SET_DUMPABLE service setting
1101 * homed/userdb: maybe define a "companion" dir for home directories where apps
1102   can safely put privileged stuff in. Would not be writable by the user, but
1103   still conceptually belong to the user. Would be included in user's quota if
1104   possible, even if files are not owned by UID of user. Use case: container
1105   images that owned by arbitrary UIDs, and are owned/managed by the users, but
1106   are not directly belonging to the user's UID. Goal: we shouldn't place more
1107   privileged dirs inside of unprivileged dirs, and thus containers really
1108   should not be placed inside of traditional UNIX home dirs (which are owned by
1109   users themselves) but somewhere else, that is separate, but still close
1110   by. Inform user code about path to this companion dir via env var, so that
1111   container managers find it. the ~/.identity file is also a candidate for a
1112   file to move there, since it is managed by privileged code (i.e. homed) and
1113   not unprivileged code.
1115 * maybe add support for binding and connecting AF_UNIX sockets in the file
1116   system outside of the 108ch limit. When connecting, open O_PATH fd to socket
1117   inode first, then connect to /proc/self/fd/XYZ. When binding, create symlink
1118   to target dir in /tmp, and bind through it.
1120 * add a proper concept of a "developer" mode, i.e. where cryptographic
1121   protections of the root OS are weakened after interactive confirmation, to
1122   allow hackers to allow their own stuff. idea: allow entering developer mode
1123   only via explicit choice in boot menu: i.e. add explicit boot menu item for
1124   it. When developer mode is entered, generate a key pair in the TPM2, and add
1125   the public part of it automatically to keychain of valid code signature keys
1126   on subsequent boots. Then provide a tool to sign code with the key in the
1127   TPM2. Ensure that boot menu item is the only way to enter developer mode, by
1128   binding it to locality/PCRs so that keys cannot be generated otherwise.
1130 * services: add support for cryptographically unlocking per-service directories
1131   via TPM2. Specifically, for StateDirectory= (and related dirs) use fscrypt to
1132   set up the directory so that it can only be accessed if host and app are in
1133   order.
1135 * update HACKING.md to suggest developing systemd with the ideas from:
1136   https://0pointer.net/blog/testing-my-system-code-in-usr-without-modifying-usr.html
1137   https://0pointer.net/blog/running-an-container-off-the-host-usr.html
1139 * sd-event: compat wd reuse in inotify code: keep a set of removed watch
1140   descriptors, and clear this set piecemeal when we see the IN_IGNORED event
1141   for it, or when read() returns EAGAIN or on IN_Q_OVERFLOW. Then, whenever we
1142   see an inotify wd event check against this set, and if it is contained ignore
1143   the event. (to be fully correct this would have to count the occurrences, in
1144   case the same wd is reused multiple times before we start processing
1145   IN_IGNORED again)
1147 * for vendor-built signed initrds:
1148   - kernel-install should be able to install encrypted creds automatically for
1149     machine id, root pw, rootfs uuid, resume partition uuid, and place next to
1150     EFI kernel, for sd-stub to pick them up. These creds should be locked to
1151     the TPM, and bind to the right PCR the kernel is measured to.
1152   - kernel-install should be able to pick up initrd sysexts automatically and
1153     place them next to EFI kernel, for sd-stub to pick them up.
1154   - systemd-fstab-generator should look for rootfs device to mount in creds
1155   - systemd-resume-generator should look for resume partition uuid in creds
1156   - sd-stub: automatically pick up microcode from ESP (/loader/microcode/*)
1157     and synthesize initrd from it, and measure it. Signing is not necessary, as
1158     microcode does that on its own. Pass as first initrd to kernel.
1160 * Maybe extend the service protocol to support handling of some specific SIGRT
1161   signal for setting service log level, that carries the level via the
1162   sigqueue() data parameter. Enable this via unit file setting.
1164 * sd_notify/vsock: maybe support binding to AF_VSOCK in Type=notify services,
1165   then passing $NOTIFY_SOCKET and $NOTIFY_GUESTCID with PID1's cid (typically
1166   fixed to "2", i.e. the official host cid) and the expected guest cid, for the
1167   two sides of the channel. The latter env var could then be used in an
1168   appropriate qemu cmdline. That way qemu payloads could talk sd_notify()
1169   directly to host service manager.
1171 * sd-device has an API to create an sd_device object from a device id, but has
1172   no api to query the device id
1174 * sd-device should return the devnum type (i.e. 'b' or 'c') via some API for an
1175   sd_device object, so that data passed into sd_device_new_from_devnum() can
1176   also be queried.
1178 * sd-event: optionally, if per-event source rate limit is hit, downgrade
1179   priority, but leave enabled, and once ratelimit window is over, upgrade
1180   priority again. That way we can combat event source starvation without
1181   stopping processing events from one source entirely.
1183 * sd-event: similar to existing inotify support add fanotify support (given
1184   that apparently new features in this area are only going to be added to the
1185   latter).
1187 * sd-event: add 1st class event source for clock changes
1189 * sd-event: add 1st class event source for timezone changes
1191 * support uefi/http boots with sd-boot: instead of looking for dropin files in
1192   /loader/entries/ dir, look for a file /loader/entries/SHA256SUMS and use that
1193   as directory manifest. The file would be a standard directory listing as
1194   generated by GNU sha256sums.
1196 * sd-boot: maybe add support for embedding the various auxiliary resources we
1197   look for right in the sd-boot binary. i.e. take inspiration from sd-stub
1198   logic: allow combining sd-boot via ukify with kernels to enumerate, .conf
1199   files, drivers, keys to enroll and so on. Then, add whatever we find that way
1200   to the menu. Use case: allow building a single PE image you can boot into via
1201   UEFI HTTP boot.
1203 * maybe add a new UEFI stub binary "sd-http". It works similar to sd-stub, but
1204   all it does is download a file from a http server, and execute it, after
1205   optionally checking its hash sum. idea would be: combine this "sd-http" stub
1206   binary with some minimal info about a URL + hash sum, plus .osrel data, and
1207   drop it into the unified kernel dir in the ESP. And bam you have something
1208   that is tiny, feels a lot like a unified kernel, but all it does is chainload
1209   the real kernel. benefit: downloading these stubs would be tiny and quick,
1210   hence cheap for enumeration.
1212 * sysext: measure all activated sysext into a TPM PCR
1214 * systemd-dissect: show available versions inside of a disk image, i.e. if
1215   multiple versions are around of the same resource, show which ones. (in other
1216   words: show partition labels).
1218 * maybe add a generator that reads /proc/cmdline, looks for
1219   systemd.pull-raw-portable=, systemd-pull-raw-sysext= and similar switches
1220   that take a URL as parameter. It then generates service units for
1221   systemd-pull calls that download these URLs if not installed yet. Use case:
1222   invoke a VM or nspawn container in a way it automatically deploys/runs these
1223   images as OS payloads. i.e. have a generic OS image you can point to any
1224   payload you like, which is then downloaded, securely verified and run.
1226 * systemd-dissect: add --cat switch for dumping files such as /etc/os-release
1228 * per-service sandboxing option: ProtectIds=. If used, will overmount
1229   /etc/machine-id and /proc/sys/kernel/random/boot_id with synthetic files, to
1230   make it harder for the service to identify the host. Depending on the user
1231   setting it should be fully randomized at invocation time, or a hash of the
1232   real thing, keyed by the unit name or so. Of course, there are other ways to
1233   get these IDs (e.g. journal) or similar ids (e.g. MAC addresses, DMI ids, CPU
1234   ids), so this knob would only be useful in combination with other lockdown
1235   options. Particularly useful for portable services, and anything else that
1236   uses RootDirectory= or RootImage=. (Might also over-mount
1237   /sys/class/dmi/id/*{uuid,serial} with /dev/null).
1239 * doc: prep a document explaining resolved's internal objects, i.e. Query
1240   vs. Question vs. Transaction vs. Stream and so on.
1242 * doc: prep a document explaining PID 1's internal logic, i.e. transactions,
1243   jobs, units
1245 * bootspec: bring UEFI and userspace enumeration of bootspec entries back into
1246   sync, i.e. parse out architecture field in sd-boot (currently only done in
1247   userspace)
1249 * automatically ignore threaded cgroups in cg_xyz().
1251 * add linker script that implicitly adds symbol for build ID and new coredump
1252   json package metadata, and use that when logging
1254 * Enable RestrictFileSystems= for all our long-running services (similar:
1255   RestrictNetworkInterfaces=)
1257 * Add systemd-analyze security checks for RestrictFileSystems= and
1258   RestrictNetworkInterfaces=
1260 * cryptsetup/homed: implement TOTP authentication backed by TPM2 and its
1261   internal clock.
1263 * man: rework os-release(5), and clearly separate our extension-release.d/ and
1264   initrd-release parts, i.e. list explicitly which fields are about what.
1266 * sysext: before applying a sysext, do a superficial validation run so that
1267   things are not rearranged to wildy. I.e. protect against accidental fuckups,
1268   such as masking out /usr/lib/ or so. We should probably refuse if existing
1269   inodes are replaced by other types of inodes or so.
1271 * userdb: when synthesizing NSS records, pick "best" password from defined
1272   passwords, not just the first. i.e. if there are multiple defined, prefer
1273   unlocked over locked and prefer non-empty over empty.
1275 * homed: if the homed shell fallback thing has access to an SSH agent, try to
1276   use it to unlock home dir (if ssh-agent forwarding is enabled). We
1277   could implement SSH unlocking of a homedir with that: when enrolling a new
1278   ssh pubkey in a user record we'd ask the ssh-agent to sign some random value
1279   with the privkey, then use that as luks key to unlock the home dir. Will not
1280   work for ECDSA keys since their signatures contain a random component, but
1281   will work for RSA and Ed25519 keys.
1283 * add tiny service that decrypts encrypted user records passed via initrd
1284   credential logic and drops them into /run where nss-systemd can pick them up,
1285   similar to /run/host/userdb/. Use case: drop a root user JSON record there,
1286   and use it in the initrd to log in as root with locally selected password,
1287   for debugging purposes. Other use case: boot into qemu with regular user
1288   mounted from host. maybe put this in systemd-user-sessions.service?
1290 * drop dependency on libcap, replace by direct syscalls based on
1291   CapabilityQuintet we already have. (This likely allows us to drop libcap
1292   dep in the base OS image)
1294 * add concept for "exitrd" as inverse of "initrd", that we can transition to at
1295   shutdown, and has similar security semantics. This should then take the place
1296   of dracut's shutdown logic. Should probably support sysexts too. Care needs
1297   to be taken that the resulting logic ends up in RAM, i.e. is copied out of
1298   on-disk storage.
1300 * userdbd: implement an additional varlink service socket that provides the
1301   host user db in restricted form, then allow this to be bind mounted into
1302   sandboxed environments that want the host database in minimal form. All
1303   records would be stripped of all meta info, except the basic UID/name
1304   info. Then use this in portabled environments that do not use PrivateUsers=1.
1306 * portabled: when extracting unit files and copying to system.attached, if a
1307   .p7s is available in the image, use it to protect the system.attached copy
1308   with fs-verity, so that it cannot be tampered with
1310 * /etc/veritytab: allow that the roothash column can be specified as fs path
1311   including a path to an AF_UNIX path, similar to how we do things with the
1312   keys of /etc/crypttab. That way people can store/provide the roothash
1313   externally and provide to us on demand only.
1315 * we probably should extend the root verity hash of the root fs into some PCR
1316   on boot. (i.e. maybe add a veritytab option tpm2-measure=12 or so to measure
1317   it into PCR 12); Similar: we probably should extend the LUKS volume key of
1318   the root fs into some PCR on boot. (i.e. maybe add a crypttab option
1319   tpm2-measure=15 or so to measure it into PCR 15); once both are in place
1320   update gpt-auto-discovery to generate these by default for the partitions it
1321   discovers. Static vendor stuff should probably end up in PCR 12 (i.e. the
1322   verity hash), with local keys in PCR 15 (i.e. the encryption volume
1323   key). That way, we nicely distinguish resources supplied by the OS vendor
1324   (i.e. sysext, root verity) from those inherently local (i.e. encryption key),
1325   which is useful if they shall be signed separately.
1327 * in uefi stub: query firmware regarding which PCR banks are being used, store
1328   that in EFI var. then use this when enrolling TPM2 in cryptsetup to verify
1329   that the selected PCRs actually are used by firmware.
1331 * rework recursive read-only remount to use new mount API
1333 * PAM: pick up authentication token from credentials
1335 * when mounting disk images: if IMAGE_ID/IMAGE_VERSION is set in os-release
1336   data in the image, make sure the image filename actually matches this, so
1337   that images cannot be misused.
1339 * New udev block device symlink names:
1340   /dev/disk/by-parttypelabel/<pttype>-<ptlabel>. Use case: if pt label is used
1341   as partition image version string, this is a safe way to reference a specific
1342   version of a specific partition type, in particular where related partitions
1343   are processed (e.g. verity + rootfs both named "LennartOS_0.7").
1345 * sysupdate:
1346   - add fuzzing to the pattern parser
1347   - support casync as download mechanism
1348   - "systemd-sysupdate update --all" support, that iterates through all components
1349     defined on the host, plus all images installed into /var/lib/machines/,
1350     /var/lib/portable/ and so on.
1351   - figure out what to do about system extensions (i.e. they need to imply an
1352     update component, since otherwise sysupdate.d/ files would override the
1353     host's update files.)
1354   - Allow invocation with a single transfer definition, i.e. with
1355     --definitions= pointing to a file rather than a dir.
1356   - add ability to disable implicit decompression of downloaded artifacts,
1357     i.e. a Compress=no option in the transfer definitions
1359 * in sd-id128: also parse UUIDs in RFC4122 URN syntax (i.e. chop off urn:uuid: prefix)
1361 * DynamicUser= + StateDirectory= → use uid mapping mounts, too, in order to
1362   make dirs appear under right UID.
1364 * systemd-sysext: optionally, run it in initrd already, before transitioning
1365   into host, to open up possibility for services shipped like that.
1367 * introduce /dev/disk/root/* symlinks that allow referencing partitions on the
1368   disk the rootfs is on in a reasonably secure way. (or maybe: add
1369   /dev/gpt-auto-{home,srv,boot,…} similar in style to /dev/gpt-auto-root as we
1370   already have it.
1372 * whenever we receive fds via SCM_RIGHTS make sure none got dropped due to the
1373   reception limit the kernel silently enforces.
1375 * Add service unit setting ConnectStream= which takes IP addresses and connects to them.
1377 * Similar, Load= which takes literal data in text or base64 format, and puts it
1378   into a memfd, and passes that. This enables some fun stuff, such as embedding
1379   bash scripts in unit files, by combining Load= with ExecStart=/bin/bash
1380   /proc/self/fd/3
1382 * add a ConnectSocket= setting to service unit files, that may reference a
1383   socket unit, and which will connect to the socket defined therein, and pass
1384   the resulting fd to the service program via socket activation proto.
1386 * Add a concept of ListenStream=anonymous to socket units: listen on a socket
1387   that is deleted in the fs. Use case would be with ConnectSocket= above.
1389 * importd: support image signature verification with PKCS#7 + OpenBSD signify
1390   logic, as alternative to crummy gpg
1392 * add "systemd-analyze debug" + AttachDebugger= in unit files: The former
1393   specifies a command to execute; the latter specifies that an already running
1394   "systemd-analyze debug" instance shall be contacted and execution paused
1395   until it gives an OK. That way, tools like gdb or strace can be safely be
1396   invoked on processes forked off PID 1.
1398 * expose MS_NOSYMFOLLOW in various places
1400 * credentials system:
1401   - acquire from EFI variable?
1402   - acquire via ask-password?
1403   - acquire creds via keyring?
1404   - pass creds via keyring?
1405   - pass creds via memfd?
1406   - acquire + decrypt creds from pkcs11?
1407   - make PAMName= acquire pw via creds logic
1408   - make macsec code in networkd read key via creds logic (copy logic from
1409     wireguard)
1410   - make gatewayd/remote read key via creds logic
1411   - add sd_notify() command for flushing out creds not needed anymore
1413 * TPM2: auto-reenroll in cryptsetup, as fallback for hosed firmware upgrades
1414   and such
1416 * introduce a new group to own TPM devices
1418 * cryptsetup: add option for automatically removing empty password slot on boot
1420 * cryptsetup: optionally, when run during boot-up and password is never
1421   entered, and we are on battery power (or so), power off machine again
1423 * cryptsetup: when waiting for FIDO2/PKCS#11 token, tell plymouth that, and
1424   allow plymouth to abort the waiting and enter pw instead
1426 * make cryptsetup lower --iter-time
1428 * cryptsetup: allow encoding key directly in /etc/crypttab, maybe with a
1429   "base64:" prefix. Useful in particular for pkcs11 mode.
1431 * cryptsetup: reimplement the mkswap/mke2fs in cryptsetup-generator to use
1432   systemd-makefs.service instead.
1434 * cryptsetup:
1435   - cryptsetup-generator: allow specification of passwords in crypttab itself
1436   - support rd.luks.allow-discards= kernel cmdline params in cryptsetup generator
1438 * systemd-analyze netif that explains predictable interface (or networkctl)
1440 * Figure out naming of verbs in systemd-analyze: we have (singular) capability,
1441   exit-status, but (plural) filesystems, architectures.
1443 * Add service setting to run a service within the specified VRF. i.e. do the
1444   equivalent of "ip vrf exec".
1446 * special case some calls of chase() to use openat2() internally, so
1447   that the kernel does what we otherwise do.
1449 * add a new flag to chase() that stops chasing once the first missing
1450   component is found and then allows the caller to create the rest.
1452 * make use of new glibc 2.32 APIs sigabbrev_np() and strerrorname_np().
1454 * if /usr/bin/swapoff fails due to OOM, log a friendly explanatory message about it
1456 * pid1: also remove PID files of a service when the service starts, not just
1457   when it exits
1459 * make us use dynamically fewer deps for containers in general purpose distros:
1460   o turn into dlopen() deps:
1461     - libblkid (only in RootImage= handling in PID 1, but not elsewhere)
1462     - libpam (only when called from PID 1)
1464 * seccomp: maybe use seccomp_merge() to merge our filters per-arch if we can.
1465   Apparently kernel performance is much better with fewer larger seccomp
1466   filters than with more smaller seccomp filters.
1468 * systemd-path: Add "private" runtime/state/cache dir enum, mapping to
1469   $RUNTIME_DIRECTORY, $STATE_DIRECTORY and such
1471 * seccomp: by default mask x32 ABI system wide on x86-64. it's on its way out
1473 * seccomp: don't install filters for ABIs that are masked anyway for the
1474   specific service
1476 * busctl: maybe expose a verb "ping" for pinging a dbus service to see if it
1477   exists and responds.
1479 * socket units: allow creating a udev monitor socket with ListenDevices= or so,
1480   with matches, then activate app through that passing socket over
1482 * unify on openssl:
1483   - kill gnutls support in resolved
1484   - figure out what to do about libmicrohttpd, which has a hard dependency on
1485     gnutls
1486   - port fsprg over to a dlopen lib, then switch it to openssl
1488 * add growvol and makevol options for /etc/crypttab, similar to
1489   x-systemd.growfs and x-systemd-makefs.
1491 * userdb: allow username prefix searches in varlink API, allow realname and
1492   realname substr searches in varlink API
1494 * userdb: allow uid/gid range checks
1496 * userdb: allow existence checks
1498 * pid1: activation by journal search expression
1500 * when switching root from initrd to host, set the machine_id env var so that
1501   if the host has no machine ID set yet we continue to use the random one the
1502   initrd had set.
1504 * sd-event: add native support for P_ALL waitid() watching, then move PID 1 to
1505   it for reaping assigned but unknown children. This needs to some special care
1506   to operate somewhat sensibly in light of priorities: P_ALL will return
1507   arbitrary processes, regardless of the priority we want to watch them with,
1508   hence on each event loop iteration check all processes which we shall watch
1509   with higher prio explicitly, and then watch the entire rest with P_ALL.
1511 * tweak sd-event's child watching: keep a prioq of children to watch and use
1512   waitid() only on the children with the highest priority until one is waitable
1513   and ignore all lower-prio ones from that point on
1515 * maybe introduce xattrs that can be set on the root dir of the root fs
1516   partition that declare the volatility mode to use the image in. Previously I
1517   thought marking this via GPT partition flags but that's not ideal since
1518   that's outside of the LUKS encryption/verity verification, and we probably
1519   shouldn't operate in a volatile mode unless we got told so from a trusted
1520   source.
1522 * coredump: maybe when coredumping read a new xattr from /proc/$PID/exe that
1523   may be used to mark a whole binary as non-coredumpable. Would fix:
1524   https://bugs.freedesktop.org/show_bug.cgi?id=69447
1526 * teach parse_timestamp() timezones like the calendar spec already knows it
1528 * We should probably replace /etc/rc.d/README with a symlink to doc
1529   content. After all it is constant vendor data.
1531 * maybe add kernel cmdline params: to force random seed crediting
1533 * introduce a new per-process uuid, similar to the boot id, the machine id, the
1534   invocation id, that is derived from process creds, specifically a hashed
1535   combination of AT_RANDOM + getpid() + the starttime from
1536   /proc/self/status. Then add these ids implicitly when logging. Deriving this
1537   uuid from these three things has the benefit that it can be derived easily
1538   from /proc/$PID/ in a stable, and unique way that changes on both fork() and
1539   exec().
1541 * let's not GC a unit while its ratelimits are still pending
1543 * when killing due to service watchdog timeout maybe detect whether target
1544   process is under ptracing and then log loudly and continue instead.
1546 * make rfkill uaccess controllable by default, i.e. steal rule from
1547   gnome-bluetooth and friends
1549 * make MAINPID= message reception checks even stricter: if service uses User=,
1550   then check sending UID and ignore message if it doesn't match the user or
1551   root.
1553 * maybe trigger a uevent "change" on a device if "systemctl reload xyz.device"
1554   is issued.
1556 * when importing an fs tree with machined, optionally apply userns-rec-chown
1558 * when importing an fs tree with machined, complain if image is not an OS
1560 * Maybe introduce a helper safe_exec() or so, which is to execve() which
1561   safe_fork() is to fork(). And then make revert the RLIMIT_NOFILE soft limit
1562   to 1K implicitly, unless explicitly opted-out.
1564 * rework seccomp/nnp logic that even if User= is used in combination with
1565   a seccomp option we don't have to set NNP. For that, change uid first whil
1566   keeping CAP_SYS_ADMIN, then apply seccomp, the drop cap.
1568 * when no locale is configured, default to UEFI's PlatformLang variable
1570 * add a new syscall group "@esoteric" for more esoteric stuff such as bpf() and
1571   usefaultd() and make systemd-analyze check for it.
1573 * paranoia: whenever we process passwords, call mlock() on the memory
1574   first. i.e. look for all places we use free_and_erasep() and
1575   augment them with mlock(). Also use MADV_DONTDUMP.
1576   Alternatively (preferably?) use memfd_secret().
1578 * Move RestrictAddressFamily= to the new cgroup create socket
1580 * optionally: turn on cgroup delegation for per-session scope units
1582 * sd-boot: optionally, show boot menu when previous default boot item has
1583   non-zero "tries done" count
1585 * augment CODE_FILE=, CODE_LINE= with something like CODE_BASE= or so which
1586   contains some identifier for the project, which allows us to include
1587   clickable links to source files generating these log messages. The identifier
1588   could be some abberviated URL prefix or so (taking inspiration from Go
1589   imports). For example, for systemd we could use
1590   CODE_BASE=github.com/systemd/systemd/blob/98b0b1123cc or so which is
1591   sufficient to build a link by prefixing "http://" and suffixing the
1592   CODE_FILE.
1594 * Augment MESSAGE_ID with MESSAGE_BASE, in a similar fashion so that we can
1595   make clickable links from log messages carrying a MESSAGE_ID, that lead to
1596   some explanatory text online.
1598 * maybe extend .path units to expose fanotify() per-mount change events
1600 * hibernate/s2h: if swap is on weird storage and refuse if so
1602 * cgroups: use inotify to get notified when somebody else modifies cgroups
1603   owned by us, then log a friendly warning.
1605 * beef up log.c with support for stripping ANSI sequences from strings, so that
1606   it is OK to include them in log strings. This would be particularly useful so
1607   that our log messages could contain clickable links for example for unit
1608   files and suchlike we operate on.
1610 * add support for "portablectl attach http://foobar.com/waaa.raw (i.e. importd integration)
1612 * sync dynamic uids/gids between host+portable srvice (i.e. if DynamicUser=1 is set for a service, make sure that the
1613   selected user is resolvable in the service even if it ships its own /etc/passwd)
1615 * Fix DECIMAL_STR_MAX or DECIMAL_STR_WIDTH. One includes a trailing NUL, the
1616   other doesn't. What a disaster. Probably to exclude it.
1618 * Check that users of inotify's IN_DELETE_SELF flag are using it properly, as
1619   usually IN_ATTRIB is the right way to watch deleted files, as the former only
1620   fires when a file is actually removed from disk, i.e. the link count drops to
1621   zero and is not open anymore, while the latter happens when a file is
1622   unlinked from any dir.
1624 * port systemctl, busctl, … over to format-table.[ch]'s table formatters
1626 * pid1: lock image configured with RootDirectory=/RootImage= using the usual nspawn semantics while the unit is up
1628 * add --vacuum-xyz options to coredumpctl, matching those journalctl already has.
1630 * add CopyFile= or so as unit file setting that may be used to copy files or
1631   directory trees from the host to the services RootImage= and RootDirectory=
1632   environment. Which we can use for /etc/machine-id and in particular
1633   /etc/resolv.conf. Should be smart and do something useful on read-only
1634   images, for example fall back to read-only bind mounting the file instead.
1636 * bypass SIGTERM state in unit files if KillSignal is SIGKILL
1638 * add proper dbus APIs for the various sd_notify() commands, such as MAINPID=1
1639   and so on, which would mean we could report errors and such.
1641 * introduce DefaultSlice= or so in system.conf that allows changing where we
1642   place our units by default, i.e. change system.slice to something
1643   else. Similar, ManagerSlice= should exist so that PID1's own scope unit could
1644   be moved somewhere else too. Finally machined and logind should get similar
1645   options so that it is possible to move user session scopes and machines to a
1646   different slice too by default. Use case: people who want to put resources on
1647   the entire system, with the exception of one specific service. See:
1648   https://lists.freedesktop.org/archives/systemd-devel/2018-February/040369.html
1650 * maybe rework get_user_creds() to query the user database if $SHELL is used
1651   for root, but only then.
1653 * calenderspec: add support for week numbers and day numbers within a
1654   year. This would allow us to define "bi-weekly" triggers safely.
1656 * sd-bus: add vtable flag, that may be used to request client creds implicitly
1657   and asynchronously before dispatching the operation
1659 * sd-bus: parse addresses given in sd_bus_set_addresses immediately and not
1660   only when used. Add unit tests.
1662 * make use of ethtool veth peer info in machined, for automatically finding out
1663   host-side interface pointing to the container.
1665 * add some special mode to LogsDirectory=/StateDirectory=… that allows
1666   declaring these directories without necessarily pulling in deps for them, or
1667   creating them when starting up. That way, we could declare that
1668   systemd-journald writes to /var/log/journal, which could be useful when we
1669   doing disk usage calculations and so on.
1671 * deprecate RootDirectoryStartOnly= in favour of a new ExecStart= prefix char
1673 * support projid-based quota in machinectl for containers
1675 * add a way to lock down cgroup migration: a boolean, which when set for a unit
1676   makes sure the processes in it can never migrate out of it
1678 * blog about fd store and restartable services
1680 * document Environment=SYSTEMD_LOG_LEVEL=debug drop-in in debugging document
1682 * rework ExecOutput and ExecInput enums so that EXEC_OUTPUT_NULL loses its
1683   magic meaning and is no longer upgraded to something else if set explicitly.
1685 * in the long run: permit a system with /etc/machine-id linked to /dev/null, to
1686   make it lose its identity, i.e. be anonymous. For this we'd have to patch
1687   through the whole tree to make all code deal with the case where no machine
1688   ID is available.
1690 * optionally, collect cgroup resource data, and store it in per-unit RRD files,
1691   suitable for processing with rrdtool. Add bus API to access this data, and
1692   possibly implement a CPULoad property based on it.
1694 * beef up pam_systemd to take unit file settings such as cgroups properties as
1695   parameters
1697 * maybe hook up xfs/ext4 quotactl() with services? i.e. automatically manage
1698   the quota of the user indicated in User= via unit file settings, like the
1699   other resource management concepts. Would mix nicely with DynamicUser=1. Or
1700   alternatively, do this with projids, so that we can also cover services
1701   running as root. Quota should probably cover all the special dirs such as
1702   StateDirectory=, LogsDirectory=, CacheDirectory=, as well as RootDirectory= if it
1703   is set, plus the whole disk space any image configured with RootImage=.
1705 * In DynamicUser= mode: before selecting a UID, use disk quota APIs on relevant
1706   disks to see if the UID is already in use.
1708 * Add AddUser= setting to unit files, similar to DynamicUser=1 which however
1709   creates a static, persistent user rather than a dynamic, transient user. We
1710   can leverage code from sysusers.d for this.
1712 * add some optional flag to ReadWritePaths= and friends, that has the effect
1713   that we create the dir in question when the service is started. Example:
1715   ReadWritePaths=:/var/lib/foobar
1717 * Add ExecMonitor= setting. May be used multiple times. Forks off a process in
1718   the service cgroup, which is supposed to monitor the service, and when it
1719   exits the service is considered failed by its monitor.
1721 * track the per-service PAM process properly (i.e. as an additional control
1722   process), so that it may be queried on the bus and everything.
1724 * add a new "debug" job mode, that is propagated to unit_start() and for
1725   services results in two things: we raise SIGSTOP right before invoking
1726   execve() and turn off watchdog support. Then, use that to implement
1727   "systemd-gdb" for attaching to the start-up of any system service in its
1728   natural habitat.
1730 * gpt-auto logic: support encrypted swap, add kernel cmdline option to force
1731   it, and honour a gpt bit about it, plus maybe a configuration file
1733 * add a percentage syntax for TimeoutStopSec=, e.g. TimeoutStopSec=150%, and
1734   then use that for the setting used in user@.service. It should be understood
1735   relative to the configured default value.
1737 * enable LockMLOCK to take a percentage value relative to physical memory
1739 * Permit masking specific netlink APIs with RestrictAddressFamily=
1741 * define gpt header bits to select volatility mode
1743 * ProtectClock= (drops CAP_SYS_TIMES, adds seecomp filters for settimeofday, adjtimex), sets DeviceAllow o /dev/rtc
1745 * ProtectTracing= (drops CAP_SYS_PTRACE, blocks ptrace syscall, makes /sys/kernel/tracing go away)
1747 * ProtectMount= (drop mount/umount/pivot_root from seccomp, disallow fuse via DeviceAllow, imply Mountflags=slave)
1749 * ProtectKeyRing= to take keyring calls away
1751 * RemoveKeyRing= to remove all keyring entries of the specified user
1753 * ProtectReboot= that masks reboot() and kexec_load() syscalls, prohibits kill
1754   on PID 1 with the relevant signals, and makes relevant files in /sys and
1755   /proc (such as the sysrq stuff) unavailable
1757 * Support ReadWritePaths/ReadOnlyPaths/InaccessiblePaths in systemd --user instances
1758   via the new unprivileged Landlock LSM (https://landlock.io)
1760 * make sure the ratelimit object can deal with USEC_INFINITY as way to turn off things
1762 * in nss-systemd, if we run inside of RootDirectory= with PrivateUsers= set,
1763   find a way to map the User=/Group= of the service to the right name. This way
1764   a user/group for a service only has to exist on the host for the right
1765   mapping to work.
1767 * add bus API for creating unit files in /etc, reusing the code for transient units
1769 * add bus API to remove unit files from /etc
1771 * add bus API to retrieve current unit file contents (i.e. implement "systemctl cat" on the bus only)
1773 * rework fopen_temporary() to make use of open_tmpfile_linkable() (problem: the
1774   kernel doesn't support linkat() that replaces existing files, currently)
1776 * transient units: don't bother with actually setting unit properties, we
1777   reload the unit file anyway
1779 * optionally, also require WATCHDOG=1 notifications during service start-up and shutdown
1781 * cache sd_event_now() result from before the first iteration...
1783 * PID1: find a way how we can reload unit file configuration for
1784   specific units only, without reloading the whole of systemd
1786 * add an explicit parser for LimitRTPRIO= that verifies
1787   the specified range and generates sane error messages for incorrect
1788   specifications.
1790 * when we detect that there are waiting jobs but no running jobs, do something
1792 * PID 1 should send out sd_notify("WATCHDOG=1") messages (for usage in the --user mode, and when run via nspawn)
1794 * there's probably something wrong with having user mounts below /sys,
1795   as we have for debugfs. for example, src/core/mount.c handles mounts
1796   prefixed with /sys generally special.
1797   https://lists.freedesktop.org/archives/systemd-devel/2015-June/032962.html
1799 * fstab-generator: default to tmpfs-as-root if only usr= is specified on the kernel cmdline
1801 * docs: bring https://www.freedesktop.org/wiki/Software/systemd/MyServiceCantGetRealtime up to date
1803 * add a job mode that will fail if a transaction would mean stopping
1804   running units. Use this in timedated to manage the NTP service
1805   state.
1806   https://lists.freedesktop.org/archives/systemd-devel/2015-April/030229.html
1808 * The udev blkid built-in should expose a property that reflects
1809   whether media was sensed in USB CF/SD card readers. This should then
1810   be used to control SYSTEMD_READY=1/0 so that USB card readers aren't
1811   picked up by systemd unless they contain a medium. This would mirror
1812   the behaviour we already have for CD drives.
1814 * hostnamectl: show root image uuid
1816 * Find a solution for SMACK capabilities stuff:
1817   https://lists.freedesktop.org/archives/systemd-devel/2014-December/026188.html
1819 * synchronize console access with BSD locks:
1820   https://lists.freedesktop.org/archives/systemd-devel/2014-October/024582.html
1822 * as soon as we have sender timestamps, revisit coalescing multiple parallel daemon reloads:
1823   https://lists.freedesktop.org/archives/systemd-devel/2014-December/025862.html
1825 * figure out when we can use the coarse timers
1827 * maybe allow timer units with an empty Units= setting, so that they
1828   can be used for resuming the system but nothing else.
1830 * what to do about udev db binary stability for apps? (raw access is not an option)
1832 * exponential backoff in timesyncd when we cannot reach a server
1834 * timesyncd: add ugly bus calls to set NTP servers per-interface, for usage by NM
1836 * add systemd.abort_on_kill or some other such flag to send SIGABRT instead of SIGKILL
1837   (throughout the codebase, not only PID1)
1839 * drop nss-myhostname in favour of nss-resolve?
1841 * resolved:
1842   - mDNS/DNS-SD
1843         - service registration
1844         - service/domain/types browsing
1845         - avahi compat
1846   - DNS-SD service registration from socket units
1847   - resolved should optionally register additional per-interface LLMNR
1848     names, so that for the container case we can establish the same name
1849     (maybe "host") for referencing the server, everywhere.
1850   - allow clients to request DNSSEC for a single lookup even if DNSSEC is off (?)
1851   - hook up resolved with machined-based address resolution
1853 * refcounting in sd-resolve is borked
1855 * add new gpt type for btrfs volumes
1857 * generator that automatically discovers btrfs subvolumes, identifies their purpose based on some xattr on them.
1859 * a way for container managers to turn off getty starting via $container_headless= or so...
1861 * figure out a nice way how we can let the admin know what child/sibling unit causes cgroup membership for a specific unit
1863 * For timer units: add some mechanisms so that timer units that trigger immediately on boot do not have the services
1864   they run added to the initial transaction and thus confuse Type=idle.
1866 * add bus api to query unit file's X fields.
1868 * gpt-auto-generator:
1869   - Define new partition type for encrypted swap? Support probed LUKS for encrypted swap?
1870   - Make /home automount rather than mount?
1872 * add generator that pulls in systemd-network from containers when
1873   CAP_NET_ADMIN is set, more than the loopback device is defined, even
1874   when it is otherwise off
1876 * MessageQueueMessageSize= (and suchlike) should use parse_iec_size().
1878 * implement Distribute= in socket units to allow running multiple
1879   service instances processing the listening socket, and open this up
1880   for ReusePort=
1882 * cgroups:
1883   - implement per-slice CPUFairScheduling=1 switch
1884   - introduce high-level settings for RT budget, swappiness
1885   - how to reset dynamically changed unit cgroup attributes sanely?
1886   - when reloading configuration, apply new cgroup configuration
1887   - when recursively showing the cgroup hierarchy, optionally also show
1888     the hierarchies of child processes
1889   - add settings for cgroup.max.descendants and cgroup.max.depth,
1890     maybe use them for user@.service
1892 * transient units:
1893   - add field to transient units that indicate whether systemd or somebody else saves/restores its settings, for integration with libvirt
1895 * libsystemd-journal, libsystemd-login, libudev: add calls to easily attach these objects to sd-event event loops
1897 * be more careful what we export on the bus as (usec_t) 0 and (usec_t) -1
1899 * rfkill,backlight: we probably should run the load tools inside of the udev rules so that the state is properly initialized by the time other software sees it
1901 * If we try to find a unit via a dangling symlink, generate a clean
1902   error. Currently, we just ignore it and read the unit from the search
1903   path anyway.
1905 * refuse boot if /usr/lib/os-release is missing or /etc/machine-id cannot be set up
1907 * man: the documentation of Restart= currently is very misleading and suggests the tools from ExecStartPre= might get restarted.
1909 * There's currently no way to cancel fsck (used to be possible via C-c or c on the console)
1911 * add option to sockets to avoid activation. Instead just drop packets/connections, see http://cyberelk.net/tim/2012/02/15/portreserve-systemd-solution/
1913 * make sure systemd-ask-password-wall does not shutdown systemd-ask-password-console too early
1915 * verify that the AF_UNIX sockets of a service in the fs still exist
1916   when we start a service in order to avoid confusion when a user
1917   assumes starting a service is enough to make it accessible
1919 * Make it possible to set the keymap independently from the font on
1920   the kernel cmdline. Right now setting one resets also the other.
1922 * and a dbus call to generate target from current state
1924 * investigate whether the gnome pty helper should be moved into systemd, to provide cgroup support.
1926 * dot output for --test showing the 'initial transaction'
1928 * be able to specify a forced restart of service A where service B depends on, in case B
1929   needs to be auto-respawned?
1931 * pid1:
1932   - When logging about multiple units (stopping BoundTo units, conflicts, etc.),
1933     log both units as UNIT=, so that journalctl -u triggers on both.
1934   - generate better errors when people try to set transient properties
1935     that are not supported...
1936     https://lists.freedesktop.org/archives/systemd-devel/2015-February/028076.html
1937   - recreate systemd's D-Bus private socket file on SIGUSR2
1938   - when we automatically restart a service, ensure we restart its rdeps, too.
1939   - hide PAM options in fragment parser when compile time disabled
1940   - Support --test based on current system state
1941   - If we show an error about a unit (such as not showing up) and it has no Description string, then show a description string generated form the reverse of unit_name_mangle().
1942   - after deserializing sockets in socket.c we should reapply sockopts and things
1943   - drop PID 1 reloading, only do reexecing (difficult: Reload()
1944     currently is properly synchronous, Reexec() is weird, because we
1945     cannot delay the response properly until we are back, so instead of
1946     being properly synchronous we just keep open the fd and close it
1947     when done. That means clients do not get a successful method reply,
1948     but much rather a disconnect on success.
1949   - when breaking cycles drop sysv services first, then services from /run, then from /etc, then from /usr
1950   - when a bus name of a service disappears from the bus make sure to queue further activation requests
1951   - maybe introduce CoreScheduling=yes/no to optionally set a PR_SCHED_CORE cookie, so that all
1952     processes in a service's cgroup share the same cookie and are guaranteed not to share SMT cores
1953     with other units https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/tree/Documentation/admin-guide/hw-vuln/core-scheduling.rst
1955 * unit files:
1956   - allow port=0 in .socket units
1957   - maybe introduce ExecRestartPre=
1958   - implement Register= switch in .socket units to enable registration
1959     in Avahi, RPC and other socket registration services.
1960   - allow Type=simple with PIDFile=
1961     https://bugzilla.redhat.com/show_bug.cgi?id=723942
1962   - allow writing multiple conditions in unit files on one line
1963   - introduce Type=pid-file
1964   - add a concept of RemainAfterExit= to scope units
1965   - Allow multiple ExecStart= for all Type= settings, so that we can cover rescue.service nicely
1966   - add verification of [Install] section to systemd-analyze verify
1968 * timer units:
1969   - timer units should get the ability to trigger when DST changes
1970   - Modulate timer frequency based on battery state
1972 * add libsystemd-password or so to query passwords during boot using the password agent logic
1974 * clean up date formatting and parsing so that all absolute/relative timestamps we format can also be parsed
1976 * on shutdown: move utmp, wall, audit logic all into PID 1 (or logind?), get rid of systemd-update-utmp-runlevel
1978 * make repeated alt-ctrl-del presses printing a dump
1980 * currently x-systemd.timeout is lost in the initrd, since crypttab is copied into dracut, but fstab is not
1982 * add a pam module that on password changes updates any LUKS slot where the password matches
1984 * test/:
1985   - add unit tests for config_parse_device_allow()
1987 * seems that when we follow symlinks to units we prefer the symlink
1988   destination path over /etc and /usr. We should not do that. Instead
1989   /etc should always override /run+/usr and also any symlink
1990   destination.
1992 * when isolating, try to figure out a way how we implicitly can order
1993   all units we stop before the isolating unit...
1995 * teach ConditionKernelCommandLine= globs or regexes (in order to match foobar={no,0,off})
1997 * Add ConditionDirectoryNotEmpty= handle non-absoute paths as a search path or add
1998   ConditionConfigSearchPathNotEmpty= or different syntax? See the discussion starting at
1999   https://github.com/systemd/systemd/pull/15109#issuecomment-607740136.
2001 * BootLoaderSpec: Define a way how an installer can figure out whether a BLS
2002   compliant boot loader is installed.
2004 * think about requeuing jobs when daemon-reload is issued? use case:
2005   the initrd issues a reload after fstab from the host is accessible
2006   and we might want to requeue the mounts local-fs acquired through
2007   that automatically.
2009 * systemd-inhibit: make taking delay locks useful: support sending SIGINT or SIGTERM on PrepareForSleep()
2011 * remove any syslog support from log.c — we probably cannot do this before split-off udev is gone for good
2013 * shutdown logging: store to EFI var, and store to USB stick?
2015 * merge unit_kill_common() and unit_kill_context()
2017 * add a dependency on standard-conf.xml and other included files to man pages
2019 * MountFlags=shared acts as MountFlags=slave right now.
2021 * properly handle loop back mounts via fstab, especially regards to fsck/passno
2023 * initialize the hostname from the fs label of /, if /etc/hostname does not exist?
2025 * sd-bus:
2026   - EBADSLT handling
2027   - GetAllProperties() on a non-existing object does not result in a failure currently
2028   - port to sd-resolve for connecting to TCP dbus servers
2029   - see if we can introduce a new sd_bus_get_owner_machine_id() call to retrieve the machine ID of the machine of the bus itself
2030   - see if we can drop more message validation on the sending side
2031   - add API to clone sd_bus_message objects
2032   - longer term: priority inheritance
2033   - dbus spec updates:
2034        - NameLost/NameAcquired obsolete
2035        - path escaping
2036   - update systemd.special(7) to mention that dbus.socket is only about the compatibility socket now
2038 * sd-event
2039   - allow multiple signal handlers per signal?
2040   - document chaining of signal handler for SIGCHLD and child handlers
2041   - define more intervals where we will shift wakeup intervals around in, 1h, 6h, 24h, ...
2042   - maybe support iouring as backend, so that we allow hooking read and write
2043     operations instead of IO ready events into event loops. See considerations
2044     here:
2045     http://blog.vmsplice.net/2020/07/rethinking-event-loop-integration-for.html
2047 * dbus: when a unit failed to load (i.e. is in UNIT_ERROR state), we
2048   should be able to safely try another attempt when the bus call LoadUnit() is invoked.
2050 * document org.freedesktop.MemoryAllocation1
2052 * maybe do not install getty@tty1.service symlink in /etc but in /usr?
2054 * print a nicer explanation if people use variable/specifier expansion in ExecStart= for the first word
2056 * mount: turn dependency information from /proc/self/mountinfo into dependency information between systemd units.
2058 * EFI:
2059   - honor language efi variables for default language selection (if there are any?)
2060   - honor timezone efi variables for default timezone selection (if there are any?)
2061   - change bootctl to be backed by systemd-bootd to control temporary and persistent default boot goal plus efi variables
2062 * bootctl
2063   - recognize the case when not booted on EFI
2065 * bootctl,sd-boot: actually honour the "architecture" key
2067 * bootctl:
2068   - show whether UEFI audit mode is available
2069   - teach it to prepare an ESP wholesale, i.e. with mkfs.vfat invocation
2070   - teach it to copy in unified kernel images and maybe type #1 boot loader spec entries from host
2072 * logind:
2073   - logind: optionally, ignore idle-hint logic for autosuspend, block suspend as long as a session is around
2074   - logind: wakelock/opportunistic suspend support
2075   - Add pretty name for seats in logind
2076   - logind: allow showing logout dialog from system?
2077   - add Suspend() bus calls which take timestamps to fix double suspend issues when somebody hits suspend and closes laptop quickly.
2078   - if pam_systemd is invoked by su from a process that is outside of a
2079     any session we should probably just become a NOP, since that's
2080     usually not a real user session but just some system code that just
2081     needs setuid().
2082   - logind: make the Suspend()/Hibernate() bus calls wait for the for
2083     the job to be completed. before returning, so that clients can wait
2084     for "systemctl suspend" to finish to know when the suspending is
2085     complete.
2086   - logind: when the power button is pressed short, just popup a
2087     logout dialog. If it is pressed for 1s, do the usual
2088     shutdown. Inspiration are Macs here.
2089   - expose "Locked" property on logind session objects
2090   - maybe allow configuration of the StopTimeout for session scopes
2091   - rename session scope so that it includes the UID. THat way
2092     the session scope can be arranged freely in slices and we don't have
2093     make assumptions about their slice anymore.
2094   - follow PropertiesChanged state more closely, to deal with quick logouts and
2095     relogins
2096   - (optionally?) spawn seat-manager@$SEAT.service whenever a seat shows up that as CanGraphical set
2097   - expose details of boot entries on the bus. In particular, it should be possible
2098     to query the list of boot entry titles that bootctl / sd-boot would show.
2099     Currently we only expose their identifiers.
2101 * move multiseat vid/pid matches from logind udev rule to hwdb
2103 * logind: rework pam_logind to also do a bus call in case of invocation from
2104   user@.service, which returns the XDG_RUNTIME_DIR value, and make this
2105   behaviour selectable via pam module option.
2107 * delay activation of logind until somebody logs in, or when /dev/tty0 pulls it
2108   in or lingering is on (so that containers don't bother with it until PAM is used). also exit-on-idle
2110 * journal:
2111   - consider introducing implicit _TTY= + _PPID= + _EUID= + _EGID= + _FSUID= + _FSGID= fields
2112   - journald: also get thread ID from client, plus thread name
2113   - journal: when waiting for journal additions in the client always sleep at least 1s or so, in order to minimize wakeups
2114   - add API to close/reopen/get fd for journal client fd in libsystemd-journal.
2115   - fall back to /dev/log based logging in libsystemd-journal, if we cannot log natively?
2116   - declare the local journal protocol stable in the wiki interface chart
2117   - sd-journal: speed up sd_journal_get_data() with transparent hash table in bg
2118   - journald: when dropping msgs due to ratelimit make sure to write
2119     "dropped %u messages" not only when we are about to print the next
2120     message that works, but already after a short timeout
2121   - check if we can make journalctl by default use --follow mode inside of less if called without args?
2122   - maybe add API to send pairs of iovecs via sd_journal_send
2123   - journal: add a setgid "systemd-journal" utility to invoke from libsystemd-journal, which passes fds via STDOUT and does PK access
2124   - journalctl: support negative filtering, i.e. FOOBAR!="waldo",
2125     and !FOOBAR for events without FOOBAR.
2126   - journal: store timestamp of journal_file_set_offline() in the header,
2127     so it is possible to display when the file was last synced.
2128   - journal-send.c, log.c: when the log socket is clogged, and we drop, count this and write a message about this when it gets unclogged again.
2129   - journal: find a way to allow dropping history early, based on priority, other rules
2130   - journal: When used on NFS, check payload hashes
2131   - journald: add kernel cmdline option to disable ratelimiting for debug purposes
2132   - refuse taking lower-case variable names in sd_journal_send() and friends.
2133   - journald: we currently rotate only after MaxUse+MaxFilesize has been reached.
2134   - journal: deal nicely with byte-by-byte copied files, especially regards header
2135   - journal: sanely deal with entries which are larger than the individual file size, but where the components would fit
2136   - Replace utmp, wtmp, btmp, and lastlog completely with journal
2137   - journalctl: instead --after-cursor= maybe have a --cursor=XYZ+1 syntax?
2138   - when a kernel driver logs in a tight loop, we should ratelimit that too.
2139   - journald: optionally, log debug messages to /run but everything else to /var
2140   - journald: when we drop syslog messages because the syslog socket is
2141     full, make sure to write how many messages are lost as first thing
2142     to syslog when it works again.
2143   - journald: allow per-priority and per-service retention times when rotating/vacuuming
2144   - journald: make use of uid-range.h to managed uid ranges to split
2145     journals in.
2146   - journalctl: add the ability to look for the most recent process of a binary. journalctl /usr/bin/X11 --pid=-1 or so...
2147   - improve journalctl performance by loading journal files
2148     lazily. Encode just enough information in the file name, so that we
2149     do not have to open it to know that it is not interesting for us, for
2150     the most common operations.
2151   - man: document that corrupted journal files is nothing to act on
2152   - rework journald sigbus stuff to use mutex
2153   - Set RLIMIT_NPROC for systemd-journal-xyz, and all other of our
2154     services that run under their own user ids, and use User= (but only
2155     in a world where userns is ubiquitous since otherwise we cannot
2156     invoke those daemons on the host AND in a container anymore). Also,
2157     if LimitNPROC= is used without User= we should warn and refuse
2158     operation.
2159   - journalctl --verify: don't show files that are currently being
2160     written to as FAIL, but instead show that they are being written to.
2161   - add journalctl -H that talks via ssh to a remote peer and passes through
2162     binary logs data
2163   - add a version of --merge which also merges /var/log/journal/remote
2164   - journalctl: -m should access container journals directly by enumerating
2165     them via machined, and also watch containers coming and going.
2166     Benefit: nspawn --ephemeral would start working nicely with the journal.
2167   - assign MESSAGE_ID to log messages about failed services
2168   - check if loop in decompress_blob_xz() is necessary
2170 * journald: support RFC3164 fully for the incoming syslog transport, see
2171   https://github.com/systemd/systemd/issues/19251#issuecomment-816601955
2173 * Hook up journald's FSS logic with TPM2: seal the verification disk by
2174   time-based policy, so that the verification key can remain on host and ve
2175   validated via TPM.
2177 * rework journalctl -M to be based on a machined method that generates a mount
2178   fd of the relevant journal dirs in the container with uidmapping applied to
2179   allow the host to read it, while making everything read-only.
2181 * journald: add varlink service that allows subscribing to certain log events,
2182   for example matching by message ID, or log level returns a list of journal
2183   cursors as they happen.
2185 * journald: also collect CLOCK_BOOTTIME timestamps per log entry. Then, derive
2186   "corrected" CLOCK_REALTIME information on display from that and the timestamp
2187   info of the newest entry of the specific boot (as identified by the boot
2188   ID). This way, if a system comes up without a valid clock but acquires a
2189   better clock later, we can "fix" older entry timestamps on display, by
2190   calculating backwards. We cannot use CLOCK_MONOTONIC for this, since it does
2191   not account for suspend phases. This would then also enable us to correct the
2192   kmsg timestamping we consume (where we erroneously assume the clock was in
2193   CLOCK_MONOTONIC, but it actually is CLOCK_BOOTTIME as per kernel).
2195 * in journald, write out a recognizable log record whenever the system clock is
2196   changed ("stepped"), and in timesyncd whenever we acquire an NTP fix
2197   ("slewing"). Then, in journalctl for each boot time we come across, find
2198   these records, and use the structured info they include to display
2199   "corrected" wallclock time, as calculated from the monotonic timestamp in the
2200   log record, adjusted by the delta declared in the structured log record.
2202 * in journald: whenever we start a new journal file because the boot ID
2203   changed, let's generate a recognizable log record containing info about old
2204   and new ID. Then, when displaying log stream in journalctl look for these
2205   records, to be able to order them.
2207 * journald: generate recognizable log events whenever we shutdown journald
2208   cleanly, and when we migrate run → var. This way tools can verify that a
2209   previous boot terminated cleanly, because either of these two messages must
2210   be safely written to disk, then.
2212 * hook up journald with TPMs? measure new journal records to the TPM in regular
2213   intervals, validate the journal against current TPM state with that. (taking
2214   inspiration from IMA log)
2216 * sd-journal puts a limit on parallel journal files to view at once. journald
2217   should probably honour that same limit (JOURNAL_FILES_MAX) when vacuuming to
2218   ensure we never generate more files than we can actually view.
2220 * maybe add a tool that displays most recent journal logs as QR code to scan
2221   off screen and run it automatically on boot failures, emergency logs and
2222   such. Use DRM APIs directly, see
2223   https://github.com/dvdhrm/docs/blob/master/drm-howto/modeset.c for an example
2224   for doing that.
2226 * maybe implicitly attach monotonic+realtime timestamps to outgoing messages in
2227   log.c and sd-journal-send
2229 * journalctl/timesyncd: whenever timesyncd acquires a synchronization from NTP,
2230   create a structured log entry that contains boot ID, monotonic clock and
2231   realtime clock (I mean, this requires no special work, as these three fields
2232   are implicit). Then in journalctl when attempting to display the realtime
2233   timestamp of a log entry, first search for the closest later log entry
2234   of this kinda that has a matching boot id, and convert the monotonic clock
2235   timestamp of the entry to the realtime clock using this info. This way we can
2236   retroactively correct the wallclock timestamps, in particular for systems
2237   without RTC, i.e. where initially wallclock timestamps carry rubbish, until
2238   an NTP sync is acquired.
2240 * introduce per-unit (i.e. per-slice, per-service) journal log size limits.
2242 * journald: do journal file writing out-of-process, with one writer process per
2243   client UID, so that synthetic hash table collisions can slow down a specific
2244   user's journal stream down but not the others.
2246 * tweak journald context caching. In addition to caching per-process attributes
2247   keyed by PID, cache per-cgroup attributes (i.e. the various xattrs we read)
2248   keyed by cgroup path, and guarded by ctime changes. This should provide us
2249   with a nice speed-up on services that have many processes running in the same
2250   cgroup.
2252 * maybe add call sd_journal_set_block_timeout() or so to set SO_SNDTIMEO for
2253   the sd-journal logging socket, and, if the timeout is set to 0, sets
2254   O_NONBLOCK on it. That way people can control if and when to block for
2255   logging.
2257 * journalctl: make sure -f ends when the container indicated by -M terminates
2259 * journald: sigbus API via a signal-handler safe function that people may call
2260   from the SIGBUS handler
2262 * add a test if all entries in the catalog are properly formatted.
2263     (Adding dashes in a catalog entry currently results in the catalog entry
2264      being silently skipped. journalctl --update-catalog must warn about this,
2265      and we should also have a unit test to check that all our message are OK.)
2267 * build short web pages out of each catalog entry, build them along with man
2268   pages, and include hyperlinks to them in the journal output
2270 * homed:
2271   - when user tries to log into record signed by unrecognized key, automatically add key to our chain after polkit auth
2272   - rollback when resize fails mid-operation
2273   - GNOME's side for forget key on suspend (requires rework so that lock screen runs outside of uid)
2274   - update LUKS password on login if we find there's a password that unlocks the JSON record but not the LUKS device.
2275   - create on activate?
2276   - properties: icon url?, preferred session type?, administrator bool (which translates to 'wheel' membership)?, address?, telephone?, vcard?, samba stuff?, parental controls?
2277   - communicate clearly when usb stick is safe to remove. probably involves
2278     beefing up logind to make pam session close hook synchronous and wait until
2279     systemd --user is shut down.
2280   - logind: maybe keep a "busy fd" as long as there's a non-released session around or the user@.service
2281   - maybe make automatic, read-only, time-based reflink-copies of LUKS disk
2282     images (and btrfs snapshots of subvolumes) (think: time machine)
2283   - distinguish destroy / remove (i.e. currently we can unregister a user, unregister+remove their home directory, but not just remove their home directory)
2284   - in systemd's PAMName= logic: query passwords with ssh-askpassword, so that we can make "loginctl set-linger" mode work
2285   - fingerprint authentication, pattern authentication, …
2286   - make sure "classic" user records can also be managed by homed
2287   - make size of $XDG_RUNTIME_DIR configurable in user record
2288   - move acct mgmt stuff from pam_systemd_home to pam_systemd?
2289   - when "homectl --pkcs11-token-uri=" is used, synthesize ssh-authorized-keys records for all keys we have private keys on the stick for
2290   - make slice for users configurable (requires logind rework)
2291   - logind: populate auto-login list bus property from PKCS#11 token
2292   - when determining state of a LUKS home directory, check DM suspended sysfs file
2293   - when homed is in use, maybe start the user session manager in a mount namespace with MS_SLAVE,
2294     so that mounts propagate down but not up - eg, user A setting up a backup volume
2295     doesn't mean user B sees it
2296   - use credentials logic/TPM2 logic to store homed signing key
2297   - permit multiple user record signing keys to be used locally, and pick
2298     the right one for signing records automatically depending on a pre-existing
2299     signature
2300   - add a way to "adopt" a home directory, i.e. strip foreign signatures
2301     and insert a local signature instead.
2302   - as an extension to the directory+subvolume backend: if located on
2303     especially marked fs, then sync down password into LUKS header of that fs,
2304     and always verify passwords against it too. Bootstrapping is a problem
2305     though: if no one is logged in (or no other user even exists yet), how do you
2306     unlock the volume in order to create the first user and add the first pw.
2307   - support new FS_IOC_ADD_ENCRYPTION_KEY ioctl for setting up fscrypt
2308   - maybe pre-create ~/.cache as subvol so that it can have separate quota
2309     easily?
2310   - store PKCS#11 + FIDO2 token info in LUKS2 header, compatible with
2311     systemd-cryptsetup, so that it can unlock homed volumes
2312   - maybe make all *.home files owned by `systemd-home` user or so, so that we
2313     can easily set overall quota for all users
2314   - on login, if we can't fallocate initially, but rebalance is on, then allow
2315     login in discard mode, then immediately rebalance, then turn off discard
2316   - add "homectl unbind" command to remove local user record of an inactive
2317     home dir
2319 * add a new switch --auto-definitions=yes/no or so to systemd-repart. If
2320   specified, synthesize a definition automatically if we can: enlarge last
2321   partition on disk, but only if it is marked for growing and not read-only.
2323 * systemd-repart: read LUKS encryption key from $CREDENTIALS_DIRECTORY
2325 * systemd-repart: add a switch to factory reset the partition table without
2326   immediately applying the new configuration again. i.e. --factory-reset=leave
2327   or so. (this is useful to factory reset an image, then putting it into
2328   another machine, ensuring that luks key is generated on new machine, not old)
2330 * systemd-repart: support setting up dm-integrity with HMAC
2332 * systemd-repart: maybe remove half-initialized image on failure. It fails
2333   if the output file exists, so a repeated invocation will usually fail if
2334   something goes wrong on the way.
2336 * systemd-repart: by default generate minimized partition tables (i.e. tables
2337   that only cover the space actually used, excluding any free space at the
2338   end), in order to maximize dd'ability. Requires libfdisk work, see
2339   https://github.com/karelzak/util-linux/issues/907
2341 * systemd-repart: MBR partition table support. Care needs to be taken regarding
2342   Type=, so that partition definitions can sanely apply to both the GPT and the
2343   MBR case. Idea: accept syntax "Type=gpt:home mbr:0x83" for setting the types
2344   for the two partition types explicitly. And provide an internal mapping so
2345   that "Type=linux-generic" maps to the right types for both partition tables
2346   automatically.
2348 * systemd-repart: allow sizing partitions as factor of available RAM, so that
2349   we can reasonably size swap partitions for hibernation.
2351 * systemd-repart: allow boolean option that ensures that if existing partition
2352   doesn't exist within the configured size bounds the whole command fails. This
2353   is useful to implement ESP vs. XBOOTLDR schemes in installers: have one set
2354   of repart files for the case where ESP is large enough and one where it isn't
2355   and XBOOTLDR is added in instead.  Then apply the former first, and if it
2356   fails to apply use the latter.
2358 * systemd-repart: add per-partition option to never reuse existing partition
2359   and always create anew even if matching partition already exists.
2361 * systemd-repart: add per-partition option to fail if partition already exist,
2362   i.e. is not added new. Similar, add option to fail if partition does not exist yet.
2364 * systemd-repart: allow disabling growing of specific partitions, or making
2365   them (think ESP: we don't ever want to grow it, since we cannot resize vfat)
2366   Also add option to disable operation via kernel command line.
2368 * systemd-repart: make it a static checker during early boot for existence and
2369   absence of other partitions for trusted boot environments
2371 * systemd-repart: add support for SD_GPT_FLAG_GROWFS also on real systems, i.e.
2372   generate some unit to actually enlarge the fs after growing the partition
2373   during boot.
2375 * systemd-repart: do not print "Successfully resized …" when no change was done.
2377 * document:
2378   - document that deps in [Unit] sections ignore Alias= fields in
2379     [Install] units of other units, unless those units are disabled
2380   - man: clarify that time-sync.target is not only sysv compat but also useful otherwise. Same for similar targets
2381   - document that service reload may be implemented as service reexec
2382   - add a man page containing packaging guidelines and recommending usage of things like Documentation=, PrivateTmp=, PrivateNetwork= and ReadOnlyDirectories=/etc /usr.
2383   - document systemd-journal-flush.service properly
2384   - documentation: recommend to connect the timer units of a service to the service via Also= in [Install]
2385   - man: document the very specific env the shutdown drop-in tools live in
2386   - man: add more examples to man pages,
2387   -      in particular an example how to do the equivalent of switching runlevels
2388   - man: maybe sort directives in man pages, and take sections from --help and apply them to man too
2389   - document root=gpt-auto properly
2391 * systemctl:
2392   - add systemctl switch to dump transaction without executing it
2393   - Add a verbose mode to "systemctl start" and friends that explains what is being done or not done
2394   - print nice message from systemctl --failed if there are no entries shown, and hook that into ExecStartPre of rescue.service/emergency.service
2395   - add new command to systemctl: "systemctl system-reexec" which reexecs as many daemons as virtually possible
2396   - systemctl enable: fail if target to alias into does not exist? maybe show how many units are enabled afterwards?
2397   - systemctl: "Journal has been rotated since unit was started." message is misleading
2399 * introduce an option (or replacement) for "systemctl show" that outputs all
2400   properties as JSON, similar to busctl's new JSON output. In contrast to that
2401   it should skip the variant type string though.
2403 * Add a "systemctl list-units --by-slice" mode or so, which rearranges the
2404   output of "systemctl list-units" slightly by showing the tree structure of
2405   the slices, and the units attached to them.
2407 * add "systemctl wait" or so, which does what "systemd-run --wait" does, but
2408   for all units. It should be both a way to pin units into memory as well as a
2409   wait to retrieve their exit data.
2411 * show whether a service has out-of-date configuration in "systemctl status" by
2412   using mtime data of ConfigurationDirectory=.
2414 * "systemctl preset-all" should probably order the unit files it
2415   operates on lexicographically before starting to work, in order to
2416   ensure deterministic behaviour if two unit files conflict (like DMs
2417   do, for example)
2419 * add "systemctl start -v foobar.service" that shows logs of a service
2420   while the start command runs. This is non-trivial to do without
2421   races though, since we should flush out all journal messages before
2422   returning from the "systemctl stop".
2424 * systemctl: if some operation fails, show log output?
2426 * Add a new verb "systemctl top"
2428 * unit install:
2429   - "systemctl mask" should find all names by which a unit is accessible
2430     (i.e. by scanning for symlinks to it) and link them all to /dev/null
2432 * nspawn:
2433   - emulate /dev/kmsg using CUSE and turn off the syslog syscall
2434     with seccomp. That should provide us with a useful log buffer that
2435     systemd can log to during early boot, and disconnect container logs
2436     from the kernel's logs.
2437   - as soon as networkd has a bus interface, hook up --network-interface=,
2438     --network-bridge= with networkd, to trigger netdev creation should an
2439     interface be missing
2440   - a nice way to boot up without machine id set, so that it is set at boot
2441     automatically for supporting --ephemeral. Maybe hash the host machine id
2442     together with the machine name to generate the machine id for the container
2443   - fix logic always print a final newline on output.
2444     https://github.com/systemd/systemd/pull/272#issuecomment-113153176
2445   - should optionally support receiving WATCHDOG=1 messages from its payload
2446     PID 1...
2447   - optionally automatically add FORWARD rules to iptables whenever nspawn is
2448     running, remove them when shut down.
2449   - add support for sysext extensions, too. i.e. a new --extension= switch that
2450     takes one or more arguments, and applies the extensions already during
2451     startup.
2452   - when main nspawn supervisor process gets suspended due to SIGSTOP/SIGTTOU
2453     or so, freeze the payload too.
2454   - support time namespaces
2455   - on cgroupsv1 issue cgroup empty handler process based on host events, so
2456     that we make cgroup agent logic safe
2457   - add API to invoke binary in container, then use that as fallback in
2458     "machinectl shell"
2459   - make nspawn suitable for shell pipelines: instead of triggering a hangup
2460     when input is finished, send ^D, which synthesizes an EOF. Then wait for
2461     hangup or ^D before passing on the EOF.
2462   - greater control over selinux label?
2463   - support that /proc, /sys/, /dev are pre-mounted
2464   - maybe allow TPM passthrough, backed by swtpm, and measure --image= hash
2465     into its PCR 11, so that nspawn instances can be TPM enabled, and partake
2466     in measurements/remote attestation and such. swtpm would run outside of
2467     control of container, and ideally would itself bind its encryption keys to
2468     host TPM.
2469   - make boot assessment do something sensible in a container. i.e send an
2470     sd_notify() from payload to container manager once boot-up is completed
2471     successfully, and use that in nspawn for dealing with boot counting,
2472     implemented in the partition table labels and directory names.
2473   - optionally set up nftables/iptables routes that forward UDP/TCP traffic on
2474     port 53 to resolved stub 127.0.0.54
2475   - maybe optionally insert .nspawn file as GPT partition into images, so that
2476     such container images are entirely stand-alone and can be updated as one.
2477   - The subreaper logic we currently have seems overly complex. We should
2478     investigate whether creating the inner child with CLONE_PARENT isn't better.
2479   - Reduce the number of sockets that are currently in use and just rely on one
2480     or two sockets.
2481   - Support running nspawn as an unprivileged user.
2483 * machined:
2484   - add an API so that libvirt-lxc can inform us about network interfaces being
2485     removed or added to an existing machine
2486   - "machinectl migrate" or similar to copy a container from or to a
2487     difference host, via ssh
2488   - introduce systemd-nspawn-ephemeral@.service, and hook it into
2489     "machinectl start" with a new --ephemeral switch
2490   - "machinectl status" should also show internal logs of the container in
2491     question
2492   - "machinectl history"
2493   - "machinectl diff"
2494   - "machinectl commit" that takes a writable snapshot of a tree, invokes a
2495     shell in it, and marks it read-only after use
2497 * udev:
2498   - move to LGPL
2499   - kill scsi_id
2500   - add trigger --subsystem-match=usb/usb_device device
2501   - reimport udev db after MOVE events for devices without dev_t
2502   - re-enable ProtectClock= once only cgroupsv2 is supported.
2503     See f562abe2963bad241d34e0b308e48cf114672c84.
2505 * coredump:
2506   - save coredump in Windows/Mozilla minidump format
2507   - when truncating coredumps, also log the full size that the process had, and make a metadata field so we can report truncated coredumps
2508   - add examples for other distros in ELF_PACKAGE_METADATA
2510 * support crash reporting operation modes (https://live.gnome.org/GnomeOS/Design/Whiteboards/ProblemReporting)
2512 * tmpfiles:
2513   - allow time-based cleanup in r and R too
2514   - instead of ignoring unknown fields, reject them.
2515   - creating new directories/subvolumes/fifos/device nodes
2516     should not follow symlinks. None of the other adjustment or creation
2517     calls follow symlinks.
2518   - teach tmpfiles.d q/Q logic something sensible in the context of XFS/ext4
2519     project quota
2520   - teach tmpfiles.d m/M to move / atomic move + symlink old -> new
2521   - add new line type for setting btrfs subvolume attributes (i.e. rw/ro)
2522   - tmpfiles: add new line type for setting fcaps
2523   - add -n as shortcut for --dry-run in tmpfiles & sysusers & possibly other places
2525 * udev-link-config:
2526    - Make sure ID_PATH is always exported and complete for
2527      network devices where possible, so we can safely rely
2528      on Path= matching
2530 * sd-rtnl:
2531    - add support for more attribute types
2532    - inbuilt piping support (essentially degenerate async)? see loopback-setup.c and other places
2534 * networkd:
2535    - add more keys to [Route] and [Address] sections
2536    - add support for more DHCPv4 options (and, longer term, other kinds of dynamic config)
2537    - add reduced [Link] support to .network files
2538    - properly handle routerless dhcp leases
2539    - work with non-Ethernet devices
2540    - dhcp: do we allow configuring dhcp routes on interfaces that are not the one we got the dhcp info from?
2541    - the DHCP lease data (such as NTP/DNS) is still made available when
2542      a carrier is lost on a link. It should be removed instantly.
2543    - expose in the API the following bits:
2544          - option 15, domain name
2545          - option 12, hostname and/or option 81, fqdn
2546          - option 123, 144, geolocation
2547          - option 252, configure http proxy (PAC/wpad)
2548    - provide a way to define a per-network interface default metric value
2549      for all routes to it. possibly a second default for DHCP routes.
2550    - allow Name= to be specified repeatedly in the [Match] section. Maybe also
2551      support Name=foo*|bar*|baz ?
2552    - whenever uplink info changes, make DHCP server send out FORCERENEW
2554 * in networkd, when matching device types, fix up DEVTYPE rubbish the kernel passes to us
2556 * Figure out how to do unittests of networkd's state serialization
2558 * dhcp:
2559    - figure out how much we can increase Maximum Message Size
2561 * dhcp6:
2562    - add functions to set previously stored IPv6 addresses on startup and get
2563      them at shutdown; store them in client->ia_na
2564    - write more test cases
2565    - implement reconfigure support, see 5.3., 15.11. and 22.20.
2566    - implement support for temporary addresses (IA_TA)
2567    - implement dhcpv6 authentication
2568    - investigate the usefulness of Confirm messages; i.e. are there any
2569      situations where the link changes without any loss in carrier detection
2570      or interface down
2571    - some servers don't do rapid commit without a filled in IA_NA, verify
2572      this behavior
2573    - RouteTable= ?
2575 * shared/wall: Once more programs are taught to prefer sd-login over utmp,
2576   switch the default wall implementation to wall_logind
2577   (https://github.com/systemd/systemd/pull/29051#issuecomment-1704917074)