fdatasync the spool data file

Tidying: enum for smtp_write_mail_and_rcpt_cmds() retcodes

Docs: CVE note

Cherry-picked from: 5a8fc0799314

Tidying: defines for sync_responses() retcodes

DKIM: logging for signing in transport. Bug 3062

Testsuite: testcase for "smtp smuggling".  Bug 3063
Also remove the unneeded sync point added in cf1376206284

Reject "dot, LF" as ending data phase (pt. 2).  Bug 3063

Use enum for body data input state-machine

Reject "dot, LF" as ending data phase.  Bug 3063

tweak observability

Docs: more indexing for localhost_number

Testsuite: spilt testcase

Teststsuite: shuffle testcases

tidying

Fix periodic queue runs.  Bug 3046

Broken-by: 7d5055276a22

Handle expansion fails in router "set" options.  Bug 3058

typo

Broken-by: 5930166b4433

Logging: ensure that an error for a mistyped IPv6 address in a search
list is available for logging.  Bug 3057

Docs: typo

Supply strchrnul() for platforms apparently missing it

Broken-by: 2658a023286f

DKIM: tighten up parsing for DKIM DNS and header records.  Bug 3056

Compiler quietening

Testsuite: output changes resulting

Avoid trying to send smtp repoonse for non-smtp input, on datafile close error

Broken-by: f70940c9489d

Build: fix for Solaris 11

Unbreak DISABLE_TLS_RESUME build

Broken-by: 5d5ad9fb16a2

DMARC: fix reporting, ARC-support but not in message

DMARC: fix reporting, no-ARC-support case

Support old-format message_id spoolfiles for mailq / -bp.  Bug 3050

Broken-by: 46a36afae41f

Testsuite: support for multi-chunk DNS TXT records; more cases for dnsdb

adds to: 79670d3c32cc

Lookups: Fix dnsdb lookup of multi-chunk TXT.  Bug 3054

Broken=by: f6b1f8e7d642

Compiler quiteneing

Docs: fix local_scan decsription for new message-id format.  Bug 3051

Broken-by: 46a36afae41f

constification

Check for missing commandline arg after options taking one.  Bug 3049

constification

TLS: fix resumption for TLS-on-connect

fix doubled logging of message_id

typoes

Fix use of empty log_reject_target.  Bug 3039

Broken-by: 4243a209fd94

OpenSSL: fix non-DANE build

Docs: requirements for transport filter processes

DANE: handle servefail for TLSA during Rverify.  Bug 3030

Merge branch '4.next'

Docs: tidy for next release

Copyright updates:

vi $(git log --name-status --grep=SPDX: --invert-grep exim-4.96..master | awk '/^M/{print $2}' | grep -v '^test/' | sort -u)

Docs: try to be even more clear on the ${run...} expansion

Fix exipick for new message-id format

Broken-by: 46a36afae41f

fix: typo

DNS: more hardening against crafted responses

Add systemd units (examples)

- daemon
- socket activation
- socket activation (inetd mode)
- queuerunner
- maintainance

tidy: remove unused variables

Tidying: massage to project coding style

Use project-standard memory management rather than alloca()

Merge branch 'exim-4.96+security' into master+security

* exim-4.96+security:
  docs: Changelog
  Harden dnsdb against crafted DNS responses.  Bug 3033
  SPF: harden against crafted DNS responses
  fix: string_is_ip_address (CVE-2023-42117) Bug 3031
  Testsuite: Add testcases for string_is_ip_address (CVE-2023-42117)

docs: Changelog

Harden dnsdb against crafted DNS responses.  Bug 3033

(cherry picked from commit 8787c8994f07c23c3664d76926e02f07314d699d)

SPF: harden against crafted DNS responses

(cherry picked from commit 4f07f38374f8662c318699fb30432273ffcfe0d3)

fix: proxy-protocol (CVE-2023-41227) Bug 3031

* fix-CVE-2023-42117:
  fix: string_is_ip_address (CVE-2023-42117) (closes 3031)
  Testsuite: Add testcases for string_is_ip_address (CVE-2023-42117)

fix: string_is_ip_address (CVE-2023-42117) Bug 3031

Testsuite: Add testcases for string_is_ip_address (CVE-2023-42117)

Handle error on close of spool data file

Tidying: readability defines

Testsuite: output changes resulting

Broken-by: 06175ac09a1e

SPF: harden against crafted DNS responses

Fix crash in SPF DNS usage

Broken-by: 8ab9474f0355

Testsuite: retire perl smartmatch use

Recent perl versions whine that smartmatch is deprecated

SPF: fix looking at RRs when dns lookup does not return success

Docs: Fix variable name,.  Bug 3034

Broken-by: 8c226c7c8917

doc: markup improvement for tcp:connect (closes 3034)

suggested by: u34@net9.cf

mailmap: real name for bes-internal

fix spec typo

Merge branch 'exim-4.96+security'

Debug: more detail for ${reduce...} ${map...} ${filter...}

update Changelog about security fixes

Auths: fix possible OOB read in SPA authenticator.  Bug 3001

(cherry picked from commit 04107e98d58efb69f7e2d7b81176e5374c7098a3)

Auths: fix possible OOB write in SPA authenticator.  Bug 3000

(cherry picked from commit e17b8b0f19b25a223b0cc41933b881c3a1073e61)

Auths: use uschar more in spa authenticator

(cherry picked from commit 0519dcfb5f149154a416b54865fd8026abb57791)

Auths: fix possible OOB write in external authenticator.  Bug 2999

(cherry picked from commit 7bb5bc2c6592e062bf0b514cc71afd2d93e2e0dd)

Docs: tidying

Testsute: output changes resulting

Broken-by: 06175ac09a1e

DKIM: support list-version of $dkim_verify_status, and data ACL

typo

Docs: more detail for DKIM

Testsuite: munge for EXPERIMENTAL_DSN_INFO

Broken-by: e2fe20104068

more detail in error messages

Testsuite: use actual hostname in SRS testcase

Docs: inbound_srs behavior for empty secret.  Bug 3025

Additional docs commentary and code-tidying by committer

Docs: remove claim that -Mg causes specific wording in bounce.  Bug 3026

While investigating, ensure EXPERIMENTAL_DSN_INFO matches

Docs: note that the match_ip condition sets $value

Fix ${tr...} and empty-strings.  Bug 3023

typo

Feature advertisements for radius and pwcheck

Testsuite: (Build) bring the autconf path up to current

Testsuite: add command cat2

The /dev/stderr trick manages to fail on Gnu HURD

tidying

Testsuite: output changes resulting

Broken-by: 7616c28d51aa

Docs: example complex expansion for router domains condition

Docs: typo in comment in example config.  Bug 3022

Build: check during make for perl script library requirements