ARC: compiler quietening

PRDR: append overall DATA acceptance message to delivery log line "C=" item.  Bug 2253
It can have useful tracking info from the destination, eg. their message Id.

Extra checks on inbound SMTP stream buffer refill

Do not use bashism in /bin/sh scrit (Bug 2249)

Copy/paste fail on end of Perl line (thanks JGH)

Handle testsuite dual-daemon redis start/reap

Redis cluster DEFER & test results corrected

DANE: add dane:fail event

Testsuite: GnuTLS version of DANE/events testcase

Followon from: c0635b6dfe

Docs: expand DKIM verification notes

Test suite case for redis cluster MOVED response

Correction on string comparison

Changelog entry for redis cluster MOVED handling

Cheap method to follow redis cluster MOVED replies

Testsuite: make 4560 more testhost-name independent

Testsuite: for DKIM sha512 verify, use a test signed mail produced by Exim

This is a temporary measure until Mail::DKIM::Signer can handle rsa-sha512 -
it gives us the internal consistency check but not we would like the independent
confirmation of correctness

Testsuite: for DKIM signing, store resulting mail for comparison

ARC initial implementation.  Experimental.  Bug 2162

Testsuite: ensure logging path is set

Auths: for A-R header, and SMTP auth, note the public-name not the authenticator name
       Also, for TLS auth use a custom propspec

meta: git controls for text changelogs; github controls

For the ChangeLog and files like it, use `merge=union` to bring in
content from both sides instead of having conflicts block merges because
someone else added a feature.

For GitHub, provide some "templates" which really just point people in
the right direction, but if the repointing fails, at least reduces the
pain a little.

I18N: Fix utf8_downconvert propagation through a redirect router

OpenSSL: revert needless free of certificate list.  The library handlies it internally.

Reported-by: Torsten Tributh

WIP

Testsuite: output changes in SPF testcase

Fix exim_dbmbuild to permit directoryless filenames.  Bug 2242

Broken-by: 0a6c178c6c

OpenSSL: Fix memory leak during multi-message connections using STARTTLS

Reported-by: Wolfgang Breyha
Fix-by: Wolfgang Breyha, with additions from Jeremy Harris

Expansions: make ${authresults } usable in a named ACL

This will be more common than directly in the acl_smtp_data option,
and suffers one less expansion in operation.

Debug: fix output for acl add_header

typo

DMARC: fix result reporting when a DKIM ACL overrides the verify result.  Bug 2236

Expansions: new ${authresults {mch}} for an Authentication-Results header

Fix memory leak during multi-message reception using STARTTLS

Reported-by: Wolfgang Breyha

Avoid minor memleak during multi-message STARTTLS'd conns
As STARTTLS/EHLO is repeated per message, we should free mem used for EHLO-dependent hostnames

tidying

Testsuite: munge for no-DKIM builds

DANE: move to mainline

compiler quietening

Macros: speedup expansion processing

typo

ACL: Enforce non-usability of control=utf8_downconvert in MAIL ACL.  Bug 2239

Debug: more detail in dkim processing

Revert "Macros: convert to tree for speed of lookup"

This reverts commit 165acdd1ea3b7399b2279f94c881f8e366efaf71.

Solaris 10 compatability, try two

Solaris 10 compatability

Update copyright year to 2018

Partly change a single year into a range, starting back in 1995, or
later, if indicated by other copyright information.

Fix base64d() buffer size (CVE-2018-6789)

Credits for discovering this bug: Meh Chang <meh@devco.re>

(cherry picked from commit 062990cc1b2f9e5d82a413b53c8f0569075de700)

Compiler-quietening

Testsuite: move DKIM Ed25519 testcases to seperate feature-test group

Testsuite: move sha3 tests to separate testcase

Macros: return macro-presence status from "exim -bP macro <name>"

Builtin macros for sha3-hash and ed25519-signing support

Macros: convert to tree for speed of lookup

Lose outdated builtin-macro warning

Fix conversation closedown with the Avast malware scanner.  Bug 2113

Repair Heimdal GSSAPI authenticator init part 2

Broken-by: d185889f4

Repair Heimdal GSSAPI authenticator init

Broken-by: f2ed27cf5f

DKIM: fix buffer overflow in verify

Caused crash in free() by corrupting malloc metadata.

Reported-by: University of Cambridge
Broken-by: 80a47a2c96

Cutthrough: silently ignore ACL control when the message cannot be cutthrough-routed

Testsuite: ignore more SSL library output variances

DKIM: Ed25519 signatures (GnuTLS 3.6.0 and later)

Debug: more info for string-expansion troubles

Docs: Spell-check spec.xfpt

Docs: Fix formatting of $dkim_verify_status variable description

Docs: Fix syntax in ${filter} example

Protect build against LibreSSL.

Broken-by: 9c29c48f83

String expansions: support sha3 under OpenSSL (1.1.1+)

Doc update: RFC 8314 submissions service

Using TLS-on-connect is no longer a legacy mode for bad clients, but
instead standards-track-RFC-compliant best current practice.

Plus ça change, plus c'est la même chose.

DKIM: share body-hash calculation between multiple signatures for verification

Routing: dnslookup and manualroute routers: ipv4_only, ipv4_prefer options.  Bug 2149

Debugging: fix potential null-derefs in DSN debug_printfs

Build: .git may be a file when this repo is a submodule

(cherry picked from commit 2dfd20fe244da439b1f6becb4e29c8cb83e2d399)

Testsuite: locate.pl: do not try folders we do not have permissions for

GnuTLS: fix to ignore timeout on unrelated callout connection.  Bug 2174

Cutthrough: fix for port-number defined by router.  Bug 2229

Cutthrough: fix multi-message initiating connections.  Bug 2230

DKIM: use string-allocate facilities for DNS lookup

Use bitfield macros for acl-where

Docs: Update DKIM section with RFC 8301 requirements

Testsuite: munge output for platform variances in postgres server binary location

Testsuite: Try harder to locate the tools

Testsuite: Use cp+chmod instead of install

On Solaris, install doesn't seem to behave as expected.
(Or, it has different installs and we call the wrong one)

Testsuite: Use more force to find postgresql binaries

Testsuite: interlock Postgres server startup

DB: show the Berkeley DB runtime library version, for "-d -bV"

Testsuite: MySQL portability

Community-mysql has no mysqld-safe script, and mysqld has varying locations.

Logging: Receive duration on <= lines.  Bug 353

Testsuite: MySQL portability

Pre-version-10.1.3 MariaDB has no "IF NOT EXISTS" on "CREATE USER"

Fix %D string expansion to not use millisec

log_selector +millisec should not change the expansion of %D
(used in log_file_path and maybe other places)

(cherry picked from commit d2fe8622a815e36bf66b04eb772d5ec0ba8e13af)

DKIM: DNS records having no v= tag are acceptable.  Bug 2207

Broken-by c73a4d073e

Testsuite: MySQL portability

Testsuite: wait for MySQL DB startup before inserting data

Lookups: fix mysql lookup returns for no-data "queries",
when the number of rows affected is returned.  Bug 2223

Broken-by: acec9514b1
Also enhance the testsuite mysql testcase to be standalone and move to standard-run set
and add a specific testcase for this bug.

Testcase working on Fedora at least - we'll see what happens on other platforms
where executable locaation may vary.

Docs: SPF no longer Experimental

OpenSSL: fix OCSP stapling under DANE

OpenSSL: better debug info for OCSP

DKIM: permit dkim_private_key to override dkim_strict on signing.  Bug 2220

Logging: disable the verbose DKIM verification line by default; add a tag to <= lines.
New log_selector controls "dkim" and "dkim_verbose".

SPF: promote from Experimental to mainline status

Docs: remove extraneous options from variables index