OpenSSL: Fix memory leak during multi-message connections using STARTTLS

Reported-by: Wolfgang Breyha
Fix-by: Wolfgang Breyha, with additions from Jeremy Harris

Expansions: make ${authresults } usable in a named ACL

This will be more common than directly in the acl_smtp_data option,
and suffers one less expansion in operation.

Debug: fix output for acl add_header

typo

DMARC: fix result reporting when a DKIM ACL overrides the verify result.  Bug 2236

Expansions: new ${authresults {mch}} for an Authentication-Results header

Fix memory leak during multi-message reception using STARTTLS

Reported-by: Wolfgang Breyha

Avoid minor memleak during multi-message STARTTLS'd conns
As STARTTLS/EHLO is repeated per message, we should free mem used for EHLO-dependent hostnames

tidying

Testsuite: munge for no-DKIM builds

DANE: move to mainline

compiler quietening

Macros: speedup expansion processing

typo

ACL: Enforce non-usability of control=utf8_downconvert in MAIL ACL.  Bug 2239

Debug: more detail in dkim processing

Revert "Macros: convert to tree for speed of lookup"

This reverts commit 165acdd1ea3b7399b2279f94c881f8e366efaf71.

Solaris 10 compatability, try two

Solaris 10 compatability

Update copyright year to 2018

Partly change a single year into a range, starting back in 1995, or
later, if indicated by other copyright information.

Fix base64d() buffer size (CVE-2018-6789)

Credits for discovering this bug: Meh Chang <meh@devco.re>

(cherry picked from commit 062990cc1b2f9e5d82a413b53c8f0569075de700)

Compiler-quietening

Testsuite: move DKIM Ed25519 testcases to seperate feature-test group

Testsuite: move sha3 tests to separate testcase

Macros: return macro-presence status from "exim -bP macro <name>"

Builtin macros for sha3-hash and ed25519-signing support

Macros: convert to tree for speed of lookup

Lose outdated builtin-macro warning

Fix conversation closedown with the Avast malware scanner.  Bug 2113

Repair Heimdal GSSAPI authenticator init part 2

Broken-by: d185889f4

Repair Heimdal GSSAPI authenticator init

Broken-by: f2ed27cf5f

DKIM: fix buffer overflow in verify

Caused crash in free() by corrupting malloc metadata.

Reported-by: University of Cambridge
Broken-by: 80a47a2c96

Cutthrough: silently ignore ACL control when the message cannot be cutthrough-routed

Testsuite: ignore more SSL library output variances

DKIM: Ed25519 signatures (GnuTLS 3.6.0 and later)

Debug: more info for string-expansion troubles

Docs: Spell-check spec.xfpt

Docs: Fix formatting of $dkim_verify_status variable description

Docs: Fix syntax in ${filter} example

Protect build against LibreSSL.

Broken-by: 9c29c48f83

String expansions: support sha3 under OpenSSL (1.1.1+)

Doc update: RFC 8314 submissions service

Using TLS-on-connect is no longer a legacy mode for bad clients, but
instead standards-track-RFC-compliant best current practice.

Plus ça change, plus c'est la même chose.

DKIM: share body-hash calculation between multiple signatures for verification

Routing: dnslookup and manualroute routers: ipv4_only, ipv4_prefer options.  Bug 2149

Debugging: fix potential null-derefs in DSN debug_printfs

Build: .git may be a file when this repo is a submodule

(cherry picked from commit 2dfd20fe244da439b1f6becb4e29c8cb83e2d399)

Testsuite: locate.pl: do not try folders we do not have permissions for

GnuTLS: fix to ignore timeout on unrelated callout connection.  Bug 2174

Cutthrough: fix for port-number defined by router.  Bug 2229

Cutthrough: fix multi-message initiating connections.  Bug 2230

DKIM: use string-allocate facilities for DNS lookup

Use bitfield macros for acl-where

Docs: Update DKIM section with RFC 8301 requirements

Testsuite: munge output for platform variances in postgres server binary location

Testsuite: Try harder to locate the tools

Testsuite: Use cp+chmod instead of install

On Solaris, install doesn't seem to behave as expected.
(Or, it has different installs and we call the wrong one)

Testsuite: Use more force to find postgresql binaries

Testsuite: interlock Postgres server startup

DB: show the Berkeley DB runtime library version, for "-d -bV"

Testsuite: MySQL portability

Community-mysql has no mysqld-safe script, and mysqld has varying locations.

Logging: Receive duration on <= lines.  Bug 353

Testsuite: MySQL portability

Pre-version-10.1.3 MariaDB has no "IF NOT EXISTS" on "CREATE USER"

Fix %D string expansion to not use millisec

log_selector +millisec should not change the expansion of %D
(used in log_file_path and maybe other places)

(cherry picked from commit d2fe8622a815e36bf66b04eb772d5ec0ba8e13af)

DKIM: DNS records having no v= tag are acceptable.  Bug 2207

Broken-by c73a4d073e

Testsuite: MySQL portability

Testsuite: wait for MySQL DB startup before inserting data

Lookups: fix mysql lookup returns for no-data "queries",
when the number of rows affected is returned.  Bug 2223

Broken-by: acec9514b1
Also enhance the testsuite mysql testcase to be standalone and move to standard-run set
and add a specific testcase for this bug.

Testcase working on Fedora at least - we'll see what happens on other platforms
where executable locaation may vary.

Docs: SPF no longer Experimental

OpenSSL: fix OCSP stapling under DANE

OpenSSL: better debug info for OCSP

DKIM: permit dkim_private_key to override dkim_strict on signing.  Bug 2220

Logging: disable the verbose DKIM verification line by default; add a tag to <= lines.
New log_selector controls "dkim" and "dkim_verbose".

SPF: promote from Experimental to mainline status

Docs: remove extraneous options from variables index

tidying

Testsuite:  Better platform portability by searching for Postgres server binaries

Testsuite: SPF testcases.  Bug 1789

coding standards

Docs: remove mention of the ClamAV "STREAM" method

Content scan:  Remove support for the 7-year deprecated ClamAV "STREAM" method

Content scan:  Disable "aveserver", "kavdaemon" and "mksd" in the template makefile.  Bugs 1143, 1594

Feature macros, show-supported and build-time selection for malware interfaces

refactor show-supported coding

tidying

Enable header_syntax verify in the example config

MIME ACL: fix SMTP response for non-accept result of the ACL.  Bug 2214.

As far as I can see this was broken back in 2013, f4c1088 for 4.82

Fix issue with continued-connections when the DNS shifts unreliably

Fix crash associated with dnsdb lookup done from DKIM ACL.  Bug 2215

Broken-by: cc55f4208e

Use common routine for building tagstring for dns-fail cache

Debug: enhance output from smtp transport entry

DKIM: tighter checking while parsing signature headers.  Bug 2217

Check ARGV before subscripting it

Testtsuite: output changes resulting

Testsuite: better portability of postgresq test vs. postgresql versions

Lookups: fix pgsql multiple-row, single-column return

Report & fix from James <list@xdrv.co.uk>; additional tidying and testcase by JGH

Broken-by: acec9514b1

Testsuite: shift pgsql tests to the standard-run set

Testsuite: convert posgreql testing to standalone

Delivery: remove restriction on dirname length on having to create directories.  Bug 2213

DANE/GnuTLS: split verification of mixed sets of TLSA records by usage

This is because we cannot do the required CA-anchor and names checks for TA-mode
and not for EE-mode, without knowing which usage TLSA was used.

Constification