Tidying

Logging: millisecond timestamps.  Bug 2102

No change to QT logging yet as that will need a spool format update

Retire historical build files from Makefile

Retire historical build files

On callout avoid SIZE every time but noncacheable rcpt main-verify.  Bug 2151

Do not rely on linker identifying common strings

Fix cache-cold random callout verify.  Bug 2147

Optimise scanning config for macros

Fix macro_predef build for auth_cyrus_sasl

Fix build for earlier version Berkeley DB

tidying

Use the BDB "environment" so that a database config file is not looked for.  Bug 2141

Add directory name as new arg to EXIM_DBOPEN

Add $smtp_command_history variable

tidying

Avoid creating before-buffer pointer.  Bug 2145

Found by: ASAN / <ago@gentoo.org>

Prebuild the data structure for builtin macros

Prebuild the data structure for builtin macros

Split macro name storage out from macro definition struct

exigrep: use less --quite-if-one-screen --no-init

Transform string_append_listele{,_n}() to proper expanding-string triplet interface
(but do always maintain a nul-term string result).  This avoids always copying the
previous list version, and should do fewer allocs too.

Configure the default opendmarc.tlds file in EDITME

Build: set LC_ALL=C for the makefile configuration

Otherwise Perl may complain about missing locales, which
in turn confuses the Configure-Makefile script when parsing
the output from Perl

testsuite: don't break on '+' in trusted-config-list path

Update Changelog about -p/-oMr

Fix ChangeLog notice re manualroute option ordering

We do *NOT* permit options before hostnames.  It's always hostnames
before options.  It's _within_ the options that the use of a transport
name as an option name had been accidentally constrained to come last,
which was then fixed in commit 833c70bc.

I goofed in describing this.

Fix appendfile.c errmsg output that broke with d291c7

Repair manualroute transport name not-last option

Commit 55414b25b did const-ification surgery which removed the old
"temporarily drop a NUL in here" anti-pattern, but one of the
Ustrcmp->Ustrncmp conversions was missed, for transport-name comparison.

As a result, since Exim 4.85, we've had an undocumented
requirement-by-bug that the transport name be the last such option
given.  Restore old behaviour.

Still missing a test-case to deter regression.

Bail out if a configuration file starts with a byte order mark

Fix what d291c7670e4c370cdc4f631ea58f82c7f4f87823 broke. Closes 1115

Add quota/quota_filecount transport option modifier "no_check" Bug 1115

This option modifier allows to ignore the quota limits, but update
the maildirsize file.

Doc: check for w3m existence

w3m is called as non-last command in pipelines. A missing w3m
creates empty output and Make doesn't get it, because the last command
of the pipe (e.g. Tidytxt) doesn't return failure on empty input.

When pipelining under TLS do not treat fd-readability as tls-readability

Add compile-time checks on expanding-string function use

Cleanup (prevent repeated use of -p/-oMr to avoid mem leak)

Fix log line corruption for DKIM status

On a continued-transport delivery, do not check the hostlist for mismatch in the
transport dispatch level when the transport does hosts-override.  Instead do the
full trasport process call and let it decide on compatibility with the connection.

In tls-proxy process take case to close unused pipe ends, select also for exception conditions on data fds

Testsuite: testcase for continued-delivery with transport hosts_override

Fix logging of delivery port for callout lazy-close, when port specified by router

Testsuite: stabilize output sequence for 2x35/6

Docs: tweak "sock" malware interface description

Fix crash in transport, on second smtp-connect fail for a list of target hosts

Reported as the sequence:
  1MX: 554 on connect (banner)
  2MX: TCP conn timeout

Docs: add missing dollarsign

Testsuite: stabilize output sequence for case 4530

Testsuite: stabilize output sequence for case 0906

Malware: make "sock" cmdline default usable.  Bug 2111

doc: string2 not expanded, don't imply otherwise

A simple reading which skips the later paragraph would mislead people;
this was remnant text from before the EXPAND_LISTMATCH_RHS changed the
default behaviour.

A couple of paragraphs later we contradicted this now-misleading
parenthetical, but that's not enough.  Nuke it.

typo

TLS: do not use DH_bits for LibreSSL; it is not supported (as of LibreSSL 2.3.2)

Debug: more info during server-side authentication

OpenSSL: add sender_host_address info to certificate verify error log messages when in verify callout

Use DH_bits for OpenSSL 1.1.0

Fixes bug 2095

TLS: PIPELINING under OpenSSL

Testsuite: delays in 2x3[567]

Testsuite: add delays for predictable log sequencing in 2x36, log-sorting for 2x38

TLS: do decent PIPELINING under TLS, at least with GnuTLS

I've not found an equivalent in OpenSSL of gnutls_record_cork() nor gnutls_record_check_pending() yet.

Revert "DANE: do not trust a non-dnssec NXDOMAIN return for the TLSA lookup"

This reverts commit 5d6bdf01a921a88030e9baec7ba5f238da90e979.

Add option commandline_checks_require_admin

May help with scenarios already so broken that bug report 2118 is
actually an issue (Wordpress vuln).

Testsuite: add DANE cases for DNS secure no-TLSA lookups

Testsuite: add DANE testcase for TLSA lookup SERVFAIL

DANE: do not trust a non-dnssec NXDOMAIN return for the TLSA lookup

DANE: avoid info leak by checking TLSA dnssec before connecting to MX

tidying

Testsuite: fix fakens to not claim that an unsupported NXDOMAIN is dnssec-AD

Enable use of sendfile on FreeBSD

Enable use of sendfile on FreeBSD

Teach SMTP input sync check ("input sent too soon") about SMTP input buffering

Docs: add note on Received-By: header creation under cutthrough

testsuite: tidying

CHUNKING / wire-format spool: use block-copies for receiption

testsuite output changes

testsuite: tidying

tidying: coverity

Fix continue_more on TLS connection.  Bug 2104

Docs: more info on wire-format spoolfiles

tidying: coverity fixes

Docs: describe operation of continued-connection TLS

Support wire-format spoolfiles

Enable use of sendfile

Tweak debug output

Docs: add 8BITMIME status field to log line info

Docs: note that dkim_domain can take a list for signing

Fix DISABLE_DKIM biuld

DKIM: avoid use of temporary file for signing

CHUNKING: pipeline data right after the BDAT command

Reduce number of places knowing about filename-construction for mbox file-for-scanning

Rework detection of multiple ports on a given IP, for the daemon status line

Previously only spotted adjacent cases in the address list, now a full scan

tidying

Transport: fix smtp under combo of mua_wrapper and limited max_rcpt

Builtin macros: note config trigger line in debug output

$SOURCE_DATE_EPOCH support for build date stamp

If, and _only_ if, $SOURCE_DATE_EPOCH is found in environ during build,
use it to set the timestamp embedded in the binary instead of using
__DATE__ and __TIME__ cpp directives.

This per <https://reproducible-builds.org/specs/source-date-epoch/>
spec.  It's sane and sensible, without removing date stamping which
matters.  The examples encourage packagers to use timestamps which
do change when they backport patches, so that the date remains useful
for distinguishing builds instead of claiming one date forever across
multiple patchlevels.

This change written so that the old behaviour and code is used if the
environment variable is not found, to better continue to support ancient
platforms with other variants of date(1).

Built with and without an override, on macOS.

compiler quietening

Remove references to some csx.cam sites

The ftp.csx.cam.ac.uk server is no longer authoratative  not even up to date.

The training courses are no longer happening.

typo

tidying

tidying

Callout/hold: ensure TLS-proxy process is not waited for as a transport process

Debug: show error for SMTP read response

Callout/hold: fix uninitialized variable