Testsuite: tidyup

Do not use shutdown() when talking to rspamd. Fixes 1802

Introduce EXIM_BUILD_SUFFIX for src/Makefile and testsuite

This enables parallel builds in a shared directory, if they have
the same os-type and arch-type. Think about EXIM_BUILD_SUFFIX
as 'name of your linux distro'

Testsuite: Exim::Runtest uses parent Exporter

Testsuite: Add more tests to Exim::Runtest tests

Testsuite: Add POD to Exim::Runtest

Testsuite: check dynamic port >= 1024 to avoid permission problems

Testsuite: move dynamic_socket to Exim::Runtest

Testsuite: structure the testsuite test

Testsuite: README for t/

Testsuite: started t/ to add tests for the testsuite

Fix OCSP proof verification for direct-signed proofs.  Bug 1909

Testsuite: replicate testcases for LE OCSP

Testsuite: regen certs, now with additional LetsEncrypt-style OCSP proofs

Reverse the scan direction for option-table builtin macros
so that names with substring-names work usefully

Testsuite: find a group name if 'mail' is not available.

If the group 'mail' does not exist (as on some *BSD systems),
test 0001 fails. We now use a randomly choosen group, if necessary.

The group name isn't used for anything else than testing the config
file parser.

Testsuite: do not attempt to open /dev/tty if in -CONTINUE mode

Testsuite: tidying

Tidying: coverity issues

Fix dns authority-name lookup

constification

Testsuite: tidying

Testsuite: tidying

tidying

Testsuite: for $parm_hostname use method more similar to readconf() $primary_hostname coding

TFO: use IPPROTO_TCP not SOL_TCL for setsockopt, being present on more platforms
Also downgrade errors from panic-log to debug

Testsuite: make common-code config usable in non-TLS builds

Update README.UPDATING; fix typos in ChangeLog/NewStuff

Testsuite: account for platforms not supporting TFO, redux

TFO: feature advertisement

Testsuite: account for platforms not supporting TFO

Fix bug with aborted server TLS connection, under GnuTLS

Longstanding, but exposed by 60d10ce

TFO: Support compilation on systems which define TCP_FASTOPEN but not MSG_FASTOPEN

RHEL 7.0 does that, oddly

Testsuite: Add testcase for GnuTLS disconnect after STARTTLS

Testsuite: More help with getting testsuite running

tidying

TCP Fast Open

Expansions: errorcheck use of crypt() in the open-coded version of crypteq/crypt16

Previously, bad arguments crashed under OpenBSD

tidying

Testsuite: munge for platform errno variance

Testsuite: use /usr/bin/env perl to get Perl from $PATH

Some buildfarm animals may have more recent versions of Perl
installed in some directory accessable via $PATH. So we don't hardwire
/usr/bin/perl. (e.g. verily)

Testsuite: Add doc for PORT_DYNAMIC

Testsuite: cosmetical change

Testsuite: Use .editorconfig for test/runtest

Testsuite: Add PORT_DYNAMIC (Bug 1775)

This avoids problems on OpenBSD with SO_REUSEADDR.

On OpenBSD SO_REUSEADDR only works if the IP address AND the EUID
of the bind(2) calls match. In 0562 Exim binds to 1225 as euid=0,
in 0564 runtest tries to bind to 01225 as the user running the tests.

Thanks to Kirill Miazine for working this out.

Testsuite: Fix IPv4 address detection.

Broken-by: d63a95630

Testsuite: Test for existence if 'ip'

Unbreak build: crypto hdrs not in system includes

If using pkg-config to get the paths for various packages and the crypto
library headers are not in the system headers, then the hash work broke
the Exim build by requiring the CFLAGS manipulation for _all_ builds,
not just the TLS libraries.

Shows up on MacOS where there's a system OpenSSL but not system OpenSSL
headers (because only SecureTransport is supported) and using
brew-installed OpenSSL.

I've also coded the fix for GnuTLS on the same basis, but that's
untested.

Fixes bug 1906

Avoid pure-ACK TCP segments during command phase

Testsuite: Check version of binary against current git revision

Tidying: coverity issues

Fix sender-verify callout to not use trigger-message SIZE

Broken-by: 9094b84b4cce

Tidying: coverity issues

Queuefile: avoid using buffered I/O - no point for a block-copy
and it meant (an admittedly ingnorable) Coverity whine about a FILE leak

Take the oppurtunity to constify a utility function

Testsuite: revert some of the modernish Perl constructs

Solaris10 needs to be supported, they use Perl 5.8

Testsuite: re-insert munge expression about size/inode

Testsuite: detect "hidden" IPs

`ifconfig -a` doesn't show all addresses, it skippes addresses that
do not have a label. `ip a` show even these.

Bonus: some small cosmetical changes to get a more modern Perl
style.

Testsuite: stabilize disk space/inode munging

Testsuite: add tests/munges for configure owner

Include 'Configure owner' in -bV output

Testsuite: add clarification about the permissions of the trusted-configs file

tidying

Queuefile: refactor

Testsuite: for queuefile transport, avoid using named-queues as part of test
Also avoid using aux-var as a testing temporary area

New: queuefile transport, under EXPERIMENTAL_QUEUEFILE

Testsuite: (named queues) add testcase for 3rd-party queue transfer

Docs: add warning on SNI-dependent certfile expansion needing a good default

Lazy-create builtin macros

By only filling out the internal macro representation for the builtin macros
when a config line includes an underscore followed by a letter which might be one
we should save startup effort on configs which never use a builtin.

Fix check for commandline macro definition
Without this, mailq (done by unpriv user) and daemon SIGHUP handling fail

Broken-by: c0b9d3e87264

Docs: add section on builtin macros

DH parameters update, new values & default

* Add three new Exim-specific DH parameter constants; state provenance,
  but no way for others to verify; this is a signed commit, which is
  about as much as we can do for the truly paranoid: provide an audit
  trail.
* Add the RFC 7919 DH primes
  + No TLS feature negotiation, per 7919, but the DH primes can be used
    if folks so choose
* Fixed broken format string in util/gen_pkcs3.c
* Tried to make gen_pkcs3.c support q values.
  + Turns out, q doesn't affect the PEM and that's not a mistake in my
    initialisation; I've checked with a cryptographer, we're losing some
    server-side optimizations but not any security properties for our
    scenario.

Fixes: 1895

Fix callouts connection fallback from TLS to cleartext.  Bug 1897

Docs: add another index entry for delay_warning

Testsuite: for CHUNKING set sender name explicitly
for consistent chunk size on different platforms

Testsuite: for CHUNKING rewrite sender name in headers to consistent value
for consistent chunk size on different test platforms

Close logfile after a while waiting for non-smtp input.  Bug 1891

Avoid parsing cost for auto-macro creates

Logging: connection_reject log selector should apply also to the connect acl

Fix mime ACL filename decode

A latent bug (uninitialised memory referred to by $mime_decoded_filename)
uncovered by 40c90bca9f7e

Fix checking for -D option use

Broken-by: c0b9d3e87264

Feature macros should be uppercase

Debug: fix openssl tls_close() debug output

Testsuite: tidying

Refactor driver feature-macro generation to be driven by existing tables

Would like to do lookup drivers too but unsure about dyn-linked variants

Default to filesystem space/inode checking enabled

Drain socket to get clean TCP FINs

Add automatic macros for config-file options.  Bug 1819

Docs: fix quotes

Delivery: fix memory leak

Doc: add clarification for DKIM example

Defend against symlink attack by another process running as exim

Reported-by:
http://www.halfdog.net/Security/2016/DebianEximSpoolLocalRoot/

Routing: avoid doing the one_time replacement operation when a redirect leaves the address unchanged

When done, in combination with a defer the retry would see the address as delivered, hence losing mail.

Routing: for efficiency, avoid complexifying the "condition" string until the second is read from config

ACL: merge the tables used for codition/modifier decode

ACL: bsearch for controls

tidying

Docs: mention Perl manpages for PCRE.  Bug 1881

Logging: fix errno decodes

Auth: fix error check in CRAM-MD5

tidying