Add quota/quota_filecount transport option modifier "no_check" Bug 1115

This option modifier allows to ignore the quota limits, but update
the maildirsize file.

Doc: check for w3m existence

w3m is called as non-last command in pipelines. A missing w3m
creates empty output and Make doesn't get it, because the last command
of the pipe (e.g. Tidytxt) doesn't return failure on empty input.

When pipelining under TLS do not treat fd-readability as tls-readability

Add compile-time checks on expanding-string function use

Cleanup (prevent repeated use of -p/-oMr to avoid mem leak)

Fix log line corruption for DKIM status

On a continued-transport delivery, do not check the hostlist for mismatch in the
transport dispatch level when the transport does hosts-override.  Instead do the
full trasport process call and let it decide on compatibility with the connection.

In tls-proxy process take case to close unused pipe ends, select also for exception conditions on data fds

Testsuite: testcase for continued-delivery with transport hosts_override

Fix logging of delivery port for callout lazy-close, when port specified by router

Testsuite: stabilize output sequence for 2x35/6

Docs: tweak "sock" malware interface description

Fix crash in transport, on second smtp-connect fail for a list of target hosts

Reported as the sequence:
  1MX: 554 on connect (banner)
  2MX: TCP conn timeout

Docs: add missing dollarsign

Testsuite: stabilize output sequence for case 4530

Testsuite: stabilize output sequence for case 0906

Malware: make "sock" cmdline default usable.  Bug 2111

doc: string2 not expanded, don't imply otherwise

A simple reading which skips the later paragraph would mislead people;
this was remnant text from before the EXPAND_LISTMATCH_RHS changed the
default behaviour.

A couple of paragraphs later we contradicted this now-misleading
parenthetical, but that's not enough.  Nuke it.

typo

TLS: do not use DH_bits for LibreSSL; it is not supported (as of LibreSSL 2.3.2)

Debug: more info during server-side authentication

OpenSSL: add sender_host_address info to certificate verify error log messages when in verify callout

Use DH_bits for OpenSSL 1.1.0

Fixes bug 2095

TLS: PIPELINING under OpenSSL

Testsuite: delays in 2x3[567]

Testsuite: add delays for predictable log sequencing in 2x36, log-sorting for 2x38

TLS: do decent PIPELINING under TLS, at least with GnuTLS

I've not found an equivalent in OpenSSL of gnutls_record_cork() nor gnutls_record_check_pending() yet.

Revert "DANE: do not trust a non-dnssec NXDOMAIN return for the TLSA lookup"

This reverts commit 5d6bdf01a921a88030e9baec7ba5f238da90e979.

Add option commandline_checks_require_admin

May help with scenarios already so broken that bug report 2118 is
actually an issue (Wordpress vuln).

Testsuite: add DANE cases for DNS secure no-TLSA lookups

Testsuite: add DANE testcase for TLSA lookup SERVFAIL

DANE: do not trust a non-dnssec NXDOMAIN return for the TLSA lookup

DANE: avoid info leak by checking TLSA dnssec before connecting to MX

tidying

Testsuite: fix fakens to not claim that an unsupported NXDOMAIN is dnssec-AD

Enable use of sendfile on FreeBSD

Enable use of sendfile on FreeBSD

Teach SMTP input sync check ("input sent too soon") about SMTP input buffering

Docs: add note on Received-By: header creation under cutthrough

testsuite: tidying

CHUNKING / wire-format spool: use block-copies for receiption

testsuite output changes

testsuite: tidying

tidying: coverity

Fix continue_more on TLS connection.  Bug 2104

Docs: more info on wire-format spoolfiles

tidying: coverity fixes

Docs: describe operation of continued-connection TLS

Support wire-format spoolfiles

Enable use of sendfile

Tweak debug output

Docs: add 8BITMIME status field to log line info

Docs: note that dkim_domain can take a list for signing

Fix DISABLE_DKIM biuld

DKIM: avoid use of temporary file for signing

CHUNKING: pipeline data right after the BDAT command

Reduce number of places knowing about filename-construction for mbox file-for-scanning

Rework detection of multiple ports on a given IP, for the daemon status line

Previously only spotted adjacent cases in the address list, now a full scan

tidying

Transport: fix smtp under combo of mua_wrapper and limited max_rcpt

Builtin macros: note config trigger line in debug output

$SOURCE_DATE_EPOCH support for build date stamp

If, and _only_ if, $SOURCE_DATE_EPOCH is found in environ during build,
use it to set the timestamp embedded in the binary instead of using
__DATE__ and __TIME__ cpp directives.

This per <https://reproducible-builds.org/specs/source-date-epoch/>
spec.  It's sane and sensible, without removing date stamping which
matters.  The examples encourage packagers to use timestamps which
do change when they backport patches, so that the date remains useful
for distinguishing builds instead of claiming one date forever across
multiple patchlevels.

This change written so that the old behaviour and code is used if the
environment variable is not found, to better continue to support ancient
platforms with other variants of date(1).

Built with and without an override, on macOS.

compiler quietening

Remove references to some csx.cam sites

The ftp.csx.cam.ac.uk server is no longer authoratative  not even up to date.

The training courses are no longer happening.

typo

tidying

tidying

Callout/hold: ensure TLS-proxy process is not waited for as a transport process

Debug: show error for SMTP read response

Callout/hold: fix uninitialized variable

Docs: expand descriptiong of control=debug

Openssl: disable session-tickets by default and session-cache always

Docs: fix definition of msg:fail:delivery event

tidying

Documentation: replace http by https where possible

I didn't change the schema for external links. This
needs further checking if the content of https://…
matches the content of http://…

tidying

Doc: clarify location of DMARC dmarc_tld_file

Callouts: a "hold" option for receipient-verify, which keeps the connection open both for
further recipients and for eventual delivery.

Logging: make cipher info available for continued-TLS connection deliveries

exigrep: migrate to Getopt::Long, allow --no-pager

This gives us long/more descriptive option names.
Add an option to supress the use of a pager.

exigrep: use a pager if stdout is connected to a terminal

exigrep: add POD and -h, -m

Testsuite: allow --range <number> +

Now `runtest <number> +` and `runtest --range <number> +`
do the same.

Testsuite: fixup testsuite test about flavours

Support for flavours isn't dropped, but currently
we do not have flavour specific files.

Expansions: check numeric values of IPv4 address components

Logging: mark continued-TLS connection deliveries with "X-*"

Sync 4.next from master

Testsuite: add --test and --range options

Testsuite: Getopt::Long, --help, --man for runtest

Malware: new connection type "f-prot6d" for FPSCAND protocol over TCP

Docs: fix description of tls_advertise_hosts

uClibc does not contain gnu/libc-version.h

Signed-off-by: Bernd Kuhls <bernd.kuhls@t-online.de>

Testsuite: remove debug "ps" output from 0420

Debug: Use UTF-8 linedrawing, for indent partial-markers

Shorten long daemon-startup log lines

Some platforms (Solaris) do not have AF_LOCAL; use AF_UNIX

Docs: fix macro typo

Delivery: contined-connection maintaining TLS

Docs: clean for next release

Debug: Use UTF-8 linedrawing rather than ASCII lineart for grouping expansion tracing messages