Fix CVE-2016-1531

Add keep_environment, add_environment.
Change the working directory to "/" during the early startup
phase.

(cherry picked from commit 4af6f9baeffc937b4de28b9ce371e697a1609632)
  (cherry picked from commit 0c8892dc00bf2223dffe18be12f07d8c4549b913)
    (cherry picked from commit fa927caf12b309a2c984ddff1adf4a299186d887)
      (cherry picked from commit bc3c7bb7d4aba3e563434e5627fe1f2176aa18c0)
   (cherry picked from commit 2b92b67bfc33efe05e6ff2ea3852731ac2273832)
   (cherry picked from commit 14b82c8b736c8ed24eda144f57703cb9feac6323)
   (cherry picked from commit 9ca92d0c6e9c6f161bd8111366c6952d3a9315e2)
   (cherry picked from commit 0020c6d9ecfd98ed7b2b337ed4f898fdc409784b)
   (cherry picked from commit e8f96966360ea8867ad6a8b5affda6c37fa4958c)
   (cherry picked from commit ef6fb807c1e1a665f444f644c60c77269f7c5209)

SECURITY: DMARC uses From header untrusted data

CVE-2014-2957

To find the sending domain, expand_string() was used to directly parse
  the contents of the From header. This passes untrusted data directly
  into an internal function. Convert to use standard internal parsing
  functions.

Doc/Spec: section "Trust in configuration data"

Merge branch 'master' of git://git.exim.org/exim

Silence compiler string format warning

Bug 1400: Fix GnuTLS PKCS11 issues

Can disable PKCS11 in Makefile with AVOID_GNUTLS_PKCS11 build flag.
Rename gnutls_enable_pkcs11 option to gnutls_allow_auto_pkcs11.
Update Changelog

Tests: Don't delete patched exim if -KEEP is used

Extra requires/notes for running test suite

Bugzilla 1402 - Handle upper case chars in tests

Test 533 fails if there are any upper case chars in the path to the
  test suite. Added caseful_local_part=true to the router which calls
  the pipe.

Adjust runtest -CONTINUE to work everywhere

Format String safety

Update copyright year in exim -bV output

Fix listnamed doc typos

Cross-ref av_scanner syntax to list syntax

Added missing .new/.wen in spec.xpft

Documentation for multiple TCP clamd servers

Imported Bug 1057 multiple clamd patch from PLD repo

Bug 1150: Enhance docs for ${addresses:} expansion

Fix TPDA text.
Credit Axel Rau for careful proofreading.

Merge branch 'master' of ssh://git.exim.org/home/git/exim

Bug 1289: Clarify host list processing failures

Enhance explanation of +ignore_unknown.

Typo in docs: routing rules mentioned in retry rules section.  Bug 1349

Make smtp_accept_max_per_connection option text searchable. Bug 1361

Same fix as for 1197; abandon attempt to permit intelligent wrapping of the text

Add exiqsumm fix to ChangeLog

Fix exiqsumm output for single queue item.

Patch from Richard Hall, with one minor addition to prevent
  uninitialized value error during output.

Bug 1392: Change status text when no dmarc record

Fix DKIM variable name in documentation.

Print tarball names in debug mode too

Filter xfpt needs new macro too

Finish the xfpt fix.

The readers of the version expect no surrounding whitespace; putting the
content in-place requires macro expansion, which requires that .literal
mode be `layout` or `off`, but either of those will escape the XML angle
brackets.  The easiest fix is to generate the XML as part of the macro
definition.

Moved local_params rules out of Makefile and into GenLocalParams

Bug 1389: Initialize and clear variables

Merge branch 'master' of ssh://git.exim.org/home/git/exim

Unbreak HTML build for RC candidates.

The HTML build now uses the website repo, which extracts the version
number from the XML (generated from the .xfpt).  Meanwhile, commit
2aee48d6 made the version number in the build process dynamic, taking
the value from the release script (via an environ variable).

This change fixes the invocation to pass the version _without_ an RC
suffix to the XML build, letting HTML generation happen.

Mention Redis lookup in NewStuff

Setting LC_ALL with make overrode this sort check

Fix docbook paths for xml generation

Bugzilla 1217: Experimental Redis lookup

Add want_experimental() test in the script to create the lookups
  Makefile to ease detection of requested Experimental features, and
  simplify the #ifdef guards in the redis.c.

Do not use MSG_NOSIGNAL on send() in ${udpsend}

Some non-Posix systems don't define it.  Anyway, Exim ignores SIGPIPE for most purposes.

Merge branch 'patch-3' of https://github.com/bes-internal/exim into master_dmarc_doc

Added documentation of features, acknowledgements

Add ratelimit doc addition to ChangeLog

Typo re-fix in ratelimit.pl doc

Merge branch 'patch-1' of https://github.com/bes-internal/exim into master-bes-ratelimit.pl

Merge branch 'master_tpda'

Adjust test build link paths.

Details at: http://comments.gmane.org/gmane.mail.exim.user/91154
Add ignore for a logfile from test run.

Bug 1031: Experimental TPDA

Remove whitespace

Remove whitespace

fix dmarc_status condition documentation

Fix dovecot with empty 334 challenge.

Thomas Morper reported, with 4.82RC1, that he saw "334 NULL" as the
challenge when using AUTH PLAIN to Dovecot when the client does not send
an initial response.  I could replicate.

This was caused by commit 3f1df0e3 on 2012-11-19 (PP/13 of 4.82); I was
too cautious in the robustness fixes; the clue came in this line of
debug output:

    76430 dovecot: warning: ignoring trailing tab

This change removes that check, and documents in a comment that this
input is acceptable protocol-wise, and why.

With this fix:

    AUTH PLAIN
    334
    AGZyZWRlcmljAGh1bXB0eS1kdW1wdHk=
    235 Authentication succeeded

small typo

Correct spelling of dmarc_disable_verify

Add cscope.files build target

Fix non-IPv6 compile on v6-less system

ratelimit.pl: format usage section, print debug to STDERR, add examples

Document hexquote & udpsend in NewStuff/ChangeLog

Tony documented his new features in 7a5698fa; this change simply adds
them to the list of things that have changed.

Clarify CL: the CVE security fix already in 4.80.1

On re-reading the text for 4.82, it read as though there were a new
security fix which might require an upgrade.  Clarified that this fix
has already been released (in 4.80.1).

Additions to the NewStuff summary file

Add documentation for new $authenticated_fail_id

Bug 1287 - Fix tls_require_cert

Prevent TLS rebinding in LDAP connections

Bugzilla 1375

Add expansion $authenticated_fail_id

ChangeLog

Fix numeric comparisons for 64b.  Bug 1385

ChangeLog is in chronological order within each release.

numbers are sequential, namespaced by users.

Merge branch 'master' of ssh://git.exim.org/home/git/exim

Make sender/recipient search case-insensitive

tls_dhparam size constraint suggestions.

Between NSS and Debian patching of older Exim releases, there's a narrow
range of values likely to interoperate well.  Document this.

GnuTLS website moves

Fix segfault in stdio with non-SMTP MIME ACL.

When injecting a message locally in non-SMTP mode, and with MIME ACLs
configured, if the ACL rejected the message, Exim would try to
`fprintf(NULL, "%s", the_message)`.  This fixes that.

Most ACLs are plumbed in SMTP-only and looking through the others in
receive.c, they all appear to be safely guarded, so it was just this one
that slipped through.

Crash report and assistance tracking down the root cause from Warren
Baker.

Fix debug output in ${acl }

More tidying of ACL-config skip

Remove ACL-config skip so that ${acl } expansions work from queue-runs.

Previously we skipped parsing the ACL section when not needed.  Now it is
potentially needed in all cases.  The skip was ~5% faster than a full parse
so probably not a large part of the exim process startup.

Fix up testsuite output files affected by the removal and add a regression test.

Add gdb history file to git ignore

Add test for ${hexquote:

Add notes and helper-script for OCSP

Use function macro instead of explicit arg cast.

Quiet signedness compiler warnings.

Support safari_ecdhe_ecdsa_bug for openssl_options

Guard LDAP TLS usage against Solaris LDAP variant.

PP/22
Report from Prashanth Katuri.

This variant ensures that if TLS won't be activated because of
compile-time guards, but was requested, then we at least debug-log _why_
we're not doing anything.

Fix eximon continuous updating with timestamped log-files.

Report and fix from Heiko Schlichting.

Fixes 1363.

Add doc comment on use of forany.

readconf: clarify a retry rule parsing error message

Submitted by: Paul Osborne <paul.osborne@canterbury.ac.uk>

Documentation for udpsend and ${hexquote:

The udpsend ACL modifier.

This is for reporting mailer activity without going via the log files.

${hexquote: expansion operator

This converts octets outside the range 0x21-0x7E (the ASCII
graphic characters) to \xNN hex escapes.

Merge branch 'callout_auth'

Log AUTH info on cutthrough deliveries.

Typo in doc source.

Support AUTH for verify-callout and cutthrough-delivery.

Refactored smtp transport to pull out AUTH-related routines so they could be
also called from the verify code.

Bugs 321, 823.

Add compile-time checks for various tables being in alphabetical order.

This is gross hackery and somewhat fragile.  A better method would
actuallyt compile the 'C' involved and check programmatically.

Fix dns_retry definition.

Was placed in non-alphabetical order.

Security considerations: running local commands

Call out the dangers of use_shell in the security considerations
chapter.

Call out a number of related dangers too.

Use enum for cutthrough receive processing state.

Document PRDR, OCSP & DMARC options in OptionLists file.

Add entry to Changelog.

Remove static from local variable declaration.

Fix history file logging to use correct variables

Remove SPF domain synthesis, just use HELO.

Withhold TLD load error if not defined in conf

Move DKIM endif.

Fix a few cosmetic differences.

DMARC documentation and license