src/src/smtp_in.c

   1 /* $Cambridge: exim/src/src/smtp_in.c,v 1.35 2006/03/06 16:05:12 ph10 Exp $ */
   2
   3 /*************************************************
   4 *     Exim - an Internet mail transport agent    *
   5 *************************************************/
   6
   7 /* Copyright (c) University of Cambridge 1995 - 2006 */
   8 /* See the file NOTICE for conditions of use and distribution. */
   9
  10 /* Functions for handling an incoming SMTP call. */
  11
  12
  13 #include "exim.h"
  14
  15
  16 /* Initialize for TCP wrappers if so configured. It appears that the macro
  17 HAVE_IPV6 is used in some versions of the tcpd.h header, so we unset it before
  18 including that header, and restore its value afterwards. */
  19
  20 #ifdef USE_TCP_WRAPPERS
  21
  22   #if HAVE_IPV6
  23   #define EXIM_HAVE_IPV6
  24   #endif
  25   #undef HAVE_IPV6
  26   #include <tcpd.h>
  27   #undef HAVE_IPV6
  28   #ifdef EXIM_HAVE_IPV6
  29   #define HAVE_IPV6 TRUE
  30   #endif
  31
  32 int allow_severity = LOG_INFO;
  33 int deny_severity  = LOG_NOTICE;
  34 #endif
  35
  36
  37 /* Size of buffer for reading SMTP commands. We used to use 512, as defined
  38 by RFC 821. However, RFC 1869 specifies that this must be increased for SMTP
  39 commands that accept arguments, and this in particular applies to AUTH, where
  40 the data can be quite long. */
  41
  42 #define smtp_cmd_buffer_size  2048
  43
  44 /* Size of buffer for reading SMTP incoming packets */
  45
  46 #define in_buffer_size  8192
  47
  48 /* Structure for SMTP command list */
  49
  50 typedef struct {
  51   char *name;
  52   int len;
  53   short int cmd;
  54   short int has_arg;
  55   short int is_mail_cmd;
  56 } smtp_cmd_list;
  57
  58 /* Codes for identifying commands. We order them so that those that come first
  59 are those for which synchronization is always required. Checking this can help
  60 block some spam.  */
  61
  62 enum {
  63   /* These commands are required to be synchronized, i.e. to be the last in a
  64   block of commands when pipelining. */
  65
  66   HELO_CMD, EHLO_CMD, DATA_CMD, /* These are listed in the pipelining */
  67   VRFY_CMD, EXPN_CMD, NOOP_CMD, /* RFC as requiring synchronization */
  68   ETRN_CMD,                     /* This by analogy with TURN from the RFC */
  69   STARTTLS_CMD,                 /* Required by the STARTTLS RFC */
  70
  71   /* This is a dummy to identify the non-sync commands when pipelining */
  72
  73   NON_SYNC_CMD_PIPELINING,
  74
  75   /* These commands need not be synchronized when pipelining */
  76
  77   MAIL_CMD, RCPT_CMD, RSET_CMD,
  78
  79   /* This is a dummy to identify the non-sync commands when not pipelining */
  80
  81   NON_SYNC_CMD_NON_PIPELINING,
  82
  83   /* I have been unable to find a statement about the use of pipelining
  84   with AUTH, so to be on the safe side it is here, though I kind of feel
  85   it should be up there with the synchronized commands. */
  86
  87   AUTH_CMD,
  88
  89   /* I'm not sure about these, but I don't think they matter. */
  90
  91   QUIT_CMD, HELP_CMD,
  92
  93   /* These are specials that don't correspond to actual commands */
  94
  95   EOF_CMD, OTHER_CMD, BADARG_CMD, BADCHAR_CMD, BADSYN_CMD,
  96   TOO_MANY_NONMAIL_CMD };
  97
  98
  99
 100 /*************************************************
 101 *                Local static variables          *
 102 *************************************************/
 103
 104 static auth_instance *authenticated_by;
 105 static BOOL auth_advertised;
 106 #ifdef SUPPORT_TLS
 107 static BOOL tls_advertised;
 108 #endif
 109 static BOOL esmtp;
 110 static BOOL helo_required = FALSE;
 111 static BOOL helo_verify = FALSE;
 112 static BOOL helo_seen;
 113 static BOOL helo_accept_junk;
 114 static BOOL count_nonmail;
 115 static BOOL pipelining_advertised;
 116 static int  nonmail_command_count;
 117 static int  synprot_error_count;
 118 static int  unknown_command_count;
 119 static int  sync_cmd_limit;
 120 static int  smtp_write_error = 0;
 121
 122 /* We need to know the position of RSET, HELO, EHLO, AUTH, and STARTTLS. Their
 123 final fields of all except AUTH are forced TRUE at the start of a new message
 124 setup, to allow one of each between messages that is not counted as a nonmail
 125 command. (In fact, only one of HELO/EHLO is not counted.) Also, we have to
 126 allow a new EHLO after starting up TLS.
 127
 128 AUTH is "falsely" labelled as a mail command initially, so that it doesn't get
 129 counted. However, the flag is changed when AUTH is received, so that multiple
 130 failing AUTHs will eventually hit the limit. After a successful AUTH, another
 131 AUTH is already forbidden. After a TLS session is started, AUTH's flag is again
 132 forced TRUE, to allow for the re-authentication that can happen at that point.
 133
 134 QUIT is also "falsely" labelled as a mail command so that it doesn't up the
 135 count of non-mail commands and possibly provoke an error. */
 136
 137 static smtp_cmd_list cmd_list[] = {
 138   { "rset",       sizeof("rset")-1,       RSET_CMD, FALSE, FALSE },  /* First */
 139   { "helo",       sizeof("helo")-1,       HELO_CMD, TRUE,  FALSE },
 140   { "ehlo",       sizeof("ehlo")-1,       EHLO_CMD, TRUE,  FALSE },
 141   { "auth",       sizeof("auth")-1,       AUTH_CMD, TRUE,  TRUE  },
 142   #ifdef SUPPORT_TLS
 143   { "starttls",   sizeof("starttls")-1,   STARTTLS_CMD, FALSE, FALSE },
 144   #endif
 145
 146 /* If you change anything above here, also fix the definitions below. */
 147
 148   { "mail from:", sizeof("mail from:")-1, MAIL_CMD, TRUE,  TRUE  },
 149   { "rcpt to:",   sizeof("rcpt to:")-1,   RCPT_CMD, TRUE,  TRUE  },
 150   { "data",       sizeof("data")-1,       DATA_CMD, FALSE, TRUE  },
 151   { "quit",       sizeof("quit")-1,       QUIT_CMD, FALSE, TRUE  },
 152   { "noop",       sizeof("noop")-1,       NOOP_CMD, TRUE,  FALSE },
 153   { "etrn",       sizeof("etrn")-1,       ETRN_CMD, TRUE,  FALSE },
 154   { "vrfy",       sizeof("vrfy")-1,       VRFY_CMD, TRUE,  FALSE },
 155   { "expn",       sizeof("expn")-1,       EXPN_CMD, TRUE,  FALSE },
 156   { "help",       sizeof("help")-1,       HELP_CMD, TRUE,  FALSE }
 157 };
 158
 159 static smtp_cmd_list *cmd_list_end =
 160   cmd_list + sizeof(cmd_list)/sizeof(smtp_cmd_list);
 161
 162 #define CMD_LIST_RSET      0
 163 #define CMD_LIST_HELO      1
 164 #define CMD_LIST_EHLO      2
 165 #define CMD_LIST_AUTH      3
 166 #define CMD_LIST_STARTTLS  4
 167
 168 static uschar *protocols[] = {
 169   US"local-smtp",        /* HELO */
 170   US"local-smtps",       /* The rare case EHLO->STARTTLS->HELO */
 171   US"local-esmtp",       /* EHLO */
 172   US"local-esmtps",      /* EHLO->STARTTLS->EHLO */
 173   US"local-esmtpa",      /* EHLO->AUTH */
 174   US"local-esmtpsa"      /* EHLO->STARTTLS->EHLO->AUTH */
 175   };
 176
 177 #define pnormal  0
 178 #define pextend  2
 179 #define pcrpted  1  /* added to pextend or pnormal */
 180 #define pauthed  2  /* added to pextend */
 181 #define pnlocal  6  /* offset to remove "local" */
 182
 183 /* When reading SMTP from a remote host, we have to use our own versions of the
 184 C input-reading functions, in order to be able to flush the SMTP output only
 185 when about to read more data from the socket. This is the only way to get
 186 optimal performance when the client is using pipelining. Flushing for every
 187 command causes a separate packet and reply packet each time; saving all the
 188 responses up (when pipelining) combines them into one packet and one response.
 189
 190 For simplicity, these functions are used for *all* SMTP input, not only when
 191 receiving over a socket. However, after setting up a secure socket (SSL), input
 192 is read via the OpenSSL library, and another set of functions is used instead
 193 (see tls.c).
 194
 195 These functions are set in the receive_getc etc. variables and called with the
 196 same interface as the C functions. However, since there can only ever be
 197 one incoming SMTP call, we just use a single buffer and flags. There is no need
 198 to implement a complicated private FILE-like structure.*/
 199
 200 static uschar *smtp_inbuffer;
 201 static uschar *smtp_inptr;
 202 static uschar *smtp_inend;
 203 static int     smtp_had_eof;
 204 static int     smtp_had_error;
 205
 206
 207 /*************************************************
 208 *          SMTP version of getc()                *
 209 *************************************************/
 210
 211 /* This gets the next byte from the SMTP input buffer. If the buffer is empty,
 212 it flushes the output, and refills the buffer, with a timeout. The signal
 213 handler is set appropriately by the calling function. This function is not used
 214 after a connection has negotated itself into an TLS/SSL state.
 215
 216 Arguments:  none
 217 Returns:    the next character or EOF
 218 */
 219
 220 int
 221 smtp_getc(void)
 222 {
 223 if (smtp_inptr >= smtp_inend)
 224   {
 225   int rc, save_errno;
 226   fflush(smtp_out);
 227   if (smtp_receive_timeout > 0) alarm(smtp_receive_timeout);
 228   rc = read(fileno(smtp_in), smtp_inbuffer, in_buffer_size);
 229   save_errno = errno;
 230   alarm(0);
 231   if (rc <= 0)
 232     {
 233     /* Must put the error text in fixed store, because this might be during
 234     header reading, where it releases unused store above the header. */
 235     if (rc < 0)
 236       {
 237       smtp_had_error = save_errno;
 238       smtp_read_error = string_copy_malloc(
 239         string_sprintf(" (error: %s)", strerror(save_errno)));
 240       }
 241     else smtp_had_eof = 1;
 242     return EOF;
 243     }
 244   smtp_inend = smtp_inbuffer + rc;
 245   smtp_inptr = smtp_inbuffer;
 246   }
 247 return *smtp_inptr++;
 248 }
 249
 250
 251
 252 /*************************************************
 253 *          SMTP version of ungetc()              *
 254 *************************************************/
 255
 256 /* Puts a character back in the input buffer. Only ever
 257 called once.
 258
 259 Arguments:
 260   ch           the character
 261
 262 Returns:       the character
 263 */
 264
 265 int
 266 smtp_ungetc(int ch)
 267 {
 268 *(--smtp_inptr) = ch;
 269 return ch;
 270 }
 271
 272
 273
 274
 275 /*************************************************
 276 *          SMTP version of feof()                *
 277 *************************************************/
 278
 279 /* Tests for a previous EOF
 280
 281 Arguments:     none
 282 Returns:       non-zero if the eof flag is set
 283 */
 284
 285 int
 286 smtp_feof(void)
 287 {
 288 return smtp_had_eof;
 289 }
 290
 291
 292
 293
 294 /*************************************************
 295 *          SMTP version of ferror()              *
 296 *************************************************/
 297
 298 /* Tests for a previous read error, and returns with errno
 299 restored to what it was when the error was detected.
 300
 301 Arguments:     none
 302 Returns:       non-zero if the error flag is set
 303 */
 304
 305 int
 306 smtp_ferror(void)
 307 {
 308 errno = smtp_had_error;
 309 return smtp_had_error;
 310 }
 311
 312
 313
 314
 315 /*************************************************
 316 *     Write formatted string to SMTP channel     *
 317 *************************************************/
 318
 319 /* This is a separate function so that we don't have to repeat everything for
 320 TLS support or debugging. It is global so that the daemon and the
 321 authentication functions can use it. It does not return any error indication,
 322 because major problems such as dropped connections won't show up till an output
 323 flush for non-TLS connections. The smtp_fflush() function is available for
 324 checking that: for convenience, TLS output errors are remembered here so that
 325 they are also picked up later by smtp_fflush().
 326
 327 Arguments:
 328   format      format string
 329   ...         optional arguments
 330
 331 Returns:      nothing
 332 */
 333
 334 void
 335 smtp_printf(char *format, ...)
 336 {
 337 va_list ap;
 338
 339 DEBUG(D_receive)
 340   {
 341   va_start(ap, format);
 342   (void) string_vformat(big_buffer, big_buffer_size, format, ap);
 343   debug_printf("SMTP>> %s", big_buffer);
 344   }
 345
 346 va_start(ap, format);
 347
 348 /* If in a TLS session we have to format the string, and then write it using a
 349 TLS function. */
 350
 351 #ifdef SUPPORT_TLS
 352 if (tls_active >= 0)
 353   {
 354   if (!string_vformat(big_buffer, big_buffer_size, format, ap))
 355     {
 356     log_write(0, LOG_MAIN|LOG_PANIC, "string too large in smtp_printf");
 357     smtp_closedown(US"Unexpected error");
 358     exim_exit(EXIT_FAILURE);
 359     }
 360   if (tls_write(big_buffer, Ustrlen(big_buffer)) < 0) smtp_write_error = -1;
 361   }
 362 else
 363 #endif
 364
 365 /* Otherwise, just use the standard library function. */
 366
 367 if (vfprintf(smtp_out, format, ap) < 0) smtp_write_error = -1;
 368 va_end(ap);
 369 }
 370
 371
 372
 373 /*************************************************
 374 *        Flush SMTP out and check for error      *
 375 *************************************************/
 376
 377 /* This function isn't currently used within Exim (it detects errors when it
 378 tries to read the next SMTP input), but is available for use in local_scan().
 379 For non-TLS connections, it flushes the output and checks for errors. For
 380 TLS-connections, it checks for a previously-detected TLS write error.
 381
 382 Arguments:  none
 383 Returns:    0 for no error; -1 after an error
 384 */
 385
 386 int
 387 smtp_fflush(void)
 388 {
 389 if (tls_active < 0 && fflush(smtp_out) != 0) smtp_write_error = -1;
 390 return smtp_write_error;
 391 }
 392
 393
 394
 395 /*************************************************
 396 *          SMTP command read timeout             *
 397 *************************************************/
 398
 399 /* Signal handler for timing out incoming SMTP commands. This attempts to
 400 finish off tidily.
 401
 402 Argument: signal number (SIGALRM)
 403 Returns:  nothing
 404 */
 405
 406 static void
 407 command_timeout_handler(int sig)
 408 {
 409 sig = sig;    /* Keep picky compilers happy */
 410 log_write(L_lost_incoming_connection,
 411           LOG_MAIN, "SMTP command timeout on%s connection from %s",
 412           (tls_active >= 0)? " TLS" : "",
 413           host_and_ident(FALSE));
 414 if (smtp_batched_input)
 415   moan_smtp_batch(NULL, "421 SMTP command timeout");  /* Does not return */
 416 smtp_printf("421 %s: SMTP command timeout - closing connection\r\n",
 417   smtp_active_hostname);
 418 mac_smtp_fflush();
 419 exim_exit(EXIT_FAILURE);
 420 }
 421
 422
 423
 424 /*************************************************
 425 *               SIGTERM received                 *
 426 *************************************************/
 427
 428 /* Signal handler for handling SIGTERM. Again, try to finish tidily.
 429
 430 Argument: signal number (SIGTERM)
 431 Returns:  nothing
 432 */
 433
 434 static void
 435 command_sigterm_handler(int sig)
 436 {
 437 sig = sig;    /* Keep picky compilers happy */
 438 log_write(0, LOG_MAIN, "%s closed after SIGTERM", smtp_get_connection_info());
 439 if (smtp_batched_input)
 440   moan_smtp_batch(NULL, "421 SIGTERM received");  /* Does not return */
 441 smtp_printf("421 %s: Service not available - closing connection\r\n",
 442   smtp_active_hostname);
 443 exim_exit(EXIT_FAILURE);
 444 }
 445
 446
 447
 448 /*************************************************
 449 *           Read one command line                *
 450 *************************************************/
 451
 452 /* Strictly, SMTP commands coming over the net are supposed to end with CRLF.
 453 There are sites that don't do this, and in any case internal SMTP probably
 454 should check only for LF. Consequently, we check here for LF only. The line
 455 ends up with [CR]LF removed from its end. If we get an overlong line, treat as
 456 an unknown command. The command is read into the global smtp_cmd_buffer so that
 457 it is available via $smtp_command.
 458
 459 The character reading routine sets up a timeout for each block actually read
 460 from the input (which may contain more than one command). We set up a special
 461 signal handler that closes down the session on a timeout. Control does not
 462 return when it runs.
 463
 464 Arguments:
 465   check_sync   if TRUE, check synchronization rules if global option is TRUE
 466
 467 Returns:       a code identifying the command (enumerated above)
 468 */
 469
 470 static int
 471 smtp_read_command(BOOL check_sync)
 472 {
 473 int c;
 474 int ptr = 0;
 475 smtp_cmd_list *p;
 476 BOOL hadnull = FALSE;
 477
 478 os_non_restarting_signal(SIGALRM, command_timeout_handler);
 479
 480 while ((c = (receive_getc)()) != '\n' && c != EOF)
 481   {
 482   if (ptr >= smtp_cmd_buffer_size)
 483     {
 484     os_non_restarting_signal(SIGALRM, sigalrm_handler);
 485     return OTHER_CMD;
 486     }
 487   if (c == 0)
 488     {
 489     hadnull = TRUE;
 490     c = '?';
 491     }
 492   smtp_cmd_buffer[ptr++] = c;
 493   }
 494
 495 receive_linecount++;    /* For BSMTP errors */
 496 os_non_restarting_signal(SIGALRM, sigalrm_handler);
 497
 498 /* If hit end of file, return pseudo EOF command. Whether we have a
 499 part-line already read doesn't matter, since this is an error state. */
 500
 501 if (c == EOF) return EOF_CMD;
 502
 503 /* Remove any CR and white space at the end of the line, and terminate the
 504 string. */
 505
 506 while (ptr > 0 && isspace(smtp_cmd_buffer[ptr-1])) ptr--;
 507 smtp_cmd_buffer[ptr] = 0;
 508
 509 DEBUG(D_receive) debug_printf("SMTP<< %s\n", smtp_cmd_buffer);
 510
 511 /* NULLs are not allowed in SMTP commands */
 512
 513 if (hadnull) return BADCHAR_CMD;
 514
 515 /* Scan command list and return identity, having set the data pointer
 516 to the start of the actual data characters. Check for SMTP synchronization
 517 if required. */
 518
 519 for (p = cmd_list; p < cmd_list_end; p++)
 520   {
 521   if (strncmpic(smtp_cmd_buffer, US p->name, p->len) == 0)
 522     {
 523     if (smtp_inptr < smtp_inend &&                     /* Outstanding input */
 524         p->cmd < sync_cmd_limit &&                     /* Command should sync */
 525         check_sync &&                                  /* Local flag set */
 526         smtp_enforce_sync &&                           /* Global flag set */
 527         sender_host_address != NULL &&                 /* Not local input */
 528         !sender_host_notsocket)                        /* Really is a socket */
 529       return BADSYN_CMD;
 530
 531     /* Point after the command, but don't skip over leading spaces till after
 532     the following test, so that if it fails, the command name can easily be
 533     logged. */
 534
 535     smtp_cmd_argument = smtp_cmd_buffer + p->len;
 536
 537     /* Count non-mail commands from those hosts that are controlled in this
 538     way. The default is all hosts. We don't waste effort checking the list
 539     until we get a non-mail command, but then cache the result to save checking
 540     again. If there's a DEFER while checking the host, assume it's in the list.
 541
 542     Note that one instance of RSET, EHLO/HELO, and STARTTLS is allowed at the
 543     start of each incoming message by fiddling with the value in the table. */
 544
 545     if (!p->is_mail_cmd)
 546       {
 547       if (count_nonmail == TRUE_UNSET) count_nonmail =
 548         verify_check_host(&smtp_accept_max_nonmail_hosts) != FAIL;
 549       if (count_nonmail && ++nonmail_command_count > smtp_accept_max_nonmail)
 550         return TOO_MANY_NONMAIL_CMD;
 551       }
 552
 553     /* Get the data pointer over leading spaces and return; if there is data
 554     for a command that does not expect it, give the error centrally here. */
 555
 556     while (isspace(*smtp_cmd_argument)) smtp_cmd_argument++;
 557     return (p->has_arg || *smtp_cmd_argument == 0)? p->cmd : BADARG_CMD;
 558     }
 559   }
 560
 561 /* Enforce synchronization for unknown commands */
 562
 563 if (smtp_inptr < smtp_inend &&                     /* Outstanding input */
 564     check_sync &&                                  /* Local flag set */
 565     smtp_enforce_sync &&                           /* Global flag set */
 566     sender_host_address != NULL &&                 /* Not local input */
 567     !sender_host_notsocket)                        /* Really is a socket */
 568   return BADSYN_CMD;
 569
 570 return OTHER_CMD;
 571 }
 572
 573
 574
 575 /*************************************************
 576 *          Forced closedown of call              *
 577 *************************************************/
 578
 579 /* This function is called from log.c when Exim is dying because of a serious
 580 disaster, and also from some other places. If an incoming non-batched SMTP
 581 channel is open, it swallows the rest of the incoming message if in the DATA
 582 phase, sends the reply string, and gives an error to all subsequent commands
 583 except QUIT. The existence of an SMTP call is detected by the non-NULLness of
 584 smtp_in.
 585
 586 Argument:   SMTP reply string to send, excluding the code
 587 Returns:    nothing
 588 */
 589
 590 void
 591 smtp_closedown(uschar *message)
 592 {
 593 if (smtp_in == NULL || smtp_batched_input) return;
 594 receive_swallow_smtp();
 595 smtp_printf("421 %s\r\n", message);
 596
 597 for (;;)
 598   {
 599   switch(smtp_read_command(FALSE))
 600     {
 601     case EOF_CMD:
 602     return;
 603
 604     case QUIT_CMD:
 605     smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
 606     mac_smtp_fflush();
 607     return;
 608
 609     case RSET_CMD:
 610     smtp_printf("250 Reset OK\r\n");
 611     break;
 612
 613     default:
 614     smtp_printf("421 %s\r\n", message);
 615     break;
 616     }
 617   }
 618 }
 619
 620
 621
 622
 623 /*************************************************
 624 *        Set up connection info for logging      *
 625 *************************************************/
 626
 627 /* This function is called when logging information about an SMTP connection.
 628 It sets up appropriate source information, depending on the type of connection.
 629 If sender_fullhost is NULL, we are at a very early stage of the connection;
 630 just use the IP address.
 631
 632 Argument:    none
 633 Returns:     a string describing the connection
 634 */
 635
 636 uschar *
 637 smtp_get_connection_info(void)
 638 {
 639 uschar *hostname = (sender_fullhost == NULL)?
 640   sender_host_address : sender_fullhost;
 641
 642 if (host_checking)
 643   return string_sprintf("SMTP connection from %s", hostname);
 644
 645 if (sender_host_unknown || sender_host_notsocket)
 646   return string_sprintf("SMTP connection from %s", sender_ident);
 647
 648 if (is_inetd)
 649   return string_sprintf("SMTP connection from %s (via inetd)", hostname);
 650
 651 if ((log_extra_selector & LX_incoming_interface) != 0 &&
 652      interface_address != NULL)
 653   return string_sprintf("SMTP connection from %s I=[%s]:%d", hostname,
 654     interface_address, interface_port);
 655
 656 return string_sprintf("SMTP connection from %s", hostname);
 657 }
 658
 659
 660
 661 /*************************************************
 662 *   Check HELO line and set sender_helo_name     *
 663 *************************************************/
 664
 665 /* Check the format of a HELO line. The data for HELO/EHLO is supposed to be
 666 the domain name of the sending host, or an ip literal in square brackets. The
 667 arrgument is placed in sender_helo_name, which is in malloc store, because it
 668 must persist over multiple incoming messages. If helo_accept_junk is set, this
 669 host is permitted to send any old junk (needed for some broken hosts).
 670 Otherwise, helo_allow_chars can be used for rogue characters in general
 671 (typically people want to let in underscores).
 672
 673 Argument:
 674   s       the data portion of the line (already past any white space)
 675
 676 Returns:  TRUE or FALSE
 677 */
 678
 679 static BOOL
 680 check_helo(uschar *s)
 681 {
 682 uschar *start = s;
 683 uschar *end = s + Ustrlen(s);
 684 BOOL yield = helo_accept_junk;
 685
 686 /* Discard any previous helo name */
 687
 688 if (sender_helo_name != NULL)
 689   {
 690   store_free(sender_helo_name);
 691   sender_helo_name = NULL;
 692   }
 693
 694 /* Skip tests if junk is permitted. */
 695
 696 if (!yield)
 697   {
 698   /* Allow the new standard form for IPv6 address literals, namely,
 699   [IPv6:....], and because someone is bound to use it, allow an equivalent
 700   IPv4 form. Allow plain addresses as well. */
 701
 702   if (*s == '[')
 703     {
 704     if (end[-1] == ']')
 705       {
 706       end[-1] = 0;
 707       if (strncmpic(s, US"[IPv6:", 6) == 0)
 708         yield = (string_is_ip_address(s+6, NULL) == 6);
 709       else if (strncmpic(s, US"[IPv4:", 6) == 0)
 710         yield = (string_is_ip_address(s+6, NULL) == 4);
 711       else
 712         yield = (string_is_ip_address(s+1, NULL) != 0);
 713       end[-1] = ']';
 714       }
 715     }
 716
 717   /* Non-literals must be alpha, dot, hyphen, plus any non-valid chars
 718   that have been configured (usually underscore - sigh). */
 719
 720   else if (*s != 0)
 721     {
 722     yield = TRUE;
 723     while (*s != 0)
 724       {
 725       if (!isalnum(*s) && *s != '.' && *s != '-' &&
 726           Ustrchr(helo_allow_chars, *s) == NULL)
 727         {
 728         yield = FALSE;
 729         break;
 730         }
 731       s++;
 732       }
 733     }
 734   }
 735
 736 /* Save argument if OK */
 737
 738 if (yield) sender_helo_name = string_copy_malloc(start);
 739 return yield;
 740 }
 741
 742
 743
 744
 745
 746 /*************************************************
 747 *         Extract SMTP command option            *
 748 *************************************************/
 749
 750 /* This function picks the next option setting off the end of smtp_cmd_argument. It
 751 is called for MAIL FROM and RCPT TO commands, to pick off the optional ESMTP
 752 things that can appear there.
 753
 754 Arguments:
 755    name           point this at the name
 756    value          point this at the data string
 757
 758 Returns:          TRUE if found an option
 759 */
 760
 761 static BOOL
 762 extract_option(uschar **name, uschar **value)
 763 {
 764 uschar *n;
 765 uschar *v = smtp_cmd_argument + Ustrlen(smtp_cmd_argument) -1;
 766 while (isspace(*v)) v--;
 767 v[1] = 0;
 768
 769 while (v > smtp_cmd_argument && *v != '=' && !isspace(*v)) v--;
 770 if (*v != '=') return FALSE;
 771
 772 n = v;
 773 while(isalpha(n[-1])) n--;
 774
 775 if (n[-1] != ' ') return FALSE;
 776
 777 n[-1] = 0;
 778 *name = n;
 779 *v++ = 0;
 780 *value = v;
 781 return TRUE;
 782 }
 783
 784
 785
 786
 787
 788
 789
 790 /*************************************************
 791 *         Reset for new message                  *
 792 *************************************************/
 793
 794 /* This function is called whenever the SMTP session is reset from
 795 within either of the setup functions.
 796
 797 Argument:   the stacking pool storage reset point
 798 Returns:    nothing
 799 */
 800
 801 static void
 802 smtp_reset(void *reset_point)
 803 {
 804 int i;
 805 store_reset(reset_point);
 806 recipients_list = NULL;
 807 rcpt_count = rcpt_defer_count = rcpt_fail_count =
 808   raw_recipients_count = recipients_count = recipients_list_max = 0;
 809 message_linecount = 0;
 810 message_size = -1;
 811 acl_added_headers = NULL;
 812 queue_only_policy = FALSE;
 813 deliver_freeze = FALSE;                              /* Can be set by ACL */
 814 freeze_tell = freeze_tell_config;                    /* Can be set by ACL */
 815 fake_response = OK;                                  /* Can be set by ACL */
 816 #ifdef WITH_CONTENT_SCAN
 817 no_mbox_unspool = FALSE;                             /* Can be set by ACL */
 818 #endif
 819 submission_mode = FALSE;                             /* Can be set by ACL */
 820 suppress_local_fixups = FALSE;                       /* Can be set by ACL */
 821 active_local_from_check = local_from_check;          /* Can be set by ACL */
 822 active_local_sender_retain = local_sender_retain;    /* Can be set by ACL */
 823 sender_address = NULL;
 824 submission_name = NULL;                              /* Can be set by ACL */
 825 raw_sender = NULL;                  /* After SMTP rewrite, before qualifying */
 826 sender_address_unrewritten = NULL;  /* Set only after verify rewrite */
 827 sender_verified_list = NULL;        /* No senders verified */
 828 memset(sender_address_cache, 0, sizeof(sender_address_cache));
 829 memset(sender_domain_cache, 0, sizeof(sender_domain_cache));
 830 authenticated_sender = NULL;
 831 #ifdef EXPERIMENTAL_BRIGHTMAIL
 832 bmi_run = 0;
 833 bmi_verdicts = NULL;
 834 #endif
 835 #ifdef EXPERIMENTAL_DOMAINKEYS
 836 dk_do_verify = 0;
 837 #endif
 838 #ifdef EXPERIMENTAL_SPF
 839 spf_header_comment = NULL;
 840 spf_received = NULL;
 841 spf_result = NULL;
 842 spf_smtp_comment = NULL;
 843 #endif
 844 body_linecount = body_zerocount = 0;
 845
 846 sender_rate = sender_rate_limit = sender_rate_period = NULL;
 847 ratelimiters_mail = NULL;           /* Updated by ratelimit ACL condition */
 848                    /* Note that ratelimiters_conn persists across resets. */
 849
 850 /* The message variables follow the connection variables. */
 851
 852 for (i = 0; i < ACL_MVARS; i++) acl_var[ACL_CVARS + i] = NULL;
 853
 854 /* The message body variables use malloc store. They may be set if this is
 855 not the first message in an SMTP session and the previous message caused them
 856 to be referenced in an ACL. */
 857
 858 if (message_body != NULL)
 859   {
 860   store_free(message_body);
 861   message_body = NULL;
 862   }
 863
 864 if (message_body_end != NULL)
 865   {
 866   store_free(message_body_end);
 867   message_body_end = NULL;
 868   }
 869
 870 /* Warning log messages are also saved in malloc store. They are saved to avoid
 871 repetition in the same message, but it seems right to repeat them for different
 872 messagess. */
 873
 874 while (acl_warn_logged != NULL)
 875   {
 876   string_item *this = acl_warn_logged;
 877   acl_warn_logged = acl_warn_logged->next;
 878   store_free(this);
 879   }
 880 }
 881
 882
 883
 884
 885
 886 /*************************************************
 887 *  Initialize for incoming batched SMTP message  *
 888 *************************************************/
 889
 890 /* This function is called from smtp_setup_msg() in the case when
 891 smtp_batched_input is true. This happens when -bS is used to pass a whole batch
 892 of messages in one file with SMTP commands between them. All errors must be
 893 reported by sending a message, and only MAIL FROM, RCPT TO, and DATA are
 894 relevant. After an error on a sender, or an invalid recipient, the remainder
 895 of the message is skipped. The value of received_protocol is already set.
 896
 897 Argument: none
 898 Returns:  > 0 message successfully started (reached DATA)
 899           = 0 QUIT read or end of file reached
 900           < 0 should not occur
 901 */
 902
 903 static int
 904 smtp_setup_batch_msg(void)
 905 {
 906 int done = 0;
 907 void *reset_point = store_get(0);
 908
 909 /* Save the line count at the start of each transaction - single commands
 910 like HELO and RSET count as whole transactions. */
 911
 912 bsmtp_transaction_linecount = receive_linecount;
 913
 914 if ((receive_feof)()) return 0;   /* Treat EOF as QUIT */
 915
 916 smtp_reset(reset_point);                /* Reset for start of message */
 917
 918 /* Deal with SMTP commands. This loop is exited by setting done to a POSITIVE
 919 value. The values are 2 larger than the required yield of the function. */
 920
 921 while (done <= 0)
 922   {
 923   uschar *errmess;
 924   uschar *recipient = NULL;
 925   int start, end, sender_domain, recipient_domain;
 926
 927   switch(smtp_read_command(FALSE))
 928     {
 929     /* The HELO/EHLO commands set sender_address_helo if they have
 930     valid data; otherwise they are ignored, except that they do
 931     a reset of the state. */
 932
 933     case HELO_CMD:
 934     case EHLO_CMD:
 935
 936     check_helo(smtp_cmd_argument);
 937     /* Fall through */
 938
 939     case RSET_CMD:
 940     smtp_reset(reset_point);
 941     bsmtp_transaction_linecount = receive_linecount;
 942     break;
 943
 944
 945     /* The MAIL FROM command requires an address as an operand. All we
 946     do here is to parse it for syntactic correctness. The form "<>" is
 947     a special case which converts into an empty string. The start/end
 948     pointers in the original are not used further for this address, as
 949     it is the canonical extracted address which is all that is kept. */
 950
 951     case MAIL_CMD:
 952     if (sender_address != NULL)
 953       /* The function moan_smtp_batch() does not return. */
 954       moan_smtp_batch(smtp_cmd_buffer, "503 Sender already given");
 955
 956     if (smtp_cmd_argument[0] == 0)
 957       /* The function moan_smtp_batch() does not return. */
 958       moan_smtp_batch(smtp_cmd_buffer, "501 MAIL FROM must have an address operand");
 959
 960     /* Reset to start of message */
 961
 962     smtp_reset(reset_point);
 963
 964     /* Apply SMTP rewrite */
 965
 966     raw_sender = ((rewrite_existflags & rewrite_smtp) != 0)?
 967       rewrite_one(smtp_cmd_argument, rewrite_smtp|rewrite_smtp_sender, NULL, FALSE,
 968         US"", global_rewrite_rules) : smtp_cmd_argument;
 969
 970     /* Extract the address; the TRUE flag allows <> as valid */
 971
 972     raw_sender =
 973       parse_extract_address(raw_sender, &errmess, &start, &end, &sender_domain,
 974         TRUE);
 975
 976     if (raw_sender == NULL)
 977       /* The function moan_smtp_batch() does not return. */
 978       moan_smtp_batch(smtp_cmd_buffer, "501 %s", errmess);
 979
 980     sender_address = string_copy(raw_sender);
 981
 982     /* Qualify unqualified sender addresses if permitted to do so. */
 983
 984     if (sender_domain == 0 && sender_address[0] != 0 && sender_address[0] != '@')
 985       {
 986       if (allow_unqualified_sender)
 987         {
 988         sender_address = rewrite_address_qualify(sender_address, FALSE);
 989         DEBUG(D_receive) debug_printf("unqualified address %s accepted "
 990           "and rewritten\n", raw_sender);
 991         }
 992       /* The function moan_smtp_batch() does not return. */
 993       else moan_smtp_batch(smtp_cmd_buffer, "501 sender address must contain "
 994         "a domain");
 995       }
 996     break;
 997
 998
 999     /* The RCPT TO command requires an address as an operand. All we do
1000     here is to parse it for syntactic correctness. There may be any number
1001     of RCPT TO commands, specifying multiple senders. We build them all into
1002     a data structure that is in argc/argv format. The start/end values
1003     given by parse_extract_address are not used, as we keep only the
1004     extracted address. */
1005
1006     case RCPT_CMD:
1007     if (sender_address == NULL)
1008       /* The function moan_smtp_batch() does not return. */
1009       moan_smtp_batch(smtp_cmd_buffer, "503 No sender yet given");
1010
1011     if (smtp_cmd_argument[0] == 0)
1012       /* The function moan_smtp_batch() does not return. */
1013       moan_smtp_batch(smtp_cmd_buffer, "501 RCPT TO must have an address operand");
1014
1015     /* Check maximum number allowed */
1016
1017     if (recipients_max > 0 && recipients_count + 1 > recipients_max)
1018       /* The function moan_smtp_batch() does not return. */
1019       moan_smtp_batch(smtp_cmd_buffer, "%s too many recipients",
1020         recipients_max_reject? "552": "452");
1021
1022     /* Apply SMTP rewrite, then extract address. Don't allow "<>" as a
1023     recipient address */
1024
1025     recipient = ((rewrite_existflags & rewrite_smtp) != 0)?
1026       rewrite_one(smtp_cmd_argument, rewrite_smtp, NULL, FALSE, US"",
1027         global_rewrite_rules) : smtp_cmd_argument;
1028
1029     /* rfc821_domains = TRUE; << no longer needed */
1030     recipient = parse_extract_address(recipient, &errmess, &start, &end,
1031       &recipient_domain, FALSE);
1032     /* rfc821_domains = FALSE; << no longer needed */
1033
1034     if (recipient == NULL)
1035       /* The function moan_smtp_batch() does not return. */
1036       moan_smtp_batch(smtp_cmd_buffer, "501 %s", errmess);
1037
1038     /* If the recipient address is unqualified, qualify it if permitted. Then
1039     add it to the list of recipients. */
1040
1041     if (recipient_domain == 0)
1042       {
1043       if (allow_unqualified_recipient)
1044         {
1045         DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
1046           recipient);
1047         recipient = rewrite_address_qualify(recipient, TRUE);
1048         }
1049       /* The function moan_smtp_batch() does not return. */
1050       else moan_smtp_batch(smtp_cmd_buffer, "501 recipient address must contain "
1051         "a domain");
1052       }
1053     receive_add_recipient(recipient, -1);
1054     break;
1055
1056
1057     /* The DATA command is legal only if it follows successful MAIL FROM
1058     and RCPT TO commands. This function is complete when a valid DATA
1059     command is encountered. */
1060
1061     case DATA_CMD:
1062     if (sender_address == NULL || recipients_count <= 0)
1063       {
1064       /* The function moan_smtp_batch() does not return. */
1065       if (sender_address == NULL)
1066         moan_smtp_batch(smtp_cmd_buffer,
1067           "503 MAIL FROM:<sender> command must precede DATA");
1068       else
1069         moan_smtp_batch(smtp_cmd_buffer,
1070           "503 RCPT TO:<recipient> must precede DATA");
1071       }
1072     else
1073       {
1074       done = 3;                      /* DATA successfully achieved */
1075       message_ended = END_NOTENDED;  /* Indicate in middle of message */
1076       }
1077     break;
1078
1079
1080     /* The VRFY, EXPN, HELP, ETRN, and NOOP commands are ignored. */
1081
1082     case VRFY_CMD:
1083     case EXPN_CMD:
1084     case HELP_CMD:
1085     case NOOP_CMD:
1086     case ETRN_CMD:
1087     bsmtp_transaction_linecount = receive_linecount;
1088     break;
1089
1090
1091     case EOF_CMD:
1092     case QUIT_CMD:
1093     done = 2;
1094     break;
1095
1096
1097     case BADARG_CMD:
1098     /* The function moan_smtp_batch() does not return. */
1099     moan_smtp_batch(smtp_cmd_buffer, "501 Unexpected argument data");
1100     break;
1101
1102
1103     case BADCHAR_CMD:
1104     /* The function moan_smtp_batch() does not return. */
1105     moan_smtp_batch(smtp_cmd_buffer, "501 Unexpected NULL in SMTP command");
1106     break;
1107
1108
1109     default:
1110     /* The function moan_smtp_batch() does not return. */
1111     moan_smtp_batch(smtp_cmd_buffer, "500 Command unrecognized");
1112     break;
1113     }
1114   }
1115
1116 return done - 2;  /* Convert yield values */
1117 }
1118
1119
1120
1121
1122 /*************************************************
1123 *          Start an SMTP session                 *
1124 *************************************************/
1125
1126 /* This function is called at the start of an SMTP session. Thereafter,
1127 smtp_setup_msg() is called to initiate each separate message. This
1128 function does host-specific testing, and outputs the banner line.
1129
1130 Arguments:     none
1131 Returns:       FALSE if the session can not continue; something has
1132                gone wrong, or the connection to the host is blocked
1133 */
1134
1135 BOOL
1136 smtp_start_session(void)
1137 {
1138 int size = 256;
1139 int i, ptr;
1140 uschar *p, *s, *ss;
1141
1142 /* Default values for certain variables */
1143
1144 helo_seen = esmtp = helo_accept_junk = FALSE;
1145 count_nonmail = TRUE_UNSET;
1146 synprot_error_count = unknown_command_count = nonmail_command_count = 0;
1147 smtp_delay_mail = smtp_rlm_base;
1148 auth_advertised = FALSE;
1149 pipelining_advertised = FALSE;
1150 sync_cmd_limit = NON_SYNC_CMD_NON_PIPELINING;
1151
1152 memset(sender_host_cache, 0, sizeof(sender_host_cache));
1153
1154 sender_host_authenticated = NULL;
1155 authenticated_by = NULL;
1156
1157 #ifdef SUPPORT_TLS
1158 tls_cipher = tls_peerdn = NULL;
1159 tls_advertised = FALSE;
1160 #endif
1161
1162 /* Reset ACL connection variables */
1163
1164 for (i = 0; i < ACL_CVARS; i++) acl_var[i] = NULL;
1165
1166 /* Allow for trailing 0 in the command buffer. */
1167
1168 smtp_cmd_buffer = (uschar *)malloc(smtp_cmd_buffer_size + 1);
1169 if (smtp_cmd_buffer == NULL)
1170   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1171     "malloc() failed for SMTP command buffer");
1172
1173 /* For batched input, the protocol setting can be overridden from the
1174 command line by a trusted caller. */
1175
1176 if (smtp_batched_input)
1177   {
1178   if (received_protocol == NULL) received_protocol = US"local-bsmtp";
1179   }
1180
1181 /* For non-batched SMTP input, the protocol setting is forced here. It will be
1182 reset later if any of EHLO/AUTH/STARTTLS are received. */
1183
1184 else
1185   received_protocol =
1186     protocols[pnormal] + ((sender_host_address != NULL)? pnlocal : 0);
1187
1188 /* Set up the buffer for inputting using direct read() calls, and arrange to
1189 call the local functions instead of the standard C ones. */
1190
1191 smtp_inbuffer = (uschar *)malloc(in_buffer_size);
1192 if (smtp_inbuffer == NULL)
1193   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "malloc() failed for SMTP input buffer");
1194 receive_getc = smtp_getc;
1195 receive_ungetc = smtp_ungetc;
1196 receive_feof = smtp_feof;
1197 receive_ferror = smtp_ferror;
1198 smtp_inptr = smtp_inend = smtp_inbuffer;
1199 smtp_had_eof = smtp_had_error = 0;
1200
1201 /* Set up the message size limit; this may be host-specific */
1202
1203 thismessage_size_limit = expand_string_integer(message_size_limit);
1204 if (thismessage_size_limit < 0)
1205   {
1206   if (thismessage_size_limit == -1)
1207     log_write(0, LOG_MAIN|LOG_PANIC, "unable to expand message_size_limit: "
1208       "%s", expand_string_message);
1209   else
1210     log_write(0, LOG_MAIN|LOG_PANIC, "invalid message_size_limit: "
1211       "%s", expand_string_message);
1212   smtp_closedown(US"Temporary local problem - please try later");
1213   return FALSE;
1214   }
1215
1216 /* When a message is input locally via the -bs or -bS options, sender_host_
1217 unknown is set unless -oMa was used to force an IP address, in which case it
1218 is checked like a real remote connection. When -bs is used from inetd, this
1219 flag is not set, causing the sending host to be checked. The code that deals
1220 with IP source routing (if configured) is never required for -bs or -bS and
1221 the flag sender_host_notsocket is used to suppress it.
1222
1223 If smtp_accept_max and smtp_accept_reserve are set, keep some connections in
1224 reserve for certain hosts and/or networks. */
1225
1226 if (!sender_host_unknown)
1227   {
1228   int rc;
1229   BOOL reserved_host = FALSE;
1230
1231   /* Look up IP options (source routing info) on the socket if this is not an
1232   -oMa "host", and if any are found, log them and drop the connection.
1233
1234   Linux (and others now, see below) is different to everyone else, so there
1235   has to be some conditional compilation here. Versions of Linux before 2.1.15
1236   used a structure whose name was "options". Somebody finally realized that
1237   this name was silly, and it got changed to "ip_options". I use the
1238   newer name here, but there is a fudge in the script that sets up os.h
1239   to define a macro in older Linux systems.
1240
1241   Sigh. Linux is a fast-moving target. Another generation of Linux uses
1242   glibc 2, which has chosen ip_opts for the structure name. This is now
1243   really a glibc thing rather than a Linux thing, so the condition name
1244   has been changed to reflect this. It is relevant also to GNU/Hurd.
1245
1246   Mac OS 10.x (Darwin) is like the later glibc versions, but without the
1247   setting of the __GLIBC__ macro, so we can't detect it automatically. There's
1248   a special macro defined in the os.h file.
1249
1250   Some DGUX versions on older hardware appear not to support IP options at
1251   all, so there is now a general macro which can be set to cut out this
1252   support altogether.
1253
1254   How to do this properly in IPv6 is not yet known. */
1255
1256   #if !HAVE_IPV6 && !defined(NO_IP_OPTIONS)
1257
1258   #ifdef GLIBC_IP_OPTIONS
1259     #if (!defined __GLIBC__) || (__GLIBC__ < 2)
1260     #define OPTSTYLE 1
1261     #else
1262     #define OPTSTYLE 2
1263     #endif
1264   #elif defined DARWIN_IP_OPTIONS
1265     #define OPTSTYLE 2
1266   #else
1267     #define OPTSTYLE 3
1268   #endif
1269
1270   if (!host_checking && !sender_host_notsocket)
1271     {
1272     #if OPTSTYLE == 1
1273     EXIM_SOCKLEN_T optlen = sizeof(struct ip_options) + MAX_IPOPTLEN;
1274     struct ip_options *ipopt = store_get(optlen);
1275     #elif OPTSTYLE == 2
1276     struct ip_opts ipoptblock;
1277     struct ip_opts *ipopt = &ipoptblock;
1278     EXIM_SOCKLEN_T optlen = sizeof(ipoptblock);
1279     #else
1280     struct ipoption ipoptblock;
1281     struct ipoption *ipopt = &ipoptblock;
1282     EXIM_SOCKLEN_T optlen = sizeof(ipoptblock);
1283     #endif
1284
1285     /* Occasional genuine failures of getsockopt() have been seen - for
1286     example, "reset by peer". Therefore, just log and give up on this
1287     call, unless the error is ENOPROTOOPT. This error is given by systems
1288     that have the interfaces but not the mechanism - e.g. GNU/Hurd at the time
1289     of writing. So for that error, carry on - we just can't do an IP options
1290     check. */
1291
1292     DEBUG(D_receive) debug_printf("checking for IP options\n");
1293
1294     if (getsockopt(fileno(smtp_out), IPPROTO_IP, IP_OPTIONS, (uschar *)(ipopt),
1295           &optlen) < 0)
1296       {
1297       if (errno != ENOPROTOOPT)
1298         {
1299         log_write(0, LOG_MAIN, "getsockopt() failed from %s: %s",
1300           host_and_ident(FALSE), strerror(errno));
1301         smtp_printf("451 SMTP service not available\r\n");
1302         return FALSE;
1303         }
1304       }
1305
1306     /* Deal with any IP options that are set. On the systems I have looked at,
1307     the value of MAX_IPOPTLEN has been 40, meaning that there should never be
1308     more logging data than will fit in big_buffer. Nevertheless, after somebody
1309     questioned this code, I've added in some paranoid checking. */
1310
1311     else if (optlen > 0)
1312       {
1313       uschar *p = big_buffer;
1314       uschar *pend = big_buffer + big_buffer_size;
1315       uschar *opt, *adptr;
1316       int optcount;
1317       struct in_addr addr;
1318
1319       #if OPTSTYLE == 1
1320       uschar *optstart = (uschar *)(ipopt->__data);
1321       #elif OPTSTYLE == 2
1322       uschar *optstart = (uschar *)(ipopt->ip_opts);
1323       #else
1324       uschar *optstart = (uschar *)(ipopt->ipopt_list);
1325       #endif
1326
1327       DEBUG(D_receive) debug_printf("IP options exist\n");
1328
1329       Ustrcpy(p, "IP options on incoming call:");
1330       p += Ustrlen(p);
1331
1332       for (opt = optstart; opt != NULL &&
1333            opt < (uschar *)(ipopt) + optlen;)
1334         {
1335         switch (*opt)
1336           {
1337           case IPOPT_EOL:
1338           opt = NULL;
1339           break;
1340
1341           case IPOPT_NOP:
1342           opt++;
1343           break;
1344
1345           case IPOPT_SSRR:
1346           case IPOPT_LSRR:
1347           if (!string_format(p, pend-p, " %s [@%s",
1348                (*opt == IPOPT_SSRR)? "SSRR" : "LSRR",
1349                #if OPTSTYLE == 1
1350                inet_ntoa(*((struct in_addr *)(&(ipopt->faddr))))))
1351                #elif OPTSTYLE == 2
1352                inet_ntoa(ipopt->ip_dst)))
1353                #else
1354                inet_ntoa(ipopt->ipopt_dst)))
1355                #endif
1356             {
1357             opt = NULL;
1358             break;
1359             }
1360
1361           p += Ustrlen(p);
1362           optcount = (opt[1] - 3) / sizeof(struct in_addr);
1363           adptr = opt + 3;
1364           while (optcount-- > 0)
1365             {
1366             memcpy(&addr, adptr, sizeof(addr));
1367             if (!string_format(p, pend - p - 1, "%s%s",
1368                   (optcount == 0)? ":" : "@", inet_ntoa(addr)))
1369               {
1370               opt = NULL;
1371               break;
1372               }
1373             p += Ustrlen(p);
1374             adptr += sizeof(struct in_addr);
1375             }
1376           *p++ = ']';
1377           opt += opt[1];
1378           break;
1379
1380           default:
1381             {
1382             int i;
1383             if (pend - p < 4 + 3*opt[1]) { opt = NULL; break; }
1384             Ustrcat(p, "[ ");
1385             p += 2;
1386             for (i = 0; i < opt[1]; i++)
1387               {
1388               sprintf(CS p, "%2.2x ", opt[i]);
1389               p += 3;
1390               }
1391             *p++ = ']';
1392             }
1393           opt += opt[1];
1394           break;
1395           }
1396         }
1397
1398       *p = 0;
1399       log_write(0, LOG_MAIN, "%s", big_buffer);
1400
1401       /* Refuse any call with IP options. This is what tcpwrappers 7.5 does. */
1402
1403       log_write(0, LOG_MAIN|LOG_REJECT,
1404         "connection from %s refused (IP options)", host_and_ident(FALSE));
1405
1406       smtp_printf("554 SMTP service not available\r\n");
1407       return FALSE;
1408       }
1409
1410     /* Length of options = 0 => there are no options */
1411
1412     else DEBUG(D_receive) debug_printf("no IP options found\n");
1413     }
1414   #endif  /* HAVE_IPV6 && !defined(NO_IP_OPTIONS) */
1415
1416   /* Set keep-alive in socket options. The option is on by default. This
1417   setting is an attempt to get rid of some hanging connections that stick in
1418   read() when the remote end (usually a dialup) goes away. */
1419
1420   if (smtp_accept_keepalive && !sender_host_notsocket)
1421     ip_keepalive(fileno(smtp_out), sender_host_address, FALSE);
1422
1423   /* If the current host matches host_lookup, set the name by doing a
1424   reverse lookup. On failure, sender_host_name will be NULL and
1425   host_lookup_failed will be TRUE. This may or may not be serious - optional
1426   checks later. */
1427
1428   if (verify_check_host(&host_lookup) == OK)
1429     {
1430     (void)host_name_lookup();
1431     host_build_sender_fullhost();
1432     }
1433
1434   /* Delay this until we have the full name, if it is looked up. */
1435
1436   set_process_info("handling incoming connection from %s",
1437     host_and_ident(FALSE));
1438
1439   /* Start up TLS if tls_on_connect is set. This is for supporting the legacy
1440   smtps port for use with older style SSL MTAs. */
1441
1442   #ifdef SUPPORT_TLS
1443   if (tls_on_connect && tls_server_start(tls_require_ciphers) != OK)
1444     return FALSE;
1445   #endif
1446
1447   /* Test for explicit connection rejection */
1448
1449   if (verify_check_host(&host_reject_connection) == OK)
1450     {
1451     log_write(L_connection_reject, LOG_MAIN|LOG_REJECT, "refused connection "
1452       "from %s (host_reject_connection)", host_and_ident(FALSE));
1453     smtp_printf("554 SMTP service not available\r\n");
1454     return FALSE;
1455     }
1456
1457   /* Test with TCP Wrappers if so configured */
1458
1459   #ifdef USE_TCP_WRAPPERS
1460   if (!hosts_ctl("exim",
1461          (sender_host_name == NULL)? STRING_UNKNOWN : CS sender_host_name,
1462          (sender_host_address == NULL)? STRING_UNKNOWN : CS sender_host_address,
1463          (sender_ident == NULL)? STRING_UNKNOWN : CS sender_ident))
1464     {
1465     HDEBUG(D_receive) debug_printf("tcp wrappers rejection\n");
1466     log_write(L_connection_reject,
1467               LOG_MAIN|LOG_REJECT, "refused connection from %s "
1468               "(tcp wrappers)", host_and_ident(FALSE));
1469     smtp_printf("554 SMTP service not available\r\n");
1470     return FALSE;
1471     }
1472   #endif
1473
1474   /* Check for reserved slots. Note that the count value doesn't include
1475   this process, as it gets upped in the parent process. */
1476
1477   if (smtp_accept_max > 0 &&
1478       smtp_accept_count + 1 > smtp_accept_max - smtp_accept_reserve)
1479     {
1480     if ((rc = verify_check_host(&smtp_reserve_hosts)) != OK)
1481       {
1482       log_write(L_connection_reject,
1483         LOG_MAIN, "temporarily refused connection from %s: not in "
1484         "reserve list: connected=%d max=%d reserve=%d%s",
1485         host_and_ident(FALSE), smtp_accept_count, smtp_accept_max,
1486         smtp_accept_reserve, (rc == DEFER)? " (lookup deferred)" : "");
1487       smtp_printf("421 %s: Too many concurrent SMTP connections; "
1488         "please try again later\r\n", smtp_active_hostname);
1489       return FALSE;
1490       }
1491     reserved_host = TRUE;
1492     }
1493
1494   /* If a load level above which only messages from reserved hosts are
1495   accepted is set, check the load. For incoming calls via the daemon, the
1496   check is done in the superior process if there are no reserved hosts, to
1497   save a fork. In all cases, the load average will already be available
1498   in a global variable at this point. */
1499
1500   if (smtp_load_reserve >= 0 &&
1501        load_average > smtp_load_reserve &&
1502        !reserved_host &&
1503        verify_check_host(&smtp_reserve_hosts) != OK)
1504     {
1505     log_write(L_connection_reject,
1506       LOG_MAIN, "temporarily refused connection from %s: not in "
1507       "reserve list and load average = %.2f", host_and_ident(FALSE),
1508       (double)load_average/1000.0);
1509     smtp_printf("421 %s: Too much load; please try again later\r\n",
1510       smtp_active_hostname);
1511     return FALSE;
1512     }
1513
1514   /* Determine whether unqualified senders or recipients are permitted
1515   for this host. Unfortunately, we have to do this every time, in order to
1516   set the flags so that they can be inspected when considering qualifying
1517   addresses in the headers. For a site that permits no qualification, this
1518   won't take long, however. */
1519
1520   allow_unqualified_sender =
1521     verify_check_host(&sender_unqualified_hosts) == OK;
1522
1523   allow_unqualified_recipient =
1524     verify_check_host(&recipient_unqualified_hosts) == OK;
1525
1526   /* Determine whether HELO/EHLO is required for this host. The requirement
1527   can be hard or soft. */
1528
1529   helo_required = verify_check_host(&helo_verify_hosts) == OK;
1530   if (!helo_required)
1531     helo_verify = verify_check_host(&helo_try_verify_hosts) == OK;
1532
1533   /* Determine whether this hosts is permitted to send syntactic junk
1534   after a HELO or EHLO command. */
1535
1536   helo_accept_junk = verify_check_host(&helo_accept_junk_hosts) == OK;
1537   }
1538
1539 /* For batch SMTP input we are now done. */
1540
1541 if (smtp_batched_input) return TRUE;
1542
1543 /* Run the ACL if it exists */
1544
1545 if (acl_smtp_connect != NULL)
1546   {
1547   int rc;
1548   uschar *user_msg, *log_msg;
1549   rc = acl_check(ACL_WHERE_CONNECT, NULL, acl_smtp_connect, &user_msg,
1550     &log_msg);
1551   if (rc != OK)
1552     {
1553     (void)smtp_handle_acl_fail(ACL_WHERE_CONNECT, rc, user_msg, log_msg);
1554     return FALSE;
1555     }
1556   }
1557
1558 /* Output the initial message for a two-way SMTP connection. It may contain
1559 newlines, which then cause a multi-line response to be given. */
1560
1561 s = expand_string(smtp_banner);
1562 if (s == NULL)
1563   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Expansion of \"%s\" (smtp_banner) "
1564     "failed: %s", smtp_banner, expand_string_message);
1565
1566 /* Remove any terminating newlines; might as well remove trailing space too */
1567
1568 p = s + Ustrlen(s);
1569 while (p > s && isspace(p[-1])) p--;
1570 *p = 0;
1571
1572 /* It seems that CC:Mail is braindead, and assumes that the greeting message
1573 is all contained in a single IP packet. The original code wrote out the
1574 greeting using several calls to fprint/fputc, and on busy servers this could
1575 cause it to be split over more than one packet - which caused CC:Mail to fall
1576 over when it got the second part of the greeting after sending its first
1577 command. Sigh. To try to avoid this, build the complete greeting message
1578 first, and output it in one fell swoop. This gives a better chance of it
1579 ending up as a single packet. */
1580
1581 ss = store_get(size);
1582 ptr = 0;
1583
1584 p = s;
1585 do       /* At least once, in case we have an empty string */
1586   {
1587   int len;
1588   uschar *linebreak = Ustrchr(p, '\n');
1589   if (linebreak == NULL)
1590     {
1591     len = Ustrlen(p);
1592     ss = string_cat(ss, &size, &ptr, US"220 ", 4);
1593     }
1594   else
1595     {
1596     len = linebreak - p;
1597     ss = string_cat(ss, &size, &ptr, US"220-", 4);
1598     }
1599   ss = string_cat(ss, &size, &ptr, p, len);
1600   ss = string_cat(ss, &size, &ptr, US"\r\n", 2);
1601   p += len;
1602   if (linebreak != NULL) p++;
1603   }
1604 while (*p != 0);
1605
1606 ss[ptr] = 0;  /* string_cat leaves room for this */
1607
1608 /* Before we write the banner, check that there is no input pending, unless
1609 this synchronisation check is disabled. */
1610
1611 if (smtp_enforce_sync && sender_host_address != NULL && !sender_host_notsocket)
1612   {
1613   fd_set fds;
1614   struct timeval tzero;
1615   tzero.tv_sec = 0;
1616   tzero.tv_usec = 0;
1617   FD_ZERO(&fds);
1618   FD_SET(fileno(smtp_in), &fds);
1619   if (select(fileno(smtp_in) + 1, (SELECT_ARG2_TYPE *)&fds, NULL, NULL,
1620       &tzero) > 0)
1621     {
1622     int rc = read(fileno(smtp_in), smtp_inbuffer, in_buffer_size);
1623     if (rc > 0)
1624       {
1625       if (rc > 150) rc = 150;
1626       smtp_inbuffer[rc] = 0;
1627       log_write(0, LOG_MAIN|LOG_REJECT, "SMTP protocol "
1628         "synchronization error (input sent without waiting for greeting): "
1629         "rejected connection from %s input=\"%s\"", host_and_ident(TRUE),
1630         string_printing(smtp_inbuffer));
1631       smtp_printf("554 SMTP synchronization error\r\n");
1632       return FALSE;
1633       }
1634     }
1635   }
1636
1637 /* Now output the banner */
1638
1639 smtp_printf("%s", ss);
1640 return TRUE;
1641 }
1642
1643
1644
1645
1646
1647 /*************************************************
1648 *     Handle SMTP syntax and protocol errors     *
1649 *************************************************/
1650
1651 /* Write to the log for SMTP syntax errors in incoming commands, if configured
1652 to do so. Then transmit the error response. The return value depends on the
1653 number of syntax and protocol errors in this SMTP session.
1654
1655 Arguments:
1656   type      error type, given as a log flag bit
1657   code      response code; <= 0 means don't send a response
1658   data      data to reflect in the response (can be NULL)
1659   errmess   the error message
1660
1661 Returns:    -1   limit of syntax/protocol errors NOT exceeded
1662             +1   limit of syntax/protocol errors IS exceeded
1663
1664 These values fit in with the values of the "done" variable in the main
1665 processing loop in smtp_setup_msg(). */
1666
1667 static int
1668 synprot_error(int type, int code, uschar *data, uschar *errmess)
1669 {
1670 int yield = -1;
1671
1672 log_write(type, LOG_MAIN, "SMTP %s error in \"%s\" %s %s",
1673   (type == L_smtp_syntax_error)? "syntax" : "protocol",
1674   string_printing(smtp_cmd_buffer), host_and_ident(TRUE), errmess);
1675
1676 if (++synprot_error_count > smtp_max_synprot_errors)
1677   {
1678   yield = 1;
1679   log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
1680     "syntax or protocol errors (last command was \"%s\")",
1681     host_and_ident(FALSE), smtp_cmd_buffer);
1682   }
1683
1684 if (code > 0)
1685   {
1686   smtp_printf("%d%c%s%s%s\r\n", code, (yield == 1)? '-' : ' ',
1687     (data == NULL)? US"" : data, (data == NULL)? US"" : US": ", errmess);
1688   if (yield == 1)
1689     smtp_printf("%d Too many syntax or protocol errors\r\n", code);
1690   }
1691
1692 return yield;
1693 }
1694
1695
1696
1697
1698 /*************************************************
1699 *          Log incomplete transactions           *
1700 *************************************************/
1701
1702 /* This function is called after a transaction has been aborted by RSET, QUIT,
1703 connection drops or other errors. It logs the envelope information received
1704 so far in order to preserve address verification attempts.
1705
1706 Argument:   string to indicate what aborted the transaction
1707 Returns:    nothing
1708 */
1709
1710 static void
1711 incomplete_transaction_log(uschar *what)
1712 {
1713 if (sender_address == NULL ||                 /* No transaction in progress */
1714     (log_write_selector & L_smtp_incomplete_transaction) == 0  /* Not logging */
1715   ) return;
1716
1717 /* Build list of recipients for logging */
1718
1719 if (recipients_count > 0)
1720   {
1721   int i;
1722   raw_recipients = store_get(recipients_count * sizeof(uschar *));
1723   for (i = 0; i < recipients_count; i++)
1724     raw_recipients[i] = recipients_list[i].address;
1725   raw_recipients_count = recipients_count;
1726   }
1727
1728 log_write(L_smtp_incomplete_transaction, LOG_MAIN|LOG_SENDER|LOG_RECIPIENTS,
1729   "%s incomplete transaction (%s)", host_and_ident(TRUE), what);
1730 }
1731
1732
1733
1734
1735 /*************************************************
1736 *    Send SMTP response, possibly multiline      *
1737 *************************************************/
1738
1739 /* There are, it seems, broken clients out there that cannot handle multiline
1740 responses. If no_multiline_responses is TRUE (it can be set from an ACL), we
1741 output nothing for non-final calls, and only the first line for anything else.
1742
1743 Arguments:
1744   code          SMTP code
1745   final         FALSE if the last line isn't the final line
1746   msg           message text, possibly containing newlines
1747
1748 Returns:        nothing
1749 */
1750
1751 void
1752 smtp_respond(int code, BOOL final, uschar *msg)
1753 {
1754 if (!final && no_multiline_responses) return;
1755
1756 for (;;)
1757   {
1758   uschar *nl = Ustrchr(msg, '\n');
1759   if (nl == NULL)
1760     {
1761     smtp_printf("%d%c%s\r\n", code, final? ' ':'-', msg);
1762     return;
1763     }
1764   else if (nl[1] == 0 || no_multiline_responses)
1765     {
1766     smtp_printf("%d%c%.*s\r\n", code, final? ' ':'-', (int)(nl - msg), msg);
1767     return;
1768     }
1769   else
1770     {
1771     smtp_printf("%d-%.*s\r\n", code, (int)(nl - msg), msg);
1772     msg = nl + 1;
1773     while (isspace(*msg)) msg++;
1774     }
1775   }
1776 }
1777
1778
1779
1780
1781 /*************************************************
1782 *           Handle an ACL failure                *
1783 *************************************************/
1784
1785 /* This function is called when acl_check() fails. As well as calls from within
1786 this module, it is called from receive.c for an ACL after DATA. It sorts out
1787 logging the incident, and sets up the error response. A message containing
1788 newlines is turned into a multiline SMTP response, but for logging, only the
1789 first line is used.
1790
1791 There's a table of the response codes to use in globals.c, along with the table
1792 of names. VFRY is special. Despite RFC1123 it defaults disabled in Exim.
1793 However, discussion in connection with RFC 821bis (aka RFC 2821) has concluded
1794 that the response should be 252 in the disabled state, because there are broken
1795 clients that try VRFY before RCPT. A 5xx response should be given only when the
1796 address is positively known to be undeliverable. Sigh. Also, for ETRN, 458 is
1797 given on refusal, and for AUTH, 503.
1798
1799 Arguments:
1800   where      where the ACL was called from
1801   rc         the failure code
1802   user_msg   a message that can be included in an SMTP response
1803   log_msg    a message for logging
1804
1805 Returns:     0 in most cases
1806              2 if the failure code was FAIL_DROP, in which case the
1807                SMTP connection should be dropped (this value fits with the
1808                "done" variable in smtp_setup_msg() below)
1809 */
1810
1811 int
1812 smtp_handle_acl_fail(int where, int rc, uschar *user_msg, uschar *log_msg)
1813 {
1814 int code = acl_wherecodes[where];
1815 BOOL drop = rc == FAIL_DROP;
1816 uschar *lognl;
1817 uschar *sender_info = US"";
1818 uschar *what =
1819 #ifdef WITH_CONTENT_SCAN
1820   (where == ACL_WHERE_MIME)? US"during MIME ACL checks" :
1821 #endif
1822   (where == ACL_WHERE_PREDATA)? US"DATA" :
1823   (where == ACL_WHERE_DATA)? US"after DATA" :
1824   (smtp_cmd_argument == NULL)?
1825     string_sprintf("%s in \"connect\" ACL", acl_wherenames[where]) :
1826     string_sprintf("%s %s", acl_wherenames[where], smtp_cmd_argument);
1827
1828 if (drop) rc = FAIL;
1829
1830 /* We used to have sender_address here; however, there was a bug that was not
1831 updating sender_address after a rewrite during a verify. When this bug was
1832 fixed, sender_address at this point became the rewritten address. I'm not sure
1833 this is what should be logged, so I've changed to logging the unrewritten
1834 address to retain backward compatibility. */
1835
1836 #ifndef WITH_CONTENT_SCAN
1837 if (where == ACL_WHERE_RCPT || where == ACL_WHERE_DATA)
1838 #else
1839 if (where == ACL_WHERE_RCPT || where == ACL_WHERE_DATA || where == ACL_WHERE_MIME)
1840 #endif
1841   {
1842   sender_info = string_sprintf("F=<%s> ", (sender_address_unrewritten != NULL)?
1843     sender_address_unrewritten : sender_address);
1844   }
1845
1846 /* If there's been a sender verification failure with a specific message, and
1847 we have not sent a response about it yet, do so now, as a preliminary line for
1848 failures, but not defers. However, always log it for defer, and log it for fail
1849 unless the sender_verify_fail log selector has been turned off. */
1850
1851 if (sender_verified_failed != NULL &&
1852     !testflag(sender_verified_failed, af_sverify_told))
1853   {
1854   setflag(sender_verified_failed, af_sverify_told);
1855
1856   if (rc != FAIL || (log_extra_selector & LX_sender_verify_fail) != 0)
1857     log_write(0, LOG_MAIN|LOG_REJECT, "%s sender verify %s for <%s>%s",
1858       host_and_ident(TRUE),
1859       ((sender_verified_failed->special_action & 255) == DEFER)? "defer":"fail",
1860       sender_verified_failed->address,
1861       (sender_verified_failed->message == NULL)? US"" :
1862       string_sprintf(": %s", sender_verified_failed->message));
1863
1864   if (rc == FAIL && sender_verified_failed->user_message != NULL)
1865     smtp_respond(code, FALSE, string_sprintf(
1866         testflag(sender_verified_failed, af_verify_pmfail)?
1867           "Postmaster verification failed while checking <%s>\n%s\n"
1868           "Several RFCs state that you are required to have a postmaster\n"
1869           "mailbox for each mail domain. This host does not accept mail\n"
1870           "from domains whose servers reject the postmaster address."
1871           :
1872         testflag(sender_verified_failed, af_verify_nsfail)?
1873           "Callback setup failed while verifying <%s>\n%s\n"
1874           "The initial connection, or a HELO or MAIL FROM:<> command was\n"
1875           "rejected. Refusing MAIL FROM:<> does not help fight spam, disregards\n"
1876           "RFC requirements, and stops you from receiving standard bounce\n"
1877           "messages. This host does not accept mail from domains whose servers\n"
1878           "refuse bounces."
1879           :
1880           "Verification failed for <%s>\n%s",
1881         sender_verified_failed->address,
1882         sender_verified_failed->user_message));
1883   }
1884
1885 /* Sort out text for logging */
1886
1887 log_msg = (log_msg == NULL)? US"" : string_sprintf(": %s", log_msg);
1888 lognl = Ustrchr(log_msg, '\n');
1889 if (lognl != NULL) *lognl = 0;
1890
1891 /* Send permanent failure response to the command, but the code used isn't
1892 always a 5xx one - see comments at the start of this function. If the original
1893 rc was FAIL_DROP we drop the connection and yield 2. */
1894
1895 if (rc == FAIL) smtp_respond(code, TRUE, (user_msg == NULL)?
1896   US"Administrative prohibition" : user_msg);
1897
1898 /* Send temporary failure response to the command. Don't give any details,
1899 unless acl_temp_details is set. This is TRUE for a callout defer, a "defer"
1900 verb, and for a header verify when smtp_return_error_details is set.
1901
1902 This conditional logic is all somewhat of a mess because of the odd
1903 interactions between temp_details and return_error_details. One day it should
1904 be re-implemented in a tidier fashion. */
1905
1906 else
1907   {
1908   if (acl_temp_details && user_msg != NULL)
1909     {
1910     if (smtp_return_error_details &&
1911         sender_verified_failed != NULL &&
1912         sender_verified_failed->message != NULL)
1913       {
1914       smtp_respond(451, FALSE, sender_verified_failed->message);
1915       }
1916     smtp_respond(451, TRUE, user_msg);
1917     }
1918   else
1919     smtp_printf("451 Temporary local problem - please try later\r\n");
1920   }
1921
1922 /* Log the incident. If the connection is not forcibly to be dropped, return 0.
1923 Otherwise, log why it is closing if required and return 2.  */
1924
1925 log_write(0, LOG_MAIN|LOG_REJECT, "%s %s%srejected %s%s",
1926   host_and_ident(TRUE),
1927   sender_info, (rc == FAIL)? US"" : US"temporarily ", what, log_msg);
1928
1929 if (!drop) return 0;
1930
1931 log_write(L_smtp_connection, LOG_MAIN, "%s closed by DROP in ACL",
1932   smtp_get_connection_info());
1933 return 2;
1934 }
1935
1936
1937
1938
1939 /*************************************************
1940 *             Verify HELO argument               *
1941 *************************************************/
1942
1943 /* This function is called if helo_verify_hosts or helo_try_verify_hosts is
1944 matched. It is also called from ACL processing if verify = helo is used and
1945 verification was not previously tried (i.e. helo_try_verify_hosts was not
1946 matched). The result of its processing is to set helo_verified and
1947 helo_verify_failed. These variables should both be FALSE for this function to
1948 be called.
1949
1950 Note that EHLO/HELO is legitimately allowed to quote an address literal. Allow
1951 for IPv6 ::ffff: literals.
1952
1953 Argument:   none
1954 Returns:    TRUE if testing was completed;
1955             FALSE on a temporary failure
1956 */
1957
1958 BOOL
1959 smtp_verify_helo(void)
1960 {
1961 BOOL yield = TRUE;
1962
1963 HDEBUG(D_receive) debug_printf("verifying EHLO/HELO argument \"%s\"\n",
1964   sender_helo_name);
1965
1966 if (sender_helo_name == NULL)
1967   {
1968   HDEBUG(D_receive) debug_printf("no EHLO/HELO command was issued\n");
1969   }
1970
1971 else if (sender_helo_name[0] == '[')
1972   {
1973   helo_verified = Ustrncmp(sender_helo_name+1, sender_host_address,
1974     Ustrlen(sender_host_address)) == 0;
1975
1976   #if HAVE_IPV6
1977   if (!helo_verified)
1978     {
1979     if (strncmpic(sender_host_address, US"::ffff:", 7) == 0)
1980       helo_verified = Ustrncmp(sender_helo_name + 1,
1981         sender_host_address + 7, Ustrlen(sender_host_address) - 7) == 0;
1982     }
1983   #endif
1984
1985   HDEBUG(D_receive)
1986     { if (helo_verified) debug_printf("matched host address\n"); }
1987   }
1988
1989 /* Do a reverse lookup if one hasn't already given a positive or negative
1990 response. If that fails, or the name doesn't match, try checking with a forward
1991 lookup. */
1992
1993 else
1994   {
1995   if (sender_host_name == NULL && !host_lookup_failed)
1996     yield = host_name_lookup() != DEFER;
1997
1998   /* If a host name is known, check it and all its aliases. */
1999
2000   if (sender_host_name != NULL)
2001     {
2002     helo_verified = strcmpic(sender_host_name, sender_helo_name) == 0;
2003
2004     if (helo_verified)
2005       {
2006       HDEBUG(D_receive) debug_printf("matched host name\n");
2007       }
2008     else
2009       {
2010       uschar **aliases = sender_host_aliases;
2011       while (*aliases != NULL)
2012         {
2013         helo_verified = strcmpic(*aliases++, sender_helo_name) == 0;
2014         if (helo_verified) break;
2015         }
2016       HDEBUG(D_receive)
2017         {
2018         if (helo_verified)
2019           debug_printf("matched alias %s\n", *(--aliases));
2020         }
2021       }
2022     }
2023
2024   /* Final attempt: try a forward lookup of the helo name */
2025
2026   if (!helo_verified)
2027     {
2028     int rc;
2029     host_item h;
2030     h.name = sender_helo_name;
2031     h.address = NULL;
2032     h.mx = MX_NONE;
2033     h.next = NULL;
2034     HDEBUG(D_receive) debug_printf("getting IP address for %s\n",
2035       sender_helo_name);
2036     rc = host_find_byname(&h, NULL, NULL, TRUE);
2037     if (rc == HOST_FOUND || rc == HOST_FOUND_LOCAL)
2038       {
2039       host_item *hh = &h;
2040       while (hh != NULL)
2041         {
2042         if (Ustrcmp(hh->address, sender_host_address) == 0)
2043           {
2044           helo_verified = TRUE;
2045           HDEBUG(D_receive)
2046             debug_printf("IP address for %s matches calling address\n",
2047               sender_helo_name);
2048           break;
2049           }
2050         hh = hh->next;
2051         }
2052       }
2053     }
2054   }
2055
2056 if (!helo_verified) helo_verify_failed = FALSE;  /* We've tried ... */
2057 return yield;
2058 }
2059
2060
2061
2062
2063 /*************************************************
2064 *       Initialize for SMTP incoming message     *
2065 *************************************************/
2066
2067 /* This function conducts the initial dialogue at the start of an incoming SMTP
2068 message, and builds a list of recipients. However, if the incoming message
2069 is part of a batch (-bS option) a separate function is called since it would
2070 be messy having tests splattered about all over this function. This function
2071 therefore handles the case where interaction is occurring. The input and output
2072 files are set up in smtp_in and smtp_out.
2073
2074 The global recipients_list is set to point to a vector of recipient_item
2075 blocks, whose number is given by recipients_count. This is extended by the
2076 receive_add_recipient() function. The global variable sender_address is set to
2077 the sender's address. The yield is +1 if a message has been successfully
2078 started, 0 if a QUIT command was encountered or the connection was refused from
2079 the particular host, or -1 if the connection was lost.
2080
2081 Argument: none
2082
2083 Returns:  > 0 message successfully started (reached DATA)
2084           = 0 QUIT read or end of file reached or call refused
2085           < 0 lost connection
2086 */
2087
2088 int
2089 smtp_setup_msg(void)
2090 {
2091 int done = 0;
2092 BOOL toomany = FALSE;
2093 BOOL discarded = FALSE;
2094 BOOL last_was_rej_mail = FALSE;
2095 BOOL last_was_rcpt = FALSE;
2096 void *reset_point = store_get(0);
2097
2098 DEBUG(D_receive) debug_printf("smtp_setup_msg entered\n");
2099
2100 /* Reset for start of new message. We allow one RSET not to be counted as a
2101 nonmail command, for those MTAs that insist on sending it between every
2102 message. Ditto for EHLO/HELO and for STARTTLS, to allow for going in and out of
2103 TLS between messages (an Exim client may do this if it has messages queued up
2104 for the host). Note: we do NOT reset AUTH at this point. */
2105
2106 smtp_reset(reset_point);
2107 message_ended = END_NOTSTARTED;
2108
2109 cmd_list[CMD_LIST_RSET].is_mail_cmd = TRUE;
2110 cmd_list[CMD_LIST_HELO].is_mail_cmd = TRUE;
2111 cmd_list[CMD_LIST_EHLO].is_mail_cmd = TRUE;
2112 #ifdef SUPPORT_TLS
2113 cmd_list[CMD_LIST_STARTTLS].is_mail_cmd = TRUE;
2114 #endif
2115
2116 /* Set the local signal handler for SIGTERM - it tries to end off tidily */
2117
2118 os_non_restarting_signal(SIGTERM, command_sigterm_handler);
2119
2120 /* Batched SMTP is handled in a different function. */
2121
2122 if (smtp_batched_input) return smtp_setup_batch_msg();
2123
2124 /* Deal with SMTP commands. This loop is exited by setting done to a POSITIVE
2125 value. The values are 2 larger than the required yield of the function. */
2126
2127 while (done <= 0)
2128   {
2129   uschar **argv;
2130   uschar *etrn_command;
2131   uschar *etrn_serialize_key;
2132   uschar *errmess;
2133   uschar *user_msg, *log_msg;
2134   uschar *recipient = NULL;
2135   uschar *hello = NULL;
2136   uschar *set_id = NULL;
2137   uschar *s, *ss;
2138   BOOL was_rej_mail = FALSE;
2139   BOOL was_rcpt = FALSE;
2140   void (*oldsignal)(int);
2141   pid_t pid;
2142   int start, end, sender_domain, recipient_domain;
2143   int ptr, size, rc;
2144   int c, i;
2145   auth_instance *au;
2146
2147   switch(smtp_read_command(TRUE))
2148     {
2149     /* The AUTH command is not permitted to occur inside a transaction, and may
2150     occur successfully only once per connection. Actually, that isn't quite
2151     true. When TLS is started, all previous information about a connection must
2152     be discarded, so a new AUTH is permitted at that time.
2153
2154     AUTH may only be used when it has been advertised. However, it seems that
2155     there are clients that send AUTH when it hasn't been advertised, some of
2156     them even doing this after HELO. And there are MTAs that accept this. Sigh.
2157     So there's a get-out that allows this to happen.
2158
2159     AUTH is initially labelled as a "nonmail command" so that one occurrence
2160     doesn't get counted. We change the label here so that multiple failing
2161     AUTHS will eventually hit the nonmail threshold. */
2162
2163     case AUTH_CMD:
2164     authentication_failed = TRUE;
2165     cmd_list[CMD_LIST_AUTH].is_mail_cmd = FALSE;
2166
2167     if (!auth_advertised && !allow_auth_unadvertised)
2168       {
2169       done = synprot_error(L_smtp_protocol_error, 503, NULL,
2170         US"AUTH command used when not advertised");
2171       break;
2172       }
2173     if (sender_host_authenticated != NULL)
2174       {
2175       done = synprot_error(L_smtp_protocol_error, 503, NULL,
2176         US"already authenticated");
2177       break;
2178       }
2179     if (sender_address != NULL)
2180       {
2181       done = synprot_error(L_smtp_protocol_error, 503, NULL,
2182         US"not permitted in mail transaction");
2183       break;
2184       }
2185
2186     /* Check the ACL */
2187
2188     if (acl_smtp_auth != NULL)
2189       {
2190       rc = acl_check(ACL_WHERE_AUTH, NULL, acl_smtp_auth, &user_msg, &log_msg);
2191       if (rc != OK)
2192         {
2193         done = smtp_handle_acl_fail(ACL_WHERE_AUTH, rc, user_msg, log_msg);
2194         break;
2195         }
2196       }
2197
2198     /* Find the name of the requested authentication mechanism. */
2199
2200     s = smtp_cmd_argument;
2201     while ((c = *smtp_cmd_argument) != 0 && !isspace(c))
2202       {
2203       if (!isalnum(c) && c != '-' && c != '_')
2204         {
2205         done = synprot_error(L_smtp_syntax_error, 501, NULL,
2206           US"invalid character in authentication mechanism name");
2207         goto COMMAND_LOOP;
2208         }
2209       smtp_cmd_argument++;
2210       }
2211
2212     /* If not at the end of the line, we must be at white space. Terminate the
2213     name and move the pointer on to any data that may be present. */
2214
2215     if (*smtp_cmd_argument != 0)
2216       {
2217       *smtp_cmd_argument++ = 0;
2218       while (isspace(*smtp_cmd_argument)) smtp_cmd_argument++;
2219       }
2220
2221     /* Search for an authentication mechanism which is configured for use
2222     as a server and which has been advertised (unless, sigh, allow_auth_
2223     unadvertised is set). */
2224
2225     for (au = auths; au != NULL; au = au->next)
2226       {
2227       if (strcmpic(s, au->public_name) == 0 && au->server &&
2228           (au->advertised || allow_auth_unadvertised)) break;
2229       }
2230
2231     if (au == NULL)
2232       {
2233       done = synprot_error(L_smtp_protocol_error, 504, NULL,
2234         string_sprintf("%s authentication mechanism not supported", s));
2235       break;
2236       }
2237
2238     /* Run the checking code, passing the remainder of the command line as
2239     data. Initials the $auth<n> variables as empty. Initialize $0 empty and set
2240     it as the only set numerical variable. The authenticator may set $auth<n>
2241     and also set other numeric variables. The $auth<n> variables are preferred
2242     nowadays; the numerical variables remain for backwards compatibility.
2243
2244     Afterwards, have a go at expanding the set_id string, even if
2245     authentication failed - for bad passwords it can be useful to log the
2246     userid. On success, require set_id to expand and exist, and put it in
2247     authenticated_id. Save this in permanent store, as the working store gets
2248     reset at HELO, RSET, etc. */
2249
2250     for (i = 0; i < AUTH_VARS; i++) auth_vars[i] = NULL;
2251     expand_nmax = 0;
2252     expand_nlength[0] = 0;   /* $0 contains nothing */
2253
2254     c = (au->info->servercode)(au, smtp_cmd_argument);
2255     if (au->set_id != NULL) set_id = expand_string(au->set_id);
2256     expand_nmax = -1;        /* Reset numeric variables */
2257     for (i = 0; i < AUTH_VARS; i++) auth_vars[i] = NULL;   /* Reset $auth<n> */
2258
2259     /* The value of authenticated_id is stored in the spool file and printed in
2260     log lines. It must not contain binary zeros or newline characters. In
2261     normal use, it never will, but when playing around or testing, this error
2262     can (did) happen. To guard against this, ensure that the id contains only
2263     printing characters. */
2264
2265     if (set_id != NULL) set_id = string_printing(set_id);
2266
2267     /* For the non-OK cases, set up additional logging data if set_id
2268     is not empty. */
2269
2270     if (c != OK)
2271       {
2272       if (set_id != NULL && *set_id != 0)
2273         set_id = string_sprintf(" (set_id=%s)", set_id);
2274       else set_id = US"";
2275       }
2276
2277     /* Switch on the result */
2278
2279     switch(c)
2280       {
2281       case OK:
2282       if (au->set_id == NULL || set_id != NULL)    /* Complete success */
2283         {
2284         if (set_id != NULL) authenticated_id = string_copy_malloc(set_id);
2285         sender_host_authenticated = au->name;
2286         authentication_failed = FALSE;
2287         received_protocol =
2288           protocols[pextend + pauthed + ((tls_active >= 0)? pcrpted:0)] +
2289             ((sender_host_address != NULL)? pnlocal : 0);
2290         s = ss = US"235 Authentication succeeded";
2291         authenticated_by = au;
2292         break;
2293         }
2294
2295       /* Authentication succeeded, but we failed to expand the set_id string.
2296       Treat this as a temporary error. */
2297
2298       auth_defer_msg = expand_string_message;
2299       /* Fall through */
2300
2301       case DEFER:
2302       s = string_sprintf("435 Unable to authenticate at present%s",
2303         auth_defer_user_msg);
2304       ss = string_sprintf("435 Unable to authenticate at present%s: %s",
2305         set_id, auth_defer_msg);
2306       break;
2307
2308       case BAD64:
2309       s = ss = US"501 Invalid base64 data";
2310       break;
2311
2312       case CANCELLED:
2313       s = ss = US"501 Authentication cancelled";
2314       break;
2315
2316       case UNEXPECTED:
2317       s = ss = US"553 Initial data not expected";
2318       break;
2319
2320       case FAIL:
2321       s = US"535 Incorrect authentication data";
2322       ss = string_sprintf("535 Incorrect authentication data%s", set_id);
2323       break;
2324
2325       default:
2326       s = US"435 Internal error";
2327       ss = string_sprintf("435 Internal error%s: return %d from authentication "
2328         "check", set_id, c);
2329       break;
2330       }
2331
2332     smtp_printf("%s\r\n", s);
2333     if (c != OK)
2334       log_write(0, LOG_MAIN|LOG_REJECT, "%s authenticator failed for %s: %s",
2335         au->name, host_and_ident(FALSE), ss);
2336
2337     break;  /* AUTH_CMD */
2338
2339     /* The HELO/EHLO commands are permitted to appear in the middle of a
2340     session as well as at the beginning. They have the effect of a reset in
2341     addition to their other functions. Their absence at the start cannot be
2342     taken to be an error.
2343
2344     RFC 2821 says:
2345
2346       If the EHLO command is not acceptable to the SMTP server, 501, 500,
2347       or 502 failure replies MUST be returned as appropriate.  The SMTP
2348       server MUST stay in the same state after transmitting these replies
2349       that it was in before the EHLO was received.
2350
2351     Therefore, we do not do the reset until after checking the command for
2352     acceptability. This change was made for Exim release 4.11. Previously
2353     it did the reset first. */
2354
2355     case HELO_CMD:
2356     hello = US"HELO";
2357     esmtp = FALSE;
2358     goto HELO_EHLO;
2359
2360     case EHLO_CMD:
2361     hello = US"EHLO";
2362     esmtp = TRUE;
2363
2364     HELO_EHLO:      /* Common code for HELO and EHLO */
2365     cmd_list[CMD_LIST_HELO].is_mail_cmd = FALSE;
2366     cmd_list[CMD_LIST_EHLO].is_mail_cmd = FALSE;
2367
2368     /* Reject the HELO if its argument was invalid or non-existent. A
2369     successful check causes the argument to be saved in malloc store. */
2370
2371     if (!check_helo(smtp_cmd_argument))
2372       {
2373       smtp_printf("501 Syntactically invalid %s argument(s)\r\n", hello);
2374
2375       log_write(0, LOG_MAIN|LOG_REJECT, "rejected %s from %s: syntactically "
2376         "invalid argument(s): %s", hello, host_and_ident(FALSE),
2377         (*smtp_cmd_argument == 0)? US"(no argument given)" :
2378                            string_printing(smtp_cmd_argument));
2379
2380       if (++synprot_error_count > smtp_max_synprot_errors)
2381         {
2382         log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
2383           "syntax or protocol errors (last command was \"%s\")",
2384           host_and_ident(FALSE), smtp_cmd_buffer);
2385         done = 1;
2386         }
2387
2388       break;
2389       }
2390
2391     /* If sender_host_unknown is true, we have got here via the -bs interface,
2392     not called from inetd. Otherwise, we are running an IP connection and the
2393     host address will be set. If the helo name is the primary name of this
2394     host and we haven't done a reverse lookup, force one now. If helo_required
2395     is set, ensure that the HELO name matches the actual host. If helo_verify
2396     is set, do the same check, but softly. */
2397
2398     if (!sender_host_unknown)
2399       {
2400       BOOL old_helo_verified = helo_verified;
2401       uschar *p = smtp_cmd_argument;
2402
2403       while (*p != 0 && !isspace(*p)) { *p = tolower(*p); p++; }
2404       *p = 0;
2405
2406       /* Force a reverse lookup if HELO quoted something in helo_lookup_domains
2407       because otherwise the log can be confusing. */
2408
2409       if (sender_host_name == NULL &&
2410            (deliver_domain = sender_helo_name,  /* set $domain */
2411             match_isinlist(sender_helo_name, &helo_lookup_domains, 0,
2412               &domainlist_anchor, NULL, MCL_DOMAIN, TRUE, NULL)) == OK)
2413         (void)host_name_lookup();
2414
2415       /* Rebuild the fullhost info to include the HELO name (and the real name
2416       if it was looked up.) */
2417
2418       host_build_sender_fullhost();  /* Rebuild */
2419       set_process_info("handling%s incoming connection from %s",
2420         (tls_active >= 0)? " TLS" : "", host_and_ident(FALSE));
2421
2422       /* Verify if configured. This doesn't give much security, but it does
2423       make some people happy to be able to do it. If helo_required is set,
2424       (host matches helo_verify_hosts) failure forces rejection. If helo_verify
2425       is set (host matches helo_try_verify_hosts), it does not. This is perhaps
2426       now obsolescent, since the verification can now be requested selectively
2427       at ACL time. */
2428
2429       helo_verified = helo_verify_failed = FALSE;
2430       if (helo_required || helo_verify)
2431         {
2432         BOOL tempfail = !smtp_verify_helo();
2433         if (!helo_verified)
2434           {
2435           if (helo_required)
2436             {
2437             smtp_printf("%d %s argument does not match calling host\r\n",
2438               tempfail? 451 : 550, hello);
2439             log_write(0, LOG_MAIN|LOG_REJECT, "%srejected \"%s %s\" from %s",
2440               tempfail? "temporarily " : "",
2441               hello, sender_helo_name, host_and_ident(FALSE));
2442             helo_verified = old_helo_verified;
2443             break;                   /* End of HELO/EHLO processing */
2444             }
2445           HDEBUG(D_all) debug_printf("%s verification failed but host is in "
2446             "helo_try_verify_hosts\n", hello);
2447           }
2448         }
2449       }
2450
2451 #ifdef EXPERIMENTAL_SPF
2452     /* set up SPF context */
2453     spf_init(sender_helo_name, sender_host_address);
2454 #endif
2455
2456     /* Apply an ACL check if one is defined */
2457
2458     if (acl_smtp_helo != NULL)
2459       {
2460       rc = acl_check(ACL_WHERE_HELO, NULL, acl_smtp_helo, &user_msg, &log_msg);
2461       if (rc != OK)
2462         {
2463         done = smtp_handle_acl_fail(ACL_WHERE_HELO, rc, user_msg, log_msg);
2464         sender_helo_name = NULL;
2465         host_build_sender_fullhost();  /* Rebuild */
2466         break;
2467         }
2468       }
2469
2470     /* The EHLO/HELO command is acceptable. Reset the protocol and the state,
2471     abandoning any previous message. */
2472
2473     received_protocol = (esmtp?
2474       protocols[pextend +
2475         ((sender_host_authenticated != NULL)? pauthed : 0) +
2476         ((tls_active >= 0)? pcrpted : 0)]
2477       :
2478       protocols[pnormal + ((tls_active >= 0)? pcrpted : 0)])
2479       +
2480       ((sender_host_address != NULL)? pnlocal : 0);
2481
2482     smtp_reset(reset_point);
2483     toomany = FALSE;
2484
2485     /* Generate an OK reply, including the ident if present, and also
2486     the IP address if present. Reflecting back the ident is intended
2487     as a deterrent to mail forgers. For maximum efficiency, and also
2488     because some broken systems expect each response to be in a single
2489     packet, arrange that it is sent in one write(). */
2490
2491     auth_advertised = FALSE;
2492     pipelining_advertised = FALSE;
2493     #ifdef SUPPORT_TLS
2494     tls_advertised = FALSE;
2495     #endif
2496
2497     s = string_sprintf("250 %s Hello %s%s%s",
2498       smtp_active_hostname,
2499       (sender_ident == NULL)?  US"" : sender_ident,
2500       (sender_ident == NULL)?  US"" : US" at ",
2501       (sender_host_name == NULL)? sender_helo_name : sender_host_name);
2502
2503     ptr = Ustrlen(s);
2504     size = ptr + 1;
2505
2506     if (sender_host_address != NULL)
2507       {
2508       s = string_cat(s, &size, &ptr, US" [", 2);
2509       s = string_cat(s, &size, &ptr, sender_host_address,
2510         Ustrlen(sender_host_address));
2511       s = string_cat(s, &size, &ptr, US"]", 1);
2512       }
2513
2514     s = string_cat(s, &size, &ptr, US"\r\n", 2);
2515
2516     /* If we received EHLO, we must create a multiline response which includes
2517     the functions supported. */
2518
2519     if (esmtp)
2520       {
2521       s[3] = '-';
2522
2523       /* I'm not entirely happy with this, as an MTA is supposed to check
2524       that it has enough room to accept a message of maximum size before
2525       it sends this. However, there seems little point in not sending it.
2526       The actual size check happens later at MAIL FROM time. By postponing it
2527       till then, VRFY and EXPN can be used after EHLO when space is short. */
2528
2529       if (thismessage_size_limit > 0)
2530         {
2531         sprintf(CS big_buffer, "250-SIZE %d\r\n", thismessage_size_limit);
2532         s = string_cat(s, &size, &ptr, big_buffer, Ustrlen(big_buffer));
2533         }
2534       else
2535         {
2536         s = string_cat(s, &size, &ptr, US"250-SIZE\r\n", 10);
2537         }
2538
2539       /* Exim does not do protocol conversion or data conversion. It is 8-bit
2540       clean; if it has an 8-bit character in its hand, it just sends it. It
2541       cannot therefore specify 8BITMIME and remain consistent with the RFCs.
2542       However, some users want this option simply in order to stop MUAs
2543       mangling messages that contain top-bit-set characters. It is therefore
2544       provided as an option. */
2545
2546       if (accept_8bitmime)
2547         s = string_cat(s, &size, &ptr, US"250-8BITMIME\r\n", 14);
2548
2549       /* Advertise ETRN if there's an ACL checking whether a host is
2550       permitted to issue it; a check is made when any host actually tries. */
2551
2552       if (acl_smtp_etrn != NULL)
2553         {
2554         s = string_cat(s, &size, &ptr, US"250-ETRN\r\n", 10);
2555         }
2556
2557       /* Advertise EXPN if there's an ACL checking whether a host is
2558       permitted to issue it; a check is made when any host actually tries. */
2559
2560       if (acl_smtp_expn != NULL)
2561         {
2562         s = string_cat(s, &size, &ptr, US"250-EXPN\r\n", 10);
2563         }
2564
2565       /* Exim is quite happy with pipelining, so let the other end know that
2566       it is safe to use it, unless advertising is disabled. */
2567
2568       if (verify_check_host(&pipelining_advertise_hosts) == OK)
2569         {
2570         s = string_cat(s, &size, &ptr, US"250-PIPELINING\r\n", 16);
2571         sync_cmd_limit = NON_SYNC_CMD_PIPELINING;
2572         pipelining_advertised = TRUE;
2573         }
2574
2575       /* If any server authentication mechanisms are configured, advertise
2576       them if the current host is in auth_advertise_hosts. The problem with
2577       advertising always is that some clients then require users to
2578       authenticate (and aren't configurable otherwise) even though it may not
2579       be necessary (e.g. if the host is in host_accept_relay).
2580
2581       RFC 2222 states that SASL mechanism names contain only upper case
2582       letters, so output the names in upper case, though we actually recognize
2583       them in either case in the AUTH command. */
2584
2585       if (auths != NULL)
2586         {
2587         if (verify_check_host(&auth_advertise_hosts) == OK)
2588           {
2589           auth_instance *au;
2590           BOOL first = TRUE;
2591           for (au = auths; au != NULL; au = au->next)
2592             {
2593             if (au->server && (au->advertise_condition == NULL ||
2594                 expand_check_condition(au->advertise_condition, au->name,
2595                 US"authenticator")))
2596               {
2597               int saveptr;
2598               if (first)
2599                 {
2600                 s = string_cat(s, &size, &ptr, US"250-AUTH", 8);
2601                 first = FALSE;
2602                 auth_advertised = TRUE;
2603                 }
2604               saveptr = ptr;
2605               s = string_cat(s, &size, &ptr, US" ", 1);
2606               s = string_cat(s, &size, &ptr, au->public_name,
2607                 Ustrlen(au->public_name));
2608               while (++saveptr < ptr) s[saveptr] = toupper(s[saveptr]);
2609               au->advertised = TRUE;
2610               }
2611             else au->advertised = FALSE;
2612             }
2613           if (!first) s = string_cat(s, &size, &ptr, US"\r\n", 2);
2614           }
2615         }
2616
2617       /* Advertise TLS (Transport Level Security) aka SSL (Secure Socket Layer)
2618       if it has been included in the binary, and the host matches
2619       tls_advertise_hosts. We must *not* advertise if we are already in a
2620       secure connection. */
2621
2622       #ifdef SUPPORT_TLS
2623       if (tls_active < 0 &&
2624           verify_check_host(&tls_advertise_hosts) != FAIL)
2625         {
2626         s = string_cat(s, &size, &ptr, US"250-STARTTLS\r\n", 14);
2627         tls_advertised = TRUE;
2628         }
2629       #endif
2630
2631       /* Finish off the multiline reply with one that is always available. */
2632
2633       s = string_cat(s, &size, &ptr, US"250 HELP\r\n", 10);
2634       }
2635
2636     /* Terminate the string (for debug), write it, and note that HELO/EHLO
2637     has been seen. */
2638
2639     s[ptr] = 0;
2640
2641     #ifdef SUPPORT_TLS
2642     if (tls_active >= 0) (void)tls_write(s, ptr); else
2643     #endif
2644
2645     (void)fwrite(s, 1, ptr, smtp_out);
2646     DEBUG(D_receive) debug_printf("SMTP>> %s", s);
2647     helo_seen = TRUE;
2648     break;   /* HELO/EHLO */
2649
2650
2651     /* The MAIL command requires an address as an operand. All we do
2652     here is to parse it for syntactic correctness. The form "<>" is
2653     a special case which converts into an empty string. The start/end
2654     pointers in the original are not used further for this address, as
2655     it is the canonical extracted address which is all that is kept. */
2656
2657     case MAIL_CMD:
2658     smtp_mailcmd_count++;              /* Count for limit and ratelimit */
2659     was_rej_mail = TRUE;               /* Reset if accepted */
2660
2661     if (helo_required && !helo_seen)
2662       {
2663       smtp_printf("503 HELO or EHLO required\r\n");
2664       log_write(0, LOG_MAIN|LOG_REJECT, "rejected MAIL from %s: no "
2665         "HELO/EHLO given", host_and_ident(FALSE));
2666       break;
2667       }
2668
2669     if (sender_address != NULL)
2670       {
2671       done = synprot_error(L_smtp_protocol_error, 503, NULL,
2672         US"sender already given");
2673       break;
2674       }
2675
2676     if (smtp_cmd_argument[0] == 0)
2677       {
2678       done = synprot_error(L_smtp_protocol_error, 501, NULL,
2679         US"MAIL must have an address operand");
2680       break;
2681       }
2682
2683     /* Check to see if the limit for messages per connection would be
2684     exceeded by accepting further messages. */
2685
2686     if (smtp_accept_max_per_connection > 0 &&
2687         smtp_mailcmd_count > smtp_accept_max_per_connection)
2688       {
2689       smtp_printf("421 too many messages in this connection\r\n");
2690       log_write(0, LOG_MAIN|LOG_REJECT, "rejected MAIL command %s: too many "
2691         "messages in one connection", host_and_ident(TRUE));
2692       break;
2693       }
2694
2695     /* Reset for start of message - even if this is going to fail, we
2696     obviously need to throw away any previous data. */
2697
2698     smtp_reset(reset_point);
2699     toomany = FALSE;
2700     sender_data = recipient_data = NULL;
2701
2702     /* Loop, checking for ESMTP additions to the MAIL FROM command. */
2703
2704     if (esmtp) for(;;)
2705       {
2706       uschar *name, *value, *end;
2707       unsigned long int size;
2708
2709       if (!extract_option(&name, &value)) break;
2710
2711       /* Handle SIZE= by reading the value. We don't do the check till later,
2712       in order to be able to log the sender address on failure. */
2713
2714       if (strcmpic(name, US"SIZE") == 0 &&
2715           ((size = (int)Ustrtoul(value, &end, 10)), *end == 0))
2716         {
2717         if ((size == ULONG_MAX && errno == ERANGE) || size > INT_MAX)
2718           size = INT_MAX;
2719         message_size = (int)size;
2720         }
2721
2722       /* If this session was initiated with EHLO and accept_8bitmime is set,
2723       Exim will have indicated that it supports the BODY=8BITMIME option. In
2724       fact, it does not support this according to the RFCs, in that it does not
2725       take any special action for forwarding messages containing 8-bit
2726       characters. That is why accept_8bitmime is not the default setting, but
2727       some sites want the action that is provided. We recognize both "8BITMIME"
2728       and "7BIT" as body types, but take no action. */
2729
2730       else if (accept_8bitmime && strcmpic(name, US"BODY") == 0 &&
2731           (strcmpic(value, US"8BITMIME") == 0 ||
2732            strcmpic(value, US"7BIT") == 0)) {}
2733
2734       /* Handle the AUTH extension. If the value given is not "<>" and either
2735       the ACL says "yes" or there is no ACL but the sending host is
2736       authenticated, we set it up as the authenticated sender. However, if the
2737       authenticator set a condition to be tested, we ignore AUTH on MAIL unless
2738       the condition is met. The value of AUTH is an xtext, which means that +,
2739       = and cntrl chars are coded in hex; however "<>" is unaffected by this
2740       coding. */
2741
2742       else if (strcmpic(name, US"AUTH") == 0)
2743         {
2744         if (Ustrcmp(value, "<>") != 0)
2745           {
2746           int rc;
2747           uschar *ignore_msg;
2748
2749           if (auth_xtextdecode(value, &authenticated_sender) < 0)
2750             {
2751             /* Put back terminator overrides for error message */
2752             name[-1] = ' ';
2753             value[-1] = '=';
2754             done = synprot_error(L_smtp_syntax_error, 501, NULL,
2755               US"invalid data for AUTH");
2756             goto COMMAND_LOOP;
2757             }
2758
2759           if (acl_smtp_mailauth == NULL)
2760             {
2761             ignore_msg = US"client not authenticated";
2762             rc = (sender_host_authenticated != NULL)? OK : FAIL;
2763             }
2764           else
2765             {
2766             ignore_msg = US"rejected by ACL";
2767             rc = acl_check(ACL_WHERE_MAILAUTH, NULL, acl_smtp_mailauth,
2768               &user_msg, &log_msg);
2769             }
2770
2771           switch (rc)
2772             {
2773             case OK:
2774             if (authenticated_by == NULL ||
2775                 authenticated_by->mail_auth_condition == NULL ||
2776                 expand_check_condition(authenticated_by->mail_auth_condition,
2777                     authenticated_by->name, US"authenticator"))
2778               break;     /* Accept the AUTH */
2779
2780             ignore_msg = US"server_mail_auth_condition failed";
2781             if (authenticated_id != NULL)
2782               ignore_msg = string_sprintf("%s: authenticated ID=\"%s\"",
2783                 ignore_msg, authenticated_id);
2784
2785             /* Fall through */
2786
2787             case FAIL:
2788             authenticated_sender = NULL;
2789             log_write(0, LOG_MAIN, "ignoring AUTH=%s from %s (%s)",
2790               value, host_and_ident(TRUE), ignore_msg);
2791             break;
2792
2793             /* Should only get DEFER or ERROR here. Put back terminator
2794             overrides for error message */
2795
2796             default:
2797             name[-1] = ' ';
2798             value[-1] = '=';
2799             (void)smtp_handle_acl_fail(ACL_WHERE_MAILAUTH, rc, user_msg,
2800               log_msg);
2801             goto COMMAND_LOOP;
2802             }
2803           }
2804         }
2805
2806       /* Unknown option. Stick back the terminator characters and break
2807       the loop. An error for a malformed address will occur. */
2808
2809       else
2810         {
2811         name[-1] = ' ';
2812         value[-1] = '=';
2813         break;
2814         }
2815       }
2816
2817     /* If we have passed the threshold for rate limiting, apply the current
2818     delay, and update it for next time, provided this is a limited host. */
2819
2820     if (smtp_mailcmd_count > smtp_rlm_threshold &&
2821         verify_check_host(&smtp_ratelimit_hosts) == OK)
2822       {
2823       DEBUG(D_receive) debug_printf("rate limit MAIL: delay %.3g sec\n",
2824         smtp_delay_mail/1000.0);
2825       millisleep((int)smtp_delay_mail);
2826       smtp_delay_mail *= smtp_rlm_factor;
2827       if (smtp_delay_mail > (double)smtp_rlm_limit)
2828         smtp_delay_mail = (double)smtp_rlm_limit;
2829       }
2830
2831     /* Now extract the address, first applying any SMTP-time rewriting. The
2832     TRUE flag allows "<>" as a sender address. */
2833
2834     raw_sender = ((rewrite_existflags & rewrite_smtp) != 0)?
2835       rewrite_one(smtp_cmd_argument, rewrite_smtp, NULL, FALSE, US"",
2836         global_rewrite_rules) : smtp_cmd_argument;
2837
2838     /* rfc821_domains = TRUE; << no longer needed */
2839     raw_sender =
2840       parse_extract_address(raw_sender, &errmess, &start, &end, &sender_domain,
2841         TRUE);
2842     /* rfc821_domains = FALSE; << no longer needed */
2843
2844     if (raw_sender == NULL)
2845       {
2846       done = synprot_error(L_smtp_syntax_error, 501, smtp_cmd_argument, errmess);
2847       break;
2848       }
2849
2850     sender_address = raw_sender;
2851
2852     /* If there is a configured size limit for mail, check that this message
2853     doesn't exceed it. The check is postponed to this point so that the sender
2854     can be logged. */
2855
2856     if (thismessage_size_limit > 0 && message_size > thismessage_size_limit)
2857       {
2858       smtp_printf("552 Message size exceeds maximum permitted\r\n");
2859       log_write(L_size_reject,
2860           LOG_MAIN|LOG_REJECT, "rejected MAIL FROM:<%s> %s: "
2861           "message too big: size%s=%d max=%d",
2862           sender_address,
2863           host_and_ident(TRUE),
2864           (message_size == INT_MAX)? ">" : "",
2865           message_size,
2866           thismessage_size_limit);
2867       sender_address = NULL;
2868       break;
2869       }
2870
2871     /* Check there is enough space on the disk unless configured not to.
2872     When smtp_check_spool_space is set, the check is for thismessage_size_limit
2873     plus the current message - i.e. we accept the message only if it won't
2874     reduce the space below the threshold. Add 5000 to the size to allow for
2875     overheads such as the Received: line and storing of recipients, etc.
2876     By putting the check here, even when SIZE is not given, it allow VRFY
2877     and EXPN etc. to be used when space is short. */
2878
2879     if (!receive_check_fs(
2880          (smtp_check_spool_space && message_size >= 0)?
2881             message_size + 5000 : 0))
2882       {
2883       smtp_printf("452 Space shortage, please try later\r\n");
2884       sender_address = NULL;
2885       break;
2886       }
2887
2888     /* If sender_address is unqualified, reject it, unless this is a locally
2889     generated message, or the sending host or net is permitted to send
2890     unqualified addresses - typically local machines behaving as MUAs -
2891     in which case just qualify the address. The flag is set above at the start
2892     of the SMTP connection. */
2893
2894     if (sender_domain == 0 && sender_address[0] != 0)
2895       {
2896       if (allow_unqualified_sender)
2897         {
2898         sender_domain = Ustrlen(sender_address) + 1;
2899         sender_address = rewrite_address_qualify(sender_address, FALSE);
2900         DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
2901           raw_sender);
2902         }
2903       else
2904         {
2905         smtp_printf("501 %s: sender address must contain a domain\r\n",
2906           smtp_cmd_argument);
2907         log_write(L_smtp_syntax_error,
2908           LOG_MAIN|LOG_REJECT,
2909           "unqualified sender rejected: <%s> %s%s",
2910           raw_sender,
2911           host_and_ident(TRUE),
2912           host_lookup_msg);
2913         sender_address = NULL;
2914         break;
2915         }
2916       }
2917
2918     /* Apply an ACL check if one is defined, before responding */
2919
2920     rc = (acl_smtp_mail == NULL)? OK :
2921       acl_check(ACL_WHERE_MAIL, NULL, acl_smtp_mail, &user_msg, &log_msg);
2922
2923     if (rc == OK || rc == DISCARD)
2924       {
2925       smtp_printf("250 OK\r\n");
2926       smtp_delay_rcpt = smtp_rlr_base;
2927       recipients_discarded = (rc == DISCARD);
2928       was_rej_mail = FALSE;
2929       }
2930
2931     else
2932       {
2933       done = smtp_handle_acl_fail(ACL_WHERE_MAIL, rc, user_msg, log_msg);
2934       sender_address = NULL;
2935       }
2936     break;
2937
2938
2939     /* The RCPT command requires an address as an operand. All we do
2940     here is to parse it for syntactic correctness. There may be any number
2941     of RCPT commands, specifying multiple senders. We build them all into
2942     a data structure that is in argc/argv format. The start/end values
2943     given by parse_extract_address are not used, as we keep only the
2944     extracted address. */
2945
2946     case RCPT_CMD:
2947     rcpt_count++;
2948     was_rcpt = TRUE;
2949
2950     /* There must be a sender address; if the sender was rejected and
2951     pipelining was advertised, we assume the client was pipelining, and do not
2952     count this as a protocol error. Reset was_rej_mail so that further RCPTs
2953     get the same treatment. */
2954
2955     if (sender_address == NULL)
2956       {
2957       if (pipelining_advertised && last_was_rej_mail)
2958         {
2959         smtp_printf("503 sender not yet given\r\n");
2960         was_rej_mail = TRUE;
2961         }
2962       else
2963         {
2964         done = synprot_error(L_smtp_protocol_error, 503, NULL,
2965           US"sender not yet given");
2966         was_rcpt = FALSE;             /* Not a valid RCPT */
2967         }
2968       rcpt_fail_count++;
2969       break;
2970       }
2971
2972     /* Check for an operand */
2973
2974     if (smtp_cmd_argument[0] == 0)
2975       {
2976       done = synprot_error(L_smtp_syntax_error, 501, NULL,
2977         US"RCPT must have an address operand");
2978       rcpt_fail_count++;
2979       break;
2980       }
2981
2982     /* Apply SMTP rewriting then extract the working address. Don't allow "<>"
2983     as a recipient address */
2984
2985     recipient = ((rewrite_existflags & rewrite_smtp) != 0)?
2986       rewrite_one(smtp_cmd_argument, rewrite_smtp, NULL, FALSE, US"",
2987         global_rewrite_rules) : smtp_cmd_argument;
2988
2989     /* rfc821_domains = TRUE; << no longer needed */
2990     recipient = parse_extract_address(recipient, &errmess, &start, &end,
2991       &recipient_domain, FALSE);
2992     /* rfc821_domains = FALSE; << no longer needed */
2993
2994     if (recipient == NULL)
2995       {
2996       done = synprot_error(L_smtp_syntax_error, 501, smtp_cmd_argument, errmess);
2997       rcpt_fail_count++;
2998       break;
2999       }
3000
3001     /* If the recipient address is unqualified, reject it, unless this is a
3002     locally generated message. However, unqualified addresses are permitted
3003     from a configured list of hosts and nets - typically when behaving as
3004     MUAs rather than MTAs. Sad that SMTP is used for both types of traffic,
3005     really. The flag is set at the start of the SMTP connection.
3006
3007     RFC 1123 talks about supporting "the reserved mailbox postmaster"; I always
3008     assumed this meant "reserved local part", but the revision of RFC 821 and
3009     friends now makes it absolutely clear that it means *mailbox*. Consequently
3010     we must always qualify this address, regardless. */
3011
3012     if (recipient_domain == 0)
3013       {
3014       if (allow_unqualified_recipient ||
3015           strcmpic(recipient, US"postmaster") == 0)
3016         {
3017         DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
3018           recipient);
3019         recipient_domain = Ustrlen(recipient) + 1;
3020         recipient = rewrite_address_qualify(recipient, TRUE);
3021         }
3022       else
3023         {
3024         rcpt_fail_count++;
3025         smtp_printf("501 %s: recipient address must contain a domain\r\n",
3026           smtp_cmd_argument);
3027         log_write(L_smtp_syntax_error,
3028           LOG_MAIN|LOG_REJECT, "unqualified recipient rejected: "
3029           "<%s> %s%s", recipient, host_and_ident(TRUE),
3030           host_lookup_msg);
3031         break;
3032         }
3033       }
3034
3035     /* Check maximum allowed */
3036
3037     if (rcpt_count > recipients_max && recipients_max > 0)
3038       {
3039       if (recipients_max_reject)
3040         {
3041         rcpt_fail_count++;
3042         smtp_printf("552 too many recipients\r\n");
3043         if (!toomany)
3044           log_write(0, LOG_MAIN|LOG_REJECT, "too many recipients: message "
3045             "rejected: sender=<%s> %s", sender_address, host_and_ident(TRUE));
3046         }
3047       else
3048         {
3049         rcpt_defer_count++;
3050         smtp_printf("452 too many recipients\r\n");
3051         if (!toomany)
3052           log_write(0, LOG_MAIN|LOG_REJECT, "too many recipients: excess "
3053             "temporarily rejected: sender=<%s> %s", sender_address,
3054             host_and_ident(TRUE));
3055         }
3056
3057       toomany = TRUE;
3058       break;
3059       }
3060
3061     /* If we have passed the threshold for rate limiting, apply the current
3062     delay, and update it for next time, provided this is a limited host. */
3063
3064     if (rcpt_count > smtp_rlr_threshold &&
3065         verify_check_host(&smtp_ratelimit_hosts) == OK)
3066       {
3067       DEBUG(D_receive) debug_printf("rate limit RCPT: delay %.3g sec\n",
3068         smtp_delay_rcpt/1000.0);
3069       millisleep((int)smtp_delay_rcpt);
3070       smtp_delay_rcpt *= smtp_rlr_factor;
3071       if (smtp_delay_rcpt > (double)smtp_rlr_limit)
3072         smtp_delay_rcpt = (double)smtp_rlr_limit;
3073       }
3074
3075     /* If the MAIL ACL discarded all the recipients, we bypass ACL checking
3076     for them. Otherwise, check the access control list for this recipient. */
3077
3078     rc = recipients_discarded? DISCARD :
3079       acl_check(ACL_WHERE_RCPT, recipient, acl_smtp_rcpt, &user_msg, &log_msg);
3080
3081     /* The ACL was happy */
3082
3083     if (rc == OK)
3084       {
3085       smtp_printf("250 Accepted\r\n");
3086       receive_add_recipient(recipient, -1);
3087       }
3088
3089     /* The recipient was discarded */
3090
3091     else if (rc == DISCARD)
3092       {
3093       smtp_printf("250 Accepted\r\n");
3094       rcpt_fail_count++;
3095       discarded = TRUE;
3096       log_write(0, LOG_MAIN|LOG_REJECT, "%s F=<%s> rejected RCPT %s: "
3097         "discarded by %s ACL%s%s", host_and_ident(TRUE),
3098         (sender_address_unrewritten != NULL)?
3099         sender_address_unrewritten : sender_address,
3100         smtp_cmd_argument, recipients_discarded? "MAIL" : "RCPT",
3101         (log_msg == NULL)? US"" : US": ",
3102         (log_msg == NULL)? US"" : log_msg);
3103       }
3104
3105     /* Either the ACL failed the address, or it was deferred. */
3106
3107     else
3108       {
3109       if (rc == FAIL) rcpt_fail_count++; else rcpt_defer_count++;
3110       done = smtp_handle_acl_fail(ACL_WHERE_RCPT, rc, user_msg, log_msg);
3111       }
3112     break;
3113
3114
3115     /* The DATA command is legal only if it follows successful MAIL FROM
3116     and RCPT TO commands. However, if pipelining is advertised, a bad DATA is
3117     not counted as a protocol error if it follows RCPT (which must have been
3118     rejected if there are no recipients.) This function is complete when a
3119     valid DATA command is encountered.
3120
3121     Note concerning the code used: RFC 2821 says this:
3122
3123      -  If there was no MAIL, or no RCPT, command, or all such commands
3124         were rejected, the server MAY return a "command out of sequence"
3125         (503) or "no valid recipients" (554) reply in response to the
3126         DATA command.
3127
3128     The example in the pipelining RFC 2920 uses 554, but I use 503 here
3129     because it is the same whether pipelining is in use or not. */
3130
3131     case DATA_CMD:
3132     if (!discarded && recipients_count <= 0)
3133       {
3134       if (pipelining_advertised && last_was_rcpt)
3135         smtp_printf("503 valid RCPT command must precede DATA\r\n");
3136       else
3137         done = synprot_error(L_smtp_protocol_error, 503, NULL,
3138           US"valid RCPT command must precede DATA");
3139       break;
3140       }
3141
3142     if (toomany && recipients_max_reject)
3143       {
3144       sender_address = NULL;  /* This will allow a new MAIL without RSET */
3145       sender_address_unrewritten = NULL;
3146       smtp_printf("554 Too many recipients\r\n");
3147       break;
3148       }
3149
3150     if (acl_smtp_predata == NULL) rc = OK; else
3151       {
3152       enable_dollar_recipients = TRUE;
3153       rc = acl_check(ACL_WHERE_PREDATA, NULL, acl_smtp_predata, &user_msg,
3154         &log_msg);
3155       enable_dollar_recipients = FALSE;
3156       }
3157
3158     if (rc == OK)
3159       {
3160       smtp_printf("354 Enter message, ending with \".\" on a line by itself\r\n");
3161       done = 3;
3162       message_ended = END_NOTENDED;   /* Indicate in middle of data */
3163       }
3164
3165     /* Either the ACL failed the address, or it was deferred. */
3166
3167     else
3168       done = smtp_handle_acl_fail(ACL_WHERE_PREDATA, rc, user_msg, log_msg);
3169
3170     break;
3171
3172
3173     case VRFY_CMD:
3174     rc = acl_check(ACL_WHERE_VRFY, NULL, acl_smtp_vrfy, &user_msg, &log_msg);
3175     if (rc != OK)
3176       done = smtp_handle_acl_fail(ACL_WHERE_VRFY, rc, user_msg, log_msg);
3177     else
3178       {
3179       uschar *address;
3180       uschar *s = NULL;
3181
3182       /* rfc821_domains = TRUE; << no longer needed */
3183       address = parse_extract_address(smtp_cmd_argument, &errmess, &start, &end,
3184         &recipient_domain, FALSE);
3185       /* rfc821_domains = FALSE; << no longer needed */
3186
3187       if (address == NULL)
3188         s = string_sprintf("501 %s", errmess);
3189       else
3190         {
3191         address_item *addr = deliver_make_addr(address, FALSE);
3192         switch(verify_address(addr, NULL, vopt_is_recipient | vopt_qualify, -1,
3193                -1, -1, NULL, NULL, NULL))
3194           {
3195           case OK:
3196           s = string_sprintf("250 <%s> is deliverable", address);
3197           break;
3198
3199           case DEFER:
3200           s = (addr->message != NULL)?
3201             string_sprintf("451 <%s> %s", address, addr->message) :
3202             string_sprintf("451 Cannot resolve <%s> at this time", address);
3203           break;
3204
3205           case FAIL:
3206           s = (addr->message != NULL)?
3207             string_sprintf("550 <%s> %s", address, addr->message) :
3208             string_sprintf("550 <%s> is not deliverable", address);
3209           log_write(0, LOG_MAIN, "VRFY failed for %s %s",
3210             smtp_cmd_argument, host_and_ident(TRUE));
3211           break;
3212           }
3213         }
3214
3215       smtp_printf("%s\r\n", s);
3216       }
3217     break;
3218
3219
3220     case EXPN_CMD:
3221     rc = acl_check(ACL_WHERE_EXPN, NULL, acl_smtp_expn, &user_msg, &log_msg);
3222     if (rc != OK)
3223       done = smtp_handle_acl_fail(ACL_WHERE_EXPN, rc, user_msg, log_msg);
3224     else
3225       {
3226       BOOL save_log_testing_mode = log_testing_mode;
3227       address_test_mode = log_testing_mode = TRUE;
3228       (void) verify_address(deliver_make_addr(smtp_cmd_argument, FALSE),
3229         smtp_out, vopt_is_recipient | vopt_qualify | vopt_expn, -1, -1, -1,
3230         NULL, NULL, NULL);
3231       address_test_mode = FALSE;
3232       log_testing_mode = save_log_testing_mode;    /* true for -bh */
3233       }
3234     break;
3235
3236
3237     #ifdef SUPPORT_TLS
3238
3239     case STARTTLS_CMD:
3240     if (!tls_advertised)
3241       {
3242       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3243         US"STARTTLS command used when not advertised");
3244       break;
3245       }
3246
3247     /* Apply an ACL check if one is defined */
3248
3249     if (acl_smtp_starttls != NULL)
3250       {
3251       rc = acl_check(ACL_WHERE_STARTTLS, NULL, acl_smtp_starttls, &user_msg,
3252         &log_msg);
3253       if (rc != OK)
3254         {
3255         done = smtp_handle_acl_fail(ACL_WHERE_STARTTLS, rc, user_msg, log_msg);
3256         break;
3257         }
3258       }
3259
3260     /* RFC 2487 is not clear on when this command may be sent, though it
3261     does state that all information previously obtained from the client
3262     must be discarded if a TLS session is started. It seems reasonble to
3263     do an implied RSET when STARTTLS is received. */
3264
3265     incomplete_transaction_log(US"STARTTLS");
3266     smtp_reset(reset_point);
3267     toomany = FALSE;
3268     cmd_list[CMD_LIST_STARTTLS].is_mail_cmd = FALSE;
3269
3270     /* Attempt to start up a TLS session, and if successful, discard all
3271     knowledge that was obtained previously. At least, that's what the RFC says,
3272     and that's what happens by default. However, in order to work round YAEB,
3273     there is an option to remember the esmtp state. Sigh.
3274
3275     We must allow for an extra EHLO command and an extra AUTH command after
3276     STARTTLS that don't add to the nonmail command count. */
3277
3278     if ((rc = tls_server_start(tls_require_ciphers)) == OK)
3279       {
3280       if (!tls_remember_esmtp)
3281         helo_seen = esmtp = auth_advertised = pipelining_advertised = FALSE;
3282       cmd_list[CMD_LIST_EHLO].is_mail_cmd = TRUE;
3283       cmd_list[CMD_LIST_AUTH].is_mail_cmd = TRUE;
3284       if (sender_helo_name != NULL)
3285         {
3286         store_free(sender_helo_name);
3287         sender_helo_name = NULL;
3288         host_build_sender_fullhost();  /* Rebuild */
3289         set_process_info("handling incoming TLS connection from %s",
3290           host_and_ident(FALSE));
3291         }
3292       received_protocol = (esmtp?
3293         protocols[pextend + pcrpted +
3294           ((sender_host_authenticated != NULL)? pauthed : 0)]
3295         :
3296         protocols[pnormal + pcrpted])
3297         +
3298         ((sender_host_address != NULL)? pnlocal : 0);
3299
3300       sender_host_authenticated = NULL;
3301       authenticated_id = NULL;
3302       sync_cmd_limit = NON_SYNC_CMD_NON_PIPELINING;
3303       DEBUG(D_tls) debug_printf("TLS active\n");
3304       break;     /* Successful STARTTLS */
3305       }
3306
3307     /* Some local configuration problem was discovered before actually trying
3308     to do a TLS handshake; give a temporary error. */
3309
3310     else if (rc == DEFER)
3311       {
3312       smtp_printf("454 TLS currently unavailable\r\n");
3313       break;
3314       }
3315
3316     /* Hard failure. Reject everything except QUIT or closed connection. One
3317     cause for failure is a nested STARTTLS, in which case tls_active remains
3318     set, but we must still reject all incoming commands. */
3319
3320     DEBUG(D_tls) debug_printf("TLS failed to start\n");
3321     while (done <= 0)
3322       {
3323       switch(smtp_read_command(FALSE))
3324         {
3325         case EOF_CMD:
3326         log_write(L_smtp_connection, LOG_MAIN, "%s closed by EOF",
3327           smtp_get_connection_info());
3328         done = 2;
3329         break;
3330
3331         case QUIT_CMD:
3332         smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
3333         log_write(L_smtp_connection, LOG_MAIN, "%s closed by QUIT",
3334           smtp_get_connection_info());
3335         done = 2;
3336         break;
3337
3338         default:
3339         smtp_printf("554 Security failure\r\n");
3340         break;
3341         }
3342       }
3343     tls_close(TRUE);
3344     break;
3345     #endif
3346
3347
3348     /* The ACL for QUIT is provided for gathering statistical information or
3349     similar; it does not affect the response code, but it can supply a custom
3350     message. */
3351
3352     case QUIT_CMD:
3353     incomplete_transaction_log(US"QUIT");
3354
3355     if (acl_smtp_quit != NULL)
3356       {
3357       rc = acl_check(ACL_WHERE_QUIT, NULL, acl_smtp_quit,&user_msg,&log_msg);
3358       if (rc == ERROR)
3359         log_write(0, LOG_MAIN|LOG_PANIC, "ACL for QUIT returned ERROR: %s",
3360           log_msg);
3361       }
3362     else user_msg = NULL;
3363
3364     if (user_msg == NULL)
3365       smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
3366     else
3367       smtp_printf("221 %s\r\n", user_msg);
3368
3369     #ifdef SUPPORT_TLS
3370     tls_close(TRUE);
3371     #endif
3372
3373     done = 2;
3374     log_write(L_smtp_connection, LOG_MAIN, "%s closed by QUIT",
3375       smtp_get_connection_info());
3376     break;
3377
3378
3379     case RSET_CMD:
3380     incomplete_transaction_log(US"RSET");
3381     smtp_reset(reset_point);
3382     toomany = FALSE;
3383     smtp_printf("250 Reset OK\r\n");
3384     cmd_list[CMD_LIST_RSET].is_mail_cmd = FALSE;
3385     break;
3386
3387
3388     case NOOP_CMD:
3389     smtp_printf("250 OK\r\n");
3390     break;
3391
3392
3393     /* Show ETRN/EXPN/VRFY if there's
3394     an ACL for checking hosts; if actually used, a check will be done for
3395     permitted hosts. */
3396
3397     case HELP_CMD:
3398     smtp_printf("214-Commands supported:\r\n");
3399       {
3400       uschar buffer[256];
3401       buffer[0] = 0;
3402       Ustrcat(buffer, " AUTH");
3403       #ifdef SUPPORT_TLS
3404       Ustrcat(buffer, " STARTTLS");
3405       #endif
3406       Ustrcat(buffer, " HELO EHLO MAIL RCPT DATA");
3407       Ustrcat(buffer, " NOOP QUIT RSET HELP");
3408       if (acl_smtp_etrn != NULL) Ustrcat(buffer, " ETRN");
3409       if (acl_smtp_expn != NULL) Ustrcat(buffer, " EXPN");
3410       if (acl_smtp_vrfy != NULL) Ustrcat(buffer, " VRFY");
3411       smtp_printf("214%s\r\n", buffer);
3412       }
3413     break;
3414
3415
3416     case EOF_CMD:
3417     incomplete_transaction_log(US"connection lost");
3418     smtp_printf("421 %s lost input connection\r\n", smtp_active_hostname);
3419
3420     /* Don't log by default unless in the middle of a message, as some mailers
3421     just drop the call rather than sending QUIT, and it clutters up the logs.
3422     */
3423
3424     if (sender_address != NULL || recipients_count > 0)
3425       log_write(L_lost_incoming_connection,
3426           LOG_MAIN,
3427           "unexpected %s while reading SMTP command from %s%s",
3428           sender_host_unknown? "EOF" : "disconnection",
3429           host_and_ident(FALSE), smtp_read_error);
3430
3431     else log_write(L_smtp_connection, LOG_MAIN, "%s lost%s",
3432       smtp_get_connection_info(), smtp_read_error);
3433
3434     done = 1;
3435     break;
3436
3437
3438     case ETRN_CMD:
3439     if (sender_address != NULL)
3440       {
3441       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3442         US"ETRN is not permitted inside a transaction");
3443       break;
3444       }
3445
3446     log_write(L_etrn, LOG_MAIN, "ETRN %s received from %s", smtp_cmd_argument,
3447       host_and_ident(FALSE));
3448
3449     rc = acl_check(ACL_WHERE_ETRN, NULL, acl_smtp_etrn, &user_msg, &log_msg);
3450     if (rc != OK)
3451       {
3452       done = smtp_handle_acl_fail(ACL_WHERE_ETRN, rc, user_msg, log_msg);
3453       break;
3454       }
3455
3456     /* Compute the serialization key for this command. */
3457
3458     etrn_serialize_key = string_sprintf("etrn-%s\n", smtp_cmd_argument);
3459
3460     /* If a command has been specified for running as a result of ETRN, we
3461     permit any argument to ETRN. If not, only the # standard form is permitted,
3462     since that is strictly the only kind of ETRN that can be implemented
3463     according to the RFC. */
3464
3465     if (smtp_etrn_command != NULL)
3466       {
3467       uschar *error;
3468       BOOL rc;
3469       etrn_command = smtp_etrn_command;
3470       deliver_domain = smtp_cmd_argument;
3471       rc = transport_set_up_command(&argv, smtp_etrn_command, TRUE, 0, NULL,
3472         US"ETRN processing", &error);
3473       deliver_domain = NULL;
3474       if (!rc)
3475         {
3476         log_write(0, LOG_MAIN|LOG_PANIC, "failed to set up ETRN command: %s",
3477           error);
3478         smtp_printf("458 Internal failure\r\n");
3479         break;
3480         }
3481       }
3482
3483     /* Else set up to call Exim with the -R option. */
3484
3485     else
3486       {
3487       if (*smtp_cmd_argument++ != '#')
3488         {
3489         done = synprot_error(L_smtp_syntax_error, 501, NULL,
3490           US"argument must begin with #");
3491         break;
3492         }
3493       etrn_command = US"exim -R";
3494       argv = child_exec_exim(CEE_RETURN_ARGV, TRUE, NULL, TRUE, 2, US"-R",
3495         smtp_cmd_argument);
3496       }
3497
3498     /* If we are host-testing, don't actually do anything. */
3499
3500     if (host_checking)
3501       {
3502       HDEBUG(D_any)
3503         {
3504         debug_printf("ETRN command is: %s\n", etrn_command);
3505         debug_printf("ETRN command execution skipped\n");
3506         }
3507       smtp_printf("250 OK\r\n");
3508       break;
3509       }
3510
3511
3512     /* If ETRN queue runs are to be serialized, check the database to
3513     ensure one isn't already running. */
3514
3515     if (smtp_etrn_serialize && !enq_start(etrn_serialize_key))
3516       {
3517       smtp_printf("458 Already processing %s\r\n", smtp_cmd_argument);
3518       break;
3519       }
3520
3521     /* Fork a child process and run the command. We don't want to have to
3522     wait for the process at any point, so set SIGCHLD to SIG_IGN before
3523     forking. It should be set that way anyway for external incoming SMTP,
3524     but we save and restore to be tidy. If serialization is required, we
3525     actually run the command in yet another process, so we can wait for it
3526     to complete and then remove the serialization lock. */
3527
3528     oldsignal = signal(SIGCHLD, SIG_IGN);
3529
3530     if ((pid = fork()) == 0)
3531       {
3532       smtp_input = FALSE;       /* This process is not associated with the */
3533       (void)fclose(smtp_in);    /* SMTP call any more. */
3534       (void)fclose(smtp_out);
3535
3536       signal(SIGCHLD, SIG_DFL);      /* Want to catch child */
3537
3538       /* If not serializing, do the exec right away. Otherwise, fork down
3539       into another process. */
3540
3541       if (!smtp_etrn_serialize || (pid = fork()) == 0)
3542         {
3543         DEBUG(D_exec) debug_print_argv(argv);
3544         exim_nullstd();                   /* Ensure std{in,out,err} exist */
3545         execv(CS argv[0], (char *const *)argv);
3546         log_write(0, LOG_MAIN|LOG_PANIC_DIE, "exec of \"%s\" (ETRN) failed: %s",
3547           etrn_command, strerror(errno));
3548         _exit(EXIT_FAILURE);         /* paranoia */
3549         }
3550
3551       /* Obey this if smtp_serialize and the 2nd fork yielded non-zero. That
3552       is, we are in the first subprocess, after forking again. All we can do
3553       for a failing fork is to log it. Otherwise, wait for the 2nd process to
3554       complete, before removing the serialization. */
3555
3556       if (pid < 0)
3557         log_write(0, LOG_MAIN|LOG_PANIC, "2nd fork for serialized ETRN "
3558           "failed: %s", strerror(errno));
3559       else
3560         {
3561         int status;
3562         DEBUG(D_any) debug_printf("waiting for serialized ETRN process %d\n",
3563           (int)pid);
3564         (void)wait(&status);
3565         DEBUG(D_any) debug_printf("serialized ETRN process %d ended\n",
3566           (int)pid);
3567         }
3568
3569       enq_end(etrn_serialize_key);
3570       _exit(EXIT_SUCCESS);
3571       }
3572
3573     /* Back in the top level SMTP process. Check that we started a subprocess
3574     and restore the signal state. */
3575
3576     if (pid < 0)
3577       {
3578       log_write(0, LOG_MAIN|LOG_PANIC, "fork of process for ETRN failed: %s",
3579         strerror(errno));
3580       smtp_printf("458 Unable to fork process\r\n");
3581       if (smtp_etrn_serialize) enq_end(etrn_serialize_key);
3582       }
3583     else smtp_printf("250 OK\r\n");
3584
3585     signal(SIGCHLD, oldsignal);
3586     break;
3587
3588
3589     case BADARG_CMD:
3590     done = synprot_error(L_smtp_syntax_error, 501, NULL,
3591       US"unexpected argument data");
3592     break;
3593
3594
3595     /* This currently happens only for NULLs, but could be extended. */
3596
3597     case BADCHAR_CMD:
3598     done = synprot_error(L_smtp_syntax_error, 0, NULL,       /* Just logs */
3599       US"NULL character(s) present (shown as '?')");
3600     smtp_printf("501 NULL characters are not allowed in SMTP commands\r\n");
3601     break;
3602
3603
3604     case BADSYN_CMD:
3605     if (smtp_inend >= smtp_inbuffer + in_buffer_size)
3606       smtp_inend = smtp_inbuffer + in_buffer_size - 1;
3607     c = smtp_inend - smtp_inptr;
3608     if (c > 150) c = 150;
3609     smtp_inptr[c] = 0;
3610     incomplete_transaction_log(US"sync failure");
3611     log_write(0, LOG_MAIN|LOG_REJECT, "SMTP protocol synchronization error "
3612       "(next input sent too soon: pipelining was%s advertised): "
3613       "rejected \"%s\" %s next input=\"%s\"",
3614       pipelining_advertised? "" : " not",
3615       smtp_cmd_buffer, host_and_ident(TRUE),
3616       string_printing(smtp_inptr));
3617     smtp_printf("554 SMTP synchronization error\r\n");
3618     done = 1;   /* Pretend eof - drops connection */
3619     break;
3620
3621
3622     case TOO_MANY_NONMAIL_CMD:
3623     incomplete_transaction_log(US"too many non-mail commands");
3624     log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
3625       "nonmail commands (last was \"%.*s\")",  host_and_ident(FALSE),
3626       smtp_cmd_argument - smtp_cmd_buffer, smtp_cmd_buffer);
3627     smtp_printf("554 Too many nonmail commands\r\n");
3628     done = 1;   /* Pretend eof - drops connection */
3629     break;
3630
3631
3632     default:
3633     if (unknown_command_count++ >= smtp_max_unknown_commands)
3634       {
3635       log_write(L_smtp_syntax_error, LOG_MAIN,
3636         "SMTP syntax error in \"%s\" %s %s",
3637         string_printing(smtp_cmd_buffer), host_and_ident(TRUE),
3638         US"unrecognized command");
3639       incomplete_transaction_log(US"unrecognized command");
3640       smtp_printf("500 Too many unrecognized commands\r\n");
3641       done = 2;
3642       log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
3643         "unrecognized commands (last was \"%s\")", host_and_ident(FALSE),
3644         smtp_cmd_buffer);
3645       }
3646     else
3647       done = synprot_error(L_smtp_syntax_error, 500, NULL,
3648         US"unrecognized command");
3649     break;
3650     }
3651
3652   /* This label is used by goto's inside loops that want to break out to
3653   the end of the command-processing loop. */
3654
3655   COMMAND_LOOP:
3656   last_was_rej_mail = was_rej_mail;     /* Remember some last commands for */
3657   last_was_rcpt = was_rcpt;             /* protocol error handling */
3658   continue;
3659   }
3660
3661 return done - 2;  /* Convert yield values */
3662 }
3663
3664 /* End of smtp_in.c */