Certificate variables and field-extractor expansions. Bug 1358
[users/heiko/exim.git] / src / src / smtp_in.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2014 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8 /* Functions for handling an incoming SMTP call. */
9
10
11 #include "exim.h"
12
13
14 /* Initialize for TCP wrappers if so configured. It appears that the macro
15 HAVE_IPV6 is used in some versions of the tcpd.h header, so we unset it before
16 including that header, and restore its value afterwards. */
17
18 #ifdef USE_TCP_WRAPPERS
19
20   #if HAVE_IPV6
21   #define EXIM_HAVE_IPV6
22   #endif
23   #undef HAVE_IPV6
24   #include <tcpd.h>
25   #undef HAVE_IPV6
26   #ifdef EXIM_HAVE_IPV6
27   #define HAVE_IPV6 TRUE
28   #endif
29
30 int allow_severity = LOG_INFO;
31 int deny_severity  = LOG_NOTICE;
32 uschar *tcp_wrappers_name;
33 #endif
34
35
36 /* Size of buffer for reading SMTP commands. We used to use 512, as defined
37 by RFC 821. However, RFC 1869 specifies that this must be increased for SMTP
38 commands that accept arguments, and this in particular applies to AUTH, where
39 the data can be quite long.  More recently this value was 2048 in Exim; 
40 however, RFC 4954 (circa 2007) recommends 12288 bytes to handle AUTH.  Clients
41 such as Thunderbird will send an AUTH with an initial-response for GSSAPI. 
42 The maximum size of a Kerberos ticket under Windows 2003 is 12000 bytes, and 
43 we need room to handle large base64-encoded AUTHs for GSSAPI.
44 */
45
46 #define smtp_cmd_buffer_size  16384
47
48 /* Size of buffer for reading SMTP incoming packets */
49
50 #define in_buffer_size  8192
51
52 /* Structure for SMTP command list */
53
54 typedef struct {
55   const char *name;
56   int len;
57   short int cmd;
58   short int has_arg;
59   short int is_mail_cmd;
60 } smtp_cmd_list;
61
62 /* Codes for identifying commands. We order them so that those that come first
63 are those for which synchronization is always required. Checking this can help
64 block some spam.  */
65
66 enum {
67   /* These commands are required to be synchronized, i.e. to be the last in a
68   block of commands when pipelining. */
69
70   HELO_CMD, EHLO_CMD, DATA_CMD, /* These are listed in the pipelining */
71   VRFY_CMD, EXPN_CMD, NOOP_CMD, /* RFC as requiring synchronization */
72   ETRN_CMD,                     /* This by analogy with TURN from the RFC */
73   STARTTLS_CMD,                 /* Required by the STARTTLS RFC */
74
75   /* This is a dummy to identify the non-sync commands when pipelining */
76
77   NON_SYNC_CMD_PIPELINING,
78
79   /* These commands need not be synchronized when pipelining */
80
81   MAIL_CMD, RCPT_CMD, RSET_CMD,
82
83   /* This is a dummy to identify the non-sync commands when not pipelining */
84
85   NON_SYNC_CMD_NON_PIPELINING,
86
87   /* I have been unable to find a statement about the use of pipelining
88   with AUTH, so to be on the safe side it is here, though I kind of feel
89   it should be up there with the synchronized commands. */
90
91   AUTH_CMD,
92
93   /* I'm not sure about these, but I don't think they matter. */
94
95   QUIT_CMD, HELP_CMD,
96
97 #ifdef EXPERIMENTAL_PROXY
98   PROXY_FAIL_IGNORE_CMD,
99 #endif
100
101   /* These are specials that don't correspond to actual commands */
102
103   EOF_CMD, OTHER_CMD, BADARG_CMD, BADCHAR_CMD, BADSYN_CMD,
104   TOO_MANY_NONMAIL_CMD };
105
106
107 /* This is a convenience macro for adding the identity of an SMTP command
108 to the circular buffer that holds a list of the last n received. */
109
110 #define HAD(n) \
111     smtp_connection_had[smtp_ch_index++] = n; \
112     if (smtp_ch_index >= SMTP_HBUFF_SIZE) smtp_ch_index = 0
113
114
115 /*************************************************
116 *                Local static variables          *
117 *************************************************/
118
119 static auth_instance *authenticated_by;
120 static BOOL auth_advertised;
121 #ifdef SUPPORT_TLS
122 static BOOL tls_advertised;
123 #endif
124 static BOOL esmtp;
125 static BOOL helo_required = FALSE;
126 static BOOL helo_verify = FALSE;
127 static BOOL helo_seen;
128 static BOOL helo_accept_junk;
129 static BOOL count_nonmail;
130 static BOOL pipelining_advertised;
131 static BOOL rcpt_smtp_response_same;
132 static BOOL rcpt_in_progress;
133 static int  nonmail_command_count;
134 static BOOL smtp_exit_function_called = 0;
135 static int  synprot_error_count;
136 static int  unknown_command_count;
137 static int  sync_cmd_limit;
138 static int  smtp_write_error = 0;
139
140 static uschar *rcpt_smtp_response;
141 static uschar *smtp_data_buffer;
142 static uschar *smtp_cmd_data;
143
144 /* We need to know the position of RSET, HELO, EHLO, AUTH, and STARTTLS. Their
145 final fields of all except AUTH are forced TRUE at the start of a new message
146 setup, to allow one of each between messages that is not counted as a nonmail
147 command. (In fact, only one of HELO/EHLO is not counted.) Also, we have to
148 allow a new EHLO after starting up TLS.
149
150 AUTH is "falsely" labelled as a mail command initially, so that it doesn't get
151 counted. However, the flag is changed when AUTH is received, so that multiple
152 failing AUTHs will eventually hit the limit. After a successful AUTH, another
153 AUTH is already forbidden. After a TLS session is started, AUTH's flag is again
154 forced TRUE, to allow for the re-authentication that can happen at that point.
155
156 QUIT is also "falsely" labelled as a mail command so that it doesn't up the
157 count of non-mail commands and possibly provoke an error. */
158
159 static smtp_cmd_list cmd_list[] = {
160   { "rset",       sizeof("rset")-1,       RSET_CMD, FALSE, FALSE },  /* First */
161   { "helo",       sizeof("helo")-1,       HELO_CMD, TRUE,  FALSE },
162   { "ehlo",       sizeof("ehlo")-1,       EHLO_CMD, TRUE,  FALSE },
163   { "auth",       sizeof("auth")-1,       AUTH_CMD, TRUE,  TRUE  },
164   #ifdef SUPPORT_TLS
165   { "starttls",   sizeof("starttls")-1,   STARTTLS_CMD, FALSE, FALSE },
166   #endif
167
168 /* If you change anything above here, also fix the definitions below. */
169
170   { "mail from:", sizeof("mail from:")-1, MAIL_CMD, TRUE,  TRUE  },
171   { "rcpt to:",   sizeof("rcpt to:")-1,   RCPT_CMD, TRUE,  TRUE  },
172   { "data",       sizeof("data")-1,       DATA_CMD, FALSE, TRUE  },
173   { "quit",       sizeof("quit")-1,       QUIT_CMD, FALSE, TRUE  },
174   { "noop",       sizeof("noop")-1,       NOOP_CMD, TRUE,  FALSE },
175   { "etrn",       sizeof("etrn")-1,       ETRN_CMD, TRUE,  FALSE },
176   { "vrfy",       sizeof("vrfy")-1,       VRFY_CMD, TRUE,  FALSE },
177   { "expn",       sizeof("expn")-1,       EXPN_CMD, TRUE,  FALSE },
178   { "help",       sizeof("help")-1,       HELP_CMD, TRUE,  FALSE }
179 };
180
181 static smtp_cmd_list *cmd_list_end =
182   cmd_list + sizeof(cmd_list)/sizeof(smtp_cmd_list);
183
184 #define CMD_LIST_RSET      0
185 #define CMD_LIST_HELO      1
186 #define CMD_LIST_EHLO      2
187 #define CMD_LIST_AUTH      3
188 #define CMD_LIST_STARTTLS  4
189
190 /* This list of names is used for performing the smtp_no_mail logging action.
191 It must be kept in step with the SCH_xxx enumerations. */
192
193 static uschar *smtp_names[] =
194   {
195   US"NONE", US"AUTH", US"DATA", US"EHLO", US"ETRN", US"EXPN", US"HELO",
196   US"HELP", US"MAIL", US"NOOP", US"QUIT", US"RCPT", US"RSET", US"STARTTLS",
197   US"VRFY" };
198
199 static uschar *protocols[] = {
200   US"local-smtp",        /* HELO */
201   US"local-smtps",       /* The rare case EHLO->STARTTLS->HELO */
202   US"local-esmtp",       /* EHLO */
203   US"local-esmtps",      /* EHLO->STARTTLS->EHLO */
204   US"local-esmtpa",      /* EHLO->AUTH */
205   US"local-esmtpsa"      /* EHLO->STARTTLS->EHLO->AUTH */
206   };
207
208 #define pnormal  0
209 #define pextend  2
210 #define pcrpted  1  /* added to pextend or pnormal */
211 #define pauthed  2  /* added to pextend */
212 #define pnlocal  6  /* offset to remove "local" */
213
214 /* Sanity check and validate optional args to MAIL FROM: envelope */
215 enum {
216   ENV_MAIL_OPT_SIZE, ENV_MAIL_OPT_BODY, ENV_MAIL_OPT_AUTH,
217 #ifdef EXPERIMENTAL_PRDR
218   ENV_MAIL_OPT_PRDR,
219 #endif
220   ENV_MAIL_OPT_NULL
221   };
222 typedef struct {
223   uschar *   name;  /* option requested during MAIL cmd */
224   int       value;  /* enum type */
225   BOOL need_value;  /* TRUE requires value (name=value pair format)
226                        FALSE is a singleton */
227   } env_mail_type_t;
228 static env_mail_type_t env_mail_type_list[] = {
229     { US"SIZE",   ENV_MAIL_OPT_SIZE,   TRUE  },
230     { US"BODY",   ENV_MAIL_OPT_BODY,   TRUE  },
231     { US"AUTH",   ENV_MAIL_OPT_AUTH,   TRUE  },
232 #ifdef EXPERIMENTAL_PRDR
233     { US"PRDR",   ENV_MAIL_OPT_PRDR,   FALSE },
234 #endif
235     { US"NULL",   ENV_MAIL_OPT_NULL,   FALSE }
236   };
237
238 /* When reading SMTP from a remote host, we have to use our own versions of the
239 C input-reading functions, in order to be able to flush the SMTP output only
240 when about to read more data from the socket. This is the only way to get
241 optimal performance when the client is using pipelining. Flushing for every
242 command causes a separate packet and reply packet each time; saving all the
243 responses up (when pipelining) combines them into one packet and one response.
244
245 For simplicity, these functions are used for *all* SMTP input, not only when
246 receiving over a socket. However, after setting up a secure socket (SSL), input
247 is read via the OpenSSL library, and another set of functions is used instead
248 (see tls.c).
249
250 These functions are set in the receive_getc etc. variables and called with the
251 same interface as the C functions. However, since there can only ever be
252 one incoming SMTP call, we just use a single buffer and flags. There is no need
253 to implement a complicated private FILE-like structure.*/
254
255 static uschar *smtp_inbuffer;
256 static uschar *smtp_inptr;
257 static uschar *smtp_inend;
258 static int     smtp_had_eof;
259 static int     smtp_had_error;
260
261
262 /*************************************************
263 *          SMTP version of getc()                *
264 *************************************************/
265
266 /* This gets the next byte from the SMTP input buffer. If the buffer is empty,
267 it flushes the output, and refills the buffer, with a timeout. The signal
268 handler is set appropriately by the calling function. This function is not used
269 after a connection has negotated itself into an TLS/SSL state.
270
271 Arguments:  none
272 Returns:    the next character or EOF
273 */
274
275 int
276 smtp_getc(void)
277 {
278 if (smtp_inptr >= smtp_inend)
279   {
280   int rc, save_errno;
281   fflush(smtp_out);
282   if (smtp_receive_timeout > 0) alarm(smtp_receive_timeout);
283   rc = read(fileno(smtp_in), smtp_inbuffer, in_buffer_size);
284   save_errno = errno;
285   alarm(0);
286   if (rc <= 0)
287     {
288     /* Must put the error text in fixed store, because this might be during
289     header reading, where it releases unused store above the header. */
290     if (rc < 0)
291       {
292       smtp_had_error = save_errno;
293       smtp_read_error = string_copy_malloc(
294         string_sprintf(" (error: %s)", strerror(save_errno)));
295       }
296     else smtp_had_eof = 1;
297     return EOF;
298     }
299 #ifndef DISABLE_DKIM
300   dkim_exim_verify_feed(smtp_inbuffer, rc);
301 #endif
302   smtp_inend = smtp_inbuffer + rc;
303   smtp_inptr = smtp_inbuffer;
304   }
305 return *smtp_inptr++;
306 }
307
308
309
310 /*************************************************
311 *          SMTP version of ungetc()              *
312 *************************************************/
313
314 /* Puts a character back in the input buffer. Only ever
315 called once.
316
317 Arguments:
318   ch           the character
319
320 Returns:       the character
321 */
322
323 int
324 smtp_ungetc(int ch)
325 {
326 *(--smtp_inptr) = ch;
327 return ch;
328 }
329
330
331
332
333 /*************************************************
334 *          SMTP version of feof()                *
335 *************************************************/
336
337 /* Tests for a previous EOF
338
339 Arguments:     none
340 Returns:       non-zero if the eof flag is set
341 */
342
343 int
344 smtp_feof(void)
345 {
346 return smtp_had_eof;
347 }
348
349
350
351
352 /*************************************************
353 *          SMTP version of ferror()              *
354 *************************************************/
355
356 /* Tests for a previous read error, and returns with errno
357 restored to what it was when the error was detected.
358
359 Arguments:     none
360 Returns:       non-zero if the error flag is set
361 */
362
363 int
364 smtp_ferror(void)
365 {
366 errno = smtp_had_error;
367 return smtp_had_error;
368 }
369
370
371
372 /*************************************************
373 *      Test for characters in the SMTP buffer    *
374 *************************************************/
375
376 /* Used at the end of a message
377
378 Arguments:     none
379 Returns:       TRUE/FALSE
380 */
381
382 BOOL
383 smtp_buffered(void)
384 {
385 return smtp_inptr < smtp_inend;
386 }
387
388
389
390 /*************************************************
391 *     Write formatted string to SMTP channel     *
392 *************************************************/
393
394 /* This is a separate function so that we don't have to repeat everything for
395 TLS support or debugging. It is global so that the daemon and the
396 authentication functions can use it. It does not return any error indication,
397 because major problems such as dropped connections won't show up till an output
398 flush for non-TLS connections. The smtp_fflush() function is available for
399 checking that: for convenience, TLS output errors are remembered here so that
400 they are also picked up later by smtp_fflush().
401
402 Arguments:
403   format      format string
404   ...         optional arguments
405
406 Returns:      nothing
407 */
408
409 void
410 smtp_printf(const char *format, ...)
411 {
412 va_list ap;
413
414 va_start(ap, format);
415 smtp_vprintf(format, ap);
416 va_end(ap);
417 }
418
419 /* This is split off so that verify.c:respond_printf() can, in effect, call
420 smtp_printf(), bearing in mind that in C a vararg function can't directly
421 call another vararg function, only a function which accepts a va_list. */
422
423 void
424 smtp_vprintf(const char *format, va_list ap)
425 {
426 BOOL yield;
427
428 yield = string_vformat(big_buffer, big_buffer_size, format, ap);
429
430 DEBUG(D_receive)
431   {
432   void *reset_point = store_get(0);
433   uschar *msg_copy, *cr, *end;
434   msg_copy = string_copy(big_buffer);
435   end = msg_copy + Ustrlen(msg_copy);
436   while ((cr = Ustrchr(msg_copy, '\r')) != NULL)   /* lose CRs */
437   memmove(cr, cr + 1, (end--) - cr);
438   debug_printf("SMTP>> %s", msg_copy);
439   store_reset(reset_point);
440   }
441
442 if (!yield)
443   {
444   log_write(0, LOG_MAIN|LOG_PANIC, "string too large in smtp_printf()");
445   smtp_closedown(US"Unexpected error");
446   exim_exit(EXIT_FAILURE);
447   }
448
449 /* If this is the first output for a (non-batch) RCPT command, see if all RCPTs
450 have had the same. Note: this code is also present in smtp_respond(). It would
451 be tidier to have it only in one place, but when it was added, it was easier to
452 do it that way, so as not to have to mess with the code for the RCPT command,
453 which sometimes uses smtp_printf() and sometimes smtp_respond(). */
454
455 if (rcpt_in_progress)
456   {
457   if (rcpt_smtp_response == NULL)
458     rcpt_smtp_response = string_copy(big_buffer);
459   else if (rcpt_smtp_response_same &&
460            Ustrcmp(rcpt_smtp_response, big_buffer) != 0)
461     rcpt_smtp_response_same = FALSE;
462   rcpt_in_progress = FALSE;
463   }
464
465 /* Now write the string */
466
467 #ifdef SUPPORT_TLS
468 if (tls_in.active >= 0)
469   {
470   if (tls_write(TRUE, big_buffer, Ustrlen(big_buffer)) < 0)
471     smtp_write_error = -1;
472   }
473 else
474 #endif
475
476 if (fprintf(smtp_out, "%s", big_buffer) < 0) smtp_write_error = -1;
477 }
478
479
480
481 /*************************************************
482 *        Flush SMTP out and check for error      *
483 *************************************************/
484
485 /* This function isn't currently used within Exim (it detects errors when it
486 tries to read the next SMTP input), but is available for use in local_scan().
487 For non-TLS connections, it flushes the output and checks for errors. For
488 TLS-connections, it checks for a previously-detected TLS write error.
489
490 Arguments:  none
491 Returns:    0 for no error; -1 after an error
492 */
493
494 int
495 smtp_fflush(void)
496 {
497 if (tls_in.active < 0 && fflush(smtp_out) != 0) smtp_write_error = -1;
498 return smtp_write_error;
499 }
500
501
502
503 /*************************************************
504 *          SMTP command read timeout             *
505 *************************************************/
506
507 /* Signal handler for timing out incoming SMTP commands. This attempts to
508 finish off tidily.
509
510 Argument: signal number (SIGALRM)
511 Returns:  nothing
512 */
513
514 static void
515 command_timeout_handler(int sig)
516 {
517 sig = sig;    /* Keep picky compilers happy */
518 log_write(L_lost_incoming_connection,
519           LOG_MAIN, "SMTP command timeout on%s connection from %s",
520           (tls_in.active >= 0)? " TLS" : "",
521           host_and_ident(FALSE));
522 if (smtp_batched_input)
523   moan_smtp_batch(NULL, "421 SMTP command timeout");  /* Does not return */
524 smtp_notquit_exit(US"command-timeout", US"421",
525   US"%s: SMTP command timeout - closing connection", smtp_active_hostname);
526 exim_exit(EXIT_FAILURE);
527 }
528
529
530
531 /*************************************************
532 *               SIGTERM received                 *
533 *************************************************/
534
535 /* Signal handler for handling SIGTERM. Again, try to finish tidily.
536
537 Argument: signal number (SIGTERM)
538 Returns:  nothing
539 */
540
541 static void
542 command_sigterm_handler(int sig)
543 {
544 sig = sig;    /* Keep picky compilers happy */
545 log_write(0, LOG_MAIN, "%s closed after SIGTERM", smtp_get_connection_info());
546 if (smtp_batched_input)
547   moan_smtp_batch(NULL, "421 SIGTERM received");  /* Does not return */
548 smtp_notquit_exit(US"signal-exit", US"421",
549   US"%s: Service not available - closing connection", smtp_active_hostname);
550 exim_exit(EXIT_FAILURE);
551 }
552
553
554
555
556 #ifdef EXPERIMENTAL_PROXY
557 /*************************************************
558 *     Restore socket timeout to previous value   *
559 *************************************************/
560 /* If the previous value was successfully retrieved, restore
561 it before returning control to the non-proxy routines
562
563 Arguments: fd     - File descriptor for input
564            get_ok - Successfully retrieved previous values
565            tvtmp  - Time struct with previous values
566            vslen  - Length of time struct
567 Returns:   none
568 */
569 static void
570 restore_socket_timeout(int fd, int get_ok, struct timeval tvtmp, socklen_t vslen)
571 {
572 if (get_ok == 0)
573   setsockopt(fd, SOL_SOCKET, SO_RCVTIMEO, (char *)&tvtmp, vslen);
574 }
575
576 /*************************************************
577 *       Check if host is required proxy host     *
578 *************************************************/
579 /* The function determines if inbound host will be a regular smtp host
580 or if it is configured that it must use Proxy Protocol.
581
582 Arguments: none
583 Returns:   bool
584 */
585
586 static BOOL
587 check_proxy_protocol_host()
588 {
589 int rc;
590 /* Cannot configure local connection as a proxy inbound */
591 if (sender_host_address == NULL) return proxy_session;
592
593 rc = verify_check_this_host(&proxy_required_hosts, NULL, NULL,
594                            sender_host_address, NULL);
595 if (rc == OK)
596   {
597   DEBUG(D_receive)
598     debug_printf("Detected proxy protocol configured host\n");
599   proxy_session = TRUE;
600   }
601 return proxy_session;
602 }
603
604
605 /*************************************************
606 *         Setup host for proxy protocol          *
607 *************************************************/
608 /* The function configures the connection based on a header from the
609 inbound host to use Proxy Protocol. The specification is very exact
610 so exit with an error if do not find the exact required pieces. This
611 includes an incorrect number of spaces separating args.
612
613 Arguments: none
614 Returns:   int
615 */
616
617 static BOOL
618 setup_proxy_protocol_host()
619 {
620 union {
621   struct {
622     uschar line[108];
623   } v1;
624   struct {
625     uschar sig[12];
626     uschar ver;
627     uschar cmd;
628     uschar fam;
629     uschar len;
630     union {
631       struct { /* TCP/UDP over IPv4, len = 12 */
632         uint32_t src_addr;
633         uint32_t dst_addr;
634         uint16_t src_port;
635         uint16_t dst_port;
636       } ip4;
637       struct { /* TCP/UDP over IPv6, len = 36 */
638         uint8_t  src_addr[16];
639         uint8_t  dst_addr[16];
640         uint16_t src_port;
641         uint16_t dst_port;
642       } ip6;
643       struct { /* AF_UNIX sockets, len = 216 */
644         uschar   src_addr[108];
645         uschar   dst_addr[108];
646       } unx;
647     } addr;
648   } v2;
649 } hdr;
650
651 /* Temp variables used in PPv2 address:port parsing */
652 uint16_t tmpport;
653 char tmpip[INET_ADDRSTRLEN];
654 struct sockaddr_in tmpaddr;
655 char tmpip6[INET6_ADDRSTRLEN];
656 struct sockaddr_in6 tmpaddr6;
657
658 int get_ok = 0;
659 int size, ret, fd;
660 const char v2sig[13] = "\x0D\x0A\x0D\x0A\x00\x0D\x0A\x51\x55\x49\x54\x0A\x02";
661 uschar *iptype;  /* To display debug info */
662 struct timeval tv;
663 socklen_t vslen = 0;
664 struct timeval tvtmp;
665
666 vslen = sizeof(struct timeval);
667
668 fd = fileno(smtp_in);
669
670 /* Save current socket timeout values */
671 get_ok = getsockopt(fd, SOL_SOCKET, SO_RCVTIMEO, (char *)&tvtmp,
672                     &vslen);
673
674 /* Proxy Protocol host must send header within a short time
675 (default 3 seconds) or it's considered invalid */
676 tv.tv_sec  = PROXY_NEGOTIATION_TIMEOUT_SEC;
677 tv.tv_usec = PROXY_NEGOTIATION_TIMEOUT_USEC;
678 setsockopt(fd, SOL_SOCKET, SO_RCVTIMEO, (char *)&tv,
679            sizeof(struct timeval));
680
681 do
682   {
683   /* The inbound host was declared to be a Proxy Protocol host, so
684      don't do a PEEK into the data, actually slurp it up. */
685   ret = recv(fd, &hdr, sizeof(hdr), 0);
686   }
687   while (ret == -1 && errno == EINTR);
688
689 if (ret == -1)
690   {
691   restore_socket_timeout(fd, get_ok, tvtmp, vslen);
692   return (errno == EAGAIN) ? 0 : ERRNO_PROXYFAIL;
693   }
694
695 if (ret >= 16 &&
696     memcmp(&hdr.v2, v2sig, 13) == 0)
697   {
698   DEBUG(D_receive) debug_printf("Detected PROXYv2 header\n");
699   size = 16 + hdr.v2.len;
700   if (ret < size)
701     {
702     DEBUG(D_receive) debug_printf("Truncated or too large PROXYv2 header\n");
703     goto proxyfail;
704     }
705   switch (hdr.v2.cmd)
706     {
707     case 0x01: /* PROXY command */
708       switch (hdr.v2.fam)
709         {
710         case 0x11:  /* TCPv4 address type */
711           iptype = US"IPv4";
712           tmpaddr.sin_addr.s_addr = hdr.v2.addr.ip4.src_addr;
713           inet_ntop(AF_INET, &(tmpaddr.sin_addr), (char *)&tmpip, sizeof(tmpip));
714           if (!string_is_ip_address(US tmpip,NULL))
715             {
716             DEBUG(D_receive) debug_printf("Invalid %s source IP\n", iptype);
717             return ERRNO_PROXYFAIL;
718             }
719           proxy_host_address  = sender_host_address;
720           sender_host_address = string_copy(US tmpip);
721           tmpport             = ntohs(hdr.v2.addr.ip4.src_port);
722           proxy_host_port     = sender_host_port;
723           sender_host_port    = tmpport;
724           /* Save dest ip/port */
725           tmpaddr.sin_addr.s_addr = hdr.v2.addr.ip4.dst_addr;
726           inet_ntop(AF_INET, &(tmpaddr.sin_addr), (char *)&tmpip, sizeof(tmpip));
727           if (!string_is_ip_address(US tmpip,NULL))
728             {
729             DEBUG(D_receive) debug_printf("Invalid %s dest port\n", iptype);
730             return ERRNO_PROXYFAIL;
731             }
732           proxy_target_address = string_copy(US tmpip);
733           tmpport              = ntohs(hdr.v2.addr.ip4.dst_port);
734           proxy_target_port    = tmpport;
735           goto done;
736         case 0x21:  /* TCPv6 address type */
737           iptype = US"IPv6";
738           memmove(tmpaddr6.sin6_addr.s6_addr, hdr.v2.addr.ip6.src_addr, 16);
739           inet_ntop(AF_INET6, &(tmpaddr6.sin6_addr), (char *)&tmpip6, sizeof(tmpip6));
740           if (!string_is_ip_address(US tmpip6,NULL))
741             {
742             DEBUG(D_receive) debug_printf("Invalid %s source IP\n", iptype);
743             return ERRNO_PROXYFAIL;
744             }
745           proxy_host_address  = sender_host_address;
746           sender_host_address = string_copy(US tmpip6);
747           tmpport             = ntohs(hdr.v2.addr.ip6.src_port);
748           proxy_host_port     = sender_host_port;
749           sender_host_port    = tmpport;
750           /* Save dest ip/port */
751           memmove(tmpaddr6.sin6_addr.s6_addr, hdr.v2.addr.ip6.dst_addr, 16);
752           inet_ntop(AF_INET6, &(tmpaddr6.sin6_addr), (char *)&tmpip6, sizeof(tmpip6));
753           if (!string_is_ip_address(US tmpip6,NULL))
754             {
755             DEBUG(D_receive) debug_printf("Invalid %s dest port\n", iptype);
756             return ERRNO_PROXYFAIL;
757             }
758           proxy_target_address = string_copy(US tmpip6);
759           tmpport              = ntohs(hdr.v2.addr.ip6.dst_port);
760           proxy_target_port    = tmpport;
761           goto done;
762         default:
763           DEBUG(D_receive)
764             debug_printf("Unsupported PROXYv2 connection type: 0x%02x\n",
765                          hdr.v2.fam);
766           goto proxyfail;
767         }
768       /* Unsupported protocol, keep local connection address */
769       break;
770     case 0x00: /* LOCAL command */
771       /* Keep local connection address for LOCAL */
772       break;
773     default:
774       DEBUG(D_receive)
775         debug_printf("Unsupported PROXYv2 command: 0x%02x\n",
776                      hdr.v2.cmd);
777       goto proxyfail;
778     }
779   }
780 else if (ret >= 8 &&
781          memcmp(hdr.v1.line, "PROXY", 5) == 0)
782   {
783   uschar *p = string_copy(hdr.v1.line);
784   uschar *end = memchr(p, '\r', ret - 1);
785   uschar *sp;     /* Utility variables follow */
786   int     tmp_port;
787   char   *endc;
788
789   if (!end || end[1] != '\n')
790     {
791     DEBUG(D_receive) debug_printf("Partial or invalid PROXY header\n");
792     goto proxyfail;
793     }
794   *end = '\0'; /* Terminate the string */
795   size = end + 2 - hdr.v1.line; /* Skip header + CRLF */
796   DEBUG(D_receive) debug_printf("Detected PROXYv1 header\n");
797   /* Step through the string looking for the required fields. Ensure
798      strict adherance to required formatting, exit for any error. */
799   p += 5;
800   if (!isspace(*(p++)))
801     {
802     DEBUG(D_receive) debug_printf("Missing space after PROXY command\n");
803     goto proxyfail;
804     }
805   if (!Ustrncmp(p, CCS"TCP4", 4))
806     iptype = US"IPv4";
807   else if (!Ustrncmp(p,CCS"TCP6", 4))
808     iptype = US"IPv6";
809   else if (!Ustrncmp(p,CCS"UNKNOWN", 7))
810     {
811     iptype = US"Unknown";
812     goto done;
813     }
814   else
815     {
816     DEBUG(D_receive) debug_printf("Invalid TCP type\n");
817     goto proxyfail;
818     }
819
820   p += Ustrlen(iptype);
821   if (!isspace(*(p++)))
822     {
823     DEBUG(D_receive) debug_printf("Missing space after TCP4/6 command\n");
824     goto proxyfail;
825     }
826   /* Find the end of the arg */
827   if ((sp = Ustrchr(p, ' ')) == NULL)
828     {
829     DEBUG(D_receive)
830       debug_printf("Did not find proxied src %s\n", iptype);
831     goto proxyfail;
832     }
833   *sp = '\0';
834   if(!string_is_ip_address(p,NULL))
835     {
836     DEBUG(D_receive)
837       debug_printf("Proxied src arg is not an %s address\n", iptype);
838     goto proxyfail;
839     }
840   proxy_host_address = sender_host_address;
841   sender_host_address = p;
842   p = sp + 1;
843   if ((sp = Ustrchr(p, ' ')) == NULL)
844     {
845     DEBUG(D_receive)
846       debug_printf("Did not find proxy dest %s\n", iptype);
847     goto proxyfail;
848     }
849   *sp = '\0';
850   if(!string_is_ip_address(p,NULL))
851     {
852     DEBUG(D_receive)
853       debug_printf("Proxy dest arg is not an %s address\n", iptype);
854     goto proxyfail;
855     }
856   proxy_target_address = p;
857   p = sp + 1;
858   if ((sp = Ustrchr(p, ' ')) == NULL)
859     {
860     DEBUG(D_receive) debug_printf("Did not find proxied src port\n");
861     goto proxyfail;
862     }
863   *sp = '\0';
864   tmp_port = strtol(CCS p,&endc,10);
865   if (*endc || tmp_port == 0)
866     {
867     DEBUG(D_receive)
868       debug_printf("Proxied src port '%s' not an integer\n", p);
869     goto proxyfail;
870     }
871   proxy_host_port = sender_host_port;
872   sender_host_port = tmp_port;
873   p = sp + 1;
874   if ((sp = Ustrchr(p, '\0')) == NULL)
875     {
876     DEBUG(D_receive) debug_printf("Did not find proxy dest port\n");
877     goto proxyfail;
878     }
879   tmp_port = strtol(CCS p,&endc,10);
880   if (*endc || tmp_port == 0)
881     {
882     DEBUG(D_receive)
883       debug_printf("Proxy dest port '%s' not an integer\n", p);
884     goto proxyfail;
885     }
886   proxy_target_port = tmp_port;
887   /* Already checked for /r /n above. Good V1 header received. */
888   goto done;
889   }
890 else
891   {
892   /* Wrong protocol */
893   DEBUG(D_receive) debug_printf("Invalid proxy protocol version negotiation\n");
894   goto proxyfail;
895   }
896
897 proxyfail:
898 restore_socket_timeout(fd, get_ok, tvtmp, vslen);
899 /* Don't flush any potential buffer contents. Any input should cause a
900    synchronization failure */
901 return FALSE;
902
903 done:
904 restore_socket_timeout(fd, get_ok, tvtmp, vslen);
905 DEBUG(D_receive)
906   debug_printf("Valid %s sender from Proxy Protocol header\n", iptype);
907 return proxy_session;
908 }
909 #endif
910
911 /*************************************************
912 *           Read one command line                *
913 *************************************************/
914
915 /* Strictly, SMTP commands coming over the net are supposed to end with CRLF.
916 There are sites that don't do this, and in any case internal SMTP probably
917 should check only for LF. Consequently, we check here for LF only. The line
918 ends up with [CR]LF removed from its end. If we get an overlong line, treat as
919 an unknown command. The command is read into the global smtp_cmd_buffer so that
920 it is available via $smtp_command.
921
922 The character reading routine sets up a timeout for each block actually read
923 from the input (which may contain more than one command). We set up a special
924 signal handler that closes down the session on a timeout. Control does not
925 return when it runs.
926
927 Arguments:
928   check_sync   if TRUE, check synchronization rules if global option is TRUE
929
930 Returns:       a code identifying the command (enumerated above)
931 */
932
933 static int
934 smtp_read_command(BOOL check_sync)
935 {
936 int c;
937 int ptr = 0;
938 smtp_cmd_list *p;
939 BOOL hadnull = FALSE;
940
941 os_non_restarting_signal(SIGALRM, command_timeout_handler);
942
943 while ((c = (receive_getc)()) != '\n' && c != EOF)
944   {
945   if (ptr >= smtp_cmd_buffer_size)
946     {
947     os_non_restarting_signal(SIGALRM, sigalrm_handler);
948     return OTHER_CMD;
949     }
950   if (c == 0)
951     {
952     hadnull = TRUE;
953     c = '?';
954     }
955   smtp_cmd_buffer[ptr++] = c;
956   }
957
958 receive_linecount++;    /* For BSMTP errors */
959 os_non_restarting_signal(SIGALRM, sigalrm_handler);
960
961 /* If hit end of file, return pseudo EOF command. Whether we have a
962 part-line already read doesn't matter, since this is an error state. */
963
964 if (c == EOF) return EOF_CMD;
965
966 /* Remove any CR and white space at the end of the line, and terminate the
967 string. */
968
969 while (ptr > 0 && isspace(smtp_cmd_buffer[ptr-1])) ptr--;
970 smtp_cmd_buffer[ptr] = 0;
971
972 DEBUG(D_receive) debug_printf("SMTP<< %s\n", smtp_cmd_buffer);
973
974 /* NULLs are not allowed in SMTP commands */
975
976 if (hadnull) return BADCHAR_CMD;
977
978 /* Scan command list and return identity, having set the data pointer
979 to the start of the actual data characters. Check for SMTP synchronization
980 if required. */
981
982 for (p = cmd_list; p < cmd_list_end; p++)
983   {
984   #ifdef EXPERIMENTAL_PROXY
985   /* Only allow QUIT command if Proxy Protocol parsing failed */
986   if (proxy_session && proxy_session_failed)
987     {
988     if (p->cmd != QUIT_CMD)
989       continue;
990     }
991   #endif
992   if (strncmpic(smtp_cmd_buffer, US p->name, p->len) == 0 &&
993        (smtp_cmd_buffer[p->len-1] == ':' ||   /* "mail from:" or "rcpt to:" */
994         smtp_cmd_buffer[p->len] == 0 ||
995         smtp_cmd_buffer[p->len] == ' '))
996     {
997     if (smtp_inptr < smtp_inend &&                     /* Outstanding input */
998         p->cmd < sync_cmd_limit &&                     /* Command should sync */
999         check_sync &&                                  /* Local flag set */
1000         smtp_enforce_sync &&                           /* Global flag set */
1001         sender_host_address != NULL &&                 /* Not local input */
1002         !sender_host_notsocket)                        /* Really is a socket */
1003       return BADSYN_CMD;
1004
1005     /* The variables $smtp_command and $smtp_command_argument point into the
1006     unmodified input buffer. A copy of the latter is taken for actual
1007     processing, so that it can be chopped up into separate parts if necessary,
1008     for example, when processing a MAIL command options such as SIZE that can
1009     follow the sender address. */
1010
1011     smtp_cmd_argument = smtp_cmd_buffer + p->len;
1012     while (isspace(*smtp_cmd_argument)) smtp_cmd_argument++;
1013     Ustrcpy(smtp_data_buffer, smtp_cmd_argument);
1014     smtp_cmd_data = smtp_data_buffer;
1015
1016     /* Count non-mail commands from those hosts that are controlled in this
1017     way. The default is all hosts. We don't waste effort checking the list
1018     until we get a non-mail command, but then cache the result to save checking
1019     again. If there's a DEFER while checking the host, assume it's in the list.
1020
1021     Note that one instance of RSET, EHLO/HELO, and STARTTLS is allowed at the
1022     start of each incoming message by fiddling with the value in the table. */
1023
1024     if (!p->is_mail_cmd)
1025       {
1026       if (count_nonmail == TRUE_UNSET) count_nonmail =
1027         verify_check_host(&smtp_accept_max_nonmail_hosts) != FAIL;
1028       if (count_nonmail && ++nonmail_command_count > smtp_accept_max_nonmail)
1029         return TOO_MANY_NONMAIL_CMD;
1030       }
1031
1032     /* If there is data for a command that does not expect it, generate the
1033     error here. */
1034
1035     return (p->has_arg || *smtp_cmd_data == 0)? p->cmd : BADARG_CMD;
1036     }
1037   }
1038
1039 #ifdef EXPERIMENTAL_PROXY
1040 /* Only allow QUIT command if Proxy Protocol parsing failed */
1041 if (proxy_session && proxy_session_failed)
1042   return PROXY_FAIL_IGNORE_CMD;
1043 #endif
1044
1045 /* Enforce synchronization for unknown commands */
1046
1047 if (smtp_inptr < smtp_inend &&                     /* Outstanding input */
1048     check_sync &&                                  /* Local flag set */
1049     smtp_enforce_sync &&                           /* Global flag set */
1050     sender_host_address != NULL &&                 /* Not local input */
1051     !sender_host_notsocket)                        /* Really is a socket */
1052   return BADSYN_CMD;
1053
1054 return OTHER_CMD;
1055 }
1056
1057
1058
1059 /*************************************************
1060 *          Recheck synchronization               *
1061 *************************************************/
1062
1063 /* Synchronization checks can never be perfect because a packet may be on its
1064 way but not arrived when the check is done. Such checks can in any case only be
1065 done when TLS is not in use. Normally, the checks happen when commands are
1066 read: Exim ensures that there is no more input in the input buffer. In normal
1067 cases, the response to the command will be fast, and there is no further check.
1068
1069 However, for some commands an ACL is run, and that can include delays. In those
1070 cases, it is useful to do another check on the input just before sending the
1071 response. This also applies at the start of a connection. This function does
1072 that check by means of the select() function, as long as the facility is not
1073 disabled or inappropriate. A failure of select() is ignored.
1074
1075 When there is unwanted input, we read it so that it appears in the log of the
1076 error.
1077
1078 Arguments: none
1079 Returns:   TRUE if all is well; FALSE if there is input pending
1080 */
1081
1082 static BOOL
1083 check_sync(void)
1084 {
1085 int fd, rc;
1086 fd_set fds;
1087 struct timeval tzero;
1088
1089 if (!smtp_enforce_sync || sender_host_address == NULL ||
1090     sender_host_notsocket || tls_in.active >= 0)
1091   return TRUE;
1092
1093 fd = fileno(smtp_in);
1094 FD_ZERO(&fds);
1095 FD_SET(fd, &fds);
1096 tzero.tv_sec = 0;
1097 tzero.tv_usec = 0;
1098 rc = select(fd + 1, (SELECT_ARG2_TYPE *)&fds, NULL, NULL, &tzero);
1099
1100 if (rc <= 0) return TRUE;     /* Not ready to read */
1101 rc = smtp_getc();
1102 if (rc < 0) return TRUE;      /* End of file or error */
1103
1104 smtp_ungetc(rc);
1105 rc = smtp_inend - smtp_inptr;
1106 if (rc > 150) rc = 150;
1107 smtp_inptr[rc] = 0;
1108 return FALSE;
1109 }
1110
1111
1112
1113 /*************************************************
1114 *          Forced closedown of call              *
1115 *************************************************/
1116
1117 /* This function is called from log.c when Exim is dying because of a serious
1118 disaster, and also from some other places. If an incoming non-batched SMTP
1119 channel is open, it swallows the rest of the incoming message if in the DATA
1120 phase, sends the reply string, and gives an error to all subsequent commands
1121 except QUIT. The existence of an SMTP call is detected by the non-NULLness of
1122 smtp_in.
1123
1124 Arguments:
1125   message   SMTP reply string to send, excluding the code
1126
1127 Returns:    nothing
1128 */
1129
1130 void
1131 smtp_closedown(uschar *message)
1132 {
1133 if (smtp_in == NULL || smtp_batched_input) return;
1134 receive_swallow_smtp();
1135 smtp_printf("421 %s\r\n", message);
1136
1137 for (;;)
1138   {
1139   switch(smtp_read_command(FALSE))
1140     {
1141     case EOF_CMD:
1142     return;
1143
1144     case QUIT_CMD:
1145     smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
1146     mac_smtp_fflush();
1147     return;
1148
1149     case RSET_CMD:
1150     smtp_printf("250 Reset OK\r\n");
1151     break;
1152
1153     default:
1154     smtp_printf("421 %s\r\n", message);
1155     break;
1156     }
1157   }
1158 }
1159
1160
1161
1162
1163 /*************************************************
1164 *        Set up connection info for logging      *
1165 *************************************************/
1166
1167 /* This function is called when logging information about an SMTP connection.
1168 It sets up appropriate source information, depending on the type of connection.
1169 If sender_fullhost is NULL, we are at a very early stage of the connection;
1170 just use the IP address.
1171
1172 Argument:    none
1173 Returns:     a string describing the connection
1174 */
1175
1176 uschar *
1177 smtp_get_connection_info(void)
1178 {
1179 uschar *hostname = (sender_fullhost == NULL)?
1180   sender_host_address : sender_fullhost;
1181
1182 if (host_checking)
1183   return string_sprintf("SMTP connection from %s", hostname);
1184
1185 if (sender_host_unknown || sender_host_notsocket)
1186   return string_sprintf("SMTP connection from %s", sender_ident);
1187
1188 if (is_inetd)
1189   return string_sprintf("SMTP connection from %s (via inetd)", hostname);
1190
1191 if ((log_extra_selector & LX_incoming_interface) != 0 &&
1192      interface_address != NULL)
1193   return string_sprintf("SMTP connection from %s I=[%s]:%d", hostname,
1194     interface_address, interface_port);
1195
1196 return string_sprintf("SMTP connection from %s", hostname);
1197 }
1198
1199
1200
1201 #ifdef SUPPORT_TLS
1202 /* Append TLS-related information to a log line
1203
1204 Arguments:
1205   s             String under construction: allocated string to extend, or NULL
1206   sizep         Pointer to current allocation size (update on return), or NULL
1207   ptrp          Pointer to index for new entries in string (update on return), or NULL
1208
1209 Returns:        Allocated string or NULL
1210 */
1211 static uschar *
1212 s_tlslog(uschar * s, int * sizep, int * ptrp)
1213 {
1214   int size = sizep ? *sizep : 0;
1215   int ptr = ptrp ? *ptrp : 0;
1216
1217   if ((log_extra_selector & LX_tls_cipher) != 0 && tls_in.cipher != NULL)
1218     s = string_append(s, &size, &ptr, 2, US" X=", tls_in.cipher);
1219   if ((log_extra_selector & LX_tls_certificate_verified) != 0 &&
1220        tls_in.cipher != NULL)
1221     s = string_append(s, &size, &ptr, 2, US" CV=",
1222       tls_in.certificate_verified? "yes":"no");
1223   if ((log_extra_selector & LX_tls_peerdn) != 0 && tls_in.peerdn != NULL)
1224     s = string_append(s, &size, &ptr, 3, US" DN=\"",
1225       string_printing(tls_in.peerdn), US"\"");
1226   if ((log_extra_selector & LX_tls_sni) != 0 && tls_in.sni != NULL)
1227     s = string_append(s, &size, &ptr, 3, US" SNI=\"",
1228       string_printing(tls_in.sni), US"\"");
1229
1230   if (s)
1231     {
1232     s[ptr] = '\0';
1233     if (sizep) *sizep = size;
1234     if (ptrp) *ptrp = ptr;
1235     }
1236   return s;
1237 }
1238 #endif
1239
1240 /*************************************************
1241 *      Log lack of MAIL if so configured         *
1242 *************************************************/
1243
1244 /* This function is called when an SMTP session ends. If the log selector
1245 smtp_no_mail is set, write a log line giving some details of what has happened
1246 in the SMTP session.
1247
1248 Arguments:   none
1249 Returns:     nothing
1250 */
1251
1252 void
1253 smtp_log_no_mail(void)
1254 {
1255 int size, ptr, i;
1256 uschar *s, *sep;
1257
1258 if (smtp_mailcmd_count > 0 || (log_extra_selector & LX_smtp_no_mail) == 0)
1259   return;
1260
1261 s = NULL;
1262 size = ptr = 0;
1263
1264 if (sender_host_authenticated != NULL)
1265   {
1266   s = string_append(s, &size, &ptr, 2, US" A=", sender_host_authenticated);
1267   if (authenticated_id != NULL)
1268     s = string_append(s, &size, &ptr, 2, US":", authenticated_id);
1269   }
1270
1271 #ifdef SUPPORT_TLS
1272 s = s_tlslog(s, &size, &ptr);
1273 #endif
1274
1275 sep = (smtp_connection_had[SMTP_HBUFF_SIZE-1] != SCH_NONE)?
1276   US" C=..." : US" C=";
1277 for (i = smtp_ch_index; i < SMTP_HBUFF_SIZE; i++)
1278   {
1279   if (smtp_connection_had[i] != SCH_NONE)
1280     {
1281     s = string_append(s, &size, &ptr, 2, sep,
1282       smtp_names[smtp_connection_had[i]]);
1283     sep = US",";
1284     }
1285   }
1286
1287 for (i = 0; i < smtp_ch_index; i++)
1288   {
1289   s = string_append(s, &size, &ptr, 2, sep, smtp_names[smtp_connection_had[i]]);
1290   sep = US",";
1291   }
1292
1293 if (s != NULL) s[ptr] = 0; else s = US"";
1294 log_write(0, LOG_MAIN, "no MAIL in SMTP connection from %s D=%s%s",
1295   host_and_ident(FALSE),
1296   readconf_printtime(time(NULL) - smtp_connection_start), s);
1297 }
1298
1299
1300
1301 /*************************************************
1302 *   Check HELO line and set sender_helo_name     *
1303 *************************************************/
1304
1305 /* Check the format of a HELO line. The data for HELO/EHLO is supposed to be
1306 the domain name of the sending host, or an ip literal in square brackets. The
1307 arrgument is placed in sender_helo_name, which is in malloc store, because it
1308 must persist over multiple incoming messages. If helo_accept_junk is set, this
1309 host is permitted to send any old junk (needed for some broken hosts).
1310 Otherwise, helo_allow_chars can be used for rogue characters in general
1311 (typically people want to let in underscores).
1312
1313 Argument:
1314   s       the data portion of the line (already past any white space)
1315
1316 Returns:  TRUE or FALSE
1317 */
1318
1319 static BOOL
1320 check_helo(uschar *s)
1321 {
1322 uschar *start = s;
1323 uschar *end = s + Ustrlen(s);
1324 BOOL yield = helo_accept_junk;
1325
1326 /* Discard any previous helo name */
1327
1328 if (sender_helo_name != NULL)
1329   {
1330   store_free(sender_helo_name);
1331   sender_helo_name = NULL;
1332   }
1333
1334 /* Skip tests if junk is permitted. */
1335
1336 if (!yield)
1337   {
1338   /* Allow the new standard form for IPv6 address literals, namely,
1339   [IPv6:....], and because someone is bound to use it, allow an equivalent
1340   IPv4 form. Allow plain addresses as well. */
1341
1342   if (*s == '[')
1343     {
1344     if (end[-1] == ']')
1345       {
1346       end[-1] = 0;
1347       if (strncmpic(s, US"[IPv6:", 6) == 0)
1348         yield = (string_is_ip_address(s+6, NULL) == 6);
1349       else if (strncmpic(s, US"[IPv4:", 6) == 0)
1350         yield = (string_is_ip_address(s+6, NULL) == 4);
1351       else
1352         yield = (string_is_ip_address(s+1, NULL) != 0);
1353       end[-1] = ']';
1354       }
1355     }
1356
1357   /* Non-literals must be alpha, dot, hyphen, plus any non-valid chars
1358   that have been configured (usually underscore - sigh). */
1359
1360   else if (*s != 0)
1361     {
1362     yield = TRUE;
1363     while (*s != 0)
1364       {
1365       if (!isalnum(*s) && *s != '.' && *s != '-' &&
1366           Ustrchr(helo_allow_chars, *s) == NULL)
1367         {
1368         yield = FALSE;
1369         break;
1370         }
1371       s++;
1372       }
1373     }
1374   }
1375
1376 /* Save argument if OK */
1377
1378 if (yield) sender_helo_name = string_copy_malloc(start);
1379 return yield;
1380 }
1381
1382
1383
1384
1385
1386 /*************************************************
1387 *         Extract SMTP command option            *
1388 *************************************************/
1389
1390 /* This function picks the next option setting off the end of smtp_cmd_data. It
1391 is called for MAIL FROM and RCPT TO commands, to pick off the optional ESMTP
1392 things that can appear there.
1393
1394 Arguments:
1395    name           point this at the name
1396    value          point this at the data string
1397
1398 Returns:          TRUE if found an option
1399 */
1400
1401 static BOOL
1402 extract_option(uschar **name, uschar **value)
1403 {
1404 uschar *n;
1405 uschar *v = smtp_cmd_data + Ustrlen(smtp_cmd_data) - 1;
1406 while (isspace(*v)) v--;
1407 v[1] = 0;
1408 while (v > smtp_cmd_data && *v != '=' && !isspace(*v)) v--;
1409
1410 n = v;
1411 if (*v == '=')
1412 {
1413   while(isalpha(n[-1])) n--;
1414   /* RFC says SP, but TAB seen in wild and other major MTAs accept it */
1415   if (!isspace(n[-1])) return FALSE;
1416   n[-1] = 0;
1417 }
1418 else
1419 {
1420   n++;
1421   if (v == smtp_cmd_data) return FALSE;
1422 }
1423 *v++ = 0;
1424 *name = n;
1425 *value = v;
1426 return TRUE;
1427 }
1428
1429
1430
1431
1432
1433 /*************************************************
1434 *         Reset for new message                  *
1435 *************************************************/
1436
1437 /* This function is called whenever the SMTP session is reset from
1438 within either of the setup functions.
1439
1440 Argument:   the stacking pool storage reset point
1441 Returns:    nothing
1442 */
1443
1444 static void
1445 smtp_reset(void *reset_point)
1446 {
1447 store_reset(reset_point);
1448 recipients_list = NULL;
1449 rcpt_count = rcpt_defer_count = rcpt_fail_count =
1450   raw_recipients_count = recipients_count = recipients_list_max = 0;
1451 cancel_cutthrough_connection("smtp reset");
1452 message_linecount = 0;
1453 message_size = -1;
1454 acl_added_headers = NULL;
1455 acl_removed_headers = NULL;
1456 queue_only_policy = FALSE;
1457 rcpt_smtp_response = NULL;
1458 rcpt_smtp_response_same = TRUE;
1459 rcpt_in_progress = FALSE;
1460 deliver_freeze = FALSE;                              /* Can be set by ACL */
1461 freeze_tell = freeze_tell_config;                    /* Can be set by ACL */
1462 fake_response = OK;                                  /* Can be set by ACL */
1463 #ifdef WITH_CONTENT_SCAN
1464 no_mbox_unspool = FALSE;                             /* Can be set by ACL */
1465 #endif
1466 submission_mode = FALSE;                             /* Can be set by ACL */
1467 suppress_local_fixups = suppress_local_fixups_default; /* Can be set by ACL */
1468 active_local_from_check = local_from_check;          /* Can be set by ACL */
1469 active_local_sender_retain = local_sender_retain;    /* Can be set by ACL */
1470 sender_address = NULL;
1471 submission_name = NULL;                              /* Can be set by ACL */
1472 raw_sender = NULL;                  /* After SMTP rewrite, before qualifying */
1473 sender_address_unrewritten = NULL;  /* Set only after verify rewrite */
1474 sender_verified_list = NULL;        /* No senders verified */
1475 memset(sender_address_cache, 0, sizeof(sender_address_cache));
1476 memset(sender_domain_cache, 0, sizeof(sender_domain_cache));
1477 authenticated_sender = NULL;
1478 #ifdef EXPERIMENTAL_BRIGHTMAIL
1479 bmi_run = 0;
1480 bmi_verdicts = NULL;
1481 #endif
1482 #ifndef DISABLE_DKIM
1483 dkim_signers = NULL;
1484 dkim_disable_verify = FALSE;
1485 dkim_collect_input = FALSE;
1486 #endif
1487 #ifdef EXPERIMENTAL_SPF
1488 spf_header_comment = NULL;
1489 spf_received = NULL;
1490 spf_result = NULL;
1491 spf_smtp_comment = NULL;
1492 #endif
1493 body_linecount = body_zerocount = 0;
1494
1495 sender_rate = sender_rate_limit = sender_rate_period = NULL;
1496 ratelimiters_mail = NULL;           /* Updated by ratelimit ACL condition */
1497                    /* Note that ratelimiters_conn persists across resets. */
1498
1499 /* Reset message ACL variables */
1500
1501 acl_var_m = NULL;
1502
1503 /* The message body variables use malloc store. They may be set if this is
1504 not the first message in an SMTP session and the previous message caused them
1505 to be referenced in an ACL. */
1506
1507 if (message_body != NULL)
1508   {
1509   store_free(message_body);
1510   message_body = NULL;
1511   }
1512
1513 if (message_body_end != NULL)
1514   {
1515   store_free(message_body_end);
1516   message_body_end = NULL;
1517   }
1518
1519 /* Warning log messages are also saved in malloc store. They are saved to avoid
1520 repetition in the same message, but it seems right to repeat them for different
1521 messages. */
1522
1523 while (acl_warn_logged != NULL)
1524   {
1525   string_item *this = acl_warn_logged;
1526   acl_warn_logged = acl_warn_logged->next;
1527   store_free(this);
1528   }
1529 }
1530
1531
1532
1533
1534
1535 /*************************************************
1536 *  Initialize for incoming batched SMTP message  *
1537 *************************************************/
1538
1539 /* This function is called from smtp_setup_msg() in the case when
1540 smtp_batched_input is true. This happens when -bS is used to pass a whole batch
1541 of messages in one file with SMTP commands between them. All errors must be
1542 reported by sending a message, and only MAIL FROM, RCPT TO, and DATA are
1543 relevant. After an error on a sender, or an invalid recipient, the remainder
1544 of the message is skipped. The value of received_protocol is already set.
1545
1546 Argument: none
1547 Returns:  > 0 message successfully started (reached DATA)
1548           = 0 QUIT read or end of file reached
1549           < 0 should not occur
1550 */
1551
1552 static int
1553 smtp_setup_batch_msg(void)
1554 {
1555 int done = 0;
1556 void *reset_point = store_get(0);
1557
1558 /* Save the line count at the start of each transaction - single commands
1559 like HELO and RSET count as whole transactions. */
1560
1561 bsmtp_transaction_linecount = receive_linecount;
1562
1563 if ((receive_feof)()) return 0;   /* Treat EOF as QUIT */
1564
1565 smtp_reset(reset_point);                /* Reset for start of message */
1566
1567 /* Deal with SMTP commands. This loop is exited by setting done to a POSITIVE
1568 value. The values are 2 larger than the required yield of the function. */
1569
1570 while (done <= 0)
1571   {
1572   uschar *errmess;
1573   uschar *recipient = NULL;
1574   int start, end, sender_domain, recipient_domain;
1575
1576   switch(smtp_read_command(FALSE))
1577     {
1578     /* The HELO/EHLO commands set sender_address_helo if they have
1579     valid data; otherwise they are ignored, except that they do
1580     a reset of the state. */
1581
1582     case HELO_CMD:
1583     case EHLO_CMD:
1584
1585     check_helo(smtp_cmd_data);
1586     /* Fall through */
1587
1588     case RSET_CMD:
1589     smtp_reset(reset_point);
1590     bsmtp_transaction_linecount = receive_linecount;
1591     break;
1592
1593
1594     /* The MAIL FROM command requires an address as an operand. All we
1595     do here is to parse it for syntactic correctness. The form "<>" is
1596     a special case which converts into an empty string. The start/end
1597     pointers in the original are not used further for this address, as
1598     it is the canonical extracted address which is all that is kept. */
1599
1600     case MAIL_CMD:
1601     if (sender_address != NULL)
1602       /* The function moan_smtp_batch() does not return. */
1603       moan_smtp_batch(smtp_cmd_buffer, "503 Sender already given");
1604
1605     if (smtp_cmd_data[0] == 0)
1606       /* The function moan_smtp_batch() does not return. */
1607       moan_smtp_batch(smtp_cmd_buffer, "501 MAIL FROM must have an address operand");
1608
1609     /* Reset to start of message */
1610
1611     smtp_reset(reset_point);
1612
1613     /* Apply SMTP rewrite */
1614
1615     raw_sender = ((rewrite_existflags & rewrite_smtp) != 0)?
1616       rewrite_one(smtp_cmd_data, rewrite_smtp|rewrite_smtp_sender, NULL, FALSE,
1617         US"", global_rewrite_rules) : smtp_cmd_data;
1618
1619     /* Extract the address; the TRUE flag allows <> as valid */
1620
1621     raw_sender =
1622       parse_extract_address(raw_sender, &errmess, &start, &end, &sender_domain,
1623         TRUE);
1624
1625     if (raw_sender == NULL)
1626       /* The function moan_smtp_batch() does not return. */
1627       moan_smtp_batch(smtp_cmd_buffer, "501 %s", errmess);
1628
1629     sender_address = string_copy(raw_sender);
1630
1631     /* Qualify unqualified sender addresses if permitted to do so. */
1632
1633     if (sender_domain == 0 && sender_address[0] != 0 && sender_address[0] != '@')
1634       {
1635       if (allow_unqualified_sender)
1636         {
1637         sender_address = rewrite_address_qualify(sender_address, FALSE);
1638         DEBUG(D_receive) debug_printf("unqualified address %s accepted "
1639           "and rewritten\n", raw_sender);
1640         }
1641       /* The function moan_smtp_batch() does not return. */
1642       else moan_smtp_batch(smtp_cmd_buffer, "501 sender address must contain "
1643         "a domain");
1644       }
1645     break;
1646
1647
1648     /* The RCPT TO command requires an address as an operand. All we do
1649     here is to parse it for syntactic correctness. There may be any number
1650     of RCPT TO commands, specifying multiple senders. We build them all into
1651     a data structure that is in argc/argv format. The start/end values
1652     given by parse_extract_address are not used, as we keep only the
1653     extracted address. */
1654
1655     case RCPT_CMD:
1656     if (sender_address == NULL)
1657       /* The function moan_smtp_batch() does not return. */
1658       moan_smtp_batch(smtp_cmd_buffer, "503 No sender yet given");
1659
1660     if (smtp_cmd_data[0] == 0)
1661       /* The function moan_smtp_batch() does not return. */
1662       moan_smtp_batch(smtp_cmd_buffer, "501 RCPT TO must have an address operand");
1663
1664     /* Check maximum number allowed */
1665
1666     if (recipients_max > 0 && recipients_count + 1 > recipients_max)
1667       /* The function moan_smtp_batch() does not return. */
1668       moan_smtp_batch(smtp_cmd_buffer, "%s too many recipients",
1669         recipients_max_reject? "552": "452");
1670
1671     /* Apply SMTP rewrite, then extract address. Don't allow "<>" as a
1672     recipient address */
1673
1674     recipient = ((rewrite_existflags & rewrite_smtp) != 0)?
1675       rewrite_one(smtp_cmd_data, rewrite_smtp, NULL, FALSE, US"",
1676         global_rewrite_rules) : smtp_cmd_data;
1677
1678     /* rfc821_domains = TRUE; << no longer needed */
1679     recipient = parse_extract_address(recipient, &errmess, &start, &end,
1680       &recipient_domain, FALSE);
1681     /* rfc821_domains = FALSE; << no longer needed */
1682
1683     if (recipient == NULL)
1684       /* The function moan_smtp_batch() does not return. */
1685       moan_smtp_batch(smtp_cmd_buffer, "501 %s", errmess);
1686
1687     /* If the recipient address is unqualified, qualify it if permitted. Then
1688     add it to the list of recipients. */
1689
1690     if (recipient_domain == 0)
1691       {
1692       if (allow_unqualified_recipient)
1693         {
1694         DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
1695           recipient);
1696         recipient = rewrite_address_qualify(recipient, TRUE);
1697         }
1698       /* The function moan_smtp_batch() does not return. */
1699       else moan_smtp_batch(smtp_cmd_buffer, "501 recipient address must contain "
1700         "a domain");
1701       }
1702     receive_add_recipient(recipient, -1);
1703     break;
1704
1705
1706     /* The DATA command is legal only if it follows successful MAIL FROM
1707     and RCPT TO commands. This function is complete when a valid DATA
1708     command is encountered. */
1709
1710     case DATA_CMD:
1711     if (sender_address == NULL || recipients_count <= 0)
1712       {
1713       /* The function moan_smtp_batch() does not return. */
1714       if (sender_address == NULL)
1715         moan_smtp_batch(smtp_cmd_buffer,
1716           "503 MAIL FROM:<sender> command must precede DATA");
1717       else
1718         moan_smtp_batch(smtp_cmd_buffer,
1719           "503 RCPT TO:<recipient> must precede DATA");
1720       }
1721     else
1722       {
1723       done = 3;                      /* DATA successfully achieved */
1724       message_ended = END_NOTENDED;  /* Indicate in middle of message */
1725       }
1726     break;
1727
1728
1729     /* The VRFY, EXPN, HELP, ETRN, and NOOP commands are ignored. */
1730
1731     case VRFY_CMD:
1732     case EXPN_CMD:
1733     case HELP_CMD:
1734     case NOOP_CMD:
1735     case ETRN_CMD:
1736     bsmtp_transaction_linecount = receive_linecount;
1737     break;
1738
1739
1740     case EOF_CMD:
1741     case QUIT_CMD:
1742     done = 2;
1743     break;
1744
1745
1746     case BADARG_CMD:
1747     /* The function moan_smtp_batch() does not return. */
1748     moan_smtp_batch(smtp_cmd_buffer, "501 Unexpected argument data");
1749     break;
1750
1751
1752     case BADCHAR_CMD:
1753     /* The function moan_smtp_batch() does not return. */
1754     moan_smtp_batch(smtp_cmd_buffer, "501 Unexpected NULL in SMTP command");
1755     break;
1756
1757
1758     default:
1759     /* The function moan_smtp_batch() does not return. */
1760     moan_smtp_batch(smtp_cmd_buffer, "500 Command unrecognized");
1761     break;
1762     }
1763   }
1764
1765 return done - 2;  /* Convert yield values */
1766 }
1767
1768
1769
1770
1771 /*************************************************
1772 *          Start an SMTP session                 *
1773 *************************************************/
1774
1775 /* This function is called at the start of an SMTP session. Thereafter,
1776 smtp_setup_msg() is called to initiate each separate message. This
1777 function does host-specific testing, and outputs the banner line.
1778
1779 Arguments:     none
1780 Returns:       FALSE if the session can not continue; something has
1781                gone wrong, or the connection to the host is blocked
1782 */
1783
1784 BOOL
1785 smtp_start_session(void)
1786 {
1787 int size = 256;
1788 int ptr, esclen;
1789 uschar *user_msg, *log_msg;
1790 uschar *code, *esc;
1791 uschar *p, *s, *ss;
1792
1793 smtp_connection_start = time(NULL);
1794 for (smtp_ch_index = 0; smtp_ch_index < SMTP_HBUFF_SIZE; smtp_ch_index++)
1795   smtp_connection_had[smtp_ch_index] = SCH_NONE;
1796 smtp_ch_index = 0;
1797
1798 /* Default values for certain variables */
1799
1800 helo_seen = esmtp = helo_accept_junk = FALSE;
1801 smtp_mailcmd_count = 0;
1802 count_nonmail = TRUE_UNSET;
1803 synprot_error_count = unknown_command_count = nonmail_command_count = 0;
1804 smtp_delay_mail = smtp_rlm_base;
1805 auth_advertised = FALSE;
1806 pipelining_advertised = FALSE;
1807 pipelining_enable = TRUE;
1808 sync_cmd_limit = NON_SYNC_CMD_NON_PIPELINING;
1809 smtp_exit_function_called = FALSE;    /* For avoiding loop in not-quit exit */
1810
1811 memset(sender_host_cache, 0, sizeof(sender_host_cache));
1812
1813 /* If receiving by -bs from a trusted user, or testing with -bh, we allow
1814 authentication settings from -oMaa to remain in force. */
1815
1816 if (!host_checking && !sender_host_notsocket) sender_host_authenticated = NULL;
1817 authenticated_by = NULL;
1818
1819 #ifdef SUPPORT_TLS
1820 tls_in.cipher = tls_in.peerdn = NULL;
1821 tls_in.ourcert = tls_in.peercert = NULL;
1822 tls_in.sni = NULL;
1823 tls_advertised = FALSE;
1824 #endif
1825
1826 /* Reset ACL connection variables */
1827
1828 acl_var_c = NULL;
1829
1830 /* Allow for trailing 0 in the command and data buffers. */
1831
1832 smtp_cmd_buffer = (uschar *)malloc(2*smtp_cmd_buffer_size + 2);
1833 if (smtp_cmd_buffer == NULL)
1834   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1835     "malloc() failed for SMTP command buffer");
1836 smtp_cmd_buffer[0] = 0;
1837 smtp_data_buffer = smtp_cmd_buffer + smtp_cmd_buffer_size + 1;
1838
1839 /* For batched input, the protocol setting can be overridden from the
1840 command line by a trusted caller. */
1841
1842 if (smtp_batched_input)
1843   {
1844   if (received_protocol == NULL) received_protocol = US"local-bsmtp";
1845   }
1846
1847 /* For non-batched SMTP input, the protocol setting is forced here. It will be
1848 reset later if any of EHLO/AUTH/STARTTLS are received. */
1849
1850 else
1851   received_protocol =
1852     protocols[pnormal] + ((sender_host_address != NULL)? pnlocal : 0);
1853
1854 /* Set up the buffer for inputting using direct read() calls, and arrange to
1855 call the local functions instead of the standard C ones. */
1856
1857 smtp_inbuffer = (uschar *)malloc(in_buffer_size);
1858 if (smtp_inbuffer == NULL)
1859   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "malloc() failed for SMTP input buffer");
1860 receive_getc = smtp_getc;
1861 receive_ungetc = smtp_ungetc;
1862 receive_feof = smtp_feof;
1863 receive_ferror = smtp_ferror;
1864 receive_smtp_buffered = smtp_buffered;
1865 smtp_inptr = smtp_inend = smtp_inbuffer;
1866 smtp_had_eof = smtp_had_error = 0;
1867
1868 /* Set up the message size limit; this may be host-specific */
1869
1870 thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
1871 if (expand_string_message != NULL)
1872   {
1873   if (thismessage_size_limit == -1)
1874     log_write(0, LOG_MAIN|LOG_PANIC, "unable to expand message_size_limit: "
1875       "%s", expand_string_message);
1876   else
1877     log_write(0, LOG_MAIN|LOG_PANIC, "invalid message_size_limit: "
1878       "%s", expand_string_message);
1879   smtp_closedown(US"Temporary local problem - please try later");
1880   return FALSE;
1881   }
1882
1883 /* When a message is input locally via the -bs or -bS options, sender_host_
1884 unknown is set unless -oMa was used to force an IP address, in which case it
1885 is checked like a real remote connection. When -bs is used from inetd, this
1886 flag is not set, causing the sending host to be checked. The code that deals
1887 with IP source routing (if configured) is never required for -bs or -bS and
1888 the flag sender_host_notsocket is used to suppress it.
1889
1890 If smtp_accept_max and smtp_accept_reserve are set, keep some connections in
1891 reserve for certain hosts and/or networks. */
1892
1893 if (!sender_host_unknown)
1894   {
1895   int rc;
1896   BOOL reserved_host = FALSE;
1897
1898   /* Look up IP options (source routing info) on the socket if this is not an
1899   -oMa "host", and if any are found, log them and drop the connection.
1900
1901   Linux (and others now, see below) is different to everyone else, so there
1902   has to be some conditional compilation here. Versions of Linux before 2.1.15
1903   used a structure whose name was "options". Somebody finally realized that
1904   this name was silly, and it got changed to "ip_options". I use the
1905   newer name here, but there is a fudge in the script that sets up os.h
1906   to define a macro in older Linux systems.
1907
1908   Sigh. Linux is a fast-moving target. Another generation of Linux uses
1909   glibc 2, which has chosen ip_opts for the structure name. This is now
1910   really a glibc thing rather than a Linux thing, so the condition name
1911   has been changed to reflect this. It is relevant also to GNU/Hurd.
1912
1913   Mac OS 10.x (Darwin) is like the later glibc versions, but without the
1914   setting of the __GLIBC__ macro, so we can't detect it automatically. There's
1915   a special macro defined in the os.h file.
1916
1917   Some DGUX versions on older hardware appear not to support IP options at
1918   all, so there is now a general macro which can be set to cut out this
1919   support altogether.
1920
1921   How to do this properly in IPv6 is not yet known. */
1922
1923   #if !HAVE_IPV6 && !defined(NO_IP_OPTIONS)
1924
1925   #ifdef GLIBC_IP_OPTIONS
1926     #if (!defined __GLIBC__) || (__GLIBC__ < 2)
1927     #define OPTSTYLE 1
1928     #else
1929     #define OPTSTYLE 2
1930     #endif
1931   #elif defined DARWIN_IP_OPTIONS
1932     #define OPTSTYLE 2
1933   #else
1934     #define OPTSTYLE 3
1935   #endif
1936
1937   if (!host_checking && !sender_host_notsocket)
1938     {
1939     #if OPTSTYLE == 1
1940     EXIM_SOCKLEN_T optlen = sizeof(struct ip_options) + MAX_IPOPTLEN;
1941     struct ip_options *ipopt = store_get(optlen);
1942     #elif OPTSTYLE == 2
1943     struct ip_opts ipoptblock;
1944     struct ip_opts *ipopt = &ipoptblock;
1945     EXIM_SOCKLEN_T optlen = sizeof(ipoptblock);
1946     #else
1947     struct ipoption ipoptblock;
1948     struct ipoption *ipopt = &ipoptblock;
1949     EXIM_SOCKLEN_T optlen = sizeof(ipoptblock);
1950     #endif
1951
1952     /* Occasional genuine failures of getsockopt() have been seen - for
1953     example, "reset by peer". Therefore, just log and give up on this
1954     call, unless the error is ENOPROTOOPT. This error is given by systems
1955     that have the interfaces but not the mechanism - e.g. GNU/Hurd at the time
1956     of writing. So for that error, carry on - we just can't do an IP options
1957     check. */
1958
1959     DEBUG(D_receive) debug_printf("checking for IP options\n");
1960
1961     if (getsockopt(fileno(smtp_out), IPPROTO_IP, IP_OPTIONS, (uschar *)(ipopt),
1962           &optlen) < 0)
1963       {
1964       if (errno != ENOPROTOOPT)
1965         {
1966         log_write(0, LOG_MAIN, "getsockopt() failed from %s: %s",
1967           host_and_ident(FALSE), strerror(errno));
1968         smtp_printf("451 SMTP service not available\r\n");
1969         return FALSE;
1970         }
1971       }
1972
1973     /* Deal with any IP options that are set. On the systems I have looked at,
1974     the value of MAX_IPOPTLEN has been 40, meaning that there should never be
1975     more logging data than will fit in big_buffer. Nevertheless, after somebody
1976     questioned this code, I've added in some paranoid checking. */
1977
1978     else if (optlen > 0)
1979       {
1980       uschar *p = big_buffer;
1981       uschar *pend = big_buffer + big_buffer_size;
1982       uschar *opt, *adptr;
1983       int optcount;
1984       struct in_addr addr;
1985
1986       #if OPTSTYLE == 1
1987       uschar *optstart = (uschar *)(ipopt->__data);
1988       #elif OPTSTYLE == 2
1989       uschar *optstart = (uschar *)(ipopt->ip_opts);
1990       #else
1991       uschar *optstart = (uschar *)(ipopt->ipopt_list);
1992       #endif
1993
1994       DEBUG(D_receive) debug_printf("IP options exist\n");
1995
1996       Ustrcpy(p, "IP options on incoming call:");
1997       p += Ustrlen(p);
1998
1999       for (opt = optstart; opt != NULL &&
2000            opt < (uschar *)(ipopt) + optlen;)
2001         {
2002         switch (*opt)
2003           {
2004           case IPOPT_EOL:
2005           opt = NULL;
2006           break;
2007
2008           case IPOPT_NOP:
2009           opt++;
2010           break;
2011
2012           case IPOPT_SSRR:
2013           case IPOPT_LSRR:
2014           if (!string_format(p, pend-p, " %s [@%s",
2015                (*opt == IPOPT_SSRR)? "SSRR" : "LSRR",
2016                #if OPTSTYLE == 1
2017                inet_ntoa(*((struct in_addr *)(&(ipopt->faddr))))))
2018                #elif OPTSTYLE == 2
2019                inet_ntoa(ipopt->ip_dst)))
2020                #else
2021                inet_ntoa(ipopt->ipopt_dst)))
2022                #endif
2023             {
2024             opt = NULL;
2025             break;
2026             }
2027
2028           p += Ustrlen(p);
2029           optcount = (opt[1] - 3) / sizeof(struct in_addr);
2030           adptr = opt + 3;
2031           while (optcount-- > 0)
2032             {
2033             memcpy(&addr, adptr, sizeof(addr));
2034             if (!string_format(p, pend - p - 1, "%s%s",
2035                   (optcount == 0)? ":" : "@", inet_ntoa(addr)))
2036               {
2037               opt = NULL;
2038               break;
2039               }
2040             p += Ustrlen(p);
2041             adptr += sizeof(struct in_addr);
2042             }
2043           *p++ = ']';
2044           opt += opt[1];
2045           break;
2046
2047           default:
2048             {
2049             int i;
2050             if (pend - p < 4 + 3*opt[1]) { opt = NULL; break; }
2051             Ustrcat(p, "[ ");
2052             p += 2;
2053             for (i = 0; i < opt[1]; i++)
2054               {
2055               sprintf(CS p, "%2.2x ", opt[i]);
2056               p += 3;
2057               }
2058             *p++ = ']';
2059             }
2060           opt += opt[1];
2061           break;
2062           }
2063         }
2064
2065       *p = 0;
2066       log_write(0, LOG_MAIN, "%s", big_buffer);
2067
2068       /* Refuse any call with IP options. This is what tcpwrappers 7.5 does. */
2069
2070       log_write(0, LOG_MAIN|LOG_REJECT,
2071         "connection from %s refused (IP options)", host_and_ident(FALSE));
2072
2073       smtp_printf("554 SMTP service not available\r\n");
2074       return FALSE;
2075       }
2076
2077     /* Length of options = 0 => there are no options */
2078
2079     else DEBUG(D_receive) debug_printf("no IP options found\n");
2080     }
2081   #endif  /* HAVE_IPV6 && !defined(NO_IP_OPTIONS) */
2082
2083   /* Set keep-alive in socket options. The option is on by default. This
2084   setting is an attempt to get rid of some hanging connections that stick in
2085   read() when the remote end (usually a dialup) goes away. */
2086
2087   if (smtp_accept_keepalive && !sender_host_notsocket)
2088     ip_keepalive(fileno(smtp_out), sender_host_address, FALSE);
2089
2090   /* If the current host matches host_lookup, set the name by doing a
2091   reverse lookup. On failure, sender_host_name will be NULL and
2092   host_lookup_failed will be TRUE. This may or may not be serious - optional
2093   checks later. */
2094
2095   if (verify_check_host(&host_lookup) == OK)
2096     {
2097     (void)host_name_lookup();
2098     host_build_sender_fullhost();
2099     }
2100
2101   /* Delay this until we have the full name, if it is looked up. */
2102
2103   set_process_info("handling incoming connection from %s",
2104     host_and_ident(FALSE));
2105
2106   /* Start up TLS if tls_on_connect is set. This is for supporting the legacy
2107   smtps port for use with older style SSL MTAs. */
2108
2109   #ifdef SUPPORT_TLS
2110   if (tls_in.on_connect && tls_server_start(tls_require_ciphers) != OK)
2111     return FALSE;
2112   #endif
2113
2114   /* Test for explicit connection rejection */
2115
2116   if (verify_check_host(&host_reject_connection) == OK)
2117     {
2118     log_write(L_connection_reject, LOG_MAIN|LOG_REJECT, "refused connection "
2119       "from %s (host_reject_connection)", host_and_ident(FALSE));
2120     smtp_printf("554 SMTP service not available\r\n");
2121     return FALSE;
2122     }
2123
2124   /* Test with TCP Wrappers if so configured. There is a problem in that
2125   hosts_ctl() returns 0 (deny) under a number of system failure circumstances,
2126   such as disks dying. In these cases, it is desirable to reject with a 4xx
2127   error instead of a 5xx error. There isn't a "right" way to detect such
2128   problems. The following kludge is used: errno is zeroed before calling
2129   hosts_ctl(). If the result is "reject", a 5xx error is given only if the
2130   value of errno is 0 or ENOENT (which happens if /etc/hosts.{allow,deny} does
2131   not exist). */
2132
2133   #ifdef USE_TCP_WRAPPERS
2134   errno = 0;
2135   tcp_wrappers_name = expand_string(tcp_wrappers_daemon_name);
2136   if (tcp_wrappers_name == NULL)
2137     {
2138     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Expansion of \"%s\" "
2139       "(tcp_wrappers_name) failed: %s", string_printing(tcp_wrappers_name),
2140         expand_string_message);
2141     }
2142   if (!hosts_ctl(tcp_wrappers_name,
2143          (sender_host_name == NULL)? STRING_UNKNOWN : CS sender_host_name,
2144          (sender_host_address == NULL)? STRING_UNKNOWN : CS sender_host_address,
2145          (sender_ident == NULL)? STRING_UNKNOWN : CS sender_ident))
2146     {
2147     if (errno == 0 || errno == ENOENT)
2148       {
2149       HDEBUG(D_receive) debug_printf("tcp wrappers rejection\n");
2150       log_write(L_connection_reject,
2151                 LOG_MAIN|LOG_REJECT, "refused connection from %s "
2152                 "(tcp wrappers)", host_and_ident(FALSE));
2153       smtp_printf("554 SMTP service not available\r\n");
2154       }
2155     else
2156       {
2157       int save_errno = errno;
2158       HDEBUG(D_receive) debug_printf("tcp wrappers rejected with unexpected "
2159         "errno value %d\n", save_errno);
2160       log_write(L_connection_reject,
2161                 LOG_MAIN|LOG_REJECT, "temporarily refused connection from %s "
2162                 "(tcp wrappers errno=%d)", host_and_ident(FALSE), save_errno);
2163       smtp_printf("451 Temporary local problem - please try later\r\n");
2164       }
2165     return FALSE;
2166     }
2167   #endif
2168
2169   /* Check for reserved slots. The value of smtp_accept_count has already been
2170   incremented to include this process. */
2171
2172   if (smtp_accept_max > 0 &&
2173       smtp_accept_count > smtp_accept_max - smtp_accept_reserve)
2174     {
2175     if ((rc = verify_check_host(&smtp_reserve_hosts)) != OK)
2176       {
2177       log_write(L_connection_reject,
2178         LOG_MAIN, "temporarily refused connection from %s: not in "
2179         "reserve list: connected=%d max=%d reserve=%d%s",
2180         host_and_ident(FALSE), smtp_accept_count - 1, smtp_accept_max,
2181         smtp_accept_reserve, (rc == DEFER)? " (lookup deferred)" : "");
2182       smtp_printf("421 %s: Too many concurrent SMTP connections; "
2183         "please try again later\r\n", smtp_active_hostname);
2184       return FALSE;
2185       }
2186     reserved_host = TRUE;
2187     }
2188
2189   /* If a load level above which only messages from reserved hosts are
2190   accepted is set, check the load. For incoming calls via the daemon, the
2191   check is done in the superior process if there are no reserved hosts, to
2192   save a fork. In all cases, the load average will already be available
2193   in a global variable at this point. */
2194
2195   if (smtp_load_reserve >= 0 &&
2196        load_average > smtp_load_reserve &&
2197        !reserved_host &&
2198        verify_check_host(&smtp_reserve_hosts) != OK)
2199     {
2200     log_write(L_connection_reject,
2201       LOG_MAIN, "temporarily refused connection from %s: not in "
2202       "reserve list and load average = %.2f", host_and_ident(FALSE),
2203       (double)load_average/1000.0);
2204     smtp_printf("421 %s: Too much load; please try again later\r\n",
2205       smtp_active_hostname);
2206     return FALSE;
2207     }
2208
2209   /* Determine whether unqualified senders or recipients are permitted
2210   for this host. Unfortunately, we have to do this every time, in order to
2211   set the flags so that they can be inspected when considering qualifying
2212   addresses in the headers. For a site that permits no qualification, this
2213   won't take long, however. */
2214
2215   allow_unqualified_sender =
2216     verify_check_host(&sender_unqualified_hosts) == OK;
2217
2218   allow_unqualified_recipient =
2219     verify_check_host(&recipient_unqualified_hosts) == OK;
2220
2221   /* Determine whether HELO/EHLO is required for this host. The requirement
2222   can be hard or soft. */
2223
2224   helo_required = verify_check_host(&helo_verify_hosts) == OK;
2225   if (!helo_required)
2226     helo_verify = verify_check_host(&helo_try_verify_hosts) == OK;
2227
2228   /* Determine whether this hosts is permitted to send syntactic junk
2229   after a HELO or EHLO command. */
2230
2231   helo_accept_junk = verify_check_host(&helo_accept_junk_hosts) == OK;
2232   }
2233
2234 /* For batch SMTP input we are now done. */
2235
2236 if (smtp_batched_input) return TRUE;
2237
2238 #ifdef EXPERIMENTAL_PROXY
2239 /* If valid Proxy Protocol source is connecting, set up session.
2240  * Failure will not allow any SMTP function other than QUIT. */
2241 proxy_session = FALSE;
2242 proxy_session_failed = FALSE;
2243 if (check_proxy_protocol_host())
2244   {
2245   if (setup_proxy_protocol_host() == FALSE)
2246     {
2247     proxy_session_failed = TRUE;
2248     DEBUG(D_receive)
2249       debug_printf("Failure to extract proxied host, only QUIT allowed\n");
2250     }
2251   else
2252     {
2253     sender_host_name = NULL;
2254     (void)host_name_lookup();
2255     host_build_sender_fullhost();
2256     }
2257   }
2258 #endif
2259
2260 /* Run the ACL if it exists */
2261
2262 user_msg = NULL;
2263 if (acl_smtp_connect != NULL)
2264   {
2265   int rc;
2266   rc = acl_check(ACL_WHERE_CONNECT, NULL, acl_smtp_connect, &user_msg,
2267     &log_msg);
2268   if (rc != OK)
2269     {
2270     (void)smtp_handle_acl_fail(ACL_WHERE_CONNECT, rc, user_msg, log_msg);
2271     return FALSE;
2272     }
2273   }
2274
2275 /* Output the initial message for a two-way SMTP connection. It may contain
2276 newlines, which then cause a multi-line response to be given. */
2277
2278 code = US"220";   /* Default status code */
2279 esc = US"";       /* Default extended status code */
2280 esclen = 0;       /* Length of esc */
2281
2282 if (user_msg == NULL)
2283   {
2284   s = expand_string(smtp_banner);
2285   if (s == NULL)
2286     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Expansion of \"%s\" (smtp_banner) "
2287       "failed: %s", smtp_banner, expand_string_message);
2288   }
2289 else
2290   {
2291   int codelen = 3;
2292   s = user_msg;
2293   smtp_message_code(&code, &codelen, &s, NULL);
2294   if (codelen > 4)
2295     {
2296     esc = code + 4;
2297     esclen = codelen - 4;
2298     }
2299   }
2300
2301 /* Remove any terminating newlines; might as well remove trailing space too */
2302
2303 p = s + Ustrlen(s);
2304 while (p > s && isspace(p[-1])) p--;
2305 *p = 0;
2306
2307 /* It seems that CC:Mail is braindead, and assumes that the greeting message
2308 is all contained in a single IP packet. The original code wrote out the
2309 greeting using several calls to fprint/fputc, and on busy servers this could
2310 cause it to be split over more than one packet - which caused CC:Mail to fall
2311 over when it got the second part of the greeting after sending its first
2312 command. Sigh. To try to avoid this, build the complete greeting message
2313 first, and output it in one fell swoop. This gives a better chance of it
2314 ending up as a single packet. */
2315
2316 ss = store_get(size);
2317 ptr = 0;
2318
2319 p = s;
2320 do       /* At least once, in case we have an empty string */
2321   {
2322   int len;
2323   uschar *linebreak = Ustrchr(p, '\n');
2324   ss = string_cat(ss, &size, &ptr, code, 3);
2325   if (linebreak == NULL)
2326     {
2327     len = Ustrlen(p);
2328     ss = string_cat(ss, &size, &ptr, US" ", 1);
2329     }
2330   else
2331     {
2332     len = linebreak - p;
2333     ss = string_cat(ss, &size, &ptr, US"-", 1);
2334     }
2335   ss = string_cat(ss, &size, &ptr, esc, esclen);
2336   ss = string_cat(ss, &size, &ptr, p, len);
2337   ss = string_cat(ss, &size, &ptr, US"\r\n", 2);
2338   p += len;
2339   if (linebreak != NULL) p++;
2340   }
2341 while (*p != 0);
2342
2343 ss[ptr] = 0;  /* string_cat leaves room for this */
2344
2345 /* Before we write the banner, check that there is no input pending, unless
2346 this synchronisation check is disabled. */
2347
2348 if (!check_sync())
2349   {
2350   log_write(0, LOG_MAIN|LOG_REJECT, "SMTP protocol "
2351     "synchronization error (input sent without waiting for greeting): "
2352     "rejected connection from %s input=\"%s\"", host_and_ident(TRUE),
2353     string_printing(smtp_inptr));
2354   smtp_printf("554 SMTP synchronization error\r\n");
2355   return FALSE;
2356   }
2357
2358 /* Now output the banner */
2359
2360 smtp_printf("%s", ss);
2361 return TRUE;
2362 }
2363
2364
2365
2366
2367
2368 /*************************************************
2369 *     Handle SMTP syntax and protocol errors     *
2370 *************************************************/
2371
2372 /* Write to the log for SMTP syntax errors in incoming commands, if configured
2373 to do so. Then transmit the error response. The return value depends on the
2374 number of syntax and protocol errors in this SMTP session.
2375
2376 Arguments:
2377   type      error type, given as a log flag bit
2378   code      response code; <= 0 means don't send a response
2379   data      data to reflect in the response (can be NULL)
2380   errmess   the error message
2381
2382 Returns:    -1   limit of syntax/protocol errors NOT exceeded
2383             +1   limit of syntax/protocol errors IS exceeded
2384
2385 These values fit in with the values of the "done" variable in the main
2386 processing loop in smtp_setup_msg(). */
2387
2388 static int
2389 synprot_error(int type, int code, uschar *data, uschar *errmess)
2390 {
2391 int yield = -1;
2392
2393 log_write(type, LOG_MAIN, "SMTP %s error in \"%s\" %s %s",
2394   (type == L_smtp_syntax_error)? "syntax" : "protocol",
2395   string_printing(smtp_cmd_buffer), host_and_ident(TRUE), errmess);
2396
2397 if (++synprot_error_count > smtp_max_synprot_errors)
2398   {
2399   yield = 1;
2400   log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
2401     "syntax or protocol errors (last command was \"%s\")",
2402     host_and_ident(FALSE), smtp_cmd_buffer);
2403   }
2404
2405 if (code > 0)
2406   {
2407   smtp_printf("%d%c%s%s%s\r\n", code, (yield == 1)? '-' : ' ',
2408     (data == NULL)? US"" : data, (data == NULL)? US"" : US": ", errmess);
2409   if (yield == 1)
2410     smtp_printf("%d Too many syntax or protocol errors\r\n", code);
2411   }
2412
2413 return yield;
2414 }
2415
2416
2417
2418
2419 /*************************************************
2420 *          Log incomplete transactions           *
2421 *************************************************/
2422
2423 /* This function is called after a transaction has been aborted by RSET, QUIT,
2424 connection drops or other errors. It logs the envelope information received
2425 so far in order to preserve address verification attempts.
2426
2427 Argument:   string to indicate what aborted the transaction
2428 Returns:    nothing
2429 */
2430
2431 static void
2432 incomplete_transaction_log(uschar *what)
2433 {
2434 if (sender_address == NULL ||                 /* No transaction in progress */
2435     (log_write_selector & L_smtp_incomplete_transaction) == 0  /* Not logging */
2436   ) return;
2437
2438 /* Build list of recipients for logging */
2439
2440 if (recipients_count > 0)
2441   {
2442   int i;
2443   raw_recipients = store_get(recipients_count * sizeof(uschar *));
2444   for (i = 0; i < recipients_count; i++)
2445     raw_recipients[i] = recipients_list[i].address;
2446   raw_recipients_count = recipients_count;
2447   }
2448
2449 log_write(L_smtp_incomplete_transaction, LOG_MAIN|LOG_SENDER|LOG_RECIPIENTS,
2450   "%s incomplete transaction (%s)", host_and_ident(TRUE), what);
2451 }
2452
2453
2454
2455
2456 /*************************************************
2457 *    Send SMTP response, possibly multiline      *
2458 *************************************************/
2459
2460 /* There are, it seems, broken clients out there that cannot handle multiline
2461 responses. If no_multiline_responses is TRUE (it can be set from an ACL), we
2462 output nothing for non-final calls, and only the first line for anything else.
2463
2464 Arguments:
2465   code          SMTP code, may involve extended status codes
2466   codelen       length of smtp code; if > 4 there's an ESC
2467   final         FALSE if the last line isn't the final line
2468   msg           message text, possibly containing newlines
2469
2470 Returns:        nothing
2471 */
2472
2473 void
2474 smtp_respond(uschar* code, int codelen, BOOL final, uschar *msg)
2475 {
2476 int esclen = 0;
2477 uschar *esc = US"";
2478
2479 if (!final && no_multiline_responses) return;
2480
2481 if (codelen > 4)
2482   {
2483   esc = code + 4;
2484   esclen = codelen - 4;
2485   }
2486
2487 /* If this is the first output for a (non-batch) RCPT command, see if all RCPTs
2488 have had the same. Note: this code is also present in smtp_printf(). It would
2489 be tidier to have it only in one place, but when it was added, it was easier to
2490 do it that way, so as not to have to mess with the code for the RCPT command,
2491 which sometimes uses smtp_printf() and sometimes smtp_respond(). */
2492
2493 if (rcpt_in_progress)
2494   {
2495   if (rcpt_smtp_response == NULL)
2496     rcpt_smtp_response = string_copy(msg);
2497   else if (rcpt_smtp_response_same &&
2498            Ustrcmp(rcpt_smtp_response, msg) != 0)
2499     rcpt_smtp_response_same = FALSE;
2500   rcpt_in_progress = FALSE;
2501   }
2502
2503 /* Not output the message, splitting it up into multiple lines if necessary. */
2504
2505 for (;;)
2506   {
2507   uschar *nl = Ustrchr(msg, '\n');
2508   if (nl == NULL)
2509     {
2510     smtp_printf("%.3s%c%.*s%s\r\n", code, final? ' ':'-', esclen, esc, msg);
2511     return;
2512     }
2513   else if (nl[1] == 0 || no_multiline_responses)
2514     {
2515     smtp_printf("%.3s%c%.*s%.*s\r\n", code, final? ' ':'-', esclen, esc,
2516       (int)(nl - msg), msg);
2517     return;
2518     }
2519   else
2520     {
2521     smtp_printf("%.3s-%.*s%.*s\r\n", code, esclen, esc, (int)(nl - msg), msg);
2522     msg = nl + 1;
2523     while (isspace(*msg)) msg++;
2524     }
2525   }
2526 }
2527
2528
2529
2530
2531 /*************************************************
2532 *            Parse user SMTP message             *
2533 *************************************************/
2534
2535 /* This function allows for user messages overriding the response code details
2536 by providing a suitable response code string at the start of the message
2537 user_msg. Check the message for starting with a response code and optionally an
2538 extended status code. If found, check that the first digit is valid, and if so,
2539 change the code pointer and length to use the replacement. An invalid code
2540 causes a panic log; in this case, if the log messages is the same as the user
2541 message, we must also adjust the value of the log message to show the code that
2542 is actually going to be used (the original one).
2543
2544 This function is global because it is called from receive.c as well as within
2545 this module.
2546
2547 Note that the code length returned includes the terminating whitespace
2548 character, which is always included in the regex match.
2549
2550 Arguments:
2551   code          SMTP code, may involve extended status codes
2552   codelen       length of smtp code; if > 4 there's an ESC
2553   msg           message text
2554   log_msg       optional log message, to be adjusted with the new SMTP code
2555
2556 Returns:        nothing
2557 */
2558
2559 void
2560 smtp_message_code(uschar **code, int *codelen, uschar **msg, uschar **log_msg)
2561 {
2562 int n;
2563 int ovector[3];
2564
2565 if (msg == NULL || *msg == NULL) return;
2566
2567 n = pcre_exec(regex_smtp_code, NULL, CS *msg, Ustrlen(*msg), 0,
2568   PCRE_EOPT, ovector, sizeof(ovector)/sizeof(int));
2569 if (n < 0) return;
2570
2571 if ((*msg)[0] != (*code)[0])
2572   {
2573   log_write(0, LOG_MAIN|LOG_PANIC, "configured error code starts with "
2574     "incorrect digit (expected %c) in \"%s\"", (*code)[0], *msg);
2575   if (log_msg != NULL && *log_msg == *msg)
2576     *log_msg = string_sprintf("%s %s", *code, *log_msg + ovector[1]);
2577   }
2578 else
2579   {
2580   *code = *msg;
2581   *codelen = ovector[1];    /* Includes final space */
2582   }
2583 *msg += ovector[1];         /* Chop the code off the message */
2584 return;
2585 }
2586
2587
2588
2589
2590 /*************************************************
2591 *           Handle an ACL failure                *
2592 *************************************************/
2593
2594 /* This function is called when acl_check() fails. As well as calls from within
2595 this module, it is called from receive.c for an ACL after DATA. It sorts out
2596 logging the incident, and sets up the error response. A message containing
2597 newlines is turned into a multiline SMTP response, but for logging, only the
2598 first line is used.
2599
2600 There's a table of default permanent failure response codes to use in
2601 globals.c, along with the table of names. VFRY is special. Despite RFC1123 it
2602 defaults disabled in Exim. However, discussion in connection with RFC 821bis
2603 (aka RFC 2821) has concluded that the response should be 252 in the disabled
2604 state, because there are broken clients that try VRFY before RCPT. A 5xx
2605 response should be given only when the address is positively known to be
2606 undeliverable. Sigh. Also, for ETRN, 458 is given on refusal, and for AUTH,
2607 503.
2608
2609 From Exim 4.63, it is possible to override the response code details by
2610 providing a suitable response code string at the start of the message provided
2611 in user_msg. The code's first digit is checked for validity.
2612
2613 Arguments:
2614   where      where the ACL was called from
2615   rc         the failure code
2616   user_msg   a message that can be included in an SMTP response
2617   log_msg    a message for logging
2618
2619 Returns:     0 in most cases
2620              2 if the failure code was FAIL_DROP, in which case the
2621                SMTP connection should be dropped (this value fits with the
2622                "done" variable in smtp_setup_msg() below)
2623 */
2624
2625 int
2626 smtp_handle_acl_fail(int where, int rc, uschar *user_msg, uschar *log_msg)
2627 {
2628 BOOL drop = rc == FAIL_DROP;
2629 int codelen = 3;
2630 uschar *smtp_code;
2631 uschar *lognl;
2632 uschar *sender_info = US"";
2633 uschar *what =
2634 #ifdef WITH_CONTENT_SCAN
2635   (where == ACL_WHERE_MIME)? US"during MIME ACL checks" :
2636 #endif
2637   (where == ACL_WHERE_PREDATA)? US"DATA" :
2638   (where == ACL_WHERE_DATA)? US"after DATA" :
2639 #ifdef EXPERIMENTAL_PRDR
2640   (where == ACL_WHERE_PRDR)? US"after DATA PRDR" :
2641 #endif
2642   (smtp_cmd_data == NULL)?
2643     string_sprintf("%s in \"connect\" ACL", acl_wherenames[where]) :
2644     string_sprintf("%s %s", acl_wherenames[where], smtp_cmd_data);
2645
2646 if (drop) rc = FAIL;
2647
2648 /* Set the default SMTP code, and allow a user message to change it. */
2649
2650 smtp_code = (rc != FAIL)? US"451" : acl_wherecodes[where];
2651 smtp_message_code(&smtp_code, &codelen, &user_msg, &log_msg);
2652
2653 /* We used to have sender_address here; however, there was a bug that was not
2654 updating sender_address after a rewrite during a verify. When this bug was
2655 fixed, sender_address at this point became the rewritten address. I'm not sure
2656 this is what should be logged, so I've changed to logging the unrewritten
2657 address to retain backward compatibility. */
2658
2659 #ifndef WITH_CONTENT_SCAN
2660 if (where == ACL_WHERE_RCPT || where == ACL_WHERE_DATA)
2661 #else
2662 if (where == ACL_WHERE_RCPT || where == ACL_WHERE_DATA || where == ACL_WHERE_MIME)
2663 #endif
2664   {
2665   sender_info = string_sprintf("F=<%s>%s%s%s%s ",
2666     sender_address_unrewritten ? sender_address_unrewritten : sender_address,
2667     sender_host_authenticated ? US" A="                                    : US"",
2668     sender_host_authenticated ? sender_host_authenticated                  : US"",
2669     sender_host_authenticated && authenticated_id ? US":"                  : US"",
2670     sender_host_authenticated && authenticated_id ? authenticated_id       : US""
2671     );
2672   }
2673
2674 /* If there's been a sender verification failure with a specific message, and
2675 we have not sent a response about it yet, do so now, as a preliminary line for
2676 failures, but not defers. However, always log it for defer, and log it for fail
2677 unless the sender_verify_fail log selector has been turned off. */
2678
2679 if (sender_verified_failed != NULL &&
2680     !testflag(sender_verified_failed, af_sverify_told))
2681   {
2682   BOOL save_rcpt_in_progress = rcpt_in_progress;
2683   rcpt_in_progress = FALSE;  /* So as not to treat these as the error */
2684
2685   setflag(sender_verified_failed, af_sverify_told);
2686
2687   if (rc != FAIL || (log_extra_selector & LX_sender_verify_fail) != 0)
2688     log_write(0, LOG_MAIN|LOG_REJECT, "%s sender verify %s for <%s>%s",
2689       host_and_ident(TRUE),
2690       ((sender_verified_failed->special_action & 255) == DEFER)? "defer":"fail",
2691       sender_verified_failed->address,
2692       (sender_verified_failed->message == NULL)? US"" :
2693       string_sprintf(": %s", sender_verified_failed->message));
2694
2695   if (rc == FAIL && sender_verified_failed->user_message != NULL)
2696     smtp_respond(smtp_code, codelen, FALSE, string_sprintf(
2697         testflag(sender_verified_failed, af_verify_pmfail)?
2698           "Postmaster verification failed while checking <%s>\n%s\n"
2699           "Several RFCs state that you are required to have a postmaster\n"
2700           "mailbox for each mail domain. This host does not accept mail\n"
2701           "from domains whose servers reject the postmaster address."
2702           :
2703         testflag(sender_verified_failed, af_verify_nsfail)?
2704           "Callback setup failed while verifying <%s>\n%s\n"
2705           "The initial connection, or a HELO or MAIL FROM:<> command was\n"
2706           "rejected. Refusing MAIL FROM:<> does not help fight spam, disregards\n"
2707           "RFC requirements, and stops you from receiving standard bounce\n"
2708           "messages. This host does not accept mail from domains whose servers\n"
2709           "refuse bounces."
2710           :
2711           "Verification failed for <%s>\n%s",
2712         sender_verified_failed->address,
2713         sender_verified_failed->user_message));
2714
2715   rcpt_in_progress = save_rcpt_in_progress;
2716   }
2717
2718 /* Sort out text for logging */
2719
2720 log_msg = (log_msg == NULL)? US"" : string_sprintf(": %s", log_msg);
2721 lognl = Ustrchr(log_msg, '\n');
2722 if (lognl != NULL) *lognl = 0;
2723
2724 /* Send permanent failure response to the command, but the code used isn't
2725 always a 5xx one - see comments at the start of this function. If the original
2726 rc was FAIL_DROP we drop the connection and yield 2. */
2727
2728 if (rc == FAIL) smtp_respond(smtp_code, codelen, TRUE, (user_msg == NULL)?
2729   US"Administrative prohibition" : user_msg);
2730
2731 /* Send temporary failure response to the command. Don't give any details,
2732 unless acl_temp_details is set. This is TRUE for a callout defer, a "defer"
2733 verb, and for a header verify when smtp_return_error_details is set.
2734
2735 This conditional logic is all somewhat of a mess because of the odd
2736 interactions between temp_details and return_error_details. One day it should
2737 be re-implemented in a tidier fashion. */
2738
2739 else
2740   {
2741   if (acl_temp_details && user_msg != NULL)
2742     {
2743     if (smtp_return_error_details &&
2744         sender_verified_failed != NULL &&
2745         sender_verified_failed->message != NULL)
2746       {
2747       smtp_respond(smtp_code, codelen, FALSE, sender_verified_failed->message);
2748       }
2749     smtp_respond(smtp_code, codelen, TRUE, user_msg);
2750     }
2751   else
2752     smtp_respond(smtp_code, codelen, TRUE,
2753       US"Temporary local problem - please try later");
2754   }
2755
2756 /* Log the incident to the logs that are specified by log_reject_target
2757 (default main, reject). This can be empty to suppress logging of rejections. If
2758 the connection is not forcibly to be dropped, return 0. Otherwise, log why it
2759 is closing if required and return 2.  */
2760
2761 if (log_reject_target != 0)
2762   {
2763 #ifdef SUPPORT_TLS
2764   uschar * s = s_tlslog(NULL, NULL, NULL);
2765   if (!s) s = US"";
2766 #else
2767   uschar * s = US"";
2768 #endif
2769   log_write(0, log_reject_target, "%s%s %s%srejected %s%s",
2770     host_and_ident(TRUE), s,
2771     sender_info, (rc == FAIL)? US"" : US"temporarily ", what, log_msg);
2772   }
2773
2774 if (!drop) return 0;
2775
2776 log_write(L_smtp_connection, LOG_MAIN, "%s closed by DROP in ACL",
2777   smtp_get_connection_info());
2778
2779 /* Run the not-quit ACL, but without any custom messages. This should not be a
2780 problem, because we get here only if some other ACL has issued "drop", and
2781 in that case, *its* custom messages will have been used above. */
2782
2783 smtp_notquit_exit(US"acl-drop", NULL, NULL);
2784 return 2;
2785 }
2786
2787
2788
2789
2790 /*************************************************
2791 *     Handle SMTP exit when QUIT is not given    *
2792 *************************************************/
2793
2794 /* This function provides a logging/statistics hook for when an SMTP connection
2795 is dropped on the floor or the other end goes away. It's a global function
2796 because it's called from receive.c as well as this module. As well as running
2797 the NOTQUIT ACL, if there is one, this function also outputs a final SMTP
2798 response, either with a custom message from the ACL, or using a default. There
2799 is one case, however, when no message is output - after "drop". In that case,
2800 the ACL that obeyed "drop" has already supplied the custom message, and NULL is
2801 passed to this function.
2802
2803 In case things go wrong while processing this function, causing an error that
2804 may re-enter this funtion, there is a recursion check.
2805
2806 Arguments:
2807   reason          What $smtp_notquit_reason will be set to in the ACL;
2808                     if NULL, the ACL is not run
2809   code            The error code to return as part of the response
2810   defaultrespond  The default message if there's no user_msg
2811
2812 Returns:          Nothing
2813 */
2814
2815 void
2816 smtp_notquit_exit(uschar *reason, uschar *code, uschar *defaultrespond, ...)
2817 {
2818 int rc;
2819 uschar *user_msg = NULL;
2820 uschar *log_msg = NULL;
2821
2822 /* Check for recursive acll */
2823
2824 if (smtp_exit_function_called)
2825   {
2826   log_write(0, LOG_PANIC, "smtp_notquit_exit() called more than once (%s)",
2827     reason);
2828   return;
2829   }
2830 smtp_exit_function_called = TRUE;
2831
2832 /* Call the not-QUIT ACL, if there is one, unless no reason is given. */
2833
2834 if (acl_smtp_notquit != NULL && reason != NULL)
2835   {
2836   smtp_notquit_reason = reason;
2837   rc = acl_check(ACL_WHERE_NOTQUIT, NULL, acl_smtp_notquit, &user_msg,
2838     &log_msg);
2839   if (rc == ERROR)
2840     log_write(0, LOG_MAIN|LOG_PANIC, "ACL for not-QUIT returned ERROR: %s",
2841       log_msg);
2842   }
2843
2844 /* Write an SMTP response if we are expected to give one. As the default
2845 responses are all internal, they should always fit in the buffer, but code a
2846 warning, just in case. Note that string_vformat() still leaves a complete
2847 string, even if it is incomplete. */
2848
2849 if (code != NULL && defaultrespond != NULL)
2850   {
2851   if (user_msg == NULL)
2852     {
2853     uschar buffer[128];
2854     va_list ap;
2855     va_start(ap, defaultrespond);
2856     if (!string_vformat(buffer, sizeof(buffer), CS defaultrespond, ap))
2857       log_write(0, LOG_MAIN|LOG_PANIC, "string too large in smtp_notquit_exit()");
2858     smtp_printf("%s %s\r\n", code, buffer);
2859     va_end(ap);
2860     }
2861   else
2862     smtp_respond(code, 3, TRUE, user_msg);
2863   mac_smtp_fflush();
2864   }
2865 }
2866
2867
2868
2869
2870 /*************************************************
2871 *             Verify HELO argument               *
2872 *************************************************/
2873
2874 /* This function is called if helo_verify_hosts or helo_try_verify_hosts is
2875 matched. It is also called from ACL processing if verify = helo is used and
2876 verification was not previously tried (i.e. helo_try_verify_hosts was not
2877 matched). The result of its processing is to set helo_verified and
2878 helo_verify_failed. These variables should both be FALSE for this function to
2879 be called.
2880
2881 Note that EHLO/HELO is legitimately allowed to quote an address literal. Allow
2882 for IPv6 ::ffff: literals.
2883
2884 Argument:   none
2885 Returns:    TRUE if testing was completed;
2886             FALSE on a temporary failure
2887 */
2888
2889 BOOL
2890 smtp_verify_helo(void)
2891 {
2892 BOOL yield = TRUE;
2893
2894 HDEBUG(D_receive) debug_printf("verifying EHLO/HELO argument \"%s\"\n",
2895   sender_helo_name);
2896
2897 if (sender_helo_name == NULL)
2898   {
2899   HDEBUG(D_receive) debug_printf("no EHLO/HELO command was issued\n");
2900   }
2901
2902 /* Deal with the case of -bs without an IP address */
2903
2904 else if (sender_host_address == NULL)
2905   {
2906   HDEBUG(D_receive) debug_printf("no client IP address: assume success\n");
2907   helo_verified = TRUE;
2908   }
2909
2910 /* Deal with the more common case when there is a sending IP address */
2911
2912 else if (sender_helo_name[0] == '[')
2913   {
2914   helo_verified = Ustrncmp(sender_helo_name+1, sender_host_address,
2915     Ustrlen(sender_host_address)) == 0;
2916
2917   #if HAVE_IPV6
2918   if (!helo_verified)
2919     {
2920     if (strncmpic(sender_host_address, US"::ffff:", 7) == 0)
2921       helo_verified = Ustrncmp(sender_helo_name + 1,
2922         sender_host_address + 7, Ustrlen(sender_host_address) - 7) == 0;
2923     }
2924   #endif
2925
2926   HDEBUG(D_receive)
2927     { if (helo_verified) debug_printf("matched host address\n"); }
2928   }
2929
2930 /* Do a reverse lookup if one hasn't already given a positive or negative
2931 response. If that fails, or the name doesn't match, try checking with a forward
2932 lookup. */
2933
2934 else
2935   {
2936   if (sender_host_name == NULL && !host_lookup_failed)
2937     yield = host_name_lookup() != DEFER;
2938
2939   /* If a host name is known, check it and all its aliases. */
2940
2941   if (sender_host_name != NULL)
2942     {
2943     helo_verified = strcmpic(sender_host_name, sender_helo_name) == 0;
2944
2945     if (helo_verified)
2946       {
2947       HDEBUG(D_receive) debug_printf("matched host name\n");
2948       }
2949     else
2950       {
2951       uschar **aliases = sender_host_aliases;
2952       while (*aliases != NULL)
2953         {
2954         helo_verified = strcmpic(*aliases++, sender_helo_name) == 0;
2955         if (helo_verified) break;
2956         }
2957       HDEBUG(D_receive)
2958         {
2959         if (helo_verified)
2960           debug_printf("matched alias %s\n", *(--aliases));
2961         }
2962       }
2963     }
2964
2965   /* Final attempt: try a forward lookup of the helo name */
2966
2967   if (!helo_verified)
2968     {
2969     int rc;
2970     host_item h;
2971     h.name = sender_helo_name;
2972     h.address = NULL;
2973     h.mx = MX_NONE;
2974     h.next = NULL;
2975     HDEBUG(D_receive) debug_printf("getting IP address for %s\n",
2976       sender_helo_name);
2977     rc = host_find_byname(&h, NULL, 0, NULL, TRUE);
2978     if (rc == HOST_FOUND || rc == HOST_FOUND_LOCAL)
2979       {
2980       host_item *hh = &h;
2981       while (hh != NULL)
2982         {
2983         if (Ustrcmp(hh->address, sender_host_address) == 0)
2984           {
2985           helo_verified = TRUE;
2986           HDEBUG(D_receive)
2987             debug_printf("IP address for %s matches calling address\n",
2988               sender_helo_name);
2989           break;
2990           }
2991         hh = hh->next;
2992         }
2993       }
2994     }
2995   }
2996
2997 if (!helo_verified) helo_verify_failed = TRUE;  /* We've tried ... */
2998 return yield;
2999 }
3000
3001
3002
3003
3004 /*************************************************
3005 *        Send user response message              *
3006 *************************************************/
3007
3008 /* This function is passed a default response code and a user message. It calls
3009 smtp_message_code() to check and possibly modify the response code, and then
3010 calls smtp_respond() to transmit the response. I put this into a function
3011 just to avoid a lot of repetition.
3012
3013 Arguments:
3014   code         the response code
3015   user_msg     the user message
3016
3017 Returns:       nothing
3018 */
3019
3020 static void
3021 smtp_user_msg(uschar *code, uschar *user_msg)
3022 {
3023 int len = 3;
3024 smtp_message_code(&code, &len, &user_msg, NULL);
3025 smtp_respond(code, len, TRUE, user_msg);
3026 }
3027
3028
3029
3030 /*************************************************
3031 *       Initialize for SMTP incoming message     *
3032 *************************************************/
3033
3034 /* This function conducts the initial dialogue at the start of an incoming SMTP
3035 message, and builds a list of recipients. However, if the incoming message
3036 is part of a batch (-bS option) a separate function is called since it would
3037 be messy having tests splattered about all over this function. This function
3038 therefore handles the case where interaction is occurring. The input and output
3039 files are set up in smtp_in and smtp_out.
3040
3041 The global recipients_list is set to point to a vector of recipient_item
3042 blocks, whose number is given by recipients_count. This is extended by the
3043 receive_add_recipient() function. The global variable sender_address is set to
3044 the sender's address. The yield is +1 if a message has been successfully
3045 started, 0 if a QUIT command was encountered or the connection was refused from
3046 the particular host, or -1 if the connection was lost.
3047
3048 Argument: none
3049
3050 Returns:  > 0 message successfully started (reached DATA)
3051           = 0 QUIT read or end of file reached or call refused
3052           < 0 lost connection
3053 */
3054
3055 int
3056 smtp_setup_msg(void)
3057 {
3058 int done = 0;
3059 BOOL toomany = FALSE;
3060 BOOL discarded = FALSE;
3061 BOOL last_was_rej_mail = FALSE;
3062 BOOL last_was_rcpt = FALSE;
3063 void *reset_point = store_get(0);
3064
3065 DEBUG(D_receive) debug_printf("smtp_setup_msg entered\n");
3066
3067 /* Reset for start of new message. We allow one RSET not to be counted as a
3068 nonmail command, for those MTAs that insist on sending it between every
3069 message. Ditto for EHLO/HELO and for STARTTLS, to allow for going in and out of
3070 TLS between messages (an Exim client may do this if it has messages queued up
3071 for the host). Note: we do NOT reset AUTH at this point. */
3072
3073 smtp_reset(reset_point);
3074 message_ended = END_NOTSTARTED;
3075
3076 cmd_list[CMD_LIST_RSET].is_mail_cmd = TRUE;
3077 cmd_list[CMD_LIST_HELO].is_mail_cmd = TRUE;
3078 cmd_list[CMD_LIST_EHLO].is_mail_cmd = TRUE;
3079 #ifdef SUPPORT_TLS
3080 cmd_list[CMD_LIST_STARTTLS].is_mail_cmd = TRUE;
3081 #endif
3082
3083 /* Set the local signal handler for SIGTERM - it tries to end off tidily */
3084
3085 os_non_restarting_signal(SIGTERM, command_sigterm_handler);
3086
3087 /* Batched SMTP is handled in a different function. */
3088
3089 if (smtp_batched_input) return smtp_setup_batch_msg();
3090
3091 /* Deal with SMTP commands. This loop is exited by setting done to a POSITIVE
3092 value. The values are 2 larger than the required yield of the function. */
3093
3094 while (done <= 0)
3095   {
3096   uschar **argv;
3097   uschar *etrn_command;
3098   uschar *etrn_serialize_key;
3099   uschar *errmess;
3100   uschar *log_msg, *smtp_code;
3101   uschar *user_msg = NULL;
3102   uschar *recipient = NULL;
3103   uschar *hello = NULL;
3104   uschar *set_id = NULL;
3105   uschar *s, *ss;
3106   BOOL was_rej_mail = FALSE;
3107   BOOL was_rcpt = FALSE;
3108   void (*oldsignal)(int);
3109   pid_t pid;
3110   int start, end, sender_domain, recipient_domain;
3111   int ptr, size, rc;
3112   int c, i;
3113   auth_instance *au;
3114
3115   switch(smtp_read_command(TRUE))
3116     {
3117     /* The AUTH command is not permitted to occur inside a transaction, and may
3118     occur successfully only once per connection. Actually, that isn't quite
3119     true. When TLS is started, all previous information about a connection must
3120     be discarded, so a new AUTH is permitted at that time.
3121
3122     AUTH may only be used when it has been advertised. However, it seems that
3123     there are clients that send AUTH when it hasn't been advertised, some of
3124     them even doing this after HELO. And there are MTAs that accept this. Sigh.
3125     So there's a get-out that allows this to happen.
3126
3127     AUTH is initially labelled as a "nonmail command" so that one occurrence
3128     doesn't get counted. We change the label here so that multiple failing
3129     AUTHS will eventually hit the nonmail threshold. */
3130
3131     case AUTH_CMD:
3132     HAD(SCH_AUTH);
3133     authentication_failed = TRUE;
3134     cmd_list[CMD_LIST_AUTH].is_mail_cmd = FALSE;
3135
3136     if (!auth_advertised && !allow_auth_unadvertised)
3137       {
3138       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3139         US"AUTH command used when not advertised");
3140       break;
3141       }
3142     if (sender_host_authenticated != NULL)
3143       {
3144       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3145         US"already authenticated");
3146       break;
3147       }
3148     if (sender_address != NULL)
3149       {
3150       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3151         US"not permitted in mail transaction");
3152       break;
3153       }
3154
3155     /* Check the ACL */
3156
3157     if (acl_smtp_auth != NULL)
3158       {
3159       rc = acl_check(ACL_WHERE_AUTH, NULL, acl_smtp_auth, &user_msg, &log_msg);
3160       if (rc != OK)
3161         {
3162         done = smtp_handle_acl_fail(ACL_WHERE_AUTH, rc, user_msg, log_msg);
3163         break;
3164         }
3165       }
3166
3167     /* Find the name of the requested authentication mechanism. */
3168
3169     s = smtp_cmd_data;
3170     while ((c = *smtp_cmd_data) != 0 && !isspace(c))
3171       {
3172       if (!isalnum(c) && c != '-' && c != '_')
3173         {
3174         done = synprot_error(L_smtp_syntax_error, 501, NULL,
3175           US"invalid character in authentication mechanism name");
3176         goto COMMAND_LOOP;
3177         }
3178       smtp_cmd_data++;
3179       }
3180
3181     /* If not at the end of the line, we must be at white space. Terminate the
3182     name and move the pointer on to any data that may be present. */
3183
3184     if (*smtp_cmd_data != 0)
3185       {
3186       *smtp_cmd_data++ = 0;
3187       while (isspace(*smtp_cmd_data)) smtp_cmd_data++;
3188       }
3189
3190     /* Search for an authentication mechanism which is configured for use
3191     as a server and which has been advertised (unless, sigh, allow_auth_
3192     unadvertised is set). */
3193
3194     for (au = auths; au != NULL; au = au->next)
3195       {
3196       if (strcmpic(s, au->public_name) == 0 && au->server &&
3197           (au->advertised || allow_auth_unadvertised)) break;
3198       }
3199
3200     if (au == NULL)
3201       {
3202       done = synprot_error(L_smtp_protocol_error, 504, NULL,
3203         string_sprintf("%s authentication mechanism not supported", s));
3204       break;
3205       }
3206
3207     /* Run the checking code, passing the remainder of the command line as
3208     data. Initials the $auth<n> variables as empty. Initialize $0 empty and set
3209     it as the only set numerical variable. The authenticator may set $auth<n>
3210     and also set other numeric variables. The $auth<n> variables are preferred
3211     nowadays; the numerical variables remain for backwards compatibility.
3212
3213     Afterwards, have a go at expanding the set_id string, even if
3214     authentication failed - for bad passwords it can be useful to log the
3215     userid. On success, require set_id to expand and exist, and put it in
3216     authenticated_id. Save this in permanent store, as the working store gets
3217     reset at HELO, RSET, etc. */
3218
3219     for (i = 0; i < AUTH_VARS; i++) auth_vars[i] = NULL;
3220     expand_nmax = 0;
3221     expand_nlength[0] = 0;   /* $0 contains nothing */
3222
3223     c = (au->info->servercode)(au, smtp_cmd_data);
3224     if (au->set_id != NULL) set_id = expand_string(au->set_id);
3225     expand_nmax = -1;        /* Reset numeric variables */
3226     for (i = 0; i < AUTH_VARS; i++) auth_vars[i] = NULL;   /* Reset $auth<n> */
3227
3228     /* The value of authenticated_id is stored in the spool file and printed in
3229     log lines. It must not contain binary zeros or newline characters. In
3230     normal use, it never will, but when playing around or testing, this error
3231     can (did) happen. To guard against this, ensure that the id contains only
3232     printing characters. */
3233
3234     if (set_id != NULL) set_id = string_printing(set_id);
3235
3236     /* For the non-OK cases, set up additional logging data if set_id
3237     is not empty. */
3238
3239     if (c != OK)
3240       {
3241       if (set_id != NULL && *set_id != 0)
3242         set_id = string_sprintf(" (set_id=%s)", set_id);
3243       else set_id = US"";
3244       }
3245
3246     /* Switch on the result */
3247
3248     switch(c)
3249       {
3250       case OK:
3251       if (au->set_id == NULL || set_id != NULL)    /* Complete success */
3252         {
3253         if (set_id != NULL) authenticated_id = string_copy_malloc(set_id);
3254         sender_host_authenticated = au->name;
3255         authentication_failed = FALSE;
3256         authenticated_fail_id = NULL;   /* Impossible to already be set? */
3257         received_protocol =
3258           protocols[pextend + pauthed + ((tls_in.active >= 0)? pcrpted:0)] +
3259             ((sender_host_address != NULL)? pnlocal : 0);
3260         s = ss = US"235 Authentication succeeded";
3261         authenticated_by = au;
3262         break;
3263         }
3264
3265       /* Authentication succeeded, but we failed to expand the set_id string.
3266       Treat this as a temporary error. */
3267
3268       auth_defer_msg = expand_string_message;
3269       /* Fall through */
3270
3271       case DEFER:
3272       if (set_id != NULL) authenticated_fail_id = string_copy_malloc(set_id);
3273       s = string_sprintf("435 Unable to authenticate at present%s",
3274         auth_defer_user_msg);
3275       ss = string_sprintf("435 Unable to authenticate at present%s: %s",
3276         set_id, auth_defer_msg);
3277       break;
3278
3279       case BAD64:
3280       s = ss = US"501 Invalid base64 data";
3281       break;
3282
3283       case CANCELLED:
3284       s = ss = US"501 Authentication cancelled";
3285       break;
3286
3287       case UNEXPECTED:
3288       s = ss = US"553 Initial data not expected";
3289       break;
3290
3291       case FAIL:
3292       if (set_id != NULL) authenticated_fail_id = string_copy_malloc(set_id);
3293       s = US"535 Incorrect authentication data";
3294       ss = string_sprintf("535 Incorrect authentication data%s", set_id);
3295       break;
3296
3297       default:
3298       if (set_id != NULL) authenticated_fail_id = string_copy_malloc(set_id);
3299       s = US"435 Internal error";
3300       ss = string_sprintf("435 Internal error%s: return %d from authentication "
3301         "check", set_id, c);
3302       break;
3303       }
3304
3305     smtp_printf("%s\r\n", s);
3306     if (c != OK)
3307       log_write(0, LOG_MAIN|LOG_REJECT, "%s authenticator failed for %s: %s",
3308         au->name, host_and_ident(FALSE), ss);
3309
3310     break;  /* AUTH_CMD */
3311
3312     /* The HELO/EHLO commands are permitted to appear in the middle of a
3313     session as well as at the beginning. They have the effect of a reset in
3314     addition to their other functions. Their absence at the start cannot be
3315     taken to be an error.
3316
3317     RFC 2821 says:
3318
3319       If the EHLO command is not acceptable to the SMTP server, 501, 500,
3320       or 502 failure replies MUST be returned as appropriate.  The SMTP
3321       server MUST stay in the same state after transmitting these replies
3322       that it was in before the EHLO was received.
3323
3324     Therefore, we do not do the reset until after checking the command for
3325     acceptability. This change was made for Exim release 4.11. Previously
3326     it did the reset first. */
3327
3328     case HELO_CMD:
3329     HAD(SCH_HELO);
3330     hello = US"HELO";
3331     esmtp = FALSE;
3332     goto HELO_EHLO;
3333
3334     case EHLO_CMD:
3335     HAD(SCH_EHLO);
3336     hello = US"EHLO";
3337     esmtp = TRUE;
3338
3339     HELO_EHLO:      /* Common code for HELO and EHLO */
3340     cmd_list[CMD_LIST_HELO].is_mail_cmd = FALSE;
3341     cmd_list[CMD_LIST_EHLO].is_mail_cmd = FALSE;
3342
3343     /* Reject the HELO if its argument was invalid or non-existent. A
3344     successful check causes the argument to be saved in malloc store. */
3345
3346     if (!check_helo(smtp_cmd_data))
3347       {
3348       smtp_printf("501 Syntactically invalid %s argument(s)\r\n", hello);
3349
3350       log_write(0, LOG_MAIN|LOG_REJECT, "rejected %s from %s: syntactically "
3351         "invalid argument(s): %s", hello, host_and_ident(FALSE),
3352         (*smtp_cmd_argument == 0)? US"(no argument given)" :
3353                            string_printing(smtp_cmd_argument));
3354
3355       if (++synprot_error_count > smtp_max_synprot_errors)
3356         {
3357         log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
3358           "syntax or protocol errors (last command was \"%s\")",
3359           host_and_ident(FALSE), smtp_cmd_buffer);
3360         done = 1;
3361         }
3362
3363       break;
3364       }
3365
3366     /* If sender_host_unknown is true, we have got here via the -bs interface,
3367     not called from inetd. Otherwise, we are running an IP connection and the
3368     host address will be set. If the helo name is the primary name of this
3369     host and we haven't done a reverse lookup, force one now. If helo_required
3370     is set, ensure that the HELO name matches the actual host. If helo_verify
3371     is set, do the same check, but softly. */
3372
3373     if (!sender_host_unknown)
3374       {
3375       BOOL old_helo_verified = helo_verified;
3376       uschar *p = smtp_cmd_data;
3377
3378       while (*p != 0 && !isspace(*p)) { *p = tolower(*p); p++; }
3379       *p = 0;
3380
3381       /* Force a reverse lookup if HELO quoted something in helo_lookup_domains
3382       because otherwise the log can be confusing. */
3383
3384       if (sender_host_name == NULL &&
3385            (deliver_domain = sender_helo_name,  /* set $domain */
3386             match_isinlist(sender_helo_name, &helo_lookup_domains, 0,
3387               &domainlist_anchor, NULL, MCL_DOMAIN, TRUE, NULL)) == OK)
3388         (void)host_name_lookup();
3389
3390       /* Rebuild the fullhost info to include the HELO name (and the real name
3391       if it was looked up.) */
3392
3393       host_build_sender_fullhost();  /* Rebuild */
3394       set_process_info("handling%s incoming connection from %s",
3395         (tls_in.active >= 0)? " TLS" : "", host_and_ident(FALSE));
3396
3397       /* Verify if configured. This doesn't give much security, but it does
3398       make some people happy to be able to do it. If helo_required is set,
3399       (host matches helo_verify_hosts) failure forces rejection. If helo_verify
3400       is set (host matches helo_try_verify_hosts), it does not. This is perhaps
3401       now obsolescent, since the verification can now be requested selectively
3402       at ACL time. */
3403
3404       helo_verified = helo_verify_failed = FALSE;
3405       if (helo_required || helo_verify)
3406         {
3407         BOOL tempfail = !smtp_verify_helo();
3408         if (!helo_verified)
3409           {
3410           if (helo_required)
3411             {
3412             smtp_printf("%d %s argument does not match calling host\r\n",
3413               tempfail? 451 : 550, hello);
3414             log_write(0, LOG_MAIN|LOG_REJECT, "%srejected \"%s %s\" from %s",
3415               tempfail? "temporarily " : "",
3416               hello, sender_helo_name, host_and_ident(FALSE));
3417             helo_verified = old_helo_verified;
3418             break;                   /* End of HELO/EHLO processing */
3419             }
3420           HDEBUG(D_all) debug_printf("%s verification failed but host is in "
3421             "helo_try_verify_hosts\n", hello);
3422           }
3423         }
3424       }
3425
3426 #ifdef EXPERIMENTAL_SPF
3427     /* set up SPF context */
3428     spf_init(sender_helo_name, sender_host_address);
3429 #endif
3430
3431     /* Apply an ACL check if one is defined; afterwards, recheck
3432     synchronization in case the client started sending in a delay. */
3433
3434     if (acl_smtp_helo != NULL)
3435       {
3436       rc = acl_check(ACL_WHERE_HELO, NULL, acl_smtp_helo, &user_msg, &log_msg);
3437       if (rc != OK)
3438         {
3439         done = smtp_handle_acl_fail(ACL_WHERE_HELO, rc, user_msg, log_msg);
3440         sender_helo_name = NULL;
3441         host_build_sender_fullhost();  /* Rebuild */
3442         break;
3443         }
3444       else if (!check_sync()) goto SYNC_FAILURE;
3445       }
3446
3447     /* Generate an OK reply. The default string includes the ident if present,
3448     and also the IP address if present. Reflecting back the ident is intended
3449     as a deterrent to mail forgers. For maximum efficiency, and also because
3450     some broken systems expect each response to be in a single packet, arrange
3451     that the entire reply is sent in one write(). */
3452
3453     auth_advertised = FALSE;
3454     pipelining_advertised = FALSE;
3455     #ifdef SUPPORT_TLS
3456     tls_advertised = FALSE;
3457     #endif
3458
3459     smtp_code = US"250 ";        /* Default response code plus space*/
3460     if (user_msg == NULL)
3461       {
3462       s = string_sprintf("%.3s %s Hello %s%s%s",
3463         smtp_code,
3464         smtp_active_hostname,
3465         (sender_ident == NULL)?  US"" : sender_ident,
3466         (sender_ident == NULL)?  US"" : US" at ",
3467         (sender_host_name == NULL)? sender_helo_name : sender_host_name);
3468
3469       ptr = Ustrlen(s);
3470       size = ptr + 1;
3471
3472       if (sender_host_address != NULL)
3473         {
3474         s = string_cat(s, &size, &ptr, US" [", 2);
3475         s = string_cat(s, &size, &ptr, sender_host_address,
3476           Ustrlen(sender_host_address));
3477         s = string_cat(s, &size, &ptr, US"]", 1);
3478         }
3479       }
3480
3481     /* A user-supplied EHLO greeting may not contain more than one line. Note
3482     that the code returned by smtp_message_code() includes the terminating
3483     whitespace character. */
3484
3485     else
3486       {
3487       char *ss;
3488       int codelen = 4;
3489       smtp_message_code(&smtp_code, &codelen, &user_msg, NULL);
3490       s = string_sprintf("%.*s%s", codelen, smtp_code, user_msg);
3491       if ((ss = strpbrk(CS s, "\r\n")) != NULL)
3492         {
3493         log_write(0, LOG_MAIN|LOG_PANIC, "EHLO/HELO response must not contain "
3494           "newlines: message truncated: %s", string_printing(s));
3495         *ss = 0;
3496         }
3497       ptr = Ustrlen(s);
3498       size = ptr + 1;
3499       }
3500
3501     s = string_cat(s, &size, &ptr, US"\r\n", 2);
3502
3503     /* If we received EHLO, we must create a multiline response which includes
3504     the functions supported. */
3505
3506     if (esmtp)
3507       {
3508       s[3] = '-';
3509
3510       /* I'm not entirely happy with this, as an MTA is supposed to check
3511       that it has enough room to accept a message of maximum size before
3512       it sends this. However, there seems little point in not sending it.
3513       The actual size check happens later at MAIL FROM time. By postponing it
3514       till then, VRFY and EXPN can be used after EHLO when space is short. */
3515
3516       if (thismessage_size_limit > 0)
3517         {
3518         sprintf(CS big_buffer, "%.3s-SIZE %d\r\n", smtp_code,
3519           thismessage_size_limit);
3520         s = string_cat(s, &size, &ptr, big_buffer, Ustrlen(big_buffer));
3521         }
3522       else
3523         {
3524         s = string_cat(s, &size, &ptr, smtp_code, 3);
3525         s = string_cat(s, &size, &ptr, US"-SIZE\r\n", 7);
3526         }
3527
3528       /* Exim does not do protocol conversion or data conversion. It is 8-bit
3529       clean; if it has an 8-bit character in its hand, it just sends it. It
3530       cannot therefore specify 8BITMIME and remain consistent with the RFCs.
3531       However, some users want this option simply in order to stop MUAs
3532       mangling messages that contain top-bit-set characters. It is therefore
3533       provided as an option. */
3534
3535       if (accept_8bitmime)
3536         {
3537         s = string_cat(s, &size, &ptr, smtp_code, 3);
3538         s = string_cat(s, &size, &ptr, US"-8BITMIME\r\n", 11);
3539         }
3540
3541       /* Advertise ETRN if there's an ACL checking whether a host is
3542       permitted to issue it; a check is made when any host actually tries. */
3543
3544       if (acl_smtp_etrn != NULL)
3545         {
3546         s = string_cat(s, &size, &ptr, smtp_code, 3);
3547         s = string_cat(s, &size, &ptr, US"-ETRN\r\n", 7);
3548         }
3549
3550       /* Advertise EXPN if there's an ACL checking whether a host is
3551       permitted to issue it; a check is made when any host actually tries. */
3552
3553       if (acl_smtp_expn != NULL)
3554         {
3555         s = string_cat(s, &size, &ptr, smtp_code, 3);
3556         s = string_cat(s, &size, &ptr, US"-EXPN\r\n", 7);
3557         }
3558
3559       /* Exim is quite happy with pipelining, so let the other end know that
3560       it is safe to use it, unless advertising is disabled. */
3561
3562       if (pipelining_enable &&
3563           verify_check_host(&pipelining_advertise_hosts) == OK)
3564         {
3565         s = string_cat(s, &size, &ptr, smtp_code, 3);
3566         s = string_cat(s, &size, &ptr, US"-PIPELINING\r\n", 13);
3567         sync_cmd_limit = NON_SYNC_CMD_PIPELINING;
3568         pipelining_advertised = TRUE;
3569         }
3570
3571
3572       /* If any server authentication mechanisms are configured, advertise
3573       them if the current host is in auth_advertise_hosts. The problem with
3574       advertising always is that some clients then require users to
3575       authenticate (and aren't configurable otherwise) even though it may not
3576       be necessary (e.g. if the host is in host_accept_relay).
3577
3578       RFC 2222 states that SASL mechanism names contain only upper case
3579       letters, so output the names in upper case, though we actually recognize
3580       them in either case in the AUTH command. */
3581
3582       if (auths != NULL)
3583         {
3584         if (verify_check_host(&auth_advertise_hosts) == OK)
3585           {
3586           auth_instance *au;
3587           BOOL first = TRUE;
3588           for (au = auths; au != NULL; au = au->next)
3589             {
3590             if (au->server && (au->advertise_condition == NULL ||
3591                 expand_check_condition(au->advertise_condition, au->name,
3592                 US"authenticator")))
3593               {
3594               int saveptr;
3595               if (first)
3596                 {
3597                 s = string_cat(s, &size, &ptr, smtp_code, 3);
3598                 s = string_cat(s, &size, &ptr, US"-AUTH", 5);
3599                 first = FALSE;
3600                 auth_advertised = TRUE;
3601                 }
3602               saveptr = ptr;
3603               s = string_cat(s, &size, &ptr, US" ", 1);
3604               s = string_cat(s, &size, &ptr, au->public_name,
3605                 Ustrlen(au->public_name));
3606               while (++saveptr < ptr) s[saveptr] = toupper(s[saveptr]);
3607               au->advertised = TRUE;
3608               }
3609             else au->advertised = FALSE;
3610             }
3611           if (!first) s = string_cat(s, &size, &ptr, US"\r\n", 2);
3612           }
3613         }
3614
3615       /* Advertise TLS (Transport Level Security) aka SSL (Secure Socket Layer)
3616       if it has been included in the binary, and the host matches
3617       tls_advertise_hosts. We must *not* advertise if we are already in a
3618       secure connection. */
3619
3620       #ifdef SUPPORT_TLS
3621       if (tls_in.active < 0 &&
3622           verify_check_host(&tls_advertise_hosts) != FAIL)
3623         {
3624         s = string_cat(s, &size, &ptr, smtp_code, 3);
3625         s = string_cat(s, &size, &ptr, US"-STARTTLS\r\n", 11);
3626         tls_advertised = TRUE;
3627         }
3628       #endif
3629
3630       #ifdef EXPERIMENTAL_PRDR
3631       /* Per Recipient Data Response, draft by Eric A. Hall extending RFC */
3632       if (prdr_enable) {
3633         s = string_cat(s, &size, &ptr, smtp_code, 3);
3634         s = string_cat(s, &size, &ptr, US"-PRDR\r\n", 7);
3635       }
3636       #endif
3637
3638       /* Finish off the multiline reply with one that is always available. */
3639
3640       s = string_cat(s, &size, &ptr, smtp_code, 3);
3641       s = string_cat(s, &size, &ptr, US" HELP\r\n", 7);
3642       }
3643
3644     /* Terminate the string (for debug), write it, and note that HELO/EHLO
3645     has been seen. */
3646
3647     s[ptr] = 0;
3648
3649     #ifdef SUPPORT_TLS
3650     if (tls_in.active >= 0) (void)tls_write(TRUE, s, ptr); else
3651     #endif
3652
3653       {
3654       int i = fwrite(s, 1, ptr, smtp_out); i = i; /* compiler quietening */
3655       }
3656     DEBUG(D_receive)
3657       {
3658       uschar *cr;
3659       while ((cr = Ustrchr(s, '\r')) != NULL)   /* lose CRs */
3660         memmove(cr, cr + 1, (ptr--) - (cr - s));
3661       debug_printf("SMTP>> %s", s);
3662       }
3663     helo_seen = TRUE;
3664
3665     /* Reset the protocol and the state, abandoning any previous message. */
3666
3667     received_protocol = (esmtp?
3668       protocols[pextend +
3669         ((sender_host_authenticated != NULL)? pauthed : 0) +
3670         ((tls_in.active >= 0)? pcrpted : 0)]
3671       :
3672       protocols[pnormal + ((tls_in.active >= 0)? pcrpted : 0)])
3673       +
3674       ((sender_host_address != NULL)? pnlocal : 0);
3675
3676     smtp_reset(reset_point);
3677     toomany = FALSE;
3678     break;   /* HELO/EHLO */
3679
3680
3681     /* The MAIL command requires an address as an operand. All we do
3682     here is to parse it for syntactic correctness. The form "<>" is
3683     a special case which converts into an empty string. The start/end
3684     pointers in the original are not used further for this address, as
3685     it is the canonical extracted address which is all that is kept. */
3686
3687     case MAIL_CMD:
3688     HAD(SCH_MAIL);
3689     smtp_mailcmd_count++;              /* Count for limit and ratelimit */
3690     was_rej_mail = TRUE;               /* Reset if accepted */
3691     env_mail_type_t * mail_args;       /* Sanity check & validate args */
3692
3693     if (helo_required && !helo_seen)
3694       {
3695       smtp_printf("503 HELO or EHLO required\r\n");
3696       log_write(0, LOG_MAIN|LOG_REJECT, "rejected MAIL from %s: no "
3697         "HELO/EHLO given", host_and_ident(FALSE));
3698       break;
3699       }
3700
3701     if (sender_address != NULL)
3702       {
3703       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3704         US"sender already given");
3705       break;
3706       }
3707
3708     if (smtp_cmd_data[0] == 0)
3709       {
3710       done = synprot_error(L_smtp_protocol_error, 501, NULL,
3711         US"MAIL must have an address operand");
3712       break;
3713       }
3714
3715     /* Check to see if the limit for messages per connection would be
3716     exceeded by accepting further messages. */
3717
3718     if (smtp_accept_max_per_connection > 0 &&
3719         smtp_mailcmd_count > smtp_accept_max_per_connection)
3720       {
3721       smtp_printf("421 too many messages in this connection\r\n");
3722       log_write(0, LOG_MAIN|LOG_REJECT, "rejected MAIL command %s: too many "
3723         "messages in one connection", host_and_ident(TRUE));
3724       break;
3725       }
3726
3727     /* Reset for start of message - even if this is going to fail, we
3728     obviously need to throw away any previous data. */
3729
3730     smtp_reset(reset_point);
3731     toomany = FALSE;
3732     sender_data = recipient_data = NULL;
3733
3734     /* Loop, checking for ESMTP additions to the MAIL FROM command. */
3735
3736     if (esmtp) for(;;)
3737       {
3738       uschar *name, *value, *end;
3739       unsigned long int size;
3740       BOOL arg_error = FALSE;
3741
3742       if (!extract_option(&name, &value)) break;
3743
3744       for (mail_args = env_mail_type_list;
3745            (char *)mail_args < (char *)env_mail_type_list + sizeof(env_mail_type_list);
3746            mail_args++
3747           )
3748         {
3749         if (strcmpic(name, mail_args->name) == 0)
3750           break;
3751         }
3752       if (mail_args->need_value && strcmpic(value, US"") == 0)
3753         break;
3754
3755       switch(mail_args->value)
3756         {
3757         /* Handle SIZE= by reading the value. We don't do the check till later,
3758         in order to be able to log the sender address on failure. */
3759         case ENV_MAIL_OPT_SIZE:
3760           if (((size = Ustrtoul(value, &end, 10)), *end == 0))
3761             {
3762             if ((size == ULONG_MAX && errno == ERANGE) || size > INT_MAX)
3763               size = INT_MAX;
3764             message_size = (int)size;
3765             }
3766           else
3767             arg_error = TRUE;
3768           break;
3769
3770         /* If this session was initiated with EHLO and accept_8bitmime is set,
3771         Exim will have indicated that it supports the BODY=8BITMIME option. In
3772         fact, it does not support this according to the RFCs, in that it does not
3773         take any special action for forwarding messages containing 8-bit
3774         characters. That is why accept_8bitmime is not the default setting, but
3775         some sites want the action that is provided. We recognize both "8BITMIME"
3776         and "7BIT" as body types, but take no action. */
3777         case ENV_MAIL_OPT_BODY:
3778           if (accept_8bitmime) {
3779             if (strcmpic(value, US"8BITMIME") == 0) {
3780               body_8bitmime = 8;
3781             } else if (strcmpic(value, US"7BIT") == 0) {
3782               body_8bitmime = 7;
3783             } else {
3784               body_8bitmime = 0;
3785               done = synprot_error(L_smtp_syntax_error, 501, NULL,
3786                 US"invalid data for BODY");
3787               goto COMMAND_LOOP;
3788             }
3789             DEBUG(D_receive) debug_printf("8BITMIME: %d\n", body_8bitmime);
3790             break;
3791           }
3792           arg_error = TRUE;
3793           break;
3794
3795         /* Handle the AUTH extension. If the value given is not "<>" and either
3796         the ACL says "yes" or there is no ACL but the sending host is
3797         authenticated, we set it up as the authenticated sender. However, if the
3798         authenticator set a condition to be tested, we ignore AUTH on MAIL unless
3799         the condition is met. The value of AUTH is an xtext, which means that +,
3800         = and cntrl chars are coded in hex; however "<>" is unaffected by this
3801         coding. */
3802         case ENV_MAIL_OPT_AUTH:
3803           if (Ustrcmp(value, "<>") != 0)
3804             {
3805             int rc;
3806             uschar *ignore_msg;
3807
3808             if (auth_xtextdecode(value, &authenticated_sender) < 0)
3809               {
3810               /* Put back terminator overrides for error message */
3811               value[-1] = '=';
3812               name[-1] = ' ';
3813               done = synprot_error(L_smtp_syntax_error, 501, NULL,
3814                 US"invalid data for AUTH");
3815               goto COMMAND_LOOP;
3816               }
3817             if (acl_smtp_mailauth == NULL)
3818               {
3819               ignore_msg = US"client not authenticated";
3820               rc = (sender_host_authenticated != NULL)? OK : FAIL;
3821               }
3822             else
3823               {
3824               ignore_msg = US"rejected by ACL";
3825               rc = acl_check(ACL_WHERE_MAILAUTH, NULL, acl_smtp_mailauth,
3826                 &user_msg, &log_msg);
3827               }
3828   
3829             switch (rc)
3830               {
3831               case OK:
3832               if (authenticated_by == NULL ||
3833                   authenticated_by->mail_auth_condition == NULL ||
3834                   expand_check_condition(authenticated_by->mail_auth_condition,
3835                       authenticated_by->name, US"authenticator"))
3836                 break;     /* Accept the AUTH */
3837   
3838               ignore_msg = US"server_mail_auth_condition failed";
3839               if (authenticated_id != NULL)
3840                 ignore_msg = string_sprintf("%s: authenticated ID=\"%s\"",
3841                   ignore_msg, authenticated_id);
3842   
3843               /* Fall through */
3844   
3845               case FAIL:
3846               authenticated_sender = NULL;
3847               log_write(0, LOG_MAIN, "ignoring AUTH=%s from %s (%s)",
3848                 value, host_and_ident(TRUE), ignore_msg);
3849               break;
3850   
3851               /* Should only get DEFER or ERROR here. Put back terminator
3852               overrides for error message */
3853   
3854               default:
3855               value[-1] = '=';
3856               name[-1] = ' ';
3857               (void)smtp_handle_acl_fail(ACL_WHERE_MAILAUTH, rc, user_msg,
3858                 log_msg);
3859               goto COMMAND_LOOP;
3860               }
3861             }
3862             break;
3863
3864 #ifdef EXPERIMENTAL_PRDR
3865         case ENV_MAIL_OPT_PRDR:
3866           if ( prdr_enable )
3867             prdr_requested = TRUE;
3868           break;
3869 #endif
3870
3871         /* Unknown option. Stick back the terminator characters and break
3872         the loop.  Do the name-terminator second as extract_option sets
3873         value==name when it found no equal-sign.
3874         An error for a malformed address will occur. */
3875         default:
3876           value[-1] = '=';
3877           name[-1] = ' ';
3878           arg_error = TRUE;
3879           break;
3880         }
3881       /* Break out of for loop if switch() had bad argument or
3882          when start of the email address is reached */
3883       if (arg_error) break;
3884       }
3885
3886     /* If we have passed the threshold for rate limiting, apply the current
3887     delay, and update it for next time, provided this is a limited host. */
3888
3889     if (smtp_mailcmd_count > smtp_rlm_threshold &&
3890         verify_check_host(&smtp_ratelimit_hosts) == OK)
3891       {
3892       DEBUG(D_receive) debug_printf("rate limit MAIL: delay %.3g sec\n",
3893         smtp_delay_mail/1000.0);
3894       millisleep((int)smtp_delay_mail);
3895       smtp_delay_mail *= smtp_rlm_factor;
3896       if (smtp_delay_mail > (double)smtp_rlm_limit)
3897         smtp_delay_mail = (double)smtp_rlm_limit;
3898       }
3899
3900     /* Now extract the address, first applying any SMTP-time rewriting. The
3901     TRUE flag allows "<>" as a sender address. */
3902
3903     raw_sender = ((rewrite_existflags & rewrite_smtp) != 0)?
3904       rewrite_one(smtp_cmd_data, rewrite_smtp, NULL, FALSE, US"",
3905         global_rewrite_rules) : smtp_cmd_data;
3906
3907     /* rfc821_domains = TRUE; << no longer needed */
3908     raw_sender =
3909       parse_extract_address(raw_sender, &errmess, &start, &end, &sender_domain,
3910         TRUE);
3911     /* rfc821_domains = FALSE; << no longer needed */
3912
3913     if (raw_sender == NULL)
3914       {
3915       done = synprot_error(L_smtp_syntax_error, 501, smtp_cmd_data, errmess);
3916       break;
3917       }
3918
3919     sender_address = raw_sender;
3920
3921     /* If there is a configured size limit for mail, check that this message
3922     doesn't exceed it. The check is postponed to this point so that the sender
3923     can be logged. */
3924
3925     if (thismessage_size_limit > 0 && message_size > thismessage_size_limit)
3926       {
3927       smtp_printf("552 Message size exceeds maximum permitted\r\n");
3928       log_write(L_size_reject,
3929           LOG_MAIN|LOG_REJECT, "rejected MAIL FROM:<%s> %s: "
3930           "message too big: size%s=%d max=%d",
3931           sender_address,
3932           host_and_ident(TRUE),
3933           (message_size == INT_MAX)? ">" : "",
3934           message_size,
3935           thismessage_size_limit);
3936       sender_address = NULL;
3937       break;
3938       }
3939
3940     /* Check there is enough space on the disk unless configured not to.
3941     When smtp_check_spool_space is set, the check is for thismessage_size_limit
3942     plus the current message - i.e. we accept the message only if it won't
3943     reduce the space below the threshold. Add 5000 to the size to allow for
3944     overheads such as the Received: line and storing of recipients, etc.
3945     By putting the check here, even when SIZE is not given, it allow VRFY
3946     and EXPN etc. to be used when space is short. */
3947
3948     if (!receive_check_fs(
3949          (smtp_check_spool_space && message_size >= 0)?
3950             message_size + 5000 : 0))
3951       {
3952       smtp_printf("452 Space shortage, please try later\r\n");
3953       sender_address = NULL;
3954       break;
3955       }
3956
3957     /* If sender_address is unqualified, reject it, unless this is a locally
3958     generated message, or the sending host or net is permitted to send
3959     unqualified addresses - typically local machines behaving as MUAs -
3960     in which case just qualify the address. The flag is set above at the start
3961     of the SMTP connection. */
3962
3963     if (sender_domain == 0 && sender_address[0] != 0)
3964       {
3965       if (allow_unqualified_sender)
3966         {
3967         sender_domain = Ustrlen(sender_address) + 1;
3968         sender_address = rewrite_address_qualify(sender_address, FALSE);
3969         DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
3970           raw_sender);
3971         }
3972       else
3973         {
3974         smtp_printf("501 %s: sender address must contain a domain\r\n",
3975           smtp_cmd_data);
3976         log_write(L_smtp_syntax_error,
3977           LOG_MAIN|LOG_REJECT,
3978           "unqualified sender rejected: <%s> %s%s",
3979           raw_sender,
3980           host_and_ident(TRUE),
3981           host_lookup_msg);
3982         sender_address = NULL;
3983         break;
3984         }
3985       }
3986
3987     /* Apply an ACL check if one is defined, before responding. Afterwards,
3988     when pipelining is not advertised, do another sync check in case the ACL
3989     delayed and the client started sending in the meantime. */
3990
3991     if (acl_smtp_mail == NULL) rc = OK; else
3992       {
3993       rc = acl_check(ACL_WHERE_MAIL, NULL, acl_smtp_mail, &user_msg, &log_msg);
3994       if (rc == OK && !pipelining_advertised && !check_sync())
3995         goto SYNC_FAILURE;
3996       }
3997
3998     if (rc == OK || rc == DISCARD)
3999       {
4000       if (user_msg == NULL) 
4001         smtp_printf("%s%s%s", US"250 OK",
4002                   #ifdef EXPERIMENTAL_PRDR
4003                     prdr_requested == TRUE ? US", PRDR Requested" :
4004                   #endif
4005                     US"",
4006                     US"\r\n");
4007       else 
4008         {
4009       #ifdef EXPERIMENTAL_PRDR
4010         if ( prdr_requested == TRUE )
4011            user_msg = string_sprintf("%s%s", user_msg, US", PRDR Requested");
4012       #endif
4013         smtp_user_msg(US"250",user_msg);
4014         }
4015       smtp_delay_rcpt = smtp_rlr_base;
4016       recipients_discarded = (rc == DISCARD);
4017       was_rej_mail = FALSE;
4018       }
4019     else
4020       {
4021       done = smtp_handle_acl_fail(ACL_WHERE_MAIL, rc, user_msg, log_msg);
4022       sender_address = NULL;
4023       }
4024     break;
4025
4026
4027     /* The RCPT command requires an address as an operand. There may be any
4028     number of RCPT commands, specifying multiple recipients. We build them all
4029     into a data structure. The start/end values given by parse_extract_address
4030     are not used, as we keep only the extracted address. */
4031
4032     case RCPT_CMD:
4033     HAD(SCH_RCPT);
4034     rcpt_count++;
4035     was_rcpt = rcpt_in_progress = TRUE;
4036
4037     /* There must be a sender address; if the sender was rejected and
4038     pipelining was advertised, we assume the client was pipelining, and do not
4039     count this as a protocol error. Reset was_rej_mail so that further RCPTs
4040     get the same treatment. */
4041
4042     if (sender_address == NULL)
4043       {
4044       if (pipelining_advertised && last_was_rej_mail)
4045         {
4046         smtp_printf("503 sender not yet given\r\n");
4047         was_rej_mail = TRUE;
4048         }
4049       else
4050         {
4051         done = synprot_error(L_smtp_protocol_error, 503, NULL,
4052           US"sender not yet given");
4053         was_rcpt = FALSE;             /* Not a valid RCPT */
4054         }
4055       rcpt_fail_count++;
4056       break;
4057       }
4058
4059     /* Check for an operand */
4060
4061     if (smtp_cmd_data[0] == 0)
4062       {
4063       done = synprot_error(L_smtp_syntax_error, 501, NULL,
4064         US"RCPT must have an address operand");
4065       rcpt_fail_count++;
4066       break;
4067       }
4068
4069     /* Apply SMTP rewriting then extract the working address. Don't allow "<>"
4070     as a recipient address */
4071
4072     recipient = ((rewrite_existflags & rewrite_smtp) != 0)?
4073       rewrite_one(smtp_cmd_data, rewrite_smtp, NULL, FALSE, US"",
4074         global_rewrite_rules) : smtp_cmd_data;
4075
4076     /* rfc821_domains = TRUE; << no longer needed */
4077     recipient = parse_extract_address(recipient, &errmess, &start, &end,
4078       &recipient_domain, FALSE);
4079     /* rfc821_domains = FALSE; << no longer needed */
4080
4081     if (recipient == NULL)
4082       {
4083       done = synprot_error(L_smtp_syntax_error, 501, smtp_cmd_data, errmess);
4084       rcpt_fail_count++;
4085       break;
4086       }
4087
4088     /* If the recipient address is unqualified, reject it, unless this is a
4089     locally generated message. However, unqualified addresses are permitted
4090     from a configured list of hosts and nets - typically when behaving as
4091     MUAs rather than MTAs. Sad that SMTP is used for both types of traffic,
4092     really. The flag is set at the start of the SMTP connection.
4093
4094     RFC 1123 talks about supporting "the reserved mailbox postmaster"; I always
4095     assumed this meant "reserved local part", but the revision of RFC 821 and
4096     friends now makes it absolutely clear that it means *mailbox*. Consequently
4097     we must always qualify this address, regardless. */
4098
4099     if (recipient_domain == 0)
4100       {
4101       if (allow_unqualified_recipient ||
4102           strcmpic(recipient, US"postmaster") == 0)
4103         {
4104         DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
4105           recipient);
4106         recipient_domain = Ustrlen(recipient) + 1;
4107         recipient = rewrite_address_qualify(recipient, TRUE);
4108         }
4109       else
4110         {
4111         rcpt_fail_count++;
4112         smtp_printf("501 %s: recipient address must contain a domain\r\n",
4113           smtp_cmd_data);
4114         log_write(L_smtp_syntax_error,
4115           LOG_MAIN|LOG_REJECT, "unqualified recipient rejected: "
4116           "<%s> %s%s", recipient, host_and_ident(TRUE),
4117           host_lookup_msg);
4118         break;
4119         }
4120       }
4121
4122     /* Check maximum allowed */
4123
4124     if (rcpt_count > recipients_max && recipients_max > 0)
4125       {
4126       if (recipients_max_reject)
4127         {
4128         rcpt_fail_count++;
4129         smtp_printf("552 too many recipients\r\n");
4130         if (!toomany)
4131           log_write(0, LOG_MAIN|LOG_REJECT, "too many recipients: message "
4132             "rejected: sender=<%s> %s", sender_address, host_and_ident(TRUE));
4133         }
4134       else
4135         {
4136         rcpt_defer_count++;
4137         smtp_printf("452 too many recipients\r\n");
4138         if (!toomany)
4139           log_write(0, LOG_MAIN|LOG_REJECT, "too many recipients: excess "
4140             "temporarily rejected: sender=<%s> %s", sender_address,
4141             host_and_ident(TRUE));
4142         }
4143
4144       toomany = TRUE;
4145       break;
4146       }
4147
4148     /* If we have passed the threshold for rate limiting, apply the current
4149     delay, and update it for next time, provided this is a limited host. */
4150
4151     if (rcpt_count > smtp_rlr_threshold &&
4152         verify_check_host(&smtp_ratelimit_hosts) == OK)
4153       {
4154       DEBUG(D_receive) debug_printf("rate limit RCPT: delay %.3g sec\n",
4155         smtp_delay_rcpt/1000.0);
4156       millisleep((int)smtp_delay_rcpt);
4157       smtp_delay_rcpt *= smtp_rlr_factor;
4158       if (smtp_delay_rcpt > (double)smtp_rlr_limit)
4159         smtp_delay_rcpt = (double)smtp_rlr_limit;
4160       }
4161
4162     /* If the MAIL ACL discarded all the recipients, we bypass ACL checking
4163     for them. Otherwise, check the access control list for this recipient. As
4164     there may be a delay in this, re-check for a synchronization error
4165     afterwards, unless pipelining was advertised. */
4166
4167     if (recipients_discarded) rc = DISCARD; else
4168       {
4169       rc = acl_check(ACL_WHERE_RCPT, recipient, acl_smtp_rcpt, &user_msg,
4170         &log_msg);
4171       if (rc == OK && !pipelining_advertised && !check_sync())
4172         goto SYNC_FAILURE;
4173       }
4174
4175     /* The ACL was happy */
4176
4177     if (rc == OK)
4178       {
4179       if (user_msg == NULL) smtp_printf("250 Accepted\r\n");
4180         else smtp_user_msg(US"250", user_msg);
4181       receive_add_recipient(recipient, -1);
4182       }
4183
4184     /* The recipient was discarded */
4185
4186     else if (rc == DISCARD)
4187       {
4188       if (user_msg == NULL) smtp_printf("250 Accepted\r\n");
4189         else smtp_user_msg(US"250", user_msg);
4190       rcpt_fail_count++;
4191       discarded = TRUE;
4192       log_write(0, LOG_MAIN|LOG_REJECT, "%s F=<%s> rejected RCPT %s: "
4193         "discarded by %s ACL%s%s", host_and_ident(TRUE),
4194         (sender_address_unrewritten != NULL)?
4195         sender_address_unrewritten : sender_address,
4196         smtp_cmd_argument, recipients_discarded? "MAIL" : "RCPT",
4197         (log_msg == NULL)? US"" : US": ",
4198         (log_msg == NULL)? US"" : log_msg);
4199       }
4200
4201     /* Either the ACL failed the address, or it was deferred. */
4202
4203     else
4204       {
4205       if (rc == FAIL) rcpt_fail_count++; else rcpt_defer_count++;
4206       done = smtp_handle_acl_fail(ACL_WHERE_RCPT, rc, user_msg, log_msg);
4207       }
4208     break;
4209
4210
4211     /* The DATA command is legal only if it follows successful MAIL FROM
4212     and RCPT TO commands. However, if pipelining is advertised, a bad DATA is
4213     not counted as a protocol error if it follows RCPT (which must have been
4214     rejected if there are no recipients.) This function is complete when a
4215     valid DATA command is encountered.
4216
4217     Note concerning the code used: RFC 2821 says this:
4218
4219      -  If there was no MAIL, or no RCPT, command, or all such commands
4220         were rejected, the server MAY return a "command out of sequence"
4221         (503) or "no valid recipients" (554) reply in response to the
4222         DATA command.
4223
4224     The example in the pipelining RFC 2920 uses 554, but I use 503 here
4225     because it is the same whether pipelining is in use or not.
4226
4227     If all the RCPT commands that precede DATA provoked the same error message
4228     (often indicating some kind of system error), it is helpful to include it
4229     with the DATA rejection (an idea suggested by Tony Finch). */
4230
4231     case DATA_CMD:
4232     HAD(SCH_DATA);
4233     if (!discarded && recipients_count <= 0)
4234       {
4235       if (rcpt_smtp_response_same && rcpt_smtp_response != NULL)
4236         {
4237         uschar *code = US"503";
4238         int len = Ustrlen(rcpt_smtp_response);
4239         smtp_respond(code, 3, FALSE, US"All RCPT commands were rejected with "
4240           "this error:");
4241         /* Responses from smtp_printf() will have \r\n on the end */
4242         if (len > 2 && rcpt_smtp_response[len-2] == '\r')
4243           rcpt_smtp_response[len-2] = 0;
4244         smtp_respond(code, 3, FALSE, rcpt_smtp_response);
4245         }
4246       if (pipelining_advertised && last_was_rcpt)
4247         smtp_printf("503 Valid RCPT command must precede DATA\r\n");
4248       else
4249         done = synprot_error(L_smtp_protocol_error, 503, NULL,
4250           US"valid RCPT command must precede DATA");
4251       break;
4252       }
4253
4254     if (toomany && recipients_max_reject)
4255       {
4256       sender_address = NULL;  /* This will allow a new MAIL without RSET */
4257       sender_address_unrewritten = NULL;
4258       smtp_printf("554 Too many recipients\r\n");
4259       break;
4260       }
4261
4262     /* If there is an ACL, re-check the synchronization afterwards, since the
4263     ACL may have delayed.  To handle cutthrough delivery enforce a dummy call
4264     to get the DATA command sent. */
4265
4266     if (acl_smtp_predata == NULL && cutthrough_fd < 0) rc = OK; else
4267       {
4268       uschar * acl= acl_smtp_predata ? acl_smtp_predata : US"accept";
4269       enable_dollar_recipients = TRUE;
4270       rc = acl_check(ACL_WHERE_PREDATA, NULL, acl, &user_msg,
4271         &log_msg);
4272       enable_dollar_recipients = FALSE;
4273       if (rc == OK && !check_sync()) goto SYNC_FAILURE;
4274       }
4275
4276     if (rc == OK)
4277       {
4278       uschar * code;
4279       code = US"354";
4280       if (user_msg == NULL)
4281         smtp_printf("%s Enter message, ending with \".\" on a line by itself\r\n", code);
4282       else smtp_user_msg(code, user_msg);
4283       done = 3;
4284       message_ended = END_NOTENDED;   /* Indicate in middle of data */
4285       }
4286
4287     /* Either the ACL failed the address, or it was deferred. */
4288
4289     else
4290       done = smtp_handle_acl_fail(ACL_WHERE_PREDATA, rc, user_msg, log_msg);
4291     break;
4292
4293
4294     case VRFY_CMD:
4295     HAD(SCH_VRFY);
4296     rc = acl_check(ACL_WHERE_VRFY, NULL, acl_smtp_vrfy, &user_msg, &log_msg);
4297     if (rc != OK)
4298       done = smtp_handle_acl_fail(ACL_WHERE_VRFY, rc, user_msg, log_msg);
4299     else
4300       {
4301       uschar *address;
4302       uschar *s = NULL;
4303
4304       /* rfc821_domains = TRUE; << no longer needed */
4305       address = parse_extract_address(smtp_cmd_data, &errmess, &start, &end,
4306         &recipient_domain, FALSE);
4307       /* rfc821_domains = FALSE; << no longer needed */
4308
4309       if (address == NULL)
4310         s = string_sprintf("501 %s", errmess);
4311       else
4312         {
4313         address_item *addr = deliver_make_addr(address, FALSE);
4314         switch(verify_address(addr, NULL, vopt_is_recipient | vopt_qualify, -1,
4315                -1, -1, NULL, NULL, NULL))
4316           {
4317           case OK:
4318           s = string_sprintf("250 <%s> is deliverable", address);
4319           break;
4320
4321           case DEFER:
4322           s = (addr->user_message != NULL)?
4323             string_sprintf("451 <%s> %s", address, addr->user_message) :
4324             string_sprintf("451 Cannot resolve <%s> at this time", address);
4325           break;
4326
4327           case FAIL:
4328           s = (addr->user_message != NULL)?
4329             string_sprintf("550 <%s> %s", address, addr->user_message) :
4330             string_sprintf("550 <%s> is not deliverable", address);
4331           log_write(0, LOG_MAIN, "VRFY failed for %s %s",
4332             smtp_cmd_argument, host_and_ident(TRUE));
4333           break;
4334           }
4335         }
4336
4337       smtp_printf("%s\r\n", s);
4338       }
4339     break;
4340
4341
4342     case EXPN_CMD:
4343     HAD(SCH_EXPN);
4344     rc = acl_check(ACL_WHERE_EXPN, NULL, acl_smtp_expn, &user_msg, &log_msg);
4345     if (rc != OK)
4346       done = smtp_handle_acl_fail(ACL_WHERE_EXPN, rc, user_msg, log_msg);
4347     else
4348       {
4349       BOOL save_log_testing_mode = log_testing_mode;
4350       address_test_mode = log_testing_mode = TRUE;
4351       (void) verify_address(deliver_make_addr(smtp_cmd_data, FALSE),
4352         smtp_out, vopt_is_recipient | vopt_qualify | vopt_expn, -1, -1, -1,
4353         NULL, NULL, NULL);
4354       address_test_mode = FALSE;
4355       log_testing_mode = save_log_testing_mode;    /* true for -bh */
4356       }
4357     break;
4358
4359
4360     #ifdef SUPPORT_TLS
4361
4362     case STARTTLS_CMD:
4363     HAD(SCH_STARTTLS);
4364     if (!tls_advertised)
4365       {
4366       done = synprot_error(L_smtp_protocol_error, 503, NULL,
4367         US"STARTTLS command used when not advertised");
4368       break;
4369       }
4370
4371     /* Apply an ACL check if one is defined */
4372
4373     if (acl_smtp_starttls != NULL)
4374       {
4375       rc = acl_check(ACL_WHERE_STARTTLS, NULL, acl_smtp_starttls, &user_msg,
4376         &log_msg);
4377       if (rc != OK)
4378         {
4379         done = smtp_handle_acl_fail(ACL_WHERE_STARTTLS, rc, user_msg, log_msg);
4380         break;
4381         }
4382       }
4383
4384     /* RFC 2487 is not clear on when this command may be sent, though it
4385     does state that all information previously obtained from the client
4386     must be discarded if a TLS session is started. It seems reasonble to
4387     do an implied RSET when STARTTLS is received. */
4388
4389     incomplete_transaction_log(US"STARTTLS");
4390     smtp_reset(reset_point);
4391     toomany = FALSE;
4392     cmd_list[CMD_LIST_STARTTLS].is_mail_cmd = FALSE;
4393
4394     /* There's an attack where more data is read in past the STARTTLS command
4395     before TLS is negotiated, then assumed to be part of the secure session
4396     when used afterwards; we use segregated input buffers, so are not
4397     vulnerable, but we want to note when it happens and, for sheer paranoia,
4398     ensure that the buffer is "wiped".
4399     Pipelining sync checks will normally have protected us too, unless disabled
4400     by configuration. */
4401
4402     if (receive_smtp_buffered())
4403       {
4404       DEBUG(D_any)
4405         debug_printf("Non-empty input buffer after STARTTLS; naive attack?");
4406       if (tls_in.active < 0)
4407         smtp_inend = smtp_inptr = smtp_inbuffer;
4408       /* and if TLS is already active, tls_server_start() should fail */
4409       }
4410
4411     /* There is nothing we value in the input buffer and if TLS is succesfully
4412     negotiated, we won't use this buffer again; if TLS fails, we'll just read
4413     fresh content into it.  The buffer contains arbitrary content from an
4414     untrusted remote source; eg: NOOP <shellcode>\r\nSTARTTLS\r\n
4415     It seems safest to just wipe away the content rather than leave it as a
4416     target to jump to. */
4417
4418     memset(smtp_inbuffer, 0, in_buffer_size);
4419
4420     /* Attempt to start up a TLS session, and if successful, discard all
4421     knowledge that was obtained previously. At least, that's what the RFC says,
4422     and that's what happens by default. However, in order to work round YAEB,
4423     there is an option to remember the esmtp state. Sigh.
4424
4425     We must allow for an extra EHLO command and an extra AUTH command after
4426     STARTTLS that don't add to the nonmail command count. */
4427
4428     if ((rc = tls_server_start(tls_require_ciphers)) == OK)
4429       {
4430       if (!tls_remember_esmtp)
4431         helo_seen = esmtp = auth_advertised = pipelining_advertised = FALSE;
4432       cmd_list[CMD_LIST_EHLO].is_mail_cmd = TRUE;
4433       cmd_list[CMD_LIST_AUTH].is_mail_cmd = TRUE;
4434       if (sender_helo_name != NULL)
4435         {
4436         store_free(sender_helo_name);
4437         sender_helo_name = NULL;
4438         host_build_sender_fullhost();  /* Rebuild */
4439         set_process_info("handling incoming TLS connection from %s",
4440           host_and_ident(FALSE));
4441         }
4442       received_protocol = (esmtp?
4443         protocols[pextend + pcrpted +
4444           ((sender_host_authenticated != NULL)? pauthed : 0)]
4445         :
4446         protocols[pnormal + pcrpted])
4447         +
4448         ((sender_host_address != NULL)? pnlocal : 0);
4449
4450       sender_host_authenticated = NULL;
4451       authenticated_id = NULL;
4452       sync_cmd_limit = NON_SYNC_CMD_NON_PIPELINING;
4453       DEBUG(D_tls) debug_printf("TLS active\n");
4454       break;     /* Successful STARTTLS */
4455       }
4456
4457     /* Some local configuration problem was discovered before actually trying
4458     to do a TLS handshake; give a temporary error. */
4459
4460     else if (rc == DEFER)
4461       {
4462       smtp_printf("454 TLS currently unavailable\r\n");
4463       break;
4464       }
4465
4466     /* Hard failure. Reject everything except QUIT or closed connection. One
4467     cause for failure is a nested STARTTLS, in which case tls_in.active remains
4468     set, but we must still reject all incoming commands. */
4469
4470     DEBUG(D_tls) debug_printf("TLS failed to start\n");
4471     while (done <= 0)
4472       {
4473       switch(smtp_read_command(FALSE))
4474         {
4475         case EOF_CMD:
4476         log_write(L_smtp_connection, LOG_MAIN, "%s closed by EOF",
4477           smtp_get_connection_info());
4478         smtp_notquit_exit(US"tls-failed", NULL, NULL);
4479         done = 2;
4480         break;
4481
4482         /* It is perhaps arguable as to which exit ACL should be called here,
4483         but as it is probably a situation that almost never arises, it
4484         probably doesn't matter. We choose to call the real QUIT ACL, which in
4485         some sense is perhaps "right". */
4486
4487         case QUIT_CMD:
4488         user_msg = NULL;
4489         if (acl_smtp_quit != NULL)
4490           {
4491           rc = acl_check(ACL_WHERE_QUIT, NULL, acl_smtp_quit, &user_msg,
4492             &log_msg);
4493           if (rc == ERROR)
4494             log_write(0, LOG_MAIN|LOG_PANIC, "ACL for QUIT returned ERROR: %s",
4495               log_msg);
4496           }
4497         if (user_msg == NULL)
4498           smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
4499         else
4500           smtp_respond(US"221", 3, TRUE, user_msg);
4501         log_write(L_smtp_connection, LOG_MAIN, "%s closed by QUIT",
4502           smtp_get_connection_info());
4503         done = 2;
4504         break;
4505
4506         default:
4507         smtp_printf("554 Security failure\r\n");
4508         break;
4509         }
4510       }
4511     tls_close(TRUE, TRUE);
4512     break;
4513     #endif
4514
4515
4516     /* The ACL for QUIT is provided for gathering statistical information or
4517     similar; it does not affect the response code, but it can supply a custom
4518     message. */
4519
4520     case QUIT_CMD:
4521     HAD(SCH_QUIT);
4522     incomplete_transaction_log(US"QUIT");
4523     if (acl_smtp_quit != NULL)
4524       {
4525       rc = acl_check(ACL_WHERE_QUIT, NULL, acl_smtp_quit, &user_msg, &log_msg);
4526       if (rc == ERROR)
4527         log_write(0, LOG_MAIN|LOG_PANIC, "ACL for QUIT returned ERROR: %s",
4528           log_msg);
4529       }
4530     if (user_msg == NULL)
4531       smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
4532     else
4533       smtp_respond(US"221", 3, TRUE, user_msg);
4534
4535     #ifdef SUPPORT_TLS
4536     tls_close(TRUE, TRUE);
4537     #endif
4538
4539     done = 2;
4540     log_write(L_smtp_connection, LOG_MAIN, "%s closed by QUIT",
4541       smtp_get_connection_info());
4542     break;
4543
4544
4545     case RSET_CMD:
4546     HAD(SCH_RSET);
4547     incomplete_transaction_log(US"RSET");
4548     smtp_reset(reset_point);
4549     toomany = FALSE;
4550     smtp_printf("250 Reset OK\r\n");
4551     cmd_list[CMD_LIST_RSET].is_mail_cmd = FALSE;
4552     break;
4553
4554
4555     case NOOP_CMD:
4556     HAD(SCH_NOOP);
4557     smtp_printf("250 OK\r\n");
4558     break;
4559
4560
4561     /* Show ETRN/EXPN/VRFY if there's an ACL for checking hosts; if actually
4562     used, a check will be done for permitted hosts. Show STARTTLS only if not
4563     already in a TLS session and if it would be advertised in the EHLO
4564     response. */
4565
4566     case HELP_CMD:
4567     HAD(SCH_HELP);
4568     smtp_printf("214-Commands supported:\r\n");
4569       {
4570       uschar buffer[256];
4571       buffer[0] = 0;
4572       Ustrcat(buffer, " AUTH");
4573       #ifdef SUPPORT_TLS
4574       if (tls_in.active < 0 &&
4575           verify_check_host(&tls_advertise_hosts) != FAIL)
4576         Ustrcat(buffer, " STARTTLS");
4577       #endif
4578       Ustrcat(buffer, " HELO EHLO MAIL RCPT DATA");
4579       Ustrcat(buffer, " NOOP QUIT RSET HELP");
4580       if (acl_smtp_etrn != NULL) Ustrcat(buffer, " ETRN");
4581       if (acl_smtp_expn != NULL) Ustrcat(buffer, " EXPN");
4582       if (acl_smtp_vrfy != NULL) Ustrcat(buffer, " VRFY");
4583       smtp_printf("214%s\r\n", buffer);
4584       }
4585     break;
4586
4587
4588     case EOF_CMD:
4589     incomplete_transaction_log(US"connection lost");
4590     smtp_notquit_exit(US"connection-lost", US"421",
4591       US"%s lost input connection", smtp_active_hostname);
4592
4593     /* Don't log by default unless in the middle of a message, as some mailers
4594     just drop the call rather than sending QUIT, and it clutters up the logs.
4595     */
4596
4597     if (sender_address != NULL || recipients_count > 0)
4598       log_write(L_lost_incoming_connection,
4599           LOG_MAIN,
4600           "unexpected %s while reading SMTP command from %s%s",
4601           sender_host_unknown? "EOF" : "disconnection",
4602           host_and_ident(FALSE), smtp_read_error);
4603
4604     else log_write(L_smtp_connection, LOG_MAIN, "%s lost%s",
4605       smtp_get_connection_info(), smtp_read_error);
4606
4607     done = 1;
4608     break;
4609
4610
4611     case ETRN_CMD:
4612     HAD(SCH_ETRN);
4613     if (sender_address != NULL)
4614       {
4615       done = synprot_error(L_smtp_protocol_error, 503, NULL,
4616         US"ETRN is not permitted inside a transaction");
4617       break;
4618       }
4619
4620     log_write(L_etrn, LOG_MAIN, "ETRN %s received from %s", smtp_cmd_argument,
4621       host_and_ident(FALSE));
4622
4623     rc = acl_check(ACL_WHERE_ETRN, NULL, acl_smtp_etrn, &user_msg, &log_msg);
4624     if (rc != OK)
4625       {
4626       done = smtp_handle_acl_fail(ACL_WHERE_ETRN, rc, user_msg, log_msg);
4627       break;
4628       }
4629
4630     /* Compute the serialization key for this command. */
4631
4632     etrn_serialize_key = string_sprintf("etrn-%s\n", smtp_cmd_data);
4633
4634     /* If a command has been specified for running as a result of ETRN, we
4635     permit any argument to ETRN. If not, only the # standard form is permitted,
4636     since that is strictly the only kind of ETRN that can be implemented
4637     according to the RFC. */
4638
4639     if (smtp_etrn_command != NULL)
4640       {
4641       uschar *error;
4642       BOOL rc;
4643       etrn_command = smtp_etrn_command;
4644       deliver_domain = smtp_cmd_data;
4645       rc = transport_set_up_command(&argv, smtp_etrn_command, TRUE, 0, NULL,
4646         US"ETRN processing", &error);
4647       deliver_domain = NULL;
4648       if (!rc)
4649         {
4650         log_write(0, LOG_MAIN|LOG_PANIC, "failed to set up ETRN command: %s",
4651           error);
4652         smtp_printf("458 Internal failure\r\n");
4653         break;
4654         }
4655       }
4656
4657     /* Else set up to call Exim with the -R option. */
4658
4659     else
4660       {
4661       if (*smtp_cmd_data++ != '#')
4662         {
4663         done = synprot_error(L_smtp_syntax_error, 501, NULL,
4664           US"argument must begin with #");
4665         break;
4666         }
4667       etrn_command = US"exim -R";
4668       argv = child_exec_exim(CEE_RETURN_ARGV, TRUE, NULL, TRUE, 2, US"-R",
4669         smtp_cmd_data);
4670       }
4671
4672     /* If we are host-testing, don't actually do anything. */
4673
4674     if (host_checking)
4675       {
4676       HDEBUG(D_any)
4677         {
4678         debug_printf("ETRN command is: %s\n", etrn_command);
4679         debug_printf("ETRN command execution skipped\n");
4680         }
4681       if (user_msg == NULL) smtp_printf("250 OK\r\n");
4682         else smtp_user_msg(US"250", user_msg);
4683       break;
4684       }
4685
4686
4687     /* If ETRN queue runs are to be serialized, check the database to
4688     ensure one isn't already running. */
4689
4690     if (smtp_etrn_serialize && !enq_start(etrn_serialize_key))
4691       {
4692       smtp_printf("458 Already processing %s\r\n", smtp_cmd_data);
4693       break;
4694       }
4695
4696     /* Fork a child process and run the command. We don't want to have to
4697     wait for the process at any point, so set SIGCHLD to SIG_IGN before
4698     forking. It should be set that way anyway for external incoming SMTP,
4699     but we save and restore to be tidy. If serialization is required, we
4700     actually run the command in yet another process, so we can wait for it
4701     to complete and then remove the serialization lock. */
4702
4703     oldsignal = signal(SIGCHLD, SIG_IGN);
4704
4705     if ((pid = fork()) == 0)
4706       {
4707       smtp_input = FALSE;       /* This process is not associated with the */
4708       (void)fclose(smtp_in);    /* SMTP call any more. */
4709       (void)fclose(smtp_out);
4710
4711       signal(SIGCHLD, SIG_DFL);      /* Want to catch child */
4712
4713       /* If not serializing, do the exec right away. Otherwise, fork down
4714       into another process. */
4715
4716       if (!smtp_etrn_serialize || (pid = fork()) == 0)
4717         {
4718         DEBUG(D_exec) debug_print_argv(argv);
4719         exim_nullstd();                   /* Ensure std{in,out,err} exist */
4720         execv(CS argv[0], (char *const *)argv);
4721         log_write(0, LOG_MAIN|LOG_PANIC_DIE, "exec of \"%s\" (ETRN) failed: %s",
4722           etrn_command, strerror(errno));
4723         _exit(EXIT_FAILURE);         /* paranoia */
4724         }
4725
4726       /* Obey this if smtp_serialize and the 2nd fork yielded non-zero. That
4727       is, we are in the first subprocess, after forking again. All we can do
4728       for a failing fork is to log it. Otherwise, wait for the 2nd process to
4729       complete, before removing the serialization. */
4730
4731       if (pid < 0)
4732         log_write(0, LOG_MAIN|LOG_PANIC, "2nd fork for serialized ETRN "
4733           "failed: %s", strerror(errno));
4734       else
4735         {
4736         int status;
4737         DEBUG(D_any) debug_printf("waiting for serialized ETRN process %d\n",
4738           (int)pid);
4739         (void)wait(&status);
4740         DEBUG(D_any) debug_printf("serialized ETRN process %d ended\n",
4741           (int)pid);
4742         }
4743
4744       enq_end(etrn_serialize_key);
4745       _exit(EXIT_SUCCESS);
4746       }
4747
4748     /* Back in the top level SMTP process. Check that we started a subprocess
4749     and restore the signal state. */
4750
4751     if (pid < 0)
4752       {
4753       log_write(0, LOG_MAIN|LOG_PANIC, "fork of process for ETRN failed: %s",
4754         strerror(errno));
4755       smtp_printf("458 Unable to fork process\r\n");
4756       if (smtp_etrn_serialize) enq_end(etrn_serialize_key);
4757       }
4758     else
4759       {
4760       if (user_msg == NULL) smtp_printf("250 OK\r\n");
4761         else smtp_user_msg(US"250", user_msg);
4762       }
4763
4764     signal(SIGCHLD, oldsignal);
4765     break;
4766
4767
4768     case BADARG_CMD:
4769     done = synprot_error(L_smtp_syntax_error, 501, NULL,
4770       US"unexpected argument data");
4771     break;
4772
4773
4774     /* This currently happens only for NULLs, but could be extended. */
4775
4776     case BADCHAR_CMD:
4777     done = synprot_error(L_smtp_syntax_error, 0, NULL,       /* Just logs */
4778       US"NULL character(s) present (shown as '?')");
4779     smtp_printf("501 NULL characters are not allowed in SMTP commands\r\n");
4780     break;
4781
4782
4783     case BADSYN_CMD:
4784     SYNC_FAILURE:
4785     if (smtp_inend >= smtp_inbuffer + in_buffer_size)
4786       smtp_inend = smtp_inbuffer + in_buffer_size - 1;
4787     c = smtp_inend - smtp_inptr;
4788     if (c > 150) c = 150;
4789     smtp_inptr[c] = 0;
4790     incomplete_transaction_log(US"sync failure");
4791     log_write(0, LOG_MAIN|LOG_REJECT, "SMTP protocol synchronization error "
4792       "(next input sent too soon: pipelining was%s advertised): "
4793       "rejected \"%s\" %s next input=\"%s\"",
4794       pipelining_advertised? "" : " not",
4795       smtp_cmd_buffer, host_and_ident(TRUE),
4796       string_printing(smtp_inptr));
4797     smtp_notquit_exit(US"synchronization-error", US"554",
4798       US"SMTP synchronization error");
4799     done = 1;   /* Pretend eof - drops connection */
4800     break;
4801
4802
4803     case TOO_MANY_NONMAIL_CMD:
4804     s = smtp_cmd_buffer;
4805     while (*s != 0 && !isspace(*s)) s++;
4806     incomplete_transaction_log(US"too many non-mail commands");
4807     log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
4808       "nonmail commands (last was \"%.*s\")",  host_and_ident(FALSE),
4809       (int)(s - smtp_cmd_buffer), smtp_cmd_buffer);
4810     smtp_notquit_exit(US"bad-commands", US"554", US"Too many nonmail commands");
4811     done = 1;   /* Pretend eof - drops connection */
4812     break;
4813
4814     #ifdef EXPERIMENTAL_PROXY
4815     case PROXY_FAIL_IGNORE_CMD:
4816     smtp_printf("503 Command refused, required Proxy negotiation failed\r\n");
4817     break;
4818     #endif
4819
4820     default:
4821     if (unknown_command_count++ >= smtp_max_unknown_commands)
4822       {
4823       log_write(L_smtp_syntax_error, LOG_MAIN,
4824         "SMTP syntax error in \"%s\" %s %s",
4825         string_printing(smtp_cmd_buffer), host_and_ident(TRUE),
4826         US"unrecognized command");
4827       incomplete_transaction_log(US"unrecognized command");
4828       smtp_notquit_exit(US"bad-commands", US"500",
4829         US"Too many unrecognized commands");
4830       done = 2;
4831       log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
4832         "unrecognized commands (last was \"%s\")", host_and_ident(FALSE),
4833         smtp_cmd_buffer);
4834       }
4835     else
4836       done = synprot_error(L_smtp_syntax_error, 500, NULL,
4837         US"unrecognized command");
4838     break;
4839     }
4840
4841   /* This label is used by goto's inside loops that want to break out to
4842   the end of the command-processing loop. */
4843
4844   COMMAND_LOOP:
4845   last_was_rej_mail = was_rej_mail;     /* Remember some last commands for */
4846   last_was_rcpt = was_rcpt;             /* protocol error handling */
4847   continue;
4848   }
4849
4850 return done - 2;  /* Convert yield values */
4851 }
4852
4853 /* vi: aw ai sw=2
4854 */
4855 /* End of smtp_in.c */