tidying
[exim.git] / src / src / smtp_in.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2017 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8 /* Functions for handling an incoming SMTP call. */
9
10
11 #include "exim.h"
12 #include <assert.h>
13
14
15 /* Initialize for TCP wrappers if so configured. It appears that the macro
16 HAVE_IPV6 is used in some versions of the tcpd.h header, so we unset it before
17 including that header, and restore its value afterwards. */
18
19 #ifdef USE_TCP_WRAPPERS
20
21   #if HAVE_IPV6
22   #define EXIM_HAVE_IPV6
23   #endif
24   #undef HAVE_IPV6
25   #include <tcpd.h>
26   #undef HAVE_IPV6
27   #ifdef EXIM_HAVE_IPV6
28   #define HAVE_IPV6 TRUE
29   #endif
30
31 int allow_severity = LOG_INFO;
32 int deny_severity  = LOG_NOTICE;
33 uschar *tcp_wrappers_name;
34 #endif
35
36
37 /* Size of buffer for reading SMTP commands. We used to use 512, as defined
38 by RFC 821. However, RFC 1869 specifies that this must be increased for SMTP
39 commands that accept arguments, and this in particular applies to AUTH, where
40 the data can be quite long.  More recently this value was 2048 in Exim;
41 however, RFC 4954 (circa 2007) recommends 12288 bytes to handle AUTH.  Clients
42 such as Thunderbird will send an AUTH with an initial-response for GSSAPI.
43 The maximum size of a Kerberos ticket under Windows 2003 is 12000 bytes, and
44 we need room to handle large base64-encoded AUTHs for GSSAPI.
45 */
46
47 #define SMTP_CMD_BUFFER_SIZE  16384
48
49 /* Size of buffer for reading SMTP incoming packets */
50
51 #define IN_BUFFER_SIZE  8192
52
53 /* Structure for SMTP command list */
54
55 typedef struct {
56   const char *name;
57   int len;
58   short int cmd;
59   short int has_arg;
60   short int is_mail_cmd;
61 } smtp_cmd_list;
62
63 /* Codes for identifying commands. We order them so that those that come first
64 are those for which synchronization is always required. Checking this can help
65 block some spam.  */
66
67 enum {
68   /* These commands are required to be synchronized, i.e. to be the last in a
69   block of commands when pipelining. */
70
71   HELO_CMD, EHLO_CMD, DATA_CMD, /* These are listed in the pipelining */
72   VRFY_CMD, EXPN_CMD, NOOP_CMD, /* RFC as requiring synchronization */
73   ETRN_CMD,                     /* This by analogy with TURN from the RFC */
74   STARTTLS_CMD,                 /* Required by the STARTTLS RFC */
75   TLS_AUTH_CMD,                 /* auto-command at start of SSL */
76
77   /* This is a dummy to identify the non-sync commands when pipelining */
78
79   NON_SYNC_CMD_PIPELINING,
80
81   /* These commands need not be synchronized when pipelining */
82
83   MAIL_CMD, RCPT_CMD, RSET_CMD,
84
85   /* This is a dummy to identify the non-sync commands when not pipelining */
86
87   NON_SYNC_CMD_NON_PIPELINING,
88
89   /* RFC3030 section 2: "After all MAIL and RCPT responses are collected and
90   processed the message is sent using a series of BDAT commands"
91   implies that BDAT should be synchronized.  However, we see Google, at least,
92   sending MAIL,RCPT,BDAT-LAST in a single packet, clearly not waiting for
93   processing of the RCPT response(s).  We shall do the same, and not require
94   synch for BDAT.  Worse, as the chunk may (very likely will) follow the
95   command-header in the same packet we cannot do the usual "is there any
96   follow-on data after the command line" even for non-pipeline mode.
97   So we'll need an explicit check after reading the expected chunk amount
98   when non-pipe, before sending the ACK. */
99
100   BDAT_CMD,
101
102   /* I have been unable to find a statement about the use of pipelining
103   with AUTH, so to be on the safe side it is here, though I kind of feel
104   it should be up there with the synchronized commands. */
105
106   AUTH_CMD,
107
108   /* I'm not sure about these, but I don't think they matter. */
109
110   QUIT_CMD, HELP_CMD,
111
112 #ifdef SUPPORT_PROXY
113   PROXY_FAIL_IGNORE_CMD,
114 #endif
115
116   /* These are specials that don't correspond to actual commands */
117
118   EOF_CMD, OTHER_CMD, BADARG_CMD, BADCHAR_CMD, BADSYN_CMD,
119   TOO_MANY_NONMAIL_CMD };
120
121
122 /* This is a convenience macro for adding the identity of an SMTP command
123 to the circular buffer that holds a list of the last n received. */
124
125 #define HAD(n) \
126     smtp_connection_had[smtp_ch_index++] = n; \
127     if (smtp_ch_index >= SMTP_HBUFF_SIZE) smtp_ch_index = 0
128
129
130 /*************************************************
131 *                Local static variables          *
132 *************************************************/
133
134 static auth_instance *authenticated_by;
135 static BOOL auth_advertised;
136 #ifdef SUPPORT_TLS
137 static BOOL tls_advertised;
138 #endif
139 static BOOL dsn_advertised;
140 static BOOL esmtp;
141 static BOOL helo_required = FALSE;
142 static BOOL helo_verify = FALSE;
143 static BOOL helo_seen;
144 static BOOL helo_accept_junk;
145 static BOOL count_nonmail;
146 static BOOL pipelining_advertised;
147 static BOOL rcpt_smtp_response_same;
148 static BOOL rcpt_in_progress;
149 static int  nonmail_command_count;
150 static BOOL smtp_exit_function_called = 0;
151 #ifdef SUPPORT_I18N
152 static BOOL smtputf8_advertised;
153 #endif
154 static int  synprot_error_count;
155 static int  unknown_command_count;
156 static int  sync_cmd_limit;
157 static int  smtp_write_error = 0;
158
159 static uschar *rcpt_smtp_response;
160 static uschar *smtp_data_buffer;
161 static uschar *smtp_cmd_data;
162
163 /* We need to know the position of RSET, HELO, EHLO, AUTH, and STARTTLS. Their
164 final fields of all except AUTH are forced TRUE at the start of a new message
165 setup, to allow one of each between messages that is not counted as a nonmail
166 command. (In fact, only one of HELO/EHLO is not counted.) Also, we have to
167 allow a new EHLO after starting up TLS.
168
169 AUTH is "falsely" labelled as a mail command initially, so that it doesn't get
170 counted. However, the flag is changed when AUTH is received, so that multiple
171 failing AUTHs will eventually hit the limit. After a successful AUTH, another
172 AUTH is already forbidden. After a TLS session is started, AUTH's flag is again
173 forced TRUE, to allow for the re-authentication that can happen at that point.
174
175 QUIT is also "falsely" labelled as a mail command so that it doesn't up the
176 count of non-mail commands and possibly provoke an error.
177
178 tls_auth is a pseudo-command, never expected in input.  It is activated
179 on TLS startup and looks for a tls authenticator. */
180
181 static smtp_cmd_list cmd_list[] = {
182   /* name         len                     cmd     has_arg is_mail_cmd */
183
184   { "rset",       sizeof("rset")-1,       RSET_CMD, FALSE, FALSE },  /* First */
185   { "helo",       sizeof("helo")-1,       HELO_CMD, TRUE,  FALSE },
186   { "ehlo",       sizeof("ehlo")-1,       EHLO_CMD, TRUE,  FALSE },
187   { "auth",       sizeof("auth")-1,       AUTH_CMD, TRUE,  TRUE  },
188   #ifdef SUPPORT_TLS
189   { "starttls",   sizeof("starttls")-1,   STARTTLS_CMD, FALSE, FALSE },
190   { "tls_auth",   0,                      TLS_AUTH_CMD, FALSE, TRUE },
191   #endif
192
193 /* If you change anything above here, also fix the definitions below. */
194
195   { "mail from:", sizeof("mail from:")-1, MAIL_CMD, TRUE,  TRUE  },
196   { "rcpt to:",   sizeof("rcpt to:")-1,   RCPT_CMD, TRUE,  TRUE  },
197   { "data",       sizeof("data")-1,       DATA_CMD, FALSE, TRUE  },
198   { "bdat",       sizeof("bdat")-1,       BDAT_CMD, TRUE,  TRUE  },
199   { "quit",       sizeof("quit")-1,       QUIT_CMD, FALSE, TRUE  },
200   { "noop",       sizeof("noop")-1,       NOOP_CMD, TRUE,  FALSE },
201   { "etrn",       sizeof("etrn")-1,       ETRN_CMD, TRUE,  FALSE },
202   { "vrfy",       sizeof("vrfy")-1,       VRFY_CMD, TRUE,  FALSE },
203   { "expn",       sizeof("expn")-1,       EXPN_CMD, TRUE,  FALSE },
204   { "help",       sizeof("help")-1,       HELP_CMD, TRUE,  FALSE }
205 };
206
207 static smtp_cmd_list *cmd_list_end =
208   cmd_list + sizeof(cmd_list)/sizeof(smtp_cmd_list);
209
210 #define CMD_LIST_RSET      0
211 #define CMD_LIST_HELO      1
212 #define CMD_LIST_EHLO      2
213 #define CMD_LIST_AUTH      3
214 #define CMD_LIST_STARTTLS  4
215 #define CMD_LIST_TLS_AUTH  5
216
217 /* This list of names is used for performing the smtp_no_mail logging action.
218 It must be kept in step with the SCH_xxx enumerations. */
219
220 static uschar *smtp_names[] =
221   {
222   US"NONE", US"AUTH", US"DATA", US"BDAT", US"EHLO", US"ETRN", US"EXPN",
223   US"HELO", US"HELP", US"MAIL", US"NOOP", US"QUIT", US"RCPT", US"RSET",
224   US"STARTTLS", US"VRFY" };
225
226 static uschar *protocols_local[] = {
227   US"local-smtp",        /* HELO */
228   US"local-smtps",       /* The rare case EHLO->STARTTLS->HELO */
229   US"local-esmtp",       /* EHLO */
230   US"local-esmtps",      /* EHLO->STARTTLS->EHLO */
231   US"local-esmtpa",      /* EHLO->AUTH */
232   US"local-esmtpsa"      /* EHLO->STARTTLS->EHLO->AUTH */
233   };
234 static uschar *protocols[] = {
235   US"smtp",              /* HELO */
236   US"smtps",             /* The rare case EHLO->STARTTLS->HELO */
237   US"esmtp",             /* EHLO */
238   US"esmtps",            /* EHLO->STARTTLS->EHLO */
239   US"esmtpa",            /* EHLO->AUTH */
240   US"esmtpsa"            /* EHLO->STARTTLS->EHLO->AUTH */
241   };
242
243 #define pnormal  0
244 #define pextend  2
245 #define pcrpted  1  /* added to pextend or pnormal */
246 #define pauthed  2  /* added to pextend */
247
248 /* Sanity check and validate optional args to MAIL FROM: envelope */
249 enum {
250   ENV_MAIL_OPT_NULL,
251   ENV_MAIL_OPT_SIZE, ENV_MAIL_OPT_BODY, ENV_MAIL_OPT_AUTH,
252 #ifndef DISABLE_PRDR
253   ENV_MAIL_OPT_PRDR,
254 #endif
255   ENV_MAIL_OPT_RET, ENV_MAIL_OPT_ENVID,
256 #ifdef SUPPORT_I18N
257   ENV_MAIL_OPT_UTF8,
258 #endif
259   };
260 typedef struct {
261   uschar *   name;  /* option requested during MAIL cmd */
262   int       value;  /* enum type */
263   BOOL need_value;  /* TRUE requires value (name=value pair format)
264                        FALSE is a singleton */
265   } env_mail_type_t;
266 static env_mail_type_t env_mail_type_list[] = {
267     { US"SIZE",   ENV_MAIL_OPT_SIZE,   TRUE  },
268     { US"BODY",   ENV_MAIL_OPT_BODY,   TRUE  },
269     { US"AUTH",   ENV_MAIL_OPT_AUTH,   TRUE  },
270 #ifndef DISABLE_PRDR
271     { US"PRDR",   ENV_MAIL_OPT_PRDR,   FALSE },
272 #endif
273     { US"RET",    ENV_MAIL_OPT_RET,    TRUE },
274     { US"ENVID",  ENV_MAIL_OPT_ENVID,  TRUE },
275 #ifdef SUPPORT_I18N
276     { US"SMTPUTF8",ENV_MAIL_OPT_UTF8,  FALSE },         /* rfc6531 */
277 #endif
278     /* keep this the last entry */
279     { US"NULL",   ENV_MAIL_OPT_NULL,   FALSE },
280   };
281
282 /* When reading SMTP from a remote host, we have to use our own versions of the
283 C input-reading functions, in order to be able to flush the SMTP output only
284 when about to read more data from the socket. This is the only way to get
285 optimal performance when the client is using pipelining. Flushing for every
286 command causes a separate packet and reply packet each time; saving all the
287 responses up (when pipelining) combines them into one packet and one response.
288
289 For simplicity, these functions are used for *all* SMTP input, not only when
290 receiving over a socket. However, after setting up a secure socket (SSL), input
291 is read via the OpenSSL library, and another set of functions is used instead
292 (see tls.c).
293
294 These functions are set in the receive_getc etc. variables and called with the
295 same interface as the C functions. However, since there can only ever be
296 one incoming SMTP call, we just use a single buffer and flags. There is no need
297 to implement a complicated private FILE-like structure.*/
298
299 static uschar *smtp_inbuffer;
300 static uschar *smtp_inptr;
301 static uschar *smtp_inend;
302 static int     smtp_had_eof;
303 static int     smtp_had_error;
304
305
306 /* forward declarations */
307 static int smtp_read_command(BOOL check_sync, unsigned buffer_lim);
308 static int synprot_error(int type, int code, uschar *data, uschar *errmess);
309 static void smtp_quit_handler(uschar **, uschar **);
310 static void smtp_rset_handler(void);
311
312 /*************************************************
313 *          Recheck synchronization               *
314 *************************************************/
315
316 /* Synchronization checks can never be perfect because a packet may be on its
317 way but not arrived when the check is done. Such checks can in any case only be
318 done when TLS is not in use. Normally, the checks happen when commands are
319 read: Exim ensures that there is no more input in the input buffer. In normal
320 cases, the response to the command will be fast, and there is no further check.
321
322 However, for some commands an ACL is run, and that can include delays. In those
323 cases, it is useful to do another check on the input just before sending the
324 response. This also applies at the start of a connection. This function does
325 that check by means of the select() function, as long as the facility is not
326 disabled or inappropriate. A failure of select() is ignored.
327
328 When there is unwanted input, we read it so that it appears in the log of the
329 error.
330
331 Arguments: none
332 Returns:   TRUE if all is well; FALSE if there is input pending
333 */
334
335 static BOOL
336 check_sync(void)
337 {
338 int fd, rc;
339 fd_set fds;
340 struct timeval tzero;
341
342 if (!smtp_enforce_sync || sender_host_address == NULL ||
343     sender_host_notsocket || tls_in.active >= 0)
344   return TRUE;
345
346 fd = fileno(smtp_in);
347 FD_ZERO(&fds);
348 FD_SET(fd, &fds);
349 tzero.tv_sec = 0;
350 tzero.tv_usec = 0;
351 rc = select(fd + 1, (SELECT_ARG2_TYPE *)&fds, NULL, NULL, &tzero);
352
353 if (rc <= 0) return TRUE;     /* Not ready to read */
354 rc = smtp_getc(GETC_BUFFER_UNLIMITED);
355 if (rc < 0) return TRUE;      /* End of file or error */
356
357 smtp_ungetc(rc);
358 rc = smtp_inend - smtp_inptr;
359 if (rc > 150) rc = 150;
360 smtp_inptr[rc] = 0;
361 return FALSE;
362 }
363
364
365
366 /*************************************************
367 *          Log incomplete transactions           *
368 *************************************************/
369
370 /* This function is called after a transaction has been aborted by RSET, QUIT,
371 connection drops or other errors. It logs the envelope information received
372 so far in order to preserve address verification attempts.
373
374 Argument:   string to indicate what aborted the transaction
375 Returns:    nothing
376 */
377
378 static void
379 incomplete_transaction_log(uschar *what)
380 {
381 if (sender_address == NULL ||                 /* No transaction in progress */
382     !LOGGING(smtp_incomplete_transaction))
383   return;
384
385 /* Build list of recipients for logging */
386
387 if (recipients_count > 0)
388   {
389   int i;
390   raw_recipients = store_get(recipients_count * sizeof(uschar *));
391   for (i = 0; i < recipients_count; i++)
392     raw_recipients[i] = recipients_list[i].address;
393   raw_recipients_count = recipients_count;
394   }
395
396 log_write(L_smtp_incomplete_transaction, LOG_MAIN|LOG_SENDER|LOG_RECIPIENTS,
397   "%s incomplete transaction (%s)", host_and_ident(TRUE), what);
398 }
399
400
401
402
403 /*************************************************
404 *          SMTP version of getc()                *
405 *************************************************/
406
407 /* This gets the next byte from the SMTP input buffer. If the buffer is empty,
408 it flushes the output, and refills the buffer, with a timeout. The signal
409 handler is set appropriately by the calling function. This function is not used
410 after a connection has negotiated itself into an TLS/SSL state.
411
412 Arguments:  lim         Maximum amount to read/buffer
413 Returns:    the next character or EOF
414 */
415
416 int
417 smtp_getc(unsigned lim)
418 {
419 if (smtp_inptr >= smtp_inend)
420   {
421   int rc, save_errno;
422   if (!smtp_out) return EOF;
423   fflush(smtp_out);
424   if (smtp_receive_timeout > 0) alarm(smtp_receive_timeout);
425
426   /* Limit amount read, so non-message data is not fed to DKIM */
427
428   rc = read(fileno(smtp_in), smtp_inbuffer, MIN(IN_BUFFER_SIZE, lim));
429   save_errno = errno;
430   alarm(0);
431   if (rc <= 0)
432     {
433     /* Must put the error text in fixed store, because this might be during
434     header reading, where it releases unused store above the header. */
435     if (rc < 0)
436       {
437       smtp_had_error = save_errno;
438       smtp_read_error = string_copy_malloc(
439         string_sprintf(" (error: %s)", strerror(save_errno)));
440       }
441     else smtp_had_eof = 1;
442     return EOF;
443     }
444 #ifndef DISABLE_DKIM
445   dkim_exim_verify_feed(smtp_inbuffer, rc);
446 #endif
447   smtp_inend = smtp_inbuffer + rc;
448   smtp_inptr = smtp_inbuffer;
449   }
450 return *smtp_inptr++;
451 }
452
453 void
454 smtp_get_cache(void)
455 {
456 #ifndef DISABLE_DKIM
457 int n = smtp_inend - smtp_inptr;
458 if (n > 0)
459   dkim_exim_verify_feed(smtp_inptr, n);
460 #endif
461 }
462
463
464 /* Get a byte from the smtp input, in CHUNKING mode.  Handle ack of the
465 previous BDAT chunk and getting new ones when we run out.  Uses the
466 underlying smtp_getc or tls_getc both for that and for getting the
467 (buffered) data byte.  EOD signals (an expected) no further data.
468 ERR signals a protocol error, and EOF a closed input stream.
469
470 Called from read_bdat_smtp() in receive.c for the message body, but also
471 by the headers read loop in receive_msg(); manipulates chunking_state
472 to handle the BDAT command/response.
473 Placed here due to the correlation with the above smtp_getc(), which it wraps,
474 and also by the need to do smtp command/response handling.
475
476 Arguments:  lim         (ignored)
477 Returns:    the next character or ERR, EOD or EOF
478 */
479
480 int
481 bdat_getc(unsigned lim)
482 {
483 uschar * user_msg = NULL;
484 uschar * log_msg;
485
486 for(;;)
487   {
488 #ifndef DISABLE_DKIM
489   BOOL dkim_save;
490 #endif
491
492   if (chunking_data_left > 0)
493     return lwr_receive_getc(chunking_data_left--);
494
495   receive_getc = lwr_receive_getc;
496   receive_ungetc = lwr_receive_ungetc;
497 #ifndef DISABLE_DKIM
498   dkim_save = dkim_collect_input;
499   dkim_collect_input = FALSE;
500 #endif
501
502   /* Unless PIPELINING was offered, there should be no next command
503   until after we ack that chunk */
504
505   if (!pipelining_advertised && !check_sync())
506     {
507     incomplete_transaction_log(US"sync failure");
508     log_write(0, LOG_MAIN|LOG_REJECT, "SMTP protocol synchronization error "
509       "(next input sent too soon: pipelining was not advertised): "
510       "rejected \"%s\" %s next input=\"%s\"",
511       smtp_cmd_buffer, host_and_ident(TRUE),
512       string_printing(smtp_inptr));
513       (void) synprot_error(L_smtp_protocol_error, 554, NULL,
514         US"SMTP synchronization error");
515     goto repeat_until_rset;
516     }
517
518   /* If not the last, ack the received chunk.  The last response is delayed
519   until after the data ACL decides on it */
520
521   if (chunking_state == CHUNKING_LAST)
522     {
523 #ifndef DISABLE_DKIM
524     dkim_exim_verify_feed(NULL, 0);     /* notify EOD */
525 #endif
526     return EOD;
527     }
528
529   smtp_printf("250 %u byte chunk received\r\n", chunking_datasize);
530   chunking_state = CHUNKING_OFFERED;
531   DEBUG(D_receive) debug_printf("chunking state %d\n", (int)chunking_state);
532
533   /* Expect another BDAT cmd from input. RFC 3030 says nothing about
534   QUIT, RSET or NOOP but handling them seems obvious */
535
536 next_cmd:
537   switch(smtp_read_command(TRUE, 1))
538     {
539     default:
540       (void) synprot_error(L_smtp_protocol_error, 503, NULL,
541         US"only BDAT permissible after non-LAST BDAT");
542
543   repeat_until_rset:
544       switch(smtp_read_command(TRUE, 1))
545         {
546         case QUIT_CMD:  smtp_quit_handler(&user_msg, &log_msg); /*FALLTHROUGH */
547         case EOF_CMD:   return EOF;
548         case RSET_CMD:  smtp_rset_handler(); return ERR;
549         default:        if (synprot_error(L_smtp_protocol_error, 503, NULL,
550                                           US"only RSET accepted now") > 0)
551                           return EOF;
552                         goto repeat_until_rset;
553         }
554
555     case QUIT_CMD:
556       smtp_quit_handler(&user_msg, &log_msg);
557       /*FALLTHROUGH*/
558     case EOF_CMD:
559       return EOF;
560
561     case RSET_CMD:
562       smtp_rset_handler();
563       return ERR;
564
565     case NOOP_CMD:
566       HAD(SCH_NOOP);
567       smtp_printf("250 OK\r\n");
568       goto next_cmd;
569
570     case BDAT_CMD:
571       {
572       int n;
573
574       if (sscanf(CS smtp_cmd_data, "%u %n", &chunking_datasize, &n) < 1)
575         {
576         (void) synprot_error(L_smtp_protocol_error, 501, NULL,
577           US"missing size for BDAT command");
578         return ERR;
579         }
580       chunking_state = strcmpic(smtp_cmd_data+n, US"LAST") == 0
581         ? CHUNKING_LAST : CHUNKING_ACTIVE;
582       chunking_data_left = chunking_datasize;
583       DEBUG(D_receive) debug_printf("chunking state %d, %d bytes\n",
584                                     (int)chunking_state, chunking_data_left);
585
586       if (chunking_datasize == 0)
587         if (chunking_state == CHUNKING_LAST)
588           return EOD;
589         else
590           {
591           (void) synprot_error(L_smtp_protocol_error, 504, NULL,
592             US"zero size for BDAT command");
593           goto repeat_until_rset;
594           }
595
596       receive_getc = bdat_getc;
597       receive_ungetc = bdat_ungetc;
598 #ifndef DISABLE_DKIM
599       dkim_collect_input = dkim_save;
600 #endif
601       break;    /* to top of main loop */
602       }
603     }
604   }
605 }
606
607 void
608 bdat_flush_data(void)
609 {
610 while (chunking_data_left > 0)
611   if (lwr_receive_getc(chunking_data_left--) < 0)
612     break;
613
614 receive_getc = lwr_receive_getc;
615 receive_ungetc = lwr_receive_ungetc;
616
617 if (chunking_state != CHUNKING_LAST)
618   {
619   chunking_state = CHUNKING_OFFERED;
620   DEBUG(D_receive) debug_printf("chunking state %d\n", (int)chunking_state);
621   }
622 }
623
624
625
626
627 /*************************************************
628 *          SMTP version of ungetc()              *
629 *************************************************/
630
631 /* Puts a character back in the input buffer. Only ever
632 called once.
633
634 Arguments:
635   ch           the character
636
637 Returns:       the character
638 */
639
640 int
641 smtp_ungetc(int ch)
642 {
643 *--smtp_inptr = ch;
644 return ch;
645 }
646
647
648 int
649 bdat_ungetc(int ch)
650 {
651 chunking_data_left++;
652 return lwr_receive_ungetc(ch);
653 }
654
655
656
657 /*************************************************
658 *          SMTP version of feof()                *
659 *************************************************/
660
661 /* Tests for a previous EOF
662
663 Arguments:     none
664 Returns:       non-zero if the eof flag is set
665 */
666
667 int
668 smtp_feof(void)
669 {
670 return smtp_had_eof;
671 }
672
673
674
675
676 /*************************************************
677 *          SMTP version of ferror()              *
678 *************************************************/
679
680 /* Tests for a previous read error, and returns with errno
681 restored to what it was when the error was detected.
682
683 Arguments:     none
684 Returns:       non-zero if the error flag is set
685 */
686
687 int
688 smtp_ferror(void)
689 {
690 errno = smtp_had_error;
691 return smtp_had_error;
692 }
693
694
695
696 /*************************************************
697 *      Test for characters in the SMTP buffer    *
698 *************************************************/
699
700 /* Used at the end of a message
701
702 Arguments:     none
703 Returns:       TRUE/FALSE
704 */
705
706 BOOL
707 smtp_buffered(void)
708 {
709 return smtp_inptr < smtp_inend;
710 }
711
712
713
714 /*************************************************
715 *     Write formatted string to SMTP channel     *
716 *************************************************/
717
718 /* This is a separate function so that we don't have to repeat everything for
719 TLS support or debugging. It is global so that the daemon and the
720 authentication functions can use it. It does not return any error indication,
721 because major problems such as dropped connections won't show up till an output
722 flush for non-TLS connections. The smtp_fflush() function is available for
723 checking that: for convenience, TLS output errors are remembered here so that
724 they are also picked up later by smtp_fflush().
725
726 Arguments:
727   format      format string
728   ...         optional arguments
729
730 Returns:      nothing
731 */
732
733 void
734 smtp_printf(const char *format, ...)
735 {
736 va_list ap;
737
738 va_start(ap, format);
739 smtp_vprintf(format, ap);
740 va_end(ap);
741 }
742
743 /* This is split off so that verify.c:respond_printf() can, in effect, call
744 smtp_printf(), bearing in mind that in C a vararg function can't directly
745 call another vararg function, only a function which accepts a va_list. */
746
747 void
748 smtp_vprintf(const char *format, va_list ap)
749 {
750 BOOL yield;
751
752 yield = string_vformat(big_buffer, big_buffer_size, format, ap);
753
754 DEBUG(D_receive)
755   {
756   void *reset_point = store_get(0);
757   uschar *msg_copy, *cr, *end;
758   msg_copy = string_copy(big_buffer);
759   end = msg_copy + Ustrlen(msg_copy);
760   while ((cr = Ustrchr(msg_copy, '\r')) != NULL)   /* lose CRs */
761   memmove(cr, cr + 1, (end--) - cr);
762   debug_printf("SMTP>> %s", msg_copy);
763   store_reset(reset_point);
764   }
765
766 if (!yield)
767   {
768   log_write(0, LOG_MAIN|LOG_PANIC, "string too large in smtp_printf()");
769   smtp_closedown(US"Unexpected error");
770   exim_exit(EXIT_FAILURE);
771   }
772
773 /* If this is the first output for a (non-batch) RCPT command, see if all RCPTs
774 have had the same. Note: this code is also present in smtp_respond(). It would
775 be tidier to have it only in one place, but when it was added, it was easier to
776 do it that way, so as not to have to mess with the code for the RCPT command,
777 which sometimes uses smtp_printf() and sometimes smtp_respond(). */
778
779 if (rcpt_in_progress)
780   {
781   if (rcpt_smtp_response == NULL)
782     rcpt_smtp_response = string_copy(big_buffer);
783   else if (rcpt_smtp_response_same &&
784            Ustrcmp(rcpt_smtp_response, big_buffer) != 0)
785     rcpt_smtp_response_same = FALSE;
786   rcpt_in_progress = FALSE;
787   }
788
789 /* Now write the string */
790
791 #ifdef SUPPORT_TLS
792 if (tls_in.active >= 0)
793   {
794   if (tls_write(TRUE, big_buffer, Ustrlen(big_buffer)) < 0)
795     smtp_write_error = -1;
796   }
797 else
798 #endif
799
800 if (fprintf(smtp_out, "%s", big_buffer) < 0) smtp_write_error = -1;
801 }
802
803
804
805 /*************************************************
806 *        Flush SMTP out and check for error      *
807 *************************************************/
808
809 /* This function isn't currently used within Exim (it detects errors when it
810 tries to read the next SMTP input), but is available for use in local_scan().
811 For non-TLS connections, it flushes the output and checks for errors. For
812 TLS-connections, it checks for a previously-detected TLS write error.
813
814 Arguments:  none
815 Returns:    0 for no error; -1 after an error
816 */
817
818 int
819 smtp_fflush(void)
820 {
821 if (tls_in.active < 0 && fflush(smtp_out) != 0) smtp_write_error = -1;
822 return smtp_write_error;
823 }
824
825
826
827 /*************************************************
828 *          SMTP command read timeout             *
829 *************************************************/
830
831 /* Signal handler for timing out incoming SMTP commands. This attempts to
832 finish off tidily.
833
834 Argument: signal number (SIGALRM)
835 Returns:  nothing
836 */
837
838 static void
839 command_timeout_handler(int sig)
840 {
841 sig = sig;    /* Keep picky compilers happy */
842 log_write(L_lost_incoming_connection,
843           LOG_MAIN, "SMTP command timeout on%s connection from %s",
844           (tls_in.active >= 0)? " TLS" : "",
845           host_and_ident(FALSE));
846 if (smtp_batched_input)
847   moan_smtp_batch(NULL, "421 SMTP command timeout");  /* Does not return */
848 smtp_notquit_exit(US"command-timeout", US"421",
849   US"%s: SMTP command timeout - closing connection", smtp_active_hostname);
850 exim_exit(EXIT_FAILURE);
851 }
852
853
854
855 /*************************************************
856 *               SIGTERM received                 *
857 *************************************************/
858
859 /* Signal handler for handling SIGTERM. Again, try to finish tidily.
860
861 Argument: signal number (SIGTERM)
862 Returns:  nothing
863 */
864
865 static void
866 command_sigterm_handler(int sig)
867 {
868 sig = sig;    /* Keep picky compilers happy */
869 log_write(0, LOG_MAIN, "%s closed after SIGTERM", smtp_get_connection_info());
870 if (smtp_batched_input)
871   moan_smtp_batch(NULL, "421 SIGTERM received");  /* Does not return */
872 smtp_notquit_exit(US"signal-exit", US"421",
873   US"%s: Service not available - closing connection", smtp_active_hostname);
874 exim_exit(EXIT_FAILURE);
875 }
876
877
878
879
880 #ifdef SUPPORT_PROXY
881 /*************************************************
882 *     Restore socket timeout to previous value   *
883 *************************************************/
884 /* If the previous value was successfully retrieved, restore
885 it before returning control to the non-proxy routines
886
887 Arguments: fd     - File descriptor for input
888            get_ok - Successfully retrieved previous values
889            tvtmp  - Time struct with previous values
890            vslen  - Length of time struct
891 Returns:   none
892 */
893 static void
894 restore_socket_timeout(int fd, int get_ok, struct timeval * tvtmp, socklen_t vslen)
895 {
896 if (get_ok == 0)
897   (void) setsockopt(fd, SOL_SOCKET, SO_RCVTIMEO, CS tvtmp, vslen);
898 }
899
900 /*************************************************
901 *       Check if host is required proxy host     *
902 *************************************************/
903 /* The function determines if inbound host will be a regular smtp host
904 or if it is configured that it must use Proxy Protocol.  A local
905 connection cannot.
906
907 Arguments: none
908 Returns:   bool
909 */
910
911 static BOOL
912 check_proxy_protocol_host()
913 {
914 int rc;
915
916 if (  sender_host_address
917    && (rc = verify_check_this_host(CUSS &hosts_proxy, NULL, NULL,
918                            sender_host_address, NULL)) == OK)
919   {
920   DEBUG(D_receive)
921     debug_printf("Detected proxy protocol configured host\n");
922   proxy_session = TRUE;
923   }
924 return proxy_session;
925 }
926
927
928 /*************************************************
929 *    Read data until newline or end of buffer    *
930 *************************************************/
931 /* While SMTP is server-speaks-first, TLS is client-speaks-first, so we can't
932 read an entire buffer and assume there will be nothing past a proxy protocol
933 header.  Our approach normally is to use stdio, but again that relies upon
934 "STARTTLS\r\n" and a server response before the client starts TLS handshake, or
935 reading _nothing_ before client TLS handshake.  So we don't want to use the
936 usual buffering reads which may read enough to block TLS starting.
937
938 So unfortunately we're down to "read one byte at a time, with a syscall each,
939 and expect a little overhead", for all proxy-opened connections which are v1,
940 just to handle the TLS-on-connect case.  Since SSL functions wrap the
941 underlying fd, we can't assume that we can feed them any already-read content.
942
943 We need to know where to read to, the max capacity, and we'll read until we
944 get a CR and one more character.  Let the caller scream if it's CR+!LF.
945
946 Return the amount read.
947 */
948
949 static int
950 swallow_until_crlf(int fd, uschar *base, int already, int capacity)
951 {
952 uschar *to = base + already;
953 uschar *cr;
954 int have = 0;
955 int ret;
956 int last = 0;
957
958 /* For "PROXY UNKNOWN\r\n" we, at time of writing, expect to have read
959 up through the \r; for the _normal_ case, we haven't yet seen the \r. */
960
961 cr = memchr(base, '\r', already);
962 if (cr != NULL)
963   {
964   if ((cr - base) < already - 1)
965     {
966     /* \r and presumed \n already within what we have; probably not
967     actually proxy protocol, but abort cleanly. */
968     return 0;
969     }
970   /* \r is last character read, just need one more. */
971   last = 1;
972   }
973
974 while (capacity > 0)
975   {
976   do { ret = recv(fd, to, 1, 0); } while (ret == -1 && errno == EINTR);
977   if (ret == -1)
978     return -1;
979   have++;
980   if (last)
981     return have;
982   if (*to == '\r')
983     last = 1;
984   capacity--;
985   to++;
986   }
987
988 /* reached end without having room for a final newline, abort */
989 errno = EOVERFLOW;
990 return -1;
991 }
992
993 /*************************************************
994 *         Setup host for proxy protocol          *
995 *************************************************/
996 /* The function configures the connection based on a header from the
997 inbound host to use Proxy Protocol. The specification is very exact
998 so exit with an error if do not find the exact required pieces. This
999 includes an incorrect number of spaces separating args.
1000
1001 Arguments: none
1002 Returns:   Boolean success
1003 */
1004
1005 static void
1006 setup_proxy_protocol_host()
1007 {
1008 union {
1009   struct {
1010     uschar line[108];
1011   } v1;
1012   struct {
1013     uschar sig[12];
1014     uint8_t ver_cmd;
1015     uint8_t fam;
1016     uint16_t len;
1017     union {
1018       struct { /* TCP/UDP over IPv4, len = 12 */
1019         uint32_t src_addr;
1020         uint32_t dst_addr;
1021         uint16_t src_port;
1022         uint16_t dst_port;
1023       } ip4;
1024       struct { /* TCP/UDP over IPv6, len = 36 */
1025         uint8_t  src_addr[16];
1026         uint8_t  dst_addr[16];
1027         uint16_t src_port;
1028         uint16_t dst_port;
1029       } ip6;
1030       struct { /* AF_UNIX sockets, len = 216 */
1031         uschar   src_addr[108];
1032         uschar   dst_addr[108];
1033       } unx;
1034     } addr;
1035   } v2;
1036 } hdr;
1037
1038 /* Temp variables used in PPv2 address:port parsing */
1039 uint16_t tmpport;
1040 char tmpip[INET_ADDRSTRLEN];
1041 struct sockaddr_in tmpaddr;
1042 char tmpip6[INET6_ADDRSTRLEN];
1043 struct sockaddr_in6 tmpaddr6;
1044
1045 /* We can't read "all data until end" because while SMTP is
1046 server-speaks-first, the TLS handshake is client-speaks-first, so for
1047 TLS-on-connect ports the proxy protocol header will usually be immediately
1048 followed by a TLS handshake, and with N TLS libraries, we can't reliably
1049 reinject data for reading by those.  So instead we first read "enough to be
1050 safely read within the header, and figure out how much more to read".
1051 For v1 we will later read to the end-of-line, for v2 we will read based upon
1052 the stated length.
1053
1054 The v2 sig is 12 octets, and another 4 gets us the length, so we know how much
1055 data is needed total.  For v1, where the line looks like:
1056 PROXY TCPn L3src L3dest SrcPort DestPort \r\n
1057
1058 However, for v1 there's also `PROXY UNKNOWN\r\n` which is only 15 octets.
1059 We seem to support that.  So, if we read 14 octets then we can tell if we're
1060 v2 or v1.  If we're v1, we can continue reading as normal.
1061
1062 If we're v2, we can't slurp up the entire header.  We need the length in the
1063 15th & 16th octets, then to read everything after that.
1064
1065 So to safely handle v1 and v2, with client-sent-first supported correctly,
1066 we have to do a minimum of 3 read calls, not 1.  Eww.
1067 */
1068
1069 #define PROXY_INITIAL_READ 14
1070 #define PROXY_V2_HEADER_SIZE 16
1071 #if PROXY_INITIAL_READ > PROXY_V2_HEADER_SIZE
1072 # error Code bug in sizes of data to read for proxy usage
1073 #endif
1074
1075 int get_ok = 0;
1076 int size, ret;
1077 int fd = fileno(smtp_in);
1078 const char v2sig[12] = "\x0D\x0A\x0D\x0A\x00\x0D\x0A\x51\x55\x49\x54\x0A";
1079 uschar * iptype;  /* To display debug info */
1080 struct timeval tv;
1081 struct timeval tvtmp;
1082 socklen_t vslen = sizeof(struct timeval);
1083 BOOL yield = FALSE;
1084
1085 /* Save current socket timeout values */
1086 get_ok = getsockopt(fd, SOL_SOCKET, SO_RCVTIMEO, CS &tvtmp, &vslen);
1087
1088 /* Proxy Protocol host must send header within a short time
1089 (default 3 seconds) or it's considered invalid */
1090 tv.tv_sec  = PROXY_NEGOTIATION_TIMEOUT_SEC;
1091 tv.tv_usec = PROXY_NEGOTIATION_TIMEOUT_USEC;
1092 if (setsockopt(fd, SOL_SOCKET, SO_RCVTIMEO, CS &tv, sizeof(tv)) < 0)
1093   goto bad;
1094
1095 do
1096   {
1097   /* The inbound host was declared to be a Proxy Protocol host, so
1098   don't do a PEEK into the data, actually slurp up enough to be
1099   "safe". Can't take it all because TLS-on-connect clients follow
1100   immediately with TLS handshake. */
1101   ret = recv(fd, &hdr, PROXY_INITIAL_READ, 0);
1102   }
1103   while (ret == -1 && errno == EINTR);
1104
1105 if (ret == -1)
1106   goto proxyfail;
1107
1108 /* For v2, handle reading the length, and then the rest. */
1109 if ((ret == PROXY_INITIAL_READ) && (memcmp(&hdr.v2, v2sig, sizeof(v2sig)) == 0))
1110   {
1111   int retmore;
1112   uint8_t ver;
1113
1114   /* First get the length fields. */
1115   do
1116     {
1117     retmore = recv(fd, (uschar*)&hdr + ret, PROXY_V2_HEADER_SIZE - PROXY_INITIAL_READ, 0);
1118     } while (retmore == -1 && errno == EINTR);
1119   if (retmore == -1)
1120     goto proxyfail;
1121   ret += retmore;
1122
1123   ver = (hdr.v2.ver_cmd & 0xf0) >> 4;
1124
1125   /* May 2014: haproxy combined the version and command into one byte to
1126   allow two full bytes for the length field in order to proxy SSL
1127   connections.  SSL Proxy is not supported in this version of Exim, but
1128   must still separate values here. */
1129
1130   if (ver != 0x02)
1131     {
1132     DEBUG(D_receive) debug_printf("Invalid Proxy Protocol version: %d\n", ver);
1133     goto proxyfail;
1134     }
1135
1136   /* The v2 header will always be 16 bytes per the spec. */
1137   size = 16 + ntohs(hdr.v2.len);
1138   DEBUG(D_receive) debug_printf("Detected PROXYv2 header, size %d (limit %d)\n",
1139       size, (int)sizeof(hdr));
1140
1141   /* We should now have 16 octets (PROXY_V2_HEADER_SIZE), and we know the total
1142   amount that we need.  Double-check that the size is not unreasonable, then
1143   get the rest. */
1144   if (size > sizeof(hdr))
1145     {
1146     DEBUG(D_receive) debug_printf("PROXYv2 header size unreasonably large; security attack?\n");
1147     goto proxyfail;
1148     }
1149
1150   do
1151     {
1152     do
1153       {
1154       retmore = recv(fd, (uschar*)&hdr + ret, size-ret, 0);
1155       } while (retmore == -1 && errno == EINTR);
1156     if (retmore == -1)
1157       goto proxyfail;
1158     ret += retmore;
1159     DEBUG(D_receive) debug_printf("PROXYv2: have %d/%d required octets\n", ret, size);
1160     } while (ret < size);
1161
1162   } /* end scope for getting rest of data for v2 */
1163
1164 /* At this point: if PROXYv2, we've read the exact size required for all data;
1165 if PROXYv1 then we've read "less than required for any valid line" and should
1166 read the rest". */
1167
1168 if (ret >= 16 && memcmp(&hdr.v2, v2sig, 12) == 0)
1169   {
1170   uint8_t cmd = (hdr.v2.ver_cmd & 0x0f);
1171
1172   switch (cmd)
1173     {
1174     case 0x01: /* PROXY command */
1175       switch (hdr.v2.fam)
1176         {
1177         case 0x11:  /* TCPv4 address type */
1178           iptype = US"IPv4";
1179           tmpaddr.sin_addr.s_addr = hdr.v2.addr.ip4.src_addr;
1180           inet_ntop(AF_INET, &tmpaddr.sin_addr, CS &tmpip, sizeof(tmpip));
1181           if (!string_is_ip_address(US tmpip, NULL))
1182             {
1183             DEBUG(D_receive) debug_printf("Invalid %s source IP\n", iptype);
1184             goto proxyfail;
1185             }
1186           proxy_local_address = sender_host_address;
1187           sender_host_address = string_copy(US tmpip);
1188           tmpport             = ntohs(hdr.v2.addr.ip4.src_port);
1189           proxy_local_port    = sender_host_port;
1190           sender_host_port    = tmpport;
1191           /* Save dest ip/port */
1192           tmpaddr.sin_addr.s_addr = hdr.v2.addr.ip4.dst_addr;
1193           inet_ntop(AF_INET, &tmpaddr.sin_addr, CS &tmpip, sizeof(tmpip));
1194           if (!string_is_ip_address(US tmpip, NULL))
1195             {
1196             DEBUG(D_receive) debug_printf("Invalid %s dest port\n", iptype);
1197             goto proxyfail;
1198             }
1199           proxy_external_address = string_copy(US tmpip);
1200           tmpport              = ntohs(hdr.v2.addr.ip4.dst_port);
1201           proxy_external_port  = tmpport;
1202           goto done;
1203         case 0x21:  /* TCPv6 address type */
1204           iptype = US"IPv6";
1205           memmove(tmpaddr6.sin6_addr.s6_addr, hdr.v2.addr.ip6.src_addr, 16);
1206           inet_ntop(AF_INET6, &tmpaddr6.sin6_addr, CS &tmpip6, sizeof(tmpip6));
1207           if (!string_is_ip_address(US tmpip6, NULL))
1208             {
1209             DEBUG(D_receive) debug_printf("Invalid %s source IP\n", iptype);
1210             goto proxyfail;
1211             }
1212           proxy_local_address = sender_host_address;
1213           sender_host_address = string_copy(US tmpip6);
1214           tmpport             = ntohs(hdr.v2.addr.ip6.src_port);
1215           proxy_local_port    = sender_host_port;
1216           sender_host_port    = tmpport;
1217           /* Save dest ip/port */
1218           memmove(tmpaddr6.sin6_addr.s6_addr, hdr.v2.addr.ip6.dst_addr, 16);
1219           inet_ntop(AF_INET6, &tmpaddr6.sin6_addr, CS &tmpip6, sizeof(tmpip6));
1220           if (!string_is_ip_address(US tmpip6, NULL))
1221             {
1222             DEBUG(D_receive) debug_printf("Invalid %s dest port\n", iptype);
1223             goto proxyfail;
1224             }
1225           proxy_external_address = string_copy(US tmpip6);
1226           tmpport              = ntohs(hdr.v2.addr.ip6.dst_port);
1227           proxy_external_port  = tmpport;
1228           goto done;
1229         default:
1230           DEBUG(D_receive)
1231             debug_printf("Unsupported PROXYv2 connection type: 0x%02x\n",
1232                          hdr.v2.fam);
1233           goto proxyfail;
1234         }
1235       /* Unsupported protocol, keep local connection address */
1236       break;
1237     case 0x00: /* LOCAL command */
1238       /* Keep local connection address for LOCAL */
1239       iptype = US"local";
1240       break;
1241     default:
1242       DEBUG(D_receive)
1243         debug_printf("Unsupported PROXYv2 command: 0x%x\n", cmd);
1244       goto proxyfail;
1245     }
1246   }
1247 else if (ret >= 8 && memcmp(hdr.v1.line, "PROXY", 5) == 0)
1248   {
1249   uschar *p;
1250   uschar *end;
1251   uschar *sp;     /* Utility variables follow */
1252   int     tmp_port;
1253   int     r2;
1254   char   *endc;
1255
1256   /* get the rest of the line */
1257   r2 = swallow_until_crlf(fd, (uschar*)&hdr, ret, sizeof(hdr)-ret);
1258   if (r2 == -1)
1259     goto proxyfail;
1260   ret += r2;
1261
1262   p = string_copy(hdr.v1.line);
1263   end = memchr(p, '\r', ret - 1);
1264
1265   if (!end || (end == (uschar*)&hdr + ret) || end[1] != '\n')
1266     {
1267     DEBUG(D_receive) debug_printf("Partial or invalid PROXY header\n");
1268     goto proxyfail;
1269     }
1270   *end = '\0'; /* Terminate the string */
1271   size = end + 2 - p; /* Skip header + CRLF */
1272   DEBUG(D_receive) debug_printf("Detected PROXYv1 header\n");
1273   DEBUG(D_receive) debug_printf("Bytes read not within PROXY header: %d\n", ret - size);
1274   /* Step through the string looking for the required fields. Ensure
1275   strict adherence to required formatting, exit for any error. */
1276   p += 5;
1277   if (!isspace(*(p++)))
1278     {
1279     DEBUG(D_receive) debug_printf("Missing space after PROXY command\n");
1280     goto proxyfail;
1281     }
1282   if (!Ustrncmp(p, CCS"TCP4", 4))
1283     iptype = US"IPv4";
1284   else if (!Ustrncmp(p,CCS"TCP6", 4))
1285     iptype = US"IPv6";
1286   else if (!Ustrncmp(p,CCS"UNKNOWN", 7))
1287     {
1288     iptype = US"Unknown";
1289     goto done;
1290     }
1291   else
1292     {
1293     DEBUG(D_receive) debug_printf("Invalid TCP type\n");
1294     goto proxyfail;
1295     }
1296
1297   p += Ustrlen(iptype);
1298   if (!isspace(*(p++)))
1299     {
1300     DEBUG(D_receive) debug_printf("Missing space after TCP4/6 command\n");
1301     goto proxyfail;
1302     }
1303   /* Find the end of the arg */
1304   if ((sp = Ustrchr(p, ' ')) == NULL)
1305     {
1306     DEBUG(D_receive)
1307       debug_printf("Did not find proxied src %s\n", iptype);
1308     goto proxyfail;
1309     }
1310   *sp = '\0';
1311   if(!string_is_ip_address(p, NULL))
1312     {
1313     DEBUG(D_receive)
1314       debug_printf("Proxied src arg is not an %s address\n", iptype);
1315     goto proxyfail;
1316     }
1317   proxy_local_address = sender_host_address;
1318   sender_host_address = p;
1319   p = sp + 1;
1320   if ((sp = Ustrchr(p, ' ')) == NULL)
1321     {
1322     DEBUG(D_receive)
1323       debug_printf("Did not find proxy dest %s\n", iptype);
1324     goto proxyfail;
1325     }
1326   *sp = '\0';
1327   if(!string_is_ip_address(p, NULL))
1328     {
1329     DEBUG(D_receive)
1330       debug_printf("Proxy dest arg is not an %s address\n", iptype);
1331     goto proxyfail;
1332     }
1333   proxy_external_address = p;
1334   p = sp + 1;
1335   if ((sp = Ustrchr(p, ' ')) == NULL)
1336     {
1337     DEBUG(D_receive) debug_printf("Did not find proxied src port\n");
1338     goto proxyfail;
1339     }
1340   *sp = '\0';
1341   tmp_port = strtol(CCS p, &endc, 10);
1342   if (*endc || tmp_port == 0)
1343     {
1344     DEBUG(D_receive)
1345       debug_printf("Proxied src port '%s' not an integer\n", p);
1346     goto proxyfail;
1347     }
1348   proxy_local_port = sender_host_port;
1349   sender_host_port = tmp_port;
1350   p = sp + 1;
1351   if ((sp = Ustrchr(p, '\0')) == NULL)
1352     {
1353     DEBUG(D_receive) debug_printf("Did not find proxy dest port\n");
1354     goto proxyfail;
1355     }
1356   tmp_port = strtol(CCS p, &endc, 10);
1357   if (*endc || tmp_port == 0)
1358     {
1359     DEBUG(D_receive)
1360       debug_printf("Proxy dest port '%s' not an integer\n", p);
1361     goto proxyfail;
1362     }
1363   proxy_external_port = tmp_port;
1364   /* Already checked for /r /n above. Good V1 header received. */
1365   }
1366 else
1367   {
1368   /* Wrong protocol */
1369   DEBUG(D_receive) debug_printf("Invalid proxy protocol version negotiation\n");
1370   (void) swallow_until_crlf(fd, (uschar*)&hdr, ret, sizeof(hdr)-ret);
1371   goto proxyfail;
1372   }
1373
1374 done:
1375   DEBUG(D_receive)
1376     debug_printf("Valid %s sender from Proxy Protocol header\n", iptype);
1377   yield = proxy_session;
1378
1379 /* Don't flush any potential buffer contents. Any input on proxyfail
1380 should cause a synchronization failure */
1381
1382 proxyfail:
1383   restore_socket_timeout(fd, get_ok, &tvtmp, vslen);
1384
1385 bad:
1386   if (yield)
1387     {
1388     sender_host_name = NULL;
1389     (void) host_name_lookup();
1390     host_build_sender_fullhost();
1391     }
1392   else
1393     {
1394     proxy_session_failed = TRUE;
1395     DEBUG(D_receive)
1396       debug_printf("Failure to extract proxied host, only QUIT allowed\n");
1397     }
1398
1399 return;
1400 }
1401 #endif
1402
1403 /*************************************************
1404 *           Read one command line                *
1405 *************************************************/
1406
1407 /* Strictly, SMTP commands coming over the net are supposed to end with CRLF.
1408 There are sites that don't do this, and in any case internal SMTP probably
1409 should check only for LF. Consequently, we check here for LF only. The line
1410 ends up with [CR]LF removed from its end. If we get an overlong line, treat as
1411 an unknown command. The command is read into the global smtp_cmd_buffer so that
1412 it is available via $smtp_command.
1413
1414 The character reading routine sets up a timeout for each block actually read
1415 from the input (which may contain more than one command). We set up a special
1416 signal handler that closes down the session on a timeout. Control does not
1417 return when it runs.
1418
1419 Arguments:
1420   check_sync    if TRUE, check synchronization rules if global option is TRUE
1421   buffer_lim    maximum to buffer in lower layer
1422
1423 Returns:       a code identifying the command (enumerated above)
1424 */
1425
1426 static int
1427 smtp_read_command(BOOL check_sync, unsigned buffer_lim)
1428 {
1429 int c;
1430 int ptr = 0;
1431 smtp_cmd_list *p;
1432 BOOL hadnull = FALSE;
1433
1434 os_non_restarting_signal(SIGALRM, command_timeout_handler);
1435
1436 while ((c = (receive_getc)(buffer_lim)) != '\n' && c != EOF)
1437   {
1438   if (ptr >= SMTP_CMD_BUFFER_SIZE)
1439     {
1440     os_non_restarting_signal(SIGALRM, sigalrm_handler);
1441     return OTHER_CMD;
1442     }
1443   if (c == 0)
1444     {
1445     hadnull = TRUE;
1446     c = '?';
1447     }
1448   smtp_cmd_buffer[ptr++] = c;
1449   }
1450
1451 receive_linecount++;    /* For BSMTP errors */
1452 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1453
1454 /* If hit end of file, return pseudo EOF command. Whether we have a
1455 part-line already read doesn't matter, since this is an error state. */
1456
1457 if (c == EOF) return EOF_CMD;
1458
1459 /* Remove any CR and white space at the end of the line, and terminate the
1460 string. */
1461
1462 while (ptr > 0 && isspace(smtp_cmd_buffer[ptr-1])) ptr--;
1463 smtp_cmd_buffer[ptr] = 0;
1464
1465 DEBUG(D_receive) debug_printf("SMTP<< %s\n", smtp_cmd_buffer);
1466
1467 /* NULLs are not allowed in SMTP commands */
1468
1469 if (hadnull) return BADCHAR_CMD;
1470
1471 /* Scan command list and return identity, having set the data pointer
1472 to the start of the actual data characters. Check for SMTP synchronization
1473 if required. */
1474
1475 for (p = cmd_list; p < cmd_list_end; p++)
1476   {
1477 #ifdef SUPPORT_PROXY
1478   /* Only allow QUIT command if Proxy Protocol parsing failed */
1479   if (proxy_session && proxy_session_failed && p->cmd != QUIT_CMD)
1480     continue;
1481 #endif
1482   if (  p->len
1483      && strncmpic(smtp_cmd_buffer, US p->name, p->len) == 0
1484      && (  smtp_cmd_buffer[p->len-1] == ':'    /* "mail from:" or "rcpt to:" */
1485         || smtp_cmd_buffer[p->len] == 0
1486         || smtp_cmd_buffer[p->len] == ' '
1487      )  )
1488     {
1489     if (smtp_inptr < smtp_inend &&                     /* Outstanding input */
1490         p->cmd < sync_cmd_limit &&                     /* Command should sync */
1491         check_sync &&                                  /* Local flag set */
1492         smtp_enforce_sync &&                           /* Global flag set */
1493         sender_host_address != NULL &&                 /* Not local input */
1494         !sender_host_notsocket)                        /* Really is a socket */
1495       return BADSYN_CMD;
1496
1497     /* The variables $smtp_command and $smtp_command_argument point into the
1498     unmodified input buffer. A copy of the latter is taken for actual
1499     processing, so that it can be chopped up into separate parts if necessary,
1500     for example, when processing a MAIL command options such as SIZE that can
1501     follow the sender address. */
1502
1503     smtp_cmd_argument = smtp_cmd_buffer + p->len;
1504     while (isspace(*smtp_cmd_argument)) smtp_cmd_argument++;
1505     Ustrcpy(smtp_data_buffer, smtp_cmd_argument);
1506     smtp_cmd_data = smtp_data_buffer;
1507
1508     /* Count non-mail commands from those hosts that are controlled in this
1509     way. The default is all hosts. We don't waste effort checking the list
1510     until we get a non-mail command, but then cache the result to save checking
1511     again. If there's a DEFER while checking the host, assume it's in the list.
1512
1513     Note that one instance of RSET, EHLO/HELO, and STARTTLS is allowed at the
1514     start of each incoming message by fiddling with the value in the table. */
1515
1516     if (!p->is_mail_cmd)
1517       {
1518       if (count_nonmail == TRUE_UNSET) count_nonmail =
1519         verify_check_host(&smtp_accept_max_nonmail_hosts) != FAIL;
1520       if (count_nonmail && ++nonmail_command_count > smtp_accept_max_nonmail)
1521         return TOO_MANY_NONMAIL_CMD;
1522       }
1523
1524     /* If there is data for a command that does not expect it, generate the
1525     error here. */
1526
1527     return (p->has_arg || *smtp_cmd_data == 0)? p->cmd : BADARG_CMD;
1528     }
1529   }
1530
1531 #ifdef SUPPORT_PROXY
1532 /* Only allow QUIT command if Proxy Protocol parsing failed */
1533 if (proxy_session && proxy_session_failed)
1534   return PROXY_FAIL_IGNORE_CMD;
1535 #endif
1536
1537 /* Enforce synchronization for unknown commands */
1538
1539 if (smtp_inptr < smtp_inend &&                     /* Outstanding input */
1540     check_sync &&                                  /* Local flag set */
1541     smtp_enforce_sync &&                           /* Global flag set */
1542     sender_host_address != NULL &&                 /* Not local input */
1543     !sender_host_notsocket)                        /* Really is a socket */
1544   return BADSYN_CMD;
1545
1546 return OTHER_CMD;
1547 }
1548
1549
1550
1551 /*************************************************
1552 *          Forced closedown of call              *
1553 *************************************************/
1554
1555 /* This function is called from log.c when Exim is dying because of a serious
1556 disaster, and also from some other places. If an incoming non-batched SMTP
1557 channel is open, it swallows the rest of the incoming message if in the DATA
1558 phase, sends the reply string, and gives an error to all subsequent commands
1559 except QUIT. The existence of an SMTP call is detected by the non-NULLness of
1560 smtp_in.
1561
1562 Arguments:
1563   message   SMTP reply string to send, excluding the code
1564
1565 Returns:    nothing
1566 */
1567
1568 void
1569 smtp_closedown(uschar *message)
1570 {
1571 if (smtp_in == NULL || smtp_batched_input) return;
1572 receive_swallow_smtp();
1573 smtp_printf("421 %s\r\n", message);
1574
1575 for (;;) switch(smtp_read_command(FALSE, GETC_BUFFER_UNLIMITED))
1576   {
1577   case EOF_CMD:
1578   return;
1579
1580   case QUIT_CMD:
1581   smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
1582   mac_smtp_fflush();
1583   return;
1584
1585   case RSET_CMD:
1586   smtp_printf("250 Reset OK\r\n");
1587   break;
1588
1589   default:
1590   smtp_printf("421 %s\r\n", message);
1591   break;
1592   }
1593 }
1594
1595
1596
1597
1598 /*************************************************
1599 *        Set up connection info for logging      *
1600 *************************************************/
1601
1602 /* This function is called when logging information about an SMTP connection.
1603 It sets up appropriate source information, depending on the type of connection.
1604 If sender_fullhost is NULL, we are at a very early stage of the connection;
1605 just use the IP address.
1606
1607 Argument:    none
1608 Returns:     a string describing the connection
1609 */
1610
1611 uschar *
1612 smtp_get_connection_info(void)
1613 {
1614 const uschar * hostname = sender_fullhost
1615   ? sender_fullhost : sender_host_address;
1616
1617 if (host_checking)
1618   return string_sprintf("SMTP connection from %s", hostname);
1619
1620 if (sender_host_unknown || sender_host_notsocket)
1621   return string_sprintf("SMTP connection from %s", sender_ident);
1622
1623 if (is_inetd)
1624   return string_sprintf("SMTP connection from %s (via inetd)", hostname);
1625
1626 if (LOGGING(incoming_interface) && interface_address != NULL)
1627   return string_sprintf("SMTP connection from %s I=[%s]:%d", hostname,
1628     interface_address, interface_port);
1629
1630 return string_sprintf("SMTP connection from %s", hostname);
1631 }
1632
1633
1634
1635 #ifdef SUPPORT_TLS
1636 /* Append TLS-related information to a log line
1637
1638 Arguments:
1639   s             String under construction: allocated string to extend, or NULL
1640   sizep         Pointer to current allocation size (update on return), or NULL
1641   ptrp          Pointer to index for new entries in string (update on return), or NULL
1642
1643 Returns:        Allocated string or NULL
1644 */
1645 static uschar *
1646 s_tlslog(uschar * s, int * sizep, int * ptrp)
1647 {
1648   int size = sizep ? *sizep : 0;
1649   int ptr = ptrp ? *ptrp : 0;
1650
1651   if (LOGGING(tls_cipher) && tls_in.cipher != NULL)
1652     s = string_append(s, &size, &ptr, 2, US" X=", tls_in.cipher);
1653   if (LOGGING(tls_certificate_verified) && tls_in.cipher != NULL)
1654     s = string_append(s, &size, &ptr, 2, US" CV=",
1655       tls_in.certificate_verified? "yes":"no");
1656   if (LOGGING(tls_peerdn) && tls_in.peerdn != NULL)
1657     s = string_append(s, &size, &ptr, 3, US" DN=\"",
1658       string_printing(tls_in.peerdn), US"\"");
1659   if (LOGGING(tls_sni) && tls_in.sni != NULL)
1660     s = string_append(s, &size, &ptr, 3, US" SNI=\"",
1661       string_printing(tls_in.sni), US"\"");
1662
1663   if (s)
1664     {
1665     s[ptr] = '\0';
1666     if (sizep) *sizep = size;
1667     if (ptrp) *ptrp = ptr;
1668     }
1669   return s;
1670 }
1671 #endif
1672
1673 /*************************************************
1674 *      Log lack of MAIL if so configured         *
1675 *************************************************/
1676
1677 /* This function is called when an SMTP session ends. If the log selector
1678 smtp_no_mail is set, write a log line giving some details of what has happened
1679 in the SMTP session.
1680
1681 Arguments:   none
1682 Returns:     nothing
1683 */
1684
1685 void
1686 smtp_log_no_mail(void)
1687 {
1688 int size, ptr, i;
1689 uschar *s, *sep;
1690
1691 if (smtp_mailcmd_count > 0 || !LOGGING(smtp_no_mail))
1692   return;
1693
1694 s = NULL;
1695 size = ptr = 0;
1696
1697 if (sender_host_authenticated != NULL)
1698   {
1699   s = string_append(s, &size, &ptr, 2, US" A=", sender_host_authenticated);
1700   if (authenticated_id != NULL)
1701     s = string_append(s, &size, &ptr, 2, US":", authenticated_id);
1702   }
1703
1704 #ifdef SUPPORT_TLS
1705 s = s_tlslog(s, &size, &ptr);
1706 #endif
1707
1708 sep = (smtp_connection_had[SMTP_HBUFF_SIZE-1] != SCH_NONE)?
1709   US" C=..." : US" C=";
1710 for (i = smtp_ch_index; i < SMTP_HBUFF_SIZE; i++)
1711   {
1712   if (smtp_connection_had[i] != SCH_NONE)
1713     {
1714     s = string_append(s, &size, &ptr, 2, sep,
1715       smtp_names[smtp_connection_had[i]]);
1716     sep = US",";
1717     }
1718   }
1719
1720 for (i = 0; i < smtp_ch_index; i++)
1721   {
1722   s = string_append(s, &size, &ptr, 2, sep, smtp_names[smtp_connection_had[i]]);
1723   sep = US",";
1724   }
1725
1726 if (s != NULL) s[ptr] = 0; else s = US"";
1727 log_write(0, LOG_MAIN, "no MAIL in SMTP connection from %s D=%s%s",
1728   host_and_ident(FALSE),
1729   readconf_printtime( (int) ((long)time(NULL) - (long)smtp_connection_start)),
1730   s);
1731 }
1732
1733
1734
1735 /*************************************************
1736 *   Check HELO line and set sender_helo_name     *
1737 *************************************************/
1738
1739 /* Check the format of a HELO line. The data for HELO/EHLO is supposed to be
1740 the domain name of the sending host, or an ip literal in square brackets. The
1741 argument is placed in sender_helo_name, which is in malloc store, because it
1742 must persist over multiple incoming messages. If helo_accept_junk is set, this
1743 host is permitted to send any old junk (needed for some broken hosts).
1744 Otherwise, helo_allow_chars can be used for rogue characters in general
1745 (typically people want to let in underscores).
1746
1747 Argument:
1748   s       the data portion of the line (already past any white space)
1749
1750 Returns:  TRUE or FALSE
1751 */
1752
1753 static BOOL
1754 check_helo(uschar *s)
1755 {
1756 uschar *start = s;
1757 uschar *end = s + Ustrlen(s);
1758 BOOL yield = helo_accept_junk;
1759
1760 /* Discard any previous helo name */
1761
1762 if (sender_helo_name != NULL)
1763   {
1764   store_free(sender_helo_name);
1765   sender_helo_name = NULL;
1766   }
1767
1768 /* Skip tests if junk is permitted. */
1769
1770 if (!yield)
1771   {
1772   /* Allow the new standard form for IPv6 address literals, namely,
1773   [IPv6:....], and because someone is bound to use it, allow an equivalent
1774   IPv4 form. Allow plain addresses as well. */
1775
1776   if (*s == '[')
1777     {
1778     if (end[-1] == ']')
1779       {
1780       end[-1] = 0;
1781       if (strncmpic(s, US"[IPv6:", 6) == 0)
1782         yield = (string_is_ip_address(s+6, NULL) == 6);
1783       else if (strncmpic(s, US"[IPv4:", 6) == 0)
1784         yield = (string_is_ip_address(s+6, NULL) == 4);
1785       else
1786         yield = (string_is_ip_address(s+1, NULL) != 0);
1787       end[-1] = ']';
1788       }
1789     }
1790
1791   /* Non-literals must be alpha, dot, hyphen, plus any non-valid chars
1792   that have been configured (usually underscore - sigh). */
1793
1794   else if (*s != 0)
1795     {
1796     yield = TRUE;
1797     while (*s != 0)
1798       {
1799       if (!isalnum(*s) && *s != '.' && *s != '-' &&
1800           Ustrchr(helo_allow_chars, *s) == NULL)
1801         {
1802         yield = FALSE;
1803         break;
1804         }
1805       s++;
1806       }
1807     }
1808   }
1809
1810 /* Save argument if OK */
1811
1812 if (yield) sender_helo_name = string_copy_malloc(start);
1813 return yield;
1814 }
1815
1816
1817
1818
1819
1820 /*************************************************
1821 *         Extract SMTP command option            *
1822 *************************************************/
1823
1824 /* This function picks the next option setting off the end of smtp_cmd_data. It
1825 is called for MAIL FROM and RCPT TO commands, to pick off the optional ESMTP
1826 things that can appear there.
1827
1828 Arguments:
1829    name           point this at the name
1830    value          point this at the data string
1831
1832 Returns:          TRUE if found an option
1833 */
1834
1835 static BOOL
1836 extract_option(uschar **name, uschar **value)
1837 {
1838 uschar *n;
1839 uschar *v = smtp_cmd_data + Ustrlen(smtp_cmd_data) - 1;
1840 while (isspace(*v)) v--;
1841 v[1] = 0;
1842 while (v > smtp_cmd_data && *v != '=' && !isspace(*v))
1843   {
1844   /* Take care to not stop at a space embedded in a quoted local-part */
1845
1846   if (*v == '"') do v--; while (*v != '"' && v > smtp_cmd_data+1);
1847   v--;
1848   }
1849
1850 n = v;
1851 if (*v == '=')
1852 {
1853   while(isalpha(n[-1])) n--;
1854   /* RFC says SP, but TAB seen in wild and other major MTAs accept it */
1855   if (!isspace(n[-1])) return FALSE;
1856   n[-1] = 0;
1857 }
1858 else
1859 {
1860   n++;
1861   if (v == smtp_cmd_data) return FALSE;
1862 }
1863 *v++ = 0;
1864 *name = n;
1865 *value = v;
1866 return TRUE;
1867 }
1868
1869
1870
1871
1872
1873 /*************************************************
1874 *         Reset for new message                  *
1875 *************************************************/
1876
1877 /* This function is called whenever the SMTP session is reset from
1878 within either of the setup functions.
1879
1880 Argument:   the stacking pool storage reset point
1881 Returns:    nothing
1882 */
1883
1884 static void
1885 smtp_reset(void *reset_point)
1886 {
1887 recipients_list = NULL;
1888 rcpt_count = rcpt_defer_count = rcpt_fail_count =
1889   raw_recipients_count = recipients_count = recipients_list_max = 0;
1890 cancel_cutthrough_connection("smtp reset");
1891 message_linecount = 0;
1892 message_size = -1;
1893 acl_added_headers = NULL;
1894 acl_removed_headers = NULL;
1895 queue_only_policy = FALSE;
1896 rcpt_smtp_response = NULL;
1897 rcpt_smtp_response_same = TRUE;
1898 rcpt_in_progress = FALSE;
1899 deliver_freeze = FALSE;                              /* Can be set by ACL */
1900 freeze_tell = freeze_tell_config;                    /* Can be set by ACL */
1901 fake_response = OK;                                  /* Can be set by ACL */
1902 #ifdef WITH_CONTENT_SCAN
1903 no_mbox_unspool = FALSE;                             /* Can be set by ACL */
1904 #endif
1905 submission_mode = FALSE;                             /* Can be set by ACL */
1906 suppress_local_fixups = suppress_local_fixups_default; /* Can be set by ACL */
1907 active_local_from_check = local_from_check;          /* Can be set by ACL */
1908 active_local_sender_retain = local_sender_retain;    /* Can be set by ACL */
1909 sending_ip_address = NULL;
1910 return_path = sender_address = NULL;
1911 sender_data = NULL;                                  /* Can be set by ACL */
1912 deliver_localpart_orig = NULL;
1913 deliver_domain_orig = NULL;
1914 callout_address = NULL;
1915 submission_name = NULL;                              /* Can be set by ACL */
1916 raw_sender = NULL;                  /* After SMTP rewrite, before qualifying */
1917 sender_address_unrewritten = NULL;  /* Set only after verify rewrite */
1918 sender_verified_list = NULL;        /* No senders verified */
1919 memset(sender_address_cache, 0, sizeof(sender_address_cache));
1920 memset(sender_domain_cache, 0, sizeof(sender_domain_cache));
1921
1922 authenticated_sender = NULL;
1923 #ifdef EXPERIMENTAL_BRIGHTMAIL
1924 bmi_run = 0;
1925 bmi_verdicts = NULL;
1926 #endif
1927 dnslist_domain = dnslist_matched = NULL;
1928 #ifndef DISABLE_DKIM
1929 dkim_signers = NULL;
1930 dkim_disable_verify = FALSE;
1931 dkim_collect_input = FALSE;
1932 #endif
1933 dsn_ret = 0;
1934 dsn_envid = NULL;
1935 deliver_host = deliver_host_address = NULL;     /* Can be set by ACL */
1936 #ifndef DISABLE_PRDR
1937 prdr_requested = FALSE;
1938 #endif
1939 #ifdef EXPERIMENTAL_SPF
1940 spf_header_comment = NULL;
1941 spf_received = NULL;
1942 spf_result = NULL;
1943 spf_smtp_comment = NULL;
1944 #endif
1945 #ifdef SUPPORT_I18N
1946 message_smtputf8 = FALSE;
1947 #endif
1948 body_linecount = body_zerocount = 0;
1949
1950 sender_rate = sender_rate_limit = sender_rate_period = NULL;
1951 ratelimiters_mail = NULL;           /* Updated by ratelimit ACL condition */
1952                    /* Note that ratelimiters_conn persists across resets. */
1953
1954 /* Reset message ACL variables */
1955
1956 acl_var_m = NULL;
1957
1958 /* The message body variables use malloc store. They may be set if this is
1959 not the first message in an SMTP session and the previous message caused them
1960 to be referenced in an ACL. */
1961
1962 if (message_body)
1963   {
1964   store_free(message_body);
1965   message_body = NULL;
1966   }
1967
1968 if (message_body_end)
1969   {
1970   store_free(message_body_end);
1971   message_body_end = NULL;
1972   }
1973
1974 /* Warning log messages are also saved in malloc store. They are saved to avoid
1975 repetition in the same message, but it seems right to repeat them for different
1976 messages. */
1977
1978 while (acl_warn_logged)
1979   {
1980   string_item *this = acl_warn_logged;
1981   acl_warn_logged = acl_warn_logged->next;
1982   store_free(this);
1983   }
1984 store_reset(reset_point);
1985 }
1986
1987
1988
1989
1990
1991 /*************************************************
1992 *  Initialize for incoming batched SMTP message  *
1993 *************************************************/
1994
1995 /* This function is called from smtp_setup_msg() in the case when
1996 smtp_batched_input is true. This happens when -bS is used to pass a whole batch
1997 of messages in one file with SMTP commands between them. All errors must be
1998 reported by sending a message, and only MAIL FROM, RCPT TO, and DATA are
1999 relevant. After an error on a sender, or an invalid recipient, the remainder
2000 of the message is skipped. The value of received_protocol is already set.
2001
2002 Argument: none
2003 Returns:  > 0 message successfully started (reached DATA)
2004           = 0 QUIT read or end of file reached
2005           < 0 should not occur
2006 */
2007
2008 static int
2009 smtp_setup_batch_msg(void)
2010 {
2011 int done = 0;
2012 void *reset_point = store_get(0);
2013
2014 /* Save the line count at the start of each transaction - single commands
2015 like HELO and RSET count as whole transactions. */
2016
2017 bsmtp_transaction_linecount = receive_linecount;
2018
2019 if ((receive_feof)()) return 0;   /* Treat EOF as QUIT */
2020
2021 smtp_reset(reset_point);                /* Reset for start of message */
2022
2023 /* Deal with SMTP commands. This loop is exited by setting done to a POSITIVE
2024 value. The values are 2 larger than the required yield of the function. */
2025
2026 while (done <= 0)
2027   {
2028   uschar *errmess;
2029   uschar *recipient = NULL;
2030   int start, end, sender_domain, recipient_domain;
2031
2032   switch(smtp_read_command(FALSE, GETC_BUFFER_UNLIMITED))
2033     {
2034     /* The HELO/EHLO commands set sender_address_helo if they have
2035     valid data; otherwise they are ignored, except that they do
2036     a reset of the state. */
2037
2038     case HELO_CMD:
2039     case EHLO_CMD:
2040
2041     check_helo(smtp_cmd_data);
2042     /* Fall through */
2043
2044     case RSET_CMD:
2045     smtp_reset(reset_point);
2046     bsmtp_transaction_linecount = receive_linecount;
2047     break;
2048
2049
2050     /* The MAIL FROM command requires an address as an operand. All we
2051     do here is to parse it for syntactic correctness. The form "<>" is
2052     a special case which converts into an empty string. The start/end
2053     pointers in the original are not used further for this address, as
2054     it is the canonical extracted address which is all that is kept. */
2055
2056     case MAIL_CMD:
2057     smtp_mailcmd_count++;              /* Count for no-mail log */
2058     if (sender_address != NULL)
2059       /* The function moan_smtp_batch() does not return. */
2060       moan_smtp_batch(smtp_cmd_buffer, "503 Sender already given");
2061
2062     if (smtp_cmd_data[0] == 0)
2063       /* The function moan_smtp_batch() does not return. */
2064       moan_smtp_batch(smtp_cmd_buffer, "501 MAIL FROM must have an address operand");
2065
2066     /* Reset to start of message */
2067
2068     smtp_reset(reset_point);
2069
2070     /* Apply SMTP rewrite */
2071
2072     raw_sender = ((rewrite_existflags & rewrite_smtp) != 0)?
2073       rewrite_one(smtp_cmd_data, rewrite_smtp|rewrite_smtp_sender, NULL, FALSE,
2074         US"", global_rewrite_rules) : smtp_cmd_data;
2075
2076     /* Extract the address; the TRUE flag allows <> as valid */
2077
2078     raw_sender =
2079       parse_extract_address(raw_sender, &errmess, &start, &end, &sender_domain,
2080         TRUE);
2081
2082     if (raw_sender == NULL)
2083       /* The function moan_smtp_batch() does not return. */
2084       moan_smtp_batch(smtp_cmd_buffer, "501 %s", errmess);
2085
2086     sender_address = string_copy(raw_sender);
2087
2088     /* Qualify unqualified sender addresses if permitted to do so. */
2089
2090     if (sender_domain == 0 && sender_address[0] != 0 && sender_address[0] != '@')
2091       {
2092       if (allow_unqualified_sender)
2093         {
2094         sender_address = rewrite_address_qualify(sender_address, FALSE);
2095         DEBUG(D_receive) debug_printf("unqualified address %s accepted "
2096           "and rewritten\n", raw_sender);
2097         }
2098       /* The function moan_smtp_batch() does not return. */
2099       else moan_smtp_batch(smtp_cmd_buffer, "501 sender address must contain "
2100         "a domain");
2101       }
2102     break;
2103
2104
2105     /* The RCPT TO command requires an address as an operand. All we do
2106     here is to parse it for syntactic correctness. There may be any number
2107     of RCPT TO commands, specifying multiple senders. We build them all into
2108     a data structure that is in argc/argv format. The start/end values
2109     given by parse_extract_address are not used, as we keep only the
2110     extracted address. */
2111
2112     case RCPT_CMD:
2113     if (sender_address == NULL)
2114       /* The function moan_smtp_batch() does not return. */
2115       moan_smtp_batch(smtp_cmd_buffer, "503 No sender yet given");
2116
2117     if (smtp_cmd_data[0] == 0)
2118       /* The function moan_smtp_batch() does not return. */
2119       moan_smtp_batch(smtp_cmd_buffer, "501 RCPT TO must have an address operand");
2120
2121     /* Check maximum number allowed */
2122
2123     if (recipients_max > 0 && recipients_count + 1 > recipients_max)
2124       /* The function moan_smtp_batch() does not return. */
2125       moan_smtp_batch(smtp_cmd_buffer, "%s too many recipients",
2126         recipients_max_reject? "552": "452");
2127
2128     /* Apply SMTP rewrite, then extract address. Don't allow "<>" as a
2129     recipient address */
2130
2131     recipient = rewrite_existflags & rewrite_smtp
2132       ? rewrite_one(smtp_cmd_data, rewrite_smtp, NULL, FALSE, US"",
2133                     global_rewrite_rules)
2134       : smtp_cmd_data;
2135
2136     recipient = parse_extract_address(recipient, &errmess, &start, &end,
2137       &recipient_domain, FALSE);
2138
2139     if (!recipient)
2140       /* The function moan_smtp_batch() does not return. */
2141       moan_smtp_batch(smtp_cmd_buffer, "501 %s", errmess);
2142
2143     /* If the recipient address is unqualified, qualify it if permitted. Then
2144     add it to the list of recipients. */
2145
2146     if (recipient_domain == 0)
2147       {
2148       if (allow_unqualified_recipient)
2149         {
2150         DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
2151           recipient);
2152         recipient = rewrite_address_qualify(recipient, TRUE);
2153         }
2154       /* The function moan_smtp_batch() does not return. */
2155       else moan_smtp_batch(smtp_cmd_buffer, "501 recipient address must contain "
2156         "a domain");
2157       }
2158     receive_add_recipient(recipient, -1);
2159     break;
2160
2161
2162     /* The DATA command is legal only if it follows successful MAIL FROM
2163     and RCPT TO commands. This function is complete when a valid DATA
2164     command is encountered. */
2165
2166     case DATA_CMD:
2167     if (sender_address == NULL || recipients_count <= 0)
2168       {
2169       /* The function moan_smtp_batch() does not return. */
2170       if (sender_address == NULL)
2171         moan_smtp_batch(smtp_cmd_buffer,
2172           "503 MAIL FROM:<sender> command must precede DATA");
2173       else
2174         moan_smtp_batch(smtp_cmd_buffer,
2175           "503 RCPT TO:<recipient> must precede DATA");
2176       }
2177     else
2178       {
2179       done = 3;                      /* DATA successfully achieved */
2180       message_ended = END_NOTENDED;  /* Indicate in middle of message */
2181       }
2182     break;
2183
2184
2185     /* The VRFY, EXPN, HELP, ETRN, and NOOP commands are ignored. */
2186
2187     case VRFY_CMD:
2188     case EXPN_CMD:
2189     case HELP_CMD:
2190     case NOOP_CMD:
2191     case ETRN_CMD:
2192     bsmtp_transaction_linecount = receive_linecount;
2193     break;
2194
2195
2196     case EOF_CMD:
2197     case QUIT_CMD:
2198     done = 2;
2199     break;
2200
2201
2202     case BADARG_CMD:
2203     /* The function moan_smtp_batch() does not return. */
2204     moan_smtp_batch(smtp_cmd_buffer, "501 Unexpected argument data");
2205     break;
2206
2207
2208     case BADCHAR_CMD:
2209     /* The function moan_smtp_batch() does not return. */
2210     moan_smtp_batch(smtp_cmd_buffer, "501 Unexpected NULL in SMTP command");
2211     break;
2212
2213
2214     default:
2215     /* The function moan_smtp_batch() does not return. */
2216     moan_smtp_batch(smtp_cmd_buffer, "500 Command unrecognized");
2217     break;
2218     }
2219   }
2220
2221 return done - 2;  /* Convert yield values */
2222 }
2223
2224
2225
2226
2227 static BOOL
2228 smtp_log_tls_fail(uschar * errstr)
2229 {
2230 uschar * conn_info = smtp_get_connection_info();
2231
2232 if (Ustrncmp(conn_info, US"SMTP ", 5) == 0) conn_info += 5;
2233 /* I'd like to get separated H= here, but too hard for now */
2234
2235 log_write(0, LOG_MAIN, "TLS error on %s %s", conn_info, errstr);
2236 return FALSE;
2237 }
2238
2239
2240 /*************************************************
2241 *          Start an SMTP session                 *
2242 *************************************************/
2243
2244 /* This function is called at the start of an SMTP session. Thereafter,
2245 smtp_setup_msg() is called to initiate each separate message. This
2246 function does host-specific testing, and outputs the banner line.
2247
2248 Arguments:     none
2249 Returns:       FALSE if the session can not continue; something has
2250                gone wrong, or the connection to the host is blocked
2251 */
2252
2253 BOOL
2254 smtp_start_session(void)
2255 {
2256 int size = 256;
2257 int ptr, esclen;
2258 uschar *user_msg, *log_msg;
2259 uschar *code, *esc;
2260 uschar *p, *s, *ss;
2261
2262 smtp_connection_start = time(NULL);
2263 for (smtp_ch_index = 0; smtp_ch_index < SMTP_HBUFF_SIZE; smtp_ch_index++)
2264   smtp_connection_had[smtp_ch_index] = SCH_NONE;
2265 smtp_ch_index = 0;
2266
2267 /* Default values for certain variables */
2268
2269 helo_seen = esmtp = helo_accept_junk = FALSE;
2270 smtp_mailcmd_count = 0;
2271 count_nonmail = TRUE_UNSET;
2272 synprot_error_count = unknown_command_count = nonmail_command_count = 0;
2273 smtp_delay_mail = smtp_rlm_base;
2274 auth_advertised = FALSE;
2275 pipelining_advertised = FALSE;
2276 pipelining_enable = TRUE;
2277 sync_cmd_limit = NON_SYNC_CMD_NON_PIPELINING;
2278 smtp_exit_function_called = FALSE;    /* For avoiding loop in not-quit exit */
2279
2280 /* If receiving by -bs from a trusted user, or testing with -bh, we allow
2281 authentication settings from -oMaa to remain in force. */
2282
2283 if (!host_checking && !sender_host_notsocket) sender_host_authenticated = NULL;
2284 authenticated_by = NULL;
2285
2286 #ifdef SUPPORT_TLS
2287 tls_in.cipher = tls_in.peerdn = NULL;
2288 tls_in.ourcert = tls_in.peercert = NULL;
2289 tls_in.sni = NULL;
2290 tls_in.ocsp = OCSP_NOT_REQ;
2291 tls_advertised = FALSE;
2292 #endif
2293 dsn_advertised = FALSE;
2294 #ifdef SUPPORT_I18N
2295 smtputf8_advertised = FALSE;
2296 #endif
2297
2298 /* Reset ACL connection variables */
2299
2300 acl_var_c = NULL;
2301
2302 /* Allow for trailing 0 in the command and data buffers. */
2303
2304 if (!(smtp_cmd_buffer = US malloc(2*SMTP_CMD_BUFFER_SIZE + 2)))
2305   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
2306     "malloc() failed for SMTP command buffer");
2307
2308 smtp_cmd_buffer[0] = 0;
2309 smtp_data_buffer = smtp_cmd_buffer + SMTP_CMD_BUFFER_SIZE + 1;
2310
2311 /* For batched input, the protocol setting can be overridden from the
2312 command line by a trusted caller. */
2313
2314 if (smtp_batched_input)
2315   {
2316   if (!received_protocol) received_protocol = US"local-bsmtp";
2317   }
2318
2319 /* For non-batched SMTP input, the protocol setting is forced here. It will be
2320 reset later if any of EHLO/AUTH/STARTTLS are received. */
2321
2322 else
2323   received_protocol =
2324     (sender_host_address ? protocols : protocols_local) [pnormal];
2325
2326 /* Set up the buffer for inputting using direct read() calls, and arrange to
2327 call the local functions instead of the standard C ones. */
2328
2329 if (!(smtp_inbuffer = (uschar *)malloc(IN_BUFFER_SIZE)))
2330   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "malloc() failed for SMTP input buffer");
2331
2332 receive_getc = smtp_getc;
2333 receive_get_cache = smtp_get_cache;
2334 receive_ungetc = smtp_ungetc;
2335 receive_feof = smtp_feof;
2336 receive_ferror = smtp_ferror;
2337 receive_smtp_buffered = smtp_buffered;
2338 smtp_inptr = smtp_inend = smtp_inbuffer;
2339 smtp_had_eof = smtp_had_error = 0;
2340
2341 /* Set up the message size limit; this may be host-specific */
2342
2343 thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
2344 if (expand_string_message != NULL)
2345   {
2346   if (thismessage_size_limit == -1)
2347     log_write(0, LOG_MAIN|LOG_PANIC, "unable to expand message_size_limit: "
2348       "%s", expand_string_message);
2349   else
2350     log_write(0, LOG_MAIN|LOG_PANIC, "invalid message_size_limit: "
2351       "%s", expand_string_message);
2352   smtp_closedown(US"Temporary local problem - please try later");
2353   return FALSE;
2354   }
2355
2356 /* When a message is input locally via the -bs or -bS options, sender_host_
2357 unknown is set unless -oMa was used to force an IP address, in which case it
2358 is checked like a real remote connection. When -bs is used from inetd, this
2359 flag is not set, causing the sending host to be checked. The code that deals
2360 with IP source routing (if configured) is never required for -bs or -bS and
2361 the flag sender_host_notsocket is used to suppress it.
2362
2363 If smtp_accept_max and smtp_accept_reserve are set, keep some connections in
2364 reserve for certain hosts and/or networks. */
2365
2366 if (!sender_host_unknown)
2367   {
2368   int rc;
2369   BOOL reserved_host = FALSE;
2370
2371   /* Look up IP options (source routing info) on the socket if this is not an
2372   -oMa "host", and if any are found, log them and drop the connection.
2373
2374   Linux (and others now, see below) is different to everyone else, so there
2375   has to be some conditional compilation here. Versions of Linux before 2.1.15
2376   used a structure whose name was "options". Somebody finally realized that
2377   this name was silly, and it got changed to "ip_options". I use the
2378   newer name here, but there is a fudge in the script that sets up os.h
2379   to define a macro in older Linux systems.
2380
2381   Sigh. Linux is a fast-moving target. Another generation of Linux uses
2382   glibc 2, which has chosen ip_opts for the structure name. This is now
2383   really a glibc thing rather than a Linux thing, so the condition name
2384   has been changed to reflect this. It is relevant also to GNU/Hurd.
2385
2386   Mac OS 10.x (Darwin) is like the later glibc versions, but without the
2387   setting of the __GLIBC__ macro, so we can't detect it automatically. There's
2388   a special macro defined in the os.h file.
2389
2390   Some DGUX versions on older hardware appear not to support IP options at
2391   all, so there is now a general macro which can be set to cut out this
2392   support altogether.
2393
2394   How to do this properly in IPv6 is not yet known. */
2395
2396   #if !HAVE_IPV6 && !defined(NO_IP_OPTIONS)
2397
2398   #ifdef GLIBC_IP_OPTIONS
2399     #if (!defined __GLIBC__) || (__GLIBC__ < 2)
2400     #define OPTSTYLE 1
2401     #else
2402     #define OPTSTYLE 2
2403     #endif
2404   #elif defined DARWIN_IP_OPTIONS
2405     #define OPTSTYLE 2
2406   #else
2407     #define OPTSTYLE 3
2408   #endif
2409
2410   if (!host_checking && !sender_host_notsocket)
2411     {
2412     #if OPTSTYLE == 1
2413     EXIM_SOCKLEN_T optlen = sizeof(struct ip_options) + MAX_IPOPTLEN;
2414     struct ip_options *ipopt = store_get(optlen);
2415     #elif OPTSTYLE == 2
2416     struct ip_opts ipoptblock;
2417     struct ip_opts *ipopt = &ipoptblock;
2418     EXIM_SOCKLEN_T optlen = sizeof(ipoptblock);
2419     #else
2420     struct ipoption ipoptblock;
2421     struct ipoption *ipopt = &ipoptblock;
2422     EXIM_SOCKLEN_T optlen = sizeof(ipoptblock);
2423     #endif
2424
2425     /* Occasional genuine failures of getsockopt() have been seen - for
2426     example, "reset by peer". Therefore, just log and give up on this
2427     call, unless the error is ENOPROTOOPT. This error is given by systems
2428     that have the interfaces but not the mechanism - e.g. GNU/Hurd at the time
2429     of writing. So for that error, carry on - we just can't do an IP options
2430     check. */
2431
2432     DEBUG(D_receive) debug_printf("checking for IP options\n");
2433
2434     if (getsockopt(fileno(smtp_out), IPPROTO_IP, IP_OPTIONS, (uschar *)(ipopt),
2435           &optlen) < 0)
2436       {
2437       if (errno != ENOPROTOOPT)
2438         {
2439         log_write(0, LOG_MAIN, "getsockopt() failed from %s: %s",
2440           host_and_ident(FALSE), strerror(errno));
2441         smtp_printf("451 SMTP service not available\r\n");
2442         return FALSE;
2443         }
2444       }
2445
2446     /* Deal with any IP options that are set. On the systems I have looked at,
2447     the value of MAX_IPOPTLEN has been 40, meaning that there should never be
2448     more logging data than will fit in big_buffer. Nevertheless, after somebody
2449     questioned this code, I've added in some paranoid checking. */
2450
2451     else if (optlen > 0)
2452       {
2453       uschar *p = big_buffer;
2454       uschar *pend = big_buffer + big_buffer_size;
2455       uschar *opt, *adptr;
2456       int optcount;
2457       struct in_addr addr;
2458
2459       #if OPTSTYLE == 1
2460       uschar *optstart = (uschar *)(ipopt->__data);
2461       #elif OPTSTYLE == 2
2462       uschar *optstart = (uschar *)(ipopt->ip_opts);
2463       #else
2464       uschar *optstart = (uschar *)(ipopt->ipopt_list);
2465       #endif
2466
2467       DEBUG(D_receive) debug_printf("IP options exist\n");
2468
2469       Ustrcpy(p, "IP options on incoming call:");
2470       p += Ustrlen(p);
2471
2472       for (opt = optstart; opt != NULL &&
2473            opt < (uschar *)(ipopt) + optlen;)
2474         {
2475         switch (*opt)
2476           {
2477           case IPOPT_EOL:
2478           opt = NULL;
2479           break;
2480
2481           case IPOPT_NOP:
2482           opt++;
2483           break;
2484
2485           case IPOPT_SSRR:
2486           case IPOPT_LSRR:
2487           if (!string_format(p, pend-p, " %s [@%s",
2488                (*opt == IPOPT_SSRR)? "SSRR" : "LSRR",
2489                #if OPTSTYLE == 1
2490                inet_ntoa(*((struct in_addr *)(&(ipopt->faddr))))))
2491                #elif OPTSTYLE == 2
2492                inet_ntoa(ipopt->ip_dst)))
2493                #else
2494                inet_ntoa(ipopt->ipopt_dst)))
2495                #endif
2496             {
2497             opt = NULL;
2498             break;
2499             }
2500
2501           p += Ustrlen(p);
2502           optcount = (opt[1] - 3) / sizeof(struct in_addr);
2503           adptr = opt + 3;
2504           while (optcount-- > 0)
2505             {
2506             memcpy(&addr, adptr, sizeof(addr));
2507             if (!string_format(p, pend - p - 1, "%s%s",
2508                   (optcount == 0)? ":" : "@", inet_ntoa(addr)))
2509               {
2510               opt = NULL;
2511               break;
2512               }
2513             p += Ustrlen(p);
2514             adptr += sizeof(struct in_addr);
2515             }
2516           *p++ = ']';
2517           opt += opt[1];
2518           break;
2519
2520           default:
2521             {
2522             int i;
2523             if (pend - p < 4 + 3*opt[1]) { opt = NULL; break; }
2524             Ustrcat(p, "[ ");
2525             p += 2;
2526             for (i = 0; i < opt[1]; i++)
2527               {
2528               sprintf(CS p, "%2.2x ", opt[i]);
2529               p += 3;
2530               }
2531             *p++ = ']';
2532             }
2533           opt += opt[1];
2534           break;
2535           }
2536         }
2537
2538       *p = 0;
2539       log_write(0, LOG_MAIN, "%s", big_buffer);
2540
2541       /* Refuse any call with IP options. This is what tcpwrappers 7.5 does. */
2542
2543       log_write(0, LOG_MAIN|LOG_REJECT,
2544         "connection from %s refused (IP options)", host_and_ident(FALSE));
2545
2546       smtp_printf("554 SMTP service not available\r\n");
2547       return FALSE;
2548       }
2549
2550     /* Length of options = 0 => there are no options */
2551
2552     else DEBUG(D_receive) debug_printf("no IP options found\n");
2553     }
2554   #endif  /* HAVE_IPV6 && !defined(NO_IP_OPTIONS) */
2555
2556   /* Set keep-alive in socket options. The option is on by default. This
2557   setting is an attempt to get rid of some hanging connections that stick in
2558   read() when the remote end (usually a dialup) goes away. */
2559
2560   if (smtp_accept_keepalive && !sender_host_notsocket)
2561     ip_keepalive(fileno(smtp_out), sender_host_address, FALSE);
2562
2563   /* If the current host matches host_lookup, set the name by doing a
2564   reverse lookup. On failure, sender_host_name will be NULL and
2565   host_lookup_failed will be TRUE. This may or may not be serious - optional
2566   checks later. */
2567
2568   if (verify_check_host(&host_lookup) == OK)
2569     {
2570     (void)host_name_lookup();
2571     host_build_sender_fullhost();
2572     }
2573
2574   /* Delay this until we have the full name, if it is looked up. */
2575
2576   set_process_info("handling incoming connection from %s",
2577     host_and_ident(FALSE));
2578
2579   /* Expand smtp_receive_timeout, if needed */
2580
2581   if (smtp_receive_timeout_s)
2582     {
2583     uschar * exp;
2584     if (  !(exp = expand_string(smtp_receive_timeout_s))
2585        || !(*exp)
2586        || (smtp_receive_timeout = readconf_readtime(exp, 0, FALSE)) < 0
2587        )
2588       log_write(0, LOG_MAIN|LOG_PANIC,
2589         "bad value for smtp_receive_timeout: '%s'", exp ? exp : US"");
2590     }
2591
2592   /* Test for explicit connection rejection */
2593
2594   if (verify_check_host(&host_reject_connection) == OK)
2595     {
2596     log_write(L_connection_reject, LOG_MAIN|LOG_REJECT, "refused connection "
2597       "from %s (host_reject_connection)", host_and_ident(FALSE));
2598     smtp_printf("554 SMTP service not available\r\n");
2599     return FALSE;
2600     }
2601
2602   /* Test with TCP Wrappers if so configured. There is a problem in that
2603   hosts_ctl() returns 0 (deny) under a number of system failure circumstances,
2604   such as disks dying. In these cases, it is desirable to reject with a 4xx
2605   error instead of a 5xx error. There isn't a "right" way to detect such
2606   problems. The following kludge is used: errno is zeroed before calling
2607   hosts_ctl(). If the result is "reject", a 5xx error is given only if the
2608   value of errno is 0 or ENOENT (which happens if /etc/hosts.{allow,deny} does
2609   not exist). */
2610
2611 #ifdef USE_TCP_WRAPPERS
2612   errno = 0;
2613   if (!(tcp_wrappers_name = expand_string(tcp_wrappers_daemon_name)))
2614     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Expansion of \"%s\" "
2615       "(tcp_wrappers_name) failed: %s", string_printing(tcp_wrappers_name),
2616         expand_string_message);
2617
2618   if (!hosts_ctl(tcp_wrappers_name,
2619          sender_host_name ? CS sender_host_name : STRING_UNKNOWN,
2620          sender_host_address ? CS sender_host_address : STRING_UNKNOWN,
2621          sender_ident ? CS sender_ident : STRING_UNKNOWN))
2622     {
2623     if (errno == 0 || errno == ENOENT)
2624       {
2625       HDEBUG(D_receive) debug_printf("tcp wrappers rejection\n");
2626       log_write(L_connection_reject,
2627                 LOG_MAIN|LOG_REJECT, "refused connection from %s "
2628                 "(tcp wrappers)", host_and_ident(FALSE));
2629       smtp_printf("554 SMTP service not available\r\n");
2630       }
2631     else
2632       {
2633       int save_errno = errno;
2634       HDEBUG(D_receive) debug_printf("tcp wrappers rejected with unexpected "
2635         "errno value %d\n", save_errno);
2636       log_write(L_connection_reject,
2637                 LOG_MAIN|LOG_REJECT, "temporarily refused connection from %s "
2638                 "(tcp wrappers errno=%d)", host_and_ident(FALSE), save_errno);
2639       smtp_printf("451 Temporary local problem - please try later\r\n");
2640       }
2641     return FALSE;
2642     }
2643 #endif
2644
2645   /* Check for reserved slots. The value of smtp_accept_count has already been
2646   incremented to include this process. */
2647
2648   if (smtp_accept_max > 0 &&
2649       smtp_accept_count > smtp_accept_max - smtp_accept_reserve)
2650     {
2651     if ((rc = verify_check_host(&smtp_reserve_hosts)) != OK)
2652       {
2653       log_write(L_connection_reject,
2654         LOG_MAIN, "temporarily refused connection from %s: not in "
2655         "reserve list: connected=%d max=%d reserve=%d%s",
2656         host_and_ident(FALSE), smtp_accept_count - 1, smtp_accept_max,
2657         smtp_accept_reserve, (rc == DEFER)? " (lookup deferred)" : "");
2658       smtp_printf("421 %s: Too many concurrent SMTP connections; "
2659         "please try again later\r\n", smtp_active_hostname);
2660       return FALSE;
2661       }
2662     reserved_host = TRUE;
2663     }
2664
2665   /* If a load level above which only messages from reserved hosts are
2666   accepted is set, check the load. For incoming calls via the daemon, the
2667   check is done in the superior process if there are no reserved hosts, to
2668   save a fork. In all cases, the load average will already be available
2669   in a global variable at this point. */
2670
2671   if (smtp_load_reserve >= 0 &&
2672        load_average > smtp_load_reserve &&
2673        !reserved_host &&
2674        verify_check_host(&smtp_reserve_hosts) != OK)
2675     {
2676     log_write(L_connection_reject,
2677       LOG_MAIN, "temporarily refused connection from %s: not in "
2678       "reserve list and load average = %.2f", host_and_ident(FALSE),
2679       (double)load_average/1000.0);
2680     smtp_printf("421 %s: Too much load; please try again later\r\n",
2681       smtp_active_hostname);
2682     return FALSE;
2683     }
2684
2685   /* Determine whether unqualified senders or recipients are permitted
2686   for this host. Unfortunately, we have to do this every time, in order to
2687   set the flags so that they can be inspected when considering qualifying
2688   addresses in the headers. For a site that permits no qualification, this
2689   won't take long, however. */
2690
2691   allow_unqualified_sender =
2692     verify_check_host(&sender_unqualified_hosts) == OK;
2693
2694   allow_unqualified_recipient =
2695     verify_check_host(&recipient_unqualified_hosts) == OK;
2696
2697   /* Determine whether HELO/EHLO is required for this host. The requirement
2698   can be hard or soft. */
2699
2700   helo_required = verify_check_host(&helo_verify_hosts) == OK;
2701   if (!helo_required)
2702     helo_verify = verify_check_host(&helo_try_verify_hosts) == OK;
2703
2704   /* Determine whether this hosts is permitted to send syntactic junk
2705   after a HELO or EHLO command. */
2706
2707   helo_accept_junk = verify_check_host(&helo_accept_junk_hosts) == OK;
2708   }
2709
2710 /* For batch SMTP input we are now done. */
2711
2712 if (smtp_batched_input) return TRUE;
2713
2714 /* If valid Proxy Protocol source is connecting, set up session.
2715  * Failure will not allow any SMTP function other than QUIT. */
2716
2717 #ifdef SUPPORT_PROXY
2718 proxy_session = FALSE;
2719 proxy_session_failed = FALSE;
2720 if (check_proxy_protocol_host())
2721   setup_proxy_protocol_host();
2722 #endif
2723
2724   /* Start up TLS if tls_on_connect is set. This is for supporting the legacy
2725   smtps port for use with older style SSL MTAs. */
2726
2727 #ifdef SUPPORT_TLS
2728   if (tls_in.on_connect && tls_server_start(tls_require_ciphers, &user_msg) != OK)
2729     return smtp_log_tls_fail(user_msg);
2730 #endif
2731
2732 /* Run the connect ACL if it exists */
2733
2734 user_msg = NULL;
2735 if (acl_smtp_connect)
2736   {
2737   int rc;
2738   if ((rc = acl_check(ACL_WHERE_CONNECT, NULL, acl_smtp_connect, &user_msg,
2739                       &log_msg)) != OK)
2740     {
2741     (void) smtp_handle_acl_fail(ACL_WHERE_CONNECT, rc, user_msg, log_msg);
2742     return FALSE;
2743     }
2744   }
2745
2746 /* Output the initial message for a two-way SMTP connection. It may contain
2747 newlines, which then cause a multi-line response to be given. */
2748
2749 code = US"220";   /* Default status code */
2750 esc = US"";       /* Default extended status code */
2751 esclen = 0;       /* Length of esc */
2752
2753 if (!user_msg)
2754   {
2755   if (!(s = expand_string(smtp_banner)))
2756     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Expansion of \"%s\" (smtp_banner) "
2757       "failed: %s", smtp_banner, expand_string_message);
2758   }
2759 else
2760   {
2761   int codelen = 3;
2762   s = user_msg;
2763   smtp_message_code(&code, &codelen, &s, NULL, TRUE);
2764   if (codelen > 4)
2765     {
2766     esc = code + 4;
2767     esclen = codelen - 4;
2768     }
2769   }
2770
2771 /* Remove any terminating newlines; might as well remove trailing space too */
2772
2773 p = s + Ustrlen(s);
2774 while (p > s && isspace(p[-1])) p--;
2775 *p = 0;
2776
2777 /* It seems that CC:Mail is braindead, and assumes that the greeting message
2778 is all contained in a single IP packet. The original code wrote out the
2779 greeting using several calls to fprint/fputc, and on busy servers this could
2780 cause it to be split over more than one packet - which caused CC:Mail to fall
2781 over when it got the second part of the greeting after sending its first
2782 command. Sigh. To try to avoid this, build the complete greeting message
2783 first, and output it in one fell swoop. This gives a better chance of it
2784 ending up as a single packet. */
2785
2786 ss = store_get(size);
2787 ptr = 0;
2788
2789 p = s;
2790 do       /* At least once, in case we have an empty string */
2791   {
2792   int len;
2793   uschar *linebreak = Ustrchr(p, '\n');
2794   ss = string_catn(ss, &size, &ptr, code, 3);
2795   if (linebreak == NULL)
2796     {
2797     len = Ustrlen(p);
2798     ss = string_catn(ss, &size, &ptr, US" ", 1);
2799     }
2800   else
2801     {
2802     len = linebreak - p;
2803     ss = string_catn(ss, &size, &ptr, US"-", 1);
2804     }
2805   ss = string_catn(ss, &size, &ptr, esc, esclen);
2806   ss = string_catn(ss, &size, &ptr, p, len);
2807   ss = string_catn(ss, &size, &ptr, US"\r\n", 2);
2808   p += len;
2809   if (linebreak != NULL) p++;
2810   }
2811 while (*p != 0);
2812
2813 ss[ptr] = 0;  /* string_cat leaves room for this */
2814
2815 /* Before we write the banner, check that there is no input pending, unless
2816 this synchronisation check is disabled. */
2817
2818 if (!check_sync())
2819   {
2820   log_write(0, LOG_MAIN|LOG_REJECT, "SMTP protocol "
2821     "synchronization error (input sent without waiting for greeting): "
2822     "rejected connection from %s input=\"%s\"", host_and_ident(TRUE),
2823     string_printing(smtp_inptr));
2824   smtp_printf("554 SMTP synchronization error\r\n");
2825   return FALSE;
2826   }
2827
2828 /* Now output the banner */
2829
2830 smtp_printf("%s", ss);
2831 return TRUE;
2832 }
2833
2834
2835
2836
2837
2838 /*************************************************
2839 *     Handle SMTP syntax and protocol errors     *
2840 *************************************************/
2841
2842 /* Write to the log for SMTP syntax errors in incoming commands, if configured
2843 to do so. Then transmit the error response. The return value depends on the
2844 number of syntax and protocol errors in this SMTP session.
2845
2846 Arguments:
2847   type      error type, given as a log flag bit
2848   code      response code; <= 0 means don't send a response
2849   data      data to reflect in the response (can be NULL)
2850   errmess   the error message
2851
2852 Returns:    -1   limit of syntax/protocol errors NOT exceeded
2853             +1   limit of syntax/protocol errors IS exceeded
2854
2855 These values fit in with the values of the "done" variable in the main
2856 processing loop in smtp_setup_msg(). */
2857
2858 static int
2859 synprot_error(int type, int code, uschar *data, uschar *errmess)
2860 {
2861 int yield = -1;
2862
2863 log_write(type, LOG_MAIN, "SMTP %s error in \"%s\" %s %s",
2864   (type == L_smtp_syntax_error)? "syntax" : "protocol",
2865   string_printing(smtp_cmd_buffer), host_and_ident(TRUE), errmess);
2866
2867 if (++synprot_error_count > smtp_max_synprot_errors)
2868   {
2869   yield = 1;
2870   log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
2871     "syntax or protocol errors (last command was \"%s\")",
2872     host_and_ident(FALSE), string_printing(smtp_cmd_buffer));
2873   }
2874
2875 if (code > 0)
2876   {
2877   smtp_printf("%d%c%s%s%s\r\n", code, (yield == 1)? '-' : ' ',
2878     (data == NULL)? US"" : data, (data == NULL)? US"" : US": ", errmess);
2879   if (yield == 1)
2880     smtp_printf("%d Too many syntax or protocol errors\r\n", code);
2881   }
2882
2883 return yield;
2884 }
2885
2886
2887
2888
2889 /*************************************************
2890 *    Send SMTP response, possibly multiline      *
2891 *************************************************/
2892
2893 /* There are, it seems, broken clients out there that cannot handle multiline
2894 responses. If no_multiline_responses is TRUE (it can be set from an ACL), we
2895 output nothing for non-final calls, and only the first line for anything else.
2896
2897 Arguments:
2898   code          SMTP code, may involve extended status codes
2899   codelen       length of smtp code; if > 4 there's an ESC
2900   final         FALSE if the last line isn't the final line
2901   msg           message text, possibly containing newlines
2902
2903 Returns:        nothing
2904 */
2905
2906 void
2907 smtp_respond(uschar* code, int codelen, BOOL final, uschar *msg)
2908 {
2909 int esclen = 0;
2910 uschar *esc = US"";
2911
2912 if (!final && no_multiline_responses) return;
2913
2914 if (codelen > 4)
2915   {
2916   esc = code + 4;
2917   esclen = codelen - 4;
2918   }
2919
2920 /* If this is the first output for a (non-batch) RCPT command, see if all RCPTs
2921 have had the same. Note: this code is also present in smtp_printf(). It would
2922 be tidier to have it only in one place, but when it was added, it was easier to
2923 do it that way, so as not to have to mess with the code for the RCPT command,
2924 which sometimes uses smtp_printf() and sometimes smtp_respond(). */
2925
2926 if (rcpt_in_progress)
2927   {
2928   if (rcpt_smtp_response == NULL)
2929     rcpt_smtp_response = string_copy(msg);
2930   else if (rcpt_smtp_response_same &&
2931            Ustrcmp(rcpt_smtp_response, msg) != 0)
2932     rcpt_smtp_response_same = FALSE;
2933   rcpt_in_progress = FALSE;
2934   }
2935
2936 /* Not output the message, splitting it up into multiple lines if necessary. */
2937
2938 for (;;)
2939   {
2940   uschar *nl = Ustrchr(msg, '\n');
2941   if (nl == NULL)
2942     {
2943     smtp_printf("%.3s%c%.*s%s\r\n", code, final? ' ':'-', esclen, esc, msg);
2944     return;
2945     }
2946   else if (nl[1] == 0 || no_multiline_responses)
2947     {
2948     smtp_printf("%.3s%c%.*s%.*s\r\n", code, final? ' ':'-', esclen, esc,
2949       (int)(nl - msg), msg);
2950     return;
2951     }
2952   else
2953     {
2954     smtp_printf("%.3s-%.*s%.*s\r\n", code, esclen, esc, (int)(nl - msg), msg);
2955     msg = nl + 1;
2956     while (isspace(*msg)) msg++;
2957     }
2958   }
2959 }
2960
2961
2962
2963
2964 /*************************************************
2965 *            Parse user SMTP message             *
2966 *************************************************/
2967
2968 /* This function allows for user messages overriding the response code details
2969 by providing a suitable response code string at the start of the message
2970 user_msg. Check the message for starting with a response code and optionally an
2971 extended status code. If found, check that the first digit is valid, and if so,
2972 change the code pointer and length to use the replacement. An invalid code
2973 causes a panic log; in this case, if the log messages is the same as the user
2974 message, we must also adjust the value of the log message to show the code that
2975 is actually going to be used (the original one).
2976
2977 This function is global because it is called from receive.c as well as within
2978 this module.
2979
2980 Note that the code length returned includes the terminating whitespace
2981 character, which is always included in the regex match.
2982
2983 Arguments:
2984   code          SMTP code, may involve extended status codes
2985   codelen       length of smtp code; if > 4 there's an ESC
2986   msg           message text
2987   log_msg       optional log message, to be adjusted with the new SMTP code
2988   check_valid   if true, verify the response code
2989
2990 Returns:        nothing
2991 */
2992
2993 void
2994 smtp_message_code(uschar **code, int *codelen, uschar **msg, uschar **log_msg,
2995   BOOL check_valid)
2996 {
2997 int n;
2998 int ovector[3];
2999
3000 if (!msg || !*msg) return;
3001
3002 if ((n = pcre_exec(regex_smtp_code, NULL, CS *msg, Ustrlen(*msg), 0,
3003   PCRE_EOPT, ovector, sizeof(ovector)/sizeof(int))) < 0) return;
3004
3005 if (check_valid && (*msg)[0] != (*code)[0])
3006   {
3007   log_write(0, LOG_MAIN|LOG_PANIC, "configured error code starts with "
3008     "incorrect digit (expected %c) in \"%s\"", (*code)[0], *msg);
3009   if (log_msg != NULL && *log_msg == *msg)
3010     *log_msg = string_sprintf("%s %s", *code, *log_msg + ovector[1]);
3011   }
3012 else
3013   {
3014   *code = *msg;
3015   *codelen = ovector[1];    /* Includes final space */
3016   }
3017 *msg += ovector[1];         /* Chop the code off the message */
3018 return;
3019 }
3020
3021
3022
3023
3024 /*************************************************
3025 *           Handle an ACL failure                *
3026 *************************************************/
3027
3028 /* This function is called when acl_check() fails. As well as calls from within
3029 this module, it is called from receive.c for an ACL after DATA. It sorts out
3030 logging the incident, and sets up the error response. A message containing
3031 newlines is turned into a multiline SMTP response, but for logging, only the
3032 first line is used.
3033
3034 There's a table of default permanent failure response codes to use in
3035 globals.c, along with the table of names. VFRY is special. Despite RFC1123 it
3036 defaults disabled in Exim. However, discussion in connection with RFC 821bis
3037 (aka RFC 2821) has concluded that the response should be 252 in the disabled
3038 state, because there are broken clients that try VRFY before RCPT. A 5xx
3039 response should be given only when the address is positively known to be
3040 undeliverable. Sigh. We return 252 if there is no VRFY ACL or it provides
3041 no explicit code, but if there is one we let it know best.
3042 Also, for ETRN, 458 is given on refusal, and for AUTH, 503.
3043
3044 From Exim 4.63, it is possible to override the response code details by
3045 providing a suitable response code string at the start of the message provided
3046 in user_msg. The code's first digit is checked for validity.
3047
3048 Arguments:
3049   where        where the ACL was called from
3050   rc           the failure code
3051   user_msg     a message that can be included in an SMTP response
3052   log_msg      a message for logging
3053
3054 Returns:     0 in most cases
3055              2 if the failure code was FAIL_DROP, in which case the
3056                SMTP connection should be dropped (this value fits with the
3057                "done" variable in smtp_setup_msg() below)
3058 */
3059
3060 int
3061 smtp_handle_acl_fail(int where, int rc, uschar *user_msg, uschar *log_msg)
3062 {
3063 BOOL drop = rc == FAIL_DROP;
3064 int codelen = 3;
3065 uschar *smtp_code;
3066 uschar *lognl;
3067 uschar *sender_info = US"";
3068 uschar *what =
3069 #ifdef WITH_CONTENT_SCAN
3070   where == ACL_WHERE_MIME ? US"during MIME ACL checks" :
3071 #endif
3072   where == ACL_WHERE_PREDATA ? US"DATA" :
3073   where == ACL_WHERE_DATA ? US"after DATA" :
3074 #ifndef DISABLE_PRDR
3075   where == ACL_WHERE_PRDR ? US"after DATA PRDR" :
3076 #endif
3077   smtp_cmd_data ?
3078     string_sprintf("%s %s", acl_wherenames[where], smtp_cmd_data) :
3079     string_sprintf("%s in \"connect\" ACL", acl_wherenames[where]);
3080
3081 if (drop) rc = FAIL;
3082
3083 /* Set the default SMTP code, and allow a user message to change it. */
3084
3085 smtp_code = rc == FAIL ? acl_wherecodes[where] : US"451";
3086 smtp_message_code(&smtp_code, &codelen, &user_msg, &log_msg,
3087   where != ACL_WHERE_VRFY);
3088
3089 /* We used to have sender_address here; however, there was a bug that was not
3090 updating sender_address after a rewrite during a verify. When this bug was
3091 fixed, sender_address at this point became the rewritten address. I'm not sure
3092 this is what should be logged, so I've changed to logging the unrewritten
3093 address to retain backward compatibility. */
3094
3095 #ifndef WITH_CONTENT_SCAN
3096 if (where == ACL_WHERE_RCPT || where == ACL_WHERE_DATA)
3097 #else
3098 if (where == ACL_WHERE_RCPT || where == ACL_WHERE_DATA || where == ACL_WHERE_MIME)
3099 #endif
3100   {
3101   sender_info = string_sprintf("F=<%s>%s%s%s%s ",
3102     sender_address_unrewritten ? sender_address_unrewritten : sender_address,
3103     sender_host_authenticated ? US" A="                                    : US"",
3104     sender_host_authenticated ? sender_host_authenticated                  : US"",
3105     sender_host_authenticated && authenticated_id ? US":"                  : US"",
3106     sender_host_authenticated && authenticated_id ? authenticated_id       : US""
3107     );
3108   }
3109
3110 /* If there's been a sender verification failure with a specific message, and
3111 we have not sent a response about it yet, do so now, as a preliminary line for
3112 failures, but not defers. However, always log it for defer, and log it for fail
3113 unless the sender_verify_fail log selector has been turned off. */
3114
3115 if (sender_verified_failed &&
3116     !testflag(sender_verified_failed, af_sverify_told))
3117   {
3118   BOOL save_rcpt_in_progress = rcpt_in_progress;
3119   rcpt_in_progress = FALSE;  /* So as not to treat these as the error */
3120
3121   setflag(sender_verified_failed, af_sverify_told);
3122
3123   if (rc != FAIL || LOGGING(sender_verify_fail))
3124     log_write(0, LOG_MAIN|LOG_REJECT, "%s sender verify %s for <%s>%s",
3125       host_and_ident(TRUE),
3126       ((sender_verified_failed->special_action & 255) == DEFER)? "defer":"fail",
3127       sender_verified_failed->address,
3128       (sender_verified_failed->message == NULL)? US"" :
3129       string_sprintf(": %s", sender_verified_failed->message));
3130
3131   if (rc == FAIL && sender_verified_failed->user_message)
3132     smtp_respond(smtp_code, codelen, FALSE, string_sprintf(
3133         testflag(sender_verified_failed, af_verify_pmfail)?
3134           "Postmaster verification failed while checking <%s>\n%s\n"
3135           "Several RFCs state that you are required to have a postmaster\n"
3136           "mailbox for each mail domain. This host does not accept mail\n"
3137           "from domains whose servers reject the postmaster address."
3138           :
3139         testflag(sender_verified_failed, af_verify_nsfail)?
3140           "Callback setup failed while verifying <%s>\n%s\n"
3141           "The initial connection, or a HELO or MAIL FROM:<> command was\n"
3142           "rejected. Refusing MAIL FROM:<> does not help fight spam, disregards\n"
3143           "RFC requirements, and stops you from receiving standard bounce\n"
3144           "messages. This host does not accept mail from domains whose servers\n"
3145           "refuse bounces."
3146           :
3147           "Verification failed for <%s>\n%s",
3148         sender_verified_failed->address,
3149         sender_verified_failed->user_message));
3150
3151   rcpt_in_progress = save_rcpt_in_progress;
3152   }
3153
3154 /* Sort out text for logging */
3155
3156 log_msg = log_msg ? string_sprintf(": %s", log_msg) : US"";
3157 if ((lognl = Ustrchr(log_msg, '\n'))) *lognl = 0;
3158
3159 /* Send permanent failure response to the command, but the code used isn't
3160 always a 5xx one - see comments at the start of this function. If the original
3161 rc was FAIL_DROP we drop the connection and yield 2. */
3162
3163 if (rc == FAIL)
3164   smtp_respond(smtp_code, codelen, TRUE,
3165     user_msg ? user_msg : US"Administrative prohibition");
3166
3167 /* Send temporary failure response to the command. Don't give any details,
3168 unless acl_temp_details is set. This is TRUE for a callout defer, a "defer"
3169 verb, and for a header verify when smtp_return_error_details is set.
3170
3171 This conditional logic is all somewhat of a mess because of the odd
3172 interactions between temp_details and return_error_details. One day it should
3173 be re-implemented in a tidier fashion. */
3174
3175 else
3176   if (acl_temp_details && user_msg)
3177     {
3178     if (  smtp_return_error_details
3179        && sender_verified_failed
3180        && sender_verified_failed->message
3181        )
3182       smtp_respond(smtp_code, codelen, FALSE, sender_verified_failed->message);
3183
3184     smtp_respond(smtp_code, codelen, TRUE, user_msg);
3185     }
3186   else
3187     smtp_respond(smtp_code, codelen, TRUE,
3188       US"Temporary local problem - please try later");
3189
3190 /* Log the incident to the logs that are specified by log_reject_target
3191 (default main, reject). This can be empty to suppress logging of rejections. If
3192 the connection is not forcibly to be dropped, return 0. Otherwise, log why it
3193 is closing if required and return 2.  */
3194
3195 if (log_reject_target != 0)
3196   {
3197 #ifdef SUPPORT_TLS
3198   uschar * tls = s_tlslog(NULL, NULL, NULL);
3199   if (!tls) tls = US"";
3200 #else
3201   uschar * tls = US"";
3202 #endif
3203   log_write(where == ACL_WHERE_CONNECT ? L_connection_reject : 0,
3204     log_reject_target, "%s%s%s %s%srejected %s%s",
3205     LOGGING(dnssec) && sender_host_dnssec ? US" DS" : US"",
3206     host_and_ident(TRUE),
3207     tls,
3208     sender_info,
3209     rc == FAIL ? US"" : US"temporarily ",
3210     what, log_msg);
3211   }
3212
3213 if (!drop) return 0;
3214
3215 log_write(L_smtp_connection, LOG_MAIN, "%s closed by DROP in ACL",
3216   smtp_get_connection_info());
3217
3218 /* Run the not-quit ACL, but without any custom messages. This should not be a
3219 problem, because we get here only if some other ACL has issued "drop", and
3220 in that case, *its* custom messages will have been used above. */
3221
3222 smtp_notquit_exit(US"acl-drop", NULL, NULL);
3223 return 2;
3224 }
3225
3226
3227
3228
3229 /*************************************************
3230 *     Handle SMTP exit when QUIT is not given    *
3231 *************************************************/
3232
3233 /* This function provides a logging/statistics hook for when an SMTP connection
3234 is dropped on the floor or the other end goes away. It's a global function
3235 because it's called from receive.c as well as this module. As well as running
3236 the NOTQUIT ACL, if there is one, this function also outputs a final SMTP
3237 response, either with a custom message from the ACL, or using a default. There
3238 is one case, however, when no message is output - after "drop". In that case,
3239 the ACL that obeyed "drop" has already supplied the custom message, and NULL is
3240 passed to this function.
3241
3242 In case things go wrong while processing this function, causing an error that
3243 may re-enter this function, there is a recursion check.
3244
3245 Arguments:
3246   reason          What $smtp_notquit_reason will be set to in the ACL;
3247                     if NULL, the ACL is not run
3248   code            The error code to return as part of the response
3249   defaultrespond  The default message if there's no user_msg
3250
3251 Returns:          Nothing
3252 */
3253
3254 void
3255 smtp_notquit_exit(uschar *reason, uschar *code, uschar *defaultrespond, ...)
3256 {
3257 int rc;
3258 uschar *user_msg = NULL;
3259 uschar *log_msg = NULL;
3260
3261 /* Check for recursive acll */
3262
3263 if (smtp_exit_function_called)
3264   {
3265   log_write(0, LOG_PANIC, "smtp_notquit_exit() called more than once (%s)",
3266     reason);
3267   return;
3268   }
3269 smtp_exit_function_called = TRUE;
3270
3271 /* Call the not-QUIT ACL, if there is one, unless no reason is given. */
3272
3273 if (acl_smtp_notquit && reason)
3274   {
3275   smtp_notquit_reason = reason;
3276   if ((rc = acl_check(ACL_WHERE_NOTQUIT, NULL, acl_smtp_notquit, &user_msg,
3277                       &log_msg)) == ERROR)
3278     log_write(0, LOG_MAIN|LOG_PANIC, "ACL for not-QUIT returned ERROR: %s",
3279       log_msg);
3280   }
3281
3282 /* Write an SMTP response if we are expected to give one. As the default
3283 responses are all internal, they should always fit in the buffer, but code a
3284 warning, just in case. Note that string_vformat() still leaves a complete
3285 string, even if it is incomplete. */
3286
3287 if (code && defaultrespond)
3288   {
3289   if (user_msg)
3290     smtp_respond(code, 3, TRUE, user_msg);
3291   else
3292     {
3293     uschar buffer[128];
3294     va_list ap;
3295     va_start(ap, defaultrespond);
3296     if (!string_vformat(buffer, sizeof(buffer), CS defaultrespond, ap))
3297       log_write(0, LOG_MAIN|LOG_PANIC, "string too large in smtp_notquit_exit()");
3298     smtp_printf("%s %s\r\n", code, buffer);
3299     va_end(ap);
3300     }
3301   mac_smtp_fflush();
3302   }
3303 }
3304
3305
3306
3307
3308 /*************************************************
3309 *             Verify HELO argument               *
3310 *************************************************/
3311
3312 /* This function is called if helo_verify_hosts or helo_try_verify_hosts is
3313 matched. It is also called from ACL processing if verify = helo is used and
3314 verification was not previously tried (i.e. helo_try_verify_hosts was not
3315 matched). The result of its processing is to set helo_verified and
3316 helo_verify_failed. These variables should both be FALSE for this function to
3317 be called.
3318
3319 Note that EHLO/HELO is legitimately allowed to quote an address literal. Allow
3320 for IPv6 ::ffff: literals.
3321
3322 Argument:   none
3323 Returns:    TRUE if testing was completed;
3324             FALSE on a temporary failure
3325 */
3326
3327 BOOL
3328 smtp_verify_helo(void)
3329 {
3330 BOOL yield = TRUE;
3331
3332 HDEBUG(D_receive) debug_printf("verifying EHLO/HELO argument \"%s\"\n",
3333   sender_helo_name);
3334
3335 if (sender_helo_name == NULL)
3336   {
3337   HDEBUG(D_receive) debug_printf("no EHLO/HELO command was issued\n");
3338   }
3339
3340 /* Deal with the case of -bs without an IP address */
3341
3342 else if (sender_host_address == NULL)
3343   {
3344   HDEBUG(D_receive) debug_printf("no client IP address: assume success\n");
3345   helo_verified = TRUE;
3346   }
3347
3348 /* Deal with the more common case when there is a sending IP address */
3349
3350 else if (sender_helo_name[0] == '[')
3351   {
3352   helo_verified = Ustrncmp(sender_helo_name+1, sender_host_address,
3353     Ustrlen(sender_host_address)) == 0;
3354
3355   #if HAVE_IPV6
3356   if (!helo_verified)
3357     {
3358     if (strncmpic(sender_host_address, US"::ffff:", 7) == 0)
3359       helo_verified = Ustrncmp(sender_helo_name + 1,
3360         sender_host_address + 7, Ustrlen(sender_host_address) - 7) == 0;
3361     }
3362   #endif
3363
3364   HDEBUG(D_receive)
3365     { if (helo_verified) debug_printf("matched host address\n"); }
3366   }
3367
3368 /* Do a reverse lookup if one hasn't already given a positive or negative
3369 response. If that fails, or the name doesn't match, try checking with a forward
3370 lookup. */
3371
3372 else
3373   {
3374   if (sender_host_name == NULL && !host_lookup_failed)
3375     yield = host_name_lookup() != DEFER;
3376
3377   /* If a host name is known, check it and all its aliases. */
3378
3379   if (sender_host_name)
3380     if ((helo_verified = strcmpic(sender_host_name, sender_helo_name) == 0))
3381       {
3382       sender_helo_dnssec = sender_host_dnssec;
3383       HDEBUG(D_receive) debug_printf("matched host name\n");
3384       }
3385     else
3386       {
3387       uschar **aliases = sender_host_aliases;
3388       while (*aliases)
3389         if ((helo_verified = strcmpic(*aliases++, sender_helo_name) == 0))
3390           {
3391           sender_helo_dnssec = sender_host_dnssec;
3392           break;
3393           }
3394
3395       HDEBUG(D_receive) if (helo_verified)
3396           debug_printf("matched alias %s\n", *(--aliases));
3397       }
3398
3399   /* Final attempt: try a forward lookup of the helo name */
3400
3401   if (!helo_verified)
3402     {
3403     int rc;
3404     host_item h;
3405     dnssec_domains d;
3406     host_item *hh;
3407
3408     h.name = sender_helo_name;
3409     h.address = NULL;
3410     h.mx = MX_NONE;
3411     h.next = NULL;
3412     d.request = US"*";
3413     d.require = US"";
3414
3415     HDEBUG(D_receive) debug_printf("getting IP address for %s\n",
3416       sender_helo_name);
3417     rc = host_find_bydns(&h, NULL, HOST_FIND_BY_A,
3418                           NULL, NULL, NULL, &d, NULL, NULL);
3419     if (rc == HOST_FOUND || rc == HOST_FOUND_LOCAL)
3420       for (hh = &h; hh; hh = hh->next)
3421         if (Ustrcmp(hh->address, sender_host_address) == 0)
3422           {
3423           helo_verified = TRUE;
3424           if (h.dnssec == DS_YES) sender_helo_dnssec = TRUE;
3425           HDEBUG(D_receive)
3426             {
3427             debug_printf("IP address for %s matches calling address\n"
3428               "Forward DNS security status: %sverified\n",
3429               sender_helo_name, sender_helo_dnssec ? "" : "un");
3430             }
3431           break;
3432           }
3433     }
3434   }
3435
3436 if (!helo_verified) helo_verify_failed = TRUE;  /* We've tried ... */
3437 return yield;
3438 }
3439
3440
3441
3442
3443 /*************************************************
3444 *        Send user response message              *
3445 *************************************************/
3446
3447 /* This function is passed a default response code and a user message. It calls
3448 smtp_message_code() to check and possibly modify the response code, and then
3449 calls smtp_respond() to transmit the response. I put this into a function
3450 just to avoid a lot of repetition.
3451
3452 Arguments:
3453   code         the response code
3454   user_msg     the user message
3455
3456 Returns:       nothing
3457 */
3458
3459 static void
3460 smtp_user_msg(uschar *code, uschar *user_msg)
3461 {
3462 int len = 3;
3463 smtp_message_code(&code, &len, &user_msg, NULL, TRUE);
3464 smtp_respond(code, len, TRUE, user_msg);
3465 }
3466
3467
3468
3469 static int
3470 smtp_in_auth(auth_instance *au, uschar ** s, uschar ** ss)
3471 {
3472 const uschar *set_id = NULL;
3473 int rc, i;
3474
3475 /* Run the checking code, passing the remainder of the command line as
3476 data. Initials the $auth<n> variables as empty. Initialize $0 empty and set
3477 it as the only set numerical variable. The authenticator may set $auth<n>
3478 and also set other numeric variables. The $auth<n> variables are preferred
3479 nowadays; the numerical variables remain for backwards compatibility.
3480
3481 Afterwards, have a go at expanding the set_id string, even if
3482 authentication failed - for bad passwords it can be useful to log the
3483 userid. On success, require set_id to expand and exist, and put it in
3484 authenticated_id. Save this in permanent store, as the working store gets
3485 reset at HELO, RSET, etc. */
3486
3487 for (i = 0; i < AUTH_VARS; i++) auth_vars[i] = NULL;
3488 expand_nmax = 0;
3489 expand_nlength[0] = 0;   /* $0 contains nothing */
3490
3491 rc = (au->info->servercode)(au, smtp_cmd_data);
3492 if (au->set_id) set_id = expand_string(au->set_id);
3493 expand_nmax = -1;        /* Reset numeric variables */
3494 for (i = 0; i < AUTH_VARS; i++) auth_vars[i] = NULL;   /* Reset $auth<n> */
3495
3496 /* The value of authenticated_id is stored in the spool file and printed in
3497 log lines. It must not contain binary zeros or newline characters. In
3498 normal use, it never will, but when playing around or testing, this error
3499 can (did) happen. To guard against this, ensure that the id contains only
3500 printing characters. */
3501
3502 if (set_id) set_id = string_printing(set_id);
3503
3504 /* For the non-OK cases, set up additional logging data if set_id
3505 is not empty. */
3506
3507 if (rc != OK)
3508   set_id = set_id && *set_id
3509     ? string_sprintf(" (set_id=%s)", set_id) : US"";
3510
3511 /* Switch on the result */
3512
3513 switch(rc)
3514   {
3515   case OK:
3516   if (!au->set_id || set_id)    /* Complete success */
3517     {
3518     if (set_id) authenticated_id = string_copy_malloc(set_id);
3519     sender_host_authenticated = au->name;
3520     authentication_failed = FALSE;
3521     authenticated_fail_id = NULL;   /* Impossible to already be set? */
3522
3523     received_protocol =
3524       (sender_host_address ? protocols : protocols_local)
3525         [pextend + pauthed + (tls_in.active >= 0 ? pcrpted:0)];
3526     *s = *ss = US"235 Authentication succeeded";
3527     authenticated_by = au;
3528     break;
3529     }
3530
3531   /* Authentication succeeded, but we failed to expand the set_id string.
3532   Treat this as a temporary error. */
3533
3534   auth_defer_msg = expand_string_message;
3535   /* Fall through */
3536
3537   case DEFER:
3538   if (set_id) authenticated_fail_id = string_copy_malloc(set_id);
3539   *s = string_sprintf("435 Unable to authenticate at present%s",
3540     auth_defer_user_msg);
3541   *ss = string_sprintf("435 Unable to authenticate at present%s: %s",
3542     set_id, auth_defer_msg);
3543   break;
3544
3545   case BAD64:
3546   *s = *ss = US"501 Invalid base64 data";
3547   break;
3548
3549   case CANCELLED:
3550   *s = *ss = US"501 Authentication cancelled";
3551   break;
3552
3553   case UNEXPECTED:
3554   *s = *ss = US"553 Initial data not expected";
3555   break;
3556
3557   case FAIL:
3558   if (set_id) authenticated_fail_id = string_copy_malloc(set_id);
3559   *s = US"535 Incorrect authentication data";
3560   *ss = string_sprintf("535 Incorrect authentication data%s", set_id);
3561   break;
3562
3563   default:
3564   if (set_id) authenticated_fail_id = string_copy_malloc(set_id);
3565   *s = US"435 Internal error";
3566   *ss = string_sprintf("435 Internal error%s: return %d from authentication "
3567     "check", set_id, rc);
3568   break;
3569   }
3570
3571 return rc;
3572 }
3573
3574
3575
3576
3577
3578 static int
3579 qualify_recipient(uschar ** recipient, uschar * smtp_cmd_data, uschar * tag)
3580 {
3581 int rd;
3582 if (allow_unqualified_recipient || strcmpic(*recipient, US"postmaster") == 0)
3583   {
3584   DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
3585     *recipient);
3586   rd = Ustrlen(recipient) + 1;
3587   *recipient = rewrite_address_qualify(*recipient, TRUE);
3588   return rd;
3589   }
3590 smtp_printf("501 %s: recipient address must contain a domain\r\n",
3591   smtp_cmd_data);
3592 log_write(L_smtp_syntax_error,
3593   LOG_MAIN|LOG_REJECT, "unqualified %s rejected: <%s> %s%s",
3594   tag, *recipient, host_and_ident(TRUE), host_lookup_msg);
3595 return 0;
3596 }
3597
3598
3599
3600
3601 static void
3602 smtp_quit_handler(uschar ** user_msgp, uschar ** log_msgp)
3603 {
3604 HAD(SCH_QUIT);
3605 incomplete_transaction_log(US"QUIT");
3606 if (acl_smtp_quit)
3607   {
3608   int rc = acl_check(ACL_WHERE_QUIT, NULL, acl_smtp_quit, user_msgp, log_msgp);
3609   if (rc == ERROR)
3610     log_write(0, LOG_MAIN|LOG_PANIC, "ACL for QUIT returned ERROR: %s",
3611       *log_msgp);
3612   }
3613 if (*user_msgp)
3614   smtp_respond(US"221", 3, TRUE, *user_msgp);
3615 else
3616   smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
3617
3618 #ifdef SUPPORT_TLS
3619 tls_close(TRUE, TRUE);
3620 #endif
3621
3622 log_write(L_smtp_connection, LOG_MAIN, "%s closed by QUIT",
3623   smtp_get_connection_info());
3624 }
3625
3626
3627 static void
3628 smtp_rset_handler(void)
3629 {
3630 HAD(SCH_RSET);
3631 incomplete_transaction_log(US"RSET");
3632 smtp_printf("250 Reset OK\r\n");
3633 cmd_list[CMD_LIST_RSET].is_mail_cmd = FALSE;
3634 }
3635
3636
3637
3638 /*************************************************
3639 *       Initialize for SMTP incoming message     *
3640 *************************************************/
3641
3642 /* This function conducts the initial dialogue at the start of an incoming SMTP
3643 message, and builds a list of recipients. However, if the incoming message
3644 is part of a batch (-bS option) a separate function is called since it would
3645 be messy having tests splattered about all over this function. This function
3646 therefore handles the case where interaction is occurring. The input and output
3647 files are set up in smtp_in and smtp_out.
3648
3649 The global recipients_list is set to point to a vector of recipient_item
3650 blocks, whose number is given by recipients_count. This is extended by the
3651 receive_add_recipient() function. The global variable sender_address is set to
3652 the sender's address. The yield is +1 if a message has been successfully
3653 started, 0 if a QUIT command was encountered or the connection was refused from
3654 the particular host, or -1 if the connection was lost.
3655
3656 Argument: none
3657
3658 Returns:  > 0 message successfully started (reached DATA)
3659           = 0 QUIT read or end of file reached or call refused
3660           < 0 lost connection
3661 */
3662
3663 int
3664 smtp_setup_msg(void)
3665 {
3666 int done = 0;
3667 BOOL toomany = FALSE;
3668 BOOL discarded = FALSE;
3669 BOOL last_was_rej_mail = FALSE;
3670 BOOL last_was_rcpt = FALSE;
3671 void *reset_point = store_get(0);
3672
3673 DEBUG(D_receive) debug_printf("smtp_setup_msg entered\n");
3674
3675 /* Reset for start of new message. We allow one RSET not to be counted as a
3676 nonmail command, for those MTAs that insist on sending it between every
3677 message. Ditto for EHLO/HELO and for STARTTLS, to allow for going in and out of
3678 TLS between messages (an Exim client may do this if it has messages queued up
3679 for the host). Note: we do NOT reset AUTH at this point. */
3680
3681 smtp_reset(reset_point);
3682 message_ended = END_NOTSTARTED;
3683
3684 chunking_state = chunking_offered ? CHUNKING_OFFERED : CHUNKING_NOT_OFFERED;
3685
3686 cmd_list[CMD_LIST_RSET].is_mail_cmd = TRUE;
3687 cmd_list[CMD_LIST_HELO].is_mail_cmd = TRUE;
3688 cmd_list[CMD_LIST_EHLO].is_mail_cmd = TRUE;
3689 #ifdef SUPPORT_TLS
3690 cmd_list[CMD_LIST_STARTTLS].is_mail_cmd = TRUE;
3691 cmd_list[CMD_LIST_TLS_AUTH].is_mail_cmd = TRUE;
3692 #endif
3693
3694 /* Set the local signal handler for SIGTERM - it tries to end off tidily */
3695
3696 os_non_restarting_signal(SIGTERM, command_sigterm_handler);
3697
3698 /* Batched SMTP is handled in a different function. */
3699
3700 if (smtp_batched_input) return smtp_setup_batch_msg();
3701
3702 /* Deal with SMTP commands. This loop is exited by setting done to a POSITIVE
3703 value. The values are 2 larger than the required yield of the function. */
3704
3705 while (done <= 0)
3706   {
3707   const uschar **argv;
3708   uschar *etrn_command;
3709   uschar *etrn_serialize_key;
3710   uschar *errmess;
3711   uschar *log_msg, *smtp_code;
3712   uschar *user_msg = NULL;
3713   uschar *recipient = NULL;
3714   uschar *hello = NULL;
3715   uschar *s, *ss;
3716   BOOL was_rej_mail = FALSE;
3717   BOOL was_rcpt = FALSE;
3718   void (*oldsignal)(int);
3719   pid_t pid;
3720   int start, end, sender_domain, recipient_domain;
3721   int ptr, size, rc;
3722   int c;
3723   auth_instance *au;
3724   uschar *orcpt = NULL;
3725   int flags;
3726
3727 #ifdef AUTH_TLS
3728   /* Check once per STARTTLS or SSL-on-connect for a TLS AUTH */
3729   if (  tls_in.active >= 0
3730      && tls_in.peercert
3731      && tls_in.certificate_verified
3732      && cmd_list[CMD_LIST_TLS_AUTH].is_mail_cmd
3733      )
3734     {
3735     cmd_list[CMD_LIST_TLS_AUTH].is_mail_cmd = FALSE;
3736     if (  acl_smtp_auth
3737        && (rc = acl_check(ACL_WHERE_AUTH, NULL, acl_smtp_auth,
3738                   &user_msg, &log_msg)) != OK
3739        )
3740       {
3741       done = smtp_handle_acl_fail(ACL_WHERE_AUTH, rc, user_msg, log_msg);
3742       continue;
3743       }
3744
3745     for (au = auths; au; au = au->next)
3746       if (strcmpic(US"tls", au->driver_name) == 0)
3747         {
3748         smtp_cmd_data = NULL;
3749
3750         if (smtp_in_auth(au, &s, &ss) == OK)
3751           { DEBUG(D_auth) debug_printf("tls auth succeeded\n"); }
3752         else
3753           { DEBUG(D_auth) debug_printf("tls auth not succeeded\n"); }
3754         break;
3755         }
3756     }
3757 #endif
3758
3759 #ifdef TCP_QUICKACK
3760   if (smtp_in)          /* Avoid pure-ACKs while in cmd pingpong phase */
3761     (void) setsockopt(fileno(smtp_in), IPPROTO_TCP, TCP_QUICKACK,
3762             US &off, sizeof(off));
3763 #endif
3764
3765   switch(smtp_read_command(TRUE, GETC_BUFFER_UNLIMITED))
3766     {
3767     /* The AUTH command is not permitted to occur inside a transaction, and may
3768     occur successfully only once per connection. Actually, that isn't quite
3769     true. When TLS is started, all previous information about a connection must
3770     be discarded, so a new AUTH is permitted at that time.
3771
3772     AUTH may only be used when it has been advertised. However, it seems that
3773     there are clients that send AUTH when it hasn't been advertised, some of
3774     them even doing this after HELO. And there are MTAs that accept this. Sigh.
3775     So there's a get-out that allows this to happen.
3776
3777     AUTH is initially labelled as a "nonmail command" so that one occurrence
3778     doesn't get counted. We change the label here so that multiple failing
3779     AUTHS will eventually hit the nonmail threshold. */
3780
3781     case AUTH_CMD:
3782     HAD(SCH_AUTH);
3783     authentication_failed = TRUE;
3784     cmd_list[CMD_LIST_AUTH].is_mail_cmd = FALSE;
3785
3786     if (!auth_advertised && !allow_auth_unadvertised)
3787       {
3788       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3789         US"AUTH command used when not advertised");
3790       break;
3791       }
3792     if (sender_host_authenticated)
3793       {
3794       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3795         US"already authenticated");
3796       break;
3797       }
3798     if (sender_address)
3799       {
3800       done = synprot_error(L_smtp_protocol_error, 503, NULL,
3801         US"not permitted in mail transaction");
3802       break;
3803       }
3804
3805     /* Check the ACL */
3806
3807     if (  acl_smtp_auth
3808        && (rc = acl_check(ACL_WHERE_AUTH, NULL, acl_smtp_auth,
3809                   &user_msg, &log_msg)) != OK
3810        )
3811       {
3812       done = smtp_handle_acl_fail(ACL_WHERE_AUTH, rc, user_msg, log_msg);
3813       break;
3814       }
3815
3816     /* Find the name of the requested authentication mechanism. */
3817
3818     s = smtp_cmd_data;
3819     while ((c = *smtp_cmd_data) != 0 && !isspace(c))
3820       {
3821       if (!isalnum(c) && c != '-' && c != '_')
3822         {
3823         done = synprot_error(L_smtp_syntax_error, 501, NULL,
3824           US"invalid character in authentication mechanism name");
3825         goto COMMAND_LOOP;
3826         }
3827       smtp_cmd_data++;
3828       }
3829
3830     /* If not at the end of the line, we must be at white space. Terminate the
3831     name and move the pointer on to any data that may be present. */
3832
3833     if (*smtp_cmd_data != 0)
3834       {
3835       *smtp_cmd_data++ = 0;
3836       while (isspace(*smtp_cmd_data)) smtp_cmd_data++;
3837       }
3838
3839     /* Search for an authentication mechanism which is configured for use
3840     as a server and which has been advertised (unless, sigh, allow_auth_
3841     unadvertised is set). */
3842
3843     for (au = auths; au; au = au->next)
3844       if (strcmpic(s, au->public_name) == 0 && au->server &&
3845           (au->advertised || allow_auth_unadvertised))
3846         break;
3847
3848     if (au)
3849       {
3850       c = smtp_in_auth(au, &s, &ss);
3851
3852       smtp_printf("%s\r\n", s);
3853       if (c != OK)
3854         log_write(0, LOG_MAIN|LOG_REJECT, "%s authenticator failed for %s: %s",
3855           au->name, host_and_ident(FALSE), ss);
3856       }
3857     else
3858       done = synprot_error(L_smtp_protocol_error, 504, NULL,
3859         string_sprintf("%s authentication mechanism not supported", s));
3860
3861     break;  /* AUTH_CMD */
3862
3863     /* The HELO/EHLO commands are permitted to appear in the middle of a
3864     session as well as at the beginning. They have the effect of a reset in
3865     addition to their other functions. Their absence at the start cannot be
3866     taken to be an error.
3867
3868     RFC 2821 says:
3869
3870       If the EHLO command is not acceptable to the SMTP server, 501, 500,
3871       or 502 failure replies MUST be returned as appropriate.  The SMTP
3872       server MUST stay in the same state after transmitting these replies
3873       that it was in before the EHLO was received.
3874
3875     Therefore, we do not do the reset until after checking the command for
3876     acceptability. This change was made for Exim release 4.11. Previously
3877     it did the reset first. */
3878
3879     case HELO_CMD:
3880     HAD(SCH_HELO);
3881     hello = US"HELO";
3882     esmtp = FALSE;
3883     goto HELO_EHLO;
3884
3885     case EHLO_CMD:
3886     HAD(SCH_EHLO);
3887     hello = US"EHLO";
3888     esmtp = TRUE;
3889
3890     HELO_EHLO:      /* Common code for HELO and EHLO */
3891     cmd_list[CMD_LIST_HELO].is_mail_cmd = FALSE;
3892     cmd_list[CMD_LIST_EHLO].is_mail_cmd = FALSE;
3893
3894     /* Reject the HELO if its argument was invalid or non-existent. A
3895     successful check causes the argument to be saved in malloc store. */
3896
3897     if (!check_helo(smtp_cmd_data))
3898       {
3899       smtp_printf("501 Syntactically invalid %s argument(s)\r\n", hello);
3900
3901       log_write(0, LOG_MAIN|LOG_REJECT, "rejected %s from %s: syntactically "
3902         "invalid argument(s): %s", hello, host_and_ident(FALSE),
3903         (*smtp_cmd_argument == 0)? US"(no argument given)" :
3904                            string_printing(smtp_cmd_argument));
3905
3906       if (++synprot_error_count > smtp_max_synprot_errors)
3907         {
3908         log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
3909           "syntax or protocol errors (last command was \"%s\")",
3910           host_and_ident(FALSE), string_printing(smtp_cmd_buffer));
3911         done = 1;
3912         }
3913
3914       break;
3915       }
3916
3917     /* If sender_host_unknown is true, we have got here via the -bs interface,
3918     not called from inetd. Otherwise, we are running an IP connection and the
3919     host address will be set. If the helo name is the primary name of this
3920     host and we haven't done a reverse lookup, force one now. If helo_required
3921     is set, ensure that the HELO name matches the actual host. If helo_verify
3922     is set, do the same check, but softly. */
3923
3924     if (!sender_host_unknown)
3925       {
3926       BOOL old_helo_verified = helo_verified;
3927       uschar *p = smtp_cmd_data;
3928
3929       while (*p != 0 && !isspace(*p)) { *p = tolower(*p); p++; }
3930       *p = 0;
3931
3932       /* Force a reverse lookup if HELO quoted something in helo_lookup_domains
3933       because otherwise the log can be confusing. */
3934
3935       if (sender_host_name == NULL &&
3936            (deliver_domain = sender_helo_name,  /* set $domain */
3937             match_isinlist(sender_helo_name, CUSS &helo_lookup_domains, 0,
3938               &domainlist_anchor, NULL, MCL_DOMAIN, TRUE, NULL)) == OK)
3939         (void)host_name_lookup();
3940
3941       /* Rebuild the fullhost info to include the HELO name (and the real name
3942       if it was looked up.) */
3943
3944       host_build_sender_fullhost();  /* Rebuild */
3945       set_process_info("handling%s incoming connection from %s",
3946         (tls_in.active >= 0)? " TLS" : "", host_and_ident(FALSE));
3947
3948       /* Verify if configured. This doesn't give much security, but it does
3949       make some people happy to be able to do it. If helo_required is set,
3950       (host matches helo_verify_hosts) failure forces rejection. If helo_verify
3951       is set (host matches helo_try_verify_hosts), it does not. This is perhaps
3952       now obsolescent, since the verification can now be requested selectively
3953       at ACL time. */
3954
3955       helo_verified = helo_verify_failed = sender_helo_dnssec = FALSE;
3956       if (helo_required || helo_verify)
3957         {
3958         BOOL tempfail = !smtp_verify_helo();
3959         if (!helo_verified)
3960           {
3961           if (helo_required)
3962             {
3963             smtp_printf("%d %s argument does not match calling host\r\n",
3964               tempfail? 451 : 550, hello);
3965             log_write(0, LOG_MAIN|LOG_REJECT, "%srejected \"%s %s\" from %s",
3966               tempfail? "temporarily " : "",
3967               hello, sender_helo_name, host_and_ident(FALSE));
3968             helo_verified = old_helo_verified;
3969             break;                   /* End of HELO/EHLO processing */
3970             }
3971           HDEBUG(D_all) debug_printf("%s verification failed but host is in "
3972             "helo_try_verify_hosts\n", hello);
3973           }
3974         }
3975       }
3976
3977 #ifdef EXPERIMENTAL_SPF
3978     /* set up SPF context */
3979     spf_init(sender_helo_name, sender_host_address);
3980 #endif
3981
3982     /* Apply an ACL check if one is defined; afterwards, recheck
3983     synchronization in case the client started sending in a delay. */
3984
3985     if (acl_smtp_helo)
3986       if ((rc = acl_check(ACL_WHERE_HELO, NULL, acl_smtp_helo,
3987                 &user_msg, &log_msg)) != OK)
3988         {
3989         done = smtp_handle_acl_fail(ACL_WHERE_HELO, rc, user_msg, log_msg);
3990         sender_helo_name = NULL;
3991         host_build_sender_fullhost();  /* Rebuild */
3992         break;
3993         }
3994       else if (!check_sync()) goto SYNC_FAILURE;
3995
3996     /* Generate an OK reply. The default string includes the ident if present,
3997     and also the IP address if present. Reflecting back the ident is intended
3998     as a deterrent to mail forgers. For maximum efficiency, and also because
3999     some broken systems expect each response to be in a single packet, arrange
4000     that the entire reply is sent in one write(). */
4001
4002     auth_advertised = FALSE;
4003     pipelining_advertised = FALSE;
4004 #ifdef SUPPORT_TLS
4005     tls_advertised = FALSE;
4006 #endif
4007     dsn_advertised = FALSE;
4008 #ifdef SUPPORT_I18N
4009     smtputf8_advertised = FALSE;
4010 #endif
4011
4012     smtp_code = US"250 ";        /* Default response code plus space*/
4013     if (user_msg == NULL)
4014       {
4015       s = string_sprintf("%.3s %s Hello %s%s%s",
4016         smtp_code,
4017         smtp_active_hostname,
4018         (sender_ident == NULL)?  US"" : sender_ident,
4019         (sender_ident == NULL)?  US"" : US" at ",
4020         (sender_host_name == NULL)? sender_helo_name : sender_host_name);
4021
4022       ptr = Ustrlen(s);
4023       size = ptr + 1;
4024
4025       if (sender_host_address != NULL)
4026         {
4027         s = string_catn(s, &size, &ptr, US" [", 2);
4028         s = string_cat (s, &size, &ptr, sender_host_address);
4029         s = string_catn(s, &size, &ptr, US"]", 1);
4030         }
4031       }
4032
4033     /* A user-supplied EHLO greeting may not contain more than one line. Note
4034     that the code returned by smtp_message_code() includes the terminating
4035     whitespace character. */
4036
4037     else
4038       {
4039       char *ss;
4040       int codelen = 4;
4041       smtp_message_code(&smtp_code, &codelen, &user_msg, NULL, TRUE);
4042       s = string_sprintf("%.*s%s", codelen, smtp_code, user_msg);
4043       if ((ss = strpbrk(CS s, "\r\n")) != NULL)
4044         {
4045         log_write(0, LOG_MAIN|LOG_PANIC, "EHLO/HELO response must not contain "
4046           "newlines: message truncated: %s", string_printing(s));
4047         *ss = 0;
4048         }
4049       ptr = Ustrlen(s);
4050       size = ptr + 1;
4051       }
4052
4053     s = string_catn(s, &size, &ptr, US"\r\n", 2);
4054
4055     /* If we received EHLO, we must create a multiline response which includes
4056     the functions supported. */
4057
4058     if (esmtp)
4059       {
4060       s[3] = '-';
4061
4062       /* I'm not entirely happy with this, as an MTA is supposed to check
4063       that it has enough room to accept a message of maximum size before
4064       it sends this. However, there seems little point in not sending it.
4065       The actual size check happens later at MAIL FROM time. By postponing it
4066       till then, VRFY and EXPN can be used after EHLO when space is short. */
4067
4068       if (thismessage_size_limit > 0)
4069         {
4070         sprintf(CS big_buffer, "%.3s-SIZE %d\r\n", smtp_code,
4071           thismessage_size_limit);
4072         s = string_cat(s, &size, &ptr, big_buffer);
4073         }
4074       else
4075         {
4076         s = string_catn(s, &size, &ptr, smtp_code, 3);
4077         s = string_catn(s, &size, &ptr, US"-SIZE\r\n", 7);
4078         }
4079
4080       /* Exim does not do protocol conversion or data conversion. It is 8-bit
4081       clean; if it has an 8-bit character in its hand, it just sends it. It
4082       cannot therefore specify 8BITMIME and remain consistent with the RFCs.
4083       However, some users want this option simply in order to stop MUAs
4084       mangling messages that contain top-bit-set characters. It is therefore
4085       provided as an option. */
4086
4087       if (accept_8bitmime)
4088         {
4089         s = string_catn(s, &size, &ptr, smtp_code, 3);
4090         s = string_catn(s, &size, &ptr, US"-8BITMIME\r\n", 11);
4091         }
4092
4093       /* Advertise DSN support if configured to do so. */
4094       if (verify_check_host(&dsn_advertise_hosts) != FAIL)
4095         {
4096         s = string_catn(s, &size, &ptr, smtp_code, 3);
4097         s = string_catn(s, &size, &ptr, US"-DSN\r\n", 6);
4098         dsn_advertised = TRUE;
4099         }
4100
4101       /* Advertise ETRN/VRFY/EXPN if there's are ACL checking whether a host is
4102       permitted to issue them; a check is made when any host actually tries. */
4103
4104       if (acl_smtp_etrn)
4105         {
4106         s = string_catn(s, &size, &ptr, smtp_code, 3);
4107         s = string_catn(s, &size, &ptr, US"-ETRN\r\n", 7);
4108         }
4109       if (acl_smtp_vrfy)
4110         {
4111         s = string_catn(s, &size, &ptr, smtp_code, 3);
4112         s = string_catn(s, &size, &ptr, US"-VRFY\r\n", 7);
4113         }
4114       if (acl_smtp_expn)
4115         {
4116         s = string_catn(s, &size, &ptr, smtp_code, 3);
4117         s = string_catn(s, &size, &ptr, US"-EXPN\r\n", 7);
4118         }
4119
4120       /* Exim is quite happy with pipelining, so let the other end know that
4121       it is safe to use it, unless advertising is disabled. */
4122
4123       if (pipelining_enable &&
4124           verify_check_host(&pipelining_advertise_hosts) == OK)
4125         {
4126         s = string_catn(s, &size, &ptr, smtp_code, 3);
4127         s = string_catn(s, &size, &ptr, US"-PIPELINING\r\n", 13);
4128         sync_cmd_limit = NON_SYNC_CMD_PIPELINING;
4129         pipelining_advertised = TRUE;
4130         }
4131
4132
4133       /* If any server authentication mechanisms are configured, advertise
4134       them if the current host is in auth_advertise_hosts. The problem with
4135       advertising always is that some clients then require users to
4136       authenticate (and aren't configurable otherwise) even though it may not
4137       be necessary (e.g. if the host is in host_accept_relay).
4138
4139       RFC 2222 states that SASL mechanism names contain only upper case
4140       letters, so output the names in upper case, though we actually recognize
4141       them in either case in the AUTH command. */
4142
4143       if (  auths
4144 #ifdef AUTH_TLS
4145          && !sender_host_authenticated
4146 #endif
4147          && verify_check_host(&auth_advertise_hosts) == OK
4148          )
4149         {
4150         auth_instance *au;
4151         BOOL first = TRUE;
4152         for (au = auths; au; au = au->next)
4153           if (au->server && (au->advertise_condition == NULL ||
4154               expand_check_condition(au->advertise_condition, au->name,
4155               US"authenticator")))
4156             {
4157             int saveptr;
4158             if (first)
4159               {
4160               s = string_catn(s, &size, &ptr, smtp_code, 3);
4161               s = string_catn(s, &size, &ptr, US"-AUTH", 5);
4162               first = FALSE;
4163               auth_advertised = TRUE;
4164               }
4165             saveptr = ptr;
4166             s = string_catn(s, &size, &ptr, US" ", 1);
4167             s = string_cat (s, &size, &ptr, au->public_name);
4168             while (++saveptr < ptr) s[saveptr] = toupper(s[saveptr]);
4169             au->advertised = TRUE;
4170             }
4171           else
4172             au->advertised = FALSE;
4173
4174         if (!first) s = string_catn(s, &size, &ptr, US"\r\n", 2);
4175         }
4176
4177       /* RFC 3030 CHUNKING */
4178
4179       if (verify_check_host(&chunking_advertise_hosts) != FAIL)
4180         {
4181         s = string_catn(s, &size, &ptr, smtp_code, 3);
4182         s = string_catn(s, &size, &ptr, US"-CHUNKING\r\n", 11);
4183         chunking_offered = TRUE;
4184         chunking_state = CHUNKING_OFFERED;
4185         }
4186
4187       /* Advertise TLS (Transport Level Security) aka SSL (Secure Socket Layer)
4188       if it has been included in the binary, and the host matches
4189       tls_advertise_hosts. We must *not* advertise if we are already in a
4190       secure connection. */
4191
4192 #ifdef SUPPORT_TLS
4193       if (tls_in.active < 0 &&
4194           verify_check_host(&tls_advertise_hosts) != FAIL)
4195         {
4196         s = string_catn(s, &size, &ptr, smtp_code, 3);
4197         s = string_catn(s, &size, &ptr, US"-STARTTLS\r\n", 11);
4198         tls_advertised = TRUE;
4199         }
4200 #endif
4201
4202 #ifndef DISABLE_PRDR
4203       /* Per Recipient Data Response, draft by Eric A. Hall extending RFC */
4204       if (prdr_enable)
4205         {
4206         s = string_catn(s, &size, &ptr, smtp_code, 3);
4207         s = string_catn(s, &size, &ptr, US"-PRDR\r\n", 7);
4208         }
4209 #endif
4210
4211 #ifdef SUPPORT_I18N
4212       if (  accept_8bitmime
4213          && verify_check_host(&smtputf8_advertise_hosts) != FAIL)
4214         {
4215         s = string_catn(s, &size, &ptr, smtp_code, 3);
4216         s = string_catn(s, &size, &ptr, US"-SMTPUTF8\r\n", 11);
4217         smtputf8_advertised = TRUE;
4218         }
4219 #endif
4220
4221       /* Finish off the multiline reply with one that is always available. */
4222
4223       s = string_catn(s, &size, &ptr, smtp_code, 3);
4224       s = string_catn(s, &size, &ptr, US" HELP\r\n", 7);
4225       }
4226
4227     /* Terminate the string (for debug), write it, and note that HELO/EHLO
4228     has been seen. */
4229
4230     s[ptr] = 0;
4231
4232 #ifdef SUPPORT_TLS
4233     if (tls_in.active >= 0) (void)tls_write(TRUE, s, ptr); else
4234 #endif
4235
4236       {
4237       int i = fwrite(s, 1, ptr, smtp_out); i = i; /* compiler quietening */
4238       }
4239     DEBUG(D_receive)
4240       {
4241       uschar *cr;
4242       while ((cr = Ustrchr(s, '\r')) != NULL)   /* lose CRs */
4243         memmove(cr, cr + 1, (ptr--) - (cr - s));
4244       debug_printf("SMTP>> %s", s);
4245       }
4246     helo_seen = TRUE;
4247
4248     /* Reset the protocol and the state, abandoning any previous message. */
4249     received_protocol =
4250       (sender_host_address ? protocols : protocols_local)
4251         [ (esmtp
4252           ? pextend + (sender_host_authenticated ? pauthed : 0)
4253           : pnormal)
4254         + (tls_in.active >= 0 ? pcrpted : 0)
4255         ];
4256     smtp_reset(reset_point);
4257     toomany = FALSE;
4258     break;   /* HELO/EHLO */
4259
4260
4261     /* The MAIL command requires an address as an operand. All we do
4262     here is to parse it for syntactic correctness. The form "<>" is
4263     a special case which converts into an empty string. The start/end
4264     pointers in the original are not used further for this address, as
4265     it is the canonical extracted address which is all that is kept. */
4266
4267     case MAIL_CMD:
4268     HAD(SCH_MAIL);
4269     smtp_mailcmd_count++;              /* Count for limit and ratelimit */
4270     was_rej_mail = TRUE;               /* Reset if accepted */
4271     env_mail_type_t * mail_args;       /* Sanity check & validate args */
4272
4273     if (helo_required && !helo_seen)
4274       {
4275       smtp_printf("503 HELO or EHLO required\r\n");
4276       log_write(0, LOG_MAIN|LOG_REJECT, "rejected MAIL from %s: no "
4277         "HELO/EHLO given", host_and_ident(FALSE));
4278       break;
4279       }
4280
4281     if (sender_address != NULL)
4282       {
4283       done = synprot_error(L_smtp_protocol_error, 503, NULL,
4284         US"sender already given");
4285       break;
4286       }
4287
4288     if (smtp_cmd_data[0] == 0)
4289       {
4290       done = synprot_error(L_smtp_protocol_error, 501, NULL,
4291         US"MAIL must have an address operand");
4292       break;
4293       }
4294
4295     /* Check to see if the limit for messages per connection would be
4296     exceeded by accepting further messages. */
4297
4298     if (smtp_accept_max_per_connection > 0 &&
4299         smtp_mailcmd_count > smtp_accept_max_per_connection)
4300       {
4301       smtp_printf("421 too many messages in this connection\r\n");
4302       log_write(0, LOG_MAIN|LOG_REJECT, "rejected MAIL command %s: too many "
4303         "messages in one connection", host_and_ident(TRUE));
4304       break;
4305       }
4306
4307     /* Reset for start of message - even if this is going to fail, we
4308     obviously need to throw away any previous data. */
4309
4310     smtp_reset(reset_point);
4311     toomany = FALSE;
4312     sender_data = recipient_data = NULL;
4313
4314     /* Loop, checking for ESMTP additions to the MAIL FROM command. */
4315
4316     if (esmtp) for(;;)
4317       {
4318       uschar *name, *value, *end;
4319       unsigned long int size;
4320       BOOL arg_error = FALSE;
4321
4322       if (!extract_option(&name, &value)) break;
4323
4324       for (mail_args = env_mail_type_list;
4325            mail_args->value != ENV_MAIL_OPT_NULL;
4326            mail_args++
4327           )
4328         if (strcmpic(name, mail_args->name) == 0)
4329           break;
4330       if (mail_args->need_value && strcmpic(value, US"") == 0)
4331         break;
4332
4333       switch(mail_args->value)
4334         {
4335         /* Handle SIZE= by reading the value. We don't do the check till later,
4336         in order to be able to log the sender address on failure. */
4337         case ENV_MAIL_OPT_SIZE:
4338           if (((size = Ustrtoul(value, &end, 10)), *end == 0))
4339             {
4340             if ((size == ULONG_MAX && errno == ERANGE) || size > INT_MAX)
4341               size = INT_MAX;
4342             message_size = (int)size;
4343             }
4344           else
4345             arg_error = TRUE;
4346           break;
4347
4348         /* If this session was initiated with EHLO and accept_8bitmime is set,
4349         Exim will have indicated that it supports the BODY=8BITMIME option. In
4350         fact, it does not support this according to the RFCs, in that it does not
4351         take any special action for forwarding messages containing 8-bit
4352         characters. That is why accept_8bitmime is not the default setting, but
4353         some sites want the action that is provided. We recognize both "8BITMIME"
4354         and "7BIT" as body types, but take no action. */
4355         case ENV_MAIL_OPT_BODY:
4356           if (accept_8bitmime) {
4357             if (strcmpic(value, US"8BITMIME") == 0)
4358               body_8bitmime = 8;
4359             else if (strcmpic(value, US"7BIT") == 0)
4360               body_8bitmime = 7;
4361             else
4362               {
4363               body_8bitmime = 0;
4364               done = synprot_error(L_smtp_syntax_error, 501, NULL,
4365                 US"invalid data for BODY");
4366               goto COMMAND_LOOP;
4367               }
4368             DEBUG(D_receive) debug_printf("8BITMIME: %d\n", body_8bitmime);
4369             break;
4370           }
4371           arg_error = TRUE;
4372           break;
4373
4374         /* Handle the two DSN options, but only if configured to do so (which
4375         will have caused "DSN" to be given in the EHLO response). The code itself
4376         is included only if configured in at build time. */
4377
4378         case ENV_MAIL_OPT_RET:
4379           if (dsn_advertised)
4380             {
4381             /* Check if RET has already been set */
4382             if (dsn_ret > 0)
4383               {
4384               synprot_error(L_smtp_syntax_error, 501, NULL,
4385                 US"RET can be specified once only");
4386               goto COMMAND_LOOP;
4387               }
4388             dsn_ret = strcmpic(value, US"HDRS") == 0
4389               ? dsn_ret_hdrs
4390               : strcmpic(value, US"FULL") == 0
4391               ? dsn_ret_full
4392               : 0;
4393             DEBUG(D_receive) debug_printf("DSN_RET: %d\n", dsn_ret);
4394             /* Check for invalid invalid value, and exit with error */
4395             if (dsn_ret == 0)
4396               {
4397               synprot_error(L_smtp_syntax_error, 501, NULL,
4398                 US"Value for RET is invalid");
4399               goto COMMAND_LOOP;
4400               }
4401             }
4402           break;
4403         case ENV_MAIL_OPT_ENVID:
4404           if (dsn_advertised)
4405             {
4406             /* Check if the dsn envid has been already set */
4407             if (dsn_envid != NULL)
4408               {
4409               synprot_error(L_smtp_syntax_error, 501, NULL,
4410                 US"ENVID can be specified once only");
4411               goto COMMAND_LOOP;
4412               }
4413             dsn_envid = string_copy(value);
4414             DEBUG(D_receive) debug_printf("DSN_ENVID: %s\n", dsn_envid);
4415             }
4416           break;
4417
4418         /* Handle the AUTH extension. If the value given is not "<>" and either
4419         the ACL says "yes" or there is no ACL but the sending host is
4420         authenticated, we set it up as the authenticated sender. However, if the
4421         authenticator set a condition to be tested, we ignore AUTH on MAIL unless
4422         the condition is met. The value of AUTH is an xtext, which means that +,
4423         = and cntrl chars are coded in hex; however "<>" is unaffected by this
4424         coding. */
4425         case ENV_MAIL_OPT_AUTH:
4426           if (Ustrcmp(value, "<>") != 0)
4427             {
4428             int rc;
4429             uschar *ignore_msg;
4430
4431             if (auth_xtextdecode(value, &authenticated_sender) < 0)
4432               {
4433               /* Put back terminator overrides for error message */
4434               value[-1] = '=';
4435               name[-1] = ' ';
4436               done = synprot_error(L_smtp_syntax_error, 501, NULL,
4437                 US"invalid data for AUTH");
4438               goto COMMAND_LOOP;
4439               }
4440             if (acl_smtp_mailauth == NULL)
4441               {
4442               ignore_msg = US"client not authenticated";
4443               rc = (sender_host_authenticated != NULL)? OK : FAIL;
4444               }
4445             else
4446               {
4447               ignore_msg = US"rejected by ACL";
4448               rc = acl_check(ACL_WHERE_MAILAUTH, NULL, acl_smtp_mailauth,
4449                 &user_msg, &log_msg);
4450               }
4451
4452             switch (rc)
4453               {
4454               case OK:
4455                 if (authenticated_by == NULL ||
4456                     authenticated_by->mail_auth_condition == NULL ||
4457                     expand_check_condition(authenticated_by->mail_auth_condition,
4458                         authenticated_by->name, US"authenticator"))
4459                   break;     /* Accept the AUTH */
4460
4461                 ignore_msg = US"server_mail_auth_condition failed";
4462                 if (authenticated_id != NULL)
4463                   ignore_msg = string_sprintf("%s: authenticated ID=\"%s\"",
4464                     ignore_msg, authenticated_id);
4465
4466               /* Fall through */
4467
4468               case FAIL:
4469                 authenticated_sender = NULL;
4470                 log_write(0, LOG_MAIN, "ignoring AUTH=%s from %s (%s)",
4471                   value, host_and_ident(TRUE), ignore_msg);
4472                 break;
4473
4474               /* Should only get DEFER or ERROR here. Put back terminator
4475               overrides for error message */
4476
4477               default:
4478                 value[-1] = '=';
4479                 name[-1] = ' ';
4480                 (void)smtp_handle_acl_fail(ACL_WHERE_MAILAUTH, rc, user_msg,
4481                   log_msg);
4482                 goto COMMAND_LOOP;
4483               }
4484             }
4485             break;
4486
4487 #ifndef DISABLE_PRDR
4488         case ENV_MAIL_OPT_PRDR:
4489           if (prdr_enable)
4490             prdr_requested = TRUE;
4491           break;
4492 #endif
4493
4494 #ifdef SUPPORT_I18N
4495         case ENV_MAIL_OPT_UTF8:
4496           if (smtputf8_advertised)
4497             {
4498             int old_pool = store_pool;
4499
4500             DEBUG(D_receive) debug_printf("smtputf8 requested\n");
4501             message_smtputf8 = allow_utf8_domains = TRUE;
4502             store_pool = POOL_PERM;
4503             received_protocol = string_sprintf("utf8%s", received_protocol);
4504             store_pool = old_pool;
4505             }
4506           break;
4507 #endif
4508         /* No valid option. Stick back the terminator characters and break
4509         the loop.  Do the name-terminator second as extract_option sets
4510         value==name when it found no equal-sign.
4511         An error for a malformed address will occur. */
4512         case ENV_MAIL_OPT_NULL:
4513           value[-1] = '=';
4514           name[-1] = ' ';
4515           arg_error = TRUE;
4516           break;
4517
4518         default:  assert(0);
4519         }
4520       /* Break out of for loop if switch() had bad argument or
4521          when start of the email address is reached */
4522       if (arg_error) break;
4523       }
4524
4525     /* If we have passed the threshold for rate limiting, apply the current
4526     delay, and update it for next time, provided this is a limited host. */
4527
4528     if (smtp_mailcmd_count > smtp_rlm_threshold &&
4529         verify_check_host(&smtp_ratelimit_hosts) == OK)
4530       {
4531       DEBUG(D_receive) debug_printf("rate limit MAIL: delay %.3g sec\n",
4532         smtp_delay_mail/1000.0);
4533       millisleep((int)smtp_delay_mail);
4534       smtp_delay_mail *= smtp_rlm_factor;
4535       if (smtp_delay_mail > (double)smtp_rlm_limit)
4536         smtp_delay_mail = (double)smtp_rlm_limit;
4537       }
4538
4539     /* Now extract the address, first applying any SMTP-time rewriting. The
4540     TRUE flag allows "<>" as a sender address. */
4541
4542     raw_sender = rewrite_existflags & rewrite_smtp
4543       ? rewrite_one(smtp_cmd_data, rewrite_smtp, NULL, FALSE, US"",
4544                     global_rewrite_rules)
4545       : smtp_cmd_data;
4546
4547     raw_sender =
4548       parse_extract_address(raw_sender, &errmess, &start, &end, &sender_domain,
4549         TRUE);
4550
4551     if (!raw_sender)
4552       {
4553       done = synprot_error(L_smtp_syntax_error, 501, smtp_cmd_data, errmess);
4554       break;
4555       }
4556
4557     sender_address = raw_sender;
4558
4559     /* If there is a configured size limit for mail, check that this message
4560     doesn't exceed it. The check is postponed to this point so that the sender
4561     can be logged. */
4562
4563     if (thismessage_size_limit > 0 && message_size > thismessage_size_limit)
4564       {
4565       smtp_printf("552 Message size exceeds maximum permitted\r\n");
4566       log_write(L_size_reject,
4567           LOG_MAIN|LOG_REJECT, "rejected MAIL FROM:<%s> %s: "
4568           "message too big: size%s=%d max=%d",
4569           sender_address,
4570           host_and_ident(TRUE),
4571           (message_size == INT_MAX)? ">" : "",
4572           message_size,
4573           thismessage_size_limit);
4574       sender_address = NULL;
4575       break;
4576       }
4577
4578     /* Check there is enough space on the disk unless configured not to.
4579     When smtp_check_spool_space is set, the check is for thismessage_size_limit
4580     plus the current message - i.e. we accept the message only if it won't
4581     reduce the space below the threshold. Add 5000 to the size to allow for
4582     overheads such as the Received: line and storing of recipients, etc.
4583     By putting the check here, even when SIZE is not given, it allow VRFY
4584     and EXPN etc. to be used when space is short. */
4585
4586     if (!receive_check_fs(
4587          (smtp_check_spool_space && message_size >= 0)?
4588             message_size + 5000 : 0))
4589       {
4590       smtp_printf("452 Space shortage, please try later\r\n");
4591       sender_address = NULL;
4592       break;
4593       }
4594
4595     /* If sender_address is unqualified, reject it, unless this is a locally
4596     generated message, or the sending host or net is permitted to send
4597     unqualified addresses - typically local machines behaving as MUAs -
4598     in which case just qualify the address. The flag is set above at the start
4599     of the SMTP connection. */
4600
4601     if (sender_domain == 0 && sender_address[0] != 0)
4602       {
4603       if (allow_unqualified_sender)
4604         {
4605         sender_domain = Ustrlen(sender_address) + 1;
4606         sender_address = rewrite_address_qualify(sender_address, FALSE);
4607         DEBUG(D_receive) debug_printf("unqualified address %s accepted\n",
4608           raw_sender);
4609         }
4610       else
4611         {
4612         smtp_printf("501 %s: sender address must contain a domain\r\n",
4613           smtp_cmd_data);
4614         log_write(L_smtp_syntax_error,
4615           LOG_MAIN|LOG_REJECT,
4616           "unqualified sender rejected: <%s> %s%s",
4617           raw_sender,
4618           host_and_ident(TRUE),
4619           host_lookup_msg);
4620         sender_address = NULL;
4621         break;
4622         }
4623       }
4624
4625     /* Apply an ACL check if one is defined, before responding. Afterwards,
4626     when pipelining is not advertised, do another sync check in case the ACL
4627     delayed and the client started sending in the meantime. */
4628
4629     if (acl_smtp_mail)
4630       {
4631       rc = acl_check(ACL_WHERE_MAIL, NULL, acl_smtp_mail, &user_msg, &log_msg);
4632       if (rc == OK && !pipelining_advertised && !check_sync())
4633         goto SYNC_FAILURE;
4634       }
4635     else
4636       rc = OK;
4637
4638     if (rc == OK || rc == DISCARD)
4639       {
4640       if (!user_msg)
4641         smtp_printf("%s%s%s", US"250 OK",
4642                   #ifndef DISABLE_PRDR
4643                     prdr_requested ? US", PRDR Requested" : US"",
4644                   #else
4645                     US"",
4646                   #endif
4647                     US"\r\n");
4648       else
4649         {
4650       #ifndef DISABLE_PRDR
4651         if (prdr_requested)
4652            user_msg = string_sprintf("%s%s", user_msg, US", PRDR Requested");
4653       #endif
4654         smtp_user_msg(US"250", user_msg);
4655         }
4656       smtp_delay_rcpt = smtp_rlr_base;
4657       recipients_discarded = (rc == DISCARD);
4658       was_rej_mail = FALSE;
4659       }
4660     else
4661       {
4662       done = smtp_handle_acl_fail(ACL_WHERE_MAIL, rc, user_msg, log_msg);
4663       sender_address = NULL;
4664       }
4665     break;
4666
4667
4668     /* The RCPT command requires an address as an operand. There may be any
4669     number of RCPT commands, specifying multiple recipients. We build them all
4670     into a data structure. The start/end values given by parse_extract_address
4671     are not used, as we keep only the extracted address. */
4672
4673     case RCPT_CMD:
4674     HAD(SCH_RCPT);
4675     rcpt_count++;
4676     was_rcpt = rcpt_in_progress = TRUE;
4677
4678     /* There must be a sender address; if the sender was rejected and
4679     pipelining was advertised, we assume the client was pipelining, and do not
4680     count this as a protocol error. Reset was_rej_mail so that further RCPTs
4681     get the same treatment. */
4682
4683     if (sender_address == NULL)
4684       {
4685       if (pipelining_advertised && last_was_rej_mail)
4686         {
4687         smtp_printf("503 sender not yet given\r\n");
4688         was_rej_mail = TRUE;
4689         }
4690       else
4691         {
4692         done = synprot_error(L_smtp_protocol_error, 503, NULL,
4693           US"sender not yet given");
4694         was_rcpt = FALSE;             /* Not a valid RCPT */
4695         }
4696       rcpt_fail_count++;
4697       break;
4698       }
4699
4700     /* Check for an operand */
4701
4702     if (smtp_cmd_data[0] == 0)
4703       {
4704       done = synprot_error(L_smtp_syntax_error, 501, NULL,
4705         US"RCPT must have an address operand");
4706       rcpt_fail_count++;
4707       break;
4708       }
4709
4710     /* Set the DSN flags orcpt and dsn_flags from the session*/
4711     orcpt = NULL;
4712     flags = 0;
4713
4714     if (esmtp) for(;;)
4715       {
4716       uschar *name, *value;
4717
4718       if (!extract_option(&name, &value))
4719         break;
4720
4721       if (dsn_advertised && strcmpic(name, US"ORCPT") == 0)
4722         {
4723         /* Check whether orcpt has been already set */
4724         if (orcpt)
4725           {
4726           synprot_error(L_smtp_syntax_error, 501, NULL,
4727             US"ORCPT can be specified once only");
4728           goto COMMAND_LOOP;
4729           }
4730         orcpt = string_copy(value);
4731         DEBUG(D_receive) debug_printf("DSN orcpt: %s\n", orcpt);
4732         }
4733
4734       else if (dsn_advertised && strcmpic(name, US"NOTIFY") == 0)
4735         {
4736         /* Check if the notify flags have been already set */
4737         if (flags > 0)
4738           {
4739           synprot_error(L_smtp_syntax_error, 501, NULL,
4740               US"NOTIFY can be specified once only");
4741           goto COMMAND_LOOP;
4742           }
4743         if (strcmpic(value, US"NEVER") == 0)
4744           flags |= rf_notify_never;
4745         else
4746           {
4747           uschar *p = value;
4748           while (*p != 0)
4749             {
4750             uschar *pp = p;
4751             while (*pp != 0 && *pp != ',') pp++;
4752             if (*pp == ',') *pp++ = 0;
4753             if (strcmpic(p, US"SUCCESS") == 0)
4754               {
4755               DEBUG(D_receive) debug_printf("DSN: Setting notify success\n");
4756               flags |= rf_notify_success;
4757               }
4758             else if (strcmpic(p, US"FAILURE") == 0)
4759               {
4760               DEBUG(D_receive) debug_printf("DSN: Setting notify failure\n");
4761               flags |= rf_notify_failure;
4762               }
4763             else if (strcmpic(p, US"DELAY") == 0)
4764               {
4765               DEBUG(D_receive) debug_printf("DSN: Setting notify delay\n");
4766               flags |= rf_notify_delay;
4767               }
4768             else
4769               {
4770               /* Catch any strange values */
4771               synprot_error(L_smtp_syntax_error, 501, NULL,
4772                 US"Invalid value for NOTIFY parameter");
4773               goto COMMAND_LOOP;
4774               }
4775             p = pp;
4776             }
4777             DEBUG(D_receive) debug_printf("DSN Flags: %x\n", flags);
4778           }
4779         }
4780
4781       /* Unknown option. Stick back the terminator characters and break
4782       the loop. An error for a malformed address will occur. */
4783
4784       else
4785         {
4786         DEBUG(D_receive) debug_printf("Invalid RCPT option: %s : %s\n", name, value);
4787         name[-1] = ' ';
4788         value[-1] = '=';
4789         break;
4790         }
4791       }
4792
4793     /* Apply SMTP rewriting then extract the working address. Don't allow "<>"
4794     as a recipient address */
4795
4796     recipient = rewrite_existflags & rewrite_smtp
4797       ? rewrite_one(smtp_cmd_data, rewrite_smtp, NULL, FALSE, US"",
4798           global_rewrite_rules)
4799       : smtp_cmd_data;
4800
4801     if (!(recipient = parse_extract_address(recipient, &errmess, &start, &end,
4802       &recipient_domain, FALSE)))
4803       {
4804       done = synprot_error(L_smtp_syntax_error, 501, smtp_cmd_data, errmess);
4805       rcpt_fail_count++;
4806       break;
4807       }
4808
4809     /* If the recipient address is unqualified, reject it, unless this is a
4810     locally generated message. However, unqualified addresses are permitted
4811     from a configured list of hosts and nets - typically when behaving as
4812     MUAs rather than MTAs. Sad that SMTP is used for both types of traffic,
4813     really. The flag is set at the start of the SMTP connection.
4814
4815     RFC 1123 talks about supporting "the reserved mailbox postmaster"; I always
4816     assumed this meant "reserved local part", but the revision of RFC 821 and
4817     friends now makes it absolutely clear that it means *mailbox*. Consequently
4818     we must always qualify this address, regardless. */
4819
4820     if (!recipient_domain)
4821       if (!(recipient_domain = qualify_recipient(&recipient, smtp_cmd_data,
4822                                   US"recipient")))
4823         {
4824         rcpt_fail_count++;
4825         break;
4826         }
4827
4828     /* Check maximum allowed */
4829
4830     if (rcpt_count > recipients_max && recipients_max > 0)
4831       {
4832       if (recipients_max_reject)
4833         {
4834         rcpt_fail_count++;
4835         smtp_printf("552 too many recipients\r\n");
4836         if (!toomany)
4837           log_write(0, LOG_MAIN|LOG_REJECT, "too many recipients: message "
4838             "rejected: sender=<%s> %s", sender_address, host_and_ident(TRUE));
4839         }
4840       else
4841         {
4842         rcpt_defer_count++;
4843         smtp_printf("452 too many recipients\r\n");
4844         if (!toomany)
4845           log_write(0, LOG_MAIN|LOG_REJECT, "too many recipients: excess "
4846             "temporarily rejected: sender=<%s> %s", sender_address,
4847             host_and_ident(TRUE));
4848         }
4849
4850       toomany = TRUE;
4851       break;
4852       }
4853
4854     /* If we have passed the threshold for rate limiting, apply the current
4855     delay, and update it for next time, provided this is a limited host. */
4856
4857     if (rcpt_count > smtp_rlr_threshold &&
4858         verify_check_host(&smtp_ratelimit_hosts) == OK)
4859       {
4860       DEBUG(D_receive) debug_printf("rate limit RCPT: delay %.3g sec\n",
4861         smtp_delay_rcpt/1000.0);
4862       millisleep((int)smtp_delay_rcpt);
4863       smtp_delay_rcpt *= smtp_rlr_factor;
4864       if (smtp_delay_rcpt > (double)smtp_rlr_limit)
4865         smtp_delay_rcpt = (double)smtp_rlr_limit;
4866       }
4867
4868     /* If the MAIL ACL discarded all the recipients, we bypass ACL checking
4869     for them. Otherwise, check the access control list for this recipient. As
4870     there may be a delay in this, re-check for a synchronization error
4871     afterwards, unless pipelining was advertised. */
4872
4873     if (recipients_discarded)
4874       rc = DISCARD;
4875     else
4876       if (  (rc = acl_check(ACL_WHERE_RCPT, recipient, acl_smtp_rcpt, &user_msg,
4877                     &log_msg)) == OK
4878          && !pipelining_advertised && !check_sync())
4879         goto SYNC_FAILURE;
4880
4881     /* The ACL was happy */
4882
4883     if (rc == OK)
4884       {
4885       if (user_msg)
4886         smtp_user_msg(US"250", user_msg);
4887       else
4888         smtp_printf("250 Accepted\r\n");
4889       receive_add_recipient(recipient, -1);
4890
4891       /* Set the dsn flags in the recipients_list */
4892       recipients_list[recipients_count-1].orcpt = orcpt;
4893       recipients_list[recipients_count-1].dsn_flags = flags;
4894
4895       DEBUG(D_receive) debug_printf("DSN: orcpt: %s  flags: %d\n",
4896         recipients_list[recipients_count-1].orcpt,
4897         recipients_list[recipients_count-1].dsn_flags);
4898       }
4899
4900     /* The recipient was discarded */
4901
4902     else if (rc == DISCARD)
4903       {
4904       if (user_msg)
4905         smtp_user_msg(US"250", user_msg);
4906       else
4907         smtp_printf("250 Accepted\r\n");
4908       rcpt_fail_count++;
4909       discarded = TRUE;
4910       log_write(0, LOG_MAIN|LOG_REJECT, "%s F=<%s> RCPT %s: "
4911         "discarded by %s ACL%s%s", host_and_ident(TRUE),
4912         sender_address_unrewritten? sender_address_unrewritten : sender_address,
4913         smtp_cmd_argument, recipients_discarded? "MAIL" : "RCPT",
4914         log_msg ? US": " : US"", log_msg ? log_msg : US"");
4915       }
4916
4917     /* Either the ACL failed the address, or it was deferred. */
4918
4919     else
4920       {
4921       if (rc == FAIL) rcpt_fail_count++; else rcpt_defer_count++;
4922       done = smtp_handle_acl_fail(ACL_WHERE_RCPT, rc, user_msg, log_msg);
4923       }
4924     break;
4925
4926
4927     /* The DATA command is legal only if it follows successful MAIL FROM
4928     and RCPT TO commands. However, if pipelining is advertised, a bad DATA is
4929     not counted as a protocol error if it follows RCPT (which must have been
4930     rejected if there are no recipients.) This function is complete when a
4931     valid DATA command is encountered.
4932
4933     Note concerning the code used: RFC 2821 says this:
4934
4935      -  If there was no MAIL, or no RCPT, command, or all such commands
4936         were rejected, the server MAY return a "command out of sequence"
4937         (503) or "no valid recipients" (554) reply in response to the
4938         DATA command.
4939
4940     The example in the pipelining RFC 2920 uses 554, but I use 503 here
4941     because it is the same whether pipelining is in use or not.
4942
4943     If all the RCPT commands that precede DATA provoked the same error message
4944     (often indicating some kind of system error), it is helpful to include it
4945     with the DATA rejection (an idea suggested by Tony Finch). */
4946
4947     case BDAT_CMD:
4948     HAD(SCH_BDAT);
4949       {
4950       int n;
4951
4952       if (chunking_state != CHUNKING_OFFERED)
4953         {
4954         done = synprot_error(L_smtp_protocol_error, 503, NULL,
4955           US"BDAT command used when CHUNKING not advertised");
4956         break;
4957         }
4958
4959       /* grab size, endmarker */
4960
4961       if (sscanf(CS smtp_cmd_data, "%u %n", &chunking_datasize, &n) < 1)
4962         {
4963         done = synprot_error(L_smtp_protocol_error, 501, NULL,
4964           US"missing size for BDAT command");
4965         break;
4966         }
4967       chunking_state = strcmpic(smtp_cmd_data+n, US"LAST") == 0
4968         ? CHUNKING_LAST : CHUNKING_ACTIVE;
4969       chunking_data_left = chunking_datasize;
4970       DEBUG(D_receive) debug_printf("chunking state %d, %d bytes\n",
4971                                     (int)chunking_state, chunking_data_left);
4972
4973       lwr_receive_getc = receive_getc;
4974       lwr_receive_ungetc = receive_ungetc;
4975       receive_getc = bdat_getc;
4976       receive_ungetc = bdat_ungetc;
4977
4978       goto DATA_BDAT;
4979       }
4980
4981     case DATA_CMD:
4982     HAD(SCH_DATA);
4983
4984     DATA_BDAT:          /* Common code for DATA and BDAT */
4985     if (!discarded && recipients_count <= 0)
4986       {
4987       if (rcpt_smtp_response_same && rcpt_smtp_response != NULL)
4988         {
4989         uschar *code = US"503";
4990         int len = Ustrlen(rcpt_smtp_response);
4991         smtp_respond(code, 3, FALSE, US"All RCPT commands were rejected with "
4992           "this error:");
4993         /* Responses from smtp_printf() will have \r\n on the end */
4994         if (len > 2 && rcpt_smtp_response[len-2] == '\r')
4995           rcpt_smtp_response[len-2] = 0;
4996         smtp_respond(code, 3, FALSE, rcpt_smtp_response);
4997         }
4998       if (pipelining_advertised && last_was_rcpt)
4999         smtp_printf("503 Valid RCPT command must precede %s\r\n",
5000           smtp_names[smtp_connection_had[smtp_ch_index-1]]);
5001       else
5002         done = synprot_error(L_smtp_protocol_error, 503, NULL,
5003           smtp_connection_had[smtp_ch_index-1] == SCH_DATA
5004           ? US"valid RCPT command must precede DATA"
5005           : US"valid RCPT command must precede BDAT");
5006
5007       if (chunking_state > CHUNKING_OFFERED)
5008         bdat_flush_data();
5009       break;
5010       }
5011
5012     if (toomany && recipients_max_reject)
5013       {
5014       sender_address = NULL;  /* This will allow a new MAIL without RSET */
5015       sender_address_unrewritten = NULL;
5016       smtp_printf("554 Too many recipients\r\n");
5017       break;
5018       }
5019
5020     if (chunking_state > CHUNKING_OFFERED)
5021       rc = OK;                  /* No predata ACL or go-ahead output for BDAT */
5022     else
5023       {
5024       /* If there is an ACL, re-check the synchronization afterwards, since the
5025       ACL may have delayed.  To handle cutthrough delivery enforce a dummy call
5026       to get the DATA command sent. */
5027
5028       if (acl_smtp_predata == NULL && cutthrough.fd < 0)
5029         rc = OK;
5030       else
5031         {
5032         uschar * acl = acl_smtp_predata ? acl_smtp_predata : US"accept";
5033         enable_dollar_recipients = TRUE;
5034         rc = acl_check(ACL_WHERE_PREDATA, NULL, acl, &user_msg,
5035           &log_msg);
5036         enable_dollar_recipients = FALSE;
5037         if (rc == OK && !check_sync())
5038           goto SYNC_FAILURE;
5039
5040         if (rc != OK)
5041           {     /* Either the ACL failed the address, or it was deferred. */
5042           done = smtp_handle_acl_fail(ACL_WHERE_PREDATA, rc, user_msg, log_msg);
5043           break;
5044           }
5045         }
5046
5047       if (user_msg)
5048         smtp_user_msg(US"354", user_msg);
5049       else
5050         smtp_printf(
5051           "354 Enter message, ending with \".\" on a line by itself\r\n");
5052       }
5053
5054 #ifdef TCP_QUICKACK
5055     if (smtp_in)        /* all ACKs needed to ramp window up for bulk data */
5056       (void) setsockopt(fileno(smtp_in), IPPROTO_TCP, TCP_QUICKACK,
5057               US &on, sizeof(on));
5058 #endif
5059     done = 3;
5060     message_ended = END_NOTENDED;   /* Indicate in middle of data */
5061
5062     break;
5063
5064
5065     case VRFY_CMD:
5066       {
5067       uschar * address;
5068
5069       HAD(SCH_VRFY);
5070
5071       if (!(address = parse_extract_address(smtp_cmd_data, &errmess,
5072             &start, &end, &recipient_domain, FALSE)))
5073         {
5074         smtp_printf("501 %s\r\n", errmess);
5075         break;
5076         }
5077
5078       if (!recipient_domain)
5079         if (!(recipient_domain = qualify_recipient(&address, smtp_cmd_data,
5080                                     US"verify")))
5081           break;
5082
5083       if ((rc = acl_check(ACL_WHERE_VRFY, address, acl_smtp_vrfy,
5084                     &user_msg, &log_msg)) != OK)
5085         done = smtp_handle_acl_fail(ACL_WHERE_VRFY, rc, user_msg, log_msg);
5086       else
5087         {
5088         uschar * s = NULL;
5089         address_item * addr = deliver_make_addr(address, FALSE);
5090
5091         switch(verify_address(addr, NULL, vopt_is_recipient | vopt_qualify, -1,
5092                -1, -1, NULL, NULL, NULL))
5093           {
5094           case OK:
5095             s = string_sprintf("250 <%s> is deliverable", address);
5096             break;
5097
5098           case DEFER:
5099             s = (addr->user_message != NULL)?
5100               string_sprintf("451 <%s> %s", address, addr->user_message) :
5101               string_sprintf("451 Cannot resolve <%s> at this time", address);
5102             break;
5103
5104           case FAIL:
5105             s = (addr->user_message != NULL)?
5106               string_sprintf("550 <%s> %s", address, addr->user_message) :
5107               string_sprintf("550 <%s> is not deliverable", address);
5108             log_write(0, LOG_MAIN, "VRFY failed for %s %s",
5109               smtp_cmd_argument, host_and_ident(TRUE));
5110             break;
5111           }
5112
5113         smtp_printf("%s\r\n", s);
5114         }
5115       break;
5116       }
5117
5118
5119     case EXPN_CMD:
5120     HAD(SCH_EXPN);
5121     rc = acl_check(ACL_WHERE_EXPN, NULL, acl_smtp_expn, &user_msg, &log_msg);
5122     if (rc != OK)
5123       done = smtp_handle_acl_fail(ACL_WHERE_EXPN, rc, user_msg, log_msg);
5124     else
5125       {
5126       BOOL save_log_testing_mode = log_testing_mode;
5127       address_test_mode = log_testing_mode = TRUE;
5128       (void) verify_address(deliver_make_addr(smtp_cmd_data, FALSE),
5129         smtp_out, vopt_is_recipient | vopt_qualify | vopt_expn, -1, -1, -1,
5130         NULL, NULL, NULL);
5131       address_test_mode = FALSE;
5132       log_testing_mode = save_log_testing_mode;    /* true for -bh */
5133       }
5134     break;
5135
5136
5137     #ifdef SUPPORT_TLS
5138
5139     case STARTTLS_CMD:
5140     HAD(SCH_STARTTLS);
5141     if (!tls_advertised)
5142       {
5143       done = synprot_error(L_smtp_protocol_error, 503, NULL,
5144         US"STARTTLS command used when not advertised");
5145       break;
5146       }
5147
5148     /* Apply an ACL check if one is defined */
5149
5150     if (  acl_smtp_starttls
5151        && (rc = acl_check(ACL_WHERE_STARTTLS, NULL, acl_smtp_starttls,
5152                   &user_msg, &log_msg)) != OK
5153        )
5154       {
5155       done = smtp_handle_acl_fail(ACL_WHERE_STARTTLS, rc, user_msg, log_msg);
5156       break;
5157       }
5158
5159     /* RFC 2487 is not clear on when this command may be sent, though it
5160     does state that all information previously obtained from the client
5161     must be discarded if a TLS session is started. It seems reasonable to
5162     do an implied RSET when STARTTLS is received. */
5163
5164     incomplete_transaction_log(US"STARTTLS");
5165     smtp_reset(reset_point);
5166     toomany = FALSE;
5167     cmd_list[CMD_LIST_STARTTLS].is_mail_cmd = FALSE;
5168
5169     /* There's an attack where more data is read in past the STARTTLS command
5170     before TLS is negotiated, then assumed to be part of the secure session
5171     when used afterwards; we use segregated input buffers, so are not
5172     vulnerable, but we want to note when it happens and, for sheer paranoia,
5173     ensure that the buffer is "wiped".
5174     Pipelining sync checks will normally have protected us too, unless disabled
5175     by configuration. */
5176
5177     if (receive_smtp_buffered())
5178       {
5179       DEBUG(D_any)
5180         debug_printf("Non-empty input buffer after STARTTLS; naive attack?\n");
5181       if (tls_in.active < 0)
5182         smtp_inend = smtp_inptr = smtp_inbuffer;
5183       /* and if TLS is already active, tls_server_start() should fail */
5184       }
5185
5186     /* There is nothing we value in the input buffer and if TLS is successfully
5187     negotiated, we won't use this buffer again; if TLS fails, we'll just read
5188     fresh content into it.  The buffer contains arbitrary content from an
5189     untrusted remote source; eg: NOOP <shellcode>\r\nSTARTTLS\r\n
5190     It seems safest to just wipe away the content rather than leave it as a
5191     target to jump to. */
5192
5193     memset(smtp_inbuffer, 0, IN_BUFFER_SIZE);
5194
5195     /* Attempt to start up a TLS session, and if successful, discard all
5196     knowledge that was obtained previously. At least, that's what the RFC says,
5197     and that's what happens by default. However, in order to work round YAEB,
5198     there is an option to remember the esmtp state. Sigh.
5199
5200     We must allow for an extra EHLO command and an extra AUTH command after
5201     STARTTLS that don't add to the nonmail command count. */
5202
5203     s = NULL;
5204     if ((rc = tls_server_start(tls_require_ciphers, &s)) == OK)
5205       {
5206       if (!tls_remember_esmtp)
5207         helo_seen = esmtp = auth_advertised = pipelining_advertised = FALSE;
5208       cmd_list[CMD_LIST_EHLO].is_mail_cmd = TRUE;
5209       cmd_list[CMD_LIST_AUTH].is_mail_cmd = TRUE;
5210       cmd_list[CMD_LIST_TLS_AUTH].is_mail_cmd = TRUE;
5211       if (sender_helo_name != NULL)
5212         {
5213         store_free(sender_helo_name);
5214         sender_helo_name = NULL;
5215         host_build_sender_fullhost();  /* Rebuild */
5216         set_process_info("handling incoming TLS connection from %s",
5217           host_and_ident(FALSE));
5218         }
5219       received_protocol =
5220         (sender_host_address ? protocols : protocols_local)
5221           [ (esmtp
5222             ? pextend + (sender_host_authenticated ? pauthed : 0)
5223             : pnormal)
5224           + (tls_in.active >= 0 ? pcrpted : 0)
5225           ];
5226
5227       sender_host_authenticated = NULL;
5228       authenticated_id = NULL;
5229       sync_cmd_limit = NON_SYNC_CMD_NON_PIPELINING;
5230       DEBUG(D_tls) debug_printf("TLS active\n");
5231       break;     /* Successful STARTTLS */
5232       }
5233     else
5234       (void) smtp_log_tls_fail(s);
5235
5236     /* Some local configuration problem was discovered before actually trying
5237     to do a TLS handshake; give a temporary error. */
5238
5239     if (rc == DEFER)
5240       {
5241       smtp_printf("454 TLS currently unavailable\r\n");
5242       break;
5243       }
5244
5245     /* Hard failure. Reject everything except QUIT or closed connection. One
5246     cause for failure is a nested STARTTLS, in which case tls_in.active remains
5247     set, but we must still reject all incoming commands. */
5248
5249     DEBUG(D_tls) debug_printf("TLS failed to start\n");
5250     while (done <= 0) switch(smtp_read_command(FALSE, GETC_BUFFER_UNLIMITED))
5251       {
5252       case EOF_CMD:
5253         log_write(L_smtp_connection, LOG_MAIN, "%s closed by EOF",
5254           smtp_get_connection_info());
5255         smtp_notquit_exit(US"tls-failed", NULL, NULL);
5256         done = 2;
5257         break;
5258
5259       /* It is perhaps arguable as to which exit ACL should be called here,
5260       but as it is probably a situation that almost never arises, it
5261       probably doesn't matter. We choose to call the real QUIT ACL, which in
5262       some sense is perhaps "right". */
5263
5264       case QUIT_CMD:
5265         user_msg = NULL;
5266         if (  acl_smtp_quit
5267            && ((rc = acl_check(ACL_WHERE_QUIT, NULL, acl_smtp_quit, &user_msg,
5268                               &log_msg)) == ERROR))
5269             log_write(0, LOG_MAIN|LOG_PANIC, "ACL for QUIT returned ERROR: %s",
5270               log_msg);
5271         if (user_msg)
5272           smtp_respond(US"221", 3, TRUE, user_msg);
5273         else
5274           smtp_printf("221 %s closing connection\r\n", smtp_active_hostname);
5275         log_write(L_smtp_connection, LOG_MAIN, "%s closed by QUIT",
5276           smtp_get_connection_info());
5277         done = 2;
5278         break;
5279
5280       default:
5281         smtp_printf("554 Security failure\r\n");
5282         break;
5283       }
5284     tls_close(TRUE, TRUE);
5285     break;
5286     #endif
5287
5288
5289     /* The ACL for QUIT is provided for gathering statistical information or
5290     similar; it does not affect the response code, but it can supply a custom
5291     message. */
5292
5293     case QUIT_CMD:
5294     smtp_quit_handler(&user_msg, &log_msg);
5295     done = 2;
5296     break;
5297
5298
5299     case RSET_CMD:
5300     smtp_rset_handler();
5301     smtp_reset(reset_point);
5302     toomany = FALSE;
5303     break;
5304
5305
5306     case NOOP_CMD:
5307     HAD(SCH_NOOP);
5308     smtp_printf("250 OK\r\n");
5309     break;
5310
5311
5312     /* Show ETRN/EXPN/VRFY if there's an ACL for checking hosts; if actually
5313     used, a check will be done for permitted hosts. Show STARTTLS only if not
5314     already in a TLS session and if it would be advertised in the EHLO
5315     response. */
5316
5317     case HELP_CMD:
5318     HAD(SCH_HELP);
5319     smtp_printf("214-Commands supported:\r\n");
5320       {
5321       uschar buffer[256];
5322       buffer[0] = 0;
5323       Ustrcat(buffer, " AUTH");
5324       #ifdef SUPPORT_TLS
5325       if (tls_in.active < 0 &&
5326           verify_check_host(&tls_advertise_hosts) != FAIL)
5327         Ustrcat(buffer, " STARTTLS");
5328       #endif
5329       Ustrcat(buffer, " HELO EHLO MAIL RCPT DATA BDAT");
5330       Ustrcat(buffer, " NOOP QUIT RSET HELP");
5331       if (acl_smtp_etrn != NULL) Ustrcat(buffer, " ETRN");
5332       if (acl_smtp_expn != NULL) Ustrcat(buffer, " EXPN");
5333       if (acl_smtp_vrfy != NULL) Ustrcat(buffer, " VRFY");
5334       smtp_printf("214%s\r\n", buffer);
5335       }
5336     break;
5337
5338
5339     case EOF_CMD:
5340     incomplete_transaction_log(US"connection lost");
5341     smtp_notquit_exit(US"connection-lost", US"421",
5342       US"%s lost input connection", smtp_active_hostname);
5343
5344     /* Don't log by default unless in the middle of a message, as some mailers
5345     just drop the call rather than sending QUIT, and it clutters up the logs.
5346     */
5347
5348     if (sender_address != NULL || recipients_count > 0)
5349       log_write(L_lost_incoming_connection,
5350           LOG_MAIN,
5351           "unexpected %s while reading SMTP command from %s%s",
5352           sender_host_unknown? "EOF" : "disconnection",
5353           host_and_ident(FALSE), smtp_read_error);
5354
5355     else log_write(L_smtp_connection, LOG_MAIN, "%s lost%s",
5356       smtp_get_connection_info(), smtp_read_error);
5357
5358     done = 1;
5359     break;
5360
5361
5362     case ETRN_CMD:
5363     HAD(SCH_ETRN);
5364     if (sender_address != NULL)
5365       {
5366       done = synprot_error(L_smtp_protocol_error, 503, NULL,
5367         US"ETRN is not permitted inside a transaction");
5368       break;
5369       }
5370
5371     log_write(L_etrn, LOG_MAIN, "ETRN %s received from %s", smtp_cmd_argument,
5372       host_and_ident(FALSE));
5373
5374     if ((rc = acl_check(ACL_WHERE_ETRN, NULL, acl_smtp_etrn,
5375                 &user_msg, &log_msg)) != OK)
5376       {
5377       done = smtp_handle_acl_fail(ACL_WHERE_ETRN, rc, user_msg, log_msg);
5378       break;
5379       }
5380
5381     /* Compute the serialization key for this command. */
5382
5383     etrn_serialize_key = string_sprintf("etrn-%s\n", smtp_cmd_data);
5384
5385     /* If a command has been specified for running as a result of ETRN, we
5386     permit any argument to ETRN. If not, only the # standard form is permitted,
5387     since that is strictly the only kind of ETRN that can be implemented
5388     according to the RFC. */
5389
5390     if (smtp_etrn_command != NULL)
5391       {
5392       uschar *error;
5393       BOOL rc;
5394       etrn_command = smtp_etrn_command;
5395       deliver_domain = smtp_cmd_data;
5396       rc = transport_set_up_command(&argv, smtp_etrn_command, TRUE, 0, NULL,
5397         US"ETRN processing", &error);
5398       deliver_domain = NULL;
5399       if (!rc)
5400         {
5401         log_write(0, LOG_MAIN|LOG_PANIC, "failed to set up ETRN command: %s",
5402           error);
5403         smtp_printf("458 Internal failure\r\n");
5404         break;
5405         }
5406       }
5407
5408     /* Else set up to call Exim with the -R option. */
5409
5410     else
5411       {
5412       if (*smtp_cmd_data++ != '#')
5413         {
5414         done = synprot_error(L_smtp_syntax_error, 501, NULL,
5415           US"argument must begin with #");
5416         break;
5417         }
5418       etrn_command = US"exim -R";
5419       argv = CUSS child_exec_exim(CEE_RETURN_ARGV, TRUE, NULL, TRUE,
5420         *queue_name ? 4 : 2,
5421         US"-R", smtp_cmd_data,
5422         US"-MCG", queue_name);
5423       }
5424
5425     /* If we are host-testing, don't actually do anything. */
5426
5427     if (host_checking)
5428       {
5429       HDEBUG(D_any)
5430         {
5431         debug_printf("ETRN command is: %s\n", etrn_command);
5432         debug_printf("ETRN command execution skipped\n");
5433         }
5434       if (user_msg == NULL) smtp_printf("250 OK\r\n");
5435         else smtp_user_msg(US"250", user_msg);
5436       break;
5437       }
5438
5439
5440     /* If ETRN queue runs are to be serialized, check the database to
5441     ensure one isn't already running. */
5442
5443     if (smtp_etrn_serialize && !enq_start(etrn_serialize_key, 1))
5444       {
5445       smtp_printf("458 Already processing %s\r\n", smtp_cmd_data);
5446       break;
5447       }
5448
5449     /* Fork a child process and run the command. We don't want to have to
5450     wait for the process at any point, so set SIGCHLD to SIG_IGN before
5451     forking. It should be set that way anyway for external incoming SMTP,
5452     but we save and restore to be tidy. If serialization is required, we
5453     actually run the command in yet another process, so we can wait for it
5454     to complete and then remove the serialization lock. */
5455
5456     oldsignal = signal(SIGCHLD, SIG_IGN);
5457
5458     if ((pid = fork()) == 0)
5459       {
5460       smtp_input = FALSE;       /* This process is not associated with the */
5461       (void)fclose(smtp_in);    /* SMTP call any more. */
5462       (void)fclose(smtp_out);
5463
5464       signal(SIGCHLD, SIG_DFL);      /* Want to catch child */
5465
5466       /* If not serializing, do the exec right away. Otherwise, fork down
5467       into another process. */
5468
5469       if (!smtp_etrn_serialize || (pid = fork()) == 0)
5470         {
5471         DEBUG(D_exec) debug_print_argv(argv);
5472         exim_nullstd();                   /* Ensure std{in,out,err} exist */
5473         execv(CS argv[0], (char *const *)argv);
5474         log_write(0, LOG_MAIN|LOG_PANIC_DIE, "exec of \"%s\" (ETRN) failed: %s",
5475           etrn_command, strerror(errno));
5476         _exit(EXIT_FAILURE);         /* paranoia */
5477         }
5478
5479       /* Obey this if smtp_serialize and the 2nd fork yielded non-zero. That
5480       is, we are in the first subprocess, after forking again. All we can do
5481       for a failing fork is to log it. Otherwise, wait for the 2nd process to
5482       complete, before removing the serialization. */
5483
5484       if (pid < 0)
5485         log_write(0, LOG_MAIN|LOG_PANIC, "2nd fork for serialized ETRN "
5486           "failed: %s", strerror(errno));
5487       else
5488         {
5489         int status;
5490         DEBUG(D_any) debug_printf("waiting for serialized ETRN process %d\n",
5491           (int)pid);
5492         (void)wait(&status);
5493         DEBUG(D_any) debug_printf("serialized ETRN process %d ended\n",
5494           (int)pid);
5495         }
5496
5497       enq_end(etrn_serialize_key);
5498       _exit(EXIT_SUCCESS);
5499       }
5500
5501     /* Back in the top level SMTP process. Check that we started a subprocess
5502     and restore the signal state. */
5503
5504     if (pid < 0)
5505       {
5506       log_write(0, LOG_MAIN|LOG_PANIC, "fork of process for ETRN failed: %s",
5507         strerror(errno));
5508       smtp_printf("458 Unable to fork process\r\n");
5509       if (smtp_etrn_serialize) enq_end(etrn_serialize_key);
5510       }
5511     else
5512       {
5513       if (user_msg == NULL) smtp_printf("250 OK\r\n");
5514         else smtp_user_msg(US"250", user_msg);
5515       }
5516
5517     signal(SIGCHLD, oldsignal);
5518     break;
5519
5520
5521     case BADARG_CMD:
5522     done = synprot_error(L_smtp_syntax_error, 501, NULL,
5523       US"unexpected argument data");
5524     break;
5525
5526
5527     /* This currently happens only for NULLs, but could be extended. */
5528
5529     case BADCHAR_CMD:
5530     done = synprot_error(L_smtp_syntax_error, 0, NULL,       /* Just logs */
5531       US"NULL character(s) present (shown as '?')");
5532     smtp_printf("501 NULL characters are not allowed in SMTP commands\r\n");
5533     break;
5534
5535
5536     case BADSYN_CMD:
5537     SYNC_FAILURE:
5538     if (smtp_inend >= smtp_inbuffer + IN_BUFFER_SIZE)
5539       smtp_inend = smtp_inbuffer + IN_BUFFER_SIZE - 1;
5540     c = smtp_inend - smtp_inptr;
5541     if (c > 150) c = 150;
5542     smtp_inptr[c] = 0;
5543     incomplete_transaction_log(US"sync failure");
5544     log_write(0, LOG_MAIN|LOG_REJECT, "SMTP protocol synchronization error "
5545       "(next input sent too soon: pipelining was%s advertised): "
5546       "rejected \"%s\" %s next input=\"%s\"",
5547       pipelining_advertised? "" : " not",
5548       smtp_cmd_buffer, host_and_ident(TRUE),
5549       string_printing(smtp_inptr));
5550     smtp_notquit_exit(US"synchronization-error", US"554",
5551       US"SMTP synchronization error");
5552     done = 1;   /* Pretend eof - drops connection */
5553     break;
5554
5555
5556     case TOO_MANY_NONMAIL_CMD:
5557     s = smtp_cmd_buffer;
5558     while (*s != 0 && !isspace(*s)) s++;
5559     incomplete_transaction_log(US"too many non-mail commands");
5560     log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
5561       "nonmail commands (last was \"%.*s\")",  host_and_ident(FALSE),
5562       (int)(s - smtp_cmd_buffer), smtp_cmd_buffer);
5563     smtp_notquit_exit(US"bad-commands", US"554", US"Too many nonmail commands");
5564     done = 1;   /* Pretend eof - drops connection */
5565     break;
5566
5567 #ifdef SUPPORT_PROXY
5568     case PROXY_FAIL_IGNORE_CMD:
5569     smtp_printf("503 Command refused, required Proxy negotiation failed\r\n");
5570     break;
5571 #endif
5572
5573     default:
5574     if (unknown_command_count++ >= smtp_max_unknown_commands)
5575       {
5576       log_write(L_smtp_syntax_error, LOG_MAIN,
5577         "SMTP syntax error in \"%s\" %s %s",
5578         string_printing(smtp_cmd_buffer), host_and_ident(TRUE),
5579         US"unrecognized command");
5580       incomplete_transaction_log(US"unrecognized command");
5581       smtp_notquit_exit(US"bad-commands", US"500",
5582         US"Too many unrecognized commands");
5583       done = 2;
5584       log_write(0, LOG_MAIN|LOG_REJECT, "SMTP call from %s dropped: too many "
5585         "unrecognized commands (last was \"%s\")", host_and_ident(FALSE),
5586         string_printing(smtp_cmd_buffer));
5587       }
5588     else
5589       done = synprot_error(L_smtp_syntax_error, 500, NULL,
5590         US"unrecognized command");
5591     break;
5592     }
5593
5594   /* This label is used by goto's inside loops that want to break out to
5595   the end of the command-processing loop. */
5596
5597   COMMAND_LOOP:
5598   last_was_rej_mail = was_rej_mail;     /* Remember some last commands for */
5599   last_was_rcpt = was_rcpt;             /* protocol error handling */
5600   continue;
5601   }
5602
5603 return done - 2;  /* Convert yield values */
5604 }
5605
5606 /* vi: aw ai sw=2
5607 */
5608 /* End of smtp_in.c */