6b4843175359c95b8b9df7f47ff40b58a404a530
[users/jgh/exim.git] / src / src / smtp_out.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2016 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8 /* A number of functions for driving outgoing SMTP calls. */
9
10
11 #include "exim.h"
12 #include "transports/smtp.h"
13
14
15
16 /*************************************************
17 *           Find an outgoing interface           *
18 *************************************************/
19
20 /* This function is called from the smtp transport and also from the callout
21 code in verify.c. Its job is to expand a string to get a list of interfaces,
22 and choose a suitable one (IPv4 or IPv6) for the outgoing address.
23
24 Arguments:
25   istring    string interface setting, may be NULL, meaning "any", in
26                which case the function does nothing
27   host_af    AF_INET or AF_INET6 for the outgoing IP address
28   addr       the mail address being handled (for setting errors)
29   interface  point this to the interface
30   msg        to add to any error message
31
32 Returns:     TRUE on success, FALSE on failure, with error message
33                set in addr and transport_return set to PANIC
34 */
35
36 BOOL
37 smtp_get_interface(uschar *istring, int host_af, address_item *addr,
38   uschar **interface, uschar *msg)
39 {
40 const uschar * expint;
41 uschar *iface;
42 int sep = 0;
43
44 if (istring == NULL) return TRUE;
45
46 expint = expand_string(istring);
47 if (expint == NULL)
48   {
49   if (expand_string_forcedfail) return TRUE;
50   addr->transport_return = PANIC;
51   addr->message = string_sprintf("failed to expand \"interface\" "
52       "option for %s: %s", msg, expand_string_message);
53   return FALSE;
54   }
55
56 while (isspace(*expint)) expint++;
57 if (*expint == 0) return TRUE;
58
59 while ((iface = string_nextinlist(&expint, &sep, big_buffer,
60           big_buffer_size)) != NULL)
61   {
62   if (string_is_ip_address(iface, NULL) == 0)
63     {
64     addr->transport_return = PANIC;
65     addr->message = string_sprintf("\"%s\" is not a valid IP "
66       "address for the \"interface\" option for %s",
67       iface, msg);
68     return FALSE;
69     }
70
71   if (((Ustrchr(iface, ':') == NULL)? AF_INET:AF_INET6) == host_af)
72     break;
73   }
74
75 if (iface != NULL) *interface = string_copy(iface);
76 return TRUE;
77 }
78
79
80
81 /*************************************************
82 *           Find an outgoing port                *
83 *************************************************/
84
85 /* This function is called from the smtp transport and also from the callout
86 code in verify.c. Its job is to find a port number. Note that getservbyname()
87 produces the number in network byte order.
88
89 Arguments:
90   rstring     raw (unexpanded) string representation of the port
91   addr        the mail address being handled (for setting errors)
92   port        stick the port in here
93   msg         for adding to error message
94
95 Returns:      TRUE on success, FALSE on failure, with error message set
96                 in addr, and transport_return set to PANIC
97 */
98
99 BOOL
100 smtp_get_port(uschar *rstring, address_item *addr, int *port, uschar *msg)
101 {
102 uschar *pstring = expand_string(rstring);
103
104 if (pstring == NULL)
105   {
106   addr->transport_return = PANIC;
107   addr->message = string_sprintf("failed to expand \"%s\" (\"port\" option) "
108     "for %s: %s", rstring, msg, expand_string_message);
109   return FALSE;
110   }
111
112 if (isdigit(*pstring))
113   {
114   uschar *end;
115   *port = Ustrtol(pstring, &end, 0);
116   if (end != pstring + Ustrlen(pstring))
117     {
118     addr->transport_return = PANIC;
119     addr->message = string_sprintf("invalid port number for %s: %s", msg,
120       pstring);
121     return FALSE;
122     }
123   }
124
125 else
126   {
127   struct servent *smtp_service = getservbyname(CS pstring, "tcp");
128   if (smtp_service == NULL)
129     {
130     addr->transport_return = PANIC;
131     addr->message = string_sprintf("TCP port \"%s\" is not defined for %s",
132       pstring, msg);
133     return FALSE;
134     }
135   *port = ntohs(smtp_service->s_port);
136   }
137
138 return TRUE;
139 }
140
141
142
143
144 int
145 smtp_sock_connect(host_item * host, int host_af, int port, uschar * interface,
146   transport_instance * tb, int timeout)
147 {
148 smtp_transport_options_block * ob =
149   (smtp_transport_options_block *)tb->options_block;
150 const uschar * dscp = ob->dscp;
151 int dscp_value;
152 int dscp_level;
153 int dscp_option;
154 int sock;
155 int on = 1;
156 int save_errno = 0;
157
158 #ifndef DISABLE_EVENT
159 deliver_host_address = host->address;
160 deliver_host_port = port;
161 if (event_raise(tb->event_action, US"tcp:connect", NULL)) return -1;
162 #endif
163
164 if ((sock = ip_socket(SOCK_STREAM, host_af)) < 0) return -1;
165
166 /* Set TCP_NODELAY; Exim does its own buffering. */
167
168 if (setsockopt(sock, IPPROTO_TCP, TCP_NODELAY, US &on, sizeof(on)))
169   HDEBUG(D_transport|D_acl|D_v)
170     debug_printf("failed to set NODELAY: %s ", strerror(errno));
171
172 /* Set DSCP value, if we can. For now, if we fail to set the value, we don't
173 bomb out, just log it and continue in default traffic class. */
174
175 if (dscp && dscp_lookup(dscp, host_af, &dscp_level, &dscp_option, &dscp_value))
176   {
177   HDEBUG(D_transport|D_acl|D_v)
178     debug_printf("DSCP \"%s\"=%x ", dscp, dscp_value);
179   if (setsockopt(sock, dscp_level, dscp_option, &dscp_value, sizeof(dscp_value)) < 0)
180     HDEBUG(D_transport|D_acl|D_v)
181       debug_printf("failed to set DSCP: %s ", strerror(errno));
182   /* If the kernel supports IPv4 and IPv6 on an IPv6 socket, we need to set the
183   option for both; ignore failures here */
184   if (host_af == AF_INET6 &&
185       dscp_lookup(dscp, AF_INET, &dscp_level, &dscp_option, &dscp_value))
186     (void) setsockopt(sock, dscp_level, dscp_option, &dscp_value, sizeof(dscp_value));
187   }
188
189 /* Bind to a specific interface if requested. Caller must ensure the interface
190 is the same type (IPv4 or IPv6) as the outgoing address. */
191
192 if (interface && ip_bind(sock, host_af, interface, 0) < 0)
193   {
194   save_errno = errno;
195   HDEBUG(D_transport|D_acl|D_v)
196     debug_printf("unable to bind outgoing SMTP call to %s: %s", interface,
197     strerror(errno));
198   }
199
200 /* Connect to the remote host, and add keepalive to the socket before returning
201 it, if requested. */
202
203 else if (ip_connect(sock, host_af, host->address, port, timeout) < 0)
204   save_errno = errno;
205
206 /* Either bind() or connect() failed */
207
208 if (save_errno != 0)
209   {
210   HDEBUG(D_transport|D_acl|D_v)
211     {
212     debug_printf("failed: %s", CUstrerror(save_errno));
213     if (save_errno == ETIMEDOUT)
214       debug_printf(" (timeout=%s)", readconf_printtime(timeout));
215     debug_printf("\n");
216     }
217   (void)close(sock);
218   errno = save_errno;
219   return -1;
220   }
221
222 /* Both bind() and connect() succeeded */
223
224 else
225   {
226   union sockaddr_46 interface_sock;
227   EXIM_SOCKLEN_T size = sizeof(interface_sock);
228   HDEBUG(D_transport|D_acl|D_v) debug_printf("connected\n");
229   if (getsockname(sock, (struct sockaddr *)(&interface_sock), &size) == 0)
230     sending_ip_address = host_ntoa(-1, &interface_sock, NULL, &sending_port);
231   else
232     {
233     log_write(0, LOG_MAIN | ((errno == ECONNRESET)? 0 : LOG_PANIC),
234       "getsockname() failed: %s", strerror(errno));
235     close(sock);
236     return -1;
237     }
238   if (ob->keepalive) ip_keepalive(sock, host->address, TRUE);
239   return sock;
240   }
241 }
242
243 /*************************************************
244 *           Connect to remote host               *
245 *************************************************/
246
247 /* Create a socket, and connect it to a remote host. IPv6 addresses are
248 detected by checking for a colon in the address. AF_INET6 is defined even on
249 non-IPv6 systems, to enable the code to be less messy. However, on such systems
250 host->address will always be an IPv4 address.
251
252 The port field in the host item is used if it is set (usually router from SRV
253 records or elsewhere). In other cases, the default passed as an argument is
254 used, and the host item is updated with its value.
255
256 Arguments:
257   host        host item containing name and address (and sometimes port)
258   host_af     AF_INET or AF_INET6
259   port        default remote port to connect to, in host byte order, for those
260                 hosts whose port setting is PORT_NONE
261   interface   outgoing interface address or NULL
262   timeout     timeout value or 0
263   tb          transport
264
265 Returns:      connected socket number, or -1 with errno set
266 */
267
268 int
269 smtp_connect(host_item *host, int host_af, int port, uschar *interface,
270   int timeout, transport_instance * tb)
271 {
272 #ifdef SUPPORT_SOCKS
273 smtp_transport_options_block * ob =
274   (smtp_transport_options_block *)tb->options_block;
275 #endif
276
277 if (host->port != PORT_NONE)
278   {
279   HDEBUG(D_transport|D_acl|D_v)
280     debug_printf("Transport port=%d replaced by host-specific port=%d\n", port,
281       host->port);
282   port = host->port;
283   }
284 else host->port = port;    /* Set the port actually used */
285
286 callout_address = string_sprintf("[%s]:%d", host->address, port);
287
288 HDEBUG(D_transport|D_acl|D_v)
289   {
290   uschar * s = US" ";
291   if (interface) s = string_sprintf(" from %s ", interface);
292 #ifdef SUPPORT_SOCKS
293   if (ob->socks_proxy) s = string_sprintf("%svia proxy ", s);
294 #endif
295   debug_printf("Connecting to %s %s%s... ", host->name, callout_address, s);
296   }
297
298 /* Create and connect the socket */
299
300 #ifdef SUPPORT_SOCKS
301 if (ob->socks_proxy)
302   return socks_sock_connect(host, host_af, port, interface, tb, timeout);
303 #endif
304
305 return smtp_sock_connect(host, host_af, port, interface, tb, timeout);
306 }
307
308
309 /*************************************************
310 *        Flush outgoing command buffer           *
311 *************************************************/
312
313 /* This function is called only from smtp_write_command() below. It flushes
314 the buffer of outgoing commands. There is more than one in the buffer only when
315 pipelining.
316
317 Argument:
318   outblock   the SMTP output block
319
320 Returns:     TRUE if OK, FALSE on error, with errno set
321 */
322
323 static BOOL
324 flush_buffer(smtp_outblock *outblock)
325 {
326 int rc;
327
328 #ifdef SUPPORT_TLS
329 if (tls_out.active == outblock->sock)
330   rc = tls_write(FALSE, outblock->buffer, outblock->ptr - outblock->buffer);
331 else
332 #endif
333
334 rc = send(outblock->sock, outblock->buffer, outblock->ptr - outblock->buffer, 0);
335 if (rc <= 0)
336   {
337   HDEBUG(D_transport|D_acl) debug_printf("send failed: %s\n", strerror(errno));
338   return FALSE;
339   }
340
341 outblock->ptr = outblock->buffer;
342 outblock->cmd_count = 0;
343 return TRUE;
344 }
345
346
347
348 /*************************************************
349 *             Write SMTP command                 *
350 *************************************************/
351
352 /* The formatted command is left in big_buffer so that it can be reflected in
353 any error message.
354
355 Arguments:
356   outblock   contains buffer for pipelining, and socket
357   noflush    if TRUE, save the command in the output buffer, for pipelining
358   format     a format, starting with one of
359              of HELO, MAIL FROM, RCPT TO, DATA, ".", or QUIT.
360   ...        data for the format
361
362 Returns:     0 if command added to pipelining buffer, with nothing transmitted
363             +n if n commands transmitted (may still have buffered the new one)
364             -1 on error, with errno set
365 */
366
367 int
368 smtp_write_command(smtp_outblock *outblock, BOOL noflush, const char *format, ...)
369 {
370 int count;
371 int rc = 0;
372 va_list ap;
373
374 va_start(ap, format);
375 if (!string_vformat(big_buffer, big_buffer_size, CS format, ap))
376   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "overlong write_command in outgoing "
377     "SMTP");
378 va_end(ap);
379 count = Ustrlen(big_buffer);
380
381 if (count > outblock->buffersize)
382   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "overlong write_command in outgoing "
383     "SMTP");
384
385 if (count > outblock->buffersize - (outblock->ptr - outblock->buffer))
386   {
387   rc = outblock->cmd_count;                 /* flush resets */
388   if (!flush_buffer(outblock)) return -1;
389   }
390
391 Ustrncpy(CS outblock->ptr, big_buffer, count);
392 outblock->ptr += count;
393 outblock->cmd_count++;
394 count -= 2;
395 big_buffer[count] = 0;     /* remove \r\n for error message */
396
397 /* We want to hide the actual data sent in AUTH transactions from reflections
398 and logs. While authenticating, a flag is set in the outblock to enable this.
399 The AUTH command itself gets any data flattened. Other lines are flattened
400 completely. */
401
402 if (outblock->authenticating)
403   {
404   uschar *p = big_buffer;
405   if (Ustrncmp(big_buffer, "AUTH ", 5) == 0)
406     {
407     p += 5;
408     while (isspace(*p)) p++;
409     while (!isspace(*p)) p++;
410     while (isspace(*p)) p++;
411     }
412   while (*p != 0) *p++ = '*';
413   }
414
415 HDEBUG(D_transport|D_acl|D_v) debug_printf("  SMTP>> %s\n", big_buffer);
416
417 if (!noflush)
418   {
419   rc += outblock->cmd_count;                /* flush resets */
420   if (!flush_buffer(outblock)) return -1;
421   }
422
423 return rc;
424 }
425
426
427
428 /*************************************************
429 *          Read one line of SMTP response        *
430 *************************************************/
431
432 /* This function reads one line of SMTP response from the server host. This may
433 not be a complete response - it could be just part of a multiline response. We
434 have to use a buffer for incoming packets, because when pipelining or using
435 LMTP, there may well be more than one response in a single packet. This
436 function is called only from the one that follows.
437
438 Arguments:
439   inblock   the SMTP input block (contains holding buffer, socket, etc.)
440   buffer    where to put the line
441   size      space available for the line
442   timeout   the timeout to use when reading a packet
443
444 Returns:    length of a line that has been put in the buffer
445             -1 otherwise, with errno set
446 */
447
448 static int
449 read_response_line(smtp_inblock *inblock, uschar *buffer, int size, int timeout)
450 {
451 uschar *p = buffer;
452 uschar *ptr = inblock->ptr;
453 uschar *ptrend = inblock->ptrend;
454 int sock = inblock->sock;
455
456 /* Loop for reading multiple packets or reading another packet after emptying
457 a previously-read one. */
458
459 for (;;)
460   {
461   int rc;
462
463   /* If there is data in the input buffer left over from last time, copy
464   characters from it until the end of a line, at which point we can return,
465   having removed any whitespace (which will include CR) at the end of the line.
466   The rules for SMTP say that lines end in CRLF, but there are have been cases
467   of hosts using just LF, and other MTAs are reported to handle this, so we
468   just look for LF. If we run out of characters before the end of a line,
469   carry on to read the next incoming packet. */
470
471   while (ptr < ptrend)
472     {
473     int c = *ptr++;
474     if (c == '\n')
475       {
476       while (p > buffer && isspace(p[-1])) p--;
477       *p = 0;
478       inblock->ptr = ptr;
479       return p - buffer;
480       }
481     *p++ = c;
482     if (--size < 4)
483       {
484       *p = 0;                     /* Leave malformed line for error message */
485       errno = ERRNO_SMTPFORMAT;
486       return -1;
487       }
488     }
489
490   /* Need to read a new input packet. */
491
492   rc = ip_recv(sock, inblock->buffer, inblock->buffersize, timeout);
493   if (rc <= 0) break;
494
495   /* Another block of data has been successfully read. Set up the pointers
496   and let the loop continue. */
497
498   ptrend = inblock->ptrend = inblock->buffer + rc;
499   ptr = inblock->buffer;
500   DEBUG(D_transport|D_acl) debug_printf("read response data: size=%d\n", rc);
501   }
502
503 /* Get here if there has been some kind of recv() error; errno is set, but we
504 ensure that the result buffer is empty before returning. */
505
506 *buffer = 0;
507 return -1;
508 }
509
510
511
512
513
514 /*************************************************
515 *              Read SMTP response                *
516 *************************************************/
517
518 /* This function reads an SMTP response with a timeout, and returns the
519 response in the given buffer, as a string. A multiline response will contain
520 newline characters between the lines. The function also analyzes the first
521 digit of the reply code and returns FALSE if it is not acceptable. FALSE is
522 also returned after a reading error. In this case buffer[0] will be zero, and
523 the error code will be in errno.
524
525 Arguments:
526   inblock   the SMTP input block (contains holding buffer, socket, etc.)
527   buffer    where to put the response
528   size      the size of the buffer
529   okdigit   the expected first digit of the response
530   timeout   the timeout to use
531
532 Returns:    TRUE if a valid, non-error response was received; else FALSE
533 */
534
535 BOOL
536 smtp_read_response(smtp_inblock *inblock, uschar *buffer, int size, int okdigit,
537    int timeout)
538 {
539 uschar *ptr = buffer;
540 int count;
541
542 errno = 0;  /* Ensure errno starts out zero */
543
544 /* This is a loop to read and concatentate the lines that make up a multi-line
545 response. */
546
547 for (;;)
548   {
549   if ((count = read_response_line(inblock, ptr, size, timeout)) < 0)
550     return FALSE;
551
552   HDEBUG(D_transport|D_acl|D_v)
553     debug_printf("  %s %s\n", (ptr == buffer)? "SMTP<<" : "      ", ptr);
554
555   /* Check the format of the response: it must start with three digits; if
556   these are followed by a space or end of line, the response is complete. If
557   they are followed by '-' this is a multi-line response and we must look for
558   another line until the final line is reached. The only use made of multi-line
559   responses is to pass them back as error messages. We therefore just
560   concatenate them all within the buffer, which should be large enough to
561   accept any reasonable number of lines. */
562
563   if (count < 3 ||
564      !isdigit(ptr[0]) ||
565      !isdigit(ptr[1]) ||
566      !isdigit(ptr[2]) ||
567      (ptr[3] != '-' && ptr[3] != ' ' && ptr[3] != 0))
568     {
569     errno = ERRNO_SMTPFORMAT;    /* format error */
570     return FALSE;
571     }
572
573   /* If the line we have just read is a terminal line, line, we are done.
574   Otherwise more data has to be read. */
575
576   if (ptr[3] != '-') break;
577
578   /* Move the reading pointer upwards in the buffer and insert \n between the
579   components of a multiline response. Space is left for this by read_response_
580   line(). */
581
582   ptr += count;
583   *ptr++ = '\n';
584   size -= count + 1;
585   }
586
587 /* Return a value that depends on the SMTP return code. On some systems a
588 non-zero value of errno has been seen at this point, so ensure it is zero,
589 because the caller of this function looks at errno when FALSE is returned, to
590 distinguish between an unexpected return code and other errors such as
591 timeouts, lost connections, etc. */
592
593 errno = 0;
594 return buffer[0] == okdigit;
595 }
596
597 /* End of smtp_out.c */
598 /* vi: aw ai sw=2
599 */