Fix daemon-SIGHUP on FreeBSD
[exim.git] / src / src / daemon.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* Copyright (c) The Exim Maintainers 2020 */
7 /* See the file NOTICE for conditions of use and distribution. */
8
9 /* Functions concerned with running Exim as a daemon */
10
11
12 #include "exim.h"
13
14
15 /* Structure for holding data for each SMTP connection */
16
17 typedef struct smtp_slot {
18   pid_t pid;                       /* pid of the spawned reception process */
19   uschar *host_address;            /* address of the client host */
20 } smtp_slot;
21
22 /* An empty slot for initializing (Standard C does not allow constructor
23 expressions in assignments except as initializers in declarations). */
24
25 static smtp_slot empty_smtp_slot = { .pid = 0, .host_address = NULL };
26
27
28
29 /*************************************************
30 *               Local static variables           *
31 *************************************************/
32
33 static SIGNAL_BOOL sigchld_seen;
34 static SIGNAL_BOOL sighup_seen;
35 static SIGNAL_BOOL sigterm_seen;
36
37 static int   accept_retry_count = 0;
38 static int   accept_retry_errno;
39 static BOOL  accept_retry_select_failed;
40
41 static int   queue_run_count = 0;
42 static pid_t *queue_pid_slots = NULL;
43 static smtp_slot *smtp_slots = NULL;
44
45 static BOOL  write_pid = TRUE;
46
47
48
49 /*************************************************
50 *             SIGHUP Handler                     *
51 *************************************************/
52
53 /* All this handler does is to set a flag and re-enable the signal.
54
55 Argument: the signal number
56 Returns:  nothing
57 */
58
59 static void
60 sighup_handler(int sig)
61 {
62 sig = sig;    /* Keep picky compilers happy */
63 sighup_seen = TRUE;
64 signal(SIGHUP, sighup_handler);
65 }
66
67
68
69 /*************************************************
70 *     SIGCHLD handler for main daemon process    *
71 *************************************************/
72
73 /* Don't re-enable the handler here, since we aren't doing the
74 waiting here. If the signal is re-enabled, there will just be an
75 infinite sequence of calls to this handler. The SIGCHLD signal is
76 used just as a means of waking up the daemon so that it notices
77 terminated subprocesses as soon as possible.
78
79 Argument: the signal number
80 Returns:  nothing
81 */
82
83 static void
84 main_sigchld_handler(int sig)
85 {
86 sig = sig;    /* Keep picky compilers happy */
87 os_non_restarting_signal(SIGCHLD, SIG_DFL);
88 sigchld_seen = TRUE;
89 }
90
91
92 /* SIGTERM handler.  Try to get the damon pif file removed
93 before exiting. */
94
95 static void
96 main_sigterm_handler(int sig)
97 {
98 sigterm_seen = TRUE;
99 }
100
101
102
103
104 /*************************************************
105 *          Unexpected errors in SMTP calls       *
106 *************************************************/
107
108 /* This function just saves a bit of repetitious coding.
109
110 Arguments:
111   log_msg        Text of message to be logged
112   smtp_msg       Text of SMTP error message
113   was_errno      The failing errno
114
115 Returns:         nothing
116 */
117
118 static void
119 never_error(uschar *log_msg, uschar *smtp_msg, int was_errno)
120 {
121 uschar *emsg = was_errno <= 0
122   ? US"" : string_sprintf(": %s", strerror(was_errno));
123 log_write(0, LOG_MAIN|LOG_PANIC, "%s%s", log_msg, emsg);
124 if (smtp_out) smtp_printf("421 %s\r\n", FALSE, smtp_msg);
125 }
126
127
128
129
130 /*************************************************
131 *************************************************/
132
133 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
134 static void
135 unlink_notifier_socket(void)
136 {
137 uschar * s = expand_string(notifier_socket);
138 DEBUG(D_any) debug_printf("unlinking notifier socket %s\n", s);
139 Uunlink(s);
140 }
141 #endif
142
143
144 static void
145 close_daemon_sockets(int daemon_notifier_fd,
146   int * listen_sockets, int listen_socket_count)
147 {
148 if (daemon_notifier_fd >= 0)
149   {
150   (void) close(daemon_notifier_fd);
151   daemon_notifier_fd = -1;
152 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
153   unlink_notifier_socket();
154 #endif
155   }
156
157 for (int i = 0; i < listen_socket_count; i++) (void) close(listen_sockets[i]);
158 }
159
160
161 /*************************************************
162 *            Handle a connected SMTP call        *
163 *************************************************/
164
165 /* This function is called when an SMTP connection has been accepted.
166 If there are too many, give an error message and close down. Otherwise
167 spin off a sub-process to handle the call. The list of listening sockets
168 is required so that they can be closed in the sub-process. Take care not to
169 leak store in this process - reset the stacking pool at the end.
170
171 Arguments:
172   listen_sockets        sockets which are listening for incoming calls
173   listen_socket_count   count of listening sockets
174   accept_socket         socket of the current accepted call
175   accepted              socket information about the current call
176
177 Returns:            nothing
178 */
179
180 static void
181 handle_smtp_call(int *listen_sockets, int listen_socket_count,
182   int accept_socket, struct sockaddr *accepted)
183 {
184 pid_t pid;
185 union sockaddr_46 interface_sockaddr;
186 EXIM_SOCKLEN_T ifsize = sizeof(interface_sockaddr);
187 int dup_accept_socket = -1;
188 int max_for_this_host = 0;
189 int save_log_selector = *log_selector;
190 gstring * whofrom;
191
192 rmark reset_point = store_mark();
193
194 /* Make the address available in ASCII representation, and also fish out
195 the remote port. */
196
197 sender_host_address = host_ntoa(-1, accepted, NULL, &sender_host_port);
198 DEBUG(D_any) debug_printf("Connection request from %s port %d\n",
199   sender_host_address, sender_host_port);
200
201 /* Set up the output stream, check the socket has duplicated, and set up the
202 input stream. These operations fail only the exceptional circumstances. Note
203 that never_error() won't use smtp_out if it is NULL. */
204
205 if (!(smtp_out = fdopen(accept_socket, "wb")))
206   {
207   never_error(US"daemon: fdopen() for smtp_out failed", US"", errno);
208   goto ERROR_RETURN;
209   }
210
211 if ((dup_accept_socket = dup(accept_socket)) < 0)
212   {
213   never_error(US"daemon: couldn't dup socket descriptor",
214     US"Connection setup failed", errno);
215   goto ERROR_RETURN;
216   }
217
218 if (!(smtp_in = fdopen(dup_accept_socket, "rb")))
219   {
220   never_error(US"daemon: fdopen() for smtp_in failed",
221     US"Connection setup failed", errno);
222   goto ERROR_RETURN;
223   }
224
225 /* Get the data for the local interface address. Panic for most errors, but
226 "connection reset by peer" just means the connection went away. */
227
228 if (getsockname(accept_socket, (struct sockaddr *)(&interface_sockaddr),
229      &ifsize) < 0)
230   {
231   log_write(0, LOG_MAIN | ((errno == ECONNRESET)? 0 : LOG_PANIC),
232     "getsockname() failed: %s", strerror(errno));
233   smtp_printf("421 Local problem: getsockname() failed; please try again later\r\n", FALSE);
234   goto ERROR_RETURN;
235   }
236
237 interface_address = host_ntoa(-1, &interface_sockaddr, NULL, &interface_port);
238 DEBUG(D_interface) debug_printf("interface address=%s port=%d\n",
239   interface_address, interface_port);
240
241 /* Build a string identifying the remote host and, if requested, the port and
242 the local interface data. This is for logging; at the end of this function the
243 memory is reclaimed. */
244
245 whofrom = string_append(NULL, 3, "[", sender_host_address, "]");
246
247 if (LOGGING(incoming_port))
248   whofrom = string_fmt_append(whofrom, ":%d", sender_host_port);
249
250 if (LOGGING(incoming_interface))
251   whofrom = string_fmt_append(whofrom, " I=[%s]:%d",
252     interface_address, interface_port);
253
254 (void) string_from_gstring(whofrom);    /* Terminate the newly-built string */
255
256 /* Check maximum number of connections. We do not check for reserved
257 connections or unacceptable hosts here. That is done in the subprocess because
258 it might take some time. */
259
260 if (smtp_accept_max > 0 && smtp_accept_count >= smtp_accept_max)
261   {
262   DEBUG(D_any) debug_printf("rejecting SMTP connection: count=%d max=%d\n",
263     smtp_accept_count, smtp_accept_max);
264   smtp_printf("421 Too many concurrent SMTP connections; "
265     "please try again later.\r\n", FALSE);
266   log_write(L_connection_reject,
267             LOG_MAIN, "Connection from %s refused: too many connections",
268     whofrom->s);
269   goto ERROR_RETURN;
270   }
271
272 /* If a load limit above which only reserved hosts are acceptable is defined,
273 get the load average here, and if there are in fact no reserved hosts, do
274 the test right away (saves a fork). If there are hosts, do the check in the
275 subprocess because it might take time. */
276
277 if (smtp_load_reserve >= 0)
278   {
279   load_average = OS_GETLOADAVG();
280   if (smtp_reserve_hosts == NULL && load_average > smtp_load_reserve)
281     {
282     DEBUG(D_any) debug_printf("rejecting SMTP connection: load average = %.2f\n",
283       (double)load_average/1000.0);
284     smtp_printf("421 Too much load; please try again later.\r\n", FALSE);
285     log_write(L_connection_reject,
286               LOG_MAIN, "Connection from %s refused: load average = %.2f",
287       whofrom->s, (double)load_average/1000.0);
288     goto ERROR_RETURN;
289     }
290   }
291
292 /* Check that one specific host (strictly, IP address) is not hogging
293 resources. This is done here to prevent a denial of service attack by someone
294 forcing you to fork lots of times before denying service. The value of
295 smtp_accept_max_per_host is a string which is expanded. This makes it possible
296 to provide host-specific limits according to $sender_host address, but because
297 this is in the daemon mainline, only fast expansions (such as inline address
298 checks) should be used. The documentation is full of warnings. */
299
300 if (smtp_accept_max_per_host != NULL)
301   {
302   uschar *expanded = expand_string(smtp_accept_max_per_host);
303   if (expanded == NULL)
304     {
305     if (!f.expand_string_forcedfail)
306       log_write(0, LOG_MAIN|LOG_PANIC, "expansion of smtp_accept_max_per_host "
307         "failed for %s: %s", whofrom->s, expand_string_message);
308     }
309   /* For speed, interpret a decimal number inline here */
310   else
311     {
312     uschar *s = expanded;
313     while (isdigit(*s))
314       max_for_this_host = max_for_this_host * 10 + *s++ - '0';
315     if (*s != 0)
316       log_write(0, LOG_MAIN|LOG_PANIC, "expansion of smtp_accept_max_per_host "
317         "for %s contains non-digit: %s", whofrom->s, expanded);
318     }
319   }
320
321 /* If we have fewer connections than max_for_this_host, we can skip the tedious
322 per host_address checks. Note that at this stage smtp_accept_count contains the
323 count of *other* connections, not including this one. */
324
325 if ((max_for_this_host > 0) &&
326     (smtp_accept_count >= max_for_this_host))
327   {
328   int host_accept_count = 0;
329   int other_host_count = 0;    /* keep a count of non matches to optimise */
330
331   for (int i = 0; i < smtp_accept_max; ++i)
332     if (smtp_slots[i].host_address)
333       {
334       if (Ustrcmp(sender_host_address, smtp_slots[i].host_address) == 0)
335        host_accept_count++;
336       else
337        other_host_count++;
338
339       /* Testing all these strings is expensive - see if we can drop out
340       early, either by hitting the target, or finding there are not enough
341       connections left to make the target. */
342
343       if ((host_accept_count >= max_for_this_host) ||
344          ((smtp_accept_count - other_host_count) < max_for_this_host))
345        break;
346       }
347
348   if (host_accept_count >= max_for_this_host)
349     {
350     DEBUG(D_any) debug_printf("rejecting SMTP connection: too many from this "
351       "IP address: count=%d max=%d\n",
352       host_accept_count, max_for_this_host);
353     smtp_printf("421 Too many concurrent SMTP connections "
354       "from this IP address; please try again later.\r\n", FALSE);
355     log_write(L_connection_reject,
356               LOG_MAIN, "Connection from %s refused: too many connections "
357       "from that IP address", whofrom->s);
358     search_tidyup();
359     goto ERROR_RETURN;
360     }
361   }
362
363 /* OK, the connection count checks have been passed. Before we can fork the
364 accepting process, we must first log the connection if requested. This logging
365 used to happen in the subprocess, but doing that means that the value of
366 smtp_accept_count can be out of step by the time it is logged. So we have to do
367 the logging here and accept the performance cost. Note that smtp_accept_count
368 hasn't yet been incremented to take account of this connection.
369
370 In order to minimize the cost (because this is going to happen for every
371 connection), do a preliminary selector test here. This saves ploughing through
372 the generalized logging code each time when the selector is false. If the
373 selector is set, check whether the host is on the list for logging. If not,
374 arrange to unset the selector in the subprocess. */
375
376 if (LOGGING(smtp_connection))
377   {
378   uschar *list = hosts_connection_nolog;
379   memset(sender_host_cache, 0, sizeof(sender_host_cache));
380   if (list != NULL && verify_check_host(&list) == OK)
381     save_log_selector &= ~L_smtp_connection;
382   else
383     log_write(L_smtp_connection, LOG_MAIN, "SMTP connection from %s "
384       "(TCP/IP connection count = %d)", whofrom->s, smtp_accept_count + 1);
385   }
386
387 /* Now we can fork the accepting process; do a lookup tidy, just in case any
388 expansion above did a lookup. */
389
390 search_tidyup();
391 pid = exim_fork(US"daemon-accept");
392
393 /* Handle the child process */
394
395 if (pid == 0)
396   {
397   int queue_only_reason = 0;
398   int old_pool = store_pool;
399   int save_debug_selector = debug_selector;
400   BOOL local_queue_only;
401   BOOL session_local_queue_only;
402   #ifdef SA_NOCLDWAIT
403   struct sigaction act;
404   #endif
405
406   smtp_accept_count++;    /* So that it includes this process */
407
408   /* May have been modified for the subprocess */
409
410   *log_selector = save_log_selector;
411
412   /* Get the local interface address into permanent store */
413
414   store_pool = POOL_PERM;
415   interface_address = string_copy(interface_address);
416   store_pool = old_pool;
417
418   /* Check for a tls-on-connect port */
419
420   if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
421
422   /* Expand smtp_active_hostname if required. We do not do this any earlier,
423   because it may depend on the local interface address (indeed, that is most
424   likely what it depends on.) */
425
426   smtp_active_hostname = primary_hostname;
427   if (raw_active_hostname)
428     {
429     uschar * nah = expand_string(raw_active_hostname);
430     if (!nah)
431       {
432       if (!f.expand_string_forcedfail)
433         {
434         log_write(0, LOG_MAIN|LOG_PANIC, "failed to expand \"%s\" "
435           "(smtp_active_hostname): %s", raw_active_hostname,
436           expand_string_message);
437         smtp_printf("421 Local configuration error; "
438           "please try again later.\r\n", FALSE);
439         mac_smtp_fflush();
440         search_tidyup();
441         exim_underbar_exit(EXIT_FAILURE);
442         }
443       }
444     else if (*nah) smtp_active_hostname = nah;
445     }
446
447   /* Initialize the queueing flags */
448
449   queue_check_only();
450   session_local_queue_only = queue_only;
451
452   /* Close the listening sockets, and set the SIGCHLD handler to SIG_IGN.
453   We also attempt to set things up so that children are automatically reaped,
454   but just in case this isn't available, there's a paranoid waitpid() in the
455   loop too (except for systems where we are sure it isn't needed). See the more
456   extensive comment before the reception loop in exim.c for a fuller
457   explanation of this logic. */
458
459   close_daemon_sockets(daemon_notifier_fd, listen_sockets, listen_socket_count);
460
461   /* Set FD_CLOEXEC on the SMTP socket. We don't want any rogue child processes
462   to be able to communicate with them, under any circumstances. */
463   (void)fcntl(accept_socket, F_SETFD,
464               fcntl(accept_socket, F_GETFD) | FD_CLOEXEC);
465   (void)fcntl(dup_accept_socket, F_SETFD,
466               fcntl(dup_accept_socket, F_GETFD) | FD_CLOEXEC);
467
468   #ifdef SA_NOCLDWAIT
469   act.sa_handler = SIG_IGN;
470   sigemptyset(&(act.sa_mask));
471   act.sa_flags = SA_NOCLDWAIT;
472   sigaction(SIGCHLD, &act, NULL);
473   #else
474   signal(SIGCHLD, SIG_IGN);
475   #endif
476   signal(SIGTERM, SIG_DFL);
477
478   /* Attempt to get an id from the sending machine via the RFC 1413
479   protocol. We do this in the sub-process in order not to hold up the
480   main process if there is any delay. Then set up the fullhost information
481   in case there is no HELO/EHLO.
482
483   If debugging is enabled only for the daemon, we must turn if off while
484   finding the id, but turn it on again afterwards so that information about the
485   incoming connection is output. */
486
487   if (f.debug_daemon) debug_selector = 0;
488   verify_get_ident(IDENT_PORT);
489   host_build_sender_fullhost();
490   debug_selector = save_debug_selector;
491
492   DEBUG(D_any)
493     debug_printf("Process %d is handling incoming connection from %s\n",
494       (int)getpid(), sender_fullhost);
495
496   /* Now disable debugging permanently if it's required only for the daemon
497   process. */
498
499   if (f.debug_daemon) debug_selector = 0;
500
501   /* If there are too many child processes for immediate delivery,
502   set the session_local_queue_only flag, which is initialized from the
503   configured value and may therefore already be TRUE. Leave logging
504   till later so it will have a message id attached. Note that there is no
505   possibility of re-calculating this per-message, because the value of
506   smtp_accept_count does not change in this subprocess. */
507
508   if (smtp_accept_queue > 0 && smtp_accept_count > smtp_accept_queue)
509     {
510     session_local_queue_only = TRUE;
511     queue_only_reason = 1;
512     }
513
514   /* Handle the start of the SMTP session, then loop, accepting incoming
515   messages from the SMTP connection. The end will come at the QUIT command,
516   when smtp_setup_msg() returns 0. A break in the connection causes the
517   process to die (see accept.c).
518
519   NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
520   because a log line has already been written for all its failure exists
521   (usually "connection refused: <reason>") and writing another one is
522   unnecessary clutter. */
523
524   if (!smtp_start_session())
525     {
526     mac_smtp_fflush();
527     search_tidyup();
528     exim_underbar_exit(EXIT_SUCCESS);
529     }
530
531   for (;;)
532     {
533     int rc;
534     message_id[0] = 0;            /* Clear out any previous message_id */
535     reset_point = store_mark();   /* Save current store high water point */
536
537     DEBUG(D_any)
538       debug_printf("Process %d is ready for new message\n", (int)getpid());
539
540     /* Smtp_setup_msg() returns 0 on QUIT or if the call is from an
541     unacceptable host or if an ACL "drop" command was triggered, -1 on
542     connection lost, and +1 on validly reaching DATA. Receive_msg() almost
543     always returns TRUE when smtp_input is true; just retry if no message was
544     accepted (can happen for invalid message parameters). However, it can yield
545     FALSE if the connection was forcibly dropped by the DATA ACL. */
546
547     if ((rc = smtp_setup_msg()) > 0)
548       {
549       BOOL ok = receive_msg(FALSE);
550       search_tidyup();                    /* Close cached databases */
551       if (!ok)                            /* Connection was dropped */
552         {
553         cancel_cutthrough_connection(TRUE, US"receive dropped");
554         mac_smtp_fflush();
555         smtp_log_no_mail();               /* Log no mail if configured */
556         exim_underbar_exit(EXIT_SUCCESS);
557         }
558       if (message_id[0] == 0) continue;   /* No message was accepted */
559       }
560     else
561       {
562       if (smtp_out)
563         {
564         int fd = fileno(smtp_in);
565         uschar buf[128];
566
567         mac_smtp_fflush();
568         /* drain socket, for clean TCP FINs */
569         if (fcntl(fd, F_SETFL, O_NONBLOCK) == 0)
570           for(int i = 16; read(fd, buf, sizeof(buf)) > 0 && i > 0; ) i--;
571         }
572       cancel_cutthrough_connection(TRUE, US"message setup dropped");
573       search_tidyup();
574       smtp_log_no_mail();                 /* Log no mail if configured */
575
576       /*XXX should we pause briefly, hoping that the client will be the
577       active TCP closer hence get the TCP_WAIT endpoint? */
578       DEBUG(D_receive) debug_printf("SMTP>>(close on process exit)\n");
579       exim_underbar_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
580       }
581
582     /* Show the recipients when debugging */
583
584     DEBUG(D_receive)
585       {
586       if (sender_address)
587         debug_printf("Sender: %s\n", sender_address);
588       if (recipients_list)
589         {
590         debug_printf("Recipients:\n");
591         for (int i = 0; i < recipients_count; i++)
592           debug_printf("  %s\n", recipients_list[i].address);
593         }
594       }
595
596     /* A message has been accepted. Clean up any previous delivery processes
597     that have completed and are defunct, on systems where they don't go away
598     by themselves (see comments when setting SIG_IGN above). On such systems
599     (if any) these delivery processes hang around after termination until
600     the next message is received. */
601
602     #ifndef SIG_IGN_WORKS
603     while (waitpid(-1, NULL, WNOHANG) > 0);
604     #endif
605
606     /* Reclaim up the store used in accepting this message */
607
608       {
609       int r = receive_messagecount;
610       BOOL q = f.queue_only_policy;
611       smtp_reset(reset_point);
612       reset_point = NULL;
613       f.queue_only_policy = q;
614       receive_messagecount = r;
615       }
616
617     /* If queue_only is set or if there are too many incoming connections in
618     existence, session_local_queue_only will be TRUE. If it is not, check
619     whether we have received too many messages in this session for immediate
620     delivery. */
621
622     if (!session_local_queue_only &&
623         smtp_accept_queue_per_connection > 0 &&
624         receive_messagecount > smtp_accept_queue_per_connection)
625       {
626       session_local_queue_only = TRUE;
627       queue_only_reason = 2;
628       }
629
630     /* Initialize local_queue_only from session_local_queue_only. If it is not
631     true, and queue_only_load is set, check that the load average is below it.
632     If local_queue_only is set by this means, we also set if for the session if
633     queue_only_load_latch is true (the default). This means that, once set,
634     local_queue_only remains set for any subsequent messages on the same SMTP
635     connection. This is a deliberate choice; even though the load average may
636     fall, it doesn't seem right to deliver later messages on the same call when
637     not delivering earlier ones. However, the are special circumstances such as
638     very long-lived connections from scanning appliances where this is not the
639     best strategy. In such cases, queue_only_load_latch should be set false. */
640
641     if (  !(local_queue_only = session_local_queue_only)
642        && queue_only_load >= 0
643        && (local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load)
644        )
645       {
646       queue_only_reason = 3;
647       if (queue_only_load_latch) session_local_queue_only = TRUE;
648       }
649
650     /* Log the queueing here, when it will get a message id attached, but
651     not if queue_only is set (case 0). */
652
653     if (local_queue_only) switch(queue_only_reason)
654       {
655       case 1: log_write(L_delay_delivery,
656                 LOG_MAIN, "no immediate delivery: too many connections "
657                 "(%d, max %d)", smtp_accept_count, smtp_accept_queue);
658               break;
659
660       case 2: log_write(L_delay_delivery,
661                 LOG_MAIN, "no immediate delivery: more than %d messages "
662                 "received in one connection", smtp_accept_queue_per_connection);
663               break;
664
665       case 3: log_write(L_delay_delivery,
666                 LOG_MAIN, "no immediate delivery: load average %.2f",
667                 (double)load_average/1000.0);
668               break;
669       }
670
671     /* If a delivery attempt is required, spin off a new process to handle it.
672     If we are not root, we have to re-exec exim unless deliveries are being
673     done unprivileged. */
674
675     else if (  (!f.queue_only_policy || f.queue_smtp)
676             && !f.deliver_freeze)
677       {
678       pid_t dpid;
679
680       /* Before forking, ensure that the C output buffer is flushed. Otherwise
681       anything that it in it will get duplicated, leading to duplicate copies
682       of the pending output. */
683
684       mac_smtp_fflush();
685
686       if ((dpid = exim_fork(US"daemon-accept-delivery")) == 0)
687         {
688         (void)fclose(smtp_in);
689         (void)fclose(smtp_out);
690
691         /* Don't ever molest the parent's SSL connection, but do clean up
692         the data structures if necessary. */
693
694 #ifndef DISABLE_TLS
695         tls_close(NULL, TLS_NO_SHUTDOWN);
696 #endif
697
698         /* Reset SIGHUP and SIGCHLD in the child in both cases. */
699
700         signal(SIGHUP,  SIG_DFL);
701         signal(SIGCHLD, SIG_DFL);
702         signal(SIGTERM, SIG_DFL);
703
704         if (geteuid() != root_uid && !deliver_drop_privilege)
705           {
706           signal(SIGALRM, SIG_DFL);
707           delivery_re_exec(CEE_EXEC_PANIC);
708           /* Control does not return here. */
709           }
710
711         /* No need to re-exec; SIGALRM remains set to the default handler */
712
713         (void) deliver_message(message_id, FALSE, FALSE);
714         search_tidyup();
715         exim_underbar_exit(EXIT_SUCCESS);
716         }
717
718       if (dpid > 0)
719         {
720         release_cutthrough_connection(US"passed for delivery");
721         DEBUG(D_any) debug_printf("forked delivery process %d\n", (int)dpid);
722         }
723       else
724         {
725         cancel_cutthrough_connection(TRUE, US"delivery fork failed");
726         log_write(0, LOG_MAIN|LOG_PANIC, "daemon: delivery process fork "
727           "failed: %s", strerror(errno));
728         }
729       }
730     }
731   }
732
733
734 /* Carrying on in the parent daemon process... Can't do much if the fork
735 failed. Otherwise, keep count of the number of accepting processes and
736 remember the pid for ticking off when the child completes. */
737
738 if (pid < 0)
739   never_error(US"daemon: accept process fork failed", US"Fork failed", errno);
740 else
741   {
742   for (int i = 0; i < smtp_accept_max; ++i)
743     if (smtp_slots[i].pid <= 0)
744       {
745       smtp_slots[i].pid = pid;
746       /* Connection closes come asyncronously, so we cannot stack this store */
747       if (smtp_accept_max_per_host)
748         smtp_slots[i].host_address = string_copy_malloc(sender_host_address);
749       smtp_accept_count++;
750       break;
751       }
752   DEBUG(D_any) debug_printf("%d SMTP accept process%s running\n",
753     smtp_accept_count, smtp_accept_count == 1 ? "" : "es");
754   }
755
756 /* Get here via goto in error cases */
757
758 ERROR_RETURN:
759
760 /* Close the streams associated with the socket which will also close the
761 socket fds in this process. We can't do anything if fclose() fails, but
762 logging brings it to someone's attention. However, "connection reset by peer"
763 isn't really a problem, so skip that one. On Solaris, a dropped connection can
764 manifest itself as a broken pipe, so drop that one too. If the streams don't
765 exist, something went wrong while setting things up. Make sure the socket
766 descriptors are closed, in order to drop the connection. */
767
768 if (smtp_out)
769   {
770   if (fclose(smtp_out) != 0 && errno != ECONNRESET && errno != EPIPE)
771     log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fclose(smtp_out) failed: %s",
772       strerror(errno));
773   smtp_out = NULL;
774   }
775 else (void)close(accept_socket);
776
777 if (smtp_in)
778   {
779   if (fclose(smtp_in) != 0 && errno != ECONNRESET && errno != EPIPE)
780     log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fclose(smtp_in) failed: %s",
781       strerror(errno));
782   smtp_in = NULL;
783   }
784 else (void)close(dup_accept_socket);
785
786 /* Release any store used in this process, including the store used for holding
787 the incoming host address and an expanded active_hostname. */
788
789 log_close_all();
790 interface_address =
791 sender_host_address = NULL;
792 store_reset(reset_point);
793 sender_host_address = NULL;
794 }
795
796
797
798
799 /*************************************************
800 *       Check wildcard listen special cases      *
801 *************************************************/
802
803 /* This function is used when binding and listening on lists of addresses and
804 ports. It tests for special cases of wildcard listening, when IPv4 and IPv6
805 sockets may interact in different ways in different operating systems. It is
806 passed an error number, the list of listening addresses, and the current
807 address. Two checks are available: for a previous wildcard IPv6 address, or for
808 a following wildcard IPv4 address, in both cases on the same port.
809
810 In practice, pairs of wildcard addresses should be adjacent in the address list
811 because they are sorted that way below.
812
813 Arguments:
814   eno            the error number
815   addresses      the list of addresses
816   ipa            the current IP address
817   back           if TRUE, check for previous wildcard IPv6 address
818                  if FALSE, check for a following wildcard IPv4 address
819
820 Returns:         TRUE or FALSE
821 */
822
823 static BOOL
824 check_special_case(int eno, ip_address_item *addresses, ip_address_item *ipa,
825   BOOL back)
826 {
827 ip_address_item *ipa2;
828
829 /* For the "back" case, if the failure was "address in use" for a wildcard IPv4
830 address, seek a previous IPv6 wildcard address on the same port. As it is
831 previous, it must have been successfully bound and be listening. Flag it as a
832 "6 including 4" listener. */
833
834 if (back)
835   {
836   if (eno != EADDRINUSE || ipa->address[0] != 0) return FALSE;
837   for (ipa2 = addresses; ipa2 != ipa; ipa2 = ipa2->next)
838     {
839     if (ipa2->address[1] == 0 && ipa2->port == ipa->port)
840       {
841       ipa2->v6_include_v4 = TRUE;
842       return TRUE;
843       }
844     }
845   }
846
847 /* For the "forward" case, if the current address is a wildcard IPv6 address,
848 we seek a following wildcard IPv4 address on the same port. */
849
850 else
851   {
852   if (ipa->address[0] != ':' || ipa->address[1] != 0) return FALSE;
853   for (ipa2 = ipa->next; ipa2 != NULL; ipa2 = ipa2->next)
854     if (ipa2->address[0] == 0 && ipa->port == ipa2->port) return TRUE;
855   }
856
857 return FALSE;
858 }
859
860
861
862
863 /*************************************************
864 *         Handle terminating subprocesses        *
865 *************************************************/
866
867 /* Handle the termination of child processes. Theoretically, this need be done
868 only when sigchld_seen is TRUE, but rumour has it that some systems lose
869 SIGCHLD signals at busy times, so to be on the safe side, this function is
870 called each time round. It shouldn't be too expensive.
871
872 Arguments:  none
873 Returns:    nothing
874 */
875
876 static void
877 handle_ending_processes(void)
878 {
879 int status;
880 pid_t pid;
881
882 while ((pid = waitpid(-1, &status, WNOHANG)) > 0)
883   {
884   DEBUG(D_any)
885     {
886     debug_printf("child %d ended: status=0x%x\n", (int)pid, status);
887 #ifdef WCOREDUMP
888     if (WIFEXITED(status))
889       debug_printf("  normal exit, %d\n", WEXITSTATUS(status));
890     else if (WIFSIGNALED(status))
891       debug_printf("  signal exit, signal %d%s\n", WTERMSIG(status),
892           WCOREDUMP(status) ? " (core dumped)" : "");
893 #endif
894     }
895
896   /* If it's a listening daemon for which we are keeping track of individual
897   subprocesses, deal with an accepting process that has terminated. */
898
899   if (smtp_slots)
900     {
901     int i;
902     for (i = 0; i < smtp_accept_max; i++)
903       if (smtp_slots[i].pid == pid)
904         {
905         if (smtp_slots[i].host_address)
906           store_free(smtp_slots[i].host_address);
907         smtp_slots[i] = empty_smtp_slot;
908         if (--smtp_accept_count < 0) smtp_accept_count = 0;
909         DEBUG(D_any) debug_printf("%d SMTP accept process%s now running\n",
910           smtp_accept_count, (smtp_accept_count == 1)? "" : "es");
911         break;
912         }
913     if (i < smtp_accept_max) continue;  /* Found an accepting process */
914     }
915
916   /* If it wasn't an accepting process, see if it was a queue-runner
917   process that we are tracking. */
918
919   if (queue_pid_slots)
920     {
921     int max = atoi(CS expand_string(queue_run_max));
922     for (int i = 0; i < max; i++)
923       if (queue_pid_slots[i] == pid)
924         {
925         queue_pid_slots[i] = 0;
926         if (--queue_run_count < 0) queue_run_count = 0;
927         DEBUG(D_any) debug_printf("%d queue-runner process%s now running\n",
928           queue_run_count, (queue_run_count == 1)? "" : "es");
929         break;
930         }
931     }
932   }
933 }
934
935
936
937 static void
938 set_pid_file_path(void)
939 {
940 if (override_pid_file_path)
941   pid_file_path = override_pid_file_path;
942
943 if (!*pid_file_path)
944   pid_file_path = string_sprintf("%s/exim-daemon.pid", spool_directory);
945 }
946
947
948 /* Remove the daemon's pidfile.  Note: runs with root privilege,
949 as a direct child of the daemon.  Does not return. */
950
951 void
952 delete_pid_file(void)
953 {
954 uschar * daemon_pid = string_sprintf("%d\n", (int)getppid());
955 FILE * f;
956
957 set_pid_file_path();
958 if ((f = Ufopen(pid_file_path, "rb")))
959   {
960   if (  fgets(CS big_buffer, big_buffer_size, f)
961         && Ustrcmp(daemon_pid, big_buffer) == 0
962      )
963     if (Uunlink(pid_file_path) == 0)
964       {
965       DEBUG(D_any)
966         debug_printf("%s unlink: %s\n", pid_file_path, strerror(errno));
967       }
968     else
969       DEBUG(D_any)
970         debug_printf("unlinked %s\n", pid_file_path);
971   fclose(f);
972   }
973 else
974   DEBUG(D_any)
975     debug_printf("%s\n", string_open_failed(errno, "pid file %s",
976       pid_file_path));
977 exim_exit(EXIT_SUCCESS);
978 }
979
980
981 /* Called by the daemon; exec a child to get the pid file deleted
982 since we may require privs for the containing directory */
983
984 static void
985 daemon_die(void)
986 {
987 int pid;
988
989 if (daemon_notifier_fd >= 0)
990   {
991   close(daemon_notifier_fd);
992   daemon_notifier_fd = -1;
993 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
994   unlink_notifier_socket();
995 #endif
996   }
997
998 if (f.running_in_test_harness || write_pid)
999   {
1000   if ((pid = exim_fork(US"daemon-del-pidfile")) == 0)
1001     {
1002     if (override_pid_file_path)
1003       (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, 3,
1004         "-oP", override_pid_file_path, "-oPX");
1005     else
1006       (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, 1, "-oPX");
1007
1008     /* Control never returns here. */
1009     }
1010   if (pid > 0)
1011     child_close(pid, 1);
1012   }
1013 exim_exit(EXIT_SUCCESS);
1014 }
1015
1016
1017 /*************************************************
1018 *       Listener socket for local work prompts   *
1019 *************************************************/
1020
1021 static void
1022 daemon_notifier_socket(void)
1023 {
1024 int fd;
1025 const uschar * where;
1026 struct sockaddr_un sa_un = {.sun_family = AF_UNIX};
1027 int len;
1028
1029 if (override_local_interfaces && !override_pid_file_path)
1030   {
1031   DEBUG(D_any)
1032     debug_printf("-oX used without -oP so not creating notifier socket\n");
1033   return;
1034   }
1035
1036 DEBUG(D_any) debug_printf("creating notifier socket\n");
1037
1038 #ifdef SOCK_CLOEXEC
1039 if ((fd = socket(PF_UNIX, SOCK_DGRAM|SOCK_CLOEXEC, 0)) < 0)
1040   { where = US"socket"; goto bad; }
1041 #else
1042 if ((fd = socket(PF_UNIX, SOCK_DGRAM, 0)) < 0)
1043   { where = US"socket"; goto bad; }
1044 (void)fcntl(fd, F_SETFD, fcntl(fd, F_GETFD) | FD_CLOEXEC);
1045 #endif
1046
1047 #ifdef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1048 sa_un.sun_path[0] = 0;  /* Abstract local socket addr - Linux-specific? */
1049 len = offsetof(struct sockaddr_un, sun_path) + 1
1050   + snprintf(sa_un.sun_path+1, sizeof(sa_un.sun_path)-1, "%s",
1051               expand_string(notifier_socket));
1052 DEBUG(D_any) debug_printf(" @%s\n", sa_un.sun_path+1);
1053 #else                   /* filesystem-visible and persistent; will neeed removal */
1054 len = offsetof(struct sockaddr_un, sun_path)
1055   + snprintf(sa_un.sun_path, sizeof(sa_un.sun_path), "%s", 
1056               expand_string(notifier_socket));
1057 DEBUG(D_any) debug_printf(" %s\n", sa_un.sun_path);
1058 #endif
1059
1060 if (bind(fd, (const struct sockaddr *)&sa_un, len) < 0)
1061   { where = US"bind"; goto bad; }
1062
1063 #ifdef SO_PASSCRED              /* Linux */
1064 if (setsockopt(fd, SOL_SOCKET, SO_PASSCRED, &on, sizeof(on)) < 0)
1065   { where = US"SO_PASSCRED"; goto bad2; }
1066 #elif defined(LOCAL_CREDS)      /* FreeBSD-ish */
1067 if (setsockopt(fd, 0, LOCAL_CREDS, &on, sizeof(on)) < 0)
1068   { where = US"LOCAL_CREDS"; goto bad2; }
1069 #endif
1070
1071 /* debug_printf("%s: fd %d\n", __FUNCTION__, fd); */
1072 daemon_notifier_fd = fd;
1073 return;
1074
1075 bad2:
1076 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1077   Uunlink(sa_un.sun_path);
1078 #endif
1079 bad:
1080   log_write(0, LOG_MAIN|LOG_PANIC, "%s %s: %s",
1081     __FUNCTION__, where, strerror(errno));
1082   close(fd);
1083   return;
1084 }
1085
1086
1087 static uschar queuerun_msgid[MESSAGE_ID_LENGTH+1];
1088
1089 /* Return TRUE if a sigalrm should be emulated */
1090 static BOOL
1091 daemon_notification(void)
1092 {
1093 uschar buf[256], cbuf[256];
1094 struct sockaddr_un sa_un;
1095 struct iovec iov = {.iov_base = buf, .iov_len = sizeof(buf)-1};
1096 struct msghdr msg = { .msg_name = &sa_un,
1097                       .msg_namelen = sizeof(sa_un),
1098                       .msg_iov = &iov,
1099                       .msg_iovlen = 1,
1100                       .msg_control = cbuf,
1101                       .msg_controllen = sizeof(cbuf)
1102                     };
1103 ssize_t sz;
1104
1105 buf[sizeof(buf)-1] = 0;
1106 if ((sz = recvmsg(daemon_notifier_fd, &msg, 0)) <= 0) return FALSE;
1107 if (sz >= sizeof(buf)) return FALSE;
1108
1109 #ifdef notdef
1110 debug_printf("addrlen %d\n", msg.msg_namelen);
1111 #endif
1112 DEBUG(D_queue_run) debug_printf("%s from addr '%s%.*s'\n", __FUNCTION__,
1113   *sa_un.sun_path ? "" : "@",
1114   (int)msg.msg_namelen - (*sa_un.sun_path ? 0 : 1),
1115   sa_un.sun_path + (*sa_un.sun_path ? 0 : 1));
1116
1117 /* Refuse to handle the item unless the peer has good credentials */
1118 #ifdef SCM_CREDENTIALS
1119 # define EXIM_SCM_CR_TYPE SCM_CREDENTIALS
1120 #elif defined(LOCAL_CREDS) && defined(SCM_CREDS)
1121 # define EXIM_SCM_CR_TYPE SCM_CREDS
1122 #else
1123         /* The OS has no way to get the creds of the caller (for a unix/datagram socket.
1124         Punt; don't try to check. */
1125 #endif
1126
1127 #ifdef EXIM_SCM_CR_TYPE
1128 for (struct cmsghdr * cp = CMSG_FIRSTHDR(&msg);
1129      cp;
1130      cp = CMSG_NXTHDR(&msg, cp))
1131   if (cp->cmsg_level == SOL_SOCKET && cp->cmsg_type == EXIM_SCM_CR_TYPE)
1132   {
1133 # ifdef SCM_CREDENTIALS                                 /* Linux */
1134   struct ucred * cr = (struct ucred *) CMSG_DATA(cp);
1135   if (cr->uid && cr->uid != exim_uid)
1136     {
1137     DEBUG(D_queue_run) debug_printf("%s: sender creds pid %d uid %d gid %d\n",
1138       __FUNCTION__, (int)cr->pid, (int)cr->uid, (int)cr->gid);
1139     return FALSE;
1140     }
1141 # elif defined(LOCAL_CREDS)                             /* BSD-ish */
1142   struct sockcred * cr = (struct sockcred *) CMSG_DATA(cp);
1143   if (cr->sc_uid && cr->sc_uid != exim_uid)
1144     {
1145     DEBUG(D_queue_run) debug_printf("%s: sender creds pid ??? uid %d gid %d\n",
1146       __FUNCTION__, (int)cr->sc_uid, (int)cr->sc_gid);
1147     return FALSE;
1148     }
1149 # endif
1150   break;
1151   }
1152 #endif
1153
1154 buf[sz] = 0;
1155 switch (buf[0])
1156   {
1157 #ifdef EXPERIMENTAL_QUEUE_RAMP
1158   case NOTIFY_MSG_QRUN:
1159     /* this should be a message_id */
1160     DEBUG(D_queue_run)
1161       debug_printf("%s: qrunner trigger: %s\n", __FUNCTION__, buf+1);
1162     memcpy(queuerun_msgid, buf+1, MESSAGE_ID_LENGTH+1);
1163     return TRUE;
1164 #endif  /*EXPERIMENTAL_QUEUE_RAMP*/
1165
1166   case NOTIFY_QUEUE_SIZE_REQ:
1167     {
1168     uschar buf[16];
1169     int len = snprintf(CS buf, sizeof(buf), "%u", queue_count_cached());
1170
1171     DEBUG(D_queue_run)
1172       debug_printf("%s: queue size request: %s\n", __FUNCTION__, buf);
1173
1174     if (sendto(daemon_notifier_fd, buf, len, 0,
1175                 (const struct sockaddr *)&sa_un, msg.msg_namelen) < 0)
1176       log_write(0, LOG_MAIN|LOG_PANIC,
1177         "%s: sendto: %s\n", __FUNCTION__, strerror(errno));
1178     return FALSE;
1179     }
1180   }
1181 return FALSE;
1182 }
1183
1184
1185 /*************************************************
1186 *              Exim Daemon Mainline              *
1187 *************************************************/
1188
1189 /* The daemon can do two jobs, either of which is optional:
1190
1191 (1) Listens for incoming SMTP calls and spawns off a sub-process to handle
1192 each one. This is requested by the -bd option, with -oX specifying the SMTP
1193 port on which to listen (for testing).
1194
1195 (2) Spawns a queue-running process every so often. This is controlled by the
1196 -q option with a an interval time. (If no time is given, a single queue run
1197 is done from the main function, and control doesn't get here.)
1198
1199 Root privilege is required in order to attach to port 25. Some systems require
1200 it when calling socket() rather than bind(). To cope with all cases, we run as
1201 root for both socket() and bind(). Some systems also require root in order to
1202 write to the pid file directory. This function must therefore be called as root
1203 if it is to work properly in all circumstances. Once the socket is bound and
1204 the pid file written, root privilege is given up if there is an exim uid.
1205
1206 There are no arguments to this function, and it never returns. */
1207
1208 void
1209 daemon_go(void)
1210 {
1211 struct passwd *pw;
1212 int *listen_sockets = NULL;
1213 int listen_socket_count = 0;
1214 ip_address_item *addresses = NULL;
1215 time_t last_connection_time = (time_t)0;
1216 int local_queue_run_max = atoi(CS expand_string(queue_run_max));
1217
1218 process_purpose = US"daemon";
1219
1220 /* If any debugging options are set, turn on the D_pid bit so that all
1221 debugging lines get the pid added. */
1222
1223 DEBUG(D_any|D_v) debug_selector |= D_pid;
1224
1225 if (f.inetd_wait_mode)
1226   {
1227   listen_socket_count = 1;
1228   listen_sockets = store_get(sizeof(int), FALSE);
1229   (void) close(3);
1230   if (dup2(0, 3) == -1)
1231     log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1232         "failed to dup inetd socket safely away: %s", strerror(errno));
1233
1234   listen_sockets[0] = 3;
1235   (void) close(0);
1236   (void) close(1);
1237   (void) close(2);
1238   exim_nullstd();
1239
1240   if (debug_file == stderr)
1241     {
1242     /* need a call to log_write before call to open debug_file, so that
1243     log.c:file_path has been initialised.  This is unfortunate. */
1244     log_write(0, LOG_MAIN, "debugging Exim in inetd wait mode starting");
1245
1246     fclose(debug_file);
1247     debug_file = NULL;
1248     exim_nullstd(); /* re-open fd2 after we just closed it again */
1249     debug_logging_activate(US"-wait", NULL);
1250     }
1251
1252   DEBUG(D_any) debug_printf("running in inetd wait mode\n");
1253
1254   /* As per below, when creating sockets ourselves, we handle tcp_nodelay for
1255   our own buffering; we assume though that inetd set the socket REUSEADDR. */
1256
1257   if (tcp_nodelay)
1258     if (setsockopt(3, IPPROTO_TCP, TCP_NODELAY, US &on, sizeof(on)))
1259       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to set socket NODELAY: %s",
1260         strerror(errno));
1261   }
1262
1263
1264 if (f.inetd_wait_mode || f.daemon_listen)
1265   {
1266   /* If any option requiring a load average to be available during the
1267   reception of a message is set, call os_getloadavg() while we are root
1268   for those OS for which this is necessary the first time it is called (in
1269   order to perform an "open" on the kernel memory file). */
1270
1271   #ifdef LOAD_AVG_NEEDS_ROOT
1272   if (queue_only_load >= 0 || smtp_load_reserve >= 0 ||
1273        (deliver_queue_load_max >= 0 && deliver_drop_privilege))
1274     (void)os_getloadavg();
1275   #endif
1276   }
1277
1278
1279 /* Do the preparation for setting up a listener on one or more interfaces, and
1280 possible on various ports. This is controlled by the combination of
1281 local_interfaces (which can set IP addresses and ports) and daemon_smtp_port
1282 (which is a list of default ports to use for those items in local_interfaces
1283 that do not specify a port). The -oX command line option can be used to
1284 override one or both of these options.
1285
1286 If local_interfaces is not set, the default is to listen on all interfaces.
1287 When it is set, it can include "all IPvx interfaces" as an item. This is useful
1288 when different ports are in use.
1289
1290 It turns out that listening on all interfaces is messy in an IPv6 world,
1291 because several different implementation approaches have been taken. This code
1292 is now supposed to work with all of them. The point of difference is whether an
1293 IPv6 socket that is listening on all interfaces will receive incoming IPv4
1294 calls or not. We also have to cope with the case when IPv6 libraries exist, but
1295 there is no IPv6 support in the kernel.
1296
1297 . On Solaris, an IPv6 socket will accept IPv4 calls, and give them as mapped
1298   addresses. However, if an IPv4 socket is also listening on all interfaces,
1299   calls are directed to the appropriate socket.
1300
1301 . On (some versions of) Linux, an IPv6 socket will accept IPv4 calls, and
1302   give them as mapped addresses, but an attempt also to listen on an IPv4
1303   socket on all interfaces causes an error.
1304
1305 . On OpenBSD, an IPv6 socket will not accept IPv4 calls. You have to set up
1306   two sockets if you want to accept both kinds of call.
1307
1308 . FreeBSD is like OpenBSD, but it has the IPV6_V6ONLY socket option, which
1309   can be turned off, to make it behave like the versions of Linux described
1310   above.
1311
1312 . I heard a report that the USAGI IPv6 stack for Linux has implemented
1313   IPV6_V6ONLY.
1314
1315 So, what we do when IPv6 is supported is as follows:
1316
1317  (1) After it is set up, the list of interfaces is scanned for wildcard
1318      addresses. If an IPv6 and an IPv4 wildcard are both found for the same
1319      port, the list is re-arranged so that they are together, with the IPv6
1320      wildcard first.
1321
1322  (2) If the creation of a wildcard IPv6 socket fails, we just log the error and
1323      carry on if an IPv4 wildcard socket for the same port follows later in the
1324      list. This allows Exim to carry on in the case when the kernel has no IPv6
1325      support.
1326
1327  (3) Having created an IPv6 wildcard socket, we try to set IPV6_V6ONLY if that
1328      option is defined. However, if setting fails, carry on regardless (but log
1329      the incident).
1330
1331  (4) If binding or listening on an IPv6 wildcard socket fails, it is a serious
1332      error.
1333
1334  (5) If binding or listening on an IPv4 wildcard socket fails with the error
1335      EADDRINUSE, and a previous interface was an IPv6 wildcard for the same
1336      port (which must have succeeded or we wouldn't have got this far), we
1337      assume we are in the situation where just a single socket is permitted,
1338      and ignore the error.
1339
1340 Phew!
1341
1342 The preparation code decodes options and sets up the relevant data. We do this
1343 first, so that we can return non-zero if there are any syntax errors, and also
1344 write to stderr. */
1345
1346 if (f.daemon_listen && !f.inetd_wait_mode)
1347   {
1348   int *default_smtp_port;
1349   int sep;
1350   int pct = 0;
1351   uschar *s;
1352   const uschar * list;
1353   uschar *local_iface_source = US"local_interfaces";
1354   ip_address_item *ipa;
1355   ip_address_item **pipa;
1356
1357   /* If -oX was used, disable the writing of a pid file unless -oP was
1358   explicitly used to force it. Then scan the string given to -oX. Any items
1359   that contain neither a dot nor a colon are used to override daemon_smtp_port.
1360   Any other items are used to override local_interfaces. */
1361
1362   if (override_local_interfaces)
1363     {
1364     gstring * new_smtp_port = NULL;
1365     gstring * new_local_interfaces = NULL;
1366
1367     if (!override_pid_file_path) write_pid = FALSE;
1368
1369     list = override_local_interfaces;
1370     sep = 0;
1371     while ((s = string_nextinlist(&list, &sep, NULL, 0)))
1372       {
1373       uschar joinstr[4];
1374       gstring ** gp = Ustrpbrk(s, ".:") ? &new_local_interfaces : &new_smtp_port;
1375
1376       if (!*gp)
1377         {
1378         joinstr[0] = sep;
1379         joinstr[1] = ' ';
1380         *gp = string_catn(*gp, US"<", 1);
1381         }
1382
1383       *gp = string_catn(*gp, joinstr, 2);
1384       *gp = string_cat (*gp, s);
1385       }
1386
1387     if (new_smtp_port)
1388       {
1389       daemon_smtp_port = string_from_gstring(new_smtp_port);
1390       DEBUG(D_any) debug_printf("daemon_smtp_port overridden by -oX:\n  %s\n",
1391         daemon_smtp_port);
1392       }
1393
1394     if (new_local_interfaces)
1395       {
1396       local_interfaces = string_from_gstring(new_local_interfaces);
1397       local_iface_source = US"-oX data";
1398       DEBUG(D_any) debug_printf("local_interfaces overridden by -oX:\n  %s\n",
1399         local_interfaces);
1400       }
1401     }
1402
1403   /* Create a list of default SMTP ports, to be used if local_interfaces
1404   contains entries without explicit ports. First count the number of ports, then
1405   build a translated list in a vector. */
1406
1407   list = daemon_smtp_port;
1408   sep = 0;
1409   while ((s = string_nextinlist(&list, &sep, NULL, 0)))
1410     pct++;
1411   default_smtp_port = store_get((pct+1) * sizeof(int), FALSE);
1412   list = daemon_smtp_port;
1413   sep = 0;
1414   for (pct = 0;
1415        (s = string_nextinlist(&list, &sep, NULL, 0));
1416        pct++)
1417     {
1418     if (isdigit(*s))
1419       {
1420       uschar *end;
1421       default_smtp_port[pct] = Ustrtol(s, &end, 0);
1422       if (end != s + Ustrlen(s))
1423         log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "invalid SMTP port: %s", s);
1424       }
1425     else
1426       {
1427       struct servent *smtp_service = getservbyname(CS s, "tcp");
1428       if (!smtp_service)
1429         log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "TCP port \"%s\" not found", s);
1430       default_smtp_port[pct] = ntohs(smtp_service->s_port);
1431       }
1432     }
1433   default_smtp_port[pct] = 0;
1434
1435   /* Check the list of TLS-on-connect ports and do name lookups if needed */
1436
1437   list = tls_in.on_connect_ports;
1438   sep = 0;
1439   while ((s = string_nextinlist(&list, &sep, big_buffer, big_buffer_size)))
1440     if (!isdigit(*s))
1441       {
1442       gstring * g = NULL;
1443
1444       list = tls_in.on_connect_ports;
1445       tls_in.on_connect_ports = NULL;
1446       sep = 0;
1447       while ((s = string_nextinlist(&list, &sep, big_buffer, big_buffer_size)))
1448         {
1449         if (!isdigit(*s))
1450           {
1451           struct servent * smtp_service = getservbyname(CS s, "tcp");
1452           if (!smtp_service)
1453             log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "TCP port \"%s\" not found", s);
1454           s = string_sprintf("%d", (int)ntohs(smtp_service->s_port));
1455           }
1456         g = string_append_listele(g, ':', s);
1457         }
1458       if (g)
1459         tls_in.on_connect_ports = g->s;
1460       break;
1461       }
1462
1463   /* Create the list of local interfaces, possibly with ports included. This
1464   list may contain references to 0.0.0.0 and ::0 as wildcards. These special
1465   values are converted below. */
1466
1467   addresses = host_build_ifacelist(local_interfaces, local_iface_source);
1468
1469   /* In the list of IP addresses, convert 0.0.0.0 into an empty string, and ::0
1470   into the string ":". We use these to recognize wildcards in IPv4 and IPv6. In
1471   fact, many IP stacks recognize 0.0.0.0 and ::0 and handle them as wildcards
1472   anyway, but we need to know which are the wildcard addresses, and the shorter
1473   strings are neater.
1474
1475   In the same scan, fill in missing port numbers from the default list. When
1476   there is more than one item in the list, extra items are created. */
1477
1478   for (ipa = addresses; ipa; ipa = ipa->next)
1479     {
1480     if (Ustrcmp(ipa->address, "0.0.0.0") == 0)
1481       ipa->address[0] = 0;
1482     else if (Ustrcmp(ipa->address, "::0") == 0)
1483       {
1484       ipa->address[0] = ':';
1485       ipa->address[1] = 0;
1486       }
1487
1488     if (ipa->port > 0) continue;
1489
1490     if (daemon_smtp_port[0] <= 0)
1491       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "no port specified for interface "
1492         "%s and daemon_smtp_port is unset; cannot start daemon",
1493         ipa->address[0] == 0 ? US"\"all IPv4\"" :
1494         ipa->address[1] == 0 ? US"\"all IPv6\"" : ipa->address);
1495
1496     ipa->port = default_smtp_port[0];
1497     for (int i = 1; default_smtp_port[i] > 0; i++)
1498       {
1499       ip_address_item *new = store_get(sizeof(ip_address_item), FALSE);
1500
1501       memcpy(new->address, ipa->address, Ustrlen(ipa->address) + 1);
1502       new->port = default_smtp_port[i];
1503       new->next = ipa->next;
1504       ipa->next = new;
1505       ipa = new;
1506       }
1507     }
1508
1509   /* Scan the list of addresses for wildcards. If we find an IPv4 and an IPv6
1510   wildcard for the same port, ensure that (a) they are together and (b) the
1511   IPv6 address comes first. This makes handling the messy features easier, and
1512   also simplifies the construction of the "daemon started" log line. */
1513
1514   pipa = &addresses;
1515   for (ipa = addresses; ipa; pipa = &ipa->next, ipa = ipa->next)
1516     {
1517     ip_address_item *ipa2;
1518
1519     /* Handle an IPv4 wildcard */
1520
1521     if (ipa->address[0] == 0)
1522       for (ipa2 = ipa; ipa2->next; ipa2 = ipa2->next)
1523         {
1524         ip_address_item *ipa3 = ipa2->next;
1525         if (ipa3->address[0] == ':' &&
1526             ipa3->address[1] == 0 &&
1527             ipa3->port == ipa->port)
1528           {
1529           ipa2->next = ipa3->next;
1530           ipa3->next = ipa;
1531           *pipa = ipa3;
1532           break;
1533           }
1534         }
1535
1536     /* Handle an IPv6 wildcard. */
1537
1538     else if (ipa->address[0] == ':' && ipa->address[1] == 0)
1539       for (ipa2 = ipa; ipa2->next; ipa2 = ipa2->next)
1540         {
1541         ip_address_item *ipa3 = ipa2->next;
1542         if (ipa3->address[0] == 0 && ipa3->port == ipa->port)
1543           {
1544           ipa2->next = ipa3->next;
1545           ipa3->next = ipa->next;
1546           ipa->next = ipa3;
1547           ipa = ipa3;
1548           break;
1549           }
1550         }
1551     }
1552
1553   /* Get a vector to remember all the sockets in */
1554
1555   for (ipa = addresses; ipa; ipa = ipa->next)
1556     listen_socket_count++;
1557   listen_sockets = store_get(sizeof(int) * listen_socket_count, FALSE);
1558
1559   } /* daemon_listen but not inetd_wait_mode */
1560
1561 if (f.daemon_listen)
1562   {
1563
1564   /* Do a sanity check on the max connects value just to save us from getting
1565   a huge amount of store. */
1566
1567   if (smtp_accept_max > 4095) smtp_accept_max = 4096;
1568
1569   /* There's no point setting smtp_accept_queue unless it is less than the max
1570   connects limit. The configuration reader ensures that the max is set if the
1571   queue-only option is set. */
1572
1573   if (smtp_accept_queue > smtp_accept_max) smtp_accept_queue = 0;
1574
1575   /* Get somewhere to keep the list of SMTP accepting pids if we are keeping
1576   track of them for total number and queue/host limits. */
1577
1578   if (smtp_accept_max > 0)
1579     {
1580     smtp_slots = store_get(smtp_accept_max * sizeof(smtp_slot), FALSE);
1581     for (int i = 0; i < smtp_accept_max; i++) smtp_slots[i] = empty_smtp_slot;
1582     }
1583   }
1584
1585 /* The variable background_daemon is always false when debugging, but
1586 can also be forced false in order to keep a non-debugging daemon in the
1587 foreground. If background_daemon is true, close all open file descriptors that
1588 we know about, but then re-open stdin, stdout, and stderr to /dev/null.  Also
1589 do this for inetd_wait mode.
1590
1591 This is protection against any called functions (in libraries, or in
1592 Perl, or whatever) that think they can write to stderr (or stdout). Before this
1593 was added, it was quite likely that an SMTP connection would use one of these
1594 file descriptors, in which case writing random stuff to it caused chaos.
1595
1596 Then disconnect from the controlling terminal, Most modern Unixes seem to have
1597 setsid() for getting rid of the controlling terminal. For any OS that doesn't,
1598 setsid() can be #defined as a no-op, or as something else. */
1599
1600 if (f.background_daemon || f.inetd_wait_mode)
1601   {
1602   log_close_all();    /* Just in case anything was logged earlier */
1603   search_tidyup();    /* Just in case any were used in reading the config. */
1604   (void)close(0);           /* Get rid of stdin/stdout/stderr */
1605   (void)close(1);
1606   (void)close(2);
1607   exim_nullstd();     /* Connect stdin/stdout/stderr to /dev/null */
1608   log_stderr = NULL;  /* So no attempt to copy paniclog output */
1609   }
1610
1611 if (f.background_daemon)
1612   {
1613   /* If the parent process of this one has pid == 1, we are re-initializing the
1614   daemon as the result of a SIGHUP. In this case, there is no need to do
1615   anything, because the controlling terminal has long gone. Otherwise, fork, in
1616   case current process is a process group leader (see 'man setsid' for an
1617   explanation) before calling setsid(). */
1618
1619   if (getppid() != 1)
1620     {
1621     pid_t pid = exim_fork(US"daemon");
1622     if (pid < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1623       "fork() failed when starting daemon: %s", strerror(errno));
1624     if (pid > 0) exit(EXIT_SUCCESS);      /* in parent process, just exit */
1625     (void)setsid();                       /* release controlling terminal */
1626     }
1627   }
1628
1629 /* We are now in the disconnected, daemon process (unless debugging). Set up
1630 the listening sockets if required. */
1631
1632 daemon_notifier_socket();
1633
1634 if (f.daemon_listen && !f.inetd_wait_mode)
1635   {
1636   int sk;
1637   ip_address_item *ipa;
1638
1639   /* For each IP address, create a socket, bind it to the appropriate port, and
1640   start listening. See comments above about IPv6 sockets that may or may not
1641   accept IPv4 calls when listening on all interfaces. We also have to cope with
1642   the case of a system with IPv6 libraries, but no IPv6 support in the kernel.
1643   listening, provided a wildcard IPv4 socket for the same port follows. */
1644
1645   for (ipa = addresses, sk = 0; sk < listen_socket_count; ipa = ipa->next, sk++)
1646     {
1647     BOOL wildcard;
1648     ip_address_item *ipa2;
1649     int af;
1650
1651     if (Ustrchr(ipa->address, ':') != NULL)
1652       {
1653       af = AF_INET6;
1654       wildcard = ipa->address[1] == 0;
1655       }
1656     else
1657       {
1658       af = AF_INET;
1659       wildcard = ipa->address[0] == 0;
1660       }
1661
1662     if ((listen_sockets[sk] = ip_socket(SOCK_STREAM, af)) < 0)
1663       {
1664       if (check_special_case(0, addresses, ipa, FALSE))
1665         {
1666         log_write(0, LOG_MAIN, "Failed to create IPv6 socket for wildcard "
1667           "listening (%s): will use IPv4", strerror(errno));
1668         goto SKIP_SOCKET;
1669         }
1670       log_write(0, LOG_PANIC_DIE, "IPv%c socket creation failed: %s",
1671         (af == AF_INET6)? '6' : '4', strerror(errno));
1672       }
1673
1674     /* If this is an IPv6 wildcard socket, set IPV6_V6ONLY if that option is
1675     available. Just log failure (can get protocol not available, just like
1676     socket creation can). */
1677
1678 #ifdef IPV6_V6ONLY
1679     if (af == AF_INET6 && wildcard &&
1680         setsockopt(listen_sockets[sk], IPPROTO_IPV6, IPV6_V6ONLY, CS (&on),
1681           sizeof(on)) < 0)
1682       log_write(0, LOG_MAIN, "Setting IPV6_V6ONLY on daemon's IPv6 wildcard "
1683         "socket failed (%s): carrying on without it", strerror(errno));
1684 #endif  /* IPV6_V6ONLY */
1685
1686     /* Set SO_REUSEADDR so that the daemon can be restarted while a connection
1687     is being handled.  Without this, a connection will prevent reuse of the
1688     smtp port for listening. */
1689
1690     if (setsockopt(listen_sockets[sk], SOL_SOCKET, SO_REUSEADDR,
1691                    US (&on), sizeof(on)) < 0)
1692       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "setting SO_REUSEADDR on socket "
1693         "failed when starting daemon: %s", strerror(errno));
1694
1695     /* Set TCP_NODELAY; Exim does its own buffering. There is a switch to
1696     disable this because it breaks some broken clients. */
1697
1698     if (tcp_nodelay) setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_NODELAY,
1699       US (&on), sizeof(on));
1700
1701     /* Now bind the socket to the required port; if Exim is being restarted
1702     it may not always be possible to bind immediately, even with SO_REUSEADDR
1703     set, so try 10 times, waiting between each try. After 10 failures, we give
1704     up. In an IPv6 environment, if bind () fails with the error EADDRINUSE and
1705     we are doing wildcard IPv4 listening and there was a previous IPv6 wildcard
1706     address for the same port, ignore the error on the grounds that we must be
1707     in a system where the IPv6 socket accepts both kinds of call. This is
1708     necessary for (some release of) USAGI Linux; other IP stacks fail at the
1709     listen() stage instead. */
1710
1711 #ifdef TCP_FASTOPEN
1712     f.tcp_fastopen_ok = TRUE;
1713 #endif
1714     for(;;)
1715       {
1716       uschar *msg, *addr;
1717       if (ip_bind(listen_sockets[sk], af, ipa->address, ipa->port) >= 0) break;
1718       if (check_special_case(errno, addresses, ipa, TRUE))
1719         {
1720         DEBUG(D_any) debug_printf("wildcard IPv4 bind() failed after IPv6 "
1721           "listen() success; EADDRINUSE ignored\n");
1722         (void)close(listen_sockets[sk]);
1723         goto SKIP_SOCKET;
1724         }
1725       msg = US strerror(errno);
1726       addr = wildcard
1727         ? af == AF_INET6
1728         ? US"(any IPv6)"
1729         : US"(any IPv4)"
1730         : ipa->address;
1731       if (daemon_startup_retries <= 0)
1732         log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1733           "socket bind() to port %d for address %s failed: %s: "
1734           "daemon abandoned", ipa->port, addr, msg);
1735       log_write(0, LOG_MAIN, "socket bind() to port %d for address %s "
1736         "failed: %s: waiting %s before trying again (%d more %s)",
1737         ipa->port, addr, msg, readconf_printtime(daemon_startup_sleep),
1738         daemon_startup_retries, (daemon_startup_retries > 1)? "tries" : "try");
1739       daemon_startup_retries--;
1740       sleep(daemon_startup_sleep);
1741       }
1742
1743     DEBUG(D_any)
1744       if (wildcard)
1745         debug_printf("listening on all interfaces (IPv%c) port %d\n",
1746           af == AF_INET6 ? '6' : '4', ipa->port);
1747       else
1748         debug_printf("listening on %s port %d\n", ipa->address, ipa->port);
1749
1750 #if defined(TCP_FASTOPEN) && !defined(__APPLE__)
1751     if (  f.tcp_fastopen_ok
1752        && setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_FASTOPEN,
1753                     &smtp_connect_backlog, sizeof(smtp_connect_backlog)))
1754       {
1755       DEBUG(D_any) debug_printf("setsockopt FASTOPEN: %s\n", strerror(errno));
1756       f.tcp_fastopen_ok = FALSE;
1757       }
1758 #endif
1759
1760     /* Start listening on the bound socket, establishing the maximum backlog of
1761     connections that is allowed. On success, continue to the next address. */
1762
1763     if (listen(listen_sockets[sk], smtp_connect_backlog) >= 0)
1764       {
1765 #if defined(TCP_FASTOPEN) && defined(__APPLE__)
1766       if (  f.tcp_fastopen_ok
1767          && setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_FASTOPEN,
1768                       &on, sizeof(on)))
1769         {
1770         DEBUG(D_any) debug_printf("setsockopt FASTOPEN: %s\n", strerror(errno));
1771         f.tcp_fastopen_ok = FALSE;
1772         }
1773 #endif
1774       continue;
1775       }
1776
1777     /* Listening has failed. In an IPv6 environment, as for bind(), if listen()
1778     fails with the error EADDRINUSE and we are doing IPv4 wildcard listening
1779     and there was a previous successful IPv6 wildcard listen on the same port,
1780     we want to ignore the error on the grounds that we must be in a system
1781     where the IPv6 socket accepts both kinds of call. */
1782
1783     if (!check_special_case(errno, addresses, ipa, TRUE))
1784       log_write(0, LOG_PANIC_DIE, "listen() failed on interface %s: %s",
1785         wildcard
1786         ? af == AF_INET6 ? US"(any IPv6)" : US"(any IPv4)" : ipa->address,
1787         strerror(errno));
1788
1789     DEBUG(D_any) debug_printf("wildcard IPv4 listen() failed after IPv6 "
1790       "listen() success; EADDRINUSE ignored\n");
1791     (void)close(listen_sockets[sk]);
1792
1793     /* Come here if there has been a problem with the socket which we
1794     are going to ignore. We remove the address from the chain, and back up the
1795     counts. */
1796
1797   SKIP_SOCKET:
1798     sk--;                          /* Back up the count */
1799     listen_socket_count--;         /* Reduce the total */
1800     if (ipa == addresses) addresses = ipa->next; else
1801       {
1802       for (ipa2 = addresses; ipa2->next != ipa; ipa2 = ipa2->next);
1803       ipa2->next = ipa->next;
1804       ipa = ipa2;
1805       }
1806     }          /* End of bind/listen loop for each address */
1807   }            /* End of setup for listening */
1808
1809
1810 /* If we are not listening, we want to write a pid file only if -oP was
1811 explicitly given. */
1812
1813 else if (!override_pid_file_path)
1814   write_pid = FALSE;
1815
1816 /* Write the pid to a known file for assistance in identification, if required.
1817 We do this before giving up root privilege, because on some systems it is
1818 necessary to be root in order to write into the pid file directory. There's
1819 nothing to stop multiple daemons running, as long as no more than one listens
1820 on a given TCP/IP port on the same interface(s). However, in these
1821 circumstances it gets far too complicated to mess with pid file names
1822 automatically. Consequently, Exim 4 writes a pid file only
1823
1824   (a) When running in the test harness, or
1825   (b) When -bd is used and -oX is not used, or
1826   (c) When -oP is used to supply a path.
1827
1828 The variable daemon_write_pid is used to control this. */
1829
1830 if (f.running_in_test_harness || write_pid)
1831   {
1832   FILE *f;
1833
1834   set_pid_file_path();
1835   if ((f = modefopen(pid_file_path, "wb", 0644)))
1836     {
1837     (void)fprintf(f, "%d\n", (int)getpid());
1838     (void)fclose(f);
1839     DEBUG(D_any) debug_printf("pid written to %s\n", pid_file_path);
1840     }
1841   else
1842     DEBUG(D_any)
1843       debug_printf("%s\n", string_open_failed(errno, "pid file %s",
1844         pid_file_path));
1845   }
1846
1847 /* Set up the handler for SIGHUP, which causes a restart of the daemon. */
1848
1849 sighup_seen = FALSE;
1850 signal(SIGHUP, sighup_handler);
1851
1852 /* Give up root privilege at this point (assuming that exim_uid and exim_gid
1853 are not root). The third argument controls the running of initgroups().
1854 Normally we do this, in order to set up the groups for the Exim user. However,
1855 if we are not root at this time - some odd installations run that way - we
1856 cannot do this. */
1857
1858 exim_setugid(exim_uid, exim_gid, geteuid()==root_uid, US"running as a daemon");
1859
1860 /* Update the originator_xxx fields so that received messages as listed as
1861 coming from Exim, not whoever started the daemon. */
1862
1863 originator_uid = exim_uid;
1864 originator_gid = exim_gid;
1865 originator_login = (pw = getpwuid(exim_uid))
1866   ? string_copy_perm(US pw->pw_name, FALSE) : US"exim";
1867
1868 /* Get somewhere to keep the list of queue-runner pids if we are keeping track
1869 of them (and also if we are doing queue runs). */
1870
1871 if (queue_interval > 0 && local_queue_run_max > 0)
1872   {
1873   queue_pid_slots = store_get(local_queue_run_max * sizeof(pid_t), FALSE);
1874   for (int i = 0; i < local_queue_run_max; i++) queue_pid_slots[i] = 0;
1875   }
1876
1877 /* Set up the handler for termination of child processes, and the one
1878 telling us to die. */
1879
1880 sigchld_seen = FALSE;
1881 os_non_restarting_signal(SIGCHLD, main_sigchld_handler);
1882
1883 sigterm_seen = FALSE;
1884 os_non_restarting_signal(SIGTERM, main_sigterm_handler);
1885
1886 /* If we are to run the queue periodically, pretend the alarm has just gone
1887 off. This will cause the first queue-runner to get kicked off straight away. */
1888
1889 sigalrm_seen = (queue_interval > 0);
1890
1891 /* Log the start up of a daemon - at least one of listening or queue running
1892 must be set up. */
1893
1894 if (f.inetd_wait_mode)
1895   {
1896   uschar *p = big_buffer;
1897
1898   if (inetd_wait_timeout >= 0)
1899     sprintf(CS p, "terminating after %d seconds", inetd_wait_timeout);
1900   else
1901     sprintf(CS p, "with no wait timeout");
1902
1903   log_write(0, LOG_MAIN,
1904     "exim %s daemon started: pid=%d, launched with listening socket, %s",
1905     version_string, getpid(), big_buffer);
1906   set_process_info("daemon(%s): pre-listening socket", version_string);
1907
1908   /* set up the timeout logic */
1909   sigalrm_seen = TRUE;
1910   }
1911
1912 else if (f.daemon_listen)
1913   {
1914   int smtp_ports = 0;
1915   int smtps_ports = 0;
1916   ip_address_item * ipa;
1917   uschar * p;
1918   uschar * qinfo = queue_interval > 0
1919     ? string_sprintf("-q%s%s",
1920         f.queue_2stage ? "q" : "", readconf_printtime(queue_interval))
1921     : US"no queue runs";
1922
1923   /* Build a list of listening addresses in big_buffer, but limit it to 10
1924   items. The style is for backwards compatibility.
1925
1926   It is now possible to have some ports listening for SMTPS (the old,
1927   deprecated protocol that starts TLS without using STARTTLS), and others
1928   listening for standard SMTP. Keep their listings separate. */
1929
1930   for (int j = 0, i; j < 2; j++)
1931     {
1932     for (i = 0, ipa = addresses; i < 10 && ipa; i++, ipa = ipa->next)
1933       {
1934       /* First time round, look for SMTP ports; second time round, look for
1935       SMTPS ports. Build IP+port strings. */
1936
1937       if (host_is_tls_on_connect_port(ipa->port) == (j > 0))
1938         {
1939         if (j == 0)
1940           smtp_ports++;
1941         else
1942           smtps_ports++;
1943
1944         /* Now the information about the port (and sometimes interface) */
1945
1946         if (ipa->address[0] == ':' && ipa->address[1] == 0)
1947           {                                             /* v6 wildcard */
1948           if (ipa->next && ipa->next->address[0] == 0 &&
1949               ipa->next->port == ipa->port)
1950             {
1951             ipa->log = string_sprintf(" port %d (IPv6 and IPv4)", ipa->port);
1952             (ipa = ipa->next)->log = NULL;
1953             }
1954           else if (ipa->v6_include_v4)
1955             ipa->log = string_sprintf(" port %d (IPv6 with IPv4)", ipa->port);
1956           else
1957             ipa->log = string_sprintf(" port %d (IPv6)", ipa->port);
1958           }
1959         else if (ipa->address[0] == 0)                  /* v4 wildcard */
1960           ipa->log = string_sprintf(" port %d (IPv4)", ipa->port);
1961         else                            /* check for previously-seen IP */
1962           {
1963           ip_address_item * i2;
1964           for (i2 = addresses; i2 != ipa; i2 = i2->next)
1965             if (  host_is_tls_on_connect_port(i2->port) == (j > 0)
1966                && Ustrcmp(ipa->address, i2->address) == 0
1967                )
1968               {                         /* found; append port to list */
1969               for (p = i2->log; *p; ) p++;      /* end of existing string */
1970               if (*--p == '}') *p = '\0';       /* drop EOL */
1971               while (isdigit(*--p)) ;           /* char before port */
1972
1973               i2->log = *p == ':'               /* no list yet? */
1974                 ? string_sprintf("%.*s{%s,%d}",
1975                   (int)(p - i2->log + 1), i2->log, p+1, ipa->port)
1976                 : string_sprintf("%s,%d}", i2->log, ipa->port);
1977               ipa->log = NULL;
1978               break;
1979               }
1980           if (i2 == ipa)                /* first-time IP */
1981             ipa->log = string_sprintf(" [%s]:%d", ipa->address, ipa->port);
1982           }
1983         }
1984       }
1985     }
1986
1987   p = big_buffer;
1988   for (int j = 0, i; j < 2; j++)
1989     {
1990     /* First time round, look for SMTP ports; second time round, look for
1991     SMTPS ports. For the first one of each, insert leading text. */
1992
1993     if (j == 0)
1994       {
1995       if (smtp_ports > 0)
1996         p += sprintf(CS p, "SMTP on");
1997       }
1998     else
1999       if (smtps_ports > 0)
2000         p += sprintf(CS p, "%sSMTPS on",
2001           smtp_ports == 0 ? "" : " and for ");
2002
2003     /* Now the information about the port (and sometimes interface) */
2004
2005     for (i = 0, ipa = addresses; i < 10 && ipa; i++, ipa = ipa->next)
2006       if (host_is_tls_on_connect_port(ipa->port) == (j > 0))
2007         if (ipa->log)
2008           p += sprintf(CS p, "%s",  ipa->log);
2009
2010     if (ipa)
2011       p += sprintf(CS p, " ...");
2012     }
2013
2014   log_write(0, LOG_MAIN,
2015     "exim %s daemon started: pid=%d, %s, listening for %s",
2016     version_string, getpid(), qinfo, big_buffer);
2017   set_process_info("daemon(%s): %s, listening for %s",
2018     version_string, qinfo, big_buffer);
2019   }
2020
2021 else
2022   {
2023   uschar * s = *queue_name
2024     ? string_sprintf("-qG%s/%s", queue_name, readconf_printtime(queue_interval))
2025     : string_sprintf("-q%s", readconf_printtime(queue_interval));
2026   log_write(0, LOG_MAIN,
2027     "exim %s daemon started: pid=%d, %s, not listening for SMTP",
2028     version_string, getpid(), s);
2029   set_process_info("daemon(%s): %s, not listening", version_string, s);
2030   }
2031
2032 /* Do any work it might be useful to amortize over our children
2033 (eg: compile regex) */
2034
2035 dns_pattern_init();
2036 smtp_deliver_init();    /* Used for callouts */
2037
2038 #ifndef DISABLE_DKIM
2039   {
2040 # ifdef MEASURE_TIMING
2041   struct timeval t0;
2042   gettimeofday(&t0, NULL);
2043 # endif
2044   dkim_exim_init();
2045 # ifdef MEASURE_TIMING
2046   report_time_since(&t0, US"dkim_exim_init (delta)");
2047 # endif
2048   }
2049 #endif
2050
2051 #ifdef WITH_CONTENT_SCAN
2052 malware_init();
2053 #endif
2054 #ifdef SUPPORT_SPF
2055 spf_init();
2056 #endif
2057
2058 /* Close the log so it can be renamed and moved. In the few cases below where
2059 this long-running process writes to the log (always exceptional conditions), it
2060 closes the log afterwards, for the same reason. */
2061
2062 log_close_all();
2063
2064 DEBUG(D_any) debug_print_ids(US"daemon running with");
2065
2066 /* Any messages accepted via this route are going to be SMTP. */
2067
2068 smtp_input = TRUE;
2069
2070 #ifdef MEASURE_TIMING
2071 report_time_since(&timestamp_startup, US"daemon loop start");   /* testcase 0022 */
2072 #endif
2073
2074 /* Enter the never-ending loop... */
2075
2076 for (;;)
2077   {
2078   #if HAVE_IPV6
2079   struct sockaddr_in6 accepted;
2080   #else
2081   struct sockaddr_in accepted;
2082   #endif
2083
2084   EXIM_SOCKLEN_T len;
2085   pid_t pid;
2086
2087   if (sigterm_seen)
2088     daemon_die();       /* Does not return */
2089
2090   /* This code is placed first in the loop, so that it gets obeyed at the
2091   start, before the first wait, for the queue-runner case, so that the first
2092   one can be started immediately.
2093
2094   The other option is that we have an inetd wait timeout specified to -bw. */
2095
2096   if (sigalrm_seen)
2097     {
2098     if (inetd_wait_timeout > 0)
2099       {
2100       time_t resignal_interval = inetd_wait_timeout;
2101
2102       if (last_connection_time == (time_t)0)
2103         {
2104         DEBUG(D_any)
2105           debug_printf("inetd wait timeout expired, but still not seen first message, ignoring\n");
2106         }
2107       else
2108         {
2109         time_t now = time(NULL);
2110         if (now == (time_t)-1)
2111           {
2112           DEBUG(D_any) debug_printf("failed to get time: %s\n", strerror(errno));
2113           }
2114         else
2115           {
2116           if ((now - last_connection_time) >= inetd_wait_timeout)
2117             {
2118             DEBUG(D_any)
2119               debug_printf("inetd wait timeout %d expired, ending daemon\n",
2120                   inetd_wait_timeout);
2121             log_write(0, LOG_MAIN, "exim %s daemon terminating, inetd wait timeout reached.\n",
2122                 version_string);
2123             exit(EXIT_SUCCESS);
2124             }
2125           else
2126             {
2127             resignal_interval -= (now - last_connection_time);
2128             }
2129           }
2130         }
2131
2132       sigalrm_seen = FALSE;
2133       ALARM(resignal_interval);
2134       }
2135
2136     else
2137       {
2138       DEBUG(D_any) debug_printf("%s received\n",
2139 #ifdef EXPERIMENTAL_QUEUE_RAMP
2140         *queuerun_msgid ? "qrun notification" :
2141 #endif
2142         "SIGALRM");
2143
2144       /* Do a full queue run in a child process, if required, unless we already
2145       have enough queue runners on the go. If we are not running as root, a
2146       re-exec is required. */
2147
2148       if (  queue_interval > 0
2149          && (local_queue_run_max <= 0 || queue_run_count < local_queue_run_max))
2150         {
2151         if ((pid = exim_fork(US"queue-runner")) == 0)
2152           {
2153           /* Disable debugging if it's required only for the daemon process. We
2154           leave the above message, because it ties up with the "child ended"
2155           debugging messages. */
2156
2157           if (f.debug_daemon) debug_selector = 0;
2158
2159           /* Close any open listening sockets in the child */
2160
2161           close_daemon_sockets(daemon_notifier_fd,
2162             listen_sockets, listen_socket_count);
2163
2164           /* Reset SIGHUP and SIGCHLD in the child in both cases. */
2165
2166           signal(SIGHUP,  SIG_DFL);
2167           signal(SIGCHLD, SIG_DFL);
2168           signal(SIGTERM, SIG_DFL);
2169
2170           /* Re-exec if privilege has been given up, unless deliver_drop_
2171           privilege is set. Reset SIGALRM before exec(). */
2172
2173           if (geteuid() != root_uid && !deliver_drop_privilege)
2174             {
2175             uschar opt[8];
2176             uschar *p = opt;
2177             uschar *extra[7];
2178             int extracount = 1;
2179
2180             signal(SIGALRM, SIG_DFL);
2181             *p++ = '-';
2182             *p++ = 'q';
2183             if (  f.queue_2stage
2184 #ifdef EXPERIMENTAL_QUEUE_RAMP
2185                && !*queuerun_msgid
2186 #endif
2187                ) *p++ = 'q';
2188             if (f.queue_run_first_delivery) *p++ = 'i';
2189             if (f.queue_run_force) *p++ = 'f';
2190             if (f.deliver_force_thaw) *p++ = 'f';
2191             if (f.queue_run_local) *p++ = 'l';
2192             *p = 0;
2193             extra[0] = *queue_name
2194               ? string_sprintf("%sG%s", opt, queue_name) : opt;
2195
2196 #ifdef EXPERIMENTAL_QUEUE_RAMP
2197             if (*queuerun_msgid)
2198               {
2199               log_write(0, LOG_MAIN, "notify triggered queue run");
2200               extra[extracount++] = queuerun_msgid;     /* Trigger only the */
2201               extra[extracount++] = queuerun_msgid;     /* one message      */
2202               }
2203 #endif
2204
2205             /* If -R or -S were on the original command line, ensure they get
2206             passed on. */
2207
2208             if (deliver_selectstring)
2209               {
2210               extra[extracount++] = f.deliver_selectstring_regex ? US"-Rr" : US"-R";
2211               extra[extracount++] = deliver_selectstring;
2212               }
2213
2214             if (deliver_selectstring_sender)
2215               {
2216               extra[extracount++] = f.deliver_selectstring_sender_regex
2217                 ? US"-Sr" : US"-S";
2218               extra[extracount++] = deliver_selectstring_sender;
2219               }
2220
2221             /* Overlay this process with a new execution. */
2222
2223             (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, extracount,
2224               extra[0], extra[1], extra[2], extra[3], extra[4], extra[5], extra[6]);
2225
2226             /* Control never returns here. */
2227             }
2228
2229           /* No need to re-exec; SIGALRM remains set to the default handler */
2230
2231 #ifdef EXPERIMENTAL_QUEUE_RAMP
2232           if (*queuerun_msgid)
2233             {
2234             log_write(0, LOG_MAIN, "notify triggered queue run");
2235             f.queue_2stage = FALSE;
2236             queue_run(queuerun_msgid, queuerun_msgid, FALSE);
2237             }
2238           else
2239 #endif
2240             queue_run(NULL, NULL, FALSE);
2241           exim_underbar_exit(EXIT_SUCCESS);
2242           }
2243
2244         if (pid < 0)
2245           {
2246           log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fork of queue-runner "
2247             "process failed: %s", strerror(errno));
2248           log_close_all();
2249           }
2250         else
2251           {
2252           for (int i = 0; i < local_queue_run_max; ++i)
2253             if (queue_pid_slots[i] <= 0)
2254               {
2255               queue_pid_slots[i] = pid;
2256               queue_run_count++;
2257               break;
2258               }
2259           DEBUG(D_any) debug_printf("%d queue-runner process%s running\n",
2260             queue_run_count, queue_run_count == 1 ? "" : "es");
2261           }
2262         }
2263
2264       /* Reset the alarm clock */
2265
2266       sigalrm_seen = FALSE;
2267 #ifdef EXPERIMENTAL_QUEUE_RAMP
2268       if (*queuerun_msgid)
2269         *queuerun_msgid = 0;
2270       else
2271 #endif
2272         ALARM(queue_interval);
2273       }
2274
2275     } /* sigalrm_seen */
2276
2277
2278   /* Sleep till a connection happens if listening, and handle the connection if
2279   that is why we woke up. The FreeBSD operating system requires the use of
2280   select() before accept() because the latter function is not interrupted by
2281   a signal, and we want to wake up for SIGCHLD and SIGALRM signals. Some other
2282   OS do notice signals in accept() but it does no harm to have the select()
2283   in for all of them - and it won't then be a lurking problem for ports to
2284   new OS. In fact, the later addition of listening on specific interfaces only
2285   requires this way of working anyway. */
2286
2287   if (f.daemon_listen)
2288     {
2289     int lcount, select_errno;
2290     int max_socket = 0;
2291     BOOL select_failed = FALSE;
2292     fd_set select_listen;
2293
2294     FD_ZERO(&select_listen);
2295     if (daemon_notifier_fd >= 0)
2296       FD_SET(daemon_notifier_fd, &select_listen);
2297     for (int sk = 0; sk < listen_socket_count; sk++)
2298       {
2299       FD_SET(listen_sockets[sk], &select_listen);
2300       if (listen_sockets[sk] > max_socket) max_socket = listen_sockets[sk];
2301       }
2302
2303     DEBUG(D_any) debug_printf("Listening...\n");
2304
2305     /* In rare cases we may have had a SIGCHLD signal in the time between
2306     setting the handler (below) and getting back here. If so, pretend that the
2307     select() was interrupted so that we reap the child. This might still leave
2308     a small window when a SIGCHLD could get lost. However, since we use SIGCHLD
2309     only to do the reaping more quickly, it shouldn't result in anything other
2310     than a delay until something else causes a wake-up. */
2311
2312     if (sigchld_seen)
2313       {
2314       lcount = -1;
2315       errno = EINTR;
2316       }
2317     else
2318       lcount = select(max_socket + 1, (SELECT_ARG2_TYPE *)&select_listen,
2319         NULL, NULL, NULL);
2320
2321     if (lcount < 0)
2322       {
2323       select_failed = TRUE;
2324       lcount = 1;
2325       }
2326
2327     /* Clean up any subprocesses that may have terminated. We need to do this
2328     here so that smtp_accept_max_per_host works when a connection to that host
2329     has completed, and we are about to accept a new one. When this code was
2330     later in the sequence, a new connection could be rejected, even though an
2331     old one had just finished. Preserve the errno from any select() failure for
2332     the use of the common select/accept error processing below. */
2333
2334     select_errno = errno;
2335     handle_ending_processes();
2336     errno = select_errno;
2337
2338 #ifndef DISABLE_TLS
2339     /* Create or rotate any required keys */
2340     tls_daemon_init();
2341 #endif
2342
2343     /* Loop for all the sockets that are currently ready to go. If select
2344     actually failed, we have set the count to 1 and select_failed=TRUE, so as
2345     to use the common error code for select/accept below. */
2346
2347     while (lcount-- > 0)
2348       {
2349       int accept_socket = -1;
2350
2351       if (!select_failed)
2352         {
2353         if (  daemon_notifier_fd >= 0
2354            && FD_ISSET(daemon_notifier_fd, &select_listen))
2355           {
2356           FD_CLR(daemon_notifier_fd, &select_listen);
2357           sigalrm_seen = daemon_notification();
2358           break;        /* to top of daemon loop */
2359           }
2360         for (int sk = 0; sk < listen_socket_count; sk++)
2361           if (FD_ISSET(listen_sockets[sk], &select_listen))
2362             {
2363             len = sizeof(accepted);
2364             accept_socket = accept(listen_sockets[sk],
2365               (struct sockaddr *)&accepted, &len);
2366             FD_CLR(listen_sockets[sk], &select_listen);
2367             break;
2368             }
2369         }
2370
2371       /* If select or accept has failed and this was not caused by an
2372       interruption, log the incident and try again. With asymmetric TCP/IP
2373       routing errors such as "No route to network" have been seen here. Also
2374       "connection reset by peer" has been seen. These cannot be classed as
2375       disastrous errors, but they could fill up a lot of log. The code in smail
2376       crashes the daemon after 10 successive failures of accept, on the grounds
2377       that some OS fail continuously. Exim originally followed suit, but this
2378       appears to have caused problems. Now it just keeps going, but instead of
2379       logging each error, it batches them up when they are continuous. */
2380
2381       if (accept_socket < 0 && errno != EINTR)
2382         {
2383         if (accept_retry_count == 0)
2384           {
2385           accept_retry_errno = errno;
2386           accept_retry_select_failed = select_failed;
2387           }
2388         else
2389           {
2390           if (errno != accept_retry_errno ||
2391               select_failed != accept_retry_select_failed ||
2392               accept_retry_count >= 50)
2393             {
2394             log_write(0, LOG_MAIN | ((accept_retry_count >= 50)? LOG_PANIC : 0),
2395               "%d %s() failure%s: %s",
2396               accept_retry_count,
2397               accept_retry_select_failed? "select" : "accept",
2398               (accept_retry_count == 1)? "" : "s",
2399               strerror(accept_retry_errno));
2400             log_close_all();
2401             accept_retry_count = 0;
2402             accept_retry_errno = errno;
2403             accept_retry_select_failed = select_failed;
2404             }
2405           }
2406         accept_retry_count++;
2407         }
2408
2409       else
2410         {
2411         if (accept_retry_count > 0)
2412           {
2413           log_write(0, LOG_MAIN, "%d %s() failure%s: %s",
2414             accept_retry_count,
2415             accept_retry_select_failed? "select" : "accept",
2416             (accept_retry_count == 1)? "" : "s",
2417             strerror(accept_retry_errno));
2418           log_close_all();
2419           accept_retry_count = 0;
2420           }
2421         }
2422
2423       /* If select/accept succeeded, deal with the connection. */
2424
2425       if (accept_socket >= 0)
2426         {
2427         if (inetd_wait_timeout)
2428           last_connection_time = time(NULL);
2429         handle_smtp_call(listen_sockets, listen_socket_count, accept_socket,
2430           (struct sockaddr *)&accepted);
2431         }
2432       }
2433     }
2434
2435   /* If not listening, then just sleep for the queue interval. If we woke
2436   up early the last time for some other signal, it won't matter because
2437   the alarm signal will wake at the right time. This code originally used
2438   sleep() but it turns out that on the FreeBSD system, sleep() is not inter-
2439   rupted by signals, so it wasn't waking up for SIGALRM or SIGCHLD. Luckily
2440   select() can be used as an interruptible sleep() on all versions of Unix. */
2441
2442   else
2443     {
2444     struct timeval tv;
2445     tv.tv_sec = queue_interval;
2446     tv.tv_usec = 0;
2447     select(0, NULL, NULL, NULL, &tv);
2448     handle_ending_processes();
2449     }
2450
2451   /* Re-enable the SIGCHLD handler if it has been run. It can't do it
2452   for itself, because it isn't doing the waiting itself. */
2453
2454   if (sigchld_seen)
2455     {
2456     sigchld_seen = FALSE;
2457     os_non_restarting_signal(SIGCHLD, main_sigchld_handler);
2458     }
2459
2460   /* Handle being woken by SIGHUP. We know at this point that the result
2461   of accept() has been dealt with, so we can re-exec exim safely, first
2462   closing the listening sockets so that they can be reused. Cancel any pending
2463   alarm in case it is just about to go off, and set SIGHUP to be ignored so
2464   that another HUP in quick succession doesn't clobber the new daemon before it
2465   gets going. All log files get closed by the close-on-exec flag; however, if
2466   the exec fails, we need to close the logs. */
2467
2468   if (sighup_seen)
2469     {
2470     log_write(0, LOG_MAIN, "pid %d: SIGHUP received: re-exec daemon",
2471       getpid());
2472     close_daemon_sockets(daemon_notifier_fd,
2473       listen_sockets, listen_socket_count);
2474     ALARM_CLR(0);
2475     signal(SIGHUP, SIG_IGN);
2476     sighup_argv[0] = exim_path;
2477     exim_nullstd();
2478     execv(CS exim_path, (char *const *)sighup_argv);
2479     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "pid %d: exec of %s failed: %s",
2480       getpid(), exim_path, strerror(errno));
2481     log_close_all();
2482     }
2483
2484   }   /* End of main loop */
2485
2486 /* Control never reaches here */
2487 }
2488
2489 /* vi: aw ai sw=2
2490 */
2491 /* End of exim_daemon.c */