0b39fd5559bd3402cd1e780d43554db9a5951769
[exim.git] / src / src / daemon.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* Copyright (c) The Exim Maintainers 2020 */
7 /* See the file NOTICE for conditions of use and distribution. */
8
9 /* Functions concerned with running Exim as a daemon */
10
11
12 #include "exim.h"
13
14
15 /* Structure for holding data for each SMTP connection */
16
17 typedef struct smtp_slot {
18   pid_t pid;                       /* pid of the spawned reception process */
19   uschar *host_address;            /* address of the client host */
20 } smtp_slot;
21
22 /* An empty slot for initializing (Standard C does not allow constructor
23 expressions in assignments except as initializers in declarations). */
24
25 static smtp_slot empty_smtp_slot = { .pid = 0, .host_address = NULL };
26
27
28
29 /*************************************************
30 *               Local static variables           *
31 *************************************************/
32
33 static SIGNAL_BOOL sigchld_seen;
34 static SIGNAL_BOOL sighup_seen;
35 static SIGNAL_BOOL sigterm_seen;
36
37 static int   accept_retry_count = 0;
38 static int   accept_retry_errno;
39 static BOOL  accept_retry_select_failed;
40
41 static int   queue_run_count = 0;
42 static pid_t *queue_pid_slots = NULL;
43 static smtp_slot *smtp_slots = NULL;
44
45 static BOOL  write_pid = TRUE;
46
47
48
49 /*************************************************
50 *             SIGHUP Handler                     *
51 *************************************************/
52
53 /* All this handler does is to set a flag and re-enable the signal.
54
55 Argument: the signal number
56 Returns:  nothing
57 */
58
59 static void
60 sighup_handler(int sig)
61 {
62 sighup_seen = TRUE;
63 signal(SIGHUP, sighup_handler);
64 }
65
66
67
68 /*************************************************
69 *     SIGCHLD handler for main daemon process    *
70 *************************************************/
71
72 /* Don't re-enable the handler here, since we aren't doing the
73 waiting here. If the signal is re-enabled, there will just be an
74 infinite sequence of calls to this handler. The SIGCHLD signal is
75 used just as a means of waking up the daemon so that it notices
76 terminated subprocesses as soon as possible.
77
78 Argument: the signal number
79 Returns:  nothing
80 */
81
82 static void
83 main_sigchld_handler(int sig)
84 {
85 os_non_restarting_signal(SIGCHLD, SIG_DFL);
86 sigchld_seen = TRUE;
87 }
88
89
90 /* SIGTERM handler.  Try to get the damon pif file removed
91 before exiting. */
92
93 static void
94 main_sigterm_handler(int sig)
95 {
96 sigterm_seen = TRUE;
97 }
98
99
100
101
102 /*************************************************
103 *          Unexpected errors in SMTP calls       *
104 *************************************************/
105
106 /* This function just saves a bit of repetitious coding.
107
108 Arguments:
109   log_msg        Text of message to be logged
110   smtp_msg       Text of SMTP error message
111   was_errno      The failing errno
112
113 Returns:         nothing
114 */
115
116 static void
117 never_error(uschar *log_msg, uschar *smtp_msg, int was_errno)
118 {
119 uschar *emsg = was_errno <= 0
120   ? US"" : string_sprintf(": %s", strerror(was_errno));
121 log_write(0, LOG_MAIN|LOG_PANIC, "%s%s", log_msg, emsg);
122 if (smtp_out) smtp_printf("421 %s\r\n", FALSE, smtp_msg);
123 }
124
125
126
127
128 /*************************************************
129 *************************************************/
130
131 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
132 static void
133 unlink_notifier_socket(void)
134 {
135 uschar * s = expand_string(notifier_socket);
136 DEBUG(D_any) debug_printf("unlinking notifier socket %s\n", s);
137 Uunlink(s);
138 }
139 #endif
140
141
142 static void
143 close_daemon_sockets(int daemon_notifier_fd,
144   int * listen_sockets, int listen_socket_count)
145 {
146 if (daemon_notifier_fd >= 0)
147   {
148   (void) close(daemon_notifier_fd);
149   daemon_notifier_fd = -1;
150 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
151   unlink_notifier_socket();
152 #endif
153   }
154
155 for (int i = 0; i < listen_socket_count; i++) (void) close(listen_sockets[i]);
156 }
157
158
159 /*************************************************
160 *            Handle a connected SMTP call        *
161 *************************************************/
162
163 /* This function is called when an SMTP connection has been accepted.
164 If there are too many, give an error message and close down. Otherwise
165 spin off a sub-process to handle the call. The list of listening sockets
166 is required so that they can be closed in the sub-process. Take care not to
167 leak store in this process - reset the stacking pool at the end.
168
169 Arguments:
170   listen_sockets        sockets which are listening for incoming calls
171   listen_socket_count   count of listening sockets
172   accept_socket         socket of the current accepted call
173   accepted              socket information about the current call
174
175 Returns:            nothing
176 */
177
178 static void
179 handle_smtp_call(int *listen_sockets, int listen_socket_count,
180   int accept_socket, struct sockaddr *accepted)
181 {
182 pid_t pid;
183 union sockaddr_46 interface_sockaddr;
184 EXIM_SOCKLEN_T ifsize = sizeof(interface_sockaddr);
185 int dup_accept_socket = -1;
186 int max_for_this_host = 0;
187 int save_log_selector = *log_selector;
188 gstring * whofrom;
189
190 rmark reset_point = store_mark();
191
192 /* Make the address available in ASCII representation, and also fish out
193 the remote port. */
194
195 sender_host_address = host_ntoa(-1, accepted, NULL, &sender_host_port);
196 DEBUG(D_any) debug_printf("Connection request from %s port %d\n",
197   sender_host_address, sender_host_port);
198
199 /* Set up the output stream, check the socket has duplicated, and set up the
200 input stream. These operations fail only the exceptional circumstances. Note
201 that never_error() won't use smtp_out if it is NULL. */
202
203 if (!(smtp_out = fdopen(accept_socket, "wb")))
204   {
205   never_error(US"daemon: fdopen() for smtp_out failed", US"", errno);
206   goto ERROR_RETURN;
207   }
208
209 if ((dup_accept_socket = dup(accept_socket)) < 0)
210   {
211   never_error(US"daemon: couldn't dup socket descriptor",
212     US"Connection setup failed", errno);
213   goto ERROR_RETURN;
214   }
215
216 if (!(smtp_in = fdopen(dup_accept_socket, "rb")))
217   {
218   never_error(US"daemon: fdopen() for smtp_in failed",
219     US"Connection setup failed", errno);
220   goto ERROR_RETURN;
221   }
222
223 /* Get the data for the local interface address. Panic for most errors, but
224 "connection reset by peer" just means the connection went away. */
225
226 if (getsockname(accept_socket, (struct sockaddr *)(&interface_sockaddr),
227      &ifsize) < 0)
228   {
229   log_write(0, LOG_MAIN | ((errno == ECONNRESET)? 0 : LOG_PANIC),
230     "getsockname() failed: %s", strerror(errno));
231   smtp_printf("421 Local problem: getsockname() failed; please try again later\r\n", FALSE);
232   goto ERROR_RETURN;
233   }
234
235 interface_address = host_ntoa(-1, &interface_sockaddr, NULL, &interface_port);
236 DEBUG(D_interface) debug_printf("interface address=%s port=%d\n",
237   interface_address, interface_port);
238
239 /* Build a string identifying the remote host and, if requested, the port and
240 the local interface data. This is for logging; at the end of this function the
241 memory is reclaimed. */
242
243 whofrom = string_append(NULL, 3, "[", sender_host_address, "]");
244
245 if (LOGGING(incoming_port))
246   whofrom = string_fmt_append(whofrom, ":%d", sender_host_port);
247
248 if (LOGGING(incoming_interface))
249   whofrom = string_fmt_append(whofrom, " I=[%s]:%d",
250     interface_address, interface_port);
251
252 (void) string_from_gstring(whofrom);    /* Terminate the newly-built string */
253
254 /* Check maximum number of connections. We do not check for reserved
255 connections or unacceptable hosts here. That is done in the subprocess because
256 it might take some time. */
257
258 if (smtp_accept_max > 0 && smtp_accept_count >= smtp_accept_max)
259   {
260   DEBUG(D_any) debug_printf("rejecting SMTP connection: count=%d max=%d\n",
261     smtp_accept_count, smtp_accept_max);
262   smtp_printf("421 Too many concurrent SMTP connections; "
263     "please try again later.\r\n", FALSE);
264   log_write(L_connection_reject,
265             LOG_MAIN, "Connection from %s refused: too many connections",
266     whofrom->s);
267   goto ERROR_RETURN;
268   }
269
270 /* If a load limit above which only reserved hosts are acceptable is defined,
271 get the load average here, and if there are in fact no reserved hosts, do
272 the test right away (saves a fork). If there are hosts, do the check in the
273 subprocess because it might take time. */
274
275 if (smtp_load_reserve >= 0)
276   {
277   load_average = OS_GETLOADAVG();
278   if (smtp_reserve_hosts == NULL && load_average > smtp_load_reserve)
279     {
280     DEBUG(D_any) debug_printf("rejecting SMTP connection: load average = %.2f\n",
281       (double)load_average/1000.0);
282     smtp_printf("421 Too much load; please try again later.\r\n", FALSE);
283     log_write(L_connection_reject,
284               LOG_MAIN, "Connection from %s refused: load average = %.2f",
285       whofrom->s, (double)load_average/1000.0);
286     goto ERROR_RETURN;
287     }
288   }
289
290 /* Check that one specific host (strictly, IP address) is not hogging
291 resources. This is done here to prevent a denial of service attack by someone
292 forcing you to fork lots of times before denying service. The value of
293 smtp_accept_max_per_host is a string which is expanded. This makes it possible
294 to provide host-specific limits according to $sender_host address, but because
295 this is in the daemon mainline, only fast expansions (such as inline address
296 checks) should be used. The documentation is full of warnings. */
297
298 if (smtp_accept_max_per_host)
299   {
300   uschar *expanded = expand_string(smtp_accept_max_per_host);
301   if (!expanded)
302     {
303     if (!f.expand_string_forcedfail)
304       log_write(0, LOG_MAIN|LOG_PANIC, "expansion of smtp_accept_max_per_host "
305         "failed for %s: %s", whofrom->s, expand_string_message);
306     }
307   /* For speed, interpret a decimal number inline here */
308   else
309     {
310     uschar *s = expanded;
311     while (isdigit(*s))
312       max_for_this_host = max_for_this_host * 10 + *s++ - '0';
313     if (*s)
314       log_write(0, LOG_MAIN|LOG_PANIC, "expansion of smtp_accept_max_per_host "
315         "for %s contains non-digit: %s", whofrom->s, expanded);
316     }
317   }
318
319 /* If we have fewer connections than max_for_this_host, we can skip the tedious
320 per host_address checks. Note that at this stage smtp_accept_count contains the
321 count of *other* connections, not including this one. */
322
323 if (max_for_this_host > 0 && smtp_accept_count >= max_for_this_host)
324   {
325   int host_accept_count = 0;
326   int other_host_count = 0;    /* keep a count of non matches to optimise */
327
328   for (int i = 0; i < smtp_accept_max; ++i)
329     if (smtp_slots[i].host_address)
330       {
331       if (Ustrcmp(sender_host_address, smtp_slots[i].host_address) == 0)
332        host_accept_count++;
333       else
334        other_host_count++;
335
336       /* Testing all these strings is expensive - see if we can drop out
337       early, either by hitting the target, or finding there are not enough
338       connections left to make the target. */
339
340       if (  host_accept_count >= max_for_this_host
341          || smtp_accept_count - other_host_count < max_for_this_host)
342        break;
343       }
344
345   if (host_accept_count >= max_for_this_host)
346     {
347     DEBUG(D_any) debug_printf("rejecting SMTP connection: too many from this "
348       "IP address: count=%d max=%d\n",
349       host_accept_count, max_for_this_host);
350     smtp_printf("421 Too many concurrent SMTP connections "
351       "from this IP address; please try again later.\r\n", FALSE);
352     log_write(L_connection_reject,
353               LOG_MAIN, "Connection from %s refused: too many connections "
354       "from that IP address", whofrom->s);
355     search_tidyup();
356     goto ERROR_RETURN;
357     }
358   }
359
360 /* OK, the connection count checks have been passed. Before we can fork the
361 accepting process, we must first log the connection if requested. This logging
362 used to happen in the subprocess, but doing that means that the value of
363 smtp_accept_count can be out of step by the time it is logged. So we have to do
364 the logging here and accept the performance cost. Note that smtp_accept_count
365 hasn't yet been incremented to take account of this connection.
366
367 In order to minimize the cost (because this is going to happen for every
368 connection), do a preliminary selector test here. This saves ploughing through
369 the generalized logging code each time when the selector is false. If the
370 selector is set, check whether the host is on the list for logging. If not,
371 arrange to unset the selector in the subprocess. */
372
373 if (LOGGING(smtp_connection))
374   {
375   uschar *list = hosts_connection_nolog;
376   memset(sender_host_cache, 0, sizeof(sender_host_cache));
377   if (list != NULL && verify_check_host(&list) == OK)
378     save_log_selector &= ~L_smtp_connection;
379   else
380     log_write(L_smtp_connection, LOG_MAIN, "SMTP connection from %s "
381       "(TCP/IP connection count = %d)", whofrom->s, smtp_accept_count + 1);
382   }
383
384 /* Now we can fork the accepting process; do a lookup tidy, just in case any
385 expansion above did a lookup. */
386
387 search_tidyup();
388 pid = exim_fork(US"daemon-accept");
389
390 /* Handle the child process */
391
392 if (pid == 0)
393   {
394   int queue_only_reason = 0;
395   int old_pool = store_pool;
396   int save_debug_selector = debug_selector;
397   BOOL local_queue_only;
398   BOOL session_local_queue_only;
399   #ifdef SA_NOCLDWAIT
400   struct sigaction act;
401   #endif
402
403   smtp_accept_count++;    /* So that it includes this process */
404
405   /* May have been modified for the subprocess */
406
407   *log_selector = save_log_selector;
408
409   /* Get the local interface address into permanent store */
410
411   store_pool = POOL_PERM;
412   interface_address = string_copy(interface_address);
413   store_pool = old_pool;
414
415   /* Check for a tls-on-connect port */
416
417   if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
418
419   /* Expand smtp_active_hostname if required. We do not do this any earlier,
420   because it may depend on the local interface address (indeed, that is most
421   likely what it depends on.) */
422
423   smtp_active_hostname = primary_hostname;
424   if (raw_active_hostname)
425     {
426     uschar * nah = expand_string(raw_active_hostname);
427     if (!nah)
428       {
429       if (!f.expand_string_forcedfail)
430         {
431         log_write(0, LOG_MAIN|LOG_PANIC, "failed to expand \"%s\" "
432           "(smtp_active_hostname): %s", raw_active_hostname,
433           expand_string_message);
434         smtp_printf("421 Local configuration error; "
435           "please try again later.\r\n", FALSE);
436         mac_smtp_fflush();
437         search_tidyup();
438         exim_underbar_exit(EXIT_FAILURE);
439         }
440       }
441     else if (*nah) smtp_active_hostname = nah;
442     }
443
444   /* Initialize the queueing flags */
445
446   queue_check_only();
447   session_local_queue_only = queue_only;
448
449   /* Close the listening sockets, and set the SIGCHLD handler to SIG_IGN.
450   We also attempt to set things up so that children are automatically reaped,
451   but just in case this isn't available, there's a paranoid waitpid() in the
452   loop too (except for systems where we are sure it isn't needed). See the more
453   extensive comment before the reception loop in exim.c for a fuller
454   explanation of this logic. */
455
456   close_daemon_sockets(daemon_notifier_fd, listen_sockets, listen_socket_count);
457
458   /* Set FD_CLOEXEC on the SMTP socket. We don't want any rogue child processes
459   to be able to communicate with them, under any circumstances. */
460   (void)fcntl(accept_socket, F_SETFD,
461               fcntl(accept_socket, F_GETFD) | FD_CLOEXEC);
462   (void)fcntl(dup_accept_socket, F_SETFD,
463               fcntl(dup_accept_socket, F_GETFD) | FD_CLOEXEC);
464
465   #ifdef SA_NOCLDWAIT
466   act.sa_handler = SIG_IGN;
467   sigemptyset(&(act.sa_mask));
468   act.sa_flags = SA_NOCLDWAIT;
469   sigaction(SIGCHLD, &act, NULL);
470   #else
471   signal(SIGCHLD, SIG_IGN);
472   #endif
473   signal(SIGTERM, SIG_DFL);
474
475   /* Attempt to get an id from the sending machine via the RFC 1413
476   protocol. We do this in the sub-process in order not to hold up the
477   main process if there is any delay. Then set up the fullhost information
478   in case there is no HELO/EHLO.
479
480   If debugging is enabled only for the daemon, we must turn if off while
481   finding the id, but turn it on again afterwards so that information about the
482   incoming connection is output. */
483
484   if (f.debug_daemon) debug_selector = 0;
485   verify_get_ident(IDENT_PORT);
486   host_build_sender_fullhost();
487   debug_selector = save_debug_selector;
488
489   DEBUG(D_any)
490     debug_printf("Process %d is handling incoming connection from %s\n",
491       (int)getpid(), sender_fullhost);
492
493   /* Now disable debugging permanently if it's required only for the daemon
494   process. */
495
496   if (f.debug_daemon) debug_selector = 0;
497
498   /* If there are too many child processes for immediate delivery,
499   set the session_local_queue_only flag, which is initialized from the
500   configured value and may therefore already be TRUE. Leave logging
501   till later so it will have a message id attached. Note that there is no
502   possibility of re-calculating this per-message, because the value of
503   smtp_accept_count does not change in this subprocess. */
504
505   if (smtp_accept_queue > 0 && smtp_accept_count > smtp_accept_queue)
506     {
507     session_local_queue_only = TRUE;
508     queue_only_reason = 1;
509     }
510
511   /* Handle the start of the SMTP session, then loop, accepting incoming
512   messages from the SMTP connection. The end will come at the QUIT command,
513   when smtp_setup_msg() returns 0. A break in the connection causes the
514   process to die (see accept.c).
515
516   NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
517   because a log line has already been written for all its failure exists
518   (usually "connection refused: <reason>") and writing another one is
519   unnecessary clutter. */
520
521   if (!smtp_start_session())
522     {
523     mac_smtp_fflush();
524     search_tidyup();
525     exim_underbar_exit(EXIT_SUCCESS);
526     }
527
528   for (;;)
529     {
530     int rc;
531     message_id[0] = 0;            /* Clear out any previous message_id */
532     reset_point = store_mark();   /* Save current store high water point */
533
534     DEBUG(D_any)
535       debug_printf("Process %d is ready for new message\n", (int)getpid());
536
537     /* Smtp_setup_msg() returns 0 on QUIT or if the call is from an
538     unacceptable host or if an ACL "drop" command was triggered, -1 on
539     connection lost, and +1 on validly reaching DATA. Receive_msg() almost
540     always returns TRUE when smtp_input is true; just retry if no message was
541     accepted (can happen for invalid message parameters). However, it can yield
542     FALSE if the connection was forcibly dropped by the DATA ACL. */
543
544     if ((rc = smtp_setup_msg()) > 0)
545       {
546       BOOL ok = receive_msg(FALSE);
547       search_tidyup();                    /* Close cached databases */
548       if (!ok)                            /* Connection was dropped */
549         {
550         cancel_cutthrough_connection(TRUE, US"receive dropped");
551         mac_smtp_fflush();
552         smtp_log_no_mail();               /* Log no mail if configured */
553         exim_underbar_exit(EXIT_SUCCESS);
554         }
555       if (message_id[0] == 0) continue;   /* No message was accepted */
556       }
557     else                                /* bad smtp_setup_msg() */
558       {
559       if (smtp_out)
560         {
561         int fd = fileno(smtp_in);
562         uschar buf[128];
563
564         mac_smtp_fflush();
565         /* drain socket, for clean TCP FINs */
566         if (fcntl(fd, F_SETFL, O_NONBLOCK) == 0)
567           for(int i = 16; read(fd, buf, sizeof(buf)) > 0 && i > 0; ) i--;
568         }
569       cancel_cutthrough_connection(TRUE, US"message setup dropped");
570       search_tidyup();
571       smtp_log_no_mail();                 /* Log no mail if configured */
572
573       /*XXX should we pause briefly, hoping that the client will be the
574       active TCP closer hence get the TCP_WAIT endpoint? */
575       DEBUG(D_receive) debug_printf("SMTP>>(close on process exit)\n");
576       exim_underbar_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
577       }
578
579     /* Show the recipients when debugging */
580
581     DEBUG(D_receive)
582       {
583       if (sender_address)
584         debug_printf("Sender: %s\n", sender_address);
585       if (recipients_list)
586         {
587         debug_printf("Recipients:\n");
588         for (int i = 0; i < recipients_count; i++)
589           debug_printf("  %s\n", recipients_list[i].address);
590         }
591       }
592
593     /* A message has been accepted. Clean up any previous delivery processes
594     that have completed and are defunct, on systems where they don't go away
595     by themselves (see comments when setting SIG_IGN above). On such systems
596     (if any) these delivery processes hang around after termination until
597     the next message is received. */
598
599     #ifndef SIG_IGN_WORKS
600     while (waitpid(-1, NULL, WNOHANG) > 0);
601     #endif
602
603     /* Reclaim up the store used in accepting this message */
604
605       {
606       int r = receive_messagecount;
607       BOOL q = f.queue_only_policy;
608       smtp_reset(reset_point);
609       reset_point = NULL;
610       f.queue_only_policy = q;
611       receive_messagecount = r;
612       }
613
614     /* If queue_only is set or if there are too many incoming connections in
615     existence, session_local_queue_only will be TRUE. If it is not, check
616     whether we have received too many messages in this session for immediate
617     delivery. */
618
619     if (!session_local_queue_only &&
620         smtp_accept_queue_per_connection > 0 &&
621         receive_messagecount > smtp_accept_queue_per_connection)
622       {
623       session_local_queue_only = TRUE;
624       queue_only_reason = 2;
625       }
626
627     /* Initialize local_queue_only from session_local_queue_only. If it is not
628     true, and queue_only_load is set, check that the load average is below it.
629     If local_queue_only is set by this means, we also set if for the session if
630     queue_only_load_latch is true (the default). This means that, once set,
631     local_queue_only remains set for any subsequent messages on the same SMTP
632     connection. This is a deliberate choice; even though the load average may
633     fall, it doesn't seem right to deliver later messages on the same call when
634     not delivering earlier ones. However, the are special circumstances such as
635     very long-lived connections from scanning appliances where this is not the
636     best strategy. In such cases, queue_only_load_latch should be set false. */
637
638     if (  !(local_queue_only = session_local_queue_only)
639        && queue_only_load >= 0
640        && (local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load)
641        )
642       {
643       queue_only_reason = 3;
644       if (queue_only_load_latch) session_local_queue_only = TRUE;
645       }
646
647     /* Log the queueing here, when it will get a message id attached, but
648     not if queue_only is set (case 0). */
649
650     if (local_queue_only) switch(queue_only_reason)
651       {
652       case 1: log_write(L_delay_delivery,
653                 LOG_MAIN, "no immediate delivery: too many connections "
654                 "(%d, max %d)", smtp_accept_count, smtp_accept_queue);
655               break;
656
657       case 2: log_write(L_delay_delivery,
658                 LOG_MAIN, "no immediate delivery: more than %d messages "
659                 "received in one connection", smtp_accept_queue_per_connection);
660               break;
661
662       case 3: log_write(L_delay_delivery,
663                 LOG_MAIN, "no immediate delivery: load average %.2f",
664                 (double)load_average/1000.0);
665               break;
666       }
667
668     /* If a delivery attempt is required, spin off a new process to handle it.
669     If we are not root, we have to re-exec exim unless deliveries are being
670     done unprivileged. */
671
672     else if (  (!f.queue_only_policy || f.queue_smtp)
673             && !f.deliver_freeze)
674       {
675       pid_t dpid;
676
677       /* We used to flush smtp_out before forking so that buffered data was not
678       duplicated, but now we want to pipeline the responses for data and quit.
679       Instead, hard-close the fd underlying smtp_out right after fork to discard
680       the data buffer. */
681
682       if ((dpid = exim_fork(US"daemon-accept-delivery")) == 0)
683         {
684         (void)fclose(smtp_in);
685         (void)close(fileno(smtp_out));
686         (void)fclose(smtp_out);
687
688         /* Don't ever molest the parent's SSL connection, but do clean up
689         the data structures if necessary. */
690
691 #ifndef DISABLE_TLS
692         tls_close(NULL, TLS_NO_SHUTDOWN);
693 #endif
694
695         /* Reset SIGHUP and SIGCHLD in the child in both cases. */
696
697         signal(SIGHUP,  SIG_DFL);
698         signal(SIGCHLD, SIG_DFL);
699         signal(SIGTERM, SIG_DFL);
700
701         if (geteuid() != root_uid && !deliver_drop_privilege)
702           {
703           signal(SIGALRM, SIG_DFL);
704           delivery_re_exec(CEE_EXEC_PANIC);
705           /* Control does not return here. */
706           }
707
708         /* No need to re-exec; SIGALRM remains set to the default handler */
709
710         (void) deliver_message(message_id, FALSE, FALSE);
711         search_tidyup();
712         exim_underbar_exit(EXIT_SUCCESS);
713         }
714
715       if (dpid > 0)
716         {
717         release_cutthrough_connection(US"passed for delivery");
718         DEBUG(D_any) debug_printf("forked delivery process %d\n", (int)dpid);
719         }
720       else
721         {
722         cancel_cutthrough_connection(TRUE, US"delivery fork failed");
723         log_write(0, LOG_MAIN|LOG_PANIC, "daemon: delivery process fork "
724           "failed: %s", strerror(errno));
725         }
726       }
727     }
728   }
729
730
731 /* Carrying on in the parent daemon process... Can't do much if the fork
732 failed. Otherwise, keep count of the number of accepting processes and
733 remember the pid for ticking off when the child completes. */
734
735 if (pid < 0)
736   never_error(US"daemon: accept process fork failed", US"Fork failed", errno);
737 else
738   {
739   for (int i = 0; i < smtp_accept_max; ++i)
740     if (smtp_slots[i].pid <= 0)
741       {
742       smtp_slots[i].pid = pid;
743       /* Connection closes come asyncronously, so we cannot stack this store */
744       if (smtp_accept_max_per_host)
745         smtp_slots[i].host_address = string_copy_malloc(sender_host_address);
746       smtp_accept_count++;
747       break;
748       }
749   DEBUG(D_any) debug_printf("%d SMTP accept process%s running\n",
750     smtp_accept_count, smtp_accept_count == 1 ? "" : "es");
751   }
752
753 /* Get here via goto in error cases */
754
755 ERROR_RETURN:
756
757 /* Close the streams associated with the socket which will also close the
758 socket fds in this process. We can't do anything if fclose() fails, but
759 logging brings it to someone's attention. However, "connection reset by peer"
760 isn't really a problem, so skip that one. On Solaris, a dropped connection can
761 manifest itself as a broken pipe, so drop that one too. If the streams don't
762 exist, something went wrong while setting things up. Make sure the socket
763 descriptors are closed, in order to drop the connection. */
764
765 if (smtp_out)
766   {
767   if (fclose(smtp_out) != 0 && errno != ECONNRESET && errno != EPIPE)
768     log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fclose(smtp_out) failed: %s",
769       strerror(errno));
770   smtp_out = NULL;
771   }
772 else (void)close(accept_socket);
773
774 if (smtp_in)
775   {
776   if (fclose(smtp_in) != 0 && errno != ECONNRESET && errno != EPIPE)
777     log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fclose(smtp_in) failed: %s",
778       strerror(errno));
779   smtp_in = NULL;
780   }
781 else (void)close(dup_accept_socket);
782
783 /* Release any store used in this process, including the store used for holding
784 the incoming host address and an expanded active_hostname. */
785
786 log_close_all();
787 interface_address =
788 sender_host_address = NULL;
789 store_reset(reset_point);
790 sender_host_address = NULL;
791 }
792
793
794
795
796 /*************************************************
797 *       Check wildcard listen special cases      *
798 *************************************************/
799
800 /* This function is used when binding and listening on lists of addresses and
801 ports. It tests for special cases of wildcard listening, when IPv4 and IPv6
802 sockets may interact in different ways in different operating systems. It is
803 passed an error number, the list of listening addresses, and the current
804 address. Two checks are available: for a previous wildcard IPv6 address, or for
805 a following wildcard IPv4 address, in both cases on the same port.
806
807 In practice, pairs of wildcard addresses should be adjacent in the address list
808 because they are sorted that way below.
809
810 Arguments:
811   eno            the error number
812   addresses      the list of addresses
813   ipa            the current IP address
814   back           if TRUE, check for previous wildcard IPv6 address
815                  if FALSE, check for a following wildcard IPv4 address
816
817 Returns:         TRUE or FALSE
818 */
819
820 static BOOL
821 check_special_case(int eno, ip_address_item *addresses, ip_address_item *ipa,
822   BOOL back)
823 {
824 ip_address_item *ipa2;
825
826 /* For the "back" case, if the failure was "address in use" for a wildcard IPv4
827 address, seek a previous IPv6 wildcard address on the same port. As it is
828 previous, it must have been successfully bound and be listening. Flag it as a
829 "6 including 4" listener. */
830
831 if (back)
832   {
833   if (eno != EADDRINUSE || ipa->address[0] != 0) return FALSE;
834   for (ipa2 = addresses; ipa2 != ipa; ipa2 = ipa2->next)
835     {
836     if (ipa2->address[1] == 0 && ipa2->port == ipa->port)
837       {
838       ipa2->v6_include_v4 = TRUE;
839       return TRUE;
840       }
841     }
842   }
843
844 /* For the "forward" case, if the current address is a wildcard IPv6 address,
845 we seek a following wildcard IPv4 address on the same port. */
846
847 else
848   {
849   if (ipa->address[0] != ':' || ipa->address[1] != 0) return FALSE;
850   for (ipa2 = ipa->next; ipa2 != NULL; ipa2 = ipa2->next)
851     if (ipa2->address[0] == 0 && ipa->port == ipa2->port) return TRUE;
852   }
853
854 return FALSE;
855 }
856
857
858
859
860 /*************************************************
861 *         Handle terminating subprocesses        *
862 *************************************************/
863
864 /* Handle the termination of child processes. Theoretically, this need be done
865 only when sigchld_seen is TRUE, but rumour has it that some systems lose
866 SIGCHLD signals at busy times, so to be on the safe side, this function is
867 called each time round. It shouldn't be too expensive.
868
869 Arguments:  none
870 Returns:    nothing
871 */
872
873 static void
874 handle_ending_processes(void)
875 {
876 int status;
877 pid_t pid;
878
879 while ((pid = waitpid(-1, &status, WNOHANG)) > 0)
880   {
881   DEBUG(D_any)
882     {
883     debug_printf("child %d ended: status=0x%x\n", (int)pid, status);
884 #ifdef WCOREDUMP
885     if (WIFEXITED(status))
886       debug_printf("  normal exit, %d\n", WEXITSTATUS(status));
887     else if (WIFSIGNALED(status))
888       debug_printf("  signal exit, signal %d%s\n", WTERMSIG(status),
889           WCOREDUMP(status) ? " (core dumped)" : "");
890 #endif
891     }
892
893   /* If it's a listening daemon for which we are keeping track of individual
894   subprocesses, deal with an accepting process that has terminated. */
895
896   if (smtp_slots)
897     {
898     int i;
899     for (i = 0; i < smtp_accept_max; i++)
900       if (smtp_slots[i].pid == pid)
901         {
902         if (smtp_slots[i].host_address)
903           store_free(smtp_slots[i].host_address);
904         smtp_slots[i] = empty_smtp_slot;
905         if (--smtp_accept_count < 0) smtp_accept_count = 0;
906         DEBUG(D_any) debug_printf("%d SMTP accept process%s now running\n",
907           smtp_accept_count, (smtp_accept_count == 1)? "" : "es");
908         break;
909         }
910     if (i < smtp_accept_max) continue;  /* Found an accepting process */
911     }
912
913   /* If it wasn't an accepting process, see if it was a queue-runner
914   process that we are tracking. */
915
916   if (queue_pid_slots)
917     {
918     int max = atoi(CS expand_string(queue_run_max));
919     for (int i = 0; i < max; i++)
920       if (queue_pid_slots[i] == pid)
921         {
922         queue_pid_slots[i] = 0;
923         if (--queue_run_count < 0) queue_run_count = 0;
924         DEBUG(D_any) debug_printf("%d queue-runner process%s now running\n",
925           queue_run_count, (queue_run_count == 1)? "" : "es");
926         break;
927         }
928     }
929   }
930 }
931
932
933
934 static void
935 set_pid_file_path(void)
936 {
937 if (override_pid_file_path)
938   pid_file_path = override_pid_file_path;
939
940 if (!*pid_file_path)
941   pid_file_path = string_sprintf("%s/exim-daemon.pid", spool_directory);
942
943 if (pid_file_path[0] != '/')
944   log_write(0, LOG_PANIC_DIE, "pid file path %s must be absolute\n", pid_file_path);
945 }
946
947
948 /* Remove the daemon's pidfile.  Note: runs with root privilege,
949 as a direct child of the daemon.  Does not return. */
950
951 void
952 delete_pid_file(void)
953 {
954 uschar * daemon_pid = string_sprintf("%d\n", (int)getppid());
955 FILE * f;
956
957 set_pid_file_path();
958 if ((f = Ufopen(pid_file_path, "rb")))
959   {
960   if (  fgets(CS big_buffer, big_buffer_size, f)
961         && Ustrcmp(daemon_pid, big_buffer) == 0
962      )
963     if (Uunlink(pid_file_path) == 0)
964       {
965       DEBUG(D_any)
966         debug_printf("%s unlink: %s\n", pid_file_path, strerror(errno));
967       }
968     else
969       DEBUG(D_any)
970         debug_printf("unlinked %s\n", pid_file_path);
971   fclose(f);
972   }
973 else
974   DEBUG(D_any)
975     debug_printf("%s\n", string_open_failed("pid file %s", pid_file_path));
976 exim_exit(EXIT_SUCCESS);
977 }
978
979
980 /* Called by the daemon; exec a child to get the pid file deleted
981 since we may require privs for the containing directory */
982
983 static void
984 daemon_die(void)
985 {
986 int pid;
987
988 DEBUG(D_any) debug_printf("SIGTERM seen\n");
989 #if !defined(DISABLE_TLS) && (defined(EXIM_HAVE_INOTIFY) || defined(EXIM_HAVE_KEVENT))
990 tls_watch_invalidate();
991 #endif
992
993 if (daemon_notifier_fd >= 0)
994   {
995   close(daemon_notifier_fd);
996   daemon_notifier_fd = -1;
997 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
998   unlink_notifier_socket();
999 #endif
1000   }
1001
1002 if (f.running_in_test_harness || write_pid)
1003   {
1004   if ((pid = exim_fork(US"daemon-del-pidfile")) == 0)
1005     {
1006     if (override_pid_file_path)
1007       (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, 3,
1008         "-oP", override_pid_file_path, "-oPX");
1009     else
1010       (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, 1, "-oPX");
1011
1012     /* Control never returns here. */
1013     }
1014   if (pid > 0)
1015     child_close(pid, 1);
1016   }
1017 exim_exit(EXIT_SUCCESS);
1018 }
1019
1020
1021 /*************************************************
1022 *       Listener socket for local work prompts   *
1023 *************************************************/
1024
1025 static void
1026 daemon_notifier_socket(void)
1027 {
1028 int fd;
1029 const uschar * where;
1030 struct sockaddr_un sa_un = {.sun_family = AF_UNIX};
1031 int len;
1032
1033 if (!notifier_socket || !*notifier_socket)
1034   {
1035   DEBUG(D_any) debug_printf("-oY used so not creating notifier socket\n");
1036   return;
1037   }
1038 if (override_local_interfaces && !override_pid_file_path)
1039   {
1040   DEBUG(D_any)
1041     debug_printf("-oX used without -oP so not creating notifier socket\n");
1042   return;
1043   }
1044
1045 DEBUG(D_any) debug_printf("creating notifier socket\n");
1046
1047 #ifdef SOCK_CLOEXEC
1048 if ((fd = socket(PF_UNIX, SOCK_DGRAM|SOCK_CLOEXEC, 0)) < 0)
1049   { where = US"socket"; goto bad; }
1050 #else
1051 if ((fd = socket(PF_UNIX, SOCK_DGRAM, 0)) < 0)
1052   { where = US"socket"; goto bad; }
1053 (void)fcntl(fd, F_SETFD, fcntl(fd, F_GETFD) | FD_CLOEXEC);
1054 #endif
1055
1056 #ifdef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1057 sa_un.sun_path[0] = 0;  /* Abstract local socket addr - Linux-specific? */
1058 len = offsetof(struct sockaddr_un, sun_path) + 1
1059   + snprintf(sa_un.sun_path+1, sizeof(sa_un.sun_path)-1, "%s",
1060               expand_string(notifier_socket));
1061 DEBUG(D_any) debug_printf(" @%s\n", sa_un.sun_path+1);
1062 #else                   /* filesystem-visible and persistent; will neeed removal */
1063 len = offsetof(struct sockaddr_un, sun_path)
1064   + snprintf(sa_un.sun_path, sizeof(sa_un.sun_path), "%s",
1065               expand_string(notifier_socket));
1066 DEBUG(D_any) debug_printf(" %s\n", sa_un.sun_path);
1067 #endif
1068
1069 if (bind(fd, (const struct sockaddr *)&sa_un, len) < 0)
1070   { where = US"bind"; goto bad; }
1071
1072 #ifdef SO_PASSCRED              /* Linux */
1073 if (setsockopt(fd, SOL_SOCKET, SO_PASSCRED, &on, sizeof(on)) < 0)
1074   { where = US"SO_PASSCRED"; goto bad2; }
1075 #elif defined(LOCAL_CREDS)      /* FreeBSD-ish */
1076 if (setsockopt(fd, 0, LOCAL_CREDS, &on, sizeof(on)) < 0)
1077   { where = US"LOCAL_CREDS"; goto bad2; }
1078 #endif
1079
1080 /* debug_printf("%s: fd %d\n", __FUNCTION__, fd); */
1081 daemon_notifier_fd = fd;
1082 return;
1083
1084 bad2:
1085 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1086   Uunlink(sa_un.sun_path);
1087 #endif
1088 bad:
1089   log_write(0, LOG_MAIN|LOG_PANIC, "%s %s: %s",
1090     __FUNCTION__, where, strerror(errno));
1091   close(fd);
1092   return;
1093 }
1094
1095
1096 static uschar queuerun_msgid[MESSAGE_ID_LENGTH+1];
1097
1098 /* Return TRUE if a sigalrm should be emulated */
1099 static BOOL
1100 daemon_notification(void)
1101 {
1102 uschar buf[256], cbuf[256];
1103 struct sockaddr_un sa_un;
1104 struct iovec iov = {.iov_base = buf, .iov_len = sizeof(buf)-1};
1105 struct msghdr msg = { .msg_name = &sa_un,
1106                       .msg_namelen = sizeof(sa_un),
1107                       .msg_iov = &iov,
1108                       .msg_iovlen = 1,
1109                       .msg_control = cbuf,
1110                       .msg_controllen = sizeof(cbuf)
1111                     };
1112 ssize_t sz;
1113
1114 buf[sizeof(buf)-1] = 0;
1115 if ((sz = recvmsg(daemon_notifier_fd, &msg, 0)) <= 0) return FALSE;
1116 if (sz >= sizeof(buf)) return FALSE;
1117
1118 #ifdef notdef
1119 debug_printf("addrlen %d\n", msg.msg_namelen);
1120 #endif
1121 DEBUG(D_queue_run) debug_printf("%s from addr '%s%.*s'\n", __FUNCTION__,
1122   *sa_un.sun_path ? "" : "@",
1123   (int)msg.msg_namelen - (*sa_un.sun_path ? 0 : 1),
1124   sa_un.sun_path + (*sa_un.sun_path ? 0 : 1));
1125
1126 /* Refuse to handle the item unless the peer has good credentials */
1127 #ifdef SCM_CREDENTIALS
1128 # define EXIM_SCM_CR_TYPE SCM_CREDENTIALS
1129 #elif defined(LOCAL_CREDS) && defined(SCM_CREDS)
1130 # define EXIM_SCM_CR_TYPE SCM_CREDS
1131 #else
1132         /* The OS has no way to get the creds of the caller (for a unix/datagram socket.
1133         Punt; don't try to check. */
1134 #endif
1135
1136 #ifdef EXIM_SCM_CR_TYPE
1137 for (struct cmsghdr * cp = CMSG_FIRSTHDR(&msg);
1138      cp;
1139      cp = CMSG_NXTHDR(&msg, cp))
1140   if (cp->cmsg_level == SOL_SOCKET && cp->cmsg_type == EXIM_SCM_CR_TYPE)
1141   {
1142 # ifdef SCM_CREDENTIALS                                 /* Linux */
1143   struct ucred * cr = (struct ucred *) CMSG_DATA(cp);
1144   if (cr->uid && cr->uid != exim_uid)
1145     {
1146     DEBUG(D_queue_run) debug_printf("%s: sender creds pid %d uid %d gid %d\n",
1147       __FUNCTION__, (int)cr->pid, (int)cr->uid, (int)cr->gid);
1148     return FALSE;
1149     }
1150 # elif defined(LOCAL_CREDS)                             /* BSD-ish */
1151   struct sockcred * cr = (struct sockcred *) CMSG_DATA(cp);
1152   if (cr->sc_uid && cr->sc_uid != exim_uid)
1153     {
1154     DEBUG(D_queue_run) debug_printf("%s: sender creds pid ??? uid %d gid %d\n",
1155       __FUNCTION__, (int)cr->sc_uid, (int)cr->sc_gid);
1156     return FALSE;
1157     }
1158 # endif
1159   break;
1160   }
1161 #endif
1162
1163 buf[sz] = 0;
1164 switch (buf[0])
1165   {
1166 #ifndef DISABLE_QUEUE_RAMP
1167   case NOTIFY_MSG_QRUN:
1168     /* this should be a message_id */
1169     DEBUG(D_queue_run)
1170       debug_printf("%s: qrunner trigger: %s\n", __FUNCTION__, buf+1);
1171     memcpy(queuerun_msgid, buf+1, MESSAGE_ID_LENGTH+1);
1172     return TRUE;
1173 #endif
1174
1175   case NOTIFY_QUEUE_SIZE_REQ:
1176     {
1177     uschar buf[16];
1178     int len = snprintf(CS buf, sizeof(buf), "%u", queue_count_cached());
1179
1180     DEBUG(D_queue_run)
1181       debug_printf("%s: queue size request: %s\n", __FUNCTION__, buf);
1182
1183     if (sendto(daemon_notifier_fd, buf, len, 0,
1184                 (const struct sockaddr *)&sa_un, msg.msg_namelen) < 0)
1185       log_write(0, LOG_MAIN|LOG_PANIC,
1186         "%s: sendto: %s\n", __FUNCTION__, strerror(errno));
1187     return FALSE;
1188     }
1189   }
1190 return FALSE;
1191 }
1192
1193
1194 /*************************************************
1195 *              Exim Daemon Mainline              *
1196 *************************************************/
1197
1198 /* The daemon can do two jobs, either of which is optional:
1199
1200 (1) Listens for incoming SMTP calls and spawns off a sub-process to handle
1201 each one. This is requested by the -bd option, with -oX specifying the SMTP
1202 port on which to listen (for testing).
1203
1204 (2) Spawns a queue-running process every so often. This is controlled by the
1205 -q option with a an interval time. (If no time is given, a single queue run
1206 is done from the main function, and control doesn't get here.)
1207
1208 Root privilege is required in order to attach to port 25. Some systems require
1209 it when calling socket() rather than bind(). To cope with all cases, we run as
1210 root for both socket() and bind(). Some systems also require root in order to
1211 write to the pid file directory. This function must therefore be called as root
1212 if it is to work properly in all circumstances. Once the socket is bound and
1213 the pid file written, root privilege is given up if there is an exim uid.
1214
1215 There are no arguments to this function, and it never returns. */
1216
1217 void
1218 daemon_go(void)
1219 {
1220 struct passwd *pw;
1221 int *listen_sockets = NULL;
1222 int listen_socket_count = 0;
1223 ip_address_item *addresses = NULL;
1224 time_t last_connection_time = (time_t)0;
1225 int local_queue_run_max = atoi(CS expand_string(queue_run_max));
1226
1227 process_purpose = US"daemon";
1228
1229 /* If any debugging options are set, turn on the D_pid bit so that all
1230 debugging lines get the pid added. */
1231
1232 DEBUG(D_any|D_v) debug_selector |= D_pid;
1233
1234 if (f.inetd_wait_mode)
1235   {
1236   listen_socket_count = 1;
1237   listen_sockets = store_get(sizeof(int), FALSE);
1238   (void) close(3);
1239   if (dup2(0, 3) == -1)
1240     log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1241         "failed to dup inetd socket safely away: %s", strerror(errno));
1242
1243   listen_sockets[0] = 3;
1244   (void) close(0);
1245   (void) close(1);
1246   (void) close(2);
1247   exim_nullstd();
1248
1249   if (debug_file == stderr)
1250     {
1251     /* need a call to log_write before call to open debug_file, so that
1252     log.c:file_path has been initialised.  This is unfortunate. */
1253     log_write(0, LOG_MAIN, "debugging Exim in inetd wait mode starting");
1254
1255     fclose(debug_file);
1256     debug_file = NULL;
1257     exim_nullstd(); /* re-open fd2 after we just closed it again */
1258     debug_logging_activate(US"-wait", NULL);
1259     }
1260
1261   DEBUG(D_any) debug_printf("running in inetd wait mode\n");
1262
1263   /* As per below, when creating sockets ourselves, we handle tcp_nodelay for
1264   our own buffering; we assume though that inetd set the socket REUSEADDR. */
1265
1266   if (tcp_nodelay)
1267     if (setsockopt(3, IPPROTO_TCP, TCP_NODELAY, US &on, sizeof(on)))
1268       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to set socket NODELAY: %s",
1269         strerror(errno));
1270   }
1271
1272
1273 if (f.inetd_wait_mode || f.daemon_listen)
1274   {
1275   /* If any option requiring a load average to be available during the
1276   reception of a message is set, call os_getloadavg() while we are root
1277   for those OS for which this is necessary the first time it is called (in
1278   order to perform an "open" on the kernel memory file). */
1279
1280   #ifdef LOAD_AVG_NEEDS_ROOT
1281   if (queue_only_load >= 0 || smtp_load_reserve >= 0 ||
1282        (deliver_queue_load_max >= 0 && deliver_drop_privilege))
1283     (void)os_getloadavg();
1284   #endif
1285   }
1286
1287
1288 /* Do the preparation for setting up a listener on one or more interfaces, and
1289 possible on various ports. This is controlled by the combination of
1290 local_interfaces (which can set IP addresses and ports) and daemon_smtp_port
1291 (which is a list of default ports to use for those items in local_interfaces
1292 that do not specify a port). The -oX command line option can be used to
1293 override one or both of these options.
1294
1295 If local_interfaces is not set, the default is to listen on all interfaces.
1296 When it is set, it can include "all IPvx interfaces" as an item. This is useful
1297 when different ports are in use.
1298
1299 It turns out that listening on all interfaces is messy in an IPv6 world,
1300 because several different implementation approaches have been taken. This code
1301 is now supposed to work with all of them. The point of difference is whether an
1302 IPv6 socket that is listening on all interfaces will receive incoming IPv4
1303 calls or not. We also have to cope with the case when IPv6 libraries exist, but
1304 there is no IPv6 support in the kernel.
1305
1306 . On Solaris, an IPv6 socket will accept IPv4 calls, and give them as mapped
1307   addresses. However, if an IPv4 socket is also listening on all interfaces,
1308   calls are directed to the appropriate socket.
1309
1310 . On (some versions of) Linux, an IPv6 socket will accept IPv4 calls, and
1311   give them as mapped addresses, but an attempt also to listen on an IPv4
1312   socket on all interfaces causes an error.
1313
1314 . On OpenBSD, an IPv6 socket will not accept IPv4 calls. You have to set up
1315   two sockets if you want to accept both kinds of call.
1316
1317 . FreeBSD is like OpenBSD, but it has the IPV6_V6ONLY socket option, which
1318   can be turned off, to make it behave like the versions of Linux described
1319   above.
1320
1321 . I heard a report that the USAGI IPv6 stack for Linux has implemented
1322   IPV6_V6ONLY.
1323
1324 So, what we do when IPv6 is supported is as follows:
1325
1326  (1) After it is set up, the list of interfaces is scanned for wildcard
1327      addresses. If an IPv6 and an IPv4 wildcard are both found for the same
1328      port, the list is re-arranged so that they are together, with the IPv6
1329      wildcard first.
1330
1331  (2) If the creation of a wildcard IPv6 socket fails, we just log the error and
1332      carry on if an IPv4 wildcard socket for the same port follows later in the
1333      list. This allows Exim to carry on in the case when the kernel has no IPv6
1334      support.
1335
1336  (3) Having created an IPv6 wildcard socket, we try to set IPV6_V6ONLY if that
1337      option is defined. However, if setting fails, carry on regardless (but log
1338      the incident).
1339
1340  (4) If binding or listening on an IPv6 wildcard socket fails, it is a serious
1341      error.
1342
1343  (5) If binding or listening on an IPv4 wildcard socket fails with the error
1344      EADDRINUSE, and a previous interface was an IPv6 wildcard for the same
1345      port (which must have succeeded or we wouldn't have got this far), we
1346      assume we are in the situation where just a single socket is permitted,
1347      and ignore the error.
1348
1349 Phew!
1350
1351 The preparation code decodes options and sets up the relevant data. We do this
1352 first, so that we can return non-zero if there are any syntax errors, and also
1353 write to stderr. */
1354
1355 if (f.daemon_listen && !f.inetd_wait_mode)
1356   {
1357   int *default_smtp_port;
1358   int sep;
1359   int pct = 0;
1360   uschar *s;
1361   const uschar * list;
1362   uschar *local_iface_source = US"local_interfaces";
1363   ip_address_item *ipa;
1364   ip_address_item **pipa;
1365
1366   /* If -oX was used, disable the writing of a pid file unless -oP was
1367   explicitly used to force it. Then scan the string given to -oX. Any items
1368   that contain neither a dot nor a colon are used to override daemon_smtp_port.
1369   Any other items are used to override local_interfaces. */
1370
1371   if (override_local_interfaces)
1372     {
1373     gstring * new_smtp_port = NULL;
1374     gstring * new_local_interfaces = NULL;
1375
1376     if (!override_pid_file_path) write_pid = FALSE;
1377
1378     list = override_local_interfaces;
1379     sep = 0;
1380     while ((s = string_nextinlist(&list, &sep, NULL, 0)))
1381       {
1382       uschar joinstr[4];
1383       gstring ** gp = Ustrpbrk(s, ".:") ? &new_local_interfaces : &new_smtp_port;
1384
1385       if (!*gp)
1386         {
1387         joinstr[0] = sep;
1388         joinstr[1] = ' ';
1389         *gp = string_catn(*gp, US"<", 1);
1390         }
1391
1392       *gp = string_catn(*gp, joinstr, 2);
1393       *gp = string_cat (*gp, s);
1394       }
1395
1396     if (new_smtp_port)
1397       {
1398       daemon_smtp_port = string_from_gstring(new_smtp_port);
1399       DEBUG(D_any) debug_printf("daemon_smtp_port overridden by -oX:\n  %s\n",
1400         daemon_smtp_port);
1401       }
1402
1403     if (new_local_interfaces)
1404       {
1405       local_interfaces = string_from_gstring(new_local_interfaces);
1406       local_iface_source = US"-oX data";
1407       DEBUG(D_any) debug_printf("local_interfaces overridden by -oX:\n  %s\n",
1408         local_interfaces);
1409       }
1410     }
1411
1412   /* Create a list of default SMTP ports, to be used if local_interfaces
1413   contains entries without explicit ports. First count the number of ports, then
1414   build a translated list in a vector. */
1415
1416   list = daemon_smtp_port;
1417   sep = 0;
1418   while ((s = string_nextinlist(&list, &sep, NULL, 0)))
1419     pct++;
1420   default_smtp_port = store_get((pct+1) * sizeof(int), FALSE);
1421   list = daemon_smtp_port;
1422   sep = 0;
1423   for (pct = 0;
1424        (s = string_nextinlist(&list, &sep, NULL, 0));
1425        pct++)
1426     {
1427     if (isdigit(*s))
1428       {
1429       uschar *end;
1430       default_smtp_port[pct] = Ustrtol(s, &end, 0);
1431       if (end != s + Ustrlen(s))
1432         log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "invalid SMTP port: %s", s);
1433       }
1434     else
1435       {
1436       struct servent *smtp_service = getservbyname(CS s, "tcp");
1437       if (!smtp_service)
1438         log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "TCP port \"%s\" not found", s);
1439       default_smtp_port[pct] = ntohs(smtp_service->s_port);
1440       }
1441     }
1442   default_smtp_port[pct] = 0;
1443
1444   /* Check the list of TLS-on-connect ports and do name lookups if needed */
1445
1446   list = tls_in.on_connect_ports;
1447   sep = 0;
1448   /* the list isn't expanded so cannot be tainted.  If it ever is we will trap here */
1449   while ((s = string_nextinlist(&list, &sep, big_buffer, big_buffer_size)))
1450     if (!isdigit(*s))
1451       {
1452       gstring * g = NULL;
1453
1454       list = tls_in.on_connect_ports;
1455       tls_in.on_connect_ports = NULL;
1456       sep = 0;
1457       while ((s = string_nextinlist(&list, &sep, big_buffer, big_buffer_size)))
1458         {
1459         if (!isdigit(*s))
1460           {
1461           struct servent * smtp_service = getservbyname(CS s, "tcp");
1462           if (!smtp_service)
1463             log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "TCP port \"%s\" not found", s);
1464           s = string_sprintf("%d", (int)ntohs(smtp_service->s_port));
1465           }
1466         g = string_append_listele(g, ':', s);
1467         }
1468       if (g)
1469         tls_in.on_connect_ports = g->s;
1470       break;
1471       }
1472
1473   /* Create the list of local interfaces, possibly with ports included. This
1474   list may contain references to 0.0.0.0 and ::0 as wildcards. These special
1475   values are converted below. */
1476
1477   addresses = host_build_ifacelist(local_interfaces, local_iface_source);
1478
1479   /* In the list of IP addresses, convert 0.0.0.0 into an empty string, and ::0
1480   into the string ":". We use these to recognize wildcards in IPv4 and IPv6. In
1481   fact, many IP stacks recognize 0.0.0.0 and ::0 and handle them as wildcards
1482   anyway, but we need to know which are the wildcard addresses, and the shorter
1483   strings are neater.
1484
1485   In the same scan, fill in missing port numbers from the default list. When
1486   there is more than one item in the list, extra items are created. */
1487
1488   for (ipa = addresses; ipa; ipa = ipa->next)
1489     {
1490     if (Ustrcmp(ipa->address, "0.0.0.0") == 0)
1491       ipa->address[0] = 0;
1492     else if (Ustrcmp(ipa->address, "::0") == 0)
1493       {
1494       ipa->address[0] = ':';
1495       ipa->address[1] = 0;
1496       }
1497
1498     if (ipa->port > 0) continue;
1499
1500     if (daemon_smtp_port[0] <= 0)
1501       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "no port specified for interface "
1502         "%s and daemon_smtp_port is unset; cannot start daemon",
1503         ipa->address[0] == 0 ? US"\"all IPv4\"" :
1504         ipa->address[1] == 0 ? US"\"all IPv6\"" : ipa->address);
1505
1506     ipa->port = default_smtp_port[0];
1507     for (int i = 1; default_smtp_port[i] > 0; i++)
1508       {
1509       ip_address_item *new = store_get(sizeof(ip_address_item), FALSE);
1510
1511       memcpy(new->address, ipa->address, Ustrlen(ipa->address) + 1);
1512       new->port = default_smtp_port[i];
1513       new->next = ipa->next;
1514       ipa->next = new;
1515       ipa = new;
1516       }
1517     }
1518
1519   /* Scan the list of addresses for wildcards. If we find an IPv4 and an IPv6
1520   wildcard for the same port, ensure that (a) they are together and (b) the
1521   IPv6 address comes first. This makes handling the messy features easier, and
1522   also simplifies the construction of the "daemon started" log line. */
1523
1524   pipa = &addresses;
1525   for (ipa = addresses; ipa; pipa = &ipa->next, ipa = ipa->next)
1526     {
1527     ip_address_item *ipa2;
1528
1529     /* Handle an IPv4 wildcard */
1530
1531     if (ipa->address[0] == 0)
1532       for (ipa2 = ipa; ipa2->next; ipa2 = ipa2->next)
1533         {
1534         ip_address_item *ipa3 = ipa2->next;
1535         if (ipa3->address[0] == ':' &&
1536             ipa3->address[1] == 0 &&
1537             ipa3->port == ipa->port)
1538           {
1539           ipa2->next = ipa3->next;
1540           ipa3->next = ipa;
1541           *pipa = ipa3;
1542           break;
1543           }
1544         }
1545
1546     /* Handle an IPv6 wildcard. */
1547
1548     else if (ipa->address[0] == ':' && ipa->address[1] == 0)
1549       for (ipa2 = ipa; ipa2->next; ipa2 = ipa2->next)
1550         {
1551         ip_address_item *ipa3 = ipa2->next;
1552         if (ipa3->address[0] == 0 && ipa3->port == ipa->port)
1553           {
1554           ipa2->next = ipa3->next;
1555           ipa3->next = ipa->next;
1556           ipa->next = ipa3;
1557           ipa = ipa3;
1558           break;
1559           }
1560         }
1561     }
1562
1563   /* Get a vector to remember all the sockets in */
1564
1565   for (ipa = addresses; ipa; ipa = ipa->next)
1566     listen_socket_count++;
1567   listen_sockets = store_get(sizeof(int) * listen_socket_count, FALSE);
1568
1569   } /* daemon_listen but not inetd_wait_mode */
1570
1571 if (f.daemon_listen)
1572   {
1573
1574   /* Do a sanity check on the max connects value just to save us from getting
1575   a huge amount of store. */
1576
1577   if (smtp_accept_max > 4095) smtp_accept_max = 4096;
1578
1579   /* There's no point setting smtp_accept_queue unless it is less than the max
1580   connects limit. The configuration reader ensures that the max is set if the
1581   queue-only option is set. */
1582
1583   if (smtp_accept_queue > smtp_accept_max) smtp_accept_queue = 0;
1584
1585   /* Get somewhere to keep the list of SMTP accepting pids if we are keeping
1586   track of them for total number and queue/host limits. */
1587
1588   if (smtp_accept_max > 0)
1589     {
1590     smtp_slots = store_get(smtp_accept_max * sizeof(smtp_slot), FALSE);
1591     for (int i = 0; i < smtp_accept_max; i++) smtp_slots[i] = empty_smtp_slot;
1592     }
1593   }
1594
1595 /* The variable background_daemon is always false when debugging, but
1596 can also be forced false in order to keep a non-debugging daemon in the
1597 foreground. If background_daemon is true, close all open file descriptors that
1598 we know about, but then re-open stdin, stdout, and stderr to /dev/null.  Also
1599 do this for inetd_wait mode.
1600
1601 This is protection against any called functions (in libraries, or in
1602 Perl, or whatever) that think they can write to stderr (or stdout). Before this
1603 was added, it was quite likely that an SMTP connection would use one of these
1604 file descriptors, in which case writing random stuff to it caused chaos.
1605
1606 Then disconnect from the controlling terminal, Most modern Unixes seem to have
1607 setsid() for getting rid of the controlling terminal. For any OS that doesn't,
1608 setsid() can be #defined as a no-op, or as something else. */
1609
1610 if (f.background_daemon || f.inetd_wait_mode)
1611   {
1612   log_close_all();    /* Just in case anything was logged earlier */
1613   search_tidyup();    /* Just in case any were used in reading the config. */
1614   (void)close(0);           /* Get rid of stdin/stdout/stderr */
1615   (void)close(1);
1616   (void)close(2);
1617   exim_nullstd();     /* Connect stdin/stdout/stderr to /dev/null */
1618   log_stderr = NULL;  /* So no attempt to copy paniclog output */
1619   }
1620
1621 if (f.background_daemon)
1622   {
1623   /* If the parent process of this one has pid == 1, we are re-initializing the
1624   daemon as the result of a SIGHUP. In this case, there is no need to do
1625   anything, because the controlling terminal has long gone. Otherwise, fork, in
1626   case current process is a process group leader (see 'man setsid' for an
1627   explanation) before calling setsid(). */
1628
1629   if (getppid() != 1)
1630     {
1631     pid_t pid = exim_fork(US"daemon");
1632     if (pid < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1633       "fork() failed when starting daemon: %s", strerror(errno));
1634     if (pid > 0) exit(EXIT_SUCCESS);      /* in parent process, just exit */
1635     (void)setsid();                       /* release controlling terminal */
1636     }
1637   }
1638
1639 /* We are now in the disconnected, daemon process (unless debugging). Set up
1640 the listening sockets if required. */
1641
1642 daemon_notifier_socket();
1643
1644 if (f.daemon_listen && !f.inetd_wait_mode)
1645   {
1646   int sk;
1647   ip_address_item *ipa;
1648
1649   /* For each IP address, create a socket, bind it to the appropriate port, and
1650   start listening. See comments above about IPv6 sockets that may or may not
1651   accept IPv4 calls when listening on all interfaces. We also have to cope with
1652   the case of a system with IPv6 libraries, but no IPv6 support in the kernel.
1653   listening, provided a wildcard IPv4 socket for the same port follows. */
1654
1655   for (ipa = addresses, sk = 0; sk < listen_socket_count; ipa = ipa->next, sk++)
1656     {
1657     BOOL wildcard;
1658     ip_address_item *ipa2;
1659     int af;
1660
1661     if (Ustrchr(ipa->address, ':') != NULL)
1662       {
1663       af = AF_INET6;
1664       wildcard = ipa->address[1] == 0;
1665       }
1666     else
1667       {
1668       af = AF_INET;
1669       wildcard = ipa->address[0] == 0;
1670       }
1671
1672     if ((listen_sockets[sk] = ip_socket(SOCK_STREAM, af)) < 0)
1673       {
1674       if (check_special_case(0, addresses, ipa, FALSE))
1675         {
1676         log_write(0, LOG_MAIN, "Failed to create IPv6 socket for wildcard "
1677           "listening (%s): will use IPv4", strerror(errno));
1678         goto SKIP_SOCKET;
1679         }
1680       log_write(0, LOG_PANIC_DIE, "IPv%c socket creation failed: %s",
1681         (af == AF_INET6)? '6' : '4', strerror(errno));
1682       }
1683
1684     /* If this is an IPv6 wildcard socket, set IPV6_V6ONLY if that option is
1685     available. Just log failure (can get protocol not available, just like
1686     socket creation can). */
1687
1688 #ifdef IPV6_V6ONLY
1689     if (af == AF_INET6 && wildcard &&
1690         setsockopt(listen_sockets[sk], IPPROTO_IPV6, IPV6_V6ONLY, CS (&on),
1691           sizeof(on)) < 0)
1692       log_write(0, LOG_MAIN, "Setting IPV6_V6ONLY on daemon's IPv6 wildcard "
1693         "socket failed (%s): carrying on without it", strerror(errno));
1694 #endif  /* IPV6_V6ONLY */
1695
1696     /* Set SO_REUSEADDR so that the daemon can be restarted while a connection
1697     is being handled.  Without this, a connection will prevent reuse of the
1698     smtp port for listening. */
1699
1700     if (setsockopt(listen_sockets[sk], SOL_SOCKET, SO_REUSEADDR,
1701                    US (&on), sizeof(on)) < 0)
1702       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "setting SO_REUSEADDR on socket "
1703         "failed when starting daemon: %s", strerror(errno));
1704
1705     /* Set TCP_NODELAY; Exim does its own buffering. There is a switch to
1706     disable this because it breaks some broken clients. */
1707
1708     if (tcp_nodelay) setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_NODELAY,
1709       US (&on), sizeof(on));
1710
1711     /* Now bind the socket to the required port; if Exim is being restarted
1712     it may not always be possible to bind immediately, even with SO_REUSEADDR
1713     set, so try 10 times, waiting between each try. After 10 failures, we give
1714     up. In an IPv6 environment, if bind () fails with the error EADDRINUSE and
1715     we are doing wildcard IPv4 listening and there was a previous IPv6 wildcard
1716     address for the same port, ignore the error on the grounds that we must be
1717     in a system where the IPv6 socket accepts both kinds of call. This is
1718     necessary for (some release of) USAGI Linux; other IP stacks fail at the
1719     listen() stage instead. */
1720
1721 #ifdef TCP_FASTOPEN
1722     f.tcp_fastopen_ok = TRUE;
1723 #endif
1724     for(;;)
1725       {
1726       uschar *msg, *addr;
1727       if (ip_bind(listen_sockets[sk], af, ipa->address, ipa->port) >= 0) break;
1728       if (check_special_case(errno, addresses, ipa, TRUE))
1729         {
1730         DEBUG(D_any) debug_printf("wildcard IPv4 bind() failed after IPv6 "
1731           "listen() success; EADDRINUSE ignored\n");
1732         (void)close(listen_sockets[sk]);
1733         goto SKIP_SOCKET;
1734         }
1735       msg = US strerror(errno);
1736       addr = wildcard
1737         ? af == AF_INET6
1738         ? US"(any IPv6)"
1739         : US"(any IPv4)"
1740         : ipa->address;
1741       if (daemon_startup_retries <= 0)
1742         log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1743           "socket bind() to port %d for address %s failed: %s: "
1744           "daemon abandoned", ipa->port, addr, msg);
1745       log_write(0, LOG_MAIN, "socket bind() to port %d for address %s "
1746         "failed: %s: waiting %s before trying again (%d more %s)",
1747         ipa->port, addr, msg, readconf_printtime(daemon_startup_sleep),
1748         daemon_startup_retries, (daemon_startup_retries > 1)? "tries" : "try");
1749       daemon_startup_retries--;
1750       sleep(daemon_startup_sleep);
1751       }
1752
1753     DEBUG(D_any)
1754       if (wildcard)
1755         debug_printf("listening on all interfaces (IPv%c) port %d\n",
1756           af == AF_INET6 ? '6' : '4', ipa->port);
1757       else
1758         debug_printf("listening on %s port %d\n", ipa->address, ipa->port);
1759
1760 #if defined(TCP_FASTOPEN) && !defined(__APPLE__)
1761     if (  f.tcp_fastopen_ok
1762        && setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_FASTOPEN,
1763                     &smtp_connect_backlog, sizeof(smtp_connect_backlog)))
1764       {
1765       DEBUG(D_any) debug_printf("setsockopt FASTOPEN: %s\n", strerror(errno));
1766       f.tcp_fastopen_ok = FALSE;
1767       }
1768 #endif
1769
1770     /* Start listening on the bound socket, establishing the maximum backlog of
1771     connections that is allowed. On success, continue to the next address. */
1772
1773     if (listen(listen_sockets[sk], smtp_connect_backlog) >= 0)
1774       {
1775 #if defined(TCP_FASTOPEN) && defined(__APPLE__)
1776       if (  f.tcp_fastopen_ok
1777          && setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_FASTOPEN,
1778                       &on, sizeof(on)))
1779         {
1780         DEBUG(D_any) debug_printf("setsockopt FASTOPEN: %s\n", strerror(errno));
1781         f.tcp_fastopen_ok = FALSE;
1782         }
1783 #endif
1784       continue;
1785       }
1786
1787     /* Listening has failed. In an IPv6 environment, as for bind(), if listen()
1788     fails with the error EADDRINUSE and we are doing IPv4 wildcard listening
1789     and there was a previous successful IPv6 wildcard listen on the same port,
1790     we want to ignore the error on the grounds that we must be in a system
1791     where the IPv6 socket accepts both kinds of call. */
1792
1793     if (!check_special_case(errno, addresses, ipa, TRUE))
1794       log_write(0, LOG_PANIC_DIE, "listen() failed on interface %s: %s",
1795         wildcard
1796         ? af == AF_INET6 ? US"(any IPv6)" : US"(any IPv4)" : ipa->address,
1797         strerror(errno));
1798
1799     DEBUG(D_any) debug_printf("wildcard IPv4 listen() failed after IPv6 "
1800       "listen() success; EADDRINUSE ignored\n");
1801     (void)close(listen_sockets[sk]);
1802
1803     /* Come here if there has been a problem with the socket which we
1804     are going to ignore. We remove the address from the chain, and back up the
1805     counts. */
1806
1807   SKIP_SOCKET:
1808     sk--;                          /* Back up the count */
1809     listen_socket_count--;         /* Reduce the total */
1810     if (ipa == addresses) addresses = ipa->next; else
1811       {
1812       for (ipa2 = addresses; ipa2->next != ipa; ipa2 = ipa2->next);
1813       ipa2->next = ipa->next;
1814       ipa = ipa2;
1815       }
1816     }          /* End of bind/listen loop for each address */
1817   }            /* End of setup for listening */
1818
1819
1820 /* If we are not listening, we want to write a pid file only if -oP was
1821 explicitly given. */
1822
1823 else if (!override_pid_file_path)
1824   write_pid = FALSE;
1825
1826 /* Write the pid to a known file for assistance in identification, if required.
1827 We do this before giving up root privilege, because on some systems it is
1828 necessary to be root in order to write into the pid file directory. There's
1829 nothing to stop multiple daemons running, as long as no more than one listens
1830 on a given TCP/IP port on the same interface(s). However, in these
1831 circumstances it gets far too complicated to mess with pid file names
1832 automatically. Consequently, Exim 4 writes a pid file only
1833
1834   (a) When running in the test harness, or
1835   (b) When -bd is used and -oX is not used, or
1836   (c) When -oP is used to supply a path.
1837
1838 The variable daemon_write_pid is used to control this. */
1839
1840 if (f.running_in_test_harness || write_pid)
1841   {
1842   FILE *f;
1843
1844   set_pid_file_path();
1845   if ((f = modefopen(pid_file_path, "wb", 0644)))
1846     {
1847     (void)fprintf(f, "%d\n", (int)getpid());
1848     (void)fclose(f);
1849     DEBUG(D_any) debug_printf("pid written to %s\n", pid_file_path);
1850     }
1851   else
1852     DEBUG(D_any)
1853       debug_printf("%s\n", string_open_failed("pid file %s", pid_file_path));
1854   }
1855
1856 /* Set up the handler for SIGHUP, which causes a restart of the daemon. */
1857
1858 sighup_seen = FALSE;
1859 signal(SIGHUP, sighup_handler);
1860
1861 /* Give up root privilege at this point (assuming that exim_uid and exim_gid
1862 are not root). The third argument controls the running of initgroups().
1863 Normally we do this, in order to set up the groups for the Exim user. However,
1864 if we are not root at this time - some odd installations run that way - we
1865 cannot do this. */
1866
1867 exim_setugid(exim_uid, exim_gid, geteuid()==root_uid, US"running as a daemon");
1868
1869 /* Update the originator_xxx fields so that received messages as listed as
1870 coming from Exim, not whoever started the daemon. */
1871
1872 originator_uid = exim_uid;
1873 originator_gid = exim_gid;
1874 originator_login = (pw = getpwuid(exim_uid))
1875   ? string_copy_perm(US pw->pw_name, FALSE) : US"exim";
1876
1877 /* Get somewhere to keep the list of queue-runner pids if we are keeping track
1878 of them (and also if we are doing queue runs). */
1879
1880 if (queue_interval > 0 && local_queue_run_max > 0)
1881   {
1882   queue_pid_slots = store_get(local_queue_run_max * sizeof(pid_t), FALSE);
1883   for (int i = 0; i < local_queue_run_max; i++) queue_pid_slots[i] = 0;
1884   }
1885
1886 /* Set up the handler for termination of child processes, and the one
1887 telling us to die. */
1888
1889 sigchld_seen = FALSE;
1890 os_non_restarting_signal(SIGCHLD, main_sigchld_handler);
1891
1892 sigterm_seen = FALSE;
1893 os_non_restarting_signal(SIGTERM, main_sigterm_handler);
1894
1895 /* If we are to run the queue periodically, pretend the alarm has just gone
1896 off. This will cause the first queue-runner to get kicked off straight away. */
1897
1898 sigalrm_seen = (queue_interval > 0);
1899
1900 /* Log the start up of a daemon - at least one of listening or queue running
1901 must be set up. */
1902
1903 if (f.inetd_wait_mode)
1904   {
1905   uschar *p = big_buffer;
1906
1907   if (inetd_wait_timeout >= 0)
1908     sprintf(CS p, "terminating after %d seconds", inetd_wait_timeout);
1909   else
1910     sprintf(CS p, "with no wait timeout");
1911
1912   log_write(0, LOG_MAIN,
1913     "exim %s daemon started: pid=%d, launched with listening socket, %s",
1914     version_string, getpid(), big_buffer);
1915   set_process_info("daemon(%s): pre-listening socket", version_string);
1916
1917   /* set up the timeout logic */
1918   sigalrm_seen = TRUE;
1919   }
1920
1921 else if (f.daemon_listen)
1922   {
1923   int smtp_ports = 0;
1924   int smtps_ports = 0;
1925   ip_address_item * ipa;
1926   uschar * p;
1927   uschar * qinfo = queue_interval > 0
1928     ? string_sprintf("-q%s%s",
1929         f.queue_2stage ? "q" : "", readconf_printtime(queue_interval))
1930     : US"no queue runs";
1931
1932   /* Build a list of listening addresses in big_buffer, but limit it to 10
1933   items. The style is for backwards compatibility.
1934
1935   It is now possible to have some ports listening for SMTPS (the old,
1936   deprecated protocol that starts TLS without using STARTTLS), and others
1937   listening for standard SMTP. Keep their listings separate. */
1938
1939   for (int j = 0, i; j < 2; j++)
1940     {
1941     for (i = 0, ipa = addresses; i < 10 && ipa; i++, ipa = ipa->next)
1942       {
1943       /* First time round, look for SMTP ports; second time round, look for
1944       SMTPS ports. Build IP+port strings. */
1945
1946       if (host_is_tls_on_connect_port(ipa->port) == (j > 0))
1947         {
1948         if (j == 0)
1949           smtp_ports++;
1950         else
1951           smtps_ports++;
1952
1953         /* Now the information about the port (and sometimes interface) */
1954
1955         if (ipa->address[0] == ':' && ipa->address[1] == 0)
1956           {                                             /* v6 wildcard */
1957           if (ipa->next && ipa->next->address[0] == 0 &&
1958               ipa->next->port == ipa->port)
1959             {
1960             ipa->log = string_sprintf(" port %d (IPv6 and IPv4)", ipa->port);
1961             (ipa = ipa->next)->log = NULL;
1962             }
1963           else if (ipa->v6_include_v4)
1964             ipa->log = string_sprintf(" port %d (IPv6 with IPv4)", ipa->port);
1965           else
1966             ipa->log = string_sprintf(" port %d (IPv6)", ipa->port);
1967           }
1968         else if (ipa->address[0] == 0)                  /* v4 wildcard */
1969           ipa->log = string_sprintf(" port %d (IPv4)", ipa->port);
1970         else                            /* check for previously-seen IP */
1971           {
1972           ip_address_item * i2;
1973           for (i2 = addresses; i2 != ipa; i2 = i2->next)
1974             if (  host_is_tls_on_connect_port(i2->port) == (j > 0)
1975                && Ustrcmp(ipa->address, i2->address) == 0
1976                )
1977               {                         /* found; append port to list */
1978               for (p = i2->log; *p; ) p++;      /* end of existing string */
1979               if (*--p == '}') *p = '\0';       /* drop EOL */
1980               while (isdigit(*--p)) ;           /* char before port */
1981
1982               i2->log = *p == ':'               /* no list yet? */
1983                 ? string_sprintf("%.*s{%s,%d}",
1984                   (int)(p - i2->log + 1), i2->log, p+1, ipa->port)
1985                 : string_sprintf("%s,%d}", i2->log, ipa->port);
1986               ipa->log = NULL;
1987               break;
1988               }
1989           if (i2 == ipa)                /* first-time IP */
1990             ipa->log = string_sprintf(" [%s]:%d", ipa->address, ipa->port);
1991           }
1992         }
1993       }
1994     }
1995
1996   p = big_buffer;
1997   for (int j = 0, i; j < 2; j++)
1998     {
1999     /* First time round, look for SMTP ports; second time round, look for
2000     SMTPS ports. For the first one of each, insert leading text. */
2001
2002     if (j == 0)
2003       {
2004       if (smtp_ports > 0)
2005         p += sprintf(CS p, "SMTP on");
2006       }
2007     else
2008       if (smtps_ports > 0)
2009         p += sprintf(CS p, "%sSMTPS on",
2010           smtp_ports == 0 ? "" : " and for ");
2011
2012     /* Now the information about the port (and sometimes interface) */
2013
2014     for (i = 0, ipa = addresses; i < 10 && ipa; i++, ipa = ipa->next)
2015       if (host_is_tls_on_connect_port(ipa->port) == (j > 0))
2016         if (ipa->log)
2017           p += sprintf(CS p, "%s",  ipa->log);
2018
2019     if (ipa)
2020       p += sprintf(CS p, " ...");
2021     }
2022
2023   log_write(0, LOG_MAIN,
2024     "exim %s daemon started: pid=%d, %s, listening for %s",
2025     version_string, getpid(), qinfo, big_buffer);
2026   set_process_info("daemon(%s): %s, listening for %s",
2027     version_string, qinfo, big_buffer);
2028   }
2029
2030 else
2031   {
2032   uschar * s = *queue_name
2033     ? string_sprintf("-qG%s/%s", queue_name, readconf_printtime(queue_interval))
2034     : string_sprintf("-q%s", readconf_printtime(queue_interval));
2035   log_write(0, LOG_MAIN,
2036     "exim %s daemon started: pid=%d, %s, not listening for SMTP",
2037     version_string, getpid(), s);
2038   set_process_info("daemon(%s): %s, not listening", version_string, s);
2039   }
2040
2041 /* Do any work it might be useful to amortize over our children
2042 (eg: compile regex) */
2043
2044 dns_pattern_init();
2045 smtp_deliver_init();    /* Used for callouts */
2046
2047 #ifndef DISABLE_DKIM
2048   {
2049 # ifdef MEASURE_TIMING
2050   struct timeval t0;
2051   gettimeofday(&t0, NULL);
2052 # endif
2053   dkim_exim_init();
2054 # ifdef MEASURE_TIMING
2055   report_time_since(&t0, US"dkim_exim_init (delta)");
2056 # endif
2057   }
2058 #endif
2059
2060 #ifdef WITH_CONTENT_SCAN
2061 malware_init();
2062 #endif
2063 #ifdef SUPPORT_SPF
2064 spf_init();
2065 #endif
2066 #ifndef DISABLE_TLS
2067 tls_daemon_init();
2068 #endif
2069
2070 /* Close the log so it can be renamed and moved. In the few cases below where
2071 this long-running process writes to the log (always exceptional conditions), it
2072 closes the log afterwards, for the same reason. */
2073
2074 log_close_all();
2075
2076 DEBUG(D_any) debug_print_ids(US"daemon running with");
2077
2078 /* Any messages accepted via this route are going to be SMTP. */
2079
2080 smtp_input = TRUE;
2081
2082 #ifdef MEASURE_TIMING
2083 report_time_since(&timestamp_startup, US"daemon loop start");   /* testcase 0022 */
2084 #endif
2085
2086 /* Enter the never-ending loop... */
2087
2088 for (;;)
2089   {
2090   #if HAVE_IPV6
2091   struct sockaddr_in6 accepted;
2092   #else
2093   struct sockaddr_in accepted;
2094   #endif
2095
2096   EXIM_SOCKLEN_T len;
2097   pid_t pid;
2098
2099   if (sigterm_seen)
2100     daemon_die();       /* Does not return */
2101
2102   /* This code is placed first in the loop, so that it gets obeyed at the
2103   start, before the first wait, for the queue-runner case, so that the first
2104   one can be started immediately.
2105
2106   The other option is that we have an inetd wait timeout specified to -bw. */
2107
2108   if (sigalrm_seen)
2109     {
2110     if (inetd_wait_timeout > 0)
2111       {
2112       time_t resignal_interval = inetd_wait_timeout;
2113
2114       if (last_connection_time == (time_t)0)
2115         {
2116         DEBUG(D_any)
2117           debug_printf("inetd wait timeout expired, but still not seen first message, ignoring\n");
2118         }
2119       else
2120         {
2121         time_t now = time(NULL);
2122         if (now == (time_t)-1)
2123           {
2124           DEBUG(D_any) debug_printf("failed to get time: %s\n", strerror(errno));
2125           }
2126         else
2127           {
2128           if ((now - last_connection_time) >= inetd_wait_timeout)
2129             {
2130             DEBUG(D_any)
2131               debug_printf("inetd wait timeout %d expired, ending daemon\n",
2132                   inetd_wait_timeout);
2133             log_write(0, LOG_MAIN, "exim %s daemon terminating, inetd wait timeout reached.\n",
2134                 version_string);
2135             exit(EXIT_SUCCESS);
2136             }
2137           else
2138             {
2139             resignal_interval -= (now - last_connection_time);
2140             }
2141           }
2142         }
2143
2144       sigalrm_seen = FALSE;
2145       ALARM(resignal_interval);
2146       }
2147
2148     else
2149       {
2150       DEBUG(D_any) debug_printf("%s received\n",
2151 #ifndef DISABLE_QUEUE_RAMP
2152         *queuerun_msgid ? "qrun notification" :
2153 #endif
2154         "SIGALRM");
2155
2156       /* Do a full queue run in a child process, if required, unless we already
2157       have enough queue runners on the go. If we are not running as root, a
2158       re-exec is required. */
2159
2160       if (  queue_interval > 0
2161          && (local_queue_run_max <= 0 || queue_run_count < local_queue_run_max))
2162         {
2163         if ((pid = exim_fork(US"queue-runner")) == 0)
2164           {
2165           /* Disable debugging if it's required only for the daemon process. We
2166           leave the above message, because it ties up with the "child ended"
2167           debugging messages. */
2168
2169           if (f.debug_daemon) debug_selector = 0;
2170
2171           /* Close any open listening sockets in the child */
2172
2173           close_daemon_sockets(daemon_notifier_fd,
2174             listen_sockets, listen_socket_count);
2175
2176           /* Reset SIGHUP and SIGCHLD in the child in both cases. */
2177
2178           signal(SIGHUP,  SIG_DFL);
2179           signal(SIGCHLD, SIG_DFL);
2180           signal(SIGTERM, SIG_DFL);
2181
2182           /* Re-exec if privilege has been given up, unless deliver_drop_
2183           privilege is set. Reset SIGALRM before exec(). */
2184
2185           if (geteuid() != root_uid && !deliver_drop_privilege)
2186             {
2187             uschar opt[8];
2188             uschar *p = opt;
2189             uschar *extra[7];
2190             int extracount = 1;
2191
2192             signal(SIGALRM, SIG_DFL);
2193             *p++ = '-';
2194             *p++ = 'q';
2195             if (  f.queue_2stage
2196 #ifndef DISABLE_QUEUE_RAMP
2197                && !*queuerun_msgid
2198 #endif
2199                ) *p++ = 'q';
2200             if (f.queue_run_first_delivery) *p++ = 'i';
2201             if (f.queue_run_force) *p++ = 'f';
2202             if (f.deliver_force_thaw) *p++ = 'f';
2203             if (f.queue_run_local) *p++ = 'l';
2204             *p = 0;
2205             extra[0] = *queue_name
2206               ? string_sprintf("%sG%s", opt, queue_name) : opt;
2207
2208 #ifndef DISABLE_QUEUE_RAMP
2209             if (*queuerun_msgid)
2210               {
2211               log_write(0, LOG_MAIN, "notify triggered queue run");
2212               extra[extracount++] = queuerun_msgid;     /* Trigger only the */
2213               extra[extracount++] = queuerun_msgid;     /* one message      */
2214               }
2215 #endif
2216
2217             /* If -R or -S were on the original command line, ensure they get
2218             passed on. */
2219
2220             if (deliver_selectstring)
2221               {
2222               extra[extracount++] = f.deliver_selectstring_regex ? US"-Rr" : US"-R";
2223               extra[extracount++] = deliver_selectstring;
2224               }
2225
2226             if (deliver_selectstring_sender)
2227               {
2228               extra[extracount++] = f.deliver_selectstring_sender_regex
2229                 ? US"-Sr" : US"-S";
2230               extra[extracount++] = deliver_selectstring_sender;
2231               }
2232
2233             /* Overlay this process with a new execution. */
2234
2235             (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, extracount,
2236               extra[0], extra[1], extra[2], extra[3], extra[4], extra[5], extra[6]);
2237
2238             /* Control never returns here. */
2239             }
2240
2241           /* No need to re-exec; SIGALRM remains set to the default handler */
2242
2243 #ifndef DISABLE_QUEUE_RAMP
2244           if (*queuerun_msgid)
2245             {
2246             log_write(0, LOG_MAIN, "notify triggered queue run");
2247             f.queue_2stage = FALSE;
2248             queue_run(queuerun_msgid, queuerun_msgid, FALSE);
2249             }
2250           else
2251 #endif
2252             queue_run(NULL, NULL, FALSE);
2253           exim_underbar_exit(EXIT_SUCCESS);
2254           }
2255
2256         if (pid < 0)
2257           {
2258           log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fork of queue-runner "
2259             "process failed: %s", strerror(errno));
2260           log_close_all();
2261           }
2262         else
2263           {
2264           for (int i = 0; i < local_queue_run_max; ++i)
2265             if (queue_pid_slots[i] <= 0)
2266               {
2267               queue_pid_slots[i] = pid;
2268               queue_run_count++;
2269               break;
2270               }
2271           DEBUG(D_any) debug_printf("%d queue-runner process%s running\n",
2272             queue_run_count, queue_run_count == 1 ? "" : "es");
2273           }
2274         }
2275
2276       /* Reset the alarm clock */
2277
2278       sigalrm_seen = FALSE;
2279 #ifndef DISABLE_QUEUE_RAMP
2280       if (*queuerun_msgid)
2281         *queuerun_msgid = 0;
2282       else
2283 #endif
2284         ALARM(queue_interval);
2285       }
2286
2287     } /* sigalrm_seen */
2288
2289
2290   /* Sleep till a connection happens if listening, and handle the connection if
2291   that is why we woke up. The FreeBSD operating system requires the use of
2292   select() before accept() because the latter function is not interrupted by
2293   a signal, and we want to wake up for SIGCHLD and SIGALRM signals. Some other
2294   OS do notice signals in accept() but it does no harm to have the select()
2295   in for all of them - and it won't then be a lurking problem for ports to
2296   new OS. In fact, the later addition of listening on specific interfaces only
2297   requires this way of working anyway. */
2298
2299   if (f.daemon_listen)
2300     {
2301     int lcount;
2302     int max_socket = 0;
2303     BOOL select_failed = FALSE;
2304     fd_set select_listen;
2305
2306     FD_ZERO(&select_listen);
2307 #ifndef DISABLE_TLS
2308     if (tls_watch_fd >= 0)
2309       {
2310       FD_SET(tls_watch_fd, &select_listen);
2311       if (tls_watch_fd > max_socket) max_socket = tls_watch_fd;
2312       }
2313 #endif
2314     if (daemon_notifier_fd >= 0)
2315       {
2316       FD_SET(daemon_notifier_fd, &select_listen);
2317       if (daemon_notifier_fd > max_socket) max_socket = daemon_notifier_fd;
2318       }
2319     for (int sk = 0; sk < listen_socket_count; sk++)
2320       {
2321       FD_SET(listen_sockets[sk], &select_listen);
2322       if (listen_sockets[sk] > max_socket) max_socket = listen_sockets[sk];
2323       }
2324
2325     DEBUG(D_any) debug_printf("Listening...\n");
2326
2327     /* In rare cases we may have had a SIGCHLD signal in the time between
2328     setting the handler (below) and getting back here. If so, pretend that the
2329     select() was interrupted so that we reap the child. This might still leave
2330     a small window when a SIGCHLD could get lost. However, since we use SIGCHLD
2331     only to do the reaping more quickly, it shouldn't result in anything other
2332     than a delay until something else causes a wake-up. */
2333
2334     if (sigchld_seen)
2335       {
2336       lcount = -1;
2337       errno = EINTR;
2338       }
2339     else
2340       lcount = select(max_socket + 1, (SELECT_ARG2_TYPE *)&select_listen,
2341         NULL, NULL, NULL);
2342
2343     if (lcount < 0)
2344       {
2345       select_failed = TRUE;
2346       lcount = 1;
2347       }
2348
2349     /* Clean up any subprocesses that may have terminated. We need to do this
2350     here so that smtp_accept_max_per_host works when a connection to that host
2351     has completed, and we are about to accept a new one. When this code was
2352     later in the sequence, a new connection could be rejected, even though an
2353     old one had just finished. Preserve the errno from any select() failure for
2354     the use of the common select/accept error processing below. */
2355
2356       {
2357       int select_errno = errno;
2358       handle_ending_processes();
2359
2360 #ifndef DISABLE_TLS
2361       /* Create or rotate any required keys; handle (delayed) filewatch event */
2362       tls_daemon_tick();
2363 #endif
2364       errno = select_errno;
2365       }
2366
2367     /* Loop for all the sockets that are currently ready to go. If select
2368     actually failed, we have set the count to 1 and select_failed=TRUE, so as
2369     to use the common error code for select/accept below. */
2370
2371     while (lcount-- > 0)
2372       {
2373       int accept_socket = -1;
2374
2375       if (!select_failed)
2376         {
2377 #if !defined(DISABLE_TLS) && (defined(EXIM_HAVE_INOTIFY) || defined(EXIM_HAVE_KEVENT))
2378         if (tls_watch_fd >= 0 && FD_ISSET(tls_watch_fd, &select_listen))
2379           {
2380           FD_CLR(tls_watch_fd, &select_listen);
2381           tls_watch_trigger_time = time(NULL);  /* Set up delayed event */
2382           tls_watch_discard_event(tls_watch_fd);
2383           break;        /* to top of daemon loop */
2384           }
2385 #endif
2386         if (  daemon_notifier_fd >= 0
2387            && FD_ISSET(daemon_notifier_fd, &select_listen))
2388           {
2389           FD_CLR(daemon_notifier_fd, &select_listen);
2390           sigalrm_seen = daemon_notification();
2391           break;        /* to top of daemon loop */
2392           }
2393         for (int sk = 0; sk < listen_socket_count; sk++)
2394           if (FD_ISSET(listen_sockets[sk], &select_listen))
2395             {
2396             len = sizeof(accepted);
2397             accept_socket = accept(listen_sockets[sk],
2398               (struct sockaddr *)&accepted, &len);
2399             FD_CLR(listen_sockets[sk], &select_listen);
2400             break;
2401             }
2402         }
2403
2404       /* If select or accept has failed and this was not caused by an
2405       interruption, log the incident and try again. With asymmetric TCP/IP
2406       routing errors such as "No route to network" have been seen here. Also
2407       "connection reset by peer" has been seen. These cannot be classed as
2408       disastrous errors, but they could fill up a lot of log. The code in smail
2409       crashes the daemon after 10 successive failures of accept, on the grounds
2410       that some OS fail continuously. Exim originally followed suit, but this
2411       appears to have caused problems. Now it just keeps going, but instead of
2412       logging each error, it batches them up when they are continuous. */
2413
2414       if (accept_socket < 0 && errno != EINTR)
2415         {
2416         if (accept_retry_count == 0)
2417           {
2418           accept_retry_errno = errno;
2419           accept_retry_select_failed = select_failed;
2420           }
2421         else if (  errno != accept_retry_errno
2422                 || select_failed != accept_retry_select_failed
2423                 || accept_retry_count >= 50)
2424             {
2425             log_write(0, LOG_MAIN | (accept_retry_count >= 50 ? LOG_PANIC : 0),
2426               "%d %s() failure%s: %s",
2427               accept_retry_count,
2428               accept_retry_select_failed ? "select" : "accept",
2429               accept_retry_count == 1 ? "" : "s",
2430               strerror(accept_retry_errno));
2431             log_close_all();
2432             accept_retry_count = 0;
2433             accept_retry_errno = errno;
2434             accept_retry_select_failed = select_failed;
2435             }
2436         accept_retry_count++;
2437         }
2438       else if (accept_retry_count > 0)
2439         {
2440         log_write(0, LOG_MAIN, "%d %s() failure%s: %s",
2441           accept_retry_count,
2442           accept_retry_select_failed ? "select" : "accept",
2443           accept_retry_count == 1 ? "" : "s",
2444           strerror(accept_retry_errno));
2445         log_close_all();
2446         accept_retry_count = 0;
2447         }
2448
2449       /* If select/accept succeeded, deal with the connection. */
2450
2451       if (accept_socket >= 0)
2452         {
2453 #ifdef TCP_QUICKACK /* Avoid pure-ACKs while in tls protocol pingpong phase */
2454         /* Unfortunately we cannot be certain to do this before a TLS-on-connect
2455         Client Hello arrives and is acked. We do it as early as possible. */
2456         (void) setsockopt(accept_socket, IPPROTO_TCP, TCP_QUICKACK, US &off, sizeof(off));
2457 #endif
2458         if (inetd_wait_timeout)
2459           last_connection_time = time(NULL);
2460         handle_smtp_call(listen_sockets, listen_socket_count, accept_socket,
2461           (struct sockaddr *)&accepted);
2462         }
2463       }
2464     }
2465
2466   /* If not listening, then just sleep for the queue interval. If we woke
2467   up early the last time for some other signal, it won't matter because
2468   the alarm signal will wake at the right time. This code originally used
2469   sleep() but it turns out that on the FreeBSD system, sleep() is not inter-
2470   rupted by signals, so it wasn't waking up for SIGALRM or SIGCHLD. Luckily
2471   select() can be used as an interruptible sleep() on all versions of Unix. */
2472
2473   else
2474     {
2475     struct timeval tv;
2476     tv.tv_sec = queue_interval;
2477     tv.tv_usec = 0;
2478     select(0, NULL, NULL, NULL, &tv);
2479     handle_ending_processes();
2480     }
2481
2482   /* Re-enable the SIGCHLD handler if it has been run. It can't do it
2483   for itself, because it isn't doing the waiting itself. */
2484
2485   if (sigchld_seen)
2486     {
2487     sigchld_seen = FALSE;
2488     os_non_restarting_signal(SIGCHLD, main_sigchld_handler);
2489     }
2490
2491   /* Handle being woken by SIGHUP. We know at this point that the result
2492   of accept() has been dealt with, so we can re-exec exim safely, first
2493   closing the listening sockets so that they can be reused. Cancel any pending
2494   alarm in case it is just about to go off, and set SIGHUP to be ignored so
2495   that another HUP in quick succession doesn't clobber the new daemon before it
2496   gets going. All log files get closed by the close-on-exec flag; however, if
2497   the exec fails, we need to close the logs. */
2498
2499   if (sighup_seen)
2500     {
2501     log_write(0, LOG_MAIN, "pid %d: SIGHUP received: re-exec daemon",
2502       getpid());
2503     close_daemon_sockets(daemon_notifier_fd,
2504       listen_sockets, listen_socket_count);
2505     ALARM_CLR(0);
2506     signal(SIGHUP, SIG_IGN);
2507     sighup_argv[0] = exim_path;
2508     exim_nullstd();
2509     execv(CS exim_path, (char *const *)sighup_argv);
2510     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "pid %d: exec of %s failed: %s",
2511       getpid(), exim_path, strerror(errno));
2512     log_close_all();
2513     }
2514
2515   }   /* End of main loop */
2516
2517 /* Control never reaches here */
2518 }
2519
2520 /* vi: aw ai sw=2
2521 */
2522 /* End of exim_daemon.c */