7bb89640e0f3ed546961fbe8d97dc902fd89e3a1
[exim.git] / src / src / daemon.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* Copyright (c) The Exim Maintainers 2020 */
7 /* See the file NOTICE for conditions of use and distribution. */
8
9 /* Functions concerned with running Exim as a daemon */
10
11
12 #include "exim.h"
13
14
15 /* Structure for holding data for each SMTP connection */
16
17 typedef struct smtp_slot {
18   pid_t pid;                       /* pid of the spawned reception process */
19   uschar *host_address;            /* address of the client host */
20 } smtp_slot;
21
22 /* An empty slot for initializing (Standard C does not allow constructor
23 expressions in assignments except as initializers in declarations). */
24
25 static smtp_slot empty_smtp_slot = { .pid = 0, .host_address = NULL };
26
27
28
29 /*************************************************
30 *               Local static variables           *
31 *************************************************/
32
33 static SIGNAL_BOOL sigchld_seen;
34 static SIGNAL_BOOL sighup_seen;
35 static SIGNAL_BOOL sigterm_seen;
36
37 static int   accept_retry_count = 0;
38 static int   accept_retry_errno;
39 static BOOL  accept_retry_select_failed;
40
41 static int   queue_run_count = 0;
42 static pid_t *queue_pid_slots = NULL;
43 static smtp_slot *smtp_slots = NULL;
44
45 static BOOL  write_pid = TRUE;
46
47
48
49 /*************************************************
50 *             SIGHUP Handler                     *
51 *************************************************/
52
53 /* All this handler does is to set a flag and re-enable the signal.
54
55 Argument: the signal number
56 Returns:  nothing
57 */
58
59 static void
60 sighup_handler(int sig)
61 {
62 sig = sig;    /* Keep picky compilers happy */
63 sighup_seen = TRUE;
64 signal(SIGHUP, sighup_handler);
65 }
66
67
68
69 /*************************************************
70 *     SIGCHLD handler for main daemon process    *
71 *************************************************/
72
73 /* Don't re-enable the handler here, since we aren't doing the
74 waiting here. If the signal is re-enabled, there will just be an
75 infinite sequence of calls to this handler. The SIGCHLD signal is
76 used just as a means of waking up the daemon so that it notices
77 terminated subprocesses as soon as possible.
78
79 Argument: the signal number
80 Returns:  nothing
81 */
82
83 static void
84 main_sigchld_handler(int sig)
85 {
86 sig = sig;    /* Keep picky compilers happy */
87 os_non_restarting_signal(SIGCHLD, SIG_DFL);
88 sigchld_seen = TRUE;
89 }
90
91
92 /* SIGTERM handler.  Try to get the damon pif file removed
93 before exiting. */
94
95 static void
96 main_sigterm_handler(int sig)
97 {
98 sigterm_seen = TRUE;
99 }
100
101
102
103
104 /*************************************************
105 *          Unexpected errors in SMTP calls       *
106 *************************************************/
107
108 /* This function just saves a bit of repetitious coding.
109
110 Arguments:
111   log_msg        Text of message to be logged
112   smtp_msg       Text of SMTP error message
113   was_errno      The failing errno
114
115 Returns:         nothing
116 */
117
118 static void
119 never_error(uschar *log_msg, uschar *smtp_msg, int was_errno)
120 {
121 uschar *emsg = was_errno <= 0
122   ? US"" : string_sprintf(": %s", strerror(was_errno));
123 log_write(0, LOG_MAIN|LOG_PANIC, "%s%s", log_msg, emsg);
124 if (smtp_out) smtp_printf("421 %s\r\n", FALSE, smtp_msg);
125 }
126
127
128
129
130 /*************************************************
131 *************************************************/
132
133 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
134 static void
135 unlink_notifier_socket(void)
136 {
137 uschar * s = expand_string(notifier_socket);
138 DEBUG(D_any) debug_printf("unlinking notifier socket %s\n", s);
139 Uunlink(s);
140 }
141 #endif
142
143
144 static void
145 close_daemon_sockets(int daemon_notifier_fd,
146   int * listen_sockets, int listen_socket_count)
147 {
148 if (daemon_notifier_fd >= 0)
149   {
150   (void) close(daemon_notifier_fd);
151   daemon_notifier_fd = -1;
152 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
153   unlink_notifier_socket();
154 #endif
155   }
156
157 for (int i = 0; i < listen_socket_count; i++) (void) close(listen_sockets[i]);
158 }
159
160
161 /*************************************************
162 *            Handle a connected SMTP call        *
163 *************************************************/
164
165 /* This function is called when an SMTP connection has been accepted.
166 If there are too many, give an error message and close down. Otherwise
167 spin off a sub-process to handle the call. The list of listening sockets
168 is required so that they can be closed in the sub-process. Take care not to
169 leak store in this process - reset the stacking pool at the end.
170
171 Arguments:
172   listen_sockets        sockets which are listening for incoming calls
173   listen_socket_count   count of listening sockets
174   accept_socket         socket of the current accepted call
175   accepted              socket information about the current call
176
177 Returns:            nothing
178 */
179
180 static void
181 handle_smtp_call(int *listen_sockets, int listen_socket_count,
182   int accept_socket, struct sockaddr *accepted)
183 {
184 pid_t pid;
185 union sockaddr_46 interface_sockaddr;
186 EXIM_SOCKLEN_T ifsize = sizeof(interface_sockaddr);
187 int dup_accept_socket = -1;
188 int max_for_this_host = 0;
189 int save_log_selector = *log_selector;
190 gstring * whofrom;
191
192 rmark reset_point = store_mark();
193
194 /* Make the address available in ASCII representation, and also fish out
195 the remote port. */
196
197 sender_host_address = host_ntoa(-1, accepted, NULL, &sender_host_port);
198 DEBUG(D_any) debug_printf("Connection request from %s port %d\n",
199   sender_host_address, sender_host_port);
200
201 /* Set up the output stream, check the socket has duplicated, and set up the
202 input stream. These operations fail only the exceptional circumstances. Note
203 that never_error() won't use smtp_out if it is NULL. */
204
205 if (!(smtp_out = fdopen(accept_socket, "wb")))
206   {
207   never_error(US"daemon: fdopen() for smtp_out failed", US"", errno);
208   goto ERROR_RETURN;
209   }
210
211 if ((dup_accept_socket = dup(accept_socket)) < 0)
212   {
213   never_error(US"daemon: couldn't dup socket descriptor",
214     US"Connection setup failed", errno);
215   goto ERROR_RETURN;
216   }
217
218 if (!(smtp_in = fdopen(dup_accept_socket, "rb")))
219   {
220   never_error(US"daemon: fdopen() for smtp_in failed",
221     US"Connection setup failed", errno);
222   goto ERROR_RETURN;
223   }
224
225 /* Get the data for the local interface address. Panic for most errors, but
226 "connection reset by peer" just means the connection went away. */
227
228 if (getsockname(accept_socket, (struct sockaddr *)(&interface_sockaddr),
229      &ifsize) < 0)
230   {
231   log_write(0, LOG_MAIN | ((errno == ECONNRESET)? 0 : LOG_PANIC),
232     "getsockname() failed: %s", strerror(errno));
233   smtp_printf("421 Local problem: getsockname() failed; please try again later\r\n", FALSE);
234   goto ERROR_RETURN;
235   }
236
237 interface_address = host_ntoa(-1, &interface_sockaddr, NULL, &interface_port);
238 DEBUG(D_interface) debug_printf("interface address=%s port=%d\n",
239   interface_address, interface_port);
240
241 /* Build a string identifying the remote host and, if requested, the port and
242 the local interface data. This is for logging; at the end of this function the
243 memory is reclaimed. */
244
245 whofrom = string_append(NULL, 3, "[", sender_host_address, "]");
246
247 if (LOGGING(incoming_port))
248   whofrom = string_fmt_append(whofrom, ":%d", sender_host_port);
249
250 if (LOGGING(incoming_interface))
251   whofrom = string_fmt_append(whofrom, " I=[%s]:%d",
252     interface_address, interface_port);
253
254 (void) string_from_gstring(whofrom);    /* Terminate the newly-built string */
255
256 /* Check maximum number of connections. We do not check for reserved
257 connections or unacceptable hosts here. That is done in the subprocess because
258 it might take some time. */
259
260 if (smtp_accept_max > 0 && smtp_accept_count >= smtp_accept_max)
261   {
262   DEBUG(D_any) debug_printf("rejecting SMTP connection: count=%d max=%d\n",
263     smtp_accept_count, smtp_accept_max);
264   smtp_printf("421 Too many concurrent SMTP connections; "
265     "please try again later.\r\n", FALSE);
266   log_write(L_connection_reject,
267             LOG_MAIN, "Connection from %s refused: too many connections",
268     whofrom->s);
269   goto ERROR_RETURN;
270   }
271
272 /* If a load limit above which only reserved hosts are acceptable is defined,
273 get the load average here, and if there are in fact no reserved hosts, do
274 the test right away (saves a fork). If there are hosts, do the check in the
275 subprocess because it might take time. */
276
277 if (smtp_load_reserve >= 0)
278   {
279   load_average = OS_GETLOADAVG();
280   if (smtp_reserve_hosts == NULL && load_average > smtp_load_reserve)
281     {
282     DEBUG(D_any) debug_printf("rejecting SMTP connection: load average = %.2f\n",
283       (double)load_average/1000.0);
284     smtp_printf("421 Too much load; please try again later.\r\n", FALSE);
285     log_write(L_connection_reject,
286               LOG_MAIN, "Connection from %s refused: load average = %.2f",
287       whofrom->s, (double)load_average/1000.0);
288     goto ERROR_RETURN;
289     }
290   }
291
292 /* Check that one specific host (strictly, IP address) is not hogging
293 resources. This is done here to prevent a denial of service attack by someone
294 forcing you to fork lots of times before denying service. The value of
295 smtp_accept_max_per_host is a string which is expanded. This makes it possible
296 to provide host-specific limits according to $sender_host address, but because
297 this is in the daemon mainline, only fast expansions (such as inline address
298 checks) should be used. The documentation is full of warnings. */
299
300 if (smtp_accept_max_per_host != NULL)
301   {
302   uschar *expanded = expand_string(smtp_accept_max_per_host);
303   if (expanded == NULL)
304     {
305     if (!f.expand_string_forcedfail)
306       log_write(0, LOG_MAIN|LOG_PANIC, "expansion of smtp_accept_max_per_host "
307         "failed for %s: %s", whofrom->s, expand_string_message);
308     }
309   /* For speed, interpret a decimal number inline here */
310   else
311     {
312     uschar *s = expanded;
313     while (isdigit(*s))
314       max_for_this_host = max_for_this_host * 10 + *s++ - '0';
315     if (*s != 0)
316       log_write(0, LOG_MAIN|LOG_PANIC, "expansion of smtp_accept_max_per_host "
317         "for %s contains non-digit: %s", whofrom->s, expanded);
318     }
319   }
320
321 /* If we have fewer connections than max_for_this_host, we can skip the tedious
322 per host_address checks. Note that at this stage smtp_accept_count contains the
323 count of *other* connections, not including this one. */
324
325 if ((max_for_this_host > 0) &&
326     (smtp_accept_count >= max_for_this_host))
327   {
328   int host_accept_count = 0;
329   int other_host_count = 0;    /* keep a count of non matches to optimise */
330
331   for (int i = 0; i < smtp_accept_max; ++i)
332     if (smtp_slots[i].host_address)
333       {
334       if (Ustrcmp(sender_host_address, smtp_slots[i].host_address) == 0)
335        host_accept_count++;
336       else
337        other_host_count++;
338
339       /* Testing all these strings is expensive - see if we can drop out
340       early, either by hitting the target, or finding there are not enough
341       connections left to make the target. */
342
343       if ((host_accept_count >= max_for_this_host) ||
344          ((smtp_accept_count - other_host_count) < max_for_this_host))
345        break;
346       }
347
348   if (host_accept_count >= max_for_this_host)
349     {
350     DEBUG(D_any) debug_printf("rejecting SMTP connection: too many from this "
351       "IP address: count=%d max=%d\n",
352       host_accept_count, max_for_this_host);
353     smtp_printf("421 Too many concurrent SMTP connections "
354       "from this IP address; please try again later.\r\n", FALSE);
355     log_write(L_connection_reject,
356               LOG_MAIN, "Connection from %s refused: too many connections "
357       "from that IP address", whofrom->s);
358     search_tidyup();
359     goto ERROR_RETURN;
360     }
361   }
362
363 /* OK, the connection count checks have been passed. Before we can fork the
364 accepting process, we must first log the connection if requested. This logging
365 used to happen in the subprocess, but doing that means that the value of
366 smtp_accept_count can be out of step by the time it is logged. So we have to do
367 the logging here and accept the performance cost. Note that smtp_accept_count
368 hasn't yet been incremented to take account of this connection.
369
370 In order to minimize the cost (because this is going to happen for every
371 connection), do a preliminary selector test here. This saves ploughing through
372 the generalized logging code each time when the selector is false. If the
373 selector is set, check whether the host is on the list for logging. If not,
374 arrange to unset the selector in the subprocess. */
375
376 if (LOGGING(smtp_connection))
377   {
378   uschar *list = hosts_connection_nolog;
379   memset(sender_host_cache, 0, sizeof(sender_host_cache));
380   if (list != NULL && verify_check_host(&list) == OK)
381     save_log_selector &= ~L_smtp_connection;
382   else
383     log_write(L_smtp_connection, LOG_MAIN, "SMTP connection from %s "
384       "(TCP/IP connection count = %d)", whofrom->s, smtp_accept_count + 1);
385   }
386
387 /* Now we can fork the accepting process; do a lookup tidy, just in case any
388 expansion above did a lookup. */
389
390 search_tidyup();
391 pid = exim_fork(US"daemon-accept");
392
393 /* Handle the child process */
394
395 if (pid == 0)
396   {
397   int queue_only_reason = 0;
398   int old_pool = store_pool;
399   int save_debug_selector = debug_selector;
400   BOOL local_queue_only;
401   BOOL session_local_queue_only;
402   #ifdef SA_NOCLDWAIT
403   struct sigaction act;
404   #endif
405
406   smtp_accept_count++;    /* So that it includes this process */
407
408   /* May have been modified for the subprocess */
409
410   *log_selector = save_log_selector;
411
412   /* Get the local interface address into permanent store */
413
414   store_pool = POOL_PERM;
415   interface_address = string_copy(interface_address);
416   store_pool = old_pool;
417
418   /* Check for a tls-on-connect port */
419
420   if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
421
422   /* Expand smtp_active_hostname if required. We do not do this any earlier,
423   because it may depend on the local interface address (indeed, that is most
424   likely what it depends on.) */
425
426   smtp_active_hostname = primary_hostname;
427   if (raw_active_hostname)
428     {
429     uschar * nah = expand_string(raw_active_hostname);
430     if (!nah)
431       {
432       if (!f.expand_string_forcedfail)
433         {
434         log_write(0, LOG_MAIN|LOG_PANIC, "failed to expand \"%s\" "
435           "(smtp_active_hostname): %s", raw_active_hostname,
436           expand_string_message);
437         smtp_printf("421 Local configuration error; "
438           "please try again later.\r\n", FALSE);
439         mac_smtp_fflush();
440         search_tidyup();
441         exim_underbar_exit(EXIT_FAILURE);
442         }
443       }
444     else if (*nah) smtp_active_hostname = nah;
445     }
446
447   /* Initialize the queueing flags */
448
449   queue_check_only();
450   session_local_queue_only = queue_only;
451
452   /* Close the listening sockets, and set the SIGCHLD handler to SIG_IGN.
453   We also attempt to set things up so that children are automatically reaped,
454   but just in case this isn't available, there's a paranoid waitpid() in the
455   loop too (except for systems where we are sure it isn't needed). See the more
456   extensive comment before the reception loop in exim.c for a fuller
457   explanation of this logic. */
458
459   close_daemon_sockets(daemon_notifier_fd, listen_sockets, listen_socket_count);
460
461   /* Set FD_CLOEXEC on the SMTP socket. We don't want any rogue child processes
462   to be able to communicate with them, under any circumstances. */
463   (void)fcntl(accept_socket, F_SETFD,
464               fcntl(accept_socket, F_GETFD) | FD_CLOEXEC);
465   (void)fcntl(dup_accept_socket, F_SETFD,
466               fcntl(dup_accept_socket, F_GETFD) | FD_CLOEXEC);
467
468   #ifdef SA_NOCLDWAIT
469   act.sa_handler = SIG_IGN;
470   sigemptyset(&(act.sa_mask));
471   act.sa_flags = SA_NOCLDWAIT;
472   sigaction(SIGCHLD, &act, NULL);
473   #else
474   signal(SIGCHLD, SIG_IGN);
475   #endif
476   signal(SIGTERM, SIG_DFL);
477   signal(SIGINT, SIG_DFL);
478
479   /* Attempt to get an id from the sending machine via the RFC 1413
480   protocol. We do this in the sub-process in order not to hold up the
481   main process if there is any delay. Then set up the fullhost information
482   in case there is no HELO/EHLO.
483
484   If debugging is enabled only for the daemon, we must turn if off while
485   finding the id, but turn it on again afterwards so that information about the
486   incoming connection is output. */
487
488   if (f.debug_daemon) debug_selector = 0;
489   verify_get_ident(IDENT_PORT);
490   host_build_sender_fullhost();
491   debug_selector = save_debug_selector;
492
493   DEBUG(D_any)
494     debug_printf("Process %d is handling incoming connection from %s\n",
495       (int)getpid(), sender_fullhost);
496
497   /* Now disable debugging permanently if it's required only for the daemon
498   process. */
499
500   if (f.debug_daemon) debug_selector = 0;
501
502   /* If there are too many child processes for immediate delivery,
503   set the session_local_queue_only flag, which is initialized from the
504   configured value and may therefore already be TRUE. Leave logging
505   till later so it will have a message id attached. Note that there is no
506   possibility of re-calculating this per-message, because the value of
507   smtp_accept_count does not change in this subprocess. */
508
509   if (smtp_accept_queue > 0 && smtp_accept_count > smtp_accept_queue)
510     {
511     session_local_queue_only = TRUE;
512     queue_only_reason = 1;
513     }
514
515   /* Handle the start of the SMTP session, then loop, accepting incoming
516   messages from the SMTP connection. The end will come at the QUIT command,
517   when smtp_setup_msg() returns 0. A break in the connection causes the
518   process to die (see accept.c).
519
520   NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
521   because a log line has already been written for all its failure exists
522   (usually "connection refused: <reason>") and writing another one is
523   unnecessary clutter. */
524
525   if (!smtp_start_session())
526     {
527     mac_smtp_fflush();
528     search_tidyup();
529     exim_underbar_exit(EXIT_SUCCESS);
530     }
531
532   for (;;)
533     {
534     int rc;
535     message_id[0] = 0;            /* Clear out any previous message_id */
536     reset_point = store_mark();   /* Save current store high water point */
537
538     DEBUG(D_any)
539       debug_printf("Process %d is ready for new message\n", (int)getpid());
540
541     /* Smtp_setup_msg() returns 0 on QUIT or if the call is from an
542     unacceptable host or if an ACL "drop" command was triggered, -1 on
543     connection lost, and +1 on validly reaching DATA. Receive_msg() almost
544     always returns TRUE when smtp_input is true; just retry if no message was
545     accepted (can happen for invalid message parameters). However, it can yield
546     FALSE if the connection was forcibly dropped by the DATA ACL. */
547
548     if ((rc = smtp_setup_msg()) > 0)
549       {
550       BOOL ok = receive_msg(FALSE);
551       search_tidyup();                    /* Close cached databases */
552       if (!ok)                            /* Connection was dropped */
553         {
554         cancel_cutthrough_connection(TRUE, US"receive dropped");
555         mac_smtp_fflush();
556         smtp_log_no_mail();               /* Log no mail if configured */
557         exim_underbar_exit(EXIT_SUCCESS);
558         }
559       if (message_id[0] == 0) continue;   /* No message was accepted */
560       }
561     else
562       {
563       if (smtp_out)
564         {
565         int fd = fileno(smtp_in);
566         uschar buf[128];
567
568         mac_smtp_fflush();
569         /* drain socket, for clean TCP FINs */
570         if (fcntl(fd, F_SETFL, O_NONBLOCK) == 0)
571           for(int i = 16; read(fd, buf, sizeof(buf)) > 0 && i > 0; ) i--;
572         }
573       cancel_cutthrough_connection(TRUE, US"message setup dropped");
574       search_tidyup();
575       smtp_log_no_mail();                 /* Log no mail if configured */
576
577       /*XXX should we pause briefly, hoping that the client will be the
578       active TCP closer hence get the TCP_WAIT endpoint? */
579       DEBUG(D_receive) debug_printf("SMTP>>(close on process exit)\n");
580       exim_underbar_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
581       }
582
583     /* Show the recipients when debugging */
584
585     DEBUG(D_receive)
586       {
587       if (sender_address)
588         debug_printf("Sender: %s\n", sender_address);
589       if (recipients_list)
590         {
591         debug_printf("Recipients:\n");
592         for (int i = 0; i < recipients_count; i++)
593           debug_printf("  %s\n", recipients_list[i].address);
594         }
595       }
596
597     /* A message has been accepted. Clean up any previous delivery processes
598     that have completed and are defunct, on systems where they don't go away
599     by themselves (see comments when setting SIG_IGN above). On such systems
600     (if any) these delivery processes hang around after termination until
601     the next message is received. */
602
603     #ifndef SIG_IGN_WORKS
604     while (waitpid(-1, NULL, WNOHANG) > 0);
605     #endif
606
607     /* Reclaim up the store used in accepting this message */
608
609       {
610       int r = receive_messagecount;
611       BOOL q = f.queue_only_policy;
612       smtp_reset(reset_point);
613       reset_point = NULL;
614       f.queue_only_policy = q;
615       receive_messagecount = r;
616       }
617
618     /* If queue_only is set or if there are too many incoming connections in
619     existence, session_local_queue_only will be TRUE. If it is not, check
620     whether we have received too many messages in this session for immediate
621     delivery. */
622
623     if (!session_local_queue_only &&
624         smtp_accept_queue_per_connection > 0 &&
625         receive_messagecount > smtp_accept_queue_per_connection)
626       {
627       session_local_queue_only = TRUE;
628       queue_only_reason = 2;
629       }
630
631     /* Initialize local_queue_only from session_local_queue_only. If it is not
632     true, and queue_only_load is set, check that the load average is below it.
633     If local_queue_only is set by this means, we also set if for the session if
634     queue_only_load_latch is true (the default). This means that, once set,
635     local_queue_only remains set for any subsequent messages on the same SMTP
636     connection. This is a deliberate choice; even though the load average may
637     fall, it doesn't seem right to deliver later messages on the same call when
638     not delivering earlier ones. However, the are special circumstances such as
639     very long-lived connections from scanning appliances where this is not the
640     best strategy. In such cases, queue_only_load_latch should be set false. */
641
642     if (  !(local_queue_only = session_local_queue_only)
643        && queue_only_load >= 0
644        && (local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load)
645        )
646       {
647       queue_only_reason = 3;
648       if (queue_only_load_latch) session_local_queue_only = TRUE;
649       }
650
651     /* Log the queueing here, when it will get a message id attached, but
652     not if queue_only is set (case 0). */
653
654     if (local_queue_only) switch(queue_only_reason)
655       {
656       case 1: log_write(L_delay_delivery,
657                 LOG_MAIN, "no immediate delivery: too many connections "
658                 "(%d, max %d)", smtp_accept_count, smtp_accept_queue);
659               break;
660
661       case 2: log_write(L_delay_delivery,
662                 LOG_MAIN, "no immediate delivery: more than %d messages "
663                 "received in one connection", smtp_accept_queue_per_connection);
664               break;
665
666       case 3: log_write(L_delay_delivery,
667                 LOG_MAIN, "no immediate delivery: load average %.2f",
668                 (double)load_average/1000.0);
669               break;
670       }
671
672     /* If a delivery attempt is required, spin off a new process to handle it.
673     If we are not root, we have to re-exec exim unless deliveries are being
674     done unprivileged. */
675
676     else if (  (!f.queue_only_policy || f.queue_smtp)
677             && !f.deliver_freeze)
678       {
679       pid_t dpid;
680
681       /* Before forking, ensure that the C output buffer is flushed. Otherwise
682       anything that it in it will get duplicated, leading to duplicate copies
683       of the pending output. */
684
685       mac_smtp_fflush();
686
687       if ((dpid = exim_fork(US"daemon-accept-delivery")) == 0)
688         {
689         (void)fclose(smtp_in);
690         (void)fclose(smtp_out);
691
692         /* Don't ever molest the parent's SSL connection, but do clean up
693         the data structures if necessary. */
694
695 #ifndef DISABLE_TLS
696         tls_close(NULL, TLS_NO_SHUTDOWN);
697 #endif
698
699         /* Reset SIGHUP and SIGCHLD in the child in both cases. */
700
701         signal(SIGHUP,  SIG_DFL);
702         signal(SIGCHLD, SIG_DFL);
703         signal(SIGTERM, SIG_DFL);
704         signal(SIGINT, SIG_DFL);
705
706         if (geteuid() != root_uid && !deliver_drop_privilege)
707           {
708           signal(SIGALRM, SIG_DFL);
709           delivery_re_exec(CEE_EXEC_PANIC);
710           /* Control does not return here. */
711           }
712
713         /* No need to re-exec; SIGALRM remains set to the default handler */
714
715         (void) deliver_message(message_id, FALSE, FALSE);
716         search_tidyup();
717         exim_underbar_exit(EXIT_SUCCESS);
718         }
719
720       if (dpid > 0)
721         {
722         release_cutthrough_connection(US"passed for delivery");
723         DEBUG(D_any) debug_printf("forked delivery process %d\n", (int)dpid);
724         }
725       else
726         {
727         cancel_cutthrough_connection(TRUE, US"delivery fork failed");
728         log_write(0, LOG_MAIN|LOG_PANIC, "daemon: delivery process fork "
729           "failed: %s", strerror(errno));
730         }
731       }
732     }
733   }
734
735
736 /* Carrying on in the parent daemon process... Can't do much if the fork
737 failed. Otherwise, keep count of the number of accepting processes and
738 remember the pid for ticking off when the child completes. */
739
740 if (pid < 0)
741   never_error(US"daemon: accept process fork failed", US"Fork failed", errno);
742 else
743   {
744   for (int i = 0; i < smtp_accept_max; ++i)
745     if (smtp_slots[i].pid <= 0)
746       {
747       smtp_slots[i].pid = pid;
748       /* Connection closes come asyncronously, so we cannot stack this store */
749       if (smtp_accept_max_per_host)
750         smtp_slots[i].host_address = string_copy_malloc(sender_host_address);
751       smtp_accept_count++;
752       break;
753       }
754   DEBUG(D_any) debug_printf("%d SMTP accept process%s running\n",
755     smtp_accept_count, smtp_accept_count == 1 ? "" : "es");
756   }
757
758 /* Get here via goto in error cases */
759
760 ERROR_RETURN:
761
762 /* Close the streams associated with the socket which will also close the
763 socket fds in this process. We can't do anything if fclose() fails, but
764 logging brings it to someone's attention. However, "connection reset by peer"
765 isn't really a problem, so skip that one. On Solaris, a dropped connection can
766 manifest itself as a broken pipe, so drop that one too. If the streams don't
767 exist, something went wrong while setting things up. Make sure the socket
768 descriptors are closed, in order to drop the connection. */
769
770 if (smtp_out)
771   {
772   if (fclose(smtp_out) != 0 && errno != ECONNRESET && errno != EPIPE)
773     log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fclose(smtp_out) failed: %s",
774       strerror(errno));
775   smtp_out = NULL;
776   }
777 else (void)close(accept_socket);
778
779 if (smtp_in)
780   {
781   if (fclose(smtp_in) != 0 && errno != ECONNRESET && errno != EPIPE)
782     log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fclose(smtp_in) failed: %s",
783       strerror(errno));
784   smtp_in = NULL;
785   }
786 else (void)close(dup_accept_socket);
787
788 /* Release any store used in this process, including the store used for holding
789 the incoming host address and an expanded active_hostname. */
790
791 log_close_all();
792 interface_address =
793 sender_host_address = NULL;
794 store_reset(reset_point);
795 sender_host_address = NULL;
796 }
797
798
799
800
801 /*************************************************
802 *       Check wildcard listen special cases      *
803 *************************************************/
804
805 /* This function is used when binding and listening on lists of addresses and
806 ports. It tests for special cases of wildcard listening, when IPv4 and IPv6
807 sockets may interact in different ways in different operating systems. It is
808 passed an error number, the list of listening addresses, and the current
809 address. Two checks are available: for a previous wildcard IPv6 address, or for
810 a following wildcard IPv4 address, in both cases on the same port.
811
812 In practice, pairs of wildcard addresses should be adjacent in the address list
813 because they are sorted that way below.
814
815 Arguments:
816   eno            the error number
817   addresses      the list of addresses
818   ipa            the current IP address
819   back           if TRUE, check for previous wildcard IPv6 address
820                  if FALSE, check for a following wildcard IPv4 address
821
822 Returns:         TRUE or FALSE
823 */
824
825 static BOOL
826 check_special_case(int eno, ip_address_item *addresses, ip_address_item *ipa,
827   BOOL back)
828 {
829 ip_address_item *ipa2;
830
831 /* For the "back" case, if the failure was "address in use" for a wildcard IPv4
832 address, seek a previous IPv6 wildcard address on the same port. As it is
833 previous, it must have been successfully bound and be listening. Flag it as a
834 "6 including 4" listener. */
835
836 if (back)
837   {
838   if (eno != EADDRINUSE || ipa->address[0] != 0) return FALSE;
839   for (ipa2 = addresses; ipa2 != ipa; ipa2 = ipa2->next)
840     {
841     if (ipa2->address[1] == 0 && ipa2->port == ipa->port)
842       {
843       ipa2->v6_include_v4 = TRUE;
844       return TRUE;
845       }
846     }
847   }
848
849 /* For the "forward" case, if the current address is a wildcard IPv6 address,
850 we seek a following wildcard IPv4 address on the same port. */
851
852 else
853   {
854   if (ipa->address[0] != ':' || ipa->address[1] != 0) return FALSE;
855   for (ipa2 = ipa->next; ipa2 != NULL; ipa2 = ipa2->next)
856     if (ipa2->address[0] == 0 && ipa->port == ipa2->port) return TRUE;
857   }
858
859 return FALSE;
860 }
861
862
863
864
865 /*************************************************
866 *         Handle terminating subprocesses        *
867 *************************************************/
868
869 /* Handle the termination of child processes. Theoretically, this need be done
870 only when sigchld_seen is TRUE, but rumour has it that some systems lose
871 SIGCHLD signals at busy times, so to be on the safe side, this function is
872 called each time round. It shouldn't be too expensive.
873
874 Arguments:  none
875 Returns:    nothing
876 */
877
878 static void
879 handle_ending_processes(void)
880 {
881 int status;
882 pid_t pid;
883
884 while ((pid = waitpid(-1, &status, WNOHANG)) > 0)
885   {
886   DEBUG(D_any)
887     {
888     debug_printf("child %d ended: status=0x%x\n", (int)pid, status);
889 #ifdef WCOREDUMP
890     if (WIFEXITED(status))
891       debug_printf("  normal exit, %d\n", WEXITSTATUS(status));
892     else if (WIFSIGNALED(status))
893       debug_printf("  signal exit, signal %d%s\n", WTERMSIG(status),
894           WCOREDUMP(status) ? " (core dumped)" : "");
895 #endif
896     }
897
898   /* If it's a listening daemon for which we are keeping track of individual
899   subprocesses, deal with an accepting process that has terminated. */
900
901   if (smtp_slots)
902     {
903     int i;
904     for (i = 0; i < smtp_accept_max; i++)
905       if (smtp_slots[i].pid == pid)
906         {
907         if (smtp_slots[i].host_address)
908           store_free(smtp_slots[i].host_address);
909         smtp_slots[i] = empty_smtp_slot;
910         if (--smtp_accept_count < 0) smtp_accept_count = 0;
911         DEBUG(D_any) debug_printf("%d SMTP accept process%s now running\n",
912           smtp_accept_count, (smtp_accept_count == 1)? "" : "es");
913         break;
914         }
915     if (i < smtp_accept_max) continue;  /* Found an accepting process */
916     }
917
918   /* If it wasn't an accepting process, see if it was a queue-runner
919   process that we are tracking. */
920
921   if (queue_pid_slots)
922     {
923     int max = atoi(CS expand_string(queue_run_max));
924     for (int i = 0; i < max; i++)
925       if (queue_pid_slots[i] == pid)
926         {
927         queue_pid_slots[i] = 0;
928         if (--queue_run_count < 0) queue_run_count = 0;
929         DEBUG(D_any) debug_printf("%d queue-runner process%s now running\n",
930           queue_run_count, (queue_run_count == 1)? "" : "es");
931         break;
932         }
933     }
934   }
935 }
936
937
938
939 static void
940 set_pid_file_path(void)
941 {
942 if (override_pid_file_path)
943   pid_file_path = override_pid_file_path;
944
945 if (!*pid_file_path)
946   pid_file_path = string_sprintf("%s/exim-daemon.pid", spool_directory);
947
948 if (pid_file_path[0] != '/')
949   log_write(0, LOG_PANIC_DIE, "pid file path %s must be absolute\n", pid_file_path);
950 }
951
952
953 /* Remove the daemon's pidfile.  Note: runs with root privilege,
954 as a direct child of the daemon.  Does not return. */
955
956 void
957 delete_pid_file(void)
958 {
959 uschar * daemon_pid = string_sprintf("%d\n", (int)getppid());
960 FILE * f;
961
962 set_pid_file_path();
963 if ((f = Ufopen(pid_file_path, "rb")))
964   {
965   if (  fgets(CS big_buffer, big_buffer_size, f)
966         && Ustrcmp(daemon_pid, big_buffer) == 0
967      )
968     if (Uunlink(pid_file_path) == 0)
969       {
970       DEBUG(D_any)
971         debug_printf("%s unlink: %s\n", pid_file_path, strerror(errno));
972       }
973     else
974       DEBUG(D_any)
975         debug_printf("unlinked %s\n", pid_file_path);
976   fclose(f);
977   }
978 else
979   DEBUG(D_any)
980     debug_printf("%s\n", string_open_failed(errno, "pid file %s",
981       pid_file_path));
982 exim_exit(EXIT_SUCCESS);
983 }
984
985
986 /* Called by the daemon; exec a child to get the pid file deleted
987 since we may require privs for the containing directory */
988
989 static void
990 daemon_die(void)
991 {
992 int pid;
993
994 DEBUG(D_any) debug_printf("SIGTERM/SIGINT seen\n");
995 #if !defined(DISABLE_TLS) && (defined(EXIM_HAVE_INOTIFY) || defined(EXIM_HAVE_KEVENT))
996 tls_watch_invalidate();
997 #endif
998
999 if (daemon_notifier_fd >= 0)
1000   {
1001   close(daemon_notifier_fd);
1002   daemon_notifier_fd = -1;
1003 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1004   unlink_notifier_socket();
1005 #endif
1006   }
1007
1008 if (f.running_in_test_harness || write_pid)
1009   {
1010   if ((pid = exim_fork(US"daemon-del-pidfile")) == 0)
1011     {
1012     if (override_pid_file_path)
1013       (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, 3,
1014         "-oP", override_pid_file_path, "-oPX");
1015     else
1016       (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, 1, "-oPX");
1017
1018     /* Control never returns here. */
1019     }
1020   if (pid > 0)
1021     child_close(pid, 1);
1022   }
1023 exim_exit(EXIT_SUCCESS);
1024 }
1025
1026
1027 /*************************************************
1028 *       Listener socket for local work prompts   *
1029 *************************************************/
1030
1031 static void
1032 daemon_notifier_socket(void)
1033 {
1034 int fd;
1035 const uschar * where;
1036 struct sockaddr_un sa_un = {.sun_family = AF_UNIX};
1037 int len;
1038
1039 if (override_local_interfaces && !override_pid_file_path)
1040   {
1041   DEBUG(D_any)
1042     debug_printf("-oX used without -oP so not creating notifier socket\n");
1043   return;
1044   }
1045
1046 DEBUG(D_any) debug_printf("creating notifier socket\n");
1047
1048 #ifdef SOCK_CLOEXEC
1049 if ((fd = socket(PF_UNIX, SOCK_DGRAM|SOCK_CLOEXEC, 0)) < 0)
1050   { where = US"socket"; goto bad; }
1051 #else
1052 if ((fd = socket(PF_UNIX, SOCK_DGRAM, 0)) < 0)
1053   { where = US"socket"; goto bad; }
1054 (void)fcntl(fd, F_SETFD, fcntl(fd, F_GETFD) | FD_CLOEXEC);
1055 #endif
1056
1057 #ifdef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1058 sa_un.sun_path[0] = 0;  /* Abstract local socket addr - Linux-specific? */
1059 len = offsetof(struct sockaddr_un, sun_path) + 1
1060   + snprintf(sa_un.sun_path+1, sizeof(sa_un.sun_path)-1, "%s",
1061               expand_string(notifier_socket));
1062 DEBUG(D_any) debug_printf(" @%s\n", sa_un.sun_path+1);
1063 #else                   /* filesystem-visible and persistent; will neeed removal */
1064 len = offsetof(struct sockaddr_un, sun_path)
1065   + snprintf(sa_un.sun_path, sizeof(sa_un.sun_path), "%s",
1066               expand_string(notifier_socket));
1067 DEBUG(D_any) debug_printf(" %s\n", sa_un.sun_path);
1068 #endif
1069
1070 if (bind(fd, (const struct sockaddr *)&sa_un, len) < 0)
1071   { where = US"bind"; goto bad; }
1072
1073 #ifdef SO_PASSCRED              /* Linux */
1074 if (setsockopt(fd, SOL_SOCKET, SO_PASSCRED, &on, sizeof(on)) < 0)
1075   { where = US"SO_PASSCRED"; goto bad2; }
1076 #elif defined(LOCAL_CREDS)      /* FreeBSD-ish */
1077 if (setsockopt(fd, 0, LOCAL_CREDS, &on, sizeof(on)) < 0)
1078   { where = US"LOCAL_CREDS"; goto bad2; }
1079 #endif
1080
1081 /* debug_printf("%s: fd %d\n", __FUNCTION__, fd); */
1082 daemon_notifier_fd = fd;
1083 return;
1084
1085 bad2:
1086 #ifndef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1087   Uunlink(sa_un.sun_path);
1088 #endif
1089 bad:
1090   log_write(0, LOG_MAIN|LOG_PANIC, "%s %s: %s",
1091     __FUNCTION__, where, strerror(errno));
1092   close(fd);
1093   return;
1094 }
1095
1096
1097 static uschar queuerun_msgid[MESSAGE_ID_LENGTH+1];
1098
1099 /* Return TRUE if a sigalrm should be emulated */
1100 static BOOL
1101 daemon_notification(void)
1102 {
1103 uschar buf[256], cbuf[256];
1104 struct sockaddr_un sa_un;
1105 struct iovec iov = {.iov_base = buf, .iov_len = sizeof(buf)-1};
1106 struct msghdr msg = { .msg_name = &sa_un,
1107                       .msg_namelen = sizeof(sa_un),
1108                       .msg_iov = &iov,
1109                       .msg_iovlen = 1,
1110                       .msg_control = cbuf,
1111                       .msg_controllen = sizeof(cbuf)
1112                     };
1113 ssize_t sz;
1114
1115 buf[sizeof(buf)-1] = 0;
1116 if ((sz = recvmsg(daemon_notifier_fd, &msg, 0)) <= 0) return FALSE;
1117 if (sz >= sizeof(buf)) return FALSE;
1118
1119 #ifdef notdef
1120 debug_printf("addrlen %d\n", msg.msg_namelen);
1121 #endif
1122 DEBUG(D_queue_run) debug_printf("%s from addr '%s%.*s'\n", __FUNCTION__,
1123   *sa_un.sun_path ? "" : "@",
1124   (int)msg.msg_namelen - (*sa_un.sun_path ? 0 : 1),
1125   sa_un.sun_path + (*sa_un.sun_path ? 0 : 1));
1126
1127 /* Refuse to handle the item unless the peer has good credentials */
1128 #ifdef SCM_CREDENTIALS
1129 # define EXIM_SCM_CR_TYPE SCM_CREDENTIALS
1130 #elif defined(LOCAL_CREDS) && defined(SCM_CREDS)
1131 # define EXIM_SCM_CR_TYPE SCM_CREDS
1132 #else
1133         /* The OS has no way to get the creds of the caller (for a unix/datagram socket.
1134         Punt; don't try to check. */
1135 #endif
1136
1137 #ifdef EXIM_SCM_CR_TYPE
1138 for (struct cmsghdr * cp = CMSG_FIRSTHDR(&msg);
1139      cp;
1140      cp = CMSG_NXTHDR(&msg, cp))
1141   if (cp->cmsg_level == SOL_SOCKET && cp->cmsg_type == EXIM_SCM_CR_TYPE)
1142   {
1143 # ifdef SCM_CREDENTIALS                                 /* Linux */
1144   struct ucred * cr = (struct ucred *) CMSG_DATA(cp);
1145   if (cr->uid && cr->uid != exim_uid)
1146     {
1147     DEBUG(D_queue_run) debug_printf("%s: sender creds pid %d uid %d gid %d\n",
1148       __FUNCTION__, (int)cr->pid, (int)cr->uid, (int)cr->gid);
1149     return FALSE;
1150     }
1151 # elif defined(LOCAL_CREDS)                             /* BSD-ish */
1152   struct sockcred * cr = (struct sockcred *) CMSG_DATA(cp);
1153   if (cr->sc_uid && cr->sc_uid != exim_uid)
1154     {
1155     DEBUG(D_queue_run) debug_printf("%s: sender creds pid ??? uid %d gid %d\n",
1156       __FUNCTION__, (int)cr->sc_uid, (int)cr->sc_gid);
1157     return FALSE;
1158     }
1159 # endif
1160   break;
1161   }
1162 #endif
1163
1164 buf[sz] = 0;
1165 switch (buf[0])
1166   {
1167 #ifdef EXPERIMENTAL_QUEUE_RAMP
1168   case NOTIFY_MSG_QRUN:
1169     /* this should be a message_id */
1170     DEBUG(D_queue_run)
1171       debug_printf("%s: qrunner trigger: %s\n", __FUNCTION__, buf+1);
1172     memcpy(queuerun_msgid, buf+1, MESSAGE_ID_LENGTH+1);
1173     return TRUE;
1174 #endif  /*EXPERIMENTAL_QUEUE_RAMP*/
1175
1176   case NOTIFY_QUEUE_SIZE_REQ:
1177     {
1178     uschar buf[16];
1179     int len = snprintf(CS buf, sizeof(buf), "%u", queue_count_cached());
1180
1181     DEBUG(D_queue_run)
1182       debug_printf("%s: queue size request: %s\n", __FUNCTION__, buf);
1183
1184     if (sendto(daemon_notifier_fd, buf, len, 0,
1185                 (const struct sockaddr *)&sa_un, msg.msg_namelen) < 0)
1186       log_write(0, LOG_MAIN|LOG_PANIC,
1187         "%s: sendto: %s\n", __FUNCTION__, strerror(errno));
1188     return FALSE;
1189     }
1190   }
1191 return FALSE;
1192 }
1193
1194
1195 /*************************************************
1196 *              Exim Daemon Mainline              *
1197 *************************************************/
1198
1199 /* The daemon can do two jobs, either of which is optional:
1200
1201 (1) Listens for incoming SMTP calls and spawns off a sub-process to handle
1202 each one. This is requested by the -bd option, with -oX specifying the SMTP
1203 port on which to listen (for testing).
1204
1205 (2) Spawns a queue-running process every so often. This is controlled by the
1206 -q option with a an interval time. (If no time is given, a single queue run
1207 is done from the main function, and control doesn't get here.)
1208
1209 Root privilege is required in order to attach to port 25. Some systems require
1210 it when calling socket() rather than bind(). To cope with all cases, we run as
1211 root for both socket() and bind(). Some systems also require root in order to
1212 write to the pid file directory. This function must therefore be called as root
1213 if it is to work properly in all circumstances. Once the socket is bound and
1214 the pid file written, root privilege is given up if there is an exim uid.
1215
1216 There are no arguments to this function, and it never returns. */
1217
1218 void
1219 daemon_go(void)
1220 {
1221 struct passwd *pw;
1222 int *listen_sockets = NULL;
1223 int listen_socket_count = 0;
1224 ip_address_item *addresses = NULL;
1225 time_t last_connection_time = (time_t)0;
1226 int local_queue_run_max = atoi(CS expand_string(queue_run_max));
1227
1228 process_purpose = US"daemon";
1229
1230 /* If any debugging options are set, turn on the D_pid bit so that all
1231 debugging lines get the pid added. */
1232
1233 DEBUG(D_any|D_v) debug_selector |= D_pid;
1234
1235 if (f.inetd_wait_mode)
1236   {
1237   listen_socket_count = 1;
1238   listen_sockets = store_get(sizeof(int), FALSE);
1239   (void) close(3);
1240   if (dup2(0, 3) == -1)
1241     log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1242         "failed to dup inetd socket safely away: %s", strerror(errno));
1243
1244   listen_sockets[0] = 3;
1245   (void) close(0);
1246   (void) close(1);
1247   (void) close(2);
1248   exim_nullstd();
1249
1250   if (debug_file == stderr)
1251     {
1252     /* need a call to log_write before call to open debug_file, so that
1253     log.c:file_path has been initialised.  This is unfortunate. */
1254     log_write(0, LOG_MAIN, "debugging Exim in inetd wait mode starting");
1255
1256     fclose(debug_file);
1257     debug_file = NULL;
1258     exim_nullstd(); /* re-open fd2 after we just closed it again */
1259     debug_logging_activate(US"-wait", NULL);
1260     }
1261
1262   DEBUG(D_any) debug_printf("running in inetd wait mode\n");
1263
1264   /* As per below, when creating sockets ourselves, we handle tcp_nodelay for
1265   our own buffering; we assume though that inetd set the socket REUSEADDR. */
1266
1267   if (tcp_nodelay)
1268     if (setsockopt(3, IPPROTO_TCP, TCP_NODELAY, US &on, sizeof(on)))
1269       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to set socket NODELAY: %s",
1270         strerror(errno));
1271   }
1272
1273
1274 if (f.inetd_wait_mode || f.daemon_listen)
1275   {
1276   /* If any option requiring a load average to be available during the
1277   reception of a message is set, call os_getloadavg() while we are root
1278   for those OS for which this is necessary the first time it is called (in
1279   order to perform an "open" on the kernel memory file). */
1280
1281   #ifdef LOAD_AVG_NEEDS_ROOT
1282   if (queue_only_load >= 0 || smtp_load_reserve >= 0 ||
1283        (deliver_queue_load_max >= 0 && deliver_drop_privilege))
1284     (void)os_getloadavg();
1285   #endif
1286   }
1287
1288
1289 /* Do the preparation for setting up a listener on one or more interfaces, and
1290 possible on various ports. This is controlled by the combination of
1291 local_interfaces (which can set IP addresses and ports) and daemon_smtp_port
1292 (which is a list of default ports to use for those items in local_interfaces
1293 that do not specify a port). The -oX command line option can be used to
1294 override one or both of these options.
1295
1296 If local_interfaces is not set, the default is to listen on all interfaces.
1297 When it is set, it can include "all IPvx interfaces" as an item. This is useful
1298 when different ports are in use.
1299
1300 It turns out that listening on all interfaces is messy in an IPv6 world,
1301 because several different implementation approaches have been taken. This code
1302 is now supposed to work with all of them. The point of difference is whether an
1303 IPv6 socket that is listening on all interfaces will receive incoming IPv4
1304 calls or not. We also have to cope with the case when IPv6 libraries exist, but
1305 there is no IPv6 support in the kernel.
1306
1307 . On Solaris, an IPv6 socket will accept IPv4 calls, and give them as mapped
1308   addresses. However, if an IPv4 socket is also listening on all interfaces,
1309   calls are directed to the appropriate socket.
1310
1311 . On (some versions of) Linux, an IPv6 socket will accept IPv4 calls, and
1312   give them as mapped addresses, but an attempt also to listen on an IPv4
1313   socket on all interfaces causes an error.
1314
1315 . On OpenBSD, an IPv6 socket will not accept IPv4 calls. You have to set up
1316   two sockets if you want to accept both kinds of call.
1317
1318 . FreeBSD is like OpenBSD, but it has the IPV6_V6ONLY socket option, which
1319   can be turned off, to make it behave like the versions of Linux described
1320   above.
1321
1322 . I heard a report that the USAGI IPv6 stack for Linux has implemented
1323   IPV6_V6ONLY.
1324
1325 So, what we do when IPv6 is supported is as follows:
1326
1327  (1) After it is set up, the list of interfaces is scanned for wildcard
1328      addresses. If an IPv6 and an IPv4 wildcard are both found for the same
1329      port, the list is re-arranged so that they are together, with the IPv6
1330      wildcard first.
1331
1332  (2) If the creation of a wildcard IPv6 socket fails, we just log the error and
1333      carry on if an IPv4 wildcard socket for the same port follows later in the
1334      list. This allows Exim to carry on in the case when the kernel has no IPv6
1335      support.
1336
1337  (3) Having created an IPv6 wildcard socket, we try to set IPV6_V6ONLY if that
1338      option is defined. However, if setting fails, carry on regardless (but log
1339      the incident).
1340
1341  (4) If binding or listening on an IPv6 wildcard socket fails, it is a serious
1342      error.
1343
1344  (5) If binding or listening on an IPv4 wildcard socket fails with the error
1345      EADDRINUSE, and a previous interface was an IPv6 wildcard for the same
1346      port (which must have succeeded or we wouldn't have got this far), we
1347      assume we are in the situation where just a single socket is permitted,
1348      and ignore the error.
1349
1350 Phew!
1351
1352 The preparation code decodes options and sets up the relevant data. We do this
1353 first, so that we can return non-zero if there are any syntax errors, and also
1354 write to stderr. */
1355
1356 if (f.daemon_listen && !f.inetd_wait_mode)
1357   {
1358   int *default_smtp_port;
1359   int sep;
1360   int pct = 0;
1361   uschar *s;
1362   const uschar * list;
1363   uschar *local_iface_source = US"local_interfaces";
1364   ip_address_item *ipa;
1365   ip_address_item **pipa;
1366
1367   /* If -oX was used, disable the writing of a pid file unless -oP was
1368   explicitly used to force it. Then scan the string given to -oX. Any items
1369   that contain neither a dot nor a colon are used to override daemon_smtp_port.
1370   Any other items are used to override local_interfaces. */
1371
1372   if (override_local_interfaces)
1373     {
1374     gstring * new_smtp_port = NULL;
1375     gstring * new_local_interfaces = NULL;
1376
1377     if (!override_pid_file_path) write_pid = FALSE;
1378
1379     list = override_local_interfaces;
1380     sep = 0;
1381     while ((s = string_nextinlist(&list, &sep, NULL, 0)))
1382       {
1383       uschar joinstr[4];
1384       gstring ** gp = Ustrpbrk(s, ".:") ? &new_local_interfaces : &new_smtp_port;
1385
1386       if (!*gp)
1387         {
1388         joinstr[0] = sep;
1389         joinstr[1] = ' ';
1390         *gp = string_catn(*gp, US"<", 1);
1391         }
1392
1393       *gp = string_catn(*gp, joinstr, 2);
1394       *gp = string_cat (*gp, s);
1395       }
1396
1397     if (new_smtp_port)
1398       {
1399       daemon_smtp_port = string_from_gstring(new_smtp_port);
1400       DEBUG(D_any) debug_printf("daemon_smtp_port overridden by -oX:\n  %s\n",
1401         daemon_smtp_port);
1402       }
1403
1404     if (new_local_interfaces)
1405       {
1406       local_interfaces = string_from_gstring(new_local_interfaces);
1407       local_iface_source = US"-oX data";
1408       DEBUG(D_any) debug_printf("local_interfaces overridden by -oX:\n  %s\n",
1409         local_interfaces);
1410       }
1411     }
1412
1413   /* Create a list of default SMTP ports, to be used if local_interfaces
1414   contains entries without explicit ports. First count the number of ports, then
1415   build a translated list in a vector. */
1416
1417   list = daemon_smtp_port;
1418   sep = 0;
1419   while ((s = string_nextinlist(&list, &sep, NULL, 0)))
1420     pct++;
1421   default_smtp_port = store_get((pct+1) * sizeof(int), FALSE);
1422   list = daemon_smtp_port;
1423   sep = 0;
1424   for (pct = 0;
1425        (s = string_nextinlist(&list, &sep, NULL, 0));
1426        pct++)
1427     {
1428     if (isdigit(*s))
1429       {
1430       uschar *end;
1431       default_smtp_port[pct] = Ustrtol(s, &end, 0);
1432       if (end != s + Ustrlen(s))
1433         log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "invalid SMTP port: %s", s);
1434       }
1435     else
1436       {
1437       struct servent *smtp_service = getservbyname(CS s, "tcp");
1438       if (!smtp_service)
1439         log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "TCP port \"%s\" not found", s);
1440       default_smtp_port[pct] = ntohs(smtp_service->s_port);
1441       }
1442     }
1443   default_smtp_port[pct] = 0;
1444
1445   /* Check the list of TLS-on-connect ports and do name lookups if needed */
1446
1447   list = tls_in.on_connect_ports;
1448   sep = 0;
1449   while ((s = string_nextinlist(&list, &sep, big_buffer, big_buffer_size)))
1450     if (!isdigit(*s))
1451       {
1452       gstring * g = NULL;
1453
1454       list = tls_in.on_connect_ports;
1455       tls_in.on_connect_ports = NULL;
1456       sep = 0;
1457       while ((s = string_nextinlist(&list, &sep, big_buffer, big_buffer_size)))
1458         {
1459         if (!isdigit(*s))
1460           {
1461           struct servent * smtp_service = getservbyname(CS s, "tcp");
1462           if (!smtp_service)
1463             log_write(0, LOG_PANIC_DIE|LOG_CONFIG, "TCP port \"%s\" not found", s);
1464           s = string_sprintf("%d", (int)ntohs(smtp_service->s_port));
1465           }
1466         g = string_append_listele(g, ':', s);
1467         }
1468       if (g)
1469         tls_in.on_connect_ports = g->s;
1470       break;
1471       }
1472
1473   /* Create the list of local interfaces, possibly with ports included. This
1474   list may contain references to 0.0.0.0 and ::0 as wildcards. These special
1475   values are converted below. */
1476
1477   addresses = host_build_ifacelist(local_interfaces, local_iface_source);
1478
1479   /* In the list of IP addresses, convert 0.0.0.0 into an empty string, and ::0
1480   into the string ":". We use these to recognize wildcards in IPv4 and IPv6. In
1481   fact, many IP stacks recognize 0.0.0.0 and ::0 and handle them as wildcards
1482   anyway, but we need to know which are the wildcard addresses, and the shorter
1483   strings are neater.
1484
1485   In the same scan, fill in missing port numbers from the default list. When
1486   there is more than one item in the list, extra items are created. */
1487
1488   for (ipa = addresses; ipa; ipa = ipa->next)
1489     {
1490     if (Ustrcmp(ipa->address, "0.0.0.0") == 0)
1491       ipa->address[0] = 0;
1492     else if (Ustrcmp(ipa->address, "::0") == 0)
1493       {
1494       ipa->address[0] = ':';
1495       ipa->address[1] = 0;
1496       }
1497
1498     if (ipa->port > 0) continue;
1499
1500     if (daemon_smtp_port[0] <= 0)
1501       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "no port specified for interface "
1502         "%s and daemon_smtp_port is unset; cannot start daemon",
1503         ipa->address[0] == 0 ? US"\"all IPv4\"" :
1504         ipa->address[1] == 0 ? US"\"all IPv6\"" : ipa->address);
1505
1506     ipa->port = default_smtp_port[0];
1507     for (int i = 1; default_smtp_port[i] > 0; i++)
1508       {
1509       ip_address_item *new = store_get(sizeof(ip_address_item), FALSE);
1510
1511       memcpy(new->address, ipa->address, Ustrlen(ipa->address) + 1);
1512       new->port = default_smtp_port[i];
1513       new->next = ipa->next;
1514       ipa->next = new;
1515       ipa = new;
1516       }
1517     }
1518
1519   /* Scan the list of addresses for wildcards. If we find an IPv4 and an IPv6
1520   wildcard for the same port, ensure that (a) they are together and (b) the
1521   IPv6 address comes first. This makes handling the messy features easier, and
1522   also simplifies the construction of the "daemon started" log line. */
1523
1524   pipa = &addresses;
1525   for (ipa = addresses; ipa; pipa = &ipa->next, ipa = ipa->next)
1526     {
1527     ip_address_item *ipa2;
1528
1529     /* Handle an IPv4 wildcard */
1530
1531     if (ipa->address[0] == 0)
1532       for (ipa2 = ipa; ipa2->next; ipa2 = ipa2->next)
1533         {
1534         ip_address_item *ipa3 = ipa2->next;
1535         if (ipa3->address[0] == ':' &&
1536             ipa3->address[1] == 0 &&
1537             ipa3->port == ipa->port)
1538           {
1539           ipa2->next = ipa3->next;
1540           ipa3->next = ipa;
1541           *pipa = ipa3;
1542           break;
1543           }
1544         }
1545
1546     /* Handle an IPv6 wildcard. */
1547
1548     else if (ipa->address[0] == ':' && ipa->address[1] == 0)
1549       for (ipa2 = ipa; ipa2->next; ipa2 = ipa2->next)
1550         {
1551         ip_address_item *ipa3 = ipa2->next;
1552         if (ipa3->address[0] == 0 && ipa3->port == ipa->port)
1553           {
1554           ipa2->next = ipa3->next;
1555           ipa3->next = ipa->next;
1556           ipa->next = ipa3;
1557           ipa = ipa3;
1558           break;
1559           }
1560         }
1561     }
1562
1563   /* Get a vector to remember all the sockets in */
1564
1565   for (ipa = addresses; ipa; ipa = ipa->next)
1566     listen_socket_count++;
1567   listen_sockets = store_get(sizeof(int) * listen_socket_count, FALSE);
1568
1569   } /* daemon_listen but not inetd_wait_mode */
1570
1571 if (f.daemon_listen)
1572   {
1573
1574   /* Do a sanity check on the max connects value just to save us from getting
1575   a huge amount of store. */
1576
1577   if (smtp_accept_max > 4095) smtp_accept_max = 4096;
1578
1579   /* There's no point setting smtp_accept_queue unless it is less than the max
1580   connects limit. The configuration reader ensures that the max is set if the
1581   queue-only option is set. */
1582
1583   if (smtp_accept_queue > smtp_accept_max) smtp_accept_queue = 0;
1584
1585   /* Get somewhere to keep the list of SMTP accepting pids if we are keeping
1586   track of them for total number and queue/host limits. */
1587
1588   if (smtp_accept_max > 0)
1589     {
1590     smtp_slots = store_get(smtp_accept_max * sizeof(smtp_slot), FALSE);
1591     for (int i = 0; i < smtp_accept_max; i++) smtp_slots[i] = empty_smtp_slot;
1592     }
1593   }
1594
1595 /* The variable background_daemon is always false when debugging, but
1596 can also be forced false in order to keep a non-debugging daemon in the
1597 foreground. If background_daemon is true, close all open file descriptors that
1598 we know about, but then re-open stdin, stdout, and stderr to /dev/null.  Also
1599 do this for inetd_wait mode.
1600
1601 This is protection against any called functions (in libraries, or in
1602 Perl, or whatever) that think they can write to stderr (or stdout). Before this
1603 was added, it was quite likely that an SMTP connection would use one of these
1604 file descriptors, in which case writing random stuff to it caused chaos.
1605
1606 Then disconnect from the controlling terminal, Most modern Unixes seem to have
1607 setsid() for getting rid of the controlling terminal. For any OS that doesn't,
1608 setsid() can be #defined as a no-op, or as something else. */
1609
1610 if (f.background_daemon || f.inetd_wait_mode)
1611   {
1612   log_close_all();    /* Just in case anything was logged earlier */
1613   search_tidyup();    /* Just in case any were used in reading the config. */
1614   (void)close(0);           /* Get rid of stdin/stdout/stderr */
1615   (void)close(1);
1616   (void)close(2);
1617   exim_nullstd();     /* Connect stdin/stdout/stderr to /dev/null */
1618   log_stderr = NULL;  /* So no attempt to copy paniclog output */
1619   }
1620
1621 if (f.background_daemon)
1622   {
1623   /* If the parent process of this one has pid == 1, we are re-initializing the
1624   daemon as the result of a SIGHUP. In this case, there is no need to do
1625   anything, because the controlling terminal has long gone. Otherwise, fork, in
1626   case current process is a process group leader (see 'man setsid' for an
1627   explanation) before calling setsid(). */
1628
1629   if (getppid() != 1)
1630     {
1631     pid_t pid = exim_fork(US"daemon");
1632     if (pid < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1633       "fork() failed when starting daemon: %s", strerror(errno));
1634     if (pid > 0) exit(EXIT_SUCCESS);      /* in parent process, just exit */
1635     (void)setsid();                       /* release controlling terminal */
1636     }
1637   }
1638
1639 /* We are now in the disconnected, daemon process (unless debugging). Set up
1640 the listening sockets if required. */
1641
1642 daemon_notifier_socket();
1643
1644 if (f.daemon_listen && !f.inetd_wait_mode)
1645   {
1646   int sk;
1647   ip_address_item *ipa;
1648
1649   /* For each IP address, create a socket, bind it to the appropriate port, and
1650   start listening. See comments above about IPv6 sockets that may or may not
1651   accept IPv4 calls when listening on all interfaces. We also have to cope with
1652   the case of a system with IPv6 libraries, but no IPv6 support in the kernel.
1653   listening, provided a wildcard IPv4 socket for the same port follows. */
1654
1655   for (ipa = addresses, sk = 0; sk < listen_socket_count; ipa = ipa->next, sk++)
1656     {
1657     BOOL wildcard;
1658     ip_address_item *ipa2;
1659     int af;
1660
1661     if (Ustrchr(ipa->address, ':') != NULL)
1662       {
1663       af = AF_INET6;
1664       wildcard = ipa->address[1] == 0;
1665       }
1666     else
1667       {
1668       af = AF_INET;
1669       wildcard = ipa->address[0] == 0;
1670       }
1671
1672     if ((listen_sockets[sk] = ip_socket(SOCK_STREAM, af)) < 0)
1673       {
1674       if (check_special_case(0, addresses, ipa, FALSE))
1675         {
1676         log_write(0, LOG_MAIN, "Failed to create IPv6 socket for wildcard "
1677           "listening (%s): will use IPv4", strerror(errno));
1678         goto SKIP_SOCKET;
1679         }
1680       log_write(0, LOG_PANIC_DIE, "IPv%c socket creation failed: %s",
1681         (af == AF_INET6)? '6' : '4', strerror(errno));
1682       }
1683
1684     /* If this is an IPv6 wildcard socket, set IPV6_V6ONLY if that option is
1685     available. Just log failure (can get protocol not available, just like
1686     socket creation can). */
1687
1688 #ifdef IPV6_V6ONLY
1689     if (af == AF_INET6 && wildcard &&
1690         setsockopt(listen_sockets[sk], IPPROTO_IPV6, IPV6_V6ONLY, CS (&on),
1691           sizeof(on)) < 0)
1692       log_write(0, LOG_MAIN, "Setting IPV6_V6ONLY on daemon's IPv6 wildcard "
1693         "socket failed (%s): carrying on without it", strerror(errno));
1694 #endif  /* IPV6_V6ONLY */
1695
1696     /* Set SO_REUSEADDR so that the daemon can be restarted while a connection
1697     is being handled.  Without this, a connection will prevent reuse of the
1698     smtp port for listening. */
1699
1700     if (setsockopt(listen_sockets[sk], SOL_SOCKET, SO_REUSEADDR,
1701                    US (&on), sizeof(on)) < 0)
1702       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "setting SO_REUSEADDR on socket "
1703         "failed when starting daemon: %s", strerror(errno));
1704
1705     /* Set TCP_NODELAY; Exim does its own buffering. There is a switch to
1706     disable this because it breaks some broken clients. */
1707
1708     if (tcp_nodelay) setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_NODELAY,
1709       US (&on), sizeof(on));
1710
1711     /* Now bind the socket to the required port; if Exim is being restarted
1712     it may not always be possible to bind immediately, even with SO_REUSEADDR
1713     set, so try 10 times, waiting between each try. After 10 failures, we give
1714     up. In an IPv6 environment, if bind () fails with the error EADDRINUSE and
1715     we are doing wildcard IPv4 listening and there was a previous IPv6 wildcard
1716     address for the same port, ignore the error on the grounds that we must be
1717     in a system where the IPv6 socket accepts both kinds of call. This is
1718     necessary for (some release of) USAGI Linux; other IP stacks fail at the
1719     listen() stage instead. */
1720
1721 #ifdef TCP_FASTOPEN
1722     f.tcp_fastopen_ok = TRUE;
1723 #endif
1724     for(;;)
1725       {
1726       uschar *msg, *addr;
1727       if (ip_bind(listen_sockets[sk], af, ipa->address, ipa->port) >= 0) break;
1728       if (check_special_case(errno, addresses, ipa, TRUE))
1729         {
1730         DEBUG(D_any) debug_printf("wildcard IPv4 bind() failed after IPv6 "
1731           "listen() success; EADDRINUSE ignored\n");
1732         (void)close(listen_sockets[sk]);
1733         goto SKIP_SOCKET;
1734         }
1735       msg = US strerror(errno);
1736       addr = wildcard
1737         ? af == AF_INET6
1738         ? US"(any IPv6)"
1739         : US"(any IPv4)"
1740         : ipa->address;
1741       if (daemon_startup_retries <= 0)
1742         log_write(0, LOG_MAIN|LOG_PANIC_DIE,
1743           "socket bind() to port %d for address %s failed: %s: "
1744           "daemon abandoned", ipa->port, addr, msg);
1745       log_write(0, LOG_MAIN, "socket bind() to port %d for address %s "
1746         "failed: %s: waiting %s before trying again (%d more %s)",
1747         ipa->port, addr, msg, readconf_printtime(daemon_startup_sleep),
1748         daemon_startup_retries, (daemon_startup_retries > 1)? "tries" : "try");
1749       daemon_startup_retries--;
1750       sleep(daemon_startup_sleep);
1751       }
1752
1753     DEBUG(D_any)
1754       if (wildcard)
1755         debug_printf("listening on all interfaces (IPv%c) port %d\n",
1756           af == AF_INET6 ? '6' : '4', ipa->port);
1757       else
1758         debug_printf("listening on %s port %d\n", ipa->address, ipa->port);
1759
1760 #if defined(TCP_FASTOPEN) && !defined(__APPLE__)
1761     if (  f.tcp_fastopen_ok
1762        && setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_FASTOPEN,
1763                     &smtp_connect_backlog, sizeof(smtp_connect_backlog)))
1764       {
1765       DEBUG(D_any) debug_printf("setsockopt FASTOPEN: %s\n", strerror(errno));
1766       f.tcp_fastopen_ok = FALSE;
1767       }
1768 #endif
1769
1770     /* Start listening on the bound socket, establishing the maximum backlog of
1771     connections that is allowed. On success, continue to the next address. */
1772
1773     if (listen(listen_sockets[sk], smtp_connect_backlog) >= 0)
1774       {
1775 #if defined(TCP_FASTOPEN) && defined(__APPLE__)
1776       if (  f.tcp_fastopen_ok
1777          && setsockopt(listen_sockets[sk], IPPROTO_TCP, TCP_FASTOPEN,
1778                       &on, sizeof(on)))
1779         {
1780         DEBUG(D_any) debug_printf("setsockopt FASTOPEN: %s\n", strerror(errno));
1781         f.tcp_fastopen_ok = FALSE;
1782         }
1783 #endif
1784       continue;
1785       }
1786
1787     /* Listening has failed. In an IPv6 environment, as for bind(), if listen()
1788     fails with the error EADDRINUSE and we are doing IPv4 wildcard listening
1789     and there was a previous successful IPv6 wildcard listen on the same port,
1790     we want to ignore the error on the grounds that we must be in a system
1791     where the IPv6 socket accepts both kinds of call. */
1792
1793     if (!check_special_case(errno, addresses, ipa, TRUE))
1794       log_write(0, LOG_PANIC_DIE, "listen() failed on interface %s: %s",
1795         wildcard
1796         ? af == AF_INET6 ? US"(any IPv6)" : US"(any IPv4)" : ipa->address,
1797         strerror(errno));
1798
1799     DEBUG(D_any) debug_printf("wildcard IPv4 listen() failed after IPv6 "
1800       "listen() success; EADDRINUSE ignored\n");
1801     (void)close(listen_sockets[sk]);
1802
1803     /* Come here if there has been a problem with the socket which we
1804     are going to ignore. We remove the address from the chain, and back up the
1805     counts. */
1806
1807   SKIP_SOCKET:
1808     sk--;                          /* Back up the count */
1809     listen_socket_count--;         /* Reduce the total */
1810     if (ipa == addresses) addresses = ipa->next; else
1811       {
1812       for (ipa2 = addresses; ipa2->next != ipa; ipa2 = ipa2->next);
1813       ipa2->next = ipa->next;
1814       ipa = ipa2;
1815       }
1816     }          /* End of bind/listen loop for each address */
1817   }            /* End of setup for listening */
1818
1819
1820 /* If we are not listening, we want to write a pid file only if -oP was
1821 explicitly given. */
1822
1823 else if (!override_pid_file_path)
1824   write_pid = FALSE;
1825
1826 /* Write the pid to a known file for assistance in identification, if required.
1827 We do this before giving up root privilege, because on some systems it is
1828 necessary to be root in order to write into the pid file directory. There's
1829 nothing to stop multiple daemons running, as long as no more than one listens
1830 on a given TCP/IP port on the same interface(s). However, in these
1831 circumstances it gets far too complicated to mess with pid file names
1832 automatically. Consequently, Exim 4 writes a pid file only
1833
1834   (a) When running in the test harness, or
1835   (b) When -bd is used and -oX is not used, or
1836   (c) When -oP is used to supply a path.
1837
1838 The variable daemon_write_pid is used to control this. */
1839
1840 if (f.running_in_test_harness || write_pid)
1841   {
1842   FILE *f;
1843
1844   set_pid_file_path();
1845   if ((f = modefopen(pid_file_path, "wb", 0644)))
1846     {
1847     (void)fprintf(f, "%d\n", (int)getpid());
1848     (void)fclose(f);
1849     DEBUG(D_any) debug_printf("pid written to %s\n", pid_file_path);
1850     }
1851   else
1852     DEBUG(D_any)
1853       debug_printf("%s\n", string_open_failed(errno, "pid file %s",
1854         pid_file_path));
1855   }
1856
1857 /* Set up the handler for SIGHUP, which causes a restart of the daemon. */
1858
1859 sighup_seen = FALSE;
1860 signal(SIGHUP, sighup_handler);
1861
1862 /* Give up root privilege at this point (assuming that exim_uid and exim_gid
1863 are not root). The third argument controls the running of initgroups().
1864 Normally we do this, in order to set up the groups for the Exim user. However,
1865 if we are not root at this time - some odd installations run that way - we
1866 cannot do this. */
1867
1868 exim_setugid(exim_uid, exim_gid, geteuid()==root_uid, US"running as a daemon");
1869
1870 /* Update the originator_xxx fields so that received messages as listed as
1871 coming from Exim, not whoever started the daemon. */
1872
1873 originator_uid = exim_uid;
1874 originator_gid = exim_gid;
1875 originator_login = (pw = getpwuid(exim_uid))
1876   ? string_copy_perm(US pw->pw_name, FALSE) : US"exim";
1877
1878 /* Get somewhere to keep the list of queue-runner pids if we are keeping track
1879 of them (and also if we are doing queue runs). */
1880
1881 if (queue_interval > 0 && local_queue_run_max > 0)
1882   {
1883   queue_pid_slots = store_get(local_queue_run_max * sizeof(pid_t), FALSE);
1884   for (int i = 0; i < local_queue_run_max; i++) queue_pid_slots[i] = 0;
1885   }
1886
1887 /* Set up the handler for termination of child processes, and the one
1888 telling us to die. */
1889
1890 sigchld_seen = FALSE;
1891 os_non_restarting_signal(SIGCHLD, main_sigchld_handler);
1892
1893 sigterm_seen = FALSE;
1894 os_non_restarting_signal(SIGTERM, main_sigterm_handler);
1895 os_non_restarting_signal(SIGINT, main_sigterm_handler);
1896
1897 /* If we are to run the queue periodically, pretend the alarm has just gone
1898 off. This will cause the first queue-runner to get kicked off straight away. */
1899
1900 sigalrm_seen = (queue_interval > 0);
1901
1902 /* Log the start up of a daemon - at least one of listening or queue running
1903 must be set up. */
1904
1905 if (f.inetd_wait_mode)
1906   {
1907   uschar *p = big_buffer;
1908
1909   if (inetd_wait_timeout >= 0)
1910     sprintf(CS p, "terminating after %d seconds", inetd_wait_timeout);
1911   else
1912     sprintf(CS p, "with no wait timeout");
1913
1914   log_write(0, LOG_MAIN,
1915     "exim %s daemon started: pid=%d, launched with listening socket, %s",
1916     version_string, getpid(), big_buffer);
1917   set_process_info("daemon(%s): pre-listening socket", version_string);
1918
1919   /* set up the timeout logic */
1920   sigalrm_seen = TRUE;
1921   }
1922
1923 else if (f.daemon_listen)
1924   {
1925   int smtp_ports = 0;
1926   int smtps_ports = 0;
1927   ip_address_item * ipa;
1928   uschar * p;
1929   uschar * qinfo = queue_interval > 0
1930     ? string_sprintf("-q%s%s",
1931         f.queue_2stage ? "q" : "", readconf_printtime(queue_interval))
1932     : US"no queue runs";
1933
1934   /* Build a list of listening addresses in big_buffer, but limit it to 10
1935   items. The style is for backwards compatibility.
1936
1937   It is now possible to have some ports listening for SMTPS (the old,
1938   deprecated protocol that starts TLS without using STARTTLS), and others
1939   listening for standard SMTP. Keep their listings separate. */
1940
1941   for (int j = 0, i; j < 2; j++)
1942     {
1943     for (i = 0, ipa = addresses; i < 10 && ipa; i++, ipa = ipa->next)
1944       {
1945       /* First time round, look for SMTP ports; second time round, look for
1946       SMTPS ports. Build IP+port strings. */
1947
1948       if (host_is_tls_on_connect_port(ipa->port) == (j > 0))
1949         {
1950         if (j == 0)
1951           smtp_ports++;
1952         else
1953           smtps_ports++;
1954
1955         /* Now the information about the port (and sometimes interface) */
1956
1957         if (ipa->address[0] == ':' && ipa->address[1] == 0)
1958           {                                             /* v6 wildcard */
1959           if (ipa->next && ipa->next->address[0] == 0 &&
1960               ipa->next->port == ipa->port)
1961             {
1962             ipa->log = string_sprintf(" port %d (IPv6 and IPv4)", ipa->port);
1963             (ipa = ipa->next)->log = NULL;
1964             }
1965           else if (ipa->v6_include_v4)
1966             ipa->log = string_sprintf(" port %d (IPv6 with IPv4)", ipa->port);
1967           else
1968             ipa->log = string_sprintf(" port %d (IPv6)", ipa->port);
1969           }
1970         else if (ipa->address[0] == 0)                  /* v4 wildcard */
1971           ipa->log = string_sprintf(" port %d (IPv4)", ipa->port);
1972         else                            /* check for previously-seen IP */
1973           {
1974           ip_address_item * i2;
1975           for (i2 = addresses; i2 != ipa; i2 = i2->next)
1976             if (  host_is_tls_on_connect_port(i2->port) == (j > 0)
1977                && Ustrcmp(ipa->address, i2->address) == 0
1978                )
1979               {                         /* found; append port to list */
1980               for (p = i2->log; *p; ) p++;      /* end of existing string */
1981               if (*--p == '}') *p = '\0';       /* drop EOL */
1982               while (isdigit(*--p)) ;           /* char before port */
1983
1984               i2->log = *p == ':'               /* no list yet? */
1985                 ? string_sprintf("%.*s{%s,%d}",
1986                   (int)(p - i2->log + 1), i2->log, p+1, ipa->port)
1987                 : string_sprintf("%s,%d}", i2->log, ipa->port);
1988               ipa->log = NULL;
1989               break;
1990               }
1991           if (i2 == ipa)                /* first-time IP */
1992             ipa->log = string_sprintf(" [%s]:%d", ipa->address, ipa->port);
1993           }
1994         }
1995       }
1996     }
1997
1998   p = big_buffer;
1999   for (int j = 0, i; j < 2; j++)
2000     {
2001     /* First time round, look for SMTP ports; second time round, look for
2002     SMTPS ports. For the first one of each, insert leading text. */
2003
2004     if (j == 0)
2005       {
2006       if (smtp_ports > 0)
2007         p += sprintf(CS p, "SMTP on");
2008       }
2009     else
2010       if (smtps_ports > 0)
2011         p += sprintf(CS p, "%sSMTPS on",
2012           smtp_ports == 0 ? "" : " and for ");
2013
2014     /* Now the information about the port (and sometimes interface) */
2015
2016     for (i = 0, ipa = addresses; i < 10 && ipa; i++, ipa = ipa->next)
2017       if (host_is_tls_on_connect_port(ipa->port) == (j > 0))
2018         if (ipa->log)
2019           p += sprintf(CS p, "%s",  ipa->log);
2020
2021     if (ipa)
2022       p += sprintf(CS p, " ...");
2023     }
2024
2025   log_write(0, LOG_MAIN,
2026     "exim %s daemon started: pid=%d, %s, listening for %s",
2027     version_string, getpid(), qinfo, big_buffer);
2028   set_process_info("daemon(%s): %s, listening for %s",
2029     version_string, qinfo, big_buffer);
2030   }
2031
2032 else
2033   {
2034   uschar * s = *queue_name
2035     ? string_sprintf("-qG%s/%s", queue_name, readconf_printtime(queue_interval))
2036     : string_sprintf("-q%s", readconf_printtime(queue_interval));
2037   log_write(0, LOG_MAIN,
2038     "exim %s daemon started: pid=%d, %s, not listening for SMTP",
2039     version_string, getpid(), s);
2040   set_process_info("daemon(%s): %s, not listening", version_string, s);
2041   }
2042
2043 /* Do any work it might be useful to amortize over our children
2044 (eg: compile regex) */
2045
2046 dns_pattern_init();
2047 smtp_deliver_init();    /* Used for callouts */
2048
2049 #ifndef DISABLE_DKIM
2050   {
2051 # ifdef MEASURE_TIMING
2052   struct timeval t0;
2053   gettimeofday(&t0, NULL);
2054 # endif
2055   dkim_exim_init();
2056 # ifdef MEASURE_TIMING
2057   report_time_since(&t0, US"dkim_exim_init (delta)");
2058 # endif
2059   }
2060 #endif
2061
2062 #ifdef WITH_CONTENT_SCAN
2063 malware_init();
2064 #endif
2065 #ifdef SUPPORT_SPF
2066 spf_init();
2067 #endif
2068
2069 /* Close the log so it can be renamed and moved. In the few cases below where
2070 this long-running process writes to the log (always exceptional conditions), it
2071 closes the log afterwards, for the same reason. */
2072
2073 log_close_all();
2074
2075 DEBUG(D_any) debug_print_ids(US"daemon running with");
2076
2077 /* Any messages accepted via this route are going to be SMTP. */
2078
2079 smtp_input = TRUE;
2080
2081 #ifdef MEASURE_TIMING
2082 report_time_since(&timestamp_startup, US"daemon loop start");   /* testcase 0022 */
2083 #endif
2084
2085 /* Enter the never-ending loop... */
2086
2087 for (;;)
2088   {
2089   #if HAVE_IPV6
2090   struct sockaddr_in6 accepted;
2091   #else
2092   struct sockaddr_in accepted;
2093   #endif
2094
2095   EXIM_SOCKLEN_T len;
2096   pid_t pid;
2097
2098   if (sigterm_seen)
2099     daemon_die();       /* Does not return */
2100
2101   /* This code is placed first in the loop, so that it gets obeyed at the
2102   start, before the first wait, for the queue-runner case, so that the first
2103   one can be started immediately.
2104
2105   The other option is that we have an inetd wait timeout specified to -bw. */
2106
2107   if (sigalrm_seen)
2108     {
2109     if (inetd_wait_timeout > 0)
2110       {
2111       time_t resignal_interval = inetd_wait_timeout;
2112
2113       if (last_connection_time == (time_t)0)
2114         {
2115         DEBUG(D_any)
2116           debug_printf("inetd wait timeout expired, but still not seen first message, ignoring\n");
2117         }
2118       else
2119         {
2120         time_t now = time(NULL);
2121         if (now == (time_t)-1)
2122           {
2123           DEBUG(D_any) debug_printf("failed to get time: %s\n", strerror(errno));
2124           }
2125         else
2126           {
2127           if ((now - last_connection_time) >= inetd_wait_timeout)
2128             {
2129             DEBUG(D_any)
2130               debug_printf("inetd wait timeout %d expired, ending daemon\n",
2131                   inetd_wait_timeout);
2132             log_write(0, LOG_MAIN, "exim %s daemon terminating, inetd wait timeout reached.\n",
2133                 version_string);
2134             exit(EXIT_SUCCESS);
2135             }
2136           else
2137             {
2138             resignal_interval -= (now - last_connection_time);
2139             }
2140           }
2141         }
2142
2143       sigalrm_seen = FALSE;
2144       ALARM(resignal_interval);
2145       }
2146
2147     else
2148       {
2149       DEBUG(D_any) debug_printf("%s received\n",
2150 #ifdef EXPERIMENTAL_QUEUE_RAMP
2151         *queuerun_msgid ? "qrun notification" :
2152 #endif
2153         "SIGALRM");
2154
2155       /* Do a full queue run in a child process, if required, unless we already
2156       have enough queue runners on the go. If we are not running as root, a
2157       re-exec is required. */
2158
2159       if (  queue_interval > 0
2160          && (local_queue_run_max <= 0 || queue_run_count < local_queue_run_max))
2161         {
2162         if ((pid = exim_fork(US"queue-runner")) == 0)
2163           {
2164           /* Disable debugging if it's required only for the daemon process. We
2165           leave the above message, because it ties up with the "child ended"
2166           debugging messages. */
2167
2168           if (f.debug_daemon) debug_selector = 0;
2169
2170           /* Close any open listening sockets in the child */
2171
2172           close_daemon_sockets(daemon_notifier_fd,
2173             listen_sockets, listen_socket_count);
2174
2175           /* Reset SIGHUP and SIGCHLD in the child in both cases. */
2176
2177           signal(SIGHUP,  SIG_DFL);
2178           signal(SIGCHLD, SIG_DFL);
2179           signal(SIGTERM, SIG_DFL);
2180           signal(SIGINT, SIG_DFL);
2181
2182           /* Re-exec if privilege has been given up, unless deliver_drop_
2183           privilege is set. Reset SIGALRM before exec(). */
2184
2185           if (geteuid() != root_uid && !deliver_drop_privilege)
2186             {
2187             uschar opt[8];
2188             uschar *p = opt;
2189             uschar *extra[7];
2190             int extracount = 1;
2191
2192             signal(SIGALRM, SIG_DFL);
2193             *p++ = '-';
2194             *p++ = 'q';
2195             if (  f.queue_2stage
2196 #ifdef EXPERIMENTAL_QUEUE_RAMP
2197                && !*queuerun_msgid
2198 #endif
2199                ) *p++ = 'q';
2200             if (f.queue_run_first_delivery) *p++ = 'i';
2201             if (f.queue_run_force) *p++ = 'f';
2202             if (f.deliver_force_thaw) *p++ = 'f';
2203             if (f.queue_run_local) *p++ = 'l';
2204             *p = 0;
2205             extra[0] = *queue_name
2206               ? string_sprintf("%sG%s", opt, queue_name) : opt;
2207
2208 #ifdef EXPERIMENTAL_QUEUE_RAMP
2209             if (*queuerun_msgid)
2210               {
2211               log_write(0, LOG_MAIN, "notify triggered queue run");
2212               extra[extracount++] = queuerun_msgid;     /* Trigger only the */
2213               extra[extracount++] = queuerun_msgid;     /* one message      */
2214               }
2215 #endif
2216
2217             /* If -R or -S were on the original command line, ensure they get
2218             passed on. */
2219
2220             if (deliver_selectstring)
2221               {
2222               extra[extracount++] = f.deliver_selectstring_regex ? US"-Rr" : US"-R";
2223               extra[extracount++] = deliver_selectstring;
2224               }
2225
2226             if (deliver_selectstring_sender)
2227               {
2228               extra[extracount++] = f.deliver_selectstring_sender_regex
2229                 ? US"-Sr" : US"-S";
2230               extra[extracount++] = deliver_selectstring_sender;
2231               }
2232
2233             /* Overlay this process with a new execution. */
2234
2235             (void)child_exec_exim(CEE_EXEC_PANIC, FALSE, NULL, FALSE, extracount,
2236               extra[0], extra[1], extra[2], extra[3], extra[4], extra[5], extra[6]);
2237
2238             /* Control never returns here. */
2239             }
2240
2241           /* No need to re-exec; SIGALRM remains set to the default handler */
2242
2243 #ifdef EXPERIMENTAL_QUEUE_RAMP
2244           if (*queuerun_msgid)
2245             {
2246             log_write(0, LOG_MAIN, "notify triggered queue run");
2247             f.queue_2stage = FALSE;
2248             queue_run(queuerun_msgid, queuerun_msgid, FALSE);
2249             }
2250           else
2251 #endif
2252             queue_run(NULL, NULL, FALSE);
2253           exim_underbar_exit(EXIT_SUCCESS);
2254           }
2255
2256         if (pid < 0)
2257           {
2258           log_write(0, LOG_MAIN|LOG_PANIC, "daemon: fork of queue-runner "
2259             "process failed: %s", strerror(errno));
2260           log_close_all();
2261           }
2262         else
2263           {
2264           for (int i = 0; i < local_queue_run_max; ++i)
2265             if (queue_pid_slots[i] <= 0)
2266               {
2267               queue_pid_slots[i] = pid;
2268               queue_run_count++;
2269               break;
2270               }
2271           DEBUG(D_any) debug_printf("%d queue-runner process%s running\n",
2272             queue_run_count, queue_run_count == 1 ? "" : "es");
2273           }
2274         }
2275
2276       /* Reset the alarm clock */
2277
2278       sigalrm_seen = FALSE;
2279 #ifdef EXPERIMENTAL_QUEUE_RAMP
2280       if (*queuerun_msgid)
2281         *queuerun_msgid = 0;
2282       else
2283 #endif
2284         ALARM(queue_interval);
2285       }
2286
2287     } /* sigalrm_seen */
2288
2289
2290   /* Sleep till a connection happens if listening, and handle the connection if
2291   that is why we woke up. The FreeBSD operating system requires the use of
2292   select() before accept() because the latter function is not interrupted by
2293   a signal, and we want to wake up for SIGCHLD and SIGALRM signals. Some other
2294   OS do notice signals in accept() but it does no harm to have the select()
2295   in for all of them - and it won't then be a lurking problem for ports to
2296   new OS. In fact, the later addition of listening on specific interfaces only
2297   requires this way of working anyway. */
2298
2299   if (f.daemon_listen)
2300     {
2301     int lcount, select_errno;
2302     int max_socket = 0;
2303     BOOL select_failed = FALSE;
2304     fd_set select_listen;
2305
2306     FD_ZERO(&select_listen);
2307     if (daemon_notifier_fd >= 0)
2308       FD_SET(daemon_notifier_fd, &select_listen);
2309     for (int sk = 0; sk < listen_socket_count; sk++)
2310       {
2311       FD_SET(listen_sockets[sk], &select_listen);
2312       if (listen_sockets[sk] > max_socket) max_socket = listen_sockets[sk];
2313       }
2314
2315     DEBUG(D_any) debug_printf("Listening...\n");
2316
2317     /* In rare cases we may have had a SIGCHLD signal in the time between
2318     setting the handler (below) and getting back here. If so, pretend that the
2319     select() was interrupted so that we reap the child. This might still leave
2320     a small window when a SIGCHLD could get lost. However, since we use SIGCHLD
2321     only to do the reaping more quickly, it shouldn't result in anything other
2322     than a delay until something else causes a wake-up. */
2323
2324     if (sigchld_seen)
2325       {
2326       lcount = -1;
2327       errno = EINTR;
2328       }
2329     else
2330       lcount = select(max_socket + 1, (SELECT_ARG2_TYPE *)&select_listen,
2331         NULL, NULL, NULL);
2332
2333     if (lcount < 0)
2334       {
2335       select_failed = TRUE;
2336       lcount = 1;
2337       }
2338
2339     /* Clean up any subprocesses that may have terminated. We need to do this
2340     here so that smtp_accept_max_per_host works when a connection to that host
2341     has completed, and we are about to accept a new one. When this code was
2342     later in the sequence, a new connection could be rejected, even though an
2343     old one had just finished. Preserve the errno from any select() failure for
2344     the use of the common select/accept error processing below. */
2345
2346     select_errno = errno;
2347     handle_ending_processes();
2348     errno = select_errno;
2349
2350 #ifndef DISABLE_TLS
2351     /* Create or rotate any required keys */
2352     tls_daemon_init();
2353 #endif
2354
2355     /* Loop for all the sockets that are currently ready to go. If select
2356     actually failed, we have set the count to 1 and select_failed=TRUE, so as
2357     to use the common error code for select/accept below. */
2358
2359     while (lcount-- > 0)
2360       {
2361       int accept_socket = -1;
2362
2363       if (!select_failed)
2364         {
2365         if (  daemon_notifier_fd >= 0
2366            && FD_ISSET(daemon_notifier_fd, &select_listen))
2367           {
2368           FD_CLR(daemon_notifier_fd, &select_listen);
2369           sigalrm_seen = daemon_notification();
2370           break;        /* to top of daemon loop */
2371           }
2372         for (int sk = 0; sk < listen_socket_count; sk++)
2373           if (FD_ISSET(listen_sockets[sk], &select_listen))
2374             {
2375             len = sizeof(accepted);
2376             accept_socket = accept(listen_sockets[sk],
2377               (struct sockaddr *)&accepted, &len);
2378             FD_CLR(listen_sockets[sk], &select_listen);
2379             break;
2380             }
2381         }
2382
2383       /* If select or accept has failed and this was not caused by an
2384       interruption, log the incident and try again. With asymmetric TCP/IP
2385       routing errors such as "No route to network" have been seen here. Also
2386       "connection reset by peer" has been seen. These cannot be classed as
2387       disastrous errors, but they could fill up a lot of log. The code in smail
2388       crashes the daemon after 10 successive failures of accept, on the grounds
2389       that some OS fail continuously. Exim originally followed suit, but this
2390       appears to have caused problems. Now it just keeps going, but instead of
2391       logging each error, it batches them up when they are continuous. */
2392
2393       if (accept_socket < 0 && errno != EINTR)
2394         {
2395         if (accept_retry_count == 0)
2396           {
2397           accept_retry_errno = errno;
2398           accept_retry_select_failed = select_failed;
2399           }
2400         else if (  errno != accept_retry_errno
2401                 || select_failed != accept_retry_select_failed
2402                 || accept_retry_count >= 50)
2403             {
2404             log_write(0, LOG_MAIN | (accept_retry_count >= 50? LOG_PANIC : 0),
2405               "%d %s() failure%s: %s",
2406               accept_retry_count,
2407               accept_retry_select_failed? "select" : "accept",
2408               accept_retry_count == 1 ? "" : "s",
2409               strerror(accept_retry_errno));
2410             log_close_all();
2411             accept_retry_count = 0;
2412             accept_retry_errno = errno;
2413             accept_retry_select_failed = select_failed;
2414             }
2415         accept_retry_count++;
2416         }
2417       else
2418         {
2419         if (accept_retry_count > 0)
2420           {
2421           log_write(0, LOG_MAIN, "%d %s() failure%s: %s",
2422             accept_retry_count,
2423             accept_retry_select_failed? "select" : "accept",
2424             (accept_retry_count == 1)? "" : "s",
2425             strerror(accept_retry_errno));
2426           log_close_all();
2427           accept_retry_count = 0;
2428           }
2429         }
2430
2431       /* If select/accept succeeded, deal with the connection. */
2432
2433       if (accept_socket >= 0)
2434         {
2435         if (inetd_wait_timeout)
2436           last_connection_time = time(NULL);
2437         handle_smtp_call(listen_sockets, listen_socket_count, accept_socket,
2438           (struct sockaddr *)&accepted);
2439         }
2440       }
2441     }
2442
2443   /* If not listening, then just sleep for the queue interval. If we woke
2444   up early the last time for some other signal, it won't matter because
2445   the alarm signal will wake at the right time. This code originally used
2446   sleep() but it turns out that on the FreeBSD system, sleep() is not inter-
2447   rupted by signals, so it wasn't waking up for SIGALRM or SIGCHLD. Luckily
2448   select() can be used as an interruptible sleep() on all versions of Unix. */
2449
2450   else
2451     {
2452     struct timeval tv;
2453     tv.tv_sec = queue_interval;
2454     tv.tv_usec = 0;
2455     select(0, NULL, NULL, NULL, &tv);
2456     handle_ending_processes();
2457     }
2458
2459   /* Re-enable the SIGCHLD handler if it has been run. It can't do it
2460   for itself, because it isn't doing the waiting itself. */
2461
2462   if (sigchld_seen)
2463     {
2464     sigchld_seen = FALSE;
2465     os_non_restarting_signal(SIGCHLD, main_sigchld_handler);
2466     }
2467
2468   /* Handle being woken by SIGHUP. We know at this point that the result
2469   of accept() has been dealt with, so we can re-exec exim safely, first
2470   closing the listening sockets so that they can be reused. Cancel any pending
2471   alarm in case it is just about to go off, and set SIGHUP to be ignored so
2472   that another HUP in quick succession doesn't clobber the new daemon before it
2473   gets going. All log files get closed by the close-on-exec flag; however, if
2474   the exec fails, we need to close the logs. */
2475
2476   if (sighup_seen)
2477     {
2478     log_write(0, LOG_MAIN, "pid %d: SIGHUP received: re-exec daemon",
2479       getpid());
2480     close_daemon_sockets(daemon_notifier_fd,
2481       listen_sockets, listen_socket_count);
2482     ALARM_CLR(0);
2483     signal(SIGHUP, SIG_IGN);
2484     sighup_argv[0] = exim_path;
2485     exim_nullstd();
2486     execv(CS exim_path, (char *const *)sighup_argv);
2487     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "pid %d: exec of %s failed: %s",
2488       getpid(), exim_path, strerror(errno));
2489     log_close_all();
2490     }
2491
2492   }   /* End of main loop */
2493
2494 /* Control never reaches here */
2495 }
2496
2497 /* vi: aw ai sw=2
2498 */
2499 /* End of exim_daemon.c */