3170bef98cbd5fbed6f6771496f4a6311eecd6e1
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) The Exim Maintainers 2020 - 2023 */
6 /* Copyright (c) University of Cambridge 1995 - 2018 */
7 /* See the file NOTICE for conditions of use and distribution. */
8 /* SPDX-License-Identifier: GPL-2.0-or-later */
9
10
11 /* The main function: entry point, initialization, and high-level control.
12 Also a few functions that don't naturally fit elsewhere. */
13
14
15 #include "exim.h"
16
17 #if defined(__GLIBC__) && !defined(__UCLIBC__)
18 # include <gnu/libc-version.h>
19 #endif
20
21 #ifndef _TIME_H
22 # include <time.h>
23 #endif
24 #ifndef NO_EXECINFO
25 # include <execinfo.h>
26 #endif
27
28 #ifdef USE_GNUTLS
29 # include <gnutls/gnutls.h>
30 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
31 #  define DISABLE_OCSP
32 # endif
33 #endif
34
35 extern void init_lookup_list(void);
36
37
38
39 /*************************************************
40 *      Function interface to store functions     *
41 *************************************************/
42
43 /* We need some real functions to pass to the PCRE regular expression library
44 for store allocation via Exim's store manager. The normal calls are actually
45 macros that pass over location information to make tracing easier. These
46 functions just interface to the standard macro calls. A good compiler will
47 optimize out the tail recursion and so not make them too expensive. */
48
49 static void *
50 function_store_malloc(PCRE2_SIZE size, void * tag)
51 {
52 if (size > INT_MAX)
53   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "excessive memory alloc request");
54 return store_malloc((int)size);
55 }
56
57 static void
58 function_store_free(void * block, void * tag)
59 {
60 /* At least some version of pcre2 pass a null pointer */
61 if (block) store_free(block);
62 }
63
64
65 static void *
66 function_store_get(PCRE2_SIZE size, void * tag)
67 {
68 if (size > INT_MAX)
69   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "excessive memory alloc request");
70 return store_get((int)size, GET_UNTAINTED);     /* loses track of taint */
71 }
72
73 static void
74 function_store_nullfree(void * block, void * tag)
75 {
76 /* We cannot free memory allocated using store_get() */
77 }
78
79
80
81
82 /*************************************************
83 *         Enums for cmdline interface            *
84 *************************************************/
85
86 enum commandline_info { CMDINFO_NONE=0,
87   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
88
89
90
91
92 static void
93 pcre_init(void)
94 {
95 pcre_mlc_ctx = pcre2_general_context_create(function_store_malloc, function_store_free, NULL);
96 pcre_gen_ctx = pcre2_general_context_create(function_store_get, function_store_nullfree, NULL);
97
98 pcre_mlc_cmp_ctx = pcre2_compile_context_create(pcre_mlc_ctx);
99 pcre_gen_cmp_ctx = pcre2_compile_context_create(pcre_gen_ctx);
100
101 pcre_gen_mtc_ctx = pcre2_match_context_create(pcre_gen_ctx);
102 }
103
104
105
106
107 /*************************************************
108 *   Execute regular expression and set strings   *
109 *************************************************/
110
111 /* This function runs a regular expression match, and sets up the pointers to
112 the matched substrings.  The matched strings are copied so the lifetime of
113 the subject is not a problem.  Matched strings will have the same taint status
114 as the subject string (this is not a de-taint method, and must not be made so
115 given the support for wildcards in REs).
116
117 Arguments:
118   re          the compiled expression
119   subject     the subject string
120   options     additional PCRE options
121   setup       if < 0 do full setup
122               if >= 0 setup from setup+1 onwards,
123                 excluding the full matched string
124
125 Returns:      TRUE if matched, or FALSE
126 */
127
128 BOOL
129 regex_match_and_setup(const pcre2_code * re, const uschar * subject, int options, int setup)
130 {
131 pcre2_match_data * md = pcre2_match_data_create_from_pattern(re, pcre_gen_ctx);
132 int res = pcre2_match(re, (PCRE2_SPTR)subject, PCRE2_ZERO_TERMINATED, 0,
133                         PCRE_EOPT | options, md, pcre_gen_mtc_ctx);
134 BOOL yield;
135
136 if ((yield = (res >= 0)))
137   {
138   PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
139   res = pcre2_get_ovector_count(md);
140   expand_nmax = setup < 0 ? 0 : setup + 1;
141   for (int matchnum = setup < 0 ? 0 : 1; matchnum < res; matchnum++)
142     {
143     /* Although PCRE2 has a pcre2_substring_get_bynumber() conveneience, it
144     seems to return a bad pointer when a capture group had no data, eg. (.*)
145     matching zero letters.  So use the underlying ovec and hope (!) that the
146     offsets are sane (including that case).  Should we go further and range-
147     check each one vs. the subject string length? */
148     int off = matchnum * 2;
149     int len = ovec[off + 1] - ovec[off];
150     expand_nstring[expand_nmax] = string_copyn(subject + ovec[off], len);
151     expand_nlength[expand_nmax++] = len;
152     }
153   expand_nmax--;
154   }
155 else if (res != PCRE2_ERROR_NOMATCH) DEBUG(D_any)
156   {
157   uschar errbuf[128];
158   pcre2_get_error_message(res, errbuf, sizeof(errbuf));
159   debug_printf_indent("pcre2: %s\n", errbuf);
160   }
161 /* pcre2_match_data_free(md);   gen ctx needs no free */
162 return yield;
163 }
164
165
166 /* Check just for match with regex.  Uses the common memory-handling.
167
168 Arguments:
169         re      compiled regex
170         subject string to be checked
171         slen    length of subject; -1 for nul-terminated
172         rptr    pointer for matched string, copied, or NULL
173
174 Return: TRUE for a match.
175 */
176
177 BOOL
178 regex_match(const pcre2_code * re, const uschar * subject, int slen, uschar ** rptr)
179 {
180 pcre2_match_data * md = pcre2_match_data_create(1, pcre_gen_ctx);
181 int rc = pcre2_match(re, (PCRE2_SPTR)subject,
182                       slen >= 0 ? slen : PCRE2_ZERO_TERMINATED,
183                       0, PCRE_EOPT, md, pcre_gen_mtc_ctx);
184 PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
185 BOOL ret = FALSE;
186
187 if (rc >= 0)
188   {
189   if (rptr)
190     *rptr = string_copyn(subject + ovec[0], ovec[1] - ovec[0]);
191   ret = TRUE;
192   }
193 /* pcre2_match_data_free(md);   gen ctx needs no free */
194 return ret;
195 }
196
197
198
199 /*************************************************
200 *            Set up processing details           *
201 *************************************************/
202
203 /* Save a text string for dumping when SIGUSR1 is received.
204 Do checks for overruns.
205
206 Arguments: format and arguments, as for printf()
207 Returns:   nothing
208 */
209
210 void
211 set_process_info(const char * format, ...)
212 {
213 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
214 gstring * g;
215 int len;
216 uschar * s;
217 va_list ap;
218
219 g = string_fmt_append(&gs, "%5d ", (int)getpid());
220 len = gstring_length(g);
221 va_start(ap, format);
222 if (!string_vformat(g, 0, format, ap))
223   {
224   gs.ptr = len;
225   g = string_cat(&gs, US"**** string overflowed buffer ****");
226   }
227 g = string_catn(g, US"\n", 1);
228 process_info_len = len_string_from_gstring(g, &s);
229 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
230 va_end(ap);
231 }
232
233 /***********************************************
234 *            Handler for SIGTERM               *
235 ***********************************************/
236
237 static void
238 term_handler(int sig)
239 {
240 exit(1);
241 }
242
243
244 /***********************************************
245 *            Handler for SIGSEGV               *
246 ***********************************************/
247
248 #define STACKDUMP_MAX 24
249 void
250 stackdump(void)
251 {
252 #ifndef NO_EXECINFO
253 void * buf[STACKDUMP_MAX];
254 char ** ss;
255 int nptrs = backtrace(buf, STACKDUMP_MAX);
256
257 log_write(0, LOG_MAIN|LOG_PANIC, "backtrace");
258 log_write(0, LOG_MAIN|LOG_PANIC, "---");
259 if ((ss = backtrace_symbols(buf, nptrs)))
260   {
261   for (int i = 0; i < nptrs; i++)
262     log_write(0, LOG_MAIN|LOG_PANIC, "\t%s", ss[i]);
263   free(ss);
264   }
265 else
266   log_write(0, LOG_MAIN|LOG_PANIC, "backtrace_symbols: %s", strerror(errno));
267 log_write(0, LOG_MAIN|LOG_PANIC, "---");
268 #endif
269 }
270 #undef STACKDUMP_MAX
271
272
273 static void
274 #ifdef SA_SIGINFO
275 segv_handler(int sig, siginfo_t * info, void * uctx)
276 {
277 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (fault address: %p)", info->si_addr);
278 # if defined(SEGV_MAPERR) && defined(SEGV_ACCERR) && defined(SEGV_BNDERR) && defined(SEGV_PKUERR)
279 switch (info->si_code)
280   {
281   case SEGV_MAPERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_MAPERR"); break;
282   case SEGV_ACCERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_ACCERR"); break;
283   case SEGV_BNDERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_BNDERR"); break;
284   case SEGV_PKUERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_PKUERR"); break;
285   }
286 # endif
287 if (US info->si_addr < US 4096)
288   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (null pointer indirection)");
289 else
290   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
291 if (process_info_len > 0)
292   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
293 stackdump();
294 signal(SIGSEGV, SIG_DFL);
295 kill(getpid(), sig);
296 }
297
298 #else
299 segv_handler(int sig)
300 {
301 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
302 if (process_info_len > 0)
303   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
304 stackdump();
305 signal(SIGSEGV, SIG_DFL);
306 kill(getpid(), sig);
307 }
308 #endif
309
310
311 /*************************************************
312 *             Handler for SIGUSR1                *
313 *************************************************/
314
315 /* SIGUSR1 causes any exim process to write to the process log details of
316 what it is currently doing. It will only be used if the OS is capable of
317 setting up a handler that causes automatic restarting of any system call
318 that is in progress at the time.
319
320 This function takes care to be signal-safe.
321
322 Argument: the signal number (SIGUSR1)
323 Returns:  nothing
324 */
325
326 static void
327 usr1_handler(int sig)
328 {
329 int fd;
330
331 os_restarting_signal(sig, usr1_handler);
332
333 if (!process_log_path) return;
334 fd = log_open_as_exim(process_log_path);
335
336 /* If we are neither exim nor root, or if we failed to create the log file,
337 give up. There is not much useful we can do with errors, since we don't want
338 to disrupt whatever is going on outside the signal handler. */
339
340 if (fd < 0) return;
341
342 (void)write(fd, process_info, process_info_len);
343 (void)close(fd);
344 }
345
346
347
348 /*************************************************
349 *             Timeout handler                    *
350 *************************************************/
351
352 /* This handler is enabled most of the time that Exim is running. The handler
353 doesn't actually get used unless alarm() has been called to set a timer, to
354 place a time limit on a system call of some kind. When the handler is run, it
355 re-enables itself.
356
357 There are some other SIGALRM handlers that are used in special cases when more
358 than just a flag setting is required; for example, when reading a message's
359 input. These are normally set up in the code module that uses them, and the
360 SIGALRM handler is reset to this one afterwards.
361
362 Argument: the signal value (SIGALRM)
363 Returns:  nothing
364 */
365
366 void
367 sigalrm_handler(int sig)
368 {
369 sigalrm_seen = TRUE;
370 os_non_restarting_signal(SIGALRM, sigalrm_handler);
371 }
372
373
374
375 /*************************************************
376 *      Sleep for a fractional time interval      *
377 *************************************************/
378
379 /* This function is called by millisleep() and exim_wait_tick() to wait for a
380 period of time that may include a fraction of a second. The coding is somewhat
381 tedious. We do not expect setitimer() ever to fail, but if it does, the process
382 will wait for ever, so we panic in this instance. (There was a case of this
383 when a bug in a function that calls milliwait() caused it to pass invalid data.
384 That's when I added the check. :-)
385
386 We assume it to be not worth sleeping for under 50us; this value will
387 require revisiting as hardware advances.  This avoids the issue of
388 a zero-valued timer setting meaning "never fire".
389
390 Argument:  an itimerval structure containing the interval
391 Returns:   nothing
392 */
393
394 static void
395 milliwait(struct itimerval *itval)
396 {
397 sigset_t sigmask;
398 sigset_t old_sigmask;
399 int save_errno = errno;
400
401 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
402   return;
403 (void)sigemptyset(&sigmask);                           /* Empty mask */
404 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
405 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
406 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
407   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
408     "setitimer() failed: %s", strerror(errno));
409 (void)sigfillset(&sigmask);                            /* All signals */
410 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
411 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
412 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
413 errno = save_errno;
414 sigalrm_seen = FALSE;
415 }
416
417
418
419
420 /*************************************************
421 *         Millisecond sleep function             *
422 *************************************************/
423
424 /* The basic sleep() function has a granularity of 1 second, which is too rough
425 in some cases - for example, when using an increasing delay to slow down
426 spammers.
427
428 Argument:    number of millseconds
429 Returns:     nothing
430 */
431
432 void
433 millisleep(int msec)
434 {
435 struct itimerval itval = {.it_interval = {.tv_sec = 0, .tv_usec = 0},
436                           .it_value = {.tv_sec = msec/1000,
437                                        .tv_usec = (msec % 1000) * 1000}};
438 milliwait(&itval);
439 }
440
441
442
443 /*************************************************
444 *         Compare microsecond times              *
445 *************************************************/
446
447 /*
448 Arguments:
449   tv1         the first time
450   tv2         the second time
451
452 Returns:      -1, 0, or +1
453 */
454
455 static int
456 exim_tvcmp(struct timeval *t1, struct timeval *t2)
457 {
458 if (t1->tv_sec > t2->tv_sec) return +1;
459 if (t1->tv_sec < t2->tv_sec) return -1;
460 if (t1->tv_usec > t2->tv_usec) return +1;
461 if (t1->tv_usec < t2->tv_usec) return -1;
462 return 0;
463 }
464
465
466
467
468 /*************************************************
469 *          Clock tick wait function              *
470 *************************************************/
471
472 #ifdef _POSIX_MONOTONIC_CLOCK
473 # ifdef CLOCK_BOOTTIME
474 #  define EXIM_CLOCKTYPE CLOCK_BOOTTIME
475 # else
476 #  define EXIM_CLOCKTYPE CLOCK_MONOTONIC
477 # endif
478
479 /* Amount EXIM_CLOCK is behind realtime, at startup. */
480 static struct timespec offset_ts;
481
482 static void
483 exim_clock_init(void)
484 {
485 struct timeval tv;
486 if (clock_gettime(EXIM_CLOCKTYPE, &offset_ts) != 0) return;
487 (void)gettimeofday(&tv, NULL);
488 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
489 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
490 if (offset_ts.tv_nsec >= 0) return;
491 offset_ts.tv_sec--;
492 offset_ts.tv_nsec += 1000*1000*1000;
493 }
494 #endif
495
496
497 void
498 exim_gettime(struct timeval * tv)
499 {
500 #ifdef _POSIX_MONOTONIC_CLOCK
501 struct timespec now_ts;
502
503 if (clock_gettime(EXIM_CLOCKTYPE, &now_ts) == 0)
504   {
505   now_ts.tv_sec += offset_ts.tv_sec;
506   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
507     {
508     now_ts.tv_sec++;
509     now_ts.tv_nsec -= 1000*1000*1000;
510     }
511   tv->tv_sec = now_ts.tv_sec;
512   tv->tv_usec = now_ts.tv_nsec / 1000;
513   }
514 else
515 #endif
516   (void)gettimeofday(tv, NULL);
517 }
518
519
520 /* Exim uses a time + a pid to generate a unique identifier in two places: its
521 message IDs, and in file names for maildir deliveries. Because some OS now
522 re-use pids within the same second, sub-second times are now being used.
523 However, for absolute certainty, we must ensure the clock has ticked before
524 allowing the relevant process to complete. At the time of implementation of
525 this code (February 2003), the speed of processors is such that the clock will
526 invariably have ticked already by the time a process has done its job. This
527 function prepares for the time when things are faster - and it also copes with
528 clocks that go backwards.
529
530 Arguments:
531   prev_tv      A timeval which was used to create uniqueness; its usec field
532                  has been rounded down to the value of the resolution.
533                  We want to be sure the current time is greater than this.
534                  On return, updated to current (rounded down).
535   resolution   The resolution that was used to divide the microseconds
536                  (1 for maildir, larger for message ids)
537
538 Returns:       nothing
539 */
540
541 void
542 exim_wait_tick(struct timeval * prev_tv, int resolution)
543 {
544 struct timeval now_tv;
545 long int now_true_usec;
546
547 exim_gettime(&now_tv);
548 now_true_usec = now_tv.tv_usec;
549 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
550
551 while (exim_tvcmp(&now_tv, prev_tv) <= 0)
552   {
553   struct itimerval itval;
554   itval.it_interval.tv_sec = 0;
555   itval.it_interval.tv_usec = 0;
556   itval.it_value.tv_sec = prev_tv->tv_sec - now_tv.tv_sec;
557   itval.it_value.tv_usec = prev_tv->tv_usec + resolution - now_true_usec;
558
559   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
560   negative value for the microseconds is possible only in the case when "now"
561   is more than a second less than "tgt". That means that itval.it_value.tv_sec
562   is greater than zero. The following correction is therefore safe. */
563
564   if (itval.it_value.tv_usec < 0)
565     {
566     itval.it_value.tv_usec += 1000000;
567     itval.it_value.tv_sec -= 1;
568     }
569
570   DEBUG(D_transport|D_receive)
571     {
572     if (!f.running_in_test_harness)
573       {
574       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
575         prev_tv->tv_sec, (long) prev_tv->tv_usec,
576         now_tv.tv_sec, (long) now_tv.tv_usec);
577       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
578         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
579       }
580     }
581
582   milliwait(&itval);
583
584   /* Be prapared to go around if the kernel does not implement subtick
585   granularity (GNU Hurd) */
586
587   exim_gettime(&now_tv);
588   now_true_usec = now_tv.tv_usec;
589   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
590   }
591 *prev_tv = now_tv;
592 }
593
594
595
596
597 /*************************************************
598 *   Call fopen() with umask 777 and adjust mode  *
599 *************************************************/
600
601 /* Exim runs with umask(0) so that files created with open() have the mode that
602 is specified in the open() call. However, there are some files, typically in
603 the spool directory, that are created with fopen(). They end up world-writeable
604 if no precautions are taken. Although the spool directory is not accessible to
605 the world, this is an untidiness. So this is a wrapper function for fopen()
606 that sorts out the mode of the created file.
607
608 Arguments:
609    filename       the file name
610    options        the fopen() options
611    mode           the required mode
612
613 Returns:          the fopened FILE or NULL
614 */
615
616 FILE *
617 modefopen(const uschar *filename, const char *options, mode_t mode)
618 {
619 mode_t saved_umask = umask(0777);
620 FILE *f = Ufopen(filename, options);
621 (void)umask(saved_umask);
622 if (f != NULL) (void)fchmod(fileno(f), mode);
623 return f;
624 }
625
626
627 /*************************************************
628 *   Ensure stdin, stdout, and stderr exist       *
629 *************************************************/
630
631 /* Some operating systems grumble if an exec() happens without a standard
632 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
633 file will be opened and will use these fd values, and then some other bit of
634 code will assume, for example, that it can write error messages to stderr.
635 This function ensures that fds 0, 1, and 2 are open if they do not already
636 exist, by connecting them to /dev/null.
637
638 This function is also used to ensure that std{in,out,err} exist at all times,
639 so that if any library that Exim calls tries to use them, it doesn't crash.
640
641 Arguments:  None
642 Returns:    Nothing
643 */
644
645 void
646 exim_nullstd(void)
647 {
648 int devnull = -1;
649 struct stat statbuf;
650 for (int i = 0; i <= 2; i++)
651   {
652   if (fstat(i, &statbuf) < 0 && errno == EBADF)
653     {
654     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
655     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
656       string_open_failed("/dev/null", NULL));
657     if (devnull != i) (void)dup2(devnull, i);
658     }
659   }
660 if (devnull > 2) (void)close(devnull);
661 }
662
663
664
665
666 /*************************************************
667 *   Close unwanted file descriptors for delivery *
668 *************************************************/
669
670 /* This function is called from a new process that has been forked to deliver
671 an incoming message, either directly, or using exec.
672
673 We want any smtp input streams to be closed in this new process. However, it
674 has been observed that using fclose() here causes trouble. When reading in -bS
675 input, duplicate copies of messages have been seen. The files will be sharing a
676 file pointer with the parent process, and it seems that fclose() (at least on
677 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
678 least sometimes. Hence we go for closing the underlying file descriptors.
679
680 If TLS is active, we want to shut down the TLS library, but without molesting
681 the parent's SSL connection.
682
683 For delivery of a non-SMTP message, we want to close stdin and stdout (and
684 stderr unless debugging) because the calling process might have set them up as
685 pipes and be waiting for them to close before it waits for the submission
686 process to terminate. If they aren't closed, they hold up the calling process
687 until the initial delivery process finishes, which is not what we want.
688
689 Exception: We do want it for synchronous delivery!
690
691 And notwithstanding all the above, if D_resolver is set, implying resolver
692 debugging, leave stdout open, because that's where the resolver writes its
693 debugging output.
694
695 When we close stderr (which implies we've also closed stdout), we also get rid
696 of any controlling terminal.
697
698 Arguments:   None
699 Returns:     Nothing
700 */
701
702 static void
703 close_unwanted(void)
704 {
705 if (smtp_input)
706   {
707 #ifndef DISABLE_TLS
708   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
709 #endif
710   (void)close(fileno(smtp_in));
711   (void)close(fileno(smtp_out));
712   smtp_in = NULL;
713   }
714 else
715   {
716   (void)close(0);                                          /* stdin */
717   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
718   if (debug_selector == 0)                                 /* stderr */
719     {
720     if (!f.synchronous_delivery)
721       {
722       (void)close(2);
723       log_stderr = NULL;
724       }
725     (void)setsid();
726     }
727   }
728 }
729
730
731
732
733 /*************************************************
734 *          Set uid and gid                       *
735 *************************************************/
736
737 /* This function sets a new uid and gid permanently, optionally calling
738 initgroups() to set auxiliary groups. There are some special cases when running
739 Exim in unprivileged modes. In these situations the effective uid will not be
740 root; if we already have the right effective uid/gid, and don't need to
741 initialize any groups, leave things as they are.
742
743 Arguments:
744   uid        the uid
745   gid        the gid
746   igflag     TRUE if initgroups() wanted
747   msg        text to use in debugging output and failure log
748
749 Returns:     nothing; bombs out on failure
750 */
751
752 void
753 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, const uschar * msg)
754 {
755 uid_t euid = geteuid();
756 gid_t egid = getegid();
757
758 if (euid == root_uid || euid != uid || egid != gid || igflag)
759   {
760   /* At least one OS returns +1 for initgroups failure, so just check for
761   non-zero. */
762
763   if (igflag)
764     {
765     struct passwd *pw = getpwuid(uid);
766     if (!pw)
767       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
768         "no passwd entry for uid=%ld", (long int)uid);
769
770     if (initgroups(pw->pw_name, gid) != 0)
771       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
772         (long int)uid, strerror(errno));
773     }
774
775   if (setgid(gid) < 0 || setuid(uid) < 0)
776     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
777       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
778   }
779
780 /* Debugging output included uid/gid and all groups */
781
782 DEBUG(D_uid)
783   {
784   int group_count, save_errno;
785   gid_t group_list[EXIM_GROUPLIST_SIZE];
786   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
787     (long int)geteuid(), (long int)getegid(), (long int)getpid());
788   group_count = getgroups(nelem(group_list), group_list);
789   save_errno = errno;
790   debug_printf("  auxiliary group list:");
791   if (group_count > 0)
792     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
793   else if (group_count < 0)
794     debug_printf(" <error: %s>", strerror(save_errno));
795   else debug_printf(" <none>");
796   debug_printf("\n");
797   }
798 }
799
800
801
802
803 /*************************************************
804 *               Exit point                       *
805 *************************************************/
806
807 /* Exim exits via this function so that it always clears up any open
808 databases.
809
810 Arguments:
811   rc         return code
812
813 Returns:     does not return
814 */
815
816 void
817 exim_exit(int rc)
818 {
819 search_tidyup();
820 store_exit();
821 DEBUG(D_any)
822   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
823     ">>>>>>>>>>>>>>>>\n",
824     (int)getpid(), process_purpose, rc);
825 exit(rc);
826 }
827
828
829 void
830 exim_underbar_exit(int rc)
831 {
832 store_exit();
833 DEBUG(D_any)
834   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
835     ">>>>>>>>>>>>>>>>\n",
836     (int)getpid(), process_purpose, rc);
837 _exit(rc);
838 }
839
840
841
842 /* Print error string, then die */
843 static void
844 exim_fail(const char * fmt, ...)
845 {
846 va_list ap;
847 va_start(ap, fmt);
848 vfprintf(stderr, fmt, ap);
849 va_end(ap);
850 exit(EXIT_FAILURE);
851 }
852
853 /* fail if a length is too long */
854 static inline void
855 exim_len_fail_toolong(int itemlen, int maxlen, const char * description)
856 {
857 if (itemlen <= maxlen)
858   return;
859 fprintf(stderr, "exim: length limit exceeded (%d > %d) for: %s\n",
860         itemlen, maxlen, description);
861 exit(EXIT_FAILURE);
862 }
863
864 /* only pass through the string item back to the caller if it's short enough */
865 static inline const uschar *
866 exim_str_fail_toolong(const uschar * item, int maxlen, const char * description)
867 {
868 if (!item)
869   exim_fail("exim: bad item for: %s\n", description);
870 exim_len_fail_toolong(Ustrlen(item), maxlen, description);
871 return item;
872 }
873
874 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
875 of chown()/fchown().  See src/functions.h for more explanation */
876 int
877 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
878 {
879 int saved_errno = errno;  /* from the preceeding chown call */
880 #if 1
881 log_write(0, LOG_MAIN|LOG_PANIC,
882   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
883   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
884   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
885 #else
886 /* I leave this here, commented, in case the "bug"(?) comes up again.
887    It is not an Exim bug, but we can provide a workaround.
888    See Bug 2391
889    HS 2019-04-18 */
890
891 struct stat buf;
892
893 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
894   {
895   if (buf.st_uid == owner && buf.st_gid == group) return 0;
896   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
897   }
898 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
899
900 #endif
901 errno = saved_errno;
902 return -1;
903 }
904
905
906 /* Bump the index for argv, checking for overflow,
907 and return the argument. */
908
909 static const uschar *
910 next_argv(const uschar ** argv, int * pi, int argc, const uschar * where)
911 {
912 int i = *pi;
913 if (++i >= argc) exim_fail("exim: bad item for: %s\n", where);
914 return argv[*pi = i];
915 }
916
917
918 /*************************************************
919 *         Extract port from host address         *
920 *************************************************/
921
922 /* Called to extract the port from the values given to -oMa and -oMi.
923 It also checks the syntax of the address, and terminates it before the
924 port data when a port is extracted.
925
926 Argument:
927   address   the address, with possible port on the end
928
929 Returns:    the port, or zero if there isn't one
930             bombs out on a syntax error
931 */
932
933 static int
934 check_port(uschar *address)
935 {
936 int port = host_address_extract_port(address);
937 if (string_is_ip_address(address, NULL) == 0)
938   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
939 return port;
940 }
941
942
943
944 /*************************************************
945 *              Test/verify an address            *
946 *************************************************/
947
948 /* This function is called by the -bv and -bt code. It extracts a working
949 address from a full RFC 822 address. This isn't really necessary per se, but it
950 has the effect of collapsing source routes.
951
952 Arguments:
953   s            the address string
954   flags        flag bits for verify_address()
955   exit_value   to be set for failures
956
957 Returns:       nothing
958 */
959
960 static void
961 test_address(uschar *s, int flags, int *exit_value)
962 {
963 int start, end, domain;
964 uschar *parse_error = NULL;
965 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
966   FALSE);
967 if (!address)
968   {
969   fprintf(stdout, "syntax error: %s\n", parse_error);
970   *exit_value = 2;
971   }
972 else
973   {
974   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
975     -1, -1, NULL, NULL, NULL);
976   if (rc == FAIL) *exit_value = 2;
977   else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
978   }
979 }
980
981
982
983 /*************************************************
984 *          Show supported features               *
985 *************************************************/
986
987 static void
988 show_string(BOOL is_stdout, gstring * g)
989 {
990 const uschar * s = string_from_gstring(g);
991 if (s)
992   if (is_stdout) fputs(CCS s, stdout);
993   else debug_printf("%s", s);
994 }
995
996
997 static gstring *
998 show_db_version(gstring * g)
999 {
1000 #ifdef DB_VERSION_STRING
1001 DEBUG(D_any)
1002   {
1003   g = string_fmt_append(g, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
1004   g = string_fmt_append(g, "                      Runtime: %s\n",
1005     db_version(NULL, NULL, NULL));
1006   }
1007 else
1008   g = string_fmt_append(g, "Berkeley DB: %s\n", DB_VERSION_STRING);
1009
1010 #elif defined(BTREEVERSION) && defined(HASHVERSION)
1011 # ifdef USE_DB
1012   g = string_cat(g, US"Probably Berkeley DB version 1.8x (native mode)\n");
1013 # else
1014   g = string_cat(g, US"Probably Berkeley DB version 1.8x (compatibility mode)\n");
1015 # endif
1016
1017 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
1018 g = string_cat(g, US"Probably ndbm\n");
1019 #elif defined(USE_TDB)
1020 g = string_cat(g, US"Using tdb\n");
1021 #else
1022 # ifdef USE_GDBM
1023   g = string_cat(g, US"Probably GDBM (native mode)\n");
1024 # else
1025   g = string_cat(g, US"Probably GDBM (compatibility mode)\n");
1026 # endif
1027 #endif
1028 return g;
1029 }
1030
1031
1032 /* This function is called for -bV/--version and for -d to output the optional
1033 features of the current Exim binary.
1034
1035 Arguments:  BOOL, true for stdout else debug channel
1036 Returns:    nothing
1037 */
1038
1039 static void
1040 show_whats_supported(BOOL is_stdout)
1041 {
1042 rmark reset_point = store_mark();
1043 gstring * g = NULL;
1044
1045 DEBUG(D_any) {} else g = show_db_version(g);
1046
1047 g = string_cat(g, US"Support for:");
1048 #ifdef WITH_CONTENT_SCAN
1049   g = string_cat(g, US" Content_Scanning");
1050 #endif
1051 #ifdef SUPPORT_CRYPTEQ
1052   g = string_cat(g, US" crypteq");
1053 #endif
1054 #ifdef EXPAND_DLFUNC
1055   g = string_cat(g, US" Expand_dlfunc");
1056 #endif
1057 #if HAVE_ICONV
1058   g = string_cat(g, US" iconv()");
1059 #endif
1060 #if HAVE_IPV6
1061   g = string_cat(g, US" IPv6");
1062 #endif
1063 #ifdef SUPPORT_PAM
1064   g = string_cat(g, US" PAM");
1065 #endif
1066 #ifdef EXIM_PERL
1067   g = string_cat(g, US" Perl");
1068 #endif
1069 #ifdef USE_GNUTLS
1070   g = string_cat(g, US" GnuTLS");
1071 #endif
1072 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
1073   g = string_cat(g, US" move_frozen_messages");
1074 #endif
1075 #ifdef USE_OPENSSL
1076   g = string_cat(g, US" OpenSSL");
1077 #endif
1078 #if defined(CYRUS_PWCHECK_SOCKET)
1079   g = string_cat(g, US" pwcheck");
1080 #endif
1081 #if defined(RADIUS_CONFIG_FILE)
1082   g = string_cat(g, US" radius");
1083 #endif
1084 #ifndef DISABLE_TLS_RESUME
1085   g = string_cat(g, US" TLS_resume");
1086 #endif
1087 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
1088   g = string_cat(g, US" translate_ip_address");
1089 #endif
1090 #ifdef USE_TCP_WRAPPERS
1091   g = string_cat(g, US" TCPwrappers");
1092 #endif
1093 #ifdef HAVE_SETCLASSRESOURCES
1094   g = string_cat(g, US" use_setclassresources");
1095 #endif
1096 #ifdef SUPPORT_DANE
1097   g = string_cat(g, US" DANE");
1098 #endif
1099 #ifndef DISABLE_DKIM
1100   g = string_cat(g, US" DKIM");
1101 #endif
1102 #ifdef SUPPORT_DMARC
1103   g = string_cat(g, US" DMARC");
1104 #endif
1105 #ifndef DISABLE_DNSSEC
1106   g = string_cat(g, US" DNSSEC");
1107 #endif
1108 #ifndef DISABLE_ESMTP_LIMITS
1109   g = string_cat(g, US" ESMTP_Limits");
1110 #endif
1111 #ifndef DISABLE_EVENT
1112   g = string_cat(g, US" Event");
1113 #endif
1114 #ifdef SUPPORT_I18N
1115   g = string_cat(g, US" I18N");
1116 #endif
1117 #ifndef DISABLE_OCSP
1118   g = string_cat(g, US" OCSP");
1119 #endif
1120 #ifndef DISABLE_PIPE_CONNECT
1121   g = string_cat(g, US" PIPECONNECT");
1122 #endif
1123 #ifndef DISABLE_PRDR
1124   g = string_cat(g, US" PRDR");
1125 #endif
1126 #ifdef SUPPORT_PROXY
1127   g = string_cat(g, US" PROXY");
1128 #endif
1129 #ifndef DISABLE_QUEUE_RAMP
1130   g = string_cat(g, US" Queue_Ramp");
1131 #endif
1132 #ifdef SUPPORT_SOCKS
1133   g = string_cat(g, US" SOCKS");
1134 #endif
1135 #ifdef SUPPORT_SPF
1136   g = string_cat(g, US" SPF");
1137 #endif
1138 #if defined(SUPPORT_SRS)
1139   g = string_cat(g, US" SRS");
1140 #endif
1141 #ifdef TCP_FASTOPEN
1142   tcp_init();
1143   if (f.tcp_fastopen_ok) g = string_cat(g, US" TCP_Fast_Open");
1144 #endif
1145 #ifdef EXPERIMENTAL_ARC
1146   g = string_cat(g, US" Experimental_ARC");
1147 #endif
1148 #ifdef EXPERIMENTAL_BRIGHTMAIL
1149   g = string_cat(g, US" Experimental_Brightmail");
1150 #endif
1151 #ifdef EXPERIMENTAL_DCC
1152   g = string_cat(g, US" Experimental_DCC");
1153 #endif
1154 #ifdef EXPERIMENTAL_DSN_INFO
1155   g = string_cat(g, US" Experimental_DSN_info");
1156 #endif
1157 #ifdef EXPERIMENTAL_QUEUEFILE
1158   g = string_cat(g, US" Experimental_QUEUEFILE");
1159 #endif
1160 #ifdef EXPERIMENTAL_XCLIENT
1161   g = string_cat(g, US" Experimental_XCLIENT");
1162 #endif
1163 g = string_cat(g, US"\n");
1164
1165 g = string_cat(g, US"Lookups (built-in):");
1166 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1167   g = string_cat(g, US" lsearch wildlsearch nwildlsearch iplsearch");
1168 #endif
1169 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1170   g = string_cat(g, US" cdb");
1171 #endif
1172 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1173   g = string_cat(g, US" dbm dbmjz dbmnz");
1174 #endif
1175 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1176   g = string_cat(g, US" dnsdb");
1177 #endif
1178 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1179   g = string_cat(g, US" dsearch");
1180 #endif
1181 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1182   g = string_cat(g, US" ibase");
1183 #endif
1184 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1185   g = string_cat(g, US" json");
1186 #endif
1187 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1188   g = string_cat(g, US" ldap ldapdn ldapm");
1189 #endif
1190 #ifdef LOOKUP_LMDB
1191   g = string_cat(g, US" lmdb");
1192 #endif
1193 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1194   g = string_cat(g, US" mysql");
1195 #endif
1196 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1197   g = string_cat(g, US" nis nis0");
1198 #endif
1199 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1200   g = string_cat(g, US" nisplus");
1201 #endif
1202 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1203   g = string_cat(g, US" oracle");
1204 #endif
1205 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1206   g = string_cat(g, US" passwd");
1207 #endif
1208 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1209   g = string_cat(g, US" pgsql");
1210 #endif
1211 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1212   g = string_cat(g, US" redis");
1213 #endif
1214 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1215   g = string_cat(g, US" sqlite");
1216 #endif
1217 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1218   g = string_cat(g, US" testdb");
1219 #endif
1220 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1221   g = string_cat(g, US" whoson");
1222 #endif
1223 g = string_cat(g, US"\n");
1224
1225 g = auth_show_supported(g);
1226 g = route_show_supported(g);
1227 g = transport_show_supported(g);
1228
1229 #ifdef WITH_CONTENT_SCAN
1230 g = malware_show_supported(g);
1231 #endif
1232 show_string(is_stdout, g); g = NULL;
1233
1234 if (fixed_never_users[0] > 0)
1235   {
1236   int i;
1237   g = string_cat(g, US"Fixed never_users: ");
1238   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1239     string_fmt_append(g, "%u:", (unsigned)fixed_never_users[i]);
1240   g = string_fmt_append(g, "%u\n", (unsigned)fixed_never_users[i]);
1241   }
1242
1243 g = string_fmt_append(g, "Configure owner: %d:%d\n", config_uid, config_gid);
1244
1245 g = string_fmt_append(g, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1246
1247 /* Everything else is details which are only worth reporting when debugging.
1248 Perhaps the tls_version_report should move into this too. */
1249 DEBUG(D_any)
1250   {
1251
1252 /* clang defines __GNUC__ (at least, for me) so test for it first */
1253 #if defined(__clang__)
1254   g = string_fmt_append(g, "Compiler: CLang [%s]\n", __clang_version__);
1255 #elif defined(__GNUC__)
1256 # ifdef __VERSION__
1257   g = string_fmt_append(g, "Compiler: GCC [%s]\n", __VERSION__);
1258 # else
1259   g = string_fmt_append(g, "Compiler: GCC [%s]\n", "? unknown version ?";
1260 # endif
1261 #else
1262   g = string_cat(g, US"Compiler: <unknown>\n");
1263 #endif
1264
1265 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1266   g = string_fmt_append(g, "Library version: Glibc: Compile: %d.%d\n",
1267                 __GLIBC__, __GLIBC_MINOR__);
1268   if (__GLIBC_PREREQ(2, 1))
1269     g = string_fmt_append(g, "                        Runtime: %s\n",
1270                 gnu_get_libc_version());
1271 #endif
1272
1273 g = show_db_version(g);
1274
1275 #ifndef DISABLE_TLS
1276   g = tls_version_report(g);
1277 #endif
1278 #ifdef SUPPORT_I18N
1279   g = utf8_version_report(g);
1280 #endif
1281 #ifdef SUPPORT_DMARC
1282   g = dmarc_version_report(g);
1283 #endif
1284 #ifdef SUPPORT_SPF
1285   g = spf_lib_version_report(g);
1286 #endif
1287
1288 show_string(is_stdout, g);
1289 g = NULL;
1290
1291 for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1292   if (authi->version_report)
1293     g = (*authi->version_report)(g);
1294
1295   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1296   characters; unless it's an ancient version of PCRE in which case it
1297   is not defined. */
1298 #ifndef PCRE_PRERELEASE
1299 # define PCRE_PRERELEASE
1300 #endif
1301 #define QUOTE(X) #X
1302 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1303   {
1304   uschar buf[24];
1305   pcre2_config(PCRE2_CONFIG_VERSION, buf);
1306   g = string_fmt_append(g, "Library version: PCRE2: Compile: %d.%d%s\n"
1307               "                        Runtime: %s\n",
1308           PCRE2_MAJOR, PCRE2_MINOR,
1309           EXPAND_AND_QUOTE(PCRE2_PRERELEASE) "",
1310           buf);
1311   }
1312 #undef QUOTE
1313 #undef EXPAND_AND_QUOTE
1314
1315 show_string(is_stdout, g);
1316 g = NULL;
1317
1318 init_lookup_list();
1319 for (int i = 0; i < lookup_list_count; i++)
1320   if (lookup_list[i]->version_report)
1321     g = lookup_list[i]->version_report(g);
1322 show_string(is_stdout, g);
1323 g = NULL;
1324
1325 #ifdef WHITELIST_D_MACROS
1326   g = string_fmt_append(g, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1327 #else
1328   g = string_cat(g, US"WHITELIST_D_MACROS unset\n");
1329 #endif
1330 #ifdef TRUSTED_CONFIG_LIST
1331   g = string_fmt_append(g, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1332 #else
1333   g = string_cat(g, US"TRUSTED_CONFIG_LIST unset\n");
1334 #endif
1335   }
1336
1337 show_string(is_stdout, g);
1338 store_reset(reset_point);
1339 }
1340
1341
1342 /*************************************************
1343 *     Show auxiliary information about Exim      *
1344 *************************************************/
1345
1346 static void
1347 show_exim_information(enum commandline_info request, FILE *stream)
1348 {
1349 switch(request)
1350   {
1351   case CMDINFO_NONE:
1352     fprintf(stream, "Oops, something went wrong.\n");
1353     return;
1354   case CMDINFO_HELP:
1355     fprintf(stream,
1356 "The -bI: flag takes a string indicating which information to provide.\n"
1357 "If the string is not recognised, you'll get this help (on stderr).\n"
1358 "\n"
1359 "  exim -bI:help    this information\n"
1360 "  exim -bI:dscp    list of known dscp value keywords\n"
1361 "  exim -bI:sieve   list of supported sieve extensions\n"
1362 );
1363     return;
1364   case CMDINFO_SIEVE:
1365     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1366       fprintf(stream, "%s\n", *pp);
1367     return;
1368   case CMDINFO_DSCP:
1369     dscp_list_to_stream(stream);
1370     return;
1371   }
1372 }
1373
1374
1375 /*************************************************
1376 *               Quote a local part               *
1377 *************************************************/
1378
1379 /* This function is used when a sender address or a From: or Sender: header
1380 line is being created from the caller's login, or from an authenticated_id. It
1381 applies appropriate quoting rules for a local part.
1382
1383 Argument:    the local part
1384 Returns:     the local part, quoted if necessary
1385 */
1386
1387 const uschar *
1388 local_part_quote(const uschar * lpart)
1389 {
1390 BOOL needs_quote = FALSE;
1391 gstring * g;
1392
1393 for (const uschar * t = lpart; !needs_quote && *t; t++)
1394   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1395     (*t != '.' || t == lpart || t[1] == 0);
1396
1397 if (!needs_quote) return lpart;
1398
1399 g = string_catn(NULL, US"\"", 1);
1400
1401 for (;;)
1402   {
1403   uschar * nq = US Ustrpbrk(lpart, "\\\"");
1404   if (!nq)
1405     {
1406     g = string_cat(g, lpart);
1407     break;
1408     }
1409   g = string_catn(g, lpart, nq - lpart);
1410   g = string_catn(g, US"\\", 1);
1411   g = string_catn(g, nq, 1);
1412   lpart = nq + 1;
1413   }
1414
1415 g = string_catn(g, US"\"", 1);
1416 return string_from_gstring(g);
1417 }
1418
1419
1420
1421 #ifdef USE_READLINE
1422 /*************************************************
1423 *         Load readline() functions              *
1424 *************************************************/
1425
1426 /* This function is called from testing executions that read data from stdin,
1427 but only when running as the calling user. Currently, only -be does this. The
1428 function loads the readline() function library and passes back the functions.
1429 On some systems, it needs the curses library, so load that too, but try without
1430 it if loading fails. All this functionality has to be requested at build time.
1431
1432 Arguments:
1433   fn_readline_ptr   pointer to where to put the readline pointer
1434   fn_addhist_ptr    pointer to where to put the addhistory function
1435
1436 Returns:            the dlopen handle or NULL on failure
1437 */
1438
1439 static void *
1440 set_readline(char * (**fn_readline_ptr)(const char *),
1441              void   (**fn_addhist_ptr)(const char *))
1442 {
1443 void *dlhandle;
1444 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1445
1446 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1447 if (dlhandle_curses) dlclose(dlhandle_curses);
1448
1449 if (dlhandle)
1450   {
1451   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1452    *   char * readline (const char *prompt);
1453    *   void add_history (const char *string);
1454    */
1455   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1456   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1457   }
1458 else
1459   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1460
1461 return dlhandle;
1462 }
1463 #endif
1464
1465
1466
1467 /*************************************************
1468 *    Get a line from stdin for testing things    *
1469 *************************************************/
1470
1471 /* This function is called when running tests that can take a number of lines
1472 of input (for example, -be and -bt). It handles continuations and trailing
1473 spaces. And prompting and a blank line output on eof. If readline() is in use,
1474 the arguments are non-NULL and provide the relevant functions.
1475
1476 Arguments:
1477   fn_readline   readline function or NULL
1478   fn_addhist    addhist function or NULL
1479
1480 Returns:        pointer to dynamic memory, or NULL at end of file
1481 */
1482
1483 static uschar *
1484 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1485 {
1486 gstring * g = NULL;
1487 BOOL had_input = FALSE;
1488
1489 if (!fn_readline) { printf("> "); fflush(stdout); }
1490
1491 for (int i = 0;; i++)
1492   {
1493   uschar buffer[1024];
1494   uschar * p, * ss;
1495
1496 #ifdef USE_READLINE
1497   char *readline_line = NULL;
1498   if (fn_readline)
1499     {
1500     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1501     if (*readline_line && fn_addhist) fn_addhist(readline_line);
1502     p = US readline_line;
1503     }
1504   else
1505 #endif
1506
1507   /* readline() not in use */
1508
1509     {
1510     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;   /*EOF*/
1511     p = buffer;
1512     }
1513
1514   /* Handle the line */
1515
1516   had_input = TRUE;
1517   ss = p + Ustrlen(p);
1518   while (ss > p && isspace(ss[-1])) ss--; /* strip trailing newline (and spaces) */
1519
1520   if (i > 0)
1521     while (p < ss && isspace(*p)) p++;   /* strip leading space after cont */
1522
1523   g = string_catn(g, p, ss - p);
1524
1525 #ifdef USE_READLINE
1526   if (fn_readline) free(readline_line);
1527 #endif
1528
1529   /* g can only be NULL if ss==p */
1530   if (ss == p || gstring_last_char(g) != '\\') /* not continuation; done */
1531     break;
1532
1533   gstring_trim(g, 1);                           /* drop the \ */
1534   }
1535
1536 if (had_input) return g ? string_from_gstring(g) : US"";
1537 printf("\n");
1538 return NULL;
1539 }
1540
1541
1542
1543 /*************************************************
1544 *    Output usage information for the program    *
1545 *************************************************/
1546
1547 /* This function is called when there are no recipients
1548    or a specific --help argument was added.
1549
1550 Arguments:
1551   progname      information on what name we were called by
1552
1553 Returns:        DOES NOT RETURN
1554 */
1555
1556 static void
1557 exim_usage(const uschar * progname)
1558 {
1559
1560 /* Handle specific program invocation variants */
1561 if (Ustrcmp(progname, US"-mailq") == 0)
1562   exim_fail(
1563     "mailq - list the contents of the mail queue\n\n"
1564     "For a list of options, see the Exim documentation.\n");
1565
1566 /* Generic usage - we output this whatever happens */
1567 exim_fail(
1568   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1569   "not directly from a shell command line. Options and/or arguments control\n"
1570   "what it does when called. For a list of options, see the Exim documentation.\n");
1571 }
1572
1573
1574
1575 /*************************************************
1576 *    Validate that the macros given are okay     *
1577 *************************************************/
1578
1579 /* Typically, Exim will drop privileges if macros are supplied.  In some
1580 cases, we want to not do so.
1581
1582 Arguments:    opt_D_used - true if the commandline had a "-D" option
1583 Returns:      true if trusted, false otherwise
1584 */
1585
1586 static BOOL
1587 macros_trusted(BOOL opt_D_used)
1588 {
1589 #ifdef WHITELIST_D_MACROS
1590 uschar *whitelisted, *end, *p, **whites;
1591 int white_count, i, n;
1592 size_t len;
1593 BOOL prev_char_item, found;
1594 #endif
1595
1596 if (!opt_D_used)
1597   return TRUE;
1598 #ifndef WHITELIST_D_MACROS
1599 return FALSE;
1600 #else
1601
1602 /* We only trust -D overrides for some invoking users:
1603 root, the exim run-time user, the optional config owner user.
1604 I don't know why config-owner would be needed, but since they can own the
1605 config files anyway, there's no security risk to letting them override -D. */
1606 if ( ! ((real_uid == root_uid)
1607      || (real_uid == exim_uid)
1608 #ifdef CONFIGURE_OWNER
1609      || (real_uid == config_uid)
1610 #endif
1611    ))
1612   {
1613   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1614   return FALSE;
1615   }
1616
1617 /* Get a list of macros which are whitelisted */
1618 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1619 prev_char_item = FALSE;
1620 white_count = 0;
1621 for (p = whitelisted; *p != '\0'; ++p)
1622   {
1623   if (*p == ':' || isspace(*p))
1624     {
1625     *p = '\0';
1626     if (prev_char_item)
1627       ++white_count;
1628     prev_char_item = FALSE;
1629     continue;
1630     }
1631   if (!prev_char_item)
1632     prev_char_item = TRUE;
1633   }
1634 end = p;
1635 if (prev_char_item)
1636   ++white_count;
1637 if (!white_count)
1638   return FALSE;
1639 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1640 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1641   {
1642   if (*p != '\0')
1643     {
1644     whites[i++] = p;
1645     if (i == white_count)
1646       break;
1647     while (*p != '\0' && p < end)
1648       ++p;
1649     }
1650   }
1651 whites[i] = NULL;
1652
1653 /* The list of commandline macros should be very short.
1654 Accept the N*M complexity. */
1655 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1656   {
1657   found = FALSE;
1658   for (uschar ** w = whites; *w; ++w)
1659     if (Ustrcmp(*w, m->name) == 0)
1660       {
1661       found = TRUE;
1662       break;
1663       }
1664   if (!found)
1665     return FALSE;
1666   if (!m->replacement)
1667     continue;
1668   if ((len = m->replen) == 0)
1669     continue;
1670   if (!regex_match(regex_whitelisted_macro, m->replacement, len, NULL))
1671     return FALSE;
1672   }
1673 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1674 return TRUE;
1675 #endif
1676 }
1677
1678
1679 /*************************************************
1680 *          Expansion testing                     *
1681 *************************************************/
1682
1683 /* Expand and print one item, doing macro-processing.
1684
1685 Arguments:
1686   item          line for expansion
1687 */
1688
1689 static void
1690 expansion_test_line(const uschar * line)
1691 {
1692 int len;
1693 BOOL dummy_macexp;
1694 uschar * s;
1695
1696 Ustrncpy(big_buffer, line, big_buffer_size);
1697 big_buffer[big_buffer_size-1] = '\0';
1698 len = Ustrlen(big_buffer);
1699
1700 (void) macros_expand(0, &len, &dummy_macexp);
1701
1702 if (isupper(big_buffer[0]))
1703   {
1704   if (macro_read_assignment(big_buffer))
1705     printf("Defined macro '%s'\n", mlast->name);
1706   }
1707 else if (Ustrncmp(big_buffer, "set,t ", 6) == 0)
1708   printf("%s\n", acl_standalone_setvar(big_buffer+6, TRUE));
1709 else if (Ustrncmp(big_buffer, "set ", 4) == 0)
1710   printf("%s\n", acl_standalone_setvar(big_buffer+4, FALSE));
1711 else
1712   if ((s = expand_string(big_buffer))) printf("%s\n", CS s);
1713   else printf("Failed: %s\n", expand_string_message);
1714 }
1715
1716
1717
1718 /*************************************************
1719 *          Queue-runner operations               *
1720 *************************************************/
1721
1722 /* Prefix a new qrunner descriptor to the qrunners list */
1723
1724 static qrunner *
1725 alloc_qrunner(void)
1726 {
1727 qrunner * q = qrunners;
1728 qrunners = store_get(sizeof(qrunner), GET_UNTAINTED);
1729 memset(qrunners, 0, sizeof(qrunner));           /* default queue, zero interval */
1730 qrunners->next = q;
1731 qrunners->next_tick = time(NULL);               /* run right away */
1732 return qrunners;
1733 }
1734
1735 static qrunner *
1736 alloc_onetime_qrunner(void)
1737 {
1738 qrunners = store_get_perm(sizeof(qrunner), GET_UNTAINTED);
1739 memset(qrunners, 0, sizeof(qrunner));           /* default queue, zero interval */
1740 qrunners->next_tick = time(NULL);               /* run right away */
1741 qrunners->run_max = 1;
1742 return qrunners;
1743 }
1744
1745
1746 /*************************************************
1747 *          Entry point and high-level code       *
1748 *************************************************/
1749
1750 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1751 the appropriate action. All the necessary functions are present in the one
1752 binary. I originally thought one should split it up, but it turns out that so
1753 much of the apparatus is needed in each chunk that one might as well just have
1754 it all available all the time, which then makes the coding easier as well.
1755
1756 Arguments:
1757   argc      count of entries in argv
1758   argv      argument strings, with argv[0] being the program name
1759
1760 Returns:    EXIT_SUCCESS if terminated successfully
1761             EXIT_FAILURE otherwise, except when a message has been sent
1762               to the sender, and -oee was given
1763 */
1764
1765 int
1766 main(int argc, char ** cargv)
1767 {
1768 const uschar ** argv = CUSS cargv;
1769 int  arg_receive_timeout = -1;
1770 int  arg_smtp_receive_timeout = -1;
1771 int  arg_error_handling = error_handling;
1772 int  filter_sfd = -1;
1773 int  filter_ufd = -1;
1774 int  group_count;
1775 int  i, rv;
1776 int  list_queue_option = QL_BASIC;
1777 int  msg_action = 0;
1778 int  msg_action_arg = -1;
1779 int  namelen = argv[0] ? Ustrlen(argv[0]) : 0;
1780 int  queue_only_reason = 0;
1781 #ifdef EXIM_PERL
1782 int  perl_start_option = 0;
1783 #endif
1784 int  recipients_arg = argc;
1785 int  sender_address_domain = 0;
1786 int  test_retry_arg = -1;
1787 int  test_rewrite_arg = -1;
1788 gid_t original_egid;
1789 BOOL arg_queue_only = FALSE;
1790 BOOL bi_option = FALSE;
1791 BOOL checking = FALSE;
1792 BOOL count_queue = FALSE;
1793 BOOL expansion_test = FALSE;
1794 BOOL extract_recipients = FALSE;
1795 BOOL flag_G = FALSE;
1796 BOOL flag_n = FALSE;
1797 BOOL forced_delivery = FALSE;
1798 BOOL f_end_dot = FALSE;
1799 BOOL deliver_give_up = FALSE;
1800 BOOL list_queue = FALSE;
1801 BOOL list_options = FALSE;
1802 BOOL list_config = FALSE;
1803 BOOL local_queue_only;
1804 BOOL one_msg_action = FALSE;
1805 BOOL opt_D_used = FALSE;
1806 BOOL queue_only_set = FALSE;
1807 BOOL receiving_message = TRUE;
1808 BOOL sender_ident_set = FALSE;
1809 BOOL session_local_queue_only;
1810 BOOL unprivileged;
1811 BOOL removed_privilege = FALSE;
1812 BOOL usage_wanted = FALSE;
1813 BOOL verify_address_mode = FALSE;
1814 BOOL verify_as_sender = FALSE;
1815 BOOL rcpt_verify_quota = FALSE;
1816 BOOL version_printed = FALSE;
1817 const uschar * alias_arg = NULL;
1818 const uschar * called_as = US"";
1819 const uschar * cmdline_syslog_name = NULL;
1820 const uschar * start_queue_run_id = NULL;
1821 const uschar * stop_queue_run_id = NULL;
1822 const uschar * expansion_test_message = NULL;
1823 const uschar * ftest_domain = NULL;
1824 const uschar * ftest_localpart = NULL;
1825 const uschar * ftest_prefix = NULL;
1826 const uschar * ftest_suffix = NULL;
1827 uschar * log_oneline = NULL;
1828 const uschar * malware_test_file = NULL;
1829 const uschar * real_sender_address;
1830 uschar * originator_home = US"/";
1831 size_t sz;
1832
1833 struct passwd *pw;
1834 struct stat statbuf;
1835 pid_t passed_qr_pid = (pid_t)0;
1836 int passed_qr_pipe = -1;
1837 gid_t group_list[EXIM_GROUPLIST_SIZE];
1838
1839 /* For the -bI: flag */
1840 enum commandline_info info_flag = CMDINFO_NONE;
1841 BOOL info_stdout = FALSE;
1842
1843 /* Possible options for -R and -S */
1844
1845 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1846
1847 /* Need to define this in case we need to change the environment in order
1848 to get rid of a bogus time zone. We have to make it char rather than uschar
1849 because some OS define it in /usr/include/unistd.h. */
1850
1851 extern char **environ;
1852
1853 #ifdef MEASURE_TIMING
1854 (void)gettimeofday(&timestamp_startup, NULL);
1855 #endif
1856
1857 store_init();   /* Initialise the memory allocation susbsystem */
1858 pcre_init();    /* Set up memory handling for pcre */
1859
1860 /* If the Exim user and/or group and/or the configuration file owner/group were
1861 defined by ref:name at build time, we must now find the actual uid/gid values.
1862 This is a feature to make the lives of binary distributors easier. */
1863
1864 #ifdef EXIM_USERNAME
1865 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1866   {
1867   if (exim_uid == 0)
1868     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1869
1870   /* If ref:name uses a number as the name, route_finduser() returns
1871   TRUE with exim_uid set and pw coerced to NULL. */
1872   if (pw)
1873     exim_gid = pw->pw_gid;
1874 #ifndef EXIM_GROUPNAME
1875   else
1876     exim_fail(
1877         "exim: ref:name should specify a usercode, not a group.\n"
1878         "exim: can't let you get away with it unless you also specify a group.\n");
1879 #endif
1880   }
1881 else
1882   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1883 #endif
1884
1885 #ifdef EXIM_GROUPNAME
1886 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1887   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1888 #endif
1889
1890 #ifdef CONFIGURE_OWNERNAME
1891 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1892   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1893     CONFIGURE_OWNERNAME);
1894 #endif
1895
1896 /* We default the system_filter_user to be the Exim run-time user, as a
1897 sane non-root value. */
1898 system_filter_uid = exim_uid;
1899
1900 #ifdef CONFIGURE_GROUPNAME
1901 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1902   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1903     CONFIGURE_GROUPNAME);
1904 #endif
1905
1906 /* In the Cygwin environment, some initialization used to need doing.
1907 It was fudged in by means of this macro; now no longer but we'll leave
1908 it in case of others. */
1909
1910 #ifdef OS_INIT
1911 OS_INIT
1912 #endif
1913
1914 /* Check a field which is patched when we are running Exim within its
1915 testing harness; do a fast initial check, and then the whole thing. */
1916
1917 f.running_in_test_harness =
1918   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1919 if (f.running_in_test_harness)
1920   debug_store = TRUE;
1921
1922 /* Protect against abusive argv[0] */
1923 if (!argv[0] || !argc) exim_fail("exim: executable name required\n");
1924 exim_str_fail_toolong(argv[0], PATH_MAX, "argv[0]");
1925
1926 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1927 at the start of a program; however, it seems that some environments do not
1928 follow this. A "strange" locale can affect the formatting of timestamps, so we
1929 make quite sure. */
1930
1931 setlocale(LC_ALL, "C");
1932
1933 /* Get the offset between CLOCK_MONOTONIC/CLOCK_BOOTTIME and wallclock */
1934
1935 #ifdef _POSIX_MONOTONIC_CLOCK
1936 exim_clock_init();
1937 #endif
1938
1939 /* Set up the default handler for timing using alarm(). */
1940
1941 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1942
1943 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1944 because store_malloc writes a log entry on failure. */
1945
1946 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1947   exim_fail("exim: failed to get store for log buffer\n");
1948
1949 /* Initialize the default log options. */
1950
1951 bits_set(log_selector, log_selector_size, log_default);
1952
1953 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1954 NULL when the daemon is run and the file is closed. We have to use this
1955 indirection, because some systems don't allow writing to the variable "stderr".
1956 */
1957
1958 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1959
1960 /* Ensure there is a big buffer for temporary use in several places. It is put
1961 in malloc store so that it can be freed for enlargement if necessary. */
1962
1963 big_buffer = store_malloc(big_buffer_size);
1964
1965 /* Set up the handler for the data request signal, and set the initial
1966 descriptive text. */
1967
1968 process_info = store_get(PROCESS_INFO_SIZE, GET_TAINTED);
1969 set_process_info("initializing");
1970 os_restarting_signal(SIGUSR1, usr1_handler);            /* exiwhat */
1971 #ifdef SA_SIGINFO
1972   {
1973   struct sigaction act = { .sa_sigaction = segv_handler, .sa_flags = SA_RESETHAND | SA_SIGINFO };
1974   sigaction(SIGSEGV, &act, NULL);
1975   }
1976 #else
1977 signal(SIGSEGV, segv_handler);                          /* log faults */
1978 #endif
1979
1980 /* If running in a dockerized environment, the TERM signal is only
1981 delegated to the PID 1 if we request it by setting an signal handler */
1982
1983 if (getpid() == 1) signal(SIGTERM, term_handler);
1984
1985 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1986 in the daemon code. For the rest of Exim's uses, we ignore it. */
1987
1988 signal(SIGHUP, SIG_IGN);
1989
1990 /* We don't want to die on pipe errors as the code is written to handle
1991 the write error instead. */
1992
1993 signal(SIGPIPE, SIG_IGN);
1994
1995 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1996 set to SIG_IGN. This causes subprocesses that complete before the parent
1997 process waits for them not to hang around, so when Exim calls wait(), nothing
1998 is there. The wait() code has been made robust against this, but let's ensure
1999 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
2000 ending status. We use sigaction rather than plain signal() on those OS where
2001 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
2002 problem on AIX with this.) */
2003
2004 #ifdef SA_NOCLDWAIT
2005   {
2006   struct sigaction act;
2007   act.sa_handler = SIG_DFL;
2008   sigemptyset(&(act.sa_mask));
2009   act.sa_flags = 0;
2010   sigaction(SIGCHLD, &act, NULL);
2011   }
2012 #else
2013 signal(SIGCHLD, SIG_DFL);
2014 #endif
2015
2016 /* Save the arguments for use if we re-exec exim as a daemon after receiving
2017 SIGHUP. */
2018
2019 sighup_argv = argv;
2020
2021 /* Set up the version number. Set up the leading 'E' for the external form of
2022 message ids, set the pointer to the internal form, and initialize it to
2023 indicate no message being processed. */
2024
2025 version_init();
2026 message_id_option[0] = '-';
2027 message_id_external = message_id_option + 1;
2028 message_id_external[0] = 'E';
2029 message_id = message_id_external + 1;
2030 message_id[0] = 0;
2031
2032 /* Set the umask to zero so that any files Exim creates using open() are
2033 created with the modes that it specifies. NOTE: Files created with fopen() have
2034 a problem, which was not recognized till rather late (February 2006). With this
2035 umask, such files will be world writeable. (They are all content scanning files
2036 in the spool directory, which isn't world-accessible, so this is not a
2037 disaster, but it's untidy.) I don't want to change this overall setting,
2038 however, because it will interact badly with the open() calls. Instead, there's
2039 now a function called modefopen() that fiddles with the umask while calling
2040 fopen(). */
2041
2042 (void)umask(0);
2043
2044 /* Precompile the regular expression for matching a message id. Keep this in
2045 step with the code that generates ids in the accept.c module. We need to do
2046 this here, because the -M options check their arguments for syntactic validity
2047 using mac_ismsgid, which uses this. */
2048
2049 regex_ismsgid =
2050   regex_must_compile(US"^(?:"
2051           "[^\\W_]{" str(MESSAGE_ID_TIME_LEN) "}"
2052           "-[^\\W_]{" str(MESSAGE_ID_PID_LEN) "}"
2053           "-[^\\W_]{" str(MESSAGE_ID_SUBTIME_LEN) "}"
2054         "|"
2055           "(?:[^\\W_]{6}-){2}[^\\W_]{2}"                /* old ID format */
2056         ")$",
2057     MCS_NOFLAGS, TRUE);
2058
2059 /* Precompile the regular expression that is used for matching an SMTP error
2060 code, possibly extended, at the start of an error message. Note that the
2061 terminating whitespace character is included. */
2062
2063 regex_smtp_code =
2064   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
2065     MCS_NOFLAGS, TRUE);
2066
2067 #ifdef WHITELIST_D_MACROS
2068 /* Precompile the regular expression used to filter the content of macros
2069 given to -D for permissibility. */
2070
2071 regex_whitelisted_macro =
2072   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", MCS_NOFLAGS, TRUE);
2073 #endif
2074
2075 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
2076 this seems to be a generally accepted convention, since one finds symbolic
2077 links called "mailq" in standard OS configurations. */
2078
2079 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
2080     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
2081   {
2082   list_queue = TRUE;
2083   receiving_message = FALSE;
2084   called_as = US"-mailq";
2085   }
2086
2087 /* If the program is called as "rmail" treat it as equivalent to
2088 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
2089 i.e. preventing a single dot on a line from terminating the message, and
2090 returning with zero return code, even in cases of error (provided an error
2091 message has been sent). */
2092
2093 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
2094     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
2095   {
2096   f.dot_ends = FALSE;
2097   called_as = US"-rmail";
2098   errors_sender_rc = EXIT_SUCCESS;
2099   }
2100
2101 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
2102 this is a smail convention. */
2103
2104 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
2105     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
2106   {
2107   smtp_input = smtp_batched_input = TRUE;
2108   called_as = US"-rsmtp";
2109   }
2110
2111 /* If the program is called as "runq" treat it as equivalent to "exim -q";
2112 this is a smail convention. */
2113
2114 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
2115     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
2116   {
2117   alloc_onetime_qrunner();
2118   receiving_message = FALSE;
2119   called_as = US"-runq";
2120   }
2121
2122 /* If the program is called as "newaliases" treat it as equivalent to
2123 "exim -bi"; this is a sendmail convention. */
2124
2125 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
2126     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
2127   {
2128   bi_option = TRUE;
2129   receiving_message = FALSE;
2130   called_as = US"-newaliases";
2131   }
2132
2133 /* Save the original effective uid for a couple of uses later. It should
2134 normally be root, but in some esoteric environments it may not be. */
2135
2136 original_euid = geteuid();
2137 original_egid = getegid();
2138
2139 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
2140 to be the same as the real ones. This makes a difference only if Exim is setuid
2141 (or setgid) to something other than root, which could be the case in some
2142 special configurations. */
2143
2144 real_uid = getuid();
2145 real_gid = getgid();
2146
2147 if (real_uid == root_uid)
2148   {
2149   if ((rv = setgid(real_gid)))
2150     exim_fail("exim: setgid(%ld) failed: %s\n",
2151         (long int)real_gid, strerror(errno));
2152   if ((rv = setuid(real_uid)))
2153     exim_fail("exim: setuid(%ld) failed: %s\n",
2154         (long int)real_uid, strerror(errno));
2155   }
2156
2157 /* If neither the original real uid nor the original euid was root, Exim is
2158 running in an unprivileged state. */
2159
2160 unprivileged = (real_uid != root_uid && original_euid != root_uid);
2161
2162 /* For most of the args-parsing we need to use permanent pool memory */
2163  {
2164  int old_pool = store_pool;
2165  store_pool = POOL_PERM;
2166
2167 /* Scan the program's arguments. Some can be dealt with right away; others are
2168 simply recorded for checking and handling afterwards. Do a high-level switch
2169 on the second character (the one after '-'), to save some effort. */
2170
2171  for (i = 1; i < argc; i++)
2172   {
2173   BOOL badarg = FALSE;
2174   const uschar * arg = argv[i];
2175   const uschar * argrest;
2176   uschar switchchar;
2177
2178   /* An argument not starting with '-' is the start of a recipients list;
2179   break out of the options-scanning loop. */
2180
2181   if (arg[0] != '-')
2182     {
2183     recipients_arg = i;
2184     break;
2185     }
2186
2187   /* An option consisting of -- terminates the options */
2188
2189   if (Ustrcmp(arg, "--") == 0)
2190     {
2191     recipients_arg = i + 1;
2192     break;
2193     }
2194
2195   /* Handle flagged options */
2196
2197   switchchar = arg[1];
2198   argrest = arg+2;
2199
2200   /* Make all -ex options synonymous with -oex arguments, since that
2201   is assumed by various callers. Also make -qR options synonymous with -R
2202   options, as that seems to be required as well. Allow for -qqR too, and
2203   the same for -S options. */
2204
2205   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
2206       Ustrncmp(arg+1, "qR", 2) == 0 ||
2207       Ustrncmp(arg+1, "qS", 2) == 0)
2208     {
2209     switchchar = arg[2];
2210     argrest++;
2211     }
2212   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
2213     {
2214     switchchar = arg[3];
2215     argrest += 2;
2216     f.queue_2stage = TRUE;
2217     }
2218
2219   /* Make -r synonymous with -f, since it is a documented alias */
2220
2221   else if (arg[1] == 'r') switchchar = 'f';
2222
2223   /* Make -ov synonymous with -v */
2224
2225   else if (Ustrcmp(arg, "-ov") == 0)
2226     {
2227     switchchar = 'v';
2228     argrest++;
2229     }
2230
2231   /* deal with --option_aliases */
2232   else if (switchchar == '-')
2233     {
2234     if (Ustrcmp(argrest, "help") == 0)
2235       {
2236       usage_wanted = TRUE;
2237       break;
2238       }
2239     else if (Ustrcmp(argrest, "version") == 0)
2240       {
2241       switchchar = 'b';
2242       argrest = US"V";
2243       }
2244     }
2245
2246   /* High-level switch on active initial letter */
2247
2248   switch(switchchar)
2249     {
2250
2251     /* sendmail uses -Ac and -Am to control which .cf file is used;
2252     we ignore them. */
2253     case 'A':
2254     if (!*argrest) { badarg = TRUE; break; }
2255     else
2256       {
2257       BOOL ignore = FALSE;
2258       switch (*argrest)
2259         {
2260         case 'c':
2261         case 'm':
2262           if (*(argrest + 1) == '\0')
2263             ignore = TRUE;
2264           break;
2265         }
2266       if (!ignore) badarg = TRUE;
2267       }
2268     break;
2269
2270     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2271     so has no need of it. */
2272
2273     case 'B':
2274     if (!*argrest) i++;       /* Skip over the type */
2275     break;
2276
2277
2278     case 'b':
2279       {
2280       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2281
2282       switch (*argrest++)
2283         {
2284         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2285            -bdf: Ditto, but in the foreground.
2286         */
2287         case 'd':
2288           f.daemon_listen = f.daemon_scion = TRUE;
2289           if (*argrest == 'f') f.background_daemon = FALSE;
2290           else if (*argrest) badarg = TRUE;
2291           break;
2292
2293         /* -be:  Run in expansion test mode
2294            -bem: Ditto, but read a message from a file first
2295         */
2296         case 'e':
2297           expansion_test = checking = TRUE;
2298           if (*argrest == 'm')
2299             {
2300             if (++i >= argc) { badarg = TRUE; break; }
2301             expansion_test_message = argv[i];
2302             argrest++;
2303             }
2304           if (*argrest) badarg = TRUE;
2305           break;
2306
2307         /* -bF:  Run system filter test */
2308         case 'F':
2309           filter_test |= checking = FTEST_SYSTEM;
2310           if (*argrest) badarg = TRUE;
2311           else if (++i < argc) filter_test_sfile = argv[i];
2312           else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2313           break;
2314
2315         /* -bf:  Run user filter test
2316            -bfd: Set domain for filter testing
2317            -bfl: Set local part for filter testing
2318            -bfp: Set prefix for filter testing
2319            -bfs: Set suffix for filter testing
2320         */
2321         case 'f':
2322           if (!*argrest)
2323             {
2324             filter_test |= checking = FTEST_USER;
2325             if (++i < argc) filter_test_ufile = argv[i];
2326             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2327             }
2328           else
2329             {
2330             if (++i >= argc)
2331               exim_fail("exim: string expected after %s\n", arg);
2332             if (Ustrcmp(argrest, "d") == 0) ftest_domain = exim_str_fail_toolong(argv[i], EXIM_DOMAINNAME_MAX, "-bfd");
2333             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfl");
2334             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfp");
2335             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfs");
2336             else badarg = TRUE;
2337             }
2338           break;
2339
2340         /* -bh: Host checking - an IP address must follow. */
2341         case 'h':
2342           if (!*argrest || Ustrcmp(argrest, "c") == 0)
2343             {
2344             if (++i >= argc) { badarg = TRUE; break; }
2345             sender_host_address = string_copy_taint(
2346                   exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-bh"),
2347                   GET_TAINTED);
2348             host_checking = checking = f.log_testing_mode = TRUE;
2349             f.host_checking_callout = *argrest == 'c';
2350             message_logs = FALSE;
2351             }
2352           else badarg = TRUE;
2353           break;
2354
2355         /* -bi: This option is used by sendmail to initialize *the* alias file,
2356         though it has the -oA option to specify a different file. Exim has no
2357         concept of *the* alias file, but since Sun's YP make script calls
2358         sendmail this way, some support must be provided. */
2359         case 'i':
2360           if (!*argrest) bi_option = TRUE;
2361           else badarg = TRUE;
2362           break;
2363
2364         /* -bI: provide information, of the type to follow after a colon.
2365         This is an Exim flag. */
2366         case 'I':
2367           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2368             {
2369             const uschar * p = argrest+1;
2370             info_flag = CMDINFO_HELP;
2371             if (Ustrlen(p))
2372               if (strcmpic(p, CUS"sieve") == 0)
2373                 {
2374                 info_flag = CMDINFO_SIEVE;
2375                 info_stdout = TRUE;
2376                 }
2377               else if (strcmpic(p, CUS"dscp") == 0)
2378                 {
2379                 info_flag = CMDINFO_DSCP;
2380                 info_stdout = TRUE;
2381                 }
2382               else if (strcmpic(p, CUS"help") == 0)
2383                 info_stdout = TRUE;
2384             }
2385           else badarg = TRUE;
2386           break;
2387
2388         /* -bm: Accept and deliver message - the default option. Reinstate
2389         receiving_message, which got turned off for all -b options.
2390            -bmalware: test the filename given for malware */
2391         case 'm':
2392           if (!*argrest) receiving_message = TRUE;
2393           else if (Ustrcmp(argrest, "alware") == 0)
2394             {
2395             if (++i >= argc) { badarg = TRUE; break; }
2396             checking = TRUE;
2397             malware_test_file = argv[i];
2398             }
2399           else badarg = TRUE;
2400           break;
2401
2402         /* -bnq: For locally originating messages, do not qualify unqualified
2403         addresses. In the envelope, this causes errors; in header lines they
2404         just get left. */
2405         case 'n':
2406           if (Ustrcmp(argrest, "q") == 0)
2407             {
2408             f.allow_unqualified_sender = FALSE;
2409             f.allow_unqualified_recipient = FALSE;
2410             }
2411           else badarg = TRUE;
2412           break;
2413
2414         /* -bpxx: List the contents of the mail queue, in various forms. If
2415         the option is -bpc, just a queue count is needed. Otherwise, if the
2416         first letter after p is r, then order is random. */
2417         case 'p':
2418           if (*argrest == 'c')
2419             {
2420             count_queue = TRUE;
2421             if (*++argrest) badarg = TRUE;
2422             break;
2423             }
2424
2425           if (*argrest == 'r')
2426             list_queue_option = QL_UNSORTED, argrest++;
2427           else
2428             list_queue_option = QL_BASIC;
2429
2430           list_queue = TRUE;
2431
2432           /* -bp: List the contents of the mail queue, top-level only */
2433
2434           if (!*argrest) {}
2435
2436           /* -bpu: List the contents of the mail queue, top-level undelivered */
2437
2438           else if (Ustrcmp(argrest, "u") == 0) list_queue_option |= QL_UNDELIVERED_ONLY;
2439
2440           /* -bpa: List the contents of the mail queue, including all delivered */
2441
2442           else if (Ustrcmp(argrest, "a") == 0) list_queue_option |= QL_PLUS_GENERATED;
2443
2444           /* -bpi: List only message IDs */
2445
2446           else if (Ustrcmp(argrest, "i") == 0) list_queue_option |= QL_MSGID_ONLY;
2447
2448           /* Unknown after -bp[r] */
2449
2450           else badarg = TRUE;
2451           break;
2452
2453
2454         /* -bP: List the configuration variables given as the address list.
2455         Force -v, so configuration errors get displayed. */
2456         case 'P':
2457
2458           /* -bP config: we need to setup here, because later,
2459           when list_options is checked, the config is read already */
2460           if (*argrest)
2461             badarg = TRUE;
2462           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2463             {
2464             list_config = TRUE;
2465             readconf_save_config(version_string);
2466             }
2467           else
2468             {
2469             list_options = TRUE;
2470             debug_selector |= D_v;
2471             debug_file = stderr;
2472             }
2473           break;
2474
2475         /* -brt: Test retry configuration lookup */
2476         case 'r':
2477           if (Ustrcmp(argrest, "t") == 0)
2478             {
2479             checking = TRUE;
2480             test_retry_arg = i + 1;
2481             goto END_ARG;
2482             }
2483
2484           /* -brw: Test rewrite configuration */
2485
2486           else if (Ustrcmp(argrest, "w") == 0)
2487             {
2488             checking = TRUE;
2489             test_rewrite_arg = i + 1;
2490             goto END_ARG;
2491             }
2492           else badarg = TRUE;
2493           break;
2494
2495         /* -bS: Read SMTP commands on standard input, but produce no replies -
2496         all errors are reported by sending messages. */
2497         case 'S':
2498           if (!*argrest)
2499             smtp_input = smtp_batched_input = receiving_message = TRUE;
2500           else badarg = TRUE;
2501           break;
2502
2503         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2504         on standard output. */
2505         case 's':
2506           if (!*argrest) smtp_input = receiving_message = TRUE;
2507           else badarg = TRUE;
2508           break;
2509
2510         /* -bt: address testing mode */
2511         case 't':
2512           if (!*argrest)
2513             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2514           else badarg = TRUE;
2515           break;
2516
2517         /* -bv: verify addresses */
2518         case 'v':
2519           if (!*argrest)
2520             verify_address_mode = checking = f.log_testing_mode = TRUE;
2521
2522         /* -bvs: verify sender addresses */
2523
2524           else if (Ustrcmp(argrest, "s") == 0)
2525             {
2526             verify_address_mode = checking = f.log_testing_mode = TRUE;
2527             verify_as_sender = TRUE;
2528             }
2529           else badarg = TRUE;
2530           break;
2531
2532         /* -bV: Print version string and support details */
2533         case 'V':
2534           if (!*argrest)
2535             {
2536             printf("Exim version %s #%s built %s\n", version_string,
2537               version_cnumber, version_date);
2538             printf("%s\n", CS version_copyright);
2539             version_printed = TRUE;
2540             show_whats_supported(TRUE);
2541             f.log_testing_mode = TRUE;
2542             }
2543           else badarg = TRUE;
2544           break;
2545
2546         /* -bw: inetd wait mode, accept a listening socket as stdin */
2547         case 'w':
2548           f.inetd_wait_mode = TRUE;
2549           f.background_daemon = FALSE;
2550           f.daemon_listen = f.daemon_scion = TRUE;
2551           if (*argrest)
2552             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2553               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2554           break;
2555
2556         default:
2557           badarg = TRUE;
2558           break;
2559         }
2560       break;
2561       }
2562
2563
2564     /* -C: change configuration file list; ignore if it isn't really
2565     a change! Enforce a prefix check if required. */
2566
2567     case 'C':
2568     if (!*argrest)
2569       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2570     if (Ustrcmp(config_main_filelist, argrest) != 0)
2571       {
2572       #ifdef ALT_CONFIG_PREFIX
2573       int sep = 0;
2574       int len = Ustrlen(ALT_CONFIG_PREFIX);
2575       const uschar *list = argrest;
2576       uschar *filename;
2577       /* The argv is untainted, so big_buffer (also untainted) is ok to use */
2578       while((filename = string_nextinlist(&list, &sep, big_buffer,
2579              big_buffer_size)))
2580         if (  (  Ustrlen(filename) < len
2581               || Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0
2582               || Ustrstr(filename, "/../") != NULL
2583               )
2584            && (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid)
2585            )
2586           exim_fail("-C Permission denied\n");
2587       #endif
2588       if (real_uid != root_uid)
2589         {
2590         #ifdef TRUSTED_CONFIG_LIST
2591
2592         if (real_uid != exim_uid
2593             #ifdef CONFIGURE_OWNER
2594             && real_uid != config_uid
2595             #endif
2596             )
2597           f.trusted_config = FALSE;
2598         else
2599           {
2600           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2601           if (trust_list)
2602             {
2603             struct stat statbuf;
2604
2605             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2606                 (statbuf.st_uid != root_uid        /* owner not root */
2607                  #ifdef CONFIGURE_OWNER
2608                  && statbuf.st_uid != config_uid   /* owner not the special one */
2609                  #endif
2610                    ) ||                            /* or */
2611                 (statbuf.st_gid != root_gid        /* group not root */
2612                  #ifdef CONFIGURE_GROUP
2613                  && statbuf.st_gid != config_gid   /* group not the special one */
2614                  #endif
2615                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2616                    ) ||                            /* or */
2617                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2618               {
2619               f.trusted_config = FALSE;
2620               fclose(trust_list);
2621               }
2622             else
2623               {
2624               /* Well, the trust list at least is up to scratch... */
2625               rmark reset_point;
2626               uschar *trusted_configs[32];
2627               int nr_configs = 0;
2628               int i = 0;
2629               int old_pool = store_pool;
2630               store_pool = POOL_MAIN;
2631
2632               reset_point = store_mark();
2633               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2634                 {
2635                 uschar *start = big_buffer, *nl;
2636                 while (*start && isspace(*start))
2637                 start++;
2638                 if (*start != '/')
2639                   continue;
2640                 nl = Ustrchr(start, '\n');
2641                 if (nl)
2642                   *nl = 0;
2643                 trusted_configs[nr_configs++] = string_copy(start);
2644                 if (nr_configs == nelem(trusted_configs))
2645                   break;
2646                 }
2647               fclose(trust_list);
2648
2649               if (nr_configs)
2650                 {
2651                 int sep = 0;
2652                 const uschar *list = argrest;
2653                 uschar *filename;
2654                 while (f.trusted_config && (filename = string_nextinlist(&list,
2655                         &sep, big_buffer, big_buffer_size)))
2656                   {
2657                   for (i=0; i < nr_configs; i++)
2658                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2659                       break;
2660                   if (i == nr_configs)
2661                     {
2662                     f.trusted_config = FALSE;
2663                     break;
2664                     }
2665                   }
2666                 }
2667               else      /* No valid prefixes found in trust_list file. */
2668                 f.trusted_config = FALSE;
2669               store_reset(reset_point);
2670               store_pool = old_pool;
2671               }
2672             }
2673           else          /* Could not open trust_list file. */
2674             f.trusted_config = FALSE;
2675           }
2676       #else
2677         /* Not root; don't trust config */
2678         f.trusted_config = FALSE;
2679       #endif
2680         }
2681
2682       config_main_filelist = argrest;
2683       f.config_changed = TRUE;
2684       }
2685     break;
2686
2687
2688     /* -D: set up a macro definition */
2689
2690     case 'D':
2691 #ifdef DISABLE_D_OPTION
2692       exim_fail("exim: -D is not available in this Exim binary\n");
2693 #else
2694       {
2695       int ptr = 0;
2696       macro_item * m;
2697       uschar name[24];
2698       const uschar * s = argrest;
2699
2700       opt_D_used = TRUE;
2701       while (isspace(*s)) s++;
2702
2703       if (*s < 'A' || *s > 'Z')
2704         exim_fail("exim: macro name set by -D must start with "
2705           "an upper case letter\n");
2706
2707       while (isalnum(*s) || *s == '_')
2708         {
2709         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2710         s++;
2711         }
2712       name[ptr] = 0;
2713       if (ptr == 0) { badarg = TRUE; break; }
2714       while (isspace(*s)) s++;
2715       if (*s != 0)
2716         {
2717         if (*s++ != '=') { badarg = TRUE; break; }
2718         while (isspace(*s)) s++;
2719         }
2720
2721       for (m = macros_user; m; m = m->next)
2722         if (Ustrcmp(m->name, name) == 0)
2723           exim_fail("exim: duplicated -D in command line\n");
2724
2725       m = macro_create(name, s, TRUE);
2726
2727       if (clmacro_count >= MAX_CLMACROS)
2728         exim_fail("exim: too many -D options on command line\n");
2729       clmacros[clmacro_count++] =
2730         string_sprintf("-D%s=%s", m->name, m->replacement);
2731       }
2732     #endif
2733     break;
2734
2735     case 'd':
2736
2737     /* -dropcr: Set this option.  Now a no-op, retained for compatibility only. */
2738
2739     if (Ustrcmp(argrest, "ropcr") == 0)
2740       {
2741       /* drop_cr = TRUE; */
2742       }
2743
2744     /* -dp: Set up a debug pretrigger buffer with given size. */
2745
2746     else if (Ustrcmp(argrest, "p") == 0)
2747       if (++i >= argc)
2748         badarg = TRUE;
2749       else
2750         debug_pretrigger_setup(argv[i]);
2751
2752     /* -dt: Set a debug trigger selector */
2753
2754     else if (Ustrncmp(argrest, "t=", 2) == 0)
2755       dtrigger_selector = (unsigned int) Ustrtol(argrest + 2, NULL, 0);
2756
2757     /* -d: Set debug level (see also -v below).
2758     If -dd is used, debugging subprocesses of the daemon is disabled. */
2759
2760     else
2761       {
2762       /* Use an intermediate variable so that we don't set debugging while
2763       decoding the debugging bits. */
2764
2765       unsigned int selector = D_default;
2766       debug_selector = 0;
2767       debug_file = NULL;
2768       if (*argrest == 'd')
2769         {
2770         f.debug_daemon = TRUE;
2771         argrest++;
2772         }
2773       if (*argrest)
2774         decode_bits(&selector, 1, debug_notall, argrest,
2775           debug_options, debug_options_count, US"debug", 0);
2776       debug_selector = selector;
2777       }
2778     break;
2779
2780
2781     /* -E: This is a local error message. This option is not intended for
2782     external use at all, but is not restricted to trusted callers because it
2783     does no harm (just suppresses certain error messages) and if Exim is run
2784     not setuid root it won't always be trusted when it generates error
2785     messages using this option. If there is a message id following -E, point
2786     message_reference at it, for logging. */
2787
2788     case 'E':
2789     f.local_error_message = TRUE;
2790     if (mac_ismsgid(argrest)) message_reference = argrest;
2791     break;
2792
2793
2794     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2795     option, so it looks as if historically the -oex options are also callable
2796     without the leading -o. So we have to accept them. Before the switch,
2797     anything starting -oe has been converted to -e. Exim does not support all
2798     of the sendmail error options. */
2799
2800     case 'e':
2801     if (Ustrcmp(argrest, "e") == 0)
2802       {
2803       arg_error_handling = ERRORS_SENDER;
2804       errors_sender_rc = EXIT_SUCCESS;
2805       }
2806     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2807     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2808     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2809     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2810     else badarg = TRUE;
2811     break;
2812
2813
2814     /* -F: Set sender's full name, used instead of the gecos entry from
2815     the password file. Since users can usually alter their gecos entries,
2816     there's no security involved in using this instead. The data can follow
2817     the -F or be in the next argument. */
2818
2819     case 'F':
2820     if (!*argrest)
2821       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2822     originator_name = string_copy_taint(
2823                   exim_str_fail_toolong(argrest, EXIM_HUMANNAME_MAX, "-F"),
2824                   GET_TAINTED);
2825     f.sender_name_forced = TRUE;
2826     break;
2827
2828
2829     /* -f: Set sender's address - this value is only actually used if Exim is
2830     run by a trusted user, or if untrusted_set_sender is set and matches the
2831     address, except that the null address can always be set by any user. The
2832     test for this happens later, when the value given here is ignored when not
2833     permitted. For an untrusted user, the actual sender is still put in Sender:
2834     if it doesn't match the From: header (unless no_local_from_check is set).
2835     The data can follow the -f or be in the next argument. The -r switch is an
2836     obsolete form of -f but since there appear to be programs out there that
2837     use anything that sendmail has ever supported, better accept it - the
2838     synonymizing is done before the switch above.
2839
2840     At this stage, we must allow domain literal addresses, because we don't
2841     know what the setting of allow_domain_literals is yet. Ditto for trailing
2842     dots and strip_trailing_dot. */
2843
2844     case 'f':
2845       {
2846       int dummy_start, dummy_end;
2847       uschar *errmess;
2848       if (!*argrest)
2849         if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
2850       (void) exim_str_fail_toolong(argrest, EXIM_DISPLAYMAIL_MAX, "-f");
2851       if (!*argrest)
2852         {
2853         uschar * s = store_get(1, GET_UNTAINTED);       /* Ensure writeable memory */
2854         *s = '\0';
2855         sender_address = s;
2856         }
2857       else
2858         {
2859         const uschar * temp = argrest + Ustrlen(argrest) - 1;
2860         while (temp >= argrest && isspace(*temp)) temp--;
2861         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2862         allow_domain_literals = TRUE;
2863         strip_trailing_dot = TRUE;
2864 #ifdef SUPPORT_I18N
2865         allow_utf8_domains = TRUE;
2866 #endif
2867         if (!(sender_address = parse_extract_address(argrest, &errmess,
2868                   &dummy_start, &dummy_end, &sender_address_domain, TRUE)))
2869           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2870
2871         sender_address = string_copy_taint(sender_address, GET_TAINTED);
2872 #ifdef SUPPORT_I18N
2873         message_smtputf8 =  string_is_utf8(sender_address);
2874         allow_utf8_domains = FALSE;
2875 #endif
2876         allow_domain_literals = FALSE;
2877         strip_trailing_dot = FALSE;
2878         }
2879       f.sender_address_forced = TRUE;
2880       }
2881     break;
2882
2883     /* -G: sendmail invocation to specify that it's a gateway submission and
2884     sendmail may complain about problems instead of fixing them.
2885     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2886     not at this time complain about problems. */
2887
2888     case 'G':
2889     flag_G = TRUE;
2890     break;
2891
2892     /* -h: Set the hop count for an incoming message. Exim does not currently
2893     support this; it always computes it by counting the Received: headers.
2894     To put it in will require a change to the spool header file format. */
2895
2896     case 'h':
2897     if (!*argrest)
2898       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2899     if (!isdigit(*argrest)) badarg = TRUE;
2900     break;
2901
2902
2903     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2904     not to be documented for sendmail but mailx (at least) uses it) */
2905
2906     case 'i':
2907     if (!*argrest) f.dot_ends = FALSE; else badarg = TRUE;
2908     break;
2909
2910
2911     /* -L: set the identifier used for syslog; equivalent to setting
2912     syslog_processname in the config file, but needs to be an admin option. */
2913
2914     case 'L':
2915     if (!*argrest)
2916       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2917     if ((sz = Ustrlen(argrest)) > 32)
2918       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2919     if (sz < 1)
2920       exim_fail("exim: the -L syslog name is too short\n");
2921     cmdline_syslog_name = string_copy_taint(argrest, GET_TAINTED);
2922     break;
2923
2924     case 'M':
2925     receiving_message = FALSE;
2926
2927     /* -MC:  continue delivery of another message via an existing open
2928     file descriptor. This option is used for an internal call by the
2929     smtp transport when there is a pending message waiting to go to an
2930     address to which it has got a connection. Five subsequent arguments are
2931     required: transport name, host name, IP address, sequence number, and
2932     message_id. Transports may decline to create new processes if the sequence
2933     number gets too big. The channel is stdin. This (-MC) must be the last
2934     argument. There's a subsequent check that the real-uid is privileged.
2935
2936     If we are running in the test harness. delay for a bit, to let the process
2937     that set this one up complete. This makes for repeatability of the logging,
2938     etc. output. */
2939
2940     if (Ustrcmp(argrest, "C") == 0)
2941       {
2942       union sockaddr_46 interface_sock;
2943       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2944
2945       if (argc != i + 6)
2946         exim_fail("exim: too many or too few arguments after -MC\n");
2947
2948       if (msg_action_arg >= 0)
2949         exim_fail("exim: incompatible arguments\n");
2950
2951       continue_transport = string_copy_taint(
2952         exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-C internal transport"),
2953         GET_TAINTED);
2954       continue_hostname = string_copy_taint(
2955         exim_str_fail_toolong(argv[++i], EXIM_HOSTNAME_MAX, "-C internal hostname"),
2956         GET_TAINTED);
2957       continue_host_address = string_copy_taint(
2958         exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-C internal hostaddr"),
2959         GET_TAINTED);
2960       continue_sequence = Uatoi(argv[++i]);
2961       msg_action = MSG_DELIVER;
2962       msg_action_arg = ++i;
2963       forced_delivery = TRUE;
2964       queue_run_pid = passed_qr_pid;
2965       queue_run_pipe = passed_qr_pipe;
2966
2967       if (!mac_ismsgid(argv[i]))
2968         exim_fail("exim: malformed message id %s after -MC option\n",
2969           argv[i]);
2970
2971       /* Set up $sending_ip_address and $sending_port, unless proxied */
2972
2973       if (!continue_proxy_cipher)
2974         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2975             &size) == 0)
2976           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2977             &sending_port);
2978         else
2979           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2980             strerror(errno));
2981
2982       testharness_pause_ms(500);
2983       break;
2984       }
2985
2986     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2987       {
2988       switch(argrest[1])
2989         {
2990     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2991     precedes -MC (see above). The flag indicates that the host to which
2992     Exim is connected has accepted an AUTH sequence. */
2993
2994         case 'A': f.smtp_authenticated = TRUE; break;
2995
2996     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2997        that exim is connected to supports the esmtp extension DSN */
2998
2999         case 'D': smtp_peer_options |= OPTION_DSN; break;
3000
3001     /* -MCd: for debug, set a process-purpose string */
3002
3003         case 'd': if (++i < argc)
3004                     process_purpose = string_copy_taint(
3005                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCd"),
3006                       GET_TAINTED);
3007                   else badarg = TRUE;
3008                   break;
3009
3010     /* -MCG: set the queue name, to a non-default value. Arguably, anything
3011        from the commandline should be tainted - but we will need an untainted
3012        value for the spoolfile when doing a -odi delivery process. */
3013
3014         case 'G': if (++i < argc) queue_name = string_copy_taint(
3015                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCG"),
3016                       GET_UNTAINTED);
3017                   else badarg = TRUE;
3018                   break;
3019
3020     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
3021
3022         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
3023
3024 #ifndef DISABLE_ESMTP_LIMITS
3025     /* -MCL: peer used LIMITS RCPTMAX and/or RCPTDOMAINMAX */
3026         case 'L': if (++i < argc) continue_limit_mail = Uatoi(argv[i]);
3027                   else badarg = TRUE;
3028                   if (++i < argc) continue_limit_rcpt = Uatoi(argv[i]);
3029                   else badarg = TRUE;
3030                   if (++i < argc) continue_limit_rcptdom = Uatoi(argv[i]);
3031                   else badarg = TRUE;
3032                   break;
3033 #endif
3034
3035     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
3036     it preceded -MC (see above) */
3037
3038         case 'P': smtp_peer_options |= OPTION_PIPE; break;
3039
3040 #ifdef SUPPORT_SOCKS
3041     /* -MCp: Socks proxy in use; nearside IP, port, external IP, port */
3042         case 'p': proxy_session = TRUE;
3043                   if (++i < argc)
3044                     {
3045                     proxy_local_address = string_copy_taint(argv[i], GET_TAINTED);
3046                     if (++i < argc)
3047                       {
3048                       proxy_local_port = Uatoi(argv[i]);
3049                       if (++i < argc)
3050                         {
3051                         proxy_external_address = string_copy_taint(argv[i], GET_TAINTED);
3052                         if (++i < argc)
3053                           {
3054                           proxy_external_port = Uatoi(argv[i]);
3055                           break;
3056                     } } } }
3057                   badarg = TRUE;
3058                   break;
3059 #endif
3060     /* -MCQ: pass on the pid of the queue-running process that started
3061     this chain of deliveries and the fd of its synchronizing pipe; this
3062     is useful only when it precedes -MC (see above) */
3063
3064         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
3065                   else badarg = TRUE;
3066                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
3067                   else badarg = TRUE;
3068                   break;
3069
3070     /* -MCq: do a quota check on the given recipient for the given size
3071     of message.  Separate from -MC. */
3072         case 'q': rcpt_verify_quota = TRUE;
3073                   if (++i < argc) message_size = Uatoi(argv[i]);
3074                   else badarg = TRUE;
3075                   break;
3076
3077     /* -MCS: set the smtp_use_size flag; this is useful only when it
3078     precedes -MC (see above) */
3079
3080         case 'S': smtp_peer_options |= OPTION_SIZE; break;
3081
3082 #ifndef DISABLE_TLS
3083     /* -MCs: used with -MCt; SNI was sent */
3084     /* -MCr: ditto, DANE */
3085
3086         case 'r':
3087         case 's': if (++i < argc)
3088                     {
3089                     continue_proxy_sni = string_copy_taint(
3090                       exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-MCr/-MCs"),
3091                       GET_TAINTED);
3092                     if (argrest[1] == 'r') continue_proxy_dane = TRUE;
3093                     }
3094                   else badarg = TRUE;
3095                   break;
3096
3097     /* -MCt: similar to -MCT below but the connection is still open
3098     via a proxy process which handles the TLS context and coding.
3099     Require three arguments for the proxied local address and port,
3100     and the TLS cipher. */
3101
3102         case 't': if (++i < argc)
3103                     sending_ip_address = string_copy_taint(
3104                       exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-MCt IP"),
3105                       GET_TAINTED);
3106                   else badarg = TRUE;
3107                   if (++i < argc)
3108                     sending_port = (int)(Uatol(argv[i]));
3109                   else badarg = TRUE;
3110                   if (++i < argc)
3111                     continue_proxy_cipher = string_copy_taint(
3112                       exim_str_fail_toolong(argv[i], EXIM_CIPHERNAME_MAX, "-MCt cipher"),
3113                       GET_TAINTED);
3114                   else badarg = TRUE;
3115                   /*FALLTHROUGH*/
3116
3117     /* -MCT: set the tls_offered flag; this is useful only when it
3118     precedes -MC (see above). The flag indicates that the host to which
3119     Exim is connected has offered TLS support. */
3120
3121         case 'T': smtp_peer_options |= OPTION_TLS; break;
3122 #endif
3123
3124         default:  badarg = TRUE; break;
3125         }
3126       break;
3127       }
3128
3129     /* -M[x]: various operations on the following list of message ids:
3130        -M    deliver the messages, ignoring next retry times and thawing
3131        -Mc   deliver the messages, checking next retry times, no thawing
3132        -Mf   freeze the messages
3133        -Mg   give up on the messages
3134        -Mt   thaw the messages
3135        -Mrm  remove the messages
3136     In the above cases, this must be the last option. There are also the
3137     following options which are followed by a single message id, and which
3138     act on that message. Some of them use the "recipient" addresses as well.
3139        -Mar  add recipient(s)
3140        -MG   move to a different queue
3141        -Mmad mark all recipients delivered
3142        -Mmd  mark recipients(s) delivered
3143        -Mes  edit sender
3144        -Mset load a message for use with -be
3145        -Mvb  show body
3146        -Mvc  show copy (of whole message, in RFC 2822 format)
3147        -Mvh  show header
3148        -Mvl  show log
3149     */
3150
3151     else if (!*argrest)
3152       {
3153       msg_action = MSG_DELIVER;
3154       forced_delivery = f.deliver_force_thaw = TRUE;
3155       }
3156     else if (Ustrcmp(argrest, "ar") == 0)
3157       {
3158       msg_action = MSG_ADD_RECIPIENT;
3159       one_msg_action = TRUE;
3160       }
3161     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
3162     else if (Ustrcmp(argrest, "es") == 0)
3163       {
3164       msg_action = MSG_EDIT_SENDER;
3165       one_msg_action = TRUE;
3166       }
3167     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
3168     else if (Ustrcmp(argrest, "g") == 0)
3169       {
3170       msg_action = MSG_DELIVER;
3171       deliver_give_up = TRUE;
3172       }
3173    else if (Ustrcmp(argrest, "G") == 0)
3174       {
3175       msg_action = MSG_SETQUEUE;
3176       queue_name_dest = string_copy_taint(
3177         exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3178                               EXIM_DRIVERNAME_MAX, "-MG"),
3179         GET_TAINTED);
3180       }
3181     else if (Ustrcmp(argrest, "mad") == 0) msg_action = MSG_MARK_ALL_DELIVERED;
3182     else if (Ustrcmp(argrest, "md") == 0)
3183       {
3184       msg_action = MSG_MARK_DELIVERED;
3185       one_msg_action = TRUE;
3186       }
3187     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
3188     else if (Ustrcmp(argrest, "set") == 0)
3189       {
3190       msg_action = MSG_LOAD;
3191       one_msg_action = TRUE;
3192       }
3193     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
3194     else if (Ustrcmp(argrest, "vb") == 0)
3195       {
3196       msg_action = MSG_SHOW_BODY;
3197       one_msg_action = TRUE;
3198       }
3199     else if (Ustrcmp(argrest, "vc") == 0)
3200       {
3201       msg_action = MSG_SHOW_COPY;
3202       one_msg_action = TRUE;
3203       }
3204     else if (Ustrcmp(argrest, "vh") == 0)
3205       {
3206       msg_action = MSG_SHOW_HEADER;
3207       one_msg_action = TRUE;
3208       }
3209     else if (Ustrcmp(argrest, "vl") == 0)
3210       {
3211       msg_action = MSG_SHOW_LOG;
3212       one_msg_action = TRUE;
3213       }
3214     else { badarg = TRUE; break; }
3215
3216     /* All the -Mxx options require at least one message id. */
3217
3218     msg_action_arg = i + 1;
3219     if (msg_action_arg >= argc)
3220       exim_fail("exim: no message ids given after %s option\n", arg);
3221
3222     /* Some require only message ids to follow */
3223
3224     if (!one_msg_action)
3225       {
3226       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
3227         exim_fail("exim: malformed message id %s after %s option\n",
3228           argv[j], arg);
3229       goto END_ARG;   /* Remaining args are ids */
3230       }
3231
3232     /* Others require only one message id, possibly followed by addresses,
3233     which will be handled as normal arguments. */
3234
3235     else
3236       {
3237       if (!mac_ismsgid(argv[msg_action_arg]))
3238         exim_fail("exim: malformed message id %s after %s option\n",
3239           argv[msg_action_arg], arg);
3240       i++;
3241       }
3242     break;
3243
3244
3245     /* Some programs seem to call the -om option without the leading o;
3246     for sendmail it askes for "me too". Exim always does this. */
3247
3248     case 'm':
3249     if (*argrest) badarg = TRUE;
3250     break;
3251
3252
3253     /* -N: don't do delivery - a debugging option that stops transports doing
3254     their thing. It implies debugging at the D_v level. */
3255
3256     case 'N':
3257     if (!*argrest)
3258       {
3259       f.dont_deliver = TRUE;
3260       debug_selector |= D_v;
3261       debug_file = stderr;
3262       }
3263     else badarg = TRUE;
3264     break;
3265
3266
3267     /* -n: This means "don't alias" in sendmail, apparently.
3268     For normal invocations, it has no effect.
3269     It may affect some other options. */
3270
3271     case 'n':
3272     flag_n = TRUE;
3273     break;
3274
3275     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
3276     option to the specified value. This form uses long names. We need to handle
3277     -O option=value and -Ooption=value. */
3278
3279     case 'O':
3280     if (!*argrest)
3281       if (++i >= argc)
3282         exim_fail("exim: string expected after -O\n");
3283     break;
3284
3285     case 'o':
3286     switch (*argrest++)
3287       {
3288       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
3289       file" option). */
3290       case 'A':
3291         if (!*(alias_arg = argrest))
3292           if (i+1 < argc) alias_arg = argv[++i];
3293           else exim_fail("exim: string expected after -oA\n");
3294         break;
3295
3296       /* -oB: Set a connection message max value for remote deliveries */
3297       case 'B':
3298         {
3299         const uschar * p = argrest;
3300         if (!*p)
3301           if (i+1 < argc && isdigit((argv[i+1][0])))
3302             p = argv[++i];
3303           else
3304             {
3305             connection_max_messages = 1;
3306             p = NULL;
3307             }
3308
3309         if (p)
3310           {
3311           if (!isdigit(*p))
3312             exim_fail("exim: number expected after -oB\n");
3313           connection_max_messages = Uatoi(p);
3314           }
3315         }
3316         break;
3317
3318       /* -odb: background delivery */
3319
3320       case 'd':
3321         if (Ustrcmp(argrest, "b") == 0)
3322           {
3323           f.synchronous_delivery = FALSE;
3324           arg_queue_only = FALSE;
3325           queue_only_set = TRUE;
3326           }
3327
3328       /* -odd: testsuite-only: add no inter-process delays */
3329
3330         else if (Ustrcmp(argrest, "d") == 0)
3331           f.testsuite_delays = FALSE;
3332
3333       /* -odf: foreground delivery (smail-compatible option); same effect as
3334          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3335       */
3336
3337         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3338           {
3339           f.synchronous_delivery = TRUE;
3340           arg_queue_only = FALSE;
3341           queue_only_set = TRUE;
3342           }
3343
3344       /* -odq: queue only */
3345
3346         else if (Ustrcmp(argrest, "q") == 0)
3347           {
3348           f.synchronous_delivery = FALSE;
3349           arg_queue_only = TRUE;
3350           queue_only_set = TRUE;
3351           }
3352
3353       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3354       but no remote delivery */
3355
3356         else if (Ustrcmp(argrest, "qs") == 0)
3357           {
3358           f.queue_smtp = TRUE;
3359           arg_queue_only = FALSE;
3360           queue_only_set = TRUE;
3361           }
3362         else badarg = TRUE;
3363         break;
3364
3365       /* -oex: Sendmail error flags. As these are also accepted without the
3366       leading -o prefix, for compatibility with vacation and other callers,
3367       they are handled with -e above. */
3368
3369       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3370          -oitrue: Another sendmail syntax for the same */
3371
3372       case 'i':
3373         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3374           f.dot_ends = FALSE;
3375         else badarg = TRUE;
3376         break;
3377
3378     /* -oM*: Set various characteristics for an incoming message; actually
3379     acted on for trusted callers only. */
3380
3381       case 'M':
3382         {
3383         if (i+1 >= argc)
3384           exim_fail("exim: data expected after -oM%s\n", argrest);
3385
3386         /* -oMa: Set sender host address */
3387
3388         if (Ustrcmp(argrest, "a") == 0)
3389           sender_host_address = string_copy_taint(
3390             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3391                                   EXIM_IPADDR_MAX, "-oMa"), GET_TAINTED);
3392
3393         /* -oMaa: Set authenticator name */
3394
3395         else if (Ustrcmp(argrest, "aa") == 0)
3396           sender_host_authenticated = string_copy_taint(
3397             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3398                                   EXIM_DRIVERNAME_MAX, "-oMaa"), GET_TAINTED);
3399
3400         /* -oMas: setting authenticated sender */
3401
3402         else if (Ustrcmp(argrest, "as") == 0)
3403           authenticated_sender = string_copy_taint(
3404             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3405                                   EXIM_EMAILADDR_MAX, "-oMas"), GET_TAINTED);
3406
3407         /* -oMai: setting authenticated id */
3408
3409         else if (Ustrcmp(argrest, "ai") == 0)
3410           authenticated_id = string_copy_taint(
3411             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3412                                   EXIM_EMAILADDR_MAX, "-oMai"), GET_TAINTED);
3413
3414         /* -oMi: Set incoming interface address */
3415
3416         else if (Ustrcmp(argrest, "i") == 0)
3417           interface_address = string_copy_taint(
3418             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3419                                   EXIM_IPADDR_MAX, "-oMi"), GET_TAINTED);
3420
3421         /* -oMm: Message reference */
3422
3423         else if (Ustrcmp(argrest, "m") == 0)
3424           {
3425           if (!mac_ismsgid(argv[i+1]))
3426               exim_fail("-oMm must be a valid message ID\n");
3427           if (!f.trusted_config)
3428               exim_fail("-oMm must be called by a trusted user/config\n");
3429             message_reference = next_argv(argv, &i, argc, arg);
3430           }
3431
3432         /* -oMr: Received protocol */
3433
3434         else if (Ustrcmp(argrest, "r") == 0)
3435
3436           if (received_protocol)
3437             exim_fail("received_protocol is set already\n");
3438           else
3439             if (++i >= argc) badarg = TRUE;
3440             else
3441               received_protocol = string_copy_taint(
3442                 exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-oMr"),
3443                 GET_TAINTED);
3444
3445         /* -oMs: Set sender host name */
3446
3447         else if (Ustrcmp(argrest, "s") == 0)
3448           if (++i >= argc) badarg = TRUE;
3449           else
3450             sender_host_name = string_copy_taint(
3451               exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-oMs"),
3452               GET_TAINTED);
3453
3454         /* -oMt: Set sender ident */
3455
3456         else if (Ustrcmp(argrest, "t") == 0)
3457           if (++i >= argc) badarg = TRUE;
3458           else
3459             {
3460             sender_ident_set = TRUE;
3461             sender_ident = string_copy_taint(
3462               exim_str_fail_toolong(argv[i], EXIM_IDENTUSER_MAX, "-oMt"),
3463               GET_TAINTED);
3464             }
3465
3466         /* Else a bad argument */
3467
3468         else
3469           badarg = TRUE;
3470         }
3471         break;
3472
3473       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3474       seem to call this as -m (undocumented), so that is also accepted (see
3475       above). */
3476       /* -oo: An ancient flag for old-style addresses which still seems to
3477       crop up in some calls (see in SCO). */
3478
3479       case 'm':
3480       case 'o':
3481         if (*argrest) badarg = TRUE;
3482         break;
3483
3484       /* -oP <name>: set pid file path for daemon
3485          -oPX:       delete pid file of daemon */
3486
3487       case 'P':
3488         if (!f.running_in_test_harness && real_uid != root_uid && real_uid != exim_uid)
3489           exim_fail("exim: only uid=%d or uid=%d can use -oP and -oPX "
3490                     "(uid=%d euid=%d | %d)\n",
3491                     root_uid, exim_uid, getuid(), geteuid(), real_uid);
3492         if (!*argrest)
3493           if (++i < argc) override_pid_file_path = argv[i];
3494           else badarg = TRUE;
3495         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3496         else badarg = TRUE;
3497         break;
3498
3499
3500       /* -or <n>: set timeout for non-SMTP acceptance
3501          -os <n>: set timeout for SMTP acceptance */
3502
3503       case 'r':
3504       case 's':
3505         {
3506         int * tp = argrest[-1] == 'r'
3507           ? &arg_receive_timeout : &arg_smtp_receive_timeout;
3508         if (*argrest)
3509           *tp = readconf_readtime(argrest, 0, FALSE);
3510         else if (i+1 < argc)
3511           *tp = readconf_readtime(argv[++i], 0, FALSE);
3512
3513         if (*tp < 0)
3514           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3515         }
3516         break;
3517
3518       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3519       /* Limits: Is there a real limit we want here?  1024 is very arbitrary. */
3520
3521       case 'X':
3522         if (*argrest || ++i >= argc) badarg = TRUE;
3523         else override_local_interfaces = string_copy_taint(
3524           exim_str_fail_toolong(argv[i], 1024, "-oX"), GET_TAINTED);
3525         break;
3526
3527       /* -oY: Override creation of daemon notifier socket */
3528
3529       case 'Y':
3530         if (*argrest) badarg = TRUE;
3531         else f.notifier_socket_en = FALSE;
3532         break;
3533
3534       /* Unknown -o argument */
3535
3536       default:
3537         badarg = TRUE;
3538       }
3539     break;
3540
3541
3542     /* -ps: force Perl startup; -pd force delayed Perl startup */
3543
3544     case 'p':
3545     #ifdef EXIM_PERL
3546     if (*argrest == 's' && argrest[1] == 0)
3547       {
3548       perl_start_option = 1;
3549       break;
3550       }
3551     if (*argrest == 'd' && argrest[1] == 0)
3552       {
3553       perl_start_option = -1;
3554       break;
3555       }
3556     #endif
3557
3558     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3559     which sets the host protocol and host name */
3560
3561     if (!*argrest)
3562       argrest = next_argv(argv, &i, argc, arg);
3563
3564     if (*argrest)
3565       {
3566       uschar * hn = Ustrchr(argrest, ':');
3567
3568       if (received_protocol)
3569         exim_fail("received_protocol is set already\n");
3570
3571       if (!hn)
3572         received_protocol = string_copy_taint(
3573           exim_str_fail_toolong(argrest, EXIM_DRIVERNAME_MAX, "-p<protocol>"),
3574           GET_TAINTED);
3575       else
3576         {
3577         (void) exim_str_fail_toolong(argrest, (EXIM_DRIVERNAME_MAX+1+EXIM_HOSTNAME_MAX), "-p<protocol>:<host>");
3578         received_protocol = string_copyn_taint(argrest, hn - argrest, GET_TAINTED);
3579         sender_host_name = string_copy_taint(hn + 1, GET_TAINTED);
3580         }
3581       }
3582     break;
3583
3584     /* -q:  set up queue runs */
3585
3586     case 'q':
3587       {
3588       BOOL two_stage, first_del, force, thaw = FALSE, local;
3589
3590       receiving_message = FALSE;
3591
3592       /* -qq...: Do queue runs in a 2-stage manner */
3593
3594       if ((two_stage = *argrest == 'q'))
3595         argrest++;
3596
3597       /* -qi...: Do only first (initial) deliveries */
3598
3599       if ((first_del = *argrest == 'i'))
3600         argrest++;
3601
3602       /* -qf...: Run the queue, forcing deliveries
3603          -qff..: Ditto, forcing thawing as well */
3604
3605       if ((force = *argrest == 'f'))
3606         if ((thaw = *++argrest == 'f'))
3607           argrest++;
3608
3609       /* -q[f][f]l...: Run the queue only on local deliveries */
3610
3611       if ((local = *argrest == 'l'))
3612         argrest++;
3613
3614       /* -q[f][f][l][G<name>]... Work on the named queue */
3615
3616       if (*argrest == 'G')
3617         {
3618         int i;
3619         for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3620         exim_len_fail_toolong(i, EXIM_DRIVERNAME_MAX, "-q*G<name>");
3621         queue_name = string_copyn(argrest, i);
3622         argrest += i;
3623         if (*argrest == '/') argrest++;
3624         }
3625
3626       /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3627       only, optionally named, optionally starting from a given message id. */
3628
3629       if (!(list_queue || count_queue))
3630         {
3631         qrunner * q;
3632
3633         if (  !*argrest
3634            && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3635           {
3636           q = alloc_onetime_qrunner();
3637           if (i+1 < argc && mac_ismsgid(argv[i+1]))
3638             start_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3639           if (i+1 < argc && mac_ismsgid(argv[i+1]))
3640             stop_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3641           }
3642
3643       /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3644       forced, optionally local only, optionally named. */
3645
3646         else
3647           {
3648           int intvl;
3649           const uschar * s;
3650
3651           if (*argrest) s = argrest;
3652           else if (++i < argc) { badarg = TRUE; break; }
3653           else s = argv[i];
3654
3655           if ((intvl = readconf_readtime(s, 0, FALSE)) <= 0)
3656             exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3657
3658           for (qrunner * qq = qrunners; qq; qq = qq->next)
3659             if (  queue_name && qq->name && Ustrcmp(queue_name, qq->name) == 0
3660                || !queue_name && !qq->name)
3661               exim_fail("exim: queue-runner specified more than once\n");
3662
3663           q = alloc_qrunner();
3664           q->interval = intvl;
3665           }
3666
3667         q->name = *queue_name ? queue_name : NULL;      /* will be NULL for the default queue */
3668         q->queue_run_force = force;
3669         q->deliver_force_thaw = thaw;
3670         q->queue_run_first_delivery = first_del;
3671         q->queue_run_local = local;
3672         q->queue_2stage = two_stage;
3673         }
3674
3675       break;
3676       }
3677
3678
3679     case 'R':   /* Synonymous with -qR... */
3680     case 'S':   /* Synonymous with -qS... */
3681       {
3682       const uschar * tainted_selectstr;
3683       uschar * s;
3684
3685       receiving_message = FALSE;
3686
3687     /* -Rf:   As -R (below) but force all deliveries,
3688        -Rff:  Ditto, but also thaw all frozen messages,
3689        -Rr:   String is regex
3690        -Rrf:  Regex and force
3691        -Rrff: Regex and force and thaw
3692
3693        -S...: Like -R but works on sender.
3694
3695     in all cases provided there are no further characters in this
3696     argument. */
3697
3698       if (!qrunners) alloc_onetime_qrunner();
3699       qrunners->queue_2stage = f.queue_2stage;
3700       if (*argrest)
3701         for (int i = 0; i < nelem(rsopts); i++)
3702           if (Ustrcmp(argrest, rsopts[i]) == 0)
3703             {
3704             if (i != 2) qrunners->queue_run_force = TRUE;
3705             if (i >= 2)
3706               if (switchchar == 'R')
3707                 f.deliver_selectstring_regex = TRUE;
3708               else
3709                 f.deliver_selectstring_sender_regex = TRUE;
3710             if (i == 1 || i == 4) qrunners->deliver_force_thaw = TRUE;
3711             argrest += Ustrlen(rsopts[i]);
3712             }
3713
3714     /* -R or -S: Set string to match in addresses for forced queue run to
3715     pick out particular messages. */
3716
3717       /* Avoid attacks from people providing very long strings, and do so before
3718       we make copies. */
3719       if (*argrest)
3720         tainted_selectstr = argrest;
3721       else if (i+1 < argc)
3722         tainted_selectstr = argv[++i];
3723       else
3724         exim_fail("exim: string expected after %s\n", switchchar == 'R' ? "-R" : "-S");
3725
3726       s = string_copy_taint(
3727         exim_str_fail_toolong(tainted_selectstr, EXIM_EMAILADDR_MAX, "-R"),
3728         GET_TAINTED);
3729
3730       if (switchchar == 'R')
3731         deliver_selectstring = s;
3732       else
3733         deliver_selectstring_sender = s;
3734       }
3735     break;
3736
3737
3738     /* -r: an obsolete synonym for -f (see above) */
3739
3740     /* -Tqt is an option that is exclusively for use by the testing suite.
3741     It is not recognized in other circumstances. It allows for the setting up
3742     of explicit "queue times" so that various warning/retry things can be
3743     tested. Otherwise variability of clock ticks etc. cause problems. */
3744
3745     case 'T':
3746     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0 && ++i < argc)
3747       fudged_queue_times = string_copy_taint(argv[i], GET_TAINTED);
3748     else badarg = TRUE;
3749     break;
3750
3751
3752     /* -t: Set flag to extract recipients from body of message. */
3753
3754     case 't':
3755     if (!*argrest) extract_recipients = TRUE;
3756
3757     /* -ti: Set flag to extract recipients from body of message, and also
3758     specify that dot does not end the message. */
3759
3760     else if (Ustrcmp(argrest, "i") == 0)
3761       {
3762       extract_recipients = TRUE;
3763       f.dot_ends = FALSE;
3764       }
3765
3766     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3767
3768     #ifndef DISABLE_TLS
3769     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3770     #endif
3771
3772     else badarg = TRUE;
3773     break;
3774
3775
3776     /* -U: This means "initial user submission" in sendmail, apparently. The
3777     doc claims that in future sendmail may refuse syntactically invalid
3778     messages instead of fixing them. For the moment, we just ignore it. */
3779
3780     case 'U':
3781     break;
3782
3783
3784     /* -v: verify things - this is a very low-level debugging */
3785
3786     case 'v':
3787     if (!*argrest)
3788       {
3789       debug_selector |= D_v;
3790       debug_file = stderr;
3791       }
3792     else badarg = TRUE;
3793     break;
3794
3795
3796     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3797
3798       The -x flag tells the sendmail command that mail from a local
3799       mail program has National Language Support (NLS) extended characters
3800       in the body of the mail item. The sendmail command can send mail with
3801       extended NLS characters across networks that normally corrupts these
3802       8-bit characters.
3803
3804     As Exim is 8-bit clean, it just ignores this flag. */
3805
3806     case 'x':
3807     if (*argrest) badarg = TRUE;
3808     break;
3809
3810     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3811     logs to that file.  We swallow the parameter and otherwise ignore it. */
3812
3813     case 'X':
3814     if (!*argrest)
3815       if (++i >= argc)
3816         exim_fail("exim: string expected after -X\n");
3817     break;
3818
3819     /* -z: a line of text to log */
3820
3821     case 'z':
3822     if (!*argrest)
3823       if (++i < argc)
3824         log_oneline = string_copy_taint(
3825           exim_str_fail_toolong(argv[i], 2048, "-z logtext"),
3826           GET_TAINTED);
3827       else
3828         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3829     break;
3830
3831     /* All other initial characters are errors */
3832
3833     default:
3834     badarg = TRUE;
3835     break;
3836     }         /* End of high-level switch statement */
3837
3838   /* Failed to recognize the option, or syntax error */
3839
3840   if (badarg)
3841     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3842       "option %s\n", arg);
3843   }
3844
3845
3846 /* If -R or -S have been specified without -q, assume a single queue run. */
3847
3848  if ((deliver_selectstring || deliver_selectstring_sender) && !qrunners)
3849   alloc_onetime_qrunner();
3850
3851
3852 END_ARG:
3853  store_pool = old_pool;
3854  }
3855
3856 /* If usage_wanted is set we call the usage function - which never returns */
3857 if (usage_wanted) exim_usage(called_as);
3858
3859 /* Arguments have been processed. Check for incompatibilities. */
3860 if (  (  (smtp_input || extract_recipients || recipients_arg < argc)
3861       && (  f.daemon_listen || qrunners || bi_option
3862          || test_retry_arg >= 0 || test_rewrite_arg >= 0
3863          || filter_test != FTEST_NONE
3864          || msg_action_arg > 0 && !one_msg_action
3865       )  )
3866    || (  msg_action_arg > 0
3867       && (  f.daemon_listen || is_multiple_qrun() || list_options
3868          || checking && msg_action != MSG_LOAD
3869          || bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0
3870       )  )
3871    || (  (f.daemon_listen || is_multiple_qrun())
3872       && (  sender_address || list_options || list_queue || checking
3873          || bi_option
3874       )  )
3875    || f.daemon_listen && is_onetime_qrun()
3876    || f.inetd_wait_mode && qrunners
3877    || (  list_options
3878       && (  checking || smtp_input || extract_recipients
3879          || filter_test != FTEST_NONE || bi_option
3880       )  )
3881    || (  verify_address_mode
3882       && (  f.address_test_mode || smtp_input || extract_recipients
3883          || filter_test != FTEST_NONE || bi_option
3884       )  )
3885    || (  f.address_test_mode
3886       && (  smtp_input || extract_recipients || filter_test != FTEST_NONE
3887          || bi_option
3888       )  )
3889    || (  smtp_input
3890       && (sender_address || filter_test != FTEST_NONE || extract_recipients)
3891       )
3892    || deliver_selectstring && !qrunners
3893    || msg_action == MSG_LOAD && (!expansion_test || expansion_test_message)
3894    )
3895   exim_fail("exim: incompatible command-line options or arguments\n");
3896
3897 /* If debugging is set up, set the file and the file descriptor to pass on to
3898 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3899 to run in the foreground. */
3900
3901 if (debug_selector != 0)
3902   {
3903   debug_file = stderr;
3904   debug_fd = fileno(debug_file);
3905   f.background_daemon = FALSE;
3906   testharness_pause_ms(100);   /* lets caller finish */
3907   if (debug_selector != D_v)    /* -v only doesn't show this */
3908     {
3909     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3910       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3911       debug_selector);
3912     if (!version_printed)
3913       show_whats_supported(FALSE);
3914     }
3915   }
3916
3917 /* When started with root privilege, ensure that the limits on the number of
3918 open files and the number of processes (where that is accessible) are
3919 sufficiently large, or are unset, in case Exim has been called from an
3920 environment where the limits are screwed down. Not all OS have the ability to
3921 change some of these limits. */
3922
3923 if (unprivileged)
3924   {
3925   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3926   }
3927 else
3928   {
3929   struct rlimit rlp;
3930
3931 #ifdef RLIMIT_NOFILE
3932   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3933     {
3934     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3935       strerror(errno));
3936     rlp.rlim_cur = rlp.rlim_max = 0;
3937     }
3938
3939   /* I originally chose 1000 as a nice big number that was unlikely to
3940   be exceeded. It turns out that some older OS have a fixed upper limit of
3941   256. */
3942
3943   if (rlp.rlim_cur < 1000)
3944     {
3945     rlp.rlim_cur = rlp.rlim_max = 1000;
3946     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3947       {
3948       rlp.rlim_cur = rlp.rlim_max = 256;
3949       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3950         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3951           strerror(errno));
3952       }
3953     }
3954 #endif
3955
3956 #ifdef RLIMIT_NPROC
3957   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3958     {
3959     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3960       strerror(errno));
3961     rlp.rlim_cur = rlp.rlim_max = 0;
3962     }
3963
3964 # ifdef RLIM_INFINITY
3965   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3966     {
3967     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3968 # else
3969   if (rlp.rlim_cur < 1000)
3970     {
3971     rlp.rlim_cur = rlp.rlim_max = 1000;
3972 # endif
3973     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3974       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3975         strerror(errno));
3976     }
3977 #endif
3978   }
3979
3980 /* Exim is normally entered as root (but some special configurations are
3981 possible that don't do this). However, it always spins off sub-processes that
3982 set their uid and gid as required for local delivery. We don't want to pass on
3983 any extra groups that root may belong to, so we want to get rid of them all at
3984 this point.
3985
3986 We need to obey setgroups() at this stage, before possibly giving up root
3987 privilege for a changed configuration file, but later on we might need to
3988 check on the additional groups for the admin user privilege - can't do that
3989 till after reading the config, which might specify the exim gid. Therefore,
3990 save the group list here first. */
3991
3992 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3993   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3994
3995 /* There is a fundamental difference in some BSD systems in the matter of
3996 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3997 known not to be different. On the "different" systems there is a single group
3998 list, and the first entry in it is the current group. On all other versions of
3999 Unix there is a supplementary group list, which is in *addition* to the current
4000 group. Consequently, to get rid of all extraneous groups on a "standard" system
4001 you pass over 0 groups to setgroups(), while on a "different" system you pass
4002 over a single group - the current group, which is always the first group in the
4003 list. Calling setgroups() with zero groups on a "different" system results in
4004 an error return. The following code should cope with both types of system.
4005
4006  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
4007  the "setgroups() with zero groups" - and changes the egid.
4008  Thanks to that we had to stash the original_egid above, for use below
4009  in the call to exim_setugid().
4010
4011 However, if this process isn't running as root, setgroups() can't be used
4012 since you have to be root to run it, even if throwing away groups.
4013 Except, sigh, for Hurd - where you can.
4014 Not being root here happens only in some unusual configurations. */
4015
4016 if (  !unprivileged
4017 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
4018    && setgroups(0, NULL) != 0
4019 #endif
4020    && setgroups(1, group_list) != 0)
4021   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
4022
4023 /* If the configuration file name has been altered by an argument on the
4024 command line (either a new file name or a macro definition) and the caller is
4025 not root, or if this is a filter testing run, remove any setuid privilege the
4026 program has and run as the underlying user.
4027
4028 The exim user is locked out of this, which severely restricts the use of -C
4029 for some purposes.
4030
4031 Otherwise, set the real ids to the effective values (should be root unless run
4032 from inetd, which it can either be root or the exim uid, if one is configured).
4033
4034 There is a private mechanism for bypassing some of this, in order to make it
4035 possible to test lots of configurations automatically, without having either to
4036 recompile each time, or to patch in an actual configuration file name and other
4037 values (such as the path name). If running in the test harness, pretend that
4038 configuration file changes and macro definitions haven't happened. */
4039
4040 if ((                                            /* EITHER */
4041     (!f.trusted_config ||                          /* Config changed, or */
4042      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
4043     real_uid != root_uid &&                      /* Not root, and */
4044     !f.running_in_test_harness                     /* Not fudged */
4045     ) ||                                         /*   OR   */
4046     expansion_test                               /* expansion testing */
4047     ||                                           /*   OR   */
4048     filter_test != FTEST_NONE)                   /* Filter testing */
4049   {
4050   setgroups(group_count, group_list);
4051   exim_setugid(real_uid, real_gid, FALSE,
4052     US"-C, -D, -be or -bf forces real uid");
4053   removed_privilege = TRUE;
4054
4055   /* In the normal case when Exim is called like this, stderr is available
4056   and should be used for any logging information because attempts to write
4057   to the log will usually fail. To arrange this, we unset really_exim. However,
4058   if no stderr is available there is no point - we might as well have a go
4059   at the log (if it fails, syslog will be written).
4060
4061   Note that if the invoker is Exim, the logs remain available. Messing with
4062   this causes unlogged successful deliveries.  */
4063
4064   if (log_stderr && real_uid != exim_uid)
4065     f.really_exim = FALSE;
4066   }
4067
4068 /* Privilege is to be retained for the moment. It may be dropped later,
4069 depending on the job that this Exim process has been asked to do. For now, set
4070 the real uid to the effective so that subsequent re-execs of Exim are done by a
4071 privileged user. */
4072
4073 else
4074   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
4075
4076 /* If testing a filter, open the file(s) now, before wasting time doing other
4077 setups and reading the message. */
4078
4079 if (filter_test & FTEST_SYSTEM)
4080   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
4081     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
4082       strerror(errno));
4083
4084 if (filter_test & FTEST_USER)
4085   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
4086     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
4087       strerror(errno));
4088
4089 /* Initialise lookup_list
4090 If debugging, already called above via version reporting.
4091 In either case, we initialise the list of available lookups while running
4092 as root.  All dynamically modules are loaded from a directory which is
4093 hard-coded into the binary and is code which, if not a module, would be
4094 part of Exim already.  Ability to modify the content of the directory
4095 is equivalent to the ability to modify a setuid binary!
4096
4097 This needs to happen before we read the main configuration. */
4098 init_lookup_list();
4099
4100 /*XXX this excrescence could move to the testsuite standard config setup file */
4101 #ifdef SUPPORT_I18N
4102 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
4103 #endif
4104
4105 /* Read the main runtime configuration data; this gives up if there
4106 is a failure. It leaves the configuration file open so that the subsequent
4107 configuration data for delivery can be read if needed.
4108
4109 NOTE: immediately after opening the configuration file we change the working
4110 directory to "/"! Later we change to $spool_directory. We do it there, because
4111 during readconf_main() some expansion takes place already. */
4112
4113 /* Store the initial cwd before we change directories.  Can be NULL if the
4114 dir has already been unlinked. */
4115 initial_cwd = os_getcwd(NULL, 0);
4116 if (!initial_cwd && errno)
4117   exim_fail("exim: getting initial cwd failed: %s\n", strerror(errno));
4118
4119 if (initial_cwd && (strlen(CCS initial_cwd) >= BIG_BUFFER_SIZE))
4120   exim_fail("exim: initial cwd is far too long (%d)\n", Ustrlen(CCS initial_cwd));
4121
4122 /* checking:
4123     -be[m] expansion test        -
4124     -b[fF] filter test           new
4125     -bh[c] host test             -
4126     -bmalware malware_test_file  new
4127     -brt   retry test            new
4128     -brw   rewrite test          new
4129     -bt    address test          -
4130     -bv[s] address verify        -
4131    list_options:
4132     -bP <option> (except -bP config, which sets list_config)
4133
4134 If any of these options is set, we suppress warnings about configuration
4135 issues (currently about tls_advertise_hosts and keep_environment not being
4136 defined) */
4137
4138   {
4139   int old_pool = store_pool;
4140 #ifdef MEASURE_TIMING
4141   struct timeval t0;
4142   (void)gettimeofday(&t0, NULL);
4143 #endif
4144
4145   store_pool = POOL_CONFIG;
4146   readconf_main(checking || list_options);
4147   store_pool = old_pool;
4148
4149 #ifdef MEASURE_TIMING
4150   report_time_since(&t0, US"readconf_main (delta)");
4151 #endif
4152   }
4153
4154 /* Now in directory "/" */
4155
4156 if (cleanup_environment() == FALSE)
4157   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
4158
4159
4160 /* If an action on specific messages is requested, or if a daemon or queue
4161 runner is being started, we need to know if Exim was called by an admin user.
4162 This is the case if the real user is root or exim, or if the real group is
4163 exim, or if one of the supplementary groups is exim or a group listed in
4164 admin_groups. We don't fail all message actions immediately if not admin_user,
4165 since some actions can be performed by non-admin users. Instead, set admin_user
4166 for later interrogation. */
4167
4168 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
4169   f.admin_user = TRUE;
4170 else
4171   for (int i = 0; i < group_count && !f.admin_user; i++)
4172     if (group_list[i] == exim_gid)
4173       f.admin_user = TRUE;
4174     else if (admin_groups)
4175       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
4176         if (admin_groups[j] == group_list[i])
4177           f.admin_user = TRUE;
4178
4179 /* Another group of privileged users are the trusted users. These are root,
4180 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
4181 are permitted to specify sender_addresses with -f on the command line, and
4182 other message parameters as well. */
4183
4184 if (real_uid == root_uid || real_uid == exim_uid)
4185   f.trusted_caller = TRUE;
4186 else
4187   {
4188   if (trusted_users)
4189     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
4190       if (trusted_users[i] == real_uid)
4191         f.trusted_caller = TRUE;
4192
4193   if (trusted_groups)
4194     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
4195       if (trusted_groups[i] == real_gid)
4196         f.trusted_caller = TRUE;
4197       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
4198         if (trusted_groups[i] == group_list[j])
4199           f.trusted_caller = TRUE;
4200   }
4201
4202 /* At this point, we know if the user is privileged and some command-line
4203 options become possibly impermissible, depending upon the configuration file. */
4204
4205 if (checking && commandline_checks_require_admin && !f.admin_user)
4206   exim_fail("exim: those command-line flags are set to require admin\n");
4207
4208 /* Handle the decoding of logging options. */
4209
4210 decode_bits(log_selector, log_selector_size, log_notall,
4211   log_selector_string, log_options, log_options_count, US"log", 0);
4212
4213 DEBUG(D_any)
4214   {
4215   debug_printf("configuration file is %s\n", config_main_filename);
4216   debug_printf("log selectors =");
4217   for (int i = 0; i < log_selector_size; i++)
4218     debug_printf(" %08x", log_selector[i]);
4219   debug_printf("\n");
4220   }
4221
4222 /* If domain literals are not allowed, check the sender address that was
4223 supplied with -f. Ditto for a stripped trailing dot. */
4224
4225 if (sender_address)
4226   {
4227   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
4228     exim_fail("exim: bad -f address \"%s\": domain literals not "
4229       "allowed\n", sender_address);
4230   if (f_end_dot && !strip_trailing_dot)
4231     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
4232       "(trailing dot not allowed)\n", sender_address);
4233   }
4234
4235 /* See if an admin user overrode our logging. */
4236
4237 if (cmdline_syslog_name)
4238   if (f.admin_user)
4239     {
4240     syslog_processname = cmdline_syslog_name;
4241     log_file_path = string_copy(CUS"syslog");
4242     }
4243   else
4244     /* not a panic, non-privileged users should not be able to spam paniclog */
4245     exim_fail(
4246         "exim: you lack sufficient privilege to specify syslog process name\n");
4247
4248 /* Paranoia check of maximum lengths of certain strings. There is a check
4249 on the length of the log file path in log.c, which will come into effect
4250 if there are any calls to write the log earlier than this. However, if we
4251 get this far but the string is very long, it is better to stop now than to
4252 carry on and (e.g.) receive a message and then have to collapse. The call to
4253 log_write() from here will cause the ultimate panic collapse if the complete
4254 file name exceeds the buffer length. */
4255
4256 if (Ustrlen(log_file_path) > 200)
4257   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4258     "log_file_path is longer than 200 chars: aborting");
4259
4260 if (Ustrlen(pid_file_path) > 200)
4261   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4262     "pid_file_path is longer than 200 chars: aborting");
4263
4264 if (Ustrlen(spool_directory) > 200)
4265   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4266     "spool_directory is longer than 200 chars: aborting");
4267
4268 /* Length check on the process name given to syslog for its TAG field,
4269 which is only permitted to be 32 characters or less. See RFC 3164. */
4270
4271 if (Ustrlen(syslog_processname) > 32)
4272   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4273     "syslog_processname is longer than 32 chars: aborting");
4274
4275 if (log_oneline)
4276   if (f.admin_user)
4277     {
4278     log_write(0, LOG_MAIN, "%s", log_oneline);
4279     return EXIT_SUCCESS;
4280     }
4281   else
4282     return EXIT_FAILURE;
4283
4284 /* In some operating systems, the environment variable TMPDIR controls where
4285 temporary files are created; Exim doesn't use these (apart from when delivering
4286 to MBX mailboxes), but called libraries such as DBM libraries may require them.
4287 If TMPDIR is found in the environment, reset it to the value defined in the
4288 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
4289 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
4290 EXIM_TMPDIR by the build scripts.
4291 */
4292
4293 #ifdef EXIM_TMPDIR
4294   if (environ) for (uschar ** p = USS environ; *p; p++)
4295     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
4296       {
4297       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
4298       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
4299       *p = newp;
4300       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
4301       }
4302 #endif
4303
4304 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
4305 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
4306 we may need to get rid of a bogus timezone setting. This can arise when Exim is
4307 called by a user who has set the TZ variable. This then affects the timestamps
4308 in log files and in Received: headers, and any created Date: header lines. The
4309 required timezone is settable in the configuration file, so nothing can be done
4310 about this earlier - but hopefully nothing will normally be logged earlier than
4311 this. We have to make a new environment if TZ is wrong, but don't bother if
4312 timestamps_utc is set, because then all times are in UTC anyway. */
4313
4314 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
4315   f.timestamps_utc = TRUE;
4316 else
4317   {
4318   uschar *envtz = US getenv("TZ");
4319   if (envtz
4320       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
4321       : timezone_string != NULL
4322      )
4323     {
4324     uschar **p = USS environ;
4325     uschar **new;
4326     uschar **newp;
4327     int count = 0;
4328     if (environ) while (*p++) count++;
4329     if (!envtz) count++;
4330     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4331     if (environ) for (p = USS environ; *p; p++)
4332       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4333     if (timezone_string)
4334       {
4335       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4336       sprintf(CS *newp++, "TZ=%s", timezone_string);
4337       }
4338     *newp = NULL;
4339     environ = CSS new;
4340     tzset();
4341     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4342       tod_stamp(tod_log));
4343     }
4344   }
4345
4346 /* Handle the case when we have removed the setuid privilege because of -C or
4347 -D. This means that the caller of Exim was not root.
4348
4349 There is a problem if we were running as the Exim user. The sysadmin may
4350 expect this case to retain privilege because "the binary was called by the
4351 Exim user", but it hasn't, because either the -D option set macros, or the
4352 -C option set a non-trusted configuration file. There are two possibilities:
4353
4354   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4355       to do message deliveries. Thus, the fact that it is running as a
4356       non-privileged user is plausible, and might be wanted in some special
4357       configurations. However, really_exim will have been set false when
4358       privilege was dropped, to stop Exim trying to write to its normal log
4359       files. Therefore, re-enable normal log processing, assuming the sysadmin
4360       has set up the log directory correctly.
4361
4362   (2) If deliver_drop_privilege is not set, the configuration won't work as
4363       apparently intended, and so we log a panic message. In order to retain
4364       root for -C or -D, the caller must either be root or be invoking a
4365       trusted configuration file (when deliver_drop_privilege is false). */
4366
4367 if (  removed_privilege
4368    && (!f.trusted_config || opt_D_used)
4369    && real_uid == exim_uid)
4370   if (deliver_drop_privilege)
4371     f.really_exim = TRUE; /* let logging work normally */
4372   else
4373     log_write(0, LOG_MAIN|LOG_PANIC,
4374       "exim user lost privilege for using %s option",
4375       f.trusted_config? "-D" : "-C");
4376
4377 /* Start up Perl interpreter if Perl support is configured and there is a
4378 perl_startup option, and the configuration or the command line specifies
4379 initializing starting. Note that the global variables are actually called
4380 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4381
4382 #ifdef EXIM_PERL
4383 if (perl_start_option != 0)
4384   opt_perl_at_start = (perl_start_option > 0);
4385 if (opt_perl_at_start && opt_perl_startup != NULL)
4386   {
4387   uschar *errstr;
4388   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4389   if ((errstr = init_perl(opt_perl_startup)))
4390     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4391   opt_perl_started = TRUE;
4392   }
4393 #endif /* EXIM_PERL */
4394
4395 /* Log the arguments of the call if the configuration file said so. This is
4396 a debugging feature for finding out what arguments certain MUAs actually use.
4397 Don't attempt it if logging is disabled, or if listing variables or if
4398 verifying/testing addresses or expansions. */
4399
4400 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4401    && f.really_exim && !list_options && !checking)
4402   {
4403   uschar *p = big_buffer;
4404   Ustrcpy(p, US"cwd= (failed)");
4405
4406   if (!initial_cwd)
4407     p += 13;
4408   else
4409     {
4410     p += 4;
4411     snprintf(CS p, big_buffer_size - (p - big_buffer), "%s", CCS initial_cwd);
4412     p += Ustrlen(CCS p);
4413     }
4414
4415   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4416   while (*p) p++;
4417   for (int i = 0; i < argc; i++)
4418     {
4419     int len = Ustrlen(argv[i]);
4420     const uschar *printing;
4421     uschar *quote;
4422     if (p + len + 8 >= big_buffer + big_buffer_size)
4423       {
4424       Ustrcpy(p, US" ...");
4425       log_write(0, LOG_MAIN, "%s", big_buffer);
4426       Ustrcpy(big_buffer, US"...");
4427       p = big_buffer + 3;
4428       }
4429     printing = string_printing(argv[i]);
4430     if (!*printing) quote = US"\"";
4431     else
4432       {
4433       const uschar *pp = printing;
4434       quote = US"";
4435       while (*pp) if (isspace(*pp++)) { quote = US"\""; break; }
4436       }
4437     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4438       (p - big_buffer) - 4), printing, quote);
4439     }
4440
4441   if (LOGGING(arguments))
4442     log_write(0, LOG_MAIN, "%s", big_buffer);
4443   else
4444     debug_printf("%s\n", big_buffer);
4445   }
4446
4447 /* Set the working directory to be the top-level spool directory. We don't rely
4448 on this in the code, which always uses fully qualified names, but it's useful
4449 for core dumps etc. Don't complain if it fails - the spool directory might not
4450 be generally accessible and calls with the -C option (and others) have lost
4451 privilege by now. Before the chdir, we try to ensure that the directory exists.
4452 */
4453
4454 if (Uchdir(spool_directory) != 0)
4455   {
4456   (void) directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4457   (void) Uchdir(spool_directory);
4458   }
4459
4460 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4461 alias file. Exim doesn't have such a concept, but this call is screwed into
4462 Sun's YP makefiles. Handle this by calling a configured script, as the real
4463 user who called Exim. The -oA option can be used to pass an argument to the
4464 script. */
4465
4466 if (bi_option)
4467   {
4468   (void) fclose(config_file);
4469   if (bi_command && *bi_command)
4470     {
4471     int i = 0;
4472     const uschar * argv[3];
4473     argv[i++] = bi_command;     /* nonexpanded option so assume untainted */
4474     if (alias_arg) argv[i++] = alias_arg;
4475     argv[i++] = NULL;
4476
4477     setgroups(group_count, group_list);
4478     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4479
4480     DEBUG(D_exec) debug_printf("exec '%.256s' %s%.256s%s\n", argv[0],
4481       argv[1] ? "'" : "", argv[1] ? argv[1] : US"", argv[1] ? "'" : "");
4482
4483     execv(CS argv[0], (char *const *)argv);
4484     exim_fail("exim: exec '%s' failed: %s\n", argv[0], strerror(errno));
4485     }
4486   else
4487     {
4488     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4489     exit(EXIT_SUCCESS);
4490     }
4491   }
4492
4493 /* We moved the admin/trusted check to be immediately after reading the
4494 configuration file.  We leave these prints here to ensure that syslog setup,
4495 logfile setup, and so on has already happened. */
4496
4497 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4498 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4499
4500 /* Only an admin user may start the daemon or force a queue run in the default
4501 configuration, but the queue run restriction can be relaxed. Only an admin
4502 user may request that a message be returned to its sender forthwith. Only an
4503 admin user may specify a debug level greater than D_v (because it might show
4504 passwords, etc. in lookup queries). Only an admin user may request a queue
4505 count. Only an admin user can use the test interface to scan for email
4506 (because Exim will be in the spool dir and able to look at mails). */
4507
4508 if (!f.admin_user)
4509   {
4510   BOOL debugset = (debug_selector & ~D_v) != 0;
4511   if (  deliver_give_up || f.daemon_listen || malware_test_file
4512      || count_queue && queue_list_requires_admin
4513      || list_queue && queue_list_requires_admin
4514      || qrunners && prod_requires_admin
4515      || queue_name_dest && prod_requires_admin
4516      || debugset && !f.running_in_test_harness
4517      )
4518     exim_fail("exim:%s permission denied; not admin\n",
4519               debugset ? " debugging" : "");
4520   }
4521
4522 /* If the real user is not root or the exim uid, the argument for passing
4523 in an open TCP/IP connection for another message is not permitted, nor is
4524 running with the -N option for any delivery action, unless this call to exim is
4525 one that supplied an input message, or we are using a patched exim for
4526 regression testing. */
4527
4528 if (  real_uid != root_uid && real_uid != exim_uid
4529    && (  continue_hostname
4530       || (  f.dont_deliver
4531          && (qrunners || f.daemon_listen || msg_action_arg > 0)
4532       )  )
4533    && !f.running_in_test_harness
4534    )
4535   exim_fail("exim: Permission denied; not exim user or root\n");
4536
4537 /* If the caller is not trusted, certain arguments are ignored when running for
4538 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4539 Note that authority for performing certain actions on messages is tested in the
4540 queue_action() function. */
4541
4542 if (!f.trusted_caller && !checking)
4543   {
4544   sender_host_name = sender_host_address = interface_address =
4545     sender_ident = received_protocol = NULL;
4546   sender_host_port = interface_port = 0;
4547   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4548   }
4549
4550 /* If a sender host address is set, extract the optional port number off the
4551 end of it and check its syntax. Do the same thing for the interface address.
4552 Exim exits if the syntax is bad. */
4553
4554 else
4555   {
4556   if (sender_host_address)
4557     sender_host_port = check_port(sender_host_address);
4558   if (interface_address)
4559     interface_port = check_port(interface_address);
4560   }
4561
4562 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4563 if (flag_G)
4564   {
4565   if (f.trusted_caller)
4566     {
4567     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4568     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4569     }
4570   else
4571     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4572   }
4573
4574 /* If an SMTP message is being received check to see if the standard input is a
4575 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4576 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4577 barf. */
4578
4579 if (smtp_input)
4580   {
4581   union sockaddr_46 inetd_sock;
4582   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4583   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4584     {
4585     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4586     if (family == AF_INET || family == AF_INET6)
4587       {
4588       union sockaddr_46 interface_sock;
4589       size = sizeof(interface_sock);
4590
4591       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4592         interface_address = host_ntoa(-1, &interface_sock, NULL,
4593           &interface_port);
4594
4595       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4596
4597       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4598         {
4599         f.is_inetd = TRUE;
4600         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4601           NULL, &sender_host_port);
4602         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4603           "inetd is not supported when mua_wrapper is set");
4604         }
4605       else
4606         exim_fail(
4607           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4608       }
4609     }
4610   }
4611
4612 /* If the load average is going to be needed while receiving a message, get it
4613 now for those OS that require the first call to os_getloadavg() to be done as
4614 root. There will be further calls later for each message received. */
4615
4616 #ifdef LOAD_AVG_NEEDS_ROOT
4617 if (  receiving_message
4618    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4619   load_average = OS_GETLOADAVG();
4620 #endif
4621
4622 /* The queue_only configuration option can be overridden by -odx on the command
4623 line, except that if queue_only_override is false, queue_only cannot be unset
4624 from the command line. */
4625
4626 if (queue_only_set && (queue_only_override || arg_queue_only))
4627   queue_only = arg_queue_only;
4628
4629 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4630 -or and -os. */
4631
4632 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4633 if (arg_smtp_receive_timeout >= 0)
4634   smtp_receive_timeout = arg_smtp_receive_timeout;
4635
4636 /* If Exim was started with root privilege, unless we have already removed the
4637 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4638 except when starting the daemon or doing some kind of delivery or address
4639 testing (-bt). These are the only cases when root need to be retained. We run
4640 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4641 retained only for starting the daemon. We always do the initgroups() in this
4642 situation (controlled by the TRUE below), in order to be as close as possible
4643 to the state Exim usually runs in. */
4644
4645 if (  !unprivileged                             /* originally had root AND */
4646    && !removed_privilege                        /* still got root AND      */
4647    && !f.daemon_listen                          /* not starting the daemon */
4648    && (!qrunners || is_onetime_qrun())          /* (either kind of daemon) */
4649    && (                                         /*    AND EITHER           */
4650          deliver_drop_privilege                 /* requested unprivileged  */
4651       || (                                      /*       OR                */
4652             !qrunners                           /* not running the queue   */
4653          && (  msg_action_arg < 0               /*       and               */
4654             || msg_action != MSG_DELIVER        /* not delivering          */
4655             )                                   /*       and               */
4656          && (!checking || !f.address_test_mode) /* not address checking    */
4657          && !rcpt_verify_quota                  /* and not quota checking  */
4658    )  )  )
4659   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4660
4661 /* When we are retaining a privileged uid, we still change to the exim gid. */
4662
4663 else
4664   {
4665   int rv;
4666   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4667   rv = setgid(exim_gid);
4668   /* Impact of failure is that some stuff might end up with an incorrect group.
4669   We track this for failures from root, since any attempt to change privilege
4670   by root should succeed and failures should be examined.  For non-root,
4671   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4672   no need to complain then. */
4673   if (rv == -1)
4674     if (!(unprivileged || removed_privilege))
4675       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4676     else
4677       {
4678       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4679           (long int)exim_gid, strerror(errno));
4680       }
4681   }
4682
4683 /* Handle a request to scan a file for malware */
4684 if (malware_test_file)
4685   {
4686 #ifdef WITH_CONTENT_SCAN
4687   int result;
4688   set_process_info("scanning file for malware");
4689   if ((result = malware_in_file(malware_test_file)) == FAIL)
4690     {
4691     printf("No malware found.\n");
4692     exit(EXIT_SUCCESS);
4693     }
4694   if (result != OK)
4695     {
4696     printf("Malware lookup returned non-okay/fail: %d\n", result);
4697     exit(EXIT_FAILURE);
4698     }
4699   if (malware_name)
4700     printf("Malware found: %s\n", malware_name);
4701   else
4702     printf("Malware scan detected malware of unknown name.\n");
4703 #else
4704   printf("Malware scanning not enabled at compile time.\n");
4705 #endif
4706   exit(EXIT_FAILURE);
4707   }
4708
4709 /* Handle a request to list the delivery queue */
4710
4711 if (list_queue)
4712   {
4713   set_process_info("listing the queue");
4714   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4715   exit(EXIT_SUCCESS);
4716   }
4717
4718 /* Handle a request to count the delivery queue */
4719
4720 if (count_queue)
4721   {
4722   set_process_info("counting the queue");
4723   fprintf(stdout, "%u\n", queue_count());
4724   exit(EXIT_SUCCESS);
4725   }
4726
4727 /* Handle actions on specific messages, except for the force delivery and
4728 message load actions, which are done below. Some actions take a whole list of
4729 message ids, which are known to continue up to the end of the arguments. Others
4730 take a single message id and then operate on the recipients list. */
4731
4732 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4733   {
4734   int yield = EXIT_SUCCESS;
4735   set_process_info("acting on specified messages");
4736
4737   /* ACL definitions may be needed when removing a message (-Mrm) because
4738   event_action gets expanded */
4739
4740   if (msg_action == MSG_REMOVE)
4741     {
4742     int old_pool = store_pool;
4743     store_pool = POOL_CONFIG;
4744     readconf_rest();
4745     store_pool = old_pool;
4746     store_writeprotect(POOL_CONFIG);
4747     }
4748
4749   if (!one_msg_action)
4750     {
4751     for (i = msg_action_arg; i < argc; i++)
4752       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4753         yield = EXIT_FAILURE;
4754     switch (msg_action)
4755       {
4756       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4757       default: printf("\n"); break;
4758       }
4759     }
4760
4761   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4762     recipients_arg)) yield = EXIT_FAILURE;
4763   exit(yield);
4764   }
4765
4766 /* We used to set up here to skip reading the ACL section, on
4767  (msg_action_arg > 0 || (is_onetime_qrun() && !f.daemon_listen)
4768 Now, since the intro of the ${acl } expansion, ACL definitions may be
4769 needed in transports so we lost the optimisation. */
4770
4771   {
4772   int old_pool = store_pool;
4773 #ifdef MEASURE_TIMING
4774   struct timeval t0;
4775   (void)gettimeofday(&t0, NULL);
4776 #endif
4777
4778   store_pool = POOL_CONFIG;
4779   readconf_rest();
4780   store_pool = old_pool;
4781
4782   /* -be can add macro definitions, needing to link to the macro structure
4783   chain.  Otherwise, make the memory used for config data readonly. */
4784
4785   if (!expansion_test)
4786     store_writeprotect(POOL_CONFIG);
4787
4788 #ifdef MEASURE_TIMING
4789   report_time_since(&t0, US"readconf_rest (delta)");
4790 #endif
4791   }
4792
4793 /* Handle a request to check quota */
4794 if (rcpt_verify_quota)
4795   if (real_uid != root_uid && real_uid != exim_uid)
4796     exim_fail("exim: Permission denied\n");
4797   else if (recipients_arg >= argc)
4798     exim_fail("exim: missing recipient for quota check\n");
4799   else
4800     {
4801     verify_quota(US argv[recipients_arg]);      /*XXX we lose track of const here */
4802     exim_exit(EXIT_SUCCESS);
4803     }
4804
4805 /* Handle the -brt option. This is for checking out retry configurations.
4806 The next three arguments are a domain name or a complete address, and
4807 optionally two error numbers. All it does is to call the function that
4808 scans the retry configuration data. */
4809
4810 if (test_retry_arg >= 0)
4811   {
4812   retry_config *yield;
4813   int basic_errno = 0;
4814   int more_errno = 0;
4815   const uschar *s1, *s2;
4816
4817   if (test_retry_arg >= argc)
4818     {
4819     printf("-brt needs a domain or address argument\n");
4820     exim_exit(EXIT_FAILURE);
4821     }
4822   s1 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_EMAILADDR_MAX, "-brt");
4823   s2 = NULL;
4824
4825   /* If the first argument contains no @ and no . it might be a local user
4826   or it might be a single-component name. Treat as a domain. */
4827
4828   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4829     {
4830     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4831       "being \ntreated as a one-component domain, not as a local part.\n\n",
4832       s1);
4833     }
4834
4835   /* There may be an optional second domain arg. */
4836
4837   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4838     s2 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_DOMAINNAME_MAX, "-brt 2nd");
4839
4840   /* The final arg is an error name */
4841
4842   if (test_retry_arg < argc)
4843     {
4844     const uschar *ss = exim_str_fail_toolong(argv[test_retry_arg], EXIM_DRIVERNAME_MAX, "-brt 3rd");
4845     uschar *error =
4846       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4847     if (error != NULL)
4848       {
4849       printf("%s\n", CS error);
4850       return EXIT_FAILURE;
4851       }
4852
4853     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4854     code > 100 as an error is for matching codes to the decade. Turn them into
4855     a real error code, off the decade. */
4856
4857     if (basic_errno == ERRNO_MAIL4XX ||
4858         basic_errno == ERRNO_RCPT4XX ||
4859         basic_errno == ERRNO_DATA4XX)
4860       {
4861       int code = (more_errno >> 8) & 255;
4862       if (code == 255)
4863         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4864       else if (code > 100)
4865         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4866       }
4867     }
4868
4869   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4870     printf("No retry information found\n");
4871   else
4872     {
4873     more_errno = yield->more_errno;
4874     printf("Retry rule: %s  ", yield->pattern);
4875
4876     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4877       {
4878       printf("quota%s%s  ",
4879         (more_errno > 0)? "_" : "",
4880         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4881       }
4882     else if (yield->basic_errno == ECONNREFUSED)
4883       {
4884       printf("refused%s%s  ",
4885         (more_errno > 0)? "_" : "",
4886         (more_errno == 'M')? "MX" :
4887         (more_errno == 'A')? "A" : "");
4888       }
4889     else if (yield->basic_errno == ETIMEDOUT)
4890       {
4891       printf("timeout");
4892       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4893       more_errno &= 255;
4894       if (more_errno != 0) printf("_%s",
4895         (more_errno == 'M')? "MX" : "A");
4896       printf("  ");
4897       }
4898     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4899       printf("auth_failed  ");
4900     else printf("*  ");
4901
4902     for (retry_rule * r = yield->rules; r; r = r->next)
4903       {
4904       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4905       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4906       if (r->rule == 'G')
4907         {
4908         int x = r->p2;
4909         int f = x % 1000;
4910         int d = 100;
4911         printf(",%d.", x/1000);
4912         do
4913           {
4914           printf("%d", f/d);
4915           f %= d;
4916           d /= 10;
4917           }
4918         while (f != 0);
4919         }
4920       printf("; ");
4921       }
4922
4923     printf("\n");
4924     }
4925   exim_exit(EXIT_SUCCESS);
4926   }
4927
4928 /* Handle a request to list one or more configuration options */
4929 /* If -n was set, we suppress some information */
4930
4931 if (list_options)
4932   {
4933   BOOL fail = FALSE;
4934   set_process_info("listing variables");
4935   if (recipients_arg >= argc)
4936     fail = !readconf_print(US"all", NULL, flag_n);
4937   else for (i = recipients_arg; i < argc; i++)
4938     {
4939     if (i < argc - 1 &&
4940         (Ustrcmp(argv[i], "router") == 0 ||
4941          Ustrcmp(argv[i], "transport") == 0 ||
4942          Ustrcmp(argv[i], "authenticator") == 0 ||
4943          Ustrcmp(argv[i], "macro") == 0 ||
4944          Ustrcmp(argv[i], "environment") == 0))
4945       {
4946       fail |= !readconf_print(exim_str_fail_toolong(argv[i+1], EXIM_DRIVERNAME_MAX, "-bP name"), argv[i], flag_n);
4947       i++;
4948       }
4949     else
4950       fail = !readconf_print(exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-bP item"), NULL, flag_n);
4951     }
4952   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS);
4953   }
4954
4955 if (list_config)
4956   {
4957   set_process_info("listing config");
4958   exim_exit(readconf_print(US"config", NULL, flag_n)
4959                 ? EXIT_SUCCESS : EXIT_FAILURE);
4960   }
4961
4962
4963 /* Initialise subsystems as required. */
4964
4965 tcp_init();
4966
4967 /* Handle a request to deliver one or more messages that are already on the
4968 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4969 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4970
4971 Delivery of specific messages is typically used for a small number when
4972 prodding by hand (when the option forced_delivery will be set) or when
4973 re-execing to regain root privilege. Each message delivery must happen in a
4974 separate process, so we fork a process for each one, and run them sequentially
4975 so that debugging output doesn't get intertwined, and to avoid spawning too
4976 many processes if a long list is given. However, don't fork for the last one;
4977 this saves a process in the common case when Exim is called to deliver just one
4978 message. */
4979
4980 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4981   {
4982   if (prod_requires_admin && !f.admin_user)
4983     {
4984     fprintf(stderr, "exim: Permission denied\n");
4985     exim_exit(EXIT_FAILURE);
4986     }
4987   set_process_info("delivering specified messages");
4988   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4989   for (i = msg_action_arg; i < argc; i++)
4990     {
4991     int status;
4992     pid_t pid;
4993     /*XXX This use of argv[i] for msg_id should really be tainted, but doing
4994     that runs into a later copy into the untainted global message_id[] */
4995     /*XXX Do we need a length limit check here? */
4996     if (i == argc - 1)
4997       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4998     else if ((pid = exim_fork(US"cmdline-delivery")) == 0)
4999       {
5000       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
5001       exim_underbar_exit(EXIT_SUCCESS);
5002       }
5003     else if (pid < 0)
5004       {
5005       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
5006         strerror(errno));
5007       exim_exit(EXIT_FAILURE);
5008       }
5009     else wait(&status);
5010     }
5011   exim_exit(EXIT_SUCCESS);
5012   }
5013
5014
5015 /* If only a single queue run is requested, without SMTP listening, we can just
5016 turn into a queue runner, with an optional starting message id. */
5017
5018 if (is_onetime_qrun() && !f.daemon_listen)
5019   {
5020   single_queue_run(qrunners, start_queue_run_id, stop_queue_run_id);
5021   exim_exit(EXIT_SUCCESS);
5022   }
5023
5024
5025 /* Find the login name of the real user running this process. This is always
5026 needed when receiving a message, because it is written into the spool file. It
5027 may also be used to construct a from: or a sender: header, and in this case we
5028 need the user's full name as well, so save a copy of it, checked for RFC822
5029 syntax and munged if necessary, if it hasn't previously been set by the -F
5030 argument. We may try to get the passwd entry more than once, in case NIS or
5031 other delays are in evidence. Save the home directory for use in filter testing
5032 (only). */
5033
5034 for (i = 0;;)
5035   {
5036   if ((pw = getpwuid(real_uid)) != NULL)
5037     {
5038     originator_login = string_copy(US pw->pw_name);
5039     originator_home = string_copy(US pw->pw_dir);
5040
5041     /* If user name has not been set by -F, set it from the passwd entry
5042     unless -f has been used to set the sender address by a trusted user. */
5043
5044     if (!originator_name)
5045       {
5046       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
5047         {
5048         uschar *name = US pw->pw_gecos;
5049         uschar *amp = Ustrchr(name, '&');
5050         uschar buffer[256];
5051
5052         /* Most Unix specify that a '&' character in the gecos field is
5053         replaced by a copy of the login name, and some even specify that
5054         the first character should be upper cased, so that's what we do. */
5055
5056         if (amp)
5057           {
5058           int loffset;
5059           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
5060             (int)(amp - name), name, &loffset, originator_login, amp + 1);
5061           buffer[loffset] = toupper(buffer[loffset]);
5062           name = buffer;
5063           }
5064
5065         /* If a pattern for matching the gecos field was supplied, apply
5066         it and then expand the name string. */
5067
5068         GET_OPTION("gecos_pattern");
5069         GET_OPTION("gecos_name");
5070         if (gecos_pattern && gecos_name)
5071           {
5072           const pcre2_code *re;
5073           re = regex_must_compile(gecos_pattern, MCS_NOFLAGS, TRUE); /* Use malloc */
5074
5075           if (regex_match_and_setup(re, name, 0, -1))
5076             {
5077             uschar *new_name = expand_string(gecos_name);
5078             expand_nmax = -1;
5079             if (new_name)
5080               {
5081               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
5082                 "gecos field \"%s\"\n", new_name, name);
5083               name = new_name;
5084               }
5085             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
5086               "\"%s\": %s\n", gecos_name, expand_string_message);
5087             }
5088           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
5089             "gecos field \"%s\"\n", gecos_pattern, name);
5090           store_free((void *)re);
5091           }
5092         originator_name = string_copy(name);
5093         }
5094
5095       /* A trusted caller has used -f but not -F */
5096
5097       else originator_name = US"";
5098       }
5099
5100     /* Break the retry loop */
5101
5102     break;
5103     }
5104
5105   if (++i > finduser_retries) break;
5106   sleep(1);
5107   }
5108
5109 /* If we cannot get a user login, log the incident and give up, unless the
5110 configuration specifies something to use. When running in the test harness,
5111 any setting of unknown_login overrides the actual name. */
5112
5113 if (!originator_login || f.running_in_test_harness)
5114   {
5115   GET_OPTION("unknown_login");
5116   if (unknown_login)
5117     {
5118     originator_login = expand_string(unknown_login);
5119     if (!originator_name && unknown_username)
5120       originator_name = expand_string(unknown_username);
5121     if (!originator_name) originator_name = US"";
5122     }
5123   if (!originator_login)
5124     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
5125       (int)real_uid);
5126   }
5127
5128 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
5129 RFC822 address.*/
5130
5131 originator_name = US parse_fix_phrase(originator_name, Ustrlen(originator_name));
5132
5133 /* If a message is created by this call of Exim, the uid/gid of its originator
5134 are those of the caller. These values are overridden if an existing message is
5135 read in from the spool. */
5136
5137 originator_uid = real_uid;
5138 originator_gid = real_gid;
5139
5140 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
5141   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
5142
5143 /* Run in daemon and/or queue-running mode. The function daemon_go() never
5144 returns. We leave this till here so that the originator_ fields are available
5145 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
5146 mode. */
5147
5148 if (f.daemon_listen || f.inetd_wait_mode || is_multiple_qrun())
5149   {
5150   if (mua_wrapper)
5151     {
5152     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
5153     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
5154       "mua_wrapper is set");
5155     }
5156
5157 # ifndef DISABLE_TLS
5158   /* This also checks that the library linkage is working and we can call
5159   routines in it, so call even if tls_require_ciphers is unset */
5160     {
5161 # ifdef MEASURE_TIMING
5162     struct timeval t0;
5163     (void)gettimeofday(&t0, NULL);
5164 # endif
5165     if (!tls_dropprivs_validate_require_cipher(FALSE))
5166       exit(1);
5167 # ifdef MEASURE_TIMING
5168     report_time_since(&t0, US"validate_ciphers (delta)");
5169 # endif
5170     }
5171 #endif
5172
5173   daemon_go();
5174   }
5175
5176 /* If the sender ident has not been set (by a trusted caller) set it to
5177 the caller. This will get overwritten below for an inetd call. If a trusted
5178 caller has set it empty, unset it. */
5179
5180 if (!sender_ident) sender_ident = originator_login;
5181 else if (!*sender_ident) sender_ident = NULL;
5182
5183 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
5184 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
5185 originator_* variables set. */
5186
5187 if (test_rewrite_arg >= 0)
5188   {
5189   f.really_exim = FALSE;
5190   if (test_rewrite_arg >= argc)
5191     {
5192     printf("-brw needs an address argument\n");
5193     exim_exit(EXIT_FAILURE);
5194     }
5195   rewrite_test(exim_str_fail_toolong(argv[test_rewrite_arg], EXIM_EMAILADDR_MAX, "-brw"));
5196   exim_exit(EXIT_SUCCESS);
5197   }
5198
5199 /* A locally-supplied message is considered to be coming from a local user
5200 unless a trusted caller supplies a sender address with -f, or is passing in the
5201 message via SMTP (inetd invocation or otherwise). */
5202
5203 if (  !sender_address && !smtp_input
5204    || !f.trusted_caller && filter_test == FTEST_NONE)
5205   {
5206   f.sender_local = TRUE;
5207
5208   /* A trusted caller can supply authenticated_sender and authenticated_id
5209   via -oMas and -oMai and if so, they will already be set. Otherwise, force
5210   defaults except when host checking. */
5211
5212   if (!authenticated_sender && !host_checking)
5213     authenticated_sender = string_sprintf("%s@%s", originator_login,
5214       qualify_domain_sender);
5215   if (!authenticated_id && !host_checking)
5216     authenticated_id = originator_login;
5217   }
5218
5219 /* Trusted callers are always permitted to specify the sender address.
5220 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
5221 is specified is the empty address. However, if a trusted caller does not
5222 specify a sender address for SMTP input, we leave sender_address unset. This
5223 causes the MAIL commands to be honoured. */
5224
5225 if (  !smtp_input && !sender_address
5226    || !receive_check_set_sender(sender_address))
5227   {
5228   /* Either the caller is not permitted to set a general sender, or this is
5229   non-SMTP input and the trusted caller has not set a sender. If there is no
5230   sender, or if a sender other than <> is set, override with the originator's
5231   login (which will get qualified below), except when checking things. */
5232
5233   if (  !sender_address                  /* No sender_address set */
5234      ||                                  /*         OR            */
5235        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
5236        !checking))                       /* Not running tests, including filter tests */
5237     {
5238     sender_address = originator_login;
5239     f.sender_address_forced = FALSE;
5240     sender_address_domain = 0;
5241     }
5242   }
5243
5244 /* Remember whether an untrusted caller set the sender address */
5245
5246 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
5247
5248 /* Ensure that the sender address is fully qualified unless it is the empty
5249 address, which indicates an error message, or doesn't exist (root caller, smtp
5250 interface, no -f argument). */
5251
5252 if (sender_address && *sender_address && sender_address_domain == 0)
5253   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
5254     qualify_domain_sender);
5255
5256 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
5257
5258 /* Handle a request to verify a list of addresses, or test them for delivery.
5259 This must follow the setting of the sender address, since routers can be
5260 predicated upon the sender. If no arguments are given, read addresses from
5261 stdin. Set debug_level to at least D_v to get full output for address testing.
5262 */
5263
5264 if (verify_address_mode || f.address_test_mode)
5265   {
5266   int exit_value = 0;
5267   int flags = vopt_qualify;
5268
5269   if (verify_address_mode)
5270     {
5271     if (!verify_as_sender) flags |= vopt_is_recipient;
5272     DEBUG(D_verify) debug_print_ids(US"Verifying:");
5273     }
5274
5275   else
5276     {
5277     flags |= vopt_is_recipient;
5278     debug_selector |= D_v;
5279     debug_file = stderr;
5280     debug_fd = fileno(debug_file);
5281     DEBUG(D_verify) debug_print_ids(US"Address testing:");
5282     }
5283
5284   if (recipients_arg < argc)
5285     while (recipients_arg < argc)
5286       {
5287       /* Supplied addresses are tainted since they come from a user */
5288       uschar * s = string_copy_taint(
5289         exim_str_fail_toolong(argv[recipients_arg++], EXIM_DISPLAYMAIL_MAX, "address verification"),
5290         GET_TAINTED);
5291       while (*s)
5292         {
5293         BOOL finished = FALSE;
5294         uschar *ss = parse_find_address_end(s, FALSE);
5295         if (*ss == ',') *ss = 0; else finished = TRUE;
5296         test_address(s, flags, &exit_value);
5297         s = ss;
5298         if (!finished)
5299           while (*++s == ',' || isspace(*s)) ;
5300         }
5301       }
5302
5303   else for (;;)
5304     {
5305     uschar * s = get_stdinput(NULL, NULL);
5306     if (!s) break;
5307     test_address(string_copy_taint(
5308         exim_str_fail_toolong(s, EXIM_DISPLAYMAIL_MAX, "address verification (stdin)"),
5309         GET_TAINTED),
5310       flags, &exit_value);
5311     }
5312
5313   route_tidyup();
5314   exim_exit(exit_value);
5315   }
5316
5317 /* Handle expansion checking. Either expand items on the command line, or read
5318 from stdin if there aren't any. If -Mset was specified, load the message so
5319 that its variables can be used, but restrict this facility to admin users.
5320 Otherwise, if -bem was used, read a message from stdin. */
5321
5322 if (expansion_test)
5323   {
5324   dns_init(FALSE, FALSE, FALSE);
5325   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
5326     {
5327     uschar * spoolname;
5328     if (!f.admin_user)
5329       exim_fail("exim: permission denied\n");
5330     message_id = US exim_str_fail_toolong(argv[msg_action_arg], MESSAGE_ID_LENGTH, "message-id");
5331     /* Checking the length of the ID is sufficient to validate it.
5332     Get an untainted version so file opens can be done. */
5333     message_id = string_copy_taint(message_id, GET_UNTAINTED);
5334
5335     spoolname = string_sprintf("%s-H", message_id);
5336     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
5337       printf ("Failed to load message datafile %s\n", message_id);
5338     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
5339       printf ("Failed to load message %s\n", message_id);
5340     }
5341
5342   /* Read a test message from a file. We fudge it up to be on stdin, saving
5343   stdin itself for later reading of expansion strings. */
5344
5345   else if (expansion_test_message)
5346     {
5347     uschar * rme = expand_string(recipients_max);
5348     int save_stdin = dup(0);
5349     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
5350     if (fd < 0)
5351       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
5352         strerror(errno));
5353     (void) dup2(fd, 0);
5354     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5355     message_ended = END_NOTENDED;
5356     recipients_max_expanded = atoi(CCS rme);
5357     read_message_body(receive_msg(extract_recipients));
5358     message_linecount += body_linecount;
5359     (void)dup2(save_stdin, 0);
5360     (void)close(save_stdin);
5361     clearerr(stdin);               /* Required by Darwin */
5362     }
5363
5364   /* Only admin users may see config-file macros this way */
5365
5366   if (!f.admin_user) macros_user = macros = mlast = NULL;
5367
5368   /* Allow $recipients for this testing */
5369
5370   f.enable_dollar_recipients = TRUE;
5371
5372   /* Expand command line items */
5373
5374   if (recipients_arg < argc)
5375     while (recipients_arg < argc)
5376       expansion_test_line(exim_str_fail_toolong(argv[recipients_arg++], EXIM_EMAILADDR_MAX, "recipient"));
5377
5378   /* Read stdin */
5379
5380   else
5381     {
5382     char *(*fn_readline)(const char *) = NULL;
5383     void (*fn_addhist)(const char *) = NULL;
5384     uschar * s;
5385
5386 #ifdef USE_READLINE
5387     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5388 #endif
5389
5390     while (s = get_stdinput(fn_readline, fn_addhist))
5391       expansion_test_line(s);
5392
5393 #ifdef USE_READLINE
5394     if (dlhandle) dlclose(dlhandle);
5395 #endif
5396     }
5397
5398   /* The data file will be open after -Mset */
5399
5400   if (deliver_datafile >= 0)
5401     {
5402     (void)close(deliver_datafile);
5403     deliver_datafile = -1;
5404     }
5405
5406   exim_exit(EXIT_SUCCESS);
5407   }
5408
5409
5410 /* The active host name is normally the primary host name, but it can be varied
5411 for hosts that want to play several parts at once. We need to ensure that it is
5412 set for host checking, and for receiving messages. */
5413
5414 smtp_active_hostname = primary_hostname;
5415 GET_OPTION("smtp_active_hostname");
5416 if (raw_active_hostname)
5417   {
5418   uschar * nah = expand_string(raw_active_hostname);
5419   if (!nah)
5420     {
5421     if (!f.expand_string_forcedfail)
5422       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5423         "(smtp_active_hostname): %s", raw_active_hostname,
5424         expand_string_message);
5425     }
5426   else if (nah[0]) smtp_active_hostname = nah;
5427   }
5428
5429 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5430 given IP address so that the blocking and relay configuration can be tested.
5431 Unless a sender_ident was set by -oMt, we discard it (the default is the
5432 caller's login name). An RFC 1413 call is made only if we are running in the
5433 test harness and an incoming interface and both ports are specified, because
5434 there is no TCP/IP call to find the ident for. */
5435
5436 if (host_checking)
5437   {
5438   int x[4];
5439   int size;
5440
5441   if (!sender_ident_set)
5442     {
5443     sender_ident = NULL;
5444     if (f.running_in_test_harness && sender_host_port
5445        && interface_address && interface_port)
5446       verify_get_ident(1223);           /* note hardwired port number */
5447     }
5448
5449   /* In case the given address is a non-canonical IPv6 address, canonicalize
5450   it. The code works for both IPv4 and IPv6, as it happens. */
5451
5452   size = host_aton(sender_host_address, x);
5453   sender_host_address = store_get(48, GET_UNTAINTED);  /* large enough for full IPv6 */
5454   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5455
5456   /* Now set up for testing */
5457
5458   host_build_sender_fullhost();
5459   smtp_input = TRUE;
5460   smtp_in = stdin;
5461   smtp_out = stdout;
5462   f.sender_local = FALSE;
5463   f.sender_host_notsocket = TRUE;
5464   debug_file = stderr;
5465   debug_fd = fileno(debug_file);
5466   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5467     "**** but without any ident (RFC 1413) callback.\n"
5468     "**** This is not for real!\n\n",
5469       sender_host_address);
5470
5471   connection_id = getpid();
5472   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5473   if (verify_check_host(&hosts_connection_nolog) == OK)
5474     {
5475     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5476     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5477     }
5478   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5479
5480   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5481   because a log line has already been written for all its failure exists
5482   (usually "connection refused: <reason>") and writing another one is
5483   unnecessary clutter. */
5484
5485   if (smtp_start_session())
5486     {
5487     rmark reset_point;
5488     for (; (reset_point = store_mark()); store_reset(reset_point))
5489       {
5490       if (smtp_setup_msg() <= 0) break;
5491       if (!receive_msg(FALSE)) break;
5492
5493       return_path = sender_address = NULL;
5494       dnslist_domain = dnslist_matched = NULL;
5495 #ifndef DISABLE_DKIM
5496       dkim_cur_signer = NULL;
5497 #endif
5498       acl_var_m = NULL;
5499       deliver_localpart_orig = NULL;
5500       deliver_domain_orig = NULL;
5501       callout_address = sending_ip_address = NULL;
5502       deliver_localpart_data = deliver_domain_data =
5503       recipient_data = sender_data = NULL;
5504       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5505       }
5506     smtp_log_no_mail();
5507     }
5508   exim_exit(EXIT_SUCCESS);
5509   }
5510
5511
5512 /* Arrange for message reception if recipients or SMTP were specified;
5513 otherwise complain unless a version print (-bV) happened or this is a filter
5514 verification test or info dump.
5515 In the former case, show the configuration file name. */
5516
5517 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5518   {
5519   if (version_printed)
5520     {
5521     if (Ustrchr(config_main_filelist, ':'))
5522       printf("Configuration file search path is %s\n", config_main_filelist);
5523     printf("Configuration file is %s\n", config_main_filename);
5524     return EXIT_SUCCESS;
5525     }
5526
5527   if (info_flag != CMDINFO_NONE)
5528     {
5529     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5530     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5531     }
5532
5533   if (filter_test == FTEST_NONE)
5534     exim_usage(called_as);
5535   }
5536
5537
5538 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5539 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5540 that we are not called from inetd, because that is rejected above. The
5541 following configuration settings are forced here:
5542
5543   (1) Synchronous delivery (-odi)
5544   (2) Errors to stderr (-oep == -oeq)
5545   (3) No parallel remote delivery
5546   (4) Unprivileged delivery
5547
5548 We don't force overall queueing options because there are several of them;
5549 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5550 to override any SMTP queueing. */
5551
5552 if (mua_wrapper)
5553   {
5554   f.synchronous_delivery = TRUE;
5555   arg_error_handling = ERRORS_STDERR;
5556   remote_max_parallel = 1;
5557   deliver_drop_privilege = TRUE;
5558   f.queue_smtp = FALSE;
5559   queue_smtp_domains = NULL;
5560 #ifdef SUPPORT_I18N
5561   message_utf8_downconvert = -1;        /* convert-if-needed */
5562 #endif
5563   }
5564
5565
5566 /* Prepare to accept one or more new messages on the standard input. When a
5567 message has been read, its id is returned in message_id[]. If doing immediate
5568 delivery, we fork a delivery process for each received message, except for the
5569 last one, where we can save a process switch.
5570
5571 It is only in non-smtp mode that error_handling is allowed to be changed from
5572 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5573 sendmail error modes other than -oem ever actually used? Later: yes.) */
5574
5575 if (!smtp_input) error_handling = arg_error_handling;
5576
5577 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5578 logging being sent down the socket and make an identd call to get the
5579 sender_ident. */
5580
5581 else if (f.is_inetd)
5582   {
5583   (void)fclose(stderr);
5584   exim_nullstd();                       /* Re-open to /dev/null */
5585   verify_get_ident(IDENT_PORT);
5586   host_build_sender_fullhost();
5587   set_process_info("handling incoming connection from %s via inetd",
5588     sender_fullhost);
5589   }
5590
5591 /* If the sender host address has been set, build sender_fullhost if it hasn't
5592 already been done (which it will have been for inetd). This caters for the
5593 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5594 so that the test for IP options is skipped for -bs input. */
5595
5596 if (sender_host_address && !sender_fullhost)
5597   {
5598   host_build_sender_fullhost();
5599   set_process_info("handling incoming connection from %s via -oMa",
5600     sender_fullhost);
5601   f.sender_host_notsocket = TRUE;
5602   }
5603
5604 /* Otherwise, set the sender host as unknown except for inetd calls. This
5605 prevents host checking in the case of -bs not from inetd and also for -bS. */
5606
5607 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5608
5609 /* If stdout does not exist, then dup stdin to stdout. This can happen
5610 if exim is started from inetd. In this case fd 0 will be set to the socket,
5611 but fd 1 will not be set. This also happens for passed SMTP channels. */
5612
5613 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5614
5615 /* Set up the incoming protocol name and the state of the program. Root is
5616 allowed to force received protocol via the -oMr option above. If we have come
5617 via inetd, the process info has already been set up. We don't set
5618 received_protocol here for smtp input, as it varies according to
5619 batch/HELO/EHLO/AUTH/TLS. */
5620
5621 if (smtp_input)
5622   {
5623   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5624     smtp_batched_input? "batched " : "",
5625     sender_address ? sender_address : originator_login);
5626   }
5627 else
5628   {
5629   int old_pool = store_pool;
5630   store_pool = POOL_PERM;
5631   if (!received_protocol)
5632     received_protocol = string_sprintf("local%s", called_as);
5633   store_pool = old_pool;
5634   set_process_info("accepting a local non-SMTP message from <%s>",
5635     sender_address);
5636   }
5637
5638 /* Initialize the session_local_queue-only flag (this will be ignored if
5639 mua_wrapper is set) */
5640
5641 queue_check_only();
5642 session_local_queue_only = queue_only;
5643
5644 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5645 the spool if so configured. On failure, we must not attempt to send an error
5646 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5647 error code is given.) */
5648
5649 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5650   exim_fail("exim: insufficient disk space\n");
5651
5652 /* If this is smtp input of any kind, real or batched, handle the start of the
5653 SMTP session.
5654
5655 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5656 because a log line has already been written for all its failure exists
5657 (usually "connection refused: <reason>") and writing another one is
5658 unnecessary clutter. */
5659
5660 connection_id = getpid();
5661 if (smtp_input)
5662   {
5663   smtp_in = stdin;
5664   smtp_out = stdout;
5665   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5666   if (verify_check_host(&hosts_connection_nolog) == OK)
5667     {
5668     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5669     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5670     }
5671   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5672   if (!smtp_start_session())
5673     {
5674     mac_smtp_fflush();
5675     exim_exit(EXIT_SUCCESS);
5676     }
5677   }
5678
5679 /* Otherwise, set up the input size limit here and set no stdin stdio buffer
5680 (we handle buferring so as to have visibility of fill level). */
5681
5682 else
5683   {
5684   GET_OPTION("message_size_limit");
5685   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5686   if (expand_string_message)
5687     if (thismessage_size_limit == -1)
5688       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5689         "message_size_limit: %s", expand_string_message);
5690     else
5691       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5692         "message_size_limit: %s", expand_string_message);
5693
5694   setvbuf(stdin, NULL, _IONBF, 0);
5695   }
5696
5697 /* Loop for several messages when reading SMTP input. If we fork any child
5698 processes, we don't want to wait for them unless synchronous delivery is
5699 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5700 same as SIG_DFL, despite the fact that documentation often lists the default as
5701 "ignore". This is a confusing area. This is what I know:
5702
5703 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5704 processes that complete simply to go away without ever becoming defunct. You
5705 can't then wait for them - but we don't want to wait for them in the
5706 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5707 happen for all OS (e.g. *BSD is different).
5708
5709 But that's not the end of the story. Some (many? all?) systems have the
5710 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5711 has by default, so it seems that the difference is merely one of default
5712 (compare restarting vs non-restarting signals).
5713
5714 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5715 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5716 of the loop below. Paranoia rules.
5717
5718 February 2003: That's *still* not the end of the story. There are now versions
5719 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5720 process then calls waitpid(), a grumble is written to the system log, because
5721 this is logically inconsistent. In other words, it doesn't like the paranoia.
5722 As a consequence of this, the waitpid() below is now excluded if we are sure
5723 that SIG_IGN works. */
5724
5725 if (!f.synchronous_delivery)
5726   {
5727 #ifdef SA_NOCLDWAIT
5728   struct sigaction act;
5729   act.sa_handler = SIG_IGN;
5730   sigemptyset(&(act.sa_mask));
5731   act.sa_flags = SA_NOCLDWAIT;
5732   sigaction(SIGCHLD, &act, NULL);
5733 #else
5734   signal(SIGCHLD, SIG_IGN);
5735 #endif
5736   }
5737
5738 /* Save the current store pool point, for resetting at the start of
5739 each message, and save the real sender address, if any. */
5740
5741 real_sender_address = sender_address;
5742
5743 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5744 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5745 collapsed). */
5746
5747 for (BOOL more = TRUE; more; )
5748   {
5749   rmark reset_point = store_mark();
5750   message_id[0] = 0;
5751
5752   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5753   input and build the recipients list, before calling receive_msg() to read the
5754   message proper. Whatever sender address is given in the SMTP transaction is
5755   often ignored for local senders - we use the actual sender, which is normally
5756   either the underlying user running this process or a -f argument provided by
5757   a trusted caller. It is saved in real_sender_address. The test for whether to
5758   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5759
5760   if (smtp_input)
5761     {
5762     int rc;
5763     if ((rc = smtp_setup_msg()) > 0)
5764       {
5765       if (   real_sender_address
5766           && !receive_check_set_sender(sender_address))
5767         {
5768         sender_address = raw_sender = real_sender_address;
5769         sender_address_unrewritten = NULL;
5770         }
5771
5772       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5773       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5774       the very end. The result of the ACL is ignored (as for other non-SMTP
5775       messages). It is run for its potential side effects. */
5776
5777       if (smtp_batched_input)
5778         {
5779         GET_OPTION("acl_not_smtp_start");
5780         if (acl_not_smtp_start)
5781           {
5782           uschar * user_msg, * log_msg;
5783           f.enable_dollar_recipients = TRUE;
5784           (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5785             &user_msg, &log_msg);
5786           f.enable_dollar_recipients = FALSE;
5787           }
5788         }
5789
5790       /* Now get the data for the message */
5791
5792       more = receive_msg(extract_recipients);
5793       if (!message_id[0])
5794         {
5795         cancel_cutthrough_connection(TRUE, US"receive dropped");
5796         if (more) goto MORELOOP;
5797         smtp_log_no_mail();               /* Log no mail if configured */
5798         exim_exit(EXIT_FAILURE);
5799         }
5800       }
5801     else
5802       {
5803       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5804       smtp_log_no_mail();               /* Log no mail if configured */
5805       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
5806       }
5807     }
5808
5809   /* In the non-SMTP case, we have all the information from the command
5810   line, but must process it in case it is in the more general RFC822
5811   format, and in any case, to detect syntax errors. Also, it appears that
5812   the use of comma-separated lists as single arguments is common, so we
5813   had better support them. */
5814
5815   else
5816     {
5817     uschar * rme = expand_string(recipients_max);
5818     int rcount = 0, count = argc - recipients_arg;
5819     const uschar ** list = argv + recipients_arg;
5820
5821     recipients_max_expanded = atoi(CCS rme);
5822
5823     /* These options cannot be changed dynamically for non-SMTP messages */
5824
5825     f.active_local_sender_retain = local_sender_retain;
5826     f.active_local_from_check = local_from_check;
5827
5828     /* Save before any rewriting */
5829
5830     raw_sender = string_copy(sender_address);
5831
5832     /* Loop for each argument (supplied by user hence tainted) */
5833
5834     for (int i = 0; i < count; i++)
5835       {
5836       int start, end, domain;
5837       uschar * errmess;
5838       /* There can be multiple addresses, so EXIM_DISPLAYMAIL_MAX (tuned for 1) is too short.
5839       We'll still want to cap it to something, just in case. */
5840       uschar * s = string_copy_taint(
5841         exim_str_fail_toolong(list[i], BIG_BUFFER_SIZE, "address argument"),
5842         GET_TAINTED);
5843
5844       /* Loop for each comma-separated address */
5845
5846       while (*s)
5847         {
5848         BOOL finished = FALSE;
5849         uschar * recipient;
5850         uschar * ss = parse_find_address_end(s, FALSE);
5851
5852         if (*ss == ',') *ss = 0; else finished = TRUE;
5853
5854         /* Check max recipients - if -t was used, these aren't recipients */
5855
5856         if (  recipients_max_expanded > 0 && ++rcount > recipients_max_expanded
5857            && !extract_recipients)
5858           {
5859           DEBUG(D_all) debug_printf("excess reipients (max %d)\n",
5860             recipients_max_expanded);
5861
5862           if (error_handling == ERRORS_STDERR)
5863             {
5864             fprintf(stderr, "exim: too many recipients\n");
5865             exim_exit(EXIT_FAILURE);
5866             }
5867           else
5868             return
5869               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5870                 errors_sender_rc : EXIT_FAILURE;
5871           }
5872
5873 #ifdef SUPPORT_I18N
5874         {
5875         BOOL b = allow_utf8_domains;
5876         allow_utf8_domains = TRUE;
5877 #endif
5878         recipient =
5879           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5880
5881 #ifdef SUPPORT_I18N
5882         if (recipient)
5883           if (string_is_utf8(recipient)) message_smtputf8 = TRUE;
5884           else allow_utf8_domains = b;
5885         }
5886 #else
5887         ;
5888 #endif
5889         if (domain == 0 && !f.allow_unqualified_recipient)
5890           {
5891           recipient = NULL;
5892           errmess = US"unqualified recipient address not allowed";
5893           }
5894
5895         if (!recipient)
5896           {
5897           DEBUG(D_all) debug_printf("bad recipient address \"%s\": %s\n",
5898             string_printing(list[i]), errmess);
5899
5900           if (error_handling == ERRORS_STDERR)
5901             {
5902             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5903               string_printing(list[i]), errmess);
5904             exim_exit(EXIT_FAILURE);
5905             }
5906           else
5907             {
5908             error_block eblock;
5909             eblock.next = NULL;
5910             eblock.text1 = string_printing(list[i]);
5911             eblock.text2 = errmess;
5912             return
5913               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5914                 errors_sender_rc : EXIT_FAILURE;
5915             }
5916           }
5917
5918         receive_add_recipient(string_copy_taint(recipient, GET_TAINTED), -1);
5919         s = ss;
5920         if (!finished)
5921           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5922         }
5923       }
5924
5925     /* Show the recipients when debugging */
5926
5927     DEBUG(D_receive)
5928       {
5929       if (sender_address) debug_printf("Sender: %s\n", sender_address);
5930       if (recipients_list)
5931         {
5932         debug_printf("Recipients:\n");
5933         for (int i = 0; i < recipients_count; i++)
5934           debug_printf("  %s\n", recipients_list[i].address);
5935         }
5936       }
5937
5938     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5939     ignored; rejecting here would just add complication, and it can just as
5940     well be done later. Allow $recipients to be visible in the ACL. */
5941
5942     GET_OPTION("acl_not_smtp_start");
5943     if (acl_not_smtp_start)
5944       {
5945       uschar * user_msg, * log_msg;
5946       f.enable_dollar_recipients = TRUE;
5947       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5948         &user_msg, &log_msg);
5949       f.enable_dollar_recipients = FALSE;
5950       }
5951
5952     /* Pause for a while waiting for input.  If none received in that time,
5953     close the logfile, if we had one open; then if we wait for a long-running
5954     datasource (months, in one use-case) log rotation will not leave us holding
5955     the file copy. */
5956
5957     if (!receive_timeout)
5958       if (poll_one_fd(0, POLLIN, 30*60*1000) == 0)      /* 30 minutes */
5959         mainlog_close();
5960
5961     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5962     will just read the headers for the message, and not write anything onto the
5963     spool. */
5964
5965     message_ended = END_NOTENDED;
5966     more = receive_msg(extract_recipients);
5967
5968     /* more is always FALSE here (not SMTP message) when reading a message
5969     for real; when reading the headers of a message for filter testing,
5970     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5971
5972     if (!message_id[0]) exim_exit(EXIT_FAILURE);
5973     }  /* Non-SMTP message reception */
5974
5975   /* If this is a filter testing run, there are headers in store, but
5976   no message on the spool. Run the filtering code in testing mode, setting
5977   the domain to the qualify domain and the local part to the current user,
5978   unless they have been set by options. The prefix and suffix are left unset
5979   unless specified. The the return path is set to to the sender unless it has
5980   already been set from a return-path header in the message. */
5981
5982   if (filter_test != FTEST_NONE)
5983     {
5984     deliver_domain = ftest_domain ? ftest_domain : qualify_domain_recipient;
5985     deliver_domain_orig = deliver_domain;
5986     deliver_localpart = ftest_localpart ? US ftest_localpart : originator_login;
5987     deliver_localpart_orig = deliver_localpart;
5988     deliver_localpart_prefix = US ftest_prefix;
5989     deliver_localpart_suffix = US ftest_suffix;
5990     deliver_home = originator_home;
5991
5992     if (!return_path)
5993       {
5994       printf("Return-path copied from sender\n");
5995       return_path = string_copy(sender_address);
5996       }
5997     else
5998       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5999     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
6000
6001     receive_add_recipient(
6002       string_sprintf("%s%s%s@%s",
6003         ftest_prefix ? ftest_prefix : US"",
6004         deliver_localpart,
6005         ftest_suffix ? ftest_suffix : US"",
6006         deliver_domain), -1);
6007
6008     printf("Recipient   = %s\n", recipients_list[0].address);
6009     if (ftest_prefix) printf("Prefix    = %s\n", ftest_prefix);
6010     if (ftest_suffix) printf("Suffix    = %s\n", ftest_suffix);
6011
6012     if (chdir("/"))   /* Get away from wherever the user is running this from */
6013       {
6014       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
6015       exim_exit(EXIT_FAILURE);
6016       }
6017
6018     /* Now we run either a system filter test, or a user filter test, or both.
6019     In the latter case, headers added by the system filter will persist and be
6020     available to the user filter. We need to copy the filter variables
6021     explicitly. */
6022
6023     if (filter_test & FTEST_SYSTEM)
6024       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
6025         exim_exit(EXIT_FAILURE);
6026
6027     memcpy(filter_sn, filter_n, sizeof(filter_sn));
6028
6029     if (filter_test & FTEST_USER)
6030       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
6031         exim_exit(EXIT_FAILURE);
6032
6033     exim_exit(EXIT_SUCCESS);
6034     }
6035
6036   /* Else act on the result of message reception. We should not get here unless
6037   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
6038   will be TRUE. If it is not, check on the number of messages received in this
6039   connection. */
6040
6041   if (  !session_local_queue_only
6042      && smtp_accept_queue_per_connection > 0
6043      && receive_messagecount > smtp_accept_queue_per_connection)
6044     {
6045     session_local_queue_only = TRUE;
6046     queue_only_reason = 2;
6047     }
6048
6049   /* Initialize local_queue_only from session_local_queue_only. If it is false,
6050   and queue_only_load is set, check that the load average is below it. If it is
6051   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
6052   default), we put the whole session into queue_only mode. It then remains this
6053   way for any subsequent messages on the same SMTP connection. This is a
6054   deliberate choice; even though the load average may fall, it doesn't seem
6055   right to deliver later messages on the same call when not delivering earlier
6056   ones. However, there are odd cases where this is not wanted, so this can be
6057   changed by setting queue_only_load_latch false. */
6058
6059   if (!(local_queue_only = session_local_queue_only) && queue_only_load >= 0)
6060     if ((local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load))
6061       {
6062       queue_only_reason = 3;
6063       if (queue_only_load_latch) session_local_queue_only = TRUE;
6064       }
6065
6066   /* If running as an MUA wrapper, all queueing options and freezing options
6067   are ignored. */
6068
6069   if (mua_wrapper)
6070     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
6071
6072   /* Log the queueing here, when it will get a message id attached, but
6073   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
6074   connections). */
6075
6076   if (local_queue_only)
6077     {
6078     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6079     switch(queue_only_reason)
6080       {
6081       case 2:
6082         log_write(L_delay_delivery,
6083                 LOG_MAIN, "no immediate delivery: more than %d messages "
6084           "received in one connection", smtp_accept_queue_per_connection);
6085         break;
6086
6087       case 3:
6088         log_write(L_delay_delivery,
6089                 LOG_MAIN, "no immediate delivery: load average %.2f",
6090                 (double)load_average/1000.0);
6091       break;
6092       }
6093     }
6094
6095   else if (f.queue_only_policy || f.deliver_freeze)
6096     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6097
6098   /* Else do the delivery unless the ACL or local_scan() called for queue only
6099   or froze the message. Always deliver in a separate process. A fork failure is
6100   not a disaster, as the delivery will eventually happen on a subsequent queue
6101   run. The search cache must be tidied before the fork, as the parent will
6102   do it before exiting. The child will trigger a lookup failure and
6103   thereby defer the delivery if it tries to use (for example) a cached ldap
6104   connection that the parent has called unbind on. */
6105
6106   else
6107     {
6108     pid_t pid;
6109     search_tidyup();
6110
6111     if ((pid = exim_fork(US"local-accept-delivery")) == 0)
6112       {
6113       int rc;
6114       close_unwanted();      /* Close unwanted file descriptors and TLS */
6115       exim_nullstd();        /* Ensure std{in,out,err} exist */
6116
6117       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
6118       mode, deliver_drop_privilege is forced TRUE). */
6119
6120       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
6121         {
6122         delivery_re_exec(CEE_EXEC_EXIT);
6123         /* Control does not return here. */
6124         }
6125
6126       /* No need to re-exec */
6127
6128       rc = deliver_message(message_id, FALSE, FALSE);
6129       search_tidyup();
6130       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
6131         ? EXIT_SUCCESS : EXIT_FAILURE);
6132       }
6133
6134     if (pid < 0)
6135       {
6136       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
6137       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
6138         "process: %s", strerror(errno));
6139       }
6140     else
6141       {
6142       release_cutthrough_connection(US"msg passed for delivery");
6143
6144       /* In the parent, wait if synchronous delivery is required. This will
6145       always be the case in MUA wrapper mode. */
6146
6147       if (f.synchronous_delivery)
6148         {
6149         int status;
6150         while (wait(&status) != pid);
6151         if ((status & 0x00ff) != 0)
6152           log_write(0, LOG_MAIN|LOG_PANIC,
6153             "process %d crashed with signal %d while delivering %s",
6154             (int)pid, status & 0x00ff, message_id);
6155         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
6156         }
6157       }
6158     }
6159
6160   /* The loop will repeat if more is TRUE. If we do not know know that the OS
6161   automatically reaps children (see comments above the loop), clear away any
6162   finished subprocesses here, in case there are lots of messages coming in
6163   from the same source. */
6164
6165 #ifndef SIG_IGN_WORKS
6166   while (waitpid(-1, NULL, WNOHANG) > 0);
6167 #endif
6168
6169 MORELOOP:
6170   return_path = sender_address = NULL;
6171   authenticated_sender = NULL;
6172   deliver_localpart_orig = NULL;
6173   deliver_domain_orig = NULL;
6174   deliver_host = deliver_host_address = NULL;
6175   dnslist_domain = dnslist_matched = NULL;
6176 #ifdef WITH_CONTENT_SCAN
6177   malware_name = NULL;
6178   regex_vars_clear();
6179 #endif
6180   callout_address = NULL;
6181   sending_ip_address = NULL;
6182   deliver_localpart_data = deliver_domain_data =
6183   recipient_data = sender_data = NULL;
6184   acl_var_m = NULL;
6185   lookup_value = NULL;                            /* Can be set by ACL */
6186
6187   store_reset(reset_point);
6188   }
6189
6190 exim_exit(EXIT_SUCCESS);   /* Never returns */
6191 return 0;                  /* To stop compiler warning */
6192 }
6193
6194
6195 /* End of exim.c */