Use pool storage for regex operations
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) The Exim Maintainers 2020 - 2022 */
6 /* Copyright (c) University of Cambridge 1995 - 2018 */
7 /* See the file NOTICE for conditions of use and distribution. */
8
9
10 /* The main function: entry point, initialization, and high-level control.
11 Also a few functions that don't naturally fit elsewhere. */
12
13
14 #include "exim.h"
15
16 #if defined(__GLIBC__) && !defined(__UCLIBC__)
17 # include <gnu/libc-version.h>
18 #endif
19
20 #ifndef _TIME_H
21 # include <time.h>
22 #endif
23 #ifndef NO_EXECINFO
24 # include <execinfo.h>
25 #endif
26
27 #ifdef USE_GNUTLS
28 # include <gnutls/gnutls.h>
29 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
30 #  define DISABLE_OCSP
31 # endif
32 #endif
33
34 extern void init_lookup_list(void);
35
36
37
38 /*************************************************
39 *      Function interface to store functions     *
40 *************************************************/
41
42 /* We need some real functions to pass to the PCRE regular expression library
43 for store allocation via Exim's store manager. The normal calls are actually
44 macros that pass over location information to make tracing easier. These
45 functions just interface to the standard macro calls. A good compiler will
46 optimize out the tail recursion and so not make them too expensive. */
47
48 static void *
49 function_store_malloc(PCRE2_SIZE size, void * tag)
50 {
51 return store_malloc((int)size);
52 }
53
54 static void
55 function_store_free(void * block, void * tag)
56 {
57 /* At least some version of pcre2 pass a null pointer */
58 if (block) store_free(block);
59 }
60
61
62 static void *
63 function_store_get(PCRE2_SIZE size, void * tag)
64 {
65 return store_get((int)size, GET_UNTAINTED);     /* loses track of taint */
66 }
67
68 static void
69 function_store_nullfree(void * block, void * tag)
70 {
71 }
72
73
74
75
76 /*************************************************
77 *         Enums for cmdline interface            *
78 *************************************************/
79
80 enum commandline_info { CMDINFO_NONE=0,
81   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
82
83
84
85
86 /*************************************************
87 *  Compile regular expression and panic on fail  *
88 *************************************************/
89
90 /* This function is called when failure to compile a regular expression leads
91 to a panic exit. In other cases, pcre_compile() is called directly. In many
92 cases where this function is used, the results of the compilation are to be
93 placed in long-lived store, so we temporarily reset the store management
94 functions that PCRE uses if the use_malloc flag is set.
95
96 Argument:
97   pattern     the pattern to compile
98   caseless    TRUE if caseless matching is required
99   use_malloc  TRUE if compile into malloc store
100
101 Returns:      pointer to the compiled pattern
102 */
103
104 const pcre2_code *
105 regex_must_compile(const uschar * pattern, BOOL caseless, BOOL use_malloc)
106 {
107 size_t offset;
108 int options = caseless ? PCRE_COPT|PCRE2_CASELESS : PCRE_COPT;
109 const pcre2_code * yield;
110 int err;
111
112 if (!(yield = pcre2_compile((PCRE2_SPTR)pattern, PCRE2_ZERO_TERMINATED, options,
113   &err, &offset, use_malloc ? pcre_mlc_cmp_ctx : pcre_gen_cmp_ctx)))
114   {
115   uschar errbuf[128];
116   pcre2_get_error_message(err, errbuf, sizeof(errbuf));
117   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
118     "%s at offset %ld while compiling %s", errbuf, (long)offset, pattern);
119   }
120
121 return yield;
122 }
123
124
125 static void
126 pcre_init(void)
127 {
128 pcre_mlc_ctx = pcre2_general_context_create(function_store_malloc, function_store_free, NULL);
129 pcre_gen_ctx = pcre2_general_context_create(function_store_get, function_store_nullfree, NULL);
130
131 pcre_mlc_cmp_ctx = pcre2_compile_context_create(pcre_mlc_ctx);
132 pcre_gen_cmp_ctx = pcre2_compile_context_create(pcre_gen_ctx);
133
134 pcre_gen_mtc_ctx = pcre2_match_context_create(pcre_gen_ctx);
135 }
136
137
138
139
140 /*************************************************
141 *   Execute regular expression and set strings   *
142 *************************************************/
143
144 /* This function runs a regular expression match, and sets up the pointers to
145 the matched substrings.  The matched strings are copied so the lifetime of
146 the subject is not a problem.
147
148 Arguments:
149   re          the compiled expression
150   subject     the subject string
151   options     additional PCRE options
152   setup       if < 0 do full setup
153               if >= 0 setup from setup+1 onwards,
154                 excluding the full matched string
155
156 Returns:      TRUE if matched, or FALSE
157 */
158
159 BOOL
160 regex_match_and_setup(const pcre2_code * re, const uschar * subject, int options, int setup)
161 {
162 pcre2_match_data * md = pcre2_match_data_create_from_pattern(re, pcre_gen_ctx);
163 int res = pcre2_match(re, (PCRE2_SPTR)subject, PCRE2_ZERO_TERMINATED, 0,
164                         PCRE_EOPT | options, md, pcre_gen_mtc_ctx);
165 BOOL yield;
166
167 if ((yield = (res >= 0)))
168   {
169   res = pcre2_get_ovector_count(md);
170   expand_nmax = setup < 0 ? 0 : setup + 1;
171   for (int matchnum = setup < 0 ? 0 : 1; matchnum < res; matchnum++)
172     {
173     PCRE2_SIZE len;
174     pcre2_substring_get_bynumber(md, matchnum,
175       (PCRE2_UCHAR **)&expand_nstring[expand_nmax], &len);
176     expand_nlength[expand_nmax++] = (int)len;
177     }
178   expand_nmax--;
179   }
180 else if (res != PCRE2_ERROR_NOMATCH) DEBUG(D_any)
181   {
182   uschar errbuf[128];
183   pcre2_get_error_message(res, errbuf, sizeof(errbuf));
184   debug_printf_indent("pcre2: %s\n", errbuf);
185   }
186 /* pcre2_match_data_free(md);   gen ctx needs no free */
187 return yield;
188 }
189
190
191 /* Check just for match with regex.  Uses the common memory-handling.
192
193 Arguments:
194         re      compiled regex
195         subject string to be checked
196         slen    length of subject; -1 for nul-terminated
197         rptr    pointer for matched string, copied, or NULL
198
199 Return: TRUE for a match.
200 */
201
202 BOOL
203 regex_match(const pcre2_code * re, const uschar * subject, int slen, uschar ** rptr)
204 {
205 pcre2_match_data * md = pcre2_match_data_create(1, pcre_gen_ctx);
206 int rc = pcre2_match(re, (PCRE2_SPTR)subject,
207                       slen >= 0 ? slen : PCRE2_ZERO_TERMINATED,
208                       0, PCRE_EOPT, md, pcre_gen_mtc_ctx);
209 PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
210 BOOL ret = FALSE;
211
212 if (rc >= 0)
213   {
214   if (rptr)
215     *rptr = string_copyn(subject + ovec[0], ovec[1] - ovec[0]);
216   ret = TRUE;
217   }
218 /* pcre2_match_data_free(md);   gen ctx needs no free */
219 return ret;
220 }
221
222
223
224 /*************************************************
225 *            Set up processing details           *
226 *************************************************/
227
228 /* Save a text string for dumping when SIGUSR1 is received.
229 Do checks for overruns.
230
231 Arguments: format and arguments, as for printf()
232 Returns:   nothing
233 */
234
235 void
236 set_process_info(const char *format, ...)
237 {
238 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
239 gstring * g;
240 int len;
241 va_list ap;
242
243 g = string_fmt_append(&gs, "%5d ", (int)getpid());
244 len = g->ptr;
245 va_start(ap, format);
246 if (!string_vformat(g, 0, format, ap))
247   {
248   gs.ptr = len;
249   g = string_cat(&gs, US"**** string overflowed buffer ****");
250   }
251 g = string_catn(g, US"\n", 1);
252 string_from_gstring(g);
253 process_info_len = g->ptr;
254 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
255 va_end(ap);
256 }
257
258 /***********************************************
259 *            Handler for SIGTERM               *
260 ***********************************************/
261
262 static void
263 term_handler(int sig)
264 {
265 exit(1);
266 }
267
268
269 /***********************************************
270 *            Handler for SIGSEGV               *
271 ***********************************************/
272
273 #define STACKDUMP_MAX 24
274 static void
275 stackdump(void)
276 {
277 #ifndef NO_EXECINFO
278 void * buf[STACKDUMP_MAX];
279 char ** ss;
280 int nptrs = backtrace(buf, STACKDUMP_MAX);
281
282 log_write(0, LOG_MAIN|LOG_PANIC, "backtrace\n");
283 log_write(0, LOG_MAIN|LOG_PANIC, "---\n");
284 if ((ss = backtrace_symbols(buf, nptrs)))
285   {
286   for (int i = 0; i < nptrs; i++)
287     log_write(0, LOG_MAIN|LOG_PANIC, "\t%s\n", ss[i]);
288   free(ss);
289   }
290 else
291   log_write(0, LOG_MAIN|LOG_PANIC, "backtrace_symbols: %s\n", strerror(errno));
292 log_write(0, LOG_MAIN|LOG_PANIC, "---\n");
293 #endif
294 }
295 #undef STACKDUMP_MAX
296
297
298 static void
299 #ifdef SA_SIGINFO
300 segv_handler(int sig, siginfo_t * info, void * uctx)
301 {
302 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (fault address: %p)", info->si_addr);
303 # if defined(SEGV_MAPERR) && defined(SEGV_ACCERR) && defined(SEGV_BNDERR) && defined(SEGV_PKUERR)
304 switch (info->si_code)
305   {
306   case SEGV_MAPERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_MAPERR"); break;
307   case SEGV_ACCERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_ACCERR"); break;
308   case SEGV_BNDERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_BNDERR"); break;
309   case SEGV_PKUERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_PKUERR"); break;
310   }
311 # endif
312 if (US info->si_addr < US 4096)
313   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (null pointer indirection)");
314 else
315   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
316 if (process_info_len > 0)
317   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
318 stackdump();
319 signal(SIGSEGV, SIG_DFL);
320 kill(getpid(), sig);
321 }
322
323 #else
324 segv_handler(int sig)
325 {
326 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
327 if (process_info_len > 0)
328   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
329 stackdump();
330 signal(SIGSEGV, SIG_DFL);
331 kill(getpid(), sig);
332 }
333 #endif
334
335
336 /*************************************************
337 *             Handler for SIGUSR1                *
338 *************************************************/
339
340 /* SIGUSR1 causes any exim process to write to the process log details of
341 what it is currently doing. It will only be used if the OS is capable of
342 setting up a handler that causes automatic restarting of any system call
343 that is in progress at the time.
344
345 This function takes care to be signal-safe.
346
347 Argument: the signal number (SIGUSR1)
348 Returns:  nothing
349 */
350
351 static void
352 usr1_handler(int sig)
353 {
354 int fd;
355
356 os_restarting_signal(sig, usr1_handler);
357
358 if (!process_log_path) return;
359 fd = log_open_as_exim(process_log_path);
360
361 /* If we are neither exim nor root, or if we failed to create the log file,
362 give up. There is not much useful we can do with errors, since we don't want
363 to disrupt whatever is going on outside the signal handler. */
364
365 if (fd < 0) return;
366
367 (void)write(fd, process_info, process_info_len);
368 (void)close(fd);
369 }
370
371
372
373 /*************************************************
374 *             Timeout handler                    *
375 *************************************************/
376
377 /* This handler is enabled most of the time that Exim is running. The handler
378 doesn't actually get used unless alarm() has been called to set a timer, to
379 place a time limit on a system call of some kind. When the handler is run, it
380 re-enables itself.
381
382 There are some other SIGALRM handlers that are used in special cases when more
383 than just a flag setting is required; for example, when reading a message's
384 input. These are normally set up in the code module that uses them, and the
385 SIGALRM handler is reset to this one afterwards.
386
387 Argument: the signal value (SIGALRM)
388 Returns:  nothing
389 */
390
391 void
392 sigalrm_handler(int sig)
393 {
394 sigalrm_seen = TRUE;
395 os_non_restarting_signal(SIGALRM, sigalrm_handler);
396 }
397
398
399
400 /*************************************************
401 *      Sleep for a fractional time interval      *
402 *************************************************/
403
404 /* This function is called by millisleep() and exim_wait_tick() to wait for a
405 period of time that may include a fraction of a second. The coding is somewhat
406 tedious. We do not expect setitimer() ever to fail, but if it does, the process
407 will wait for ever, so we panic in this instance. (There was a case of this
408 when a bug in a function that calls milliwait() caused it to pass invalid data.
409 That's when I added the check. :-)
410
411 We assume it to be not worth sleeping for under 50us; this value will
412 require revisiting as hardware advances.  This avoids the issue of
413 a zero-valued timer setting meaning "never fire".
414
415 Argument:  an itimerval structure containing the interval
416 Returns:   nothing
417 */
418
419 static void
420 milliwait(struct itimerval *itval)
421 {
422 sigset_t sigmask;
423 sigset_t old_sigmask;
424 int save_errno = errno;
425
426 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
427   return;
428 (void)sigemptyset(&sigmask);                           /* Empty mask */
429 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
430 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
431 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
432   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
433     "setitimer() failed: %s", strerror(errno));
434 (void)sigfillset(&sigmask);                            /* All signals */
435 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
436 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
437 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
438 errno = save_errno;
439 sigalrm_seen = FALSE;
440 }
441
442
443
444
445 /*************************************************
446 *         Millisecond sleep function             *
447 *************************************************/
448
449 /* The basic sleep() function has a granularity of 1 second, which is too rough
450 in some cases - for example, when using an increasing delay to slow down
451 spammers.
452
453 Argument:    number of millseconds
454 Returns:     nothing
455 */
456
457 void
458 millisleep(int msec)
459 {
460 struct itimerval itval = {.it_interval = {.tv_sec = 0, .tv_usec = 0},
461                           .it_value = {.tv_sec = msec/1000,
462                                        .tv_usec = (msec % 1000) * 1000}};
463 milliwait(&itval);
464 }
465
466
467
468 /*************************************************
469 *         Compare microsecond times              *
470 *************************************************/
471
472 /*
473 Arguments:
474   tv1         the first time
475   tv2         the second time
476
477 Returns:      -1, 0, or +1
478 */
479
480 static int
481 exim_tvcmp(struct timeval *t1, struct timeval *t2)
482 {
483 if (t1->tv_sec > t2->tv_sec) return +1;
484 if (t1->tv_sec < t2->tv_sec) return -1;
485 if (t1->tv_usec > t2->tv_usec) return +1;
486 if (t1->tv_usec < t2->tv_usec) return -1;
487 return 0;
488 }
489
490
491
492
493 /*************************************************
494 *          Clock tick wait function              *
495 *************************************************/
496
497 #ifdef _POSIX_MONOTONIC_CLOCK
498 # ifdef CLOCK_BOOTTIME
499 #  define EXIM_CLOCKTYPE CLOCK_BOOTTIME
500 # else
501 #  define EXIM_CLOCKTYPE CLOCK_MONOTONIC
502 # endif
503
504 /* Amount EXIM_CLOCK is behind realtime, at startup. */
505 static struct timespec offset_ts;
506
507 static void
508 exim_clock_init(void)
509 {
510 struct timeval tv;
511 if (clock_gettime(EXIM_CLOCKTYPE, &offset_ts) != 0) return;
512 (void)gettimeofday(&tv, NULL);
513 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
514 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
515 if (offset_ts.tv_nsec >= 0) return;
516 offset_ts.tv_sec--;
517 offset_ts.tv_nsec += 1000*1000*1000;
518 }
519 #endif
520
521
522 void
523 exim_gettime(struct timeval * tv)
524 {
525 #ifdef _POSIX_MONOTONIC_CLOCK
526 struct timespec now_ts;
527
528 if (clock_gettime(EXIM_CLOCKTYPE, &now_ts) == 0)
529   {
530   now_ts.tv_sec += offset_ts.tv_sec;
531   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
532     {
533     now_ts.tv_sec++;
534     now_ts.tv_nsec -= 1000*1000*1000;
535     }
536   tv->tv_sec = now_ts.tv_sec;
537   tv->tv_usec = now_ts.tv_nsec / 1000;
538   }
539 else
540 #endif
541   (void)gettimeofday(tv, NULL);
542 }
543
544
545 /* Exim uses a time + a pid to generate a unique identifier in two places: its
546 message IDs, and in file names for maildir deliveries. Because some OS now
547 re-use pids within the same second, sub-second times are now being used.
548 However, for absolute certainty, we must ensure the clock has ticked before
549 allowing the relevant process to complete. At the time of implementation of
550 this code (February 2003), the speed of processors is such that the clock will
551 invariably have ticked already by the time a process has done its job. This
552 function prepares for the time when things are faster - and it also copes with
553 clocks that go backwards.
554
555 Arguments:
556   prev_tv      A timeval which was used to create uniqueness; its usec field
557                  has been rounded down to the value of the resolution.
558                  We want to be sure the current time is greater than this.
559                  On return, updated to current (rounded down).
560   resolution   The resolution that was used to divide the microseconds
561                  (1 for maildir, larger for message ids)
562
563 Returns:       nothing
564 */
565
566 void
567 exim_wait_tick(struct timeval * prev_tv, int resolution)
568 {
569 struct timeval now_tv;
570 long int now_true_usec;
571
572 exim_gettime(&now_tv);
573 now_true_usec = now_tv.tv_usec;
574 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
575
576 while (exim_tvcmp(&now_tv, prev_tv) <= 0)
577   {
578   struct itimerval itval;
579   itval.it_interval.tv_sec = 0;
580   itval.it_interval.tv_usec = 0;
581   itval.it_value.tv_sec = prev_tv->tv_sec - now_tv.tv_sec;
582   itval.it_value.tv_usec = prev_tv->tv_usec + resolution - now_true_usec;
583
584   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
585   negative value for the microseconds is possible only in the case when "now"
586   is more than a second less than "tgt". That means that itval.it_value.tv_sec
587   is greater than zero. The following correction is therefore safe. */
588
589   if (itval.it_value.tv_usec < 0)
590     {
591     itval.it_value.tv_usec += 1000000;
592     itval.it_value.tv_sec -= 1;
593     }
594
595   DEBUG(D_transport|D_receive)
596     {
597     if (!f.running_in_test_harness)
598       {
599       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
600         prev_tv->tv_sec, (long) prev_tv->tv_usec,
601         now_tv.tv_sec, (long) now_tv.tv_usec);
602       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
603         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
604       }
605     }
606
607   milliwait(&itval);
608
609   /* Be prapared to go around if the kernel does not implement subtick
610   granularity (GNU Hurd) */
611
612   exim_gettime(&now_tv);
613   now_true_usec = now_tv.tv_usec;
614   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
615   }
616 *prev_tv = now_tv;
617 }
618
619
620
621
622 /*************************************************
623 *   Call fopen() with umask 777 and adjust mode  *
624 *************************************************/
625
626 /* Exim runs with umask(0) so that files created with open() have the mode that
627 is specified in the open() call. However, there are some files, typically in
628 the spool directory, that are created with fopen(). They end up world-writeable
629 if no precautions are taken. Although the spool directory is not accessible to
630 the world, this is an untidiness. So this is a wrapper function for fopen()
631 that sorts out the mode of the created file.
632
633 Arguments:
634    filename       the file name
635    options        the fopen() options
636    mode           the required mode
637
638 Returns:          the fopened FILE or NULL
639 */
640
641 FILE *
642 modefopen(const uschar *filename, const char *options, mode_t mode)
643 {
644 mode_t saved_umask = umask(0777);
645 FILE *f = Ufopen(filename, options);
646 (void)umask(saved_umask);
647 if (f != NULL) (void)fchmod(fileno(f), mode);
648 return f;
649 }
650
651
652 /*************************************************
653 *   Ensure stdin, stdout, and stderr exist       *
654 *************************************************/
655
656 /* Some operating systems grumble if an exec() happens without a standard
657 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
658 file will be opened and will use these fd values, and then some other bit of
659 code will assume, for example, that it can write error messages to stderr.
660 This function ensures that fds 0, 1, and 2 are open if they do not already
661 exist, by connecting them to /dev/null.
662
663 This function is also used to ensure that std{in,out,err} exist at all times,
664 so that if any library that Exim calls tries to use them, it doesn't crash.
665
666 Arguments:  None
667 Returns:    Nothing
668 */
669
670 void
671 exim_nullstd(void)
672 {
673 int devnull = -1;
674 struct stat statbuf;
675 for (int i = 0; i <= 2; i++)
676   {
677   if (fstat(i, &statbuf) < 0 && errno == EBADF)
678     {
679     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
680     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
681       string_open_failed("/dev/null", NULL));
682     if (devnull != i) (void)dup2(devnull, i);
683     }
684   }
685 if (devnull > 2) (void)close(devnull);
686 }
687
688
689
690
691 /*************************************************
692 *   Close unwanted file descriptors for delivery *
693 *************************************************/
694
695 /* This function is called from a new process that has been forked to deliver
696 an incoming message, either directly, or using exec.
697
698 We want any smtp input streams to be closed in this new process. However, it
699 has been observed that using fclose() here causes trouble. When reading in -bS
700 input, duplicate copies of messages have been seen. The files will be sharing a
701 file pointer with the parent process, and it seems that fclose() (at least on
702 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
703 least sometimes. Hence we go for closing the underlying file descriptors.
704
705 If TLS is active, we want to shut down the TLS library, but without molesting
706 the parent's SSL connection.
707
708 For delivery of a non-SMTP message, we want to close stdin and stdout (and
709 stderr unless debugging) because the calling process might have set them up as
710 pipes and be waiting for them to close before it waits for the submission
711 process to terminate. If they aren't closed, they hold up the calling process
712 until the initial delivery process finishes, which is not what we want.
713
714 Exception: We do want it for synchronous delivery!
715
716 And notwithstanding all the above, if D_resolver is set, implying resolver
717 debugging, leave stdout open, because that's where the resolver writes its
718 debugging output.
719
720 When we close stderr (which implies we've also closed stdout), we also get rid
721 of any controlling terminal.
722
723 Arguments:   None
724 Returns:     Nothing
725 */
726
727 static void
728 close_unwanted(void)
729 {
730 if (smtp_input)
731   {
732 #ifndef DISABLE_TLS
733   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
734 #endif
735   (void)close(fileno(smtp_in));
736   (void)close(fileno(smtp_out));
737   smtp_in = NULL;
738   }
739 else
740   {
741   (void)close(0);                                          /* stdin */
742   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
743   if (debug_selector == 0)                                 /* stderr */
744     {
745     if (!f.synchronous_delivery)
746       {
747       (void)close(2);
748       log_stderr = NULL;
749       }
750     (void)setsid();
751     }
752   }
753 }
754
755
756
757
758 /*************************************************
759 *          Set uid and gid                       *
760 *************************************************/
761
762 /* This function sets a new uid and gid permanently, optionally calling
763 initgroups() to set auxiliary groups. There are some special cases when running
764 Exim in unprivileged modes. In these situations the effective uid will not be
765 root; if we already have the right effective uid/gid, and don't need to
766 initialize any groups, leave things as they are.
767
768 Arguments:
769   uid        the uid
770   gid        the gid
771   igflag     TRUE if initgroups() wanted
772   msg        text to use in debugging output and failure log
773
774 Returns:     nothing; bombs out on failure
775 */
776
777 void
778 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, const uschar * msg)
779 {
780 uid_t euid = geteuid();
781 gid_t egid = getegid();
782
783 if (euid == root_uid || euid != uid || egid != gid || igflag)
784   {
785   /* At least one OS returns +1 for initgroups failure, so just check for
786   non-zero. */
787
788   if (igflag)
789     {
790     struct passwd *pw = getpwuid(uid);
791     if (!pw)
792       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
793         "no passwd entry for uid=%ld", (long int)uid);
794
795     if (initgroups(pw->pw_name, gid) != 0)
796       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
797         (long int)uid, strerror(errno));
798     }
799
800   if (setgid(gid) < 0 || setuid(uid) < 0)
801     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
802       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
803   }
804
805 /* Debugging output included uid/gid and all groups */
806
807 DEBUG(D_uid)
808   {
809   int group_count, save_errno;
810   gid_t group_list[EXIM_GROUPLIST_SIZE];
811   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
812     (long int)geteuid(), (long int)getegid(), (long int)getpid());
813   group_count = getgroups(nelem(group_list), group_list);
814   save_errno = errno;
815   debug_printf("  auxiliary group list:");
816   if (group_count > 0)
817     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
818   else if (group_count < 0)
819     debug_printf(" <error: %s>", strerror(save_errno));
820   else debug_printf(" <none>");
821   debug_printf("\n");
822   }
823 }
824
825
826
827
828 /*************************************************
829 *               Exit point                       *
830 *************************************************/
831
832 /* Exim exits via this function so that it always clears up any open
833 databases.
834
835 Arguments:
836   rc         return code
837
838 Returns:     does not return
839 */
840
841 void
842 exim_exit(int rc)
843 {
844 search_tidyup();
845 store_exit();
846 DEBUG(D_any)
847   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
848     ">>>>>>>>>>>>>>>>\n",
849     (int)getpid(), process_purpose, rc);
850 exit(rc);
851 }
852
853
854 void
855 exim_underbar_exit(int rc)
856 {
857 store_exit();
858 DEBUG(D_any)
859   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
860     ">>>>>>>>>>>>>>>>\n",
861     (int)getpid(), process_purpose, rc);
862 _exit(rc);
863 }
864
865
866
867 /* Print error string, then die */
868 static void
869 exim_fail(const char * fmt, ...)
870 {
871 va_list ap;
872 va_start(ap, fmt);
873 vfprintf(stderr, fmt, ap);
874 exit(EXIT_FAILURE);
875 }
876
877 /* fail if a length is too long */
878 static inline void
879 exim_len_fail_toolong(int itemlen, int maxlen, const char *description)
880 {
881 if (itemlen <= maxlen)
882   return;
883 fprintf(stderr, "exim: length limit exceeded (%d > %d) for: %s\n",
884         itemlen, maxlen, description);
885 exit(EXIT_FAILURE);
886 }
887
888 /* only pass through the string item back to the caller if it's short enough */
889 static inline const uschar *
890 exim_str_fail_toolong(const uschar *item, int maxlen, const char *description)
891 {
892 exim_len_fail_toolong(Ustrlen(item), maxlen, description);
893 return item;
894 }
895
896 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
897 of chown()/fchown().  See src/functions.h for more explanation */
898 int
899 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
900 {
901 int saved_errno = errno;  /* from the preceeding chown call */
902 #if 1
903 log_write(0, LOG_MAIN|LOG_PANIC,
904   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
905   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
906   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
907 #else
908 /* I leave this here, commented, in case the "bug"(?) comes up again.
909    It is not an Exim bug, but we can provide a workaround.
910    See Bug 2391
911    HS 2019-04-18 */
912
913 struct stat buf;
914
915 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
916 {
917   if (buf.st_uid == owner && buf.st_gid == group) return 0;
918   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
919 }
920 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
921
922 #endif
923 errno = saved_errno;
924 return -1;
925 }
926
927
928 /*************************************************
929 *         Extract port from host address         *
930 *************************************************/
931
932 /* Called to extract the port from the values given to -oMa and -oMi.
933 It also checks the syntax of the address, and terminates it before the
934 port data when a port is extracted.
935
936 Argument:
937   address   the address, with possible port on the end
938
939 Returns:    the port, or zero if there isn't one
940             bombs out on a syntax error
941 */
942
943 static int
944 check_port(uschar *address)
945 {
946 int port = host_address_extract_port(address);
947 if (string_is_ip_address(address, NULL) == 0)
948   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
949 return port;
950 }
951
952
953
954 /*************************************************
955 *              Test/verify an address            *
956 *************************************************/
957
958 /* This function is called by the -bv and -bt code. It extracts a working
959 address from a full RFC 822 address. This isn't really necessary per se, but it
960 has the effect of collapsing source routes.
961
962 Arguments:
963   s            the address string
964   flags        flag bits for verify_address()
965   exit_value   to be set for failures
966
967 Returns:       nothing
968 */
969
970 static void
971 test_address(uschar *s, int flags, int *exit_value)
972 {
973 int start, end, domain;
974 uschar *parse_error = NULL;
975 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
976   FALSE);
977 if (!address)
978   {
979   fprintf(stdout, "syntax error: %s\n", parse_error);
980   *exit_value = 2;
981   }
982 else
983   {
984   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
985     -1, -1, NULL, NULL, NULL);
986   if (rc == FAIL) *exit_value = 2;
987   else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
988   }
989 }
990
991
992
993 /*************************************************
994 *          Show supported features               *
995 *************************************************/
996
997 static void
998 show_string(BOOL is_stdout, gstring * g)
999 {
1000 const uschar * s = string_from_gstring(g);
1001 if (s)
1002   if (is_stdout) fputs(CCS s, stdout);
1003   else debug_printf("%s", s);
1004 }
1005
1006
1007 static gstring *
1008 show_db_version(gstring * g)
1009 {
1010 #ifdef DB_VERSION_STRING
1011 DEBUG(D_any)
1012   {
1013   g = string_fmt_append(g, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
1014   g = string_fmt_append(g, "                      Runtime: %s\n",
1015     db_version(NULL, NULL, NULL));
1016   }
1017 else
1018   g = string_fmt_append(g, "Berkeley DB: %s\n", DB_VERSION_STRING);
1019
1020 #elif defined(BTREEVERSION) && defined(HASHVERSION)
1021 # ifdef USE_DB
1022   g = string_cat(g, US"Probably Berkeley DB version 1.8x (native mode)\n");
1023 # else
1024   g = string_cat(g, US"Probably Berkeley DB version 1.8x (compatibility mode)\n");
1025 # endif
1026
1027 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
1028 g = string_cat(g, US"Probably ndbm\n");
1029 #elif defined(USE_TDB)
1030 g = string_cat(g, US"Using tdb\n");
1031 #else
1032 # ifdef USE_GDBM
1033   g = string_cat(g, US"Probably GDBM (native mode)\n");
1034 # else
1035   g = string_cat(g, US"Probably GDBM (compatibility mode)\n");
1036 # endif
1037 #endif
1038 return g;
1039 }
1040
1041
1042 /* This function is called for -bV/--version and for -d to output the optional
1043 features of the current Exim binary.
1044
1045 Arguments:  BOOL, true for stdout else debug channel
1046 Returns:    nothing
1047 */
1048
1049 static void
1050 show_whats_supported(BOOL is_stdout)
1051 {
1052 rmark reset_point = store_mark();
1053 gstring * g = NULL;
1054
1055 DEBUG(D_any) {} else g = show_db_version(g);
1056
1057 g = string_cat(g, US"Support for:");
1058 #ifdef SUPPORT_CRYPTEQ
1059   g = string_cat(g, US" crypteq");
1060 #endif
1061 #if HAVE_ICONV
1062   g = string_cat(g, US" iconv()");
1063 #endif
1064 #if HAVE_IPV6
1065   g = string_cat(g, US" IPv6");
1066 #endif
1067 #ifdef HAVE_SETCLASSRESOURCES
1068   g = string_cat(g, US" use_setclassresources");
1069 #endif
1070 #ifdef SUPPORT_PAM
1071   g = string_cat(g, US" PAM");
1072 #endif
1073 #ifdef EXIM_PERL
1074   g = string_cat(g, US" Perl");
1075 #endif
1076 #ifdef EXPAND_DLFUNC
1077   g = string_cat(g, US" Expand_dlfunc");
1078 #endif
1079 #ifdef USE_TCP_WRAPPERS
1080   g = string_cat(g, US" TCPwrappers");
1081 #endif
1082 #ifdef USE_GNUTLS
1083   g = string_cat(g, US" GnuTLS");
1084 #endif
1085 #ifdef USE_OPENSSL
1086   g = string_cat(g, US" OpenSSL");
1087 #endif
1088 #ifndef DISABLE_TLS_RESUME
1089   g = string_cat(g, US" TLS_resume");
1090 #endif
1091 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
1092   g = string_cat(g, US" translate_ip_address");
1093 #endif
1094 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
1095   g = string_cat(g, US" move_frozen_messages");
1096 #endif
1097 #ifdef WITH_CONTENT_SCAN
1098   g = string_cat(g, US" Content_Scanning");
1099 #endif
1100 #ifdef SUPPORT_DANE
1101   g = string_cat(g, US" DANE");
1102 #endif
1103 #ifndef DISABLE_DKIM
1104   g = string_cat(g, US" DKIM");
1105 #endif
1106 #ifdef SUPPORT_DMARC
1107   g = string_cat(g, US" DMARC");
1108 #endif
1109 #ifndef DISABLE_DNSSEC
1110   g = string_cat(g, US" DNSSEC");
1111 #endif
1112 #ifndef DISABLE_EVENT
1113   g = string_cat(g, US" Event");
1114 #endif
1115 #ifdef SUPPORT_I18N
1116   g = string_cat(g, US" I18N");
1117 #endif
1118 #ifndef DISABLE_OCSP
1119   g = string_cat(g, US" OCSP");
1120 #endif
1121 #ifndef DISABLE_PIPE_CONNECT
1122   g = string_cat(g, US" PIPECONNECT");
1123 #endif
1124 #ifndef DISABLE_PRDR
1125   g = string_cat(g, US" PRDR");
1126 #endif
1127 #ifdef SUPPORT_PROXY
1128   g = string_cat(g, US" PROXY");
1129 #endif
1130 #ifndef DISABLE_QUEUE_RAMP
1131   g = string_cat(g, US" Queue_Ramp");
1132 #endif
1133 #ifdef SUPPORT_SOCKS
1134   g = string_cat(g, US" SOCKS");
1135 #endif
1136 #ifdef SUPPORT_SPF
1137   g = string_cat(g, US" SPF");
1138 #endif
1139 #if defined(SUPPORT_SRS)
1140   g = string_cat(g, US" SRS");
1141 #endif
1142 #ifdef TCP_FASTOPEN
1143   tcp_init();
1144   if (f.tcp_fastopen_ok) g = string_cat(g, US" TCP_Fast_Open");
1145 #endif
1146 #ifdef EXPERIMENTAL_ARC
1147   g = string_cat(g, US" Experimental_ARC");
1148 #endif
1149 #ifdef EXPERIMENTAL_BRIGHTMAIL
1150   g = string_cat(g, US" Experimental_Brightmail");
1151 #endif
1152 #ifdef EXPERIMENTAL_DCC
1153   g = string_cat(g, US" Experimental_DCC");
1154 #endif
1155 #ifdef EXPERIMENTAL_DSN_INFO
1156   g = string_cat(g, US" Experimental_DSN_info");
1157 #endif
1158 #ifdef EXPERIMENTAL_ESMTP_LIMITS
1159   g = string_cat(g, US" Experimental_ESMTP_Limits");
1160 #endif
1161 #ifdef EXPERIMENTAL_QUEUEFILE
1162   g = string_cat(g, US" Experimental_QUEUEFILE");
1163 #endif
1164 g = string_cat(g, US"\n");
1165
1166 g = string_cat(g, US"Lookups (built-in):");
1167 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1168   g = string_cat(g, US" lsearch wildlsearch nwildlsearch iplsearch");
1169 #endif
1170 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1171   g = string_cat(g, US" cdb");
1172 #endif
1173 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1174   g = string_cat(g, US" dbm dbmjz dbmnz");
1175 #endif
1176 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1177   g = string_cat(g, US" dnsdb");
1178 #endif
1179 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1180   g = string_cat(g, US" dsearch");
1181 #endif
1182 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1183   g = string_cat(g, US" ibase");
1184 #endif
1185 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1186   g = string_cat(g, US" json");
1187 #endif
1188 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1189   g = string_cat(g, US" ldap ldapdn ldapm");
1190 #endif
1191 #ifdef LOOKUP_LMDB
1192   g = string_cat(g, US" lmdb");
1193 #endif
1194 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1195   g = string_cat(g, US" mysql");
1196 #endif
1197 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1198   g = string_cat(g, US" nis nis0");
1199 #endif
1200 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1201   g = string_cat(g, US" nisplus");
1202 #endif
1203 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1204   g = string_cat(g, US" oracle");
1205 #endif
1206 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1207   g = string_cat(g, US" passwd");
1208 #endif
1209 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1210   g = string_cat(g, US" pgsql");
1211 #endif
1212 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1213   g = string_cat(g, US" redis");
1214 #endif
1215 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1216   g = string_cat(g, US" sqlite");
1217 #endif
1218 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1219   g = string_cat(g, US" testdb");
1220 #endif
1221 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1222   g = string_cat(g, US" whoson");
1223 #endif
1224 g = string_cat(g, US"\n");
1225
1226 g = auth_show_supported(g);
1227 g = route_show_supported(g);
1228 g = transport_show_supported(g);
1229
1230 #ifdef WITH_CONTENT_SCAN
1231 g = malware_show_supported(g);
1232 #endif
1233 show_string(is_stdout, g); g = NULL;
1234
1235 if (fixed_never_users[0] > 0)
1236   {
1237   int i;
1238   g = string_cat(g, US"Fixed never_users: ");
1239   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1240     string_fmt_append(g, "%u:", (unsigned)fixed_never_users[i]);
1241   g = string_fmt_append(g, "%u\n", (unsigned)fixed_never_users[i]);
1242   }
1243
1244 g = string_fmt_append(g, "Configure owner: %d:%d\n", config_uid, config_gid);
1245
1246 g = string_fmt_append(g, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1247
1248 /* Everything else is details which are only worth reporting when debugging.
1249 Perhaps the tls_version_report should move into this too. */
1250 DEBUG(D_any)
1251   {
1252
1253 /* clang defines __GNUC__ (at least, for me) so test for it first */
1254 #if defined(__clang__)
1255   g = string_fmt_append(g, "Compiler: CLang [%s]\n", __clang_version__);
1256 #elif defined(__GNUC__)
1257   g = string_fmt_append(g, "Compiler: GCC [%s]\n",
1258 # ifdef __VERSION__
1259       __VERSION__
1260 # else
1261       "? unknown version ?"
1262 # endif
1263       );
1264 #else
1265   g = string_cat(g, US"Compiler: <unknown>\n");
1266 #endif
1267
1268 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1269   g = string_fmt_append(g, "Library version: Glibc: Compile: %d.%d\n",
1270                 __GLIBC__, __GLIBC_MINOR__);
1271   if (__GLIBC_PREREQ(2, 1))
1272     g = string_fmt_append(g, "                        Runtime: %s\n",
1273                 gnu_get_libc_version());
1274 #endif
1275
1276 g = show_db_version(g);
1277
1278 #ifndef DISABLE_TLS
1279   g = tls_version_report(g);
1280 #endif
1281 #ifdef SUPPORT_I18N
1282   g = utf8_version_report(g);
1283 #endif
1284 #ifdef SUPPORT_DMARC
1285   g = dmarc_version_report(g);
1286 #endif
1287 #ifdef SUPPORT_SPF
1288   g = spf_lib_version_report(g);
1289 #endif
1290
1291 show_string(is_stdout, g);
1292 g = NULL;
1293
1294 for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1295   if (authi->version_report)
1296     g = (*authi->version_report)(g);
1297
1298   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1299   characters; unless it's an ancient version of PCRE in which case it
1300   is not defined. */
1301 #ifndef PCRE_PRERELEASE
1302 # define PCRE_PRERELEASE
1303 #endif
1304 #define QUOTE(X) #X
1305 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1306   {
1307   uschar buf[24];
1308   pcre2_config(PCRE2_CONFIG_VERSION, buf);
1309   g = string_fmt_append(g, "Library version: PCRE2: Compile: %d.%d%s\n"
1310               "                        Runtime: %s\n",
1311           PCRE2_MAJOR, PCRE2_MINOR,
1312           EXPAND_AND_QUOTE(PCRE2_PRERELEASE) "",
1313           buf);
1314   }
1315 #undef QUOTE
1316 #undef EXPAND_AND_QUOTE
1317
1318 show_string(is_stdout, g);
1319 g = NULL;
1320
1321 init_lookup_list();
1322 for (int i = 0; i < lookup_list_count; i++)
1323   if (lookup_list[i]->version_report)
1324     g = lookup_list[i]->version_report(g);
1325 show_string(is_stdout, g);
1326 g = NULL;
1327
1328 #ifdef WHITELIST_D_MACROS
1329   g = string_fmt_append(g, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1330 #else
1331   g = string_cat(g, US"WHITELIST_D_MACROS unset\n");
1332 #endif
1333 #ifdef TRUSTED_CONFIG_LIST
1334   g = string_fmt_append(g, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1335 #else
1336   g = string_cat(g, US"TRUSTED_CONFIG_LIST unset\n");
1337 #endif
1338   }
1339
1340 show_string(is_stdout, g);
1341 store_reset(reset_point);
1342 }
1343
1344
1345 /*************************************************
1346 *     Show auxiliary information about Exim      *
1347 *************************************************/
1348
1349 static void
1350 show_exim_information(enum commandline_info request, FILE *stream)
1351 {
1352 switch(request)
1353   {
1354   case CMDINFO_NONE:
1355     fprintf(stream, "Oops, something went wrong.\n");
1356     return;
1357   case CMDINFO_HELP:
1358     fprintf(stream,
1359 "The -bI: flag takes a string indicating which information to provide.\n"
1360 "If the string is not recognised, you'll get this help (on stderr).\n"
1361 "\n"
1362 "  exim -bI:help    this information\n"
1363 "  exim -bI:dscp    list of known dscp value keywords\n"
1364 "  exim -bI:sieve   list of supported sieve extensions\n"
1365 );
1366     return;
1367   case CMDINFO_SIEVE:
1368     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1369       fprintf(stream, "%s\n", *pp);
1370     return;
1371   case CMDINFO_DSCP:
1372     dscp_list_to_stream(stream);
1373     return;
1374   }
1375 }
1376
1377
1378 /*************************************************
1379 *               Quote a local part               *
1380 *************************************************/
1381
1382 /* This function is used when a sender address or a From: or Sender: header
1383 line is being created from the caller's login, or from an authenticated_id. It
1384 applies appropriate quoting rules for a local part.
1385
1386 Argument:    the local part
1387 Returns:     the local part, quoted if necessary
1388 */
1389
1390 uschar *
1391 local_part_quote(uschar *lpart)
1392 {
1393 BOOL needs_quote = FALSE;
1394 gstring * g;
1395
1396 for (uschar * t = lpart; !needs_quote && *t != 0; t++)
1397   {
1398   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1399     (*t != '.' || t == lpart || t[1] == 0);
1400   }
1401
1402 if (!needs_quote) return lpart;
1403
1404 g = string_catn(NULL, US"\"", 1);
1405
1406 for (;;)
1407   {
1408   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1409   if (nq == NULL)
1410     {
1411     g = string_cat(g, lpart);
1412     break;
1413     }
1414   g = string_catn(g, lpart, nq - lpart);
1415   g = string_catn(g, US"\\", 1);
1416   g = string_catn(g, nq, 1);
1417   lpart = nq + 1;
1418   }
1419
1420 g = string_catn(g, US"\"", 1);
1421 return string_from_gstring(g);
1422 }
1423
1424
1425
1426 #ifdef USE_READLINE
1427 /*************************************************
1428 *         Load readline() functions              *
1429 *************************************************/
1430
1431 /* This function is called from testing executions that read data from stdin,
1432 but only when running as the calling user. Currently, only -be does this. The
1433 function loads the readline() function library and passes back the functions.
1434 On some systems, it needs the curses library, so load that too, but try without
1435 it if loading fails. All this functionality has to be requested at build time.
1436
1437 Arguments:
1438   fn_readline_ptr   pointer to where to put the readline pointer
1439   fn_addhist_ptr    pointer to where to put the addhistory function
1440
1441 Returns:            the dlopen handle or NULL on failure
1442 */
1443
1444 static void *
1445 set_readline(char * (**fn_readline_ptr)(const char *),
1446              void   (**fn_addhist_ptr)(const char *))
1447 {
1448 void *dlhandle;
1449 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1450
1451 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1452 if (dlhandle_curses) dlclose(dlhandle_curses);
1453
1454 if (dlhandle)
1455   {
1456   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1457    *   char * readline (const char *prompt);
1458    *   void add_history (const char *string);
1459    */
1460   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1461   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1462   }
1463 else
1464   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1465
1466 return dlhandle;
1467 }
1468 #endif
1469
1470
1471
1472 /*************************************************
1473 *    Get a line from stdin for testing things    *
1474 *************************************************/
1475
1476 /* This function is called when running tests that can take a number of lines
1477 of input (for example, -be and -bt). It handles continuations and trailing
1478 spaces. And prompting and a blank line output on eof. If readline() is in use,
1479 the arguments are non-NULL and provide the relevant functions.
1480
1481 Arguments:
1482   fn_readline   readline function or NULL
1483   fn_addhist    addhist function or NULL
1484
1485 Returns:        pointer to dynamic memory, or NULL at end of file
1486 */
1487
1488 static uschar *
1489 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1490 {
1491 gstring * g = NULL;
1492 BOOL had_input = FALSE;
1493
1494 if (!fn_readline) { printf("> "); fflush(stdout); }
1495
1496 for (int i = 0;; i++)
1497   {
1498   uschar buffer[1024];
1499   uschar * p, * ss;
1500
1501 #ifdef USE_READLINE
1502   char *readline_line = NULL;
1503   if (fn_readline)
1504     {
1505     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1506     if (*readline_line && fn_addhist) fn_addhist(readline_line);
1507     p = US readline_line;
1508     }
1509   else
1510 #endif
1511
1512   /* readline() not in use */
1513
1514     {
1515     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;   /*EOF*/
1516     p = buffer;
1517     }
1518
1519   /* Handle the line */
1520
1521   had_input = TRUE;
1522   ss = p + Ustrlen(p);
1523   while (ss > p && isspace(ss[-1])) ss--; /* strip trailing newline (and spaces) */
1524
1525   if (i > 0)
1526     while (p < ss && isspace(*p)) p++;   /* strip leading space after cont */
1527
1528   g = string_catn(g, p, ss - p);
1529
1530 #ifdef USE_READLINE
1531   if (fn_readline) free(readline_line);
1532 #endif
1533
1534   /* g can only be NULL if ss==p */
1535   if (ss == p || g->s[g->ptr-1] != '\\') /* not continuation; done */
1536     break;
1537
1538   --g->ptr;                             /* drop the \ */
1539   }
1540
1541 if (had_input) return g ? string_from_gstring(g) : US"";
1542 printf("\n");
1543 return NULL;
1544 }
1545
1546
1547
1548 /*************************************************
1549 *    Output usage information for the program    *
1550 *************************************************/
1551
1552 /* This function is called when there are no recipients
1553    or a specific --help argument was added.
1554
1555 Arguments:
1556   progname      information on what name we were called by
1557
1558 Returns:        DOES NOT RETURN
1559 */
1560
1561 static void
1562 exim_usage(uschar *progname)
1563 {
1564
1565 /* Handle specific program invocation variants */
1566 if (Ustrcmp(progname, US"-mailq") == 0)
1567   exim_fail(
1568     "mailq - list the contents of the mail queue\n\n"
1569     "For a list of options, see the Exim documentation.\n");
1570
1571 /* Generic usage - we output this whatever happens */
1572 exim_fail(
1573   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1574   "not directly from a shell command line. Options and/or arguments control\n"
1575   "what it does when called. For a list of options, see the Exim documentation.\n");
1576 }
1577
1578
1579
1580 /*************************************************
1581 *    Validate that the macros given are okay     *
1582 *************************************************/
1583
1584 /* Typically, Exim will drop privileges if macros are supplied.  In some
1585 cases, we want to not do so.
1586
1587 Arguments:    opt_D_used - true if the commandline had a "-D" option
1588 Returns:      true if trusted, false otherwise
1589 */
1590
1591 static BOOL
1592 macros_trusted(BOOL opt_D_used)
1593 {
1594 #ifdef WHITELIST_D_MACROS
1595 uschar *whitelisted, *end, *p, **whites;
1596 int white_count, i, n;
1597 size_t len;
1598 BOOL prev_char_item, found;
1599 #endif
1600
1601 if (!opt_D_used)
1602   return TRUE;
1603 #ifndef WHITELIST_D_MACROS
1604 return FALSE;
1605 #else
1606
1607 /* We only trust -D overrides for some invoking users:
1608 root, the exim run-time user, the optional config owner user.
1609 I don't know why config-owner would be needed, but since they can own the
1610 config files anyway, there's no security risk to letting them override -D. */
1611 if ( ! ((real_uid == root_uid)
1612      || (real_uid == exim_uid)
1613 #ifdef CONFIGURE_OWNER
1614      || (real_uid == config_uid)
1615 #endif
1616    ))
1617   {
1618   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1619   return FALSE;
1620   }
1621
1622 /* Get a list of macros which are whitelisted */
1623 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1624 prev_char_item = FALSE;
1625 white_count = 0;
1626 for (p = whitelisted; *p != '\0'; ++p)
1627   {
1628   if (*p == ':' || isspace(*p))
1629     {
1630     *p = '\0';
1631     if (prev_char_item)
1632       ++white_count;
1633     prev_char_item = FALSE;
1634     continue;
1635     }
1636   if (!prev_char_item)
1637     prev_char_item = TRUE;
1638   }
1639 end = p;
1640 if (prev_char_item)
1641   ++white_count;
1642 if (!white_count)
1643   return FALSE;
1644 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1645 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1646   {
1647   if (*p != '\0')
1648     {
1649     whites[i++] = p;
1650     if (i == white_count)
1651       break;
1652     while (*p != '\0' && p < end)
1653       ++p;
1654     }
1655   }
1656 whites[i] = NULL;
1657
1658 /* The list of commandline macros should be very short.
1659 Accept the N*M complexity. */
1660 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1661   {
1662   found = FALSE;
1663   for (uschar ** w = whites; *w; ++w)
1664     if (Ustrcmp(*w, m->name) == 0)
1665       {
1666       found = TRUE;
1667       break;
1668       }
1669   if (!found)
1670     return FALSE;
1671   if (!m->replacement)
1672     continue;
1673   if ((len = m->replen) == 0)
1674     continue;
1675   if (!regex_match(regex_whitelisted_macro, m->replacement, len, NULL))
1676     return FALSE;
1677   }
1678 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1679 return TRUE;
1680 #endif
1681 }
1682
1683
1684 /*************************************************
1685 *          Expansion testing                     *
1686 *************************************************/
1687
1688 /* Expand and print one item, doing macro-processing.
1689
1690 Arguments:
1691   item          line for expansion
1692 */
1693
1694 static void
1695 expansion_test_line(const uschar * line)
1696 {
1697 int len;
1698 BOOL dummy_macexp;
1699 uschar * s;
1700
1701 Ustrncpy(big_buffer, line, big_buffer_size);
1702 big_buffer[big_buffer_size-1] = '\0';
1703 len = Ustrlen(big_buffer);
1704
1705 (void) macros_expand(0, &len, &dummy_macexp);
1706
1707 if (isupper(big_buffer[0]))
1708   {
1709   if (macro_read_assignment(big_buffer))
1710     printf("Defined macro '%s'\n", mlast->name);
1711   }
1712 else
1713   if ((s = expand_string(big_buffer))) printf("%s\n", CS s);
1714   else printf("Failed: %s\n", expand_string_message);
1715 }
1716
1717
1718
1719 /*************************************************
1720 *          Entry point and high-level code       *
1721 *************************************************/
1722
1723 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1724 the appropriate action. All the necessary functions are present in the one
1725 binary. I originally thought one should split it up, but it turns out that so
1726 much of the apparatus is needed in each chunk that one might as well just have
1727 it all available all the time, which then makes the coding easier as well.
1728
1729 Arguments:
1730   argc      count of entries in argv
1731   argv      argument strings, with argv[0] being the program name
1732
1733 Returns:    EXIT_SUCCESS if terminated successfully
1734             EXIT_FAILURE otherwise, except when a message has been sent
1735               to the sender, and -oee was given
1736 */
1737
1738 int
1739 main(int argc, char **cargv)
1740 {
1741 uschar **argv = USS cargv;
1742 int  arg_receive_timeout = -1;
1743 int  arg_smtp_receive_timeout = -1;
1744 int  arg_error_handling = error_handling;
1745 int  filter_sfd = -1;
1746 int  filter_ufd = -1;
1747 int  group_count;
1748 int  i, rv;
1749 int  list_queue_option = 0;
1750 int  msg_action = 0;
1751 int  msg_action_arg = -1;
1752 int  namelen = argv[0] ? Ustrlen(argv[0]) : 0;
1753 int  queue_only_reason = 0;
1754 #ifdef EXIM_PERL
1755 int  perl_start_option = 0;
1756 #endif
1757 int  recipients_arg = argc;
1758 int  sender_address_domain = 0;
1759 int  test_retry_arg = -1;
1760 int  test_rewrite_arg = -1;
1761 gid_t original_egid;
1762 BOOL arg_queue_only = FALSE;
1763 BOOL bi_option = FALSE;
1764 BOOL checking = FALSE;
1765 BOOL count_queue = FALSE;
1766 BOOL expansion_test = FALSE;
1767 BOOL extract_recipients = FALSE;
1768 BOOL flag_G = FALSE;
1769 BOOL flag_n = FALSE;
1770 BOOL forced_delivery = FALSE;
1771 BOOL f_end_dot = FALSE;
1772 BOOL deliver_give_up = FALSE;
1773 BOOL list_queue = FALSE;
1774 BOOL list_options = FALSE;
1775 BOOL list_config = FALSE;
1776 BOOL local_queue_only;
1777 BOOL one_msg_action = FALSE;
1778 BOOL opt_D_used = FALSE;
1779 BOOL queue_only_set = FALSE;
1780 BOOL receiving_message = TRUE;
1781 BOOL sender_ident_set = FALSE;
1782 BOOL session_local_queue_only;
1783 BOOL unprivileged;
1784 BOOL removed_privilege = FALSE;
1785 BOOL usage_wanted = FALSE;
1786 BOOL verify_address_mode = FALSE;
1787 BOOL verify_as_sender = FALSE;
1788 BOOL rcpt_verify_quota = FALSE;
1789 BOOL version_printed = FALSE;
1790 uschar *alias_arg = NULL;
1791 uschar *called_as = US"";
1792 uschar *cmdline_syslog_name = NULL;
1793 uschar *start_queue_run_id = NULL;
1794 uschar *stop_queue_run_id = NULL;
1795 uschar *expansion_test_message = NULL;
1796 const uschar *ftest_domain = NULL;
1797 const uschar *ftest_localpart = NULL;
1798 const uschar *ftest_prefix = NULL;
1799 const uschar *ftest_suffix = NULL;
1800 uschar *log_oneline = NULL;
1801 uschar *malware_test_file = NULL;
1802 uschar *real_sender_address;
1803 uschar *originator_home = US"/";
1804 size_t sz;
1805
1806 struct passwd *pw;
1807 struct stat statbuf;
1808 pid_t passed_qr_pid = (pid_t)0;
1809 int passed_qr_pipe = -1;
1810 gid_t group_list[EXIM_GROUPLIST_SIZE];
1811
1812 /* For the -bI: flag */
1813 enum commandline_info info_flag = CMDINFO_NONE;
1814 BOOL info_stdout = FALSE;
1815
1816 /* Possible options for -R and -S */
1817
1818 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1819
1820 /* Need to define this in case we need to change the environment in order
1821 to get rid of a bogus time zone. We have to make it char rather than uschar
1822 because some OS define it in /usr/include/unistd.h. */
1823
1824 extern char **environ;
1825
1826 #ifdef MEASURE_TIMING
1827 (void)gettimeofday(&timestamp_startup, NULL);
1828 #endif
1829
1830 store_init();   /* Initialise the memory allocation susbsystem */
1831 pcre_init();    /* Set up memory handling for pcre */
1832
1833 /* If the Exim user and/or group and/or the configuration file owner/group were
1834 defined by ref:name at build time, we must now find the actual uid/gid values.
1835 This is a feature to make the lives of binary distributors easier. */
1836
1837 #ifdef EXIM_USERNAME
1838 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1839   {
1840   if (exim_uid == 0)
1841     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1842
1843   /* If ref:name uses a number as the name, route_finduser() returns
1844   TRUE with exim_uid set and pw coerced to NULL. */
1845   if (pw)
1846     exim_gid = pw->pw_gid;
1847 #ifndef EXIM_GROUPNAME
1848   else
1849     exim_fail(
1850         "exim: ref:name should specify a usercode, not a group.\n"
1851         "exim: can't let you get away with it unless you also specify a group.\n");
1852 #endif
1853   }
1854 else
1855   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1856 #endif
1857
1858 #ifdef EXIM_GROUPNAME
1859 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1860   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1861 #endif
1862
1863 #ifdef CONFIGURE_OWNERNAME
1864 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1865   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1866     CONFIGURE_OWNERNAME);
1867 #endif
1868
1869 /* We default the system_filter_user to be the Exim run-time user, as a
1870 sane non-root value. */
1871 system_filter_uid = exim_uid;
1872
1873 #ifdef CONFIGURE_GROUPNAME
1874 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1875   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1876     CONFIGURE_GROUPNAME);
1877 #endif
1878
1879 /* In the Cygwin environment, some initialization used to need doing.
1880 It was fudged in by means of this macro; now no longer but we'll leave
1881 it in case of others. */
1882
1883 #ifdef OS_INIT
1884 OS_INIT
1885 #endif
1886
1887 /* Check a field which is patched when we are running Exim within its
1888 testing harness; do a fast initial check, and then the whole thing. */
1889
1890 f.running_in_test_harness =
1891   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1892 if (f.running_in_test_harness)
1893   debug_store = TRUE;
1894
1895 /* Protect against abusive argv[0] */
1896 if (!argv[0] || !argc) exim_fail("exim: executable name required\n");
1897 exim_str_fail_toolong(argv[0], PATH_MAX, "argv[0]");
1898
1899 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1900 at the start of a program; however, it seems that some environments do not
1901 follow this. A "strange" locale can affect the formatting of timestamps, so we
1902 make quite sure. */
1903
1904 setlocale(LC_ALL, "C");
1905
1906 /* Get the offset between CLOCK_MONOTONIC/CLOCK_BOOTTIME and wallclock */
1907
1908 #ifdef _POSIX_MONOTONIC_CLOCK
1909 exim_clock_init();
1910 #endif
1911
1912 /* Set up the default handler for timing using alarm(). */
1913
1914 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1915
1916 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1917 because store_malloc writes a log entry on failure. */
1918
1919 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1920   exim_fail("exim: failed to get store for log buffer\n");
1921
1922 /* Initialize the default log options. */
1923
1924 bits_set(log_selector, log_selector_size, log_default);
1925
1926 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1927 NULL when the daemon is run and the file is closed. We have to use this
1928 indirection, because some systems don't allow writing to the variable "stderr".
1929 */
1930
1931 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1932
1933 /* Ensure there is a big buffer for temporary use in several places. It is put
1934 in malloc store so that it can be freed for enlargement if necessary. */
1935
1936 big_buffer = store_malloc(big_buffer_size);
1937
1938 /* Set up the handler for the data request signal, and set the initial
1939 descriptive text. */
1940
1941 process_info = store_get(PROCESS_INFO_SIZE, GET_TAINTED);
1942 set_process_info("initializing");
1943 os_restarting_signal(SIGUSR1, usr1_handler);            /* exiwhat */
1944 #ifdef SA_SIGINFO
1945   {
1946   struct sigaction act = { .sa_sigaction = segv_handler, .sa_flags = SA_RESETHAND | SA_SIGINFO };
1947   sigaction(SIGSEGV, &act, NULL);
1948   }
1949 #else
1950 signal(SIGSEGV, segv_handler);                          /* log faults */
1951 #endif
1952
1953 /* If running in a dockerized environment, the TERM signal is only
1954 delegated to the PID 1 if we request it by setting an signal handler */
1955 if (getpid() == 1) signal(SIGTERM, term_handler);
1956
1957 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1958 in the daemon code. For the rest of Exim's uses, we ignore it. */
1959
1960 signal(SIGHUP, SIG_IGN);
1961
1962 /* We don't want to die on pipe errors as the code is written to handle
1963 the write error instead. */
1964
1965 signal(SIGPIPE, SIG_IGN);
1966
1967 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1968 set to SIG_IGN. This causes subprocesses that complete before the parent
1969 process waits for them not to hang around, so when Exim calls wait(), nothing
1970 is there. The wait() code has been made robust against this, but let's ensure
1971 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1972 ending status. We use sigaction rather than plain signal() on those OS where
1973 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1974 problem on AIX with this.) */
1975
1976 #ifdef SA_NOCLDWAIT
1977   {
1978   struct sigaction act;
1979   act.sa_handler = SIG_DFL;
1980   sigemptyset(&(act.sa_mask));
1981   act.sa_flags = 0;
1982   sigaction(SIGCHLD, &act, NULL);
1983   }
1984 #else
1985 signal(SIGCHLD, SIG_DFL);
1986 #endif
1987
1988 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1989 SIGHUP. */
1990
1991 sighup_argv = argv;
1992
1993 /* Set up the version number. Set up the leading 'E' for the external form of
1994 message ids, set the pointer to the internal form, and initialize it to
1995 indicate no message being processed. */
1996
1997 version_init();
1998 message_id_option[0] = '-';
1999 message_id_external = message_id_option + 1;
2000 message_id_external[0] = 'E';
2001 message_id = message_id_external + 1;
2002 message_id[0] = 0;
2003
2004 /* Set the umask to zero so that any files Exim creates using open() are
2005 created with the modes that it specifies. NOTE: Files created with fopen() have
2006 a problem, which was not recognized till rather late (February 2006). With this
2007 umask, such files will be world writeable. (They are all content scanning files
2008 in the spool directory, which isn't world-accessible, so this is not a
2009 disaster, but it's untidy.) I don't want to change this overall setting,
2010 however, because it will interact badly with the open() calls. Instead, there's
2011 now a function called modefopen() that fiddles with the umask while calling
2012 fopen(). */
2013
2014 (void)umask(0);
2015
2016 /* Precompile the regular expression for matching a message id. Keep this in
2017 step with the code that generates ids in the accept.c module. We need to do
2018 this here, because the -M options check their arguments for syntactic validity
2019 using mac_ismsgid, which uses this. */
2020
2021 regex_ismsgid =
2022   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
2023
2024 /* Precompile the regular expression that is used for matching an SMTP error
2025 code, possibly extended, at the start of an error message. Note that the
2026 terminating whitespace character is included. */
2027
2028 regex_smtp_code =
2029   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
2030     FALSE, TRUE);
2031
2032 #ifdef WHITELIST_D_MACROS
2033 /* Precompile the regular expression used to filter the content of macros
2034 given to -D for permissibility. */
2035
2036 regex_whitelisted_macro =
2037   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
2038 #endif
2039
2040 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
2041
2042 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
2043 this seems to be a generally accepted convention, since one finds symbolic
2044 links called "mailq" in standard OS configurations. */
2045
2046 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
2047     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
2048   {
2049   list_queue = TRUE;
2050   receiving_message = FALSE;
2051   called_as = US"-mailq";
2052   }
2053
2054 /* If the program is called as "rmail" treat it as equivalent to
2055 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
2056 i.e. preventing a single dot on a line from terminating the message, and
2057 returning with zero return code, even in cases of error (provided an error
2058 message has been sent). */
2059
2060 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
2061     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
2062   {
2063   f.dot_ends = FALSE;
2064   called_as = US"-rmail";
2065   errors_sender_rc = EXIT_SUCCESS;
2066   }
2067
2068 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
2069 this is a smail convention. */
2070
2071 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
2072     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
2073   {
2074   smtp_input = smtp_batched_input = TRUE;
2075   called_as = US"-rsmtp";
2076   }
2077
2078 /* If the program is called as "runq" treat it as equivalent to "exim -q";
2079 this is a smail convention. */
2080
2081 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
2082     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
2083   {
2084   queue_interval = 0;
2085   receiving_message = FALSE;
2086   called_as = US"-runq";
2087   }
2088
2089 /* If the program is called as "newaliases" treat it as equivalent to
2090 "exim -bi"; this is a sendmail convention. */
2091
2092 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
2093     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
2094   {
2095   bi_option = TRUE;
2096   receiving_message = FALSE;
2097   called_as = US"-newaliases";
2098   }
2099
2100 /* Save the original effective uid for a couple of uses later. It should
2101 normally be root, but in some esoteric environments it may not be. */
2102
2103 original_euid = geteuid();
2104 original_egid = getegid();
2105
2106 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
2107 to be the same as the real ones. This makes a difference only if Exim is setuid
2108 (or setgid) to something other than root, which could be the case in some
2109 special configurations. */
2110
2111 real_uid = getuid();
2112 real_gid = getgid();
2113
2114 if (real_uid == root_uid)
2115   {
2116   if ((rv = setgid(real_gid)))
2117     exim_fail("exim: setgid(%ld) failed: %s\n",
2118         (long int)real_gid, strerror(errno));
2119   if ((rv = setuid(real_uid)))
2120     exim_fail("exim: setuid(%ld) failed: %s\n",
2121         (long int)real_uid, strerror(errno));
2122   }
2123
2124 /* If neither the original real uid nor the original euid was root, Exim is
2125 running in an unprivileged state. */
2126
2127 unprivileged = (real_uid != root_uid && original_euid != root_uid);
2128
2129 /* For most of the args-parsing we need to use permanent pool memory */
2130  {
2131  int old_pool = store_pool;
2132  store_pool = POOL_PERM;
2133
2134 /* Scan the program's arguments. Some can be dealt with right away; others are
2135 simply recorded for checking and handling afterwards. Do a high-level switch
2136 on the second character (the one after '-'), to save some effort. */
2137
2138  for (i = 1; i < argc; i++)
2139   {
2140   BOOL badarg = FALSE;
2141   uschar * arg = argv[i];
2142   uschar * argrest;
2143   int switchchar;
2144
2145   /* An argument not starting with '-' is the start of a recipients list;
2146   break out of the options-scanning loop. */
2147
2148   if (arg[0] != '-')
2149     {
2150     recipients_arg = i;
2151     break;
2152     }
2153
2154   /* An option consisting of -- terminates the options */
2155
2156   if (Ustrcmp(arg, "--") == 0)
2157     {
2158     recipients_arg = i + 1;
2159     break;
2160     }
2161
2162   /* Handle flagged options */
2163
2164   switchchar = arg[1];
2165   argrest = arg+2;
2166
2167   /* Make all -ex options synonymous with -oex arguments, since that
2168   is assumed by various callers. Also make -qR options synonymous with -R
2169   options, as that seems to be required as well. Allow for -qqR too, and
2170   the same for -S options. */
2171
2172   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
2173       Ustrncmp(arg+1, "qR", 2) == 0 ||
2174       Ustrncmp(arg+1, "qS", 2) == 0)
2175     {
2176     switchchar = arg[2];
2177     argrest++;
2178     }
2179   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
2180     {
2181     switchchar = arg[3];
2182     argrest += 2;
2183     f.queue_2stage = TRUE;
2184     }
2185
2186   /* Make -r synonymous with -f, since it is a documented alias */
2187
2188   else if (arg[1] == 'r') switchchar = 'f';
2189
2190   /* Make -ov synonymous with -v */
2191
2192   else if (Ustrcmp(arg, "-ov") == 0)
2193     {
2194     switchchar = 'v';
2195     argrest++;
2196     }
2197
2198   /* deal with --option_aliases */
2199   else if (switchchar == '-')
2200     {
2201     if (Ustrcmp(argrest, "help") == 0)
2202       {
2203       usage_wanted = TRUE;
2204       break;
2205       }
2206     else if (Ustrcmp(argrest, "version") == 0)
2207       {
2208       switchchar = 'b';
2209       argrest = US"V";
2210       }
2211     }
2212
2213   /* High-level switch on active initial letter */
2214
2215   switch(switchchar)
2216     {
2217
2218     /* sendmail uses -Ac and -Am to control which .cf file is used;
2219     we ignore them. */
2220     case 'A':
2221     if (!*argrest) { badarg = TRUE; break; }
2222     else
2223       {
2224       BOOL ignore = FALSE;
2225       switch (*argrest)
2226         {
2227         case 'c':
2228         case 'm':
2229           if (*(argrest + 1) == '\0')
2230             ignore = TRUE;
2231           break;
2232         }
2233       if (!ignore) badarg = TRUE;
2234       }
2235     break;
2236
2237     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2238     so has no need of it. */
2239
2240     case 'B':
2241     if (!*argrest) i++;       /* Skip over the type */
2242     break;
2243
2244
2245     case 'b':
2246       {
2247       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2248
2249       switch (*argrest++)
2250         {
2251         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2252            -bdf: Ditto, but in the foreground.
2253         */
2254         case 'd':
2255           f.daemon_listen = TRUE;
2256           if (*argrest == 'f') f.background_daemon = FALSE;
2257           else if (*argrest) badarg = TRUE;
2258           break;
2259
2260         /* -be:  Run in expansion test mode
2261            -bem: Ditto, but read a message from a file first
2262         */
2263         case 'e':
2264           expansion_test = checking = TRUE;
2265           if (*argrest == 'm')
2266             {
2267             if (++i >= argc) { badarg = TRUE; break; }
2268             expansion_test_message = argv[i];
2269             argrest++;
2270             }
2271           if (*argrest) badarg = TRUE;
2272           break;
2273
2274         /* -bF:  Run system filter test */
2275         case 'F':
2276           filter_test |= checking = FTEST_SYSTEM;
2277           if (*argrest) badarg = TRUE;
2278           else if (++i < argc) filter_test_sfile = argv[i];
2279           else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2280           break;
2281
2282         /* -bf:  Run user filter test
2283            -bfd: Set domain for filter testing
2284            -bfl: Set local part for filter testing
2285            -bfp: Set prefix for filter testing
2286            -bfs: Set suffix for filter testing
2287         */
2288         case 'f':
2289           if (!*argrest)
2290             {
2291             filter_test |= checking = FTEST_USER;
2292             if (++i < argc) filter_test_ufile = argv[i];
2293             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2294             }
2295           else
2296             {
2297             if (++i >= argc)
2298               exim_fail("exim: string expected after %s\n", arg);
2299             if (Ustrcmp(argrest, "d") == 0) ftest_domain = exim_str_fail_toolong(argv[i], EXIM_DOMAINNAME_MAX, "-bfd");
2300             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfl");
2301             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfp");
2302             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfs");
2303             else badarg = TRUE;
2304             }
2305           break;
2306
2307         /* -bh: Host checking - an IP address must follow. */
2308         case 'h':
2309           if (!*argrest || Ustrcmp(argrest, "c") == 0)
2310             {
2311             if (++i >= argc) { badarg = TRUE; break; }
2312             sender_host_address = string_copy_taint(
2313                   exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-bh"),
2314                   GET_TAINTED);
2315             host_checking = checking = f.log_testing_mode = TRUE;
2316             f.host_checking_callout = *argrest == 'c';
2317             message_logs = FALSE;
2318             }
2319           else badarg = TRUE;
2320           break;
2321
2322         /* -bi: This option is used by sendmail to initialize *the* alias file,
2323         though it has the -oA option to specify a different file. Exim has no
2324         concept of *the* alias file, but since Sun's YP make script calls
2325         sendmail this way, some support must be provided. */
2326         case 'i':
2327           if (!*argrest) bi_option = TRUE;
2328           else badarg = TRUE;
2329           break;
2330
2331         /* -bI: provide information, of the type to follow after a colon.
2332         This is an Exim flag. */
2333         case 'I':
2334           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2335             {
2336             uschar *p = argrest+1;
2337             info_flag = CMDINFO_HELP;
2338             if (Ustrlen(p))
2339               if (strcmpic(p, CUS"sieve") == 0)
2340                 {
2341                 info_flag = CMDINFO_SIEVE;
2342                 info_stdout = TRUE;
2343                 }
2344               else if (strcmpic(p, CUS"dscp") == 0)
2345                 {
2346                 info_flag = CMDINFO_DSCP;
2347                 info_stdout = TRUE;
2348                 }
2349               else if (strcmpic(p, CUS"help") == 0)
2350                 info_stdout = TRUE;
2351             }
2352           else badarg = TRUE;
2353           break;
2354
2355         /* -bm: Accept and deliver message - the default option. Reinstate
2356         receiving_message, which got turned off for all -b options.
2357            -bmalware: test the filename given for malware */
2358         case 'm':
2359           if (!*argrest) receiving_message = TRUE;
2360           else if (Ustrcmp(argrest, "alware") == 0)
2361             {
2362             if (++i >= argc) { badarg = TRUE; break; }
2363             checking = TRUE;
2364             malware_test_file = argv[i];
2365             }
2366           else badarg = TRUE;
2367           break;
2368
2369         /* -bnq: For locally originating messages, do not qualify unqualified
2370         addresses. In the envelope, this causes errors; in header lines they
2371         just get left. */
2372         case 'n':
2373           if (Ustrcmp(argrest, "q") == 0)
2374             {
2375             f.allow_unqualified_sender = FALSE;
2376             f.allow_unqualified_recipient = FALSE;
2377             }
2378           else badarg = TRUE;
2379           break;
2380
2381         /* -bpxx: List the contents of the mail queue, in various forms. If
2382         the option is -bpc, just a queue count is needed. Otherwise, if the
2383         first letter after p is r, then order is random. */
2384         case 'p':
2385           if (*argrest == 'c')
2386             {
2387             count_queue = TRUE;
2388             if (*++argrest) badarg = TRUE;
2389             break;
2390             }
2391
2392           if (*argrest == 'r')
2393             {
2394             list_queue_option = 8;
2395             argrest++;
2396             }
2397           else list_queue_option = 0;
2398
2399           list_queue = TRUE;
2400
2401           /* -bp: List the contents of the mail queue, top-level only */
2402
2403           if (!*argrest) {}
2404
2405           /* -bpu: List the contents of the mail queue, top-level undelivered */
2406
2407           else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2408
2409           /* -bpa: List the contents of the mail queue, including all delivered */
2410
2411           else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2412
2413           /* Unknown after -bp[r] */
2414
2415           else badarg = TRUE;
2416           break;
2417
2418
2419         /* -bP: List the configuration variables given as the address list.
2420         Force -v, so configuration errors get displayed. */
2421         case 'P':
2422
2423           /* -bP config: we need to setup here, because later,
2424           when list_options is checked, the config is read already */
2425           if (*argrest)
2426             badarg = TRUE;
2427           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2428             {
2429             list_config = TRUE;
2430             readconf_save_config(version_string);
2431             }
2432           else
2433             {
2434             list_options = TRUE;
2435             debug_selector |= D_v;
2436             debug_file = stderr;
2437             }
2438           break;
2439
2440         /* -brt: Test retry configuration lookup */
2441         case 'r':
2442           if (Ustrcmp(argrest, "t") == 0)
2443             {
2444             checking = TRUE;
2445             test_retry_arg = i + 1;
2446             goto END_ARG;
2447             }
2448
2449           /* -brw: Test rewrite configuration */
2450
2451           else if (Ustrcmp(argrest, "w") == 0)
2452             {
2453             checking = TRUE;
2454             test_rewrite_arg = i + 1;
2455             goto END_ARG;
2456             }
2457           else badarg = TRUE;
2458           break;
2459
2460         /* -bS: Read SMTP commands on standard input, but produce no replies -
2461         all errors are reported by sending messages. */
2462         case 'S':
2463           if (!*argrest)
2464             smtp_input = smtp_batched_input = receiving_message = TRUE;
2465           else badarg = TRUE;
2466           break;
2467
2468         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2469         on standard output. */
2470         case 's':
2471           if (!*argrest) smtp_input = receiving_message = TRUE;
2472           else badarg = TRUE;
2473           break;
2474
2475         /* -bt: address testing mode */
2476         case 't':
2477           if (!*argrest)
2478             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2479           else badarg = TRUE;
2480           break;
2481
2482         /* -bv: verify addresses */
2483         case 'v':
2484           if (!*argrest)
2485             verify_address_mode = checking = f.log_testing_mode = TRUE;
2486
2487         /* -bvs: verify sender addresses */
2488
2489           else if (Ustrcmp(argrest, "s") == 0)
2490             {
2491             verify_address_mode = checking = f.log_testing_mode = TRUE;
2492             verify_as_sender = TRUE;
2493             }
2494           else badarg = TRUE;
2495           break;
2496
2497         /* -bV: Print version string and support details */
2498         case 'V':
2499           if (!*argrest)
2500             {
2501             printf("Exim version %s #%s built %s\n", version_string,
2502               version_cnumber, version_date);
2503             printf("%s\n", CS version_copyright);
2504             version_printed = TRUE;
2505             show_whats_supported(TRUE);
2506             f.log_testing_mode = TRUE;
2507             }
2508           else badarg = TRUE;
2509           break;
2510
2511         /* -bw: inetd wait mode, accept a listening socket as stdin */
2512         case 'w':
2513           f.inetd_wait_mode = TRUE;
2514           f.background_daemon = FALSE;
2515           f.daemon_listen = TRUE;
2516           if (*argrest)
2517             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2518               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2519           break;
2520
2521         default:
2522           badarg = TRUE;
2523           break;
2524         }
2525       break;
2526       }
2527
2528
2529     /* -C: change configuration file list; ignore if it isn't really
2530     a change! Enforce a prefix check if required. */
2531
2532     case 'C':
2533     if (!*argrest)
2534       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2535     if (Ustrcmp(config_main_filelist, argrest) != 0)
2536       {
2537       #ifdef ALT_CONFIG_PREFIX
2538       int sep = 0;
2539       int len = Ustrlen(ALT_CONFIG_PREFIX);
2540       const uschar *list = argrest;
2541       uschar *filename;
2542       /* The argv is untainted, so big_buffer (also untainted) is ok to use */
2543       while((filename = string_nextinlist(&list, &sep, big_buffer,
2544              big_buffer_size)))
2545         if (  (  Ustrlen(filename) < len
2546               || Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0
2547               || Ustrstr(filename, "/../") != NULL
2548               )
2549            && (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid)
2550            )
2551           exim_fail("-C Permission denied\n");
2552       #endif
2553       if (real_uid != root_uid)
2554         {
2555         #ifdef TRUSTED_CONFIG_LIST
2556
2557         if (real_uid != exim_uid
2558             #ifdef CONFIGURE_OWNER
2559             && real_uid != config_uid
2560             #endif
2561             )
2562           f.trusted_config = FALSE;
2563         else
2564           {
2565           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2566           if (trust_list)
2567             {
2568             struct stat statbuf;
2569
2570             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2571                 (statbuf.st_uid != root_uid        /* owner not root */
2572                  #ifdef CONFIGURE_OWNER
2573                  && statbuf.st_uid != config_uid   /* owner not the special one */
2574                  #endif
2575                    ) ||                            /* or */
2576                 (statbuf.st_gid != root_gid        /* group not root */
2577                  #ifdef CONFIGURE_GROUP
2578                  && statbuf.st_gid != config_gid   /* group not the special one */
2579                  #endif
2580                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2581                    ) ||                            /* or */
2582                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2583               {
2584               f.trusted_config = FALSE;
2585               fclose(trust_list);
2586               }
2587             else
2588               {
2589               /* Well, the trust list at least is up to scratch... */
2590               rmark reset_point;
2591               uschar *trusted_configs[32];
2592               int nr_configs = 0;
2593               int i = 0;
2594               int old_pool = store_pool;
2595               store_pool = POOL_MAIN;
2596
2597               reset_point = store_mark();
2598               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2599                 {
2600                 uschar *start = big_buffer, *nl;
2601                 while (*start && isspace(*start))
2602                 start++;
2603                 if (*start != '/')
2604                   continue;
2605                 nl = Ustrchr(start, '\n');
2606                 if (nl)
2607                   *nl = 0;
2608                 trusted_configs[nr_configs++] = string_copy(start);
2609                 if (nr_configs == nelem(trusted_configs))
2610                   break;
2611                 }
2612               fclose(trust_list);
2613
2614               if (nr_configs)
2615                 {
2616                 int sep = 0;
2617                 const uschar *list = argrest;
2618                 uschar *filename;
2619                 while (f.trusted_config && (filename = string_nextinlist(&list,
2620                         &sep, big_buffer, big_buffer_size)))
2621                   {
2622                   for (i=0; i < nr_configs; i++)
2623                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2624                       break;
2625                   if (i == nr_configs)
2626                     {
2627                     f.trusted_config = FALSE;
2628                     break;
2629                     }
2630                   }
2631                 }
2632               else      /* No valid prefixes found in trust_list file. */
2633                 f.trusted_config = FALSE;
2634               store_reset(reset_point);
2635               store_pool = old_pool;
2636               }
2637             }
2638           else          /* Could not open trust_list file. */
2639             f.trusted_config = FALSE;
2640           }
2641       #else
2642         /* Not root; don't trust config */
2643         f.trusted_config = FALSE;
2644       #endif
2645         }
2646
2647       config_main_filelist = argrest;
2648       f.config_changed = TRUE;
2649       }
2650     break;
2651
2652
2653     /* -D: set up a macro definition */
2654
2655     case 'D':
2656 #ifdef DISABLE_D_OPTION
2657       exim_fail("exim: -D is not available in this Exim binary\n");
2658 #else
2659       {
2660       int ptr = 0;
2661       macro_item *m;
2662       uschar name[24];
2663       uschar *s = argrest;
2664
2665       opt_D_used = TRUE;
2666       while (isspace(*s)) s++;
2667
2668       if (*s < 'A' || *s > 'Z')
2669         exim_fail("exim: macro name set by -D must start with "
2670           "an upper case letter\n");
2671
2672       while (isalnum(*s) || *s == '_')
2673         {
2674         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2675         s++;
2676         }
2677       name[ptr] = 0;
2678       if (ptr == 0) { badarg = TRUE; break; }
2679       while (isspace(*s)) s++;
2680       if (*s != 0)
2681         {
2682         if (*s++ != '=') { badarg = TRUE; break; }
2683         while (isspace(*s)) s++;
2684         }
2685
2686       for (m = macros_user; m; m = m->next)
2687         if (Ustrcmp(m->name, name) == 0)
2688           exim_fail("exim: duplicated -D in command line\n");
2689
2690       m = macro_create(name, s, TRUE);
2691
2692       if (clmacro_count >= MAX_CLMACROS)
2693         exim_fail("exim: too many -D options on command line\n");
2694       clmacros[clmacro_count++] =
2695         string_sprintf("-D%s=%s", m->name, m->replacement);
2696       }
2697     #endif
2698     break;
2699
2700     case 'd':
2701
2702     /* -dropcr: Set this option.  Now a no-op, retained for compatibility only. */
2703
2704     if (Ustrcmp(argrest, "ropcr") == 0)
2705       {
2706       /* drop_cr = TRUE; */
2707       }
2708
2709     /* -dp: Set up a debug pretrigger buffer with given size. */
2710
2711     else if (Ustrcmp(argrest, "p") == 0)
2712       if (++i >= argc)
2713         badarg = TRUE;
2714       else
2715         debug_pretrigger_setup(argv[i]);
2716
2717     /* -dt: Set a debug trigger selector */
2718
2719     else if (Ustrncmp(argrest, "t=", 2) == 0)
2720       dtrigger_selector = (unsigned int) Ustrtol(argrest + 2, NULL, 0);
2721
2722     /* -d: Set debug level (see also -v below).
2723     If -dd is used, debugging subprocesses of the daemon is disabled. */
2724
2725     else
2726       {
2727       /* Use an intermediate variable so that we don't set debugging while
2728       decoding the debugging bits. */
2729
2730       unsigned int selector = D_default;
2731       debug_selector = 0;
2732       debug_file = NULL;
2733       if (*argrest == 'd')
2734         {
2735         f.debug_daemon = TRUE;
2736         argrest++;
2737         }
2738       if (*argrest)
2739         decode_bits(&selector, 1, debug_notall, argrest,
2740           debug_options, debug_options_count, US"debug", 0);
2741       debug_selector = selector;
2742       }
2743     break;
2744
2745
2746     /* -E: This is a local error message. This option is not intended for
2747     external use at all, but is not restricted to trusted callers because it
2748     does no harm (just suppresses certain error messages) and if Exim is run
2749     not setuid root it won't always be trusted when it generates error
2750     messages using this option. If there is a message id following -E, point
2751     message_reference at it, for logging. */
2752
2753     case 'E':
2754     f.local_error_message = TRUE;
2755     if (mac_ismsgid(argrest)) message_reference = argrest;
2756     break;
2757
2758
2759     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2760     option, so it looks as if historically the -oex options are also callable
2761     without the leading -o. So we have to accept them. Before the switch,
2762     anything starting -oe has been converted to -e. Exim does not support all
2763     of the sendmail error options. */
2764
2765     case 'e':
2766     if (Ustrcmp(argrest, "e") == 0)
2767       {
2768       arg_error_handling = ERRORS_SENDER;
2769       errors_sender_rc = EXIT_SUCCESS;
2770       }
2771     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2772     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2773     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2774     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2775     else badarg = TRUE;
2776     break;
2777
2778
2779     /* -F: Set sender's full name, used instead of the gecos entry from
2780     the password file. Since users can usually alter their gecos entries,
2781     there's no security involved in using this instead. The data can follow
2782     the -F or be in the next argument. */
2783
2784     case 'F':
2785     if (!*argrest)
2786       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2787     originator_name = string_copy_taint(
2788                   exim_str_fail_toolong(argrest, EXIM_HUMANNAME_MAX, "-F"),
2789                   GET_TAINTED);
2790     f.sender_name_forced = TRUE;
2791     break;
2792
2793
2794     /* -f: Set sender's address - this value is only actually used if Exim is
2795     run by a trusted user, or if untrusted_set_sender is set and matches the
2796     address, except that the null address can always be set by any user. The
2797     test for this happens later, when the value given here is ignored when not
2798     permitted. For an untrusted user, the actual sender is still put in Sender:
2799     if it doesn't match the From: header (unless no_local_from_check is set).
2800     The data can follow the -f or be in the next argument. The -r switch is an
2801     obsolete form of -f but since there appear to be programs out there that
2802     use anything that sendmail has ever supported, better accept it - the
2803     synonymizing is done before the switch above.
2804
2805     At this stage, we must allow domain literal addresses, because we don't
2806     know what the setting of allow_domain_literals is yet. Ditto for trailing
2807     dots and strip_trailing_dot. */
2808
2809     case 'f':
2810       {
2811       int dummy_start, dummy_end;
2812       uschar *errmess;
2813       if (!*argrest)
2814         if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
2815       (void) exim_str_fail_toolong(argrest, EXIM_DISPLAYMAIL_MAX, "-f");
2816       if (!*argrest)
2817         *(sender_address = store_get(1, GET_UNTAINTED)) = '\0';  /* Ensure writeable memory */
2818       else
2819         {
2820         uschar * temp = argrest + Ustrlen(argrest) - 1;
2821         while (temp >= argrest && isspace(*temp)) temp--;
2822         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2823         allow_domain_literals = TRUE;
2824         strip_trailing_dot = TRUE;
2825 #ifdef SUPPORT_I18N
2826         allow_utf8_domains = TRUE;
2827 #endif
2828         if (!(sender_address = parse_extract_address(argrest, &errmess,
2829                   &dummy_start, &dummy_end, &sender_address_domain, TRUE)))
2830           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2831
2832         sender_address = string_copy_taint(sender_address, GET_TAINTED);
2833 #ifdef SUPPORT_I18N
2834         message_smtputf8 =  string_is_utf8(sender_address);
2835         allow_utf8_domains = FALSE;
2836 #endif
2837         allow_domain_literals = FALSE;
2838         strip_trailing_dot = FALSE;
2839         }
2840       f.sender_address_forced = TRUE;
2841       }
2842     break;
2843
2844     /* -G: sendmail invocation to specify that it's a gateway submission and
2845     sendmail may complain about problems instead of fixing them.
2846     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2847     not at this time complain about problems. */
2848
2849     case 'G':
2850     flag_G = TRUE;
2851     break;
2852
2853     /* -h: Set the hop count for an incoming message. Exim does not currently
2854     support this; it always computes it by counting the Received: headers.
2855     To put it in will require a change to the spool header file format. */
2856
2857     case 'h':
2858     if (!*argrest)
2859       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2860     if (!isdigit(*argrest)) badarg = TRUE;
2861     break;
2862
2863
2864     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2865     not to be documented for sendmail but mailx (at least) uses it) */
2866
2867     case 'i':
2868     if (!*argrest) f.dot_ends = FALSE; else badarg = TRUE;
2869     break;
2870
2871
2872     /* -L: set the identifier used for syslog; equivalent to setting
2873     syslog_processname in the config file, but needs to be an admin option. */
2874
2875     case 'L':
2876     if (!*argrest)
2877       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2878     if ((sz = Ustrlen(argrest)) > 32)
2879       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2880     if (sz < 1)
2881       exim_fail("exim: the -L syslog name is too short\n");
2882     cmdline_syslog_name = string_copy_taint(argrest, GET_TAINTED);
2883     break;
2884
2885     case 'M':
2886     receiving_message = FALSE;
2887
2888     /* -MC:  continue delivery of another message via an existing open
2889     file descriptor. This option is used for an internal call by the
2890     smtp transport when there is a pending message waiting to go to an
2891     address to which it has got a connection. Five subsequent arguments are
2892     required: transport name, host name, IP address, sequence number, and
2893     message_id. Transports may decline to create new processes if the sequence
2894     number gets too big. The channel is stdin. This (-MC) must be the last
2895     argument. There's a subsequent check that the real-uid is privileged.
2896
2897     If we are running in the test harness. delay for a bit, to let the process
2898     that set this one up complete. This makes for repeatability of the logging,
2899     etc. output. */
2900
2901     if (Ustrcmp(argrest, "C") == 0)
2902       {
2903       union sockaddr_46 interface_sock;
2904       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2905
2906       if (argc != i + 6)
2907         exim_fail("exim: too many or too few arguments after -MC\n");
2908
2909       if (msg_action_arg >= 0)
2910         exim_fail("exim: incompatible arguments\n");
2911
2912       continue_transport = string_copy_taint(
2913         exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-C internal transport"),
2914         GET_TAINTED);
2915       continue_hostname = string_copy_taint(
2916         exim_str_fail_toolong(argv[++i], EXIM_HOSTNAME_MAX, "-C internal hostname"),
2917         GET_TAINTED);
2918       continue_host_address = string_copy_taint(
2919         exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-C internal hostaddr"),
2920         GET_TAINTED);
2921       continue_sequence = Uatoi(argv[++i]);
2922       msg_action = MSG_DELIVER;
2923       msg_action_arg = ++i;
2924       forced_delivery = TRUE;
2925       queue_run_pid = passed_qr_pid;
2926       queue_run_pipe = passed_qr_pipe;
2927
2928       if (!mac_ismsgid(argv[i]))
2929         exim_fail("exim: malformed message id %s after -MC option\n",
2930           argv[i]);
2931
2932       /* Set up $sending_ip_address and $sending_port, unless proxied */
2933
2934       if (!continue_proxy_cipher)
2935         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2936             &size) == 0)
2937           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2938             &sending_port);
2939         else
2940           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2941             strerror(errno));
2942
2943       testharness_pause_ms(500);
2944       break;
2945       }
2946
2947     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2948       {
2949       switch(argrest[1])
2950         {
2951     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2952     precedes -MC (see above). The flag indicates that the host to which
2953     Exim is connected has accepted an AUTH sequence. */
2954
2955         case 'A': f.smtp_authenticated = TRUE; break;
2956
2957     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2958        that exim is connected to supports the esmtp extension DSN */
2959
2960         case 'D': smtp_peer_options |= OPTION_DSN; break;
2961
2962     /* -MCd: for debug, set a process-purpose string */
2963
2964         case 'd': if (++i < argc)
2965                     process_purpose = string_copy_taint(
2966                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCd"),
2967                       GET_TAINTED);
2968                   else badarg = TRUE;
2969                   break;
2970
2971     /* -MCG: set the queue name, to a non-default value. Arguably, anything
2972        from the commandline should be tainted - but we will need an untainted
2973        value for the spoolfile when doing a -odi delivery process. */
2974
2975         case 'G': if (++i < argc) queue_name = string_copy_taint(
2976                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCG"),
2977                       GET_UNTAINTED);
2978                   else badarg = TRUE;
2979                   break;
2980
2981     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2982
2983         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2984
2985 #ifdef EXPERIMENTAL_ESMTP_LIMITS
2986     /* -MCL: peer used LIMITS RCPTMAX and/or RCPTDOMAINMAX */
2987         case 'L': if (++i < argc) continue_limit_mail = Uatoi(argv[i]);
2988                   else badarg = TRUE;
2989                   if (++i < argc) continue_limit_rcpt = Uatoi(argv[i]);
2990                   else badarg = TRUE;
2991                   if (++i < argc) continue_limit_rcptdom = Uatoi(argv[i]);
2992                   else badarg = TRUE;
2993                   break;
2994 #endif
2995
2996     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2997     it preceded -MC (see above) */
2998
2999         case 'P': smtp_peer_options |= OPTION_PIPE; break;
3000
3001 #ifdef SUPPORT_SOCKS
3002     /* -MCp: Socks proxy in use; nearside IP, port, external IP, port */
3003         case 'p': proxy_session = TRUE;
3004                   if (++i < argc)
3005                     {
3006                     proxy_local_address = string_copy_taint(argv[i], GET_TAINTED);
3007                     if (++i < argc)
3008                       {
3009                       proxy_local_port = Uatoi(argv[i]);
3010                       if (++i < argc)
3011                         {
3012                         proxy_external_address = string_copy_taint(argv[i], GET_TAINTED);
3013                         if (++i < argc)
3014                           {
3015                           proxy_external_port = Uatoi(argv[i]);
3016                           break;
3017                     } } } }
3018                   badarg = TRUE;
3019                   break;
3020 #endif
3021     /* -MCQ: pass on the pid of the queue-running process that started
3022     this chain of deliveries and the fd of its synchronizing pipe; this
3023     is useful only when it precedes -MC (see above) */
3024
3025         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
3026                   else badarg = TRUE;
3027                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
3028                   else badarg = TRUE;
3029                   break;
3030
3031     /* -MCq: do a quota check on the given recipient for the given size
3032     of message.  Separate from -MC. */
3033         case 'q': rcpt_verify_quota = TRUE;
3034                   if (++i < argc) message_size = Uatoi(argv[i]);
3035                   else badarg = TRUE;
3036                   break;
3037
3038     /* -MCS: set the smtp_use_size flag; this is useful only when it
3039     precedes -MC (see above) */
3040
3041         case 'S': smtp_peer_options |= OPTION_SIZE; break;
3042
3043 #ifndef DISABLE_TLS
3044     /* -MCs: used with -MCt; SNI was sent */
3045     /* -MCr: ditto, DANE */
3046
3047         case 'r':
3048         case 's': if (++i < argc)
3049                     {
3050                     continue_proxy_sni = string_copy_taint(
3051                       exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-MCr/-MCs"),
3052                       GET_TAINTED);
3053                     if (argrest[1] == 'r') continue_proxy_dane = TRUE;
3054                     }
3055                   else badarg = TRUE;
3056                   break;
3057
3058     /* -MCt: similar to -MCT below but the connection is still open
3059     via a proxy process which handles the TLS context and coding.
3060     Require three arguments for the proxied local address and port,
3061     and the TLS cipher. */
3062
3063         case 't': if (++i < argc)
3064                     sending_ip_address = string_copy_taint(
3065                       exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-MCt IP"),
3066                       GET_TAINTED);
3067                   else badarg = TRUE;
3068                   if (++i < argc)
3069                     sending_port = (int)(Uatol(argv[i]));
3070                   else badarg = TRUE;
3071                   if (++i < argc)
3072                     continue_proxy_cipher = string_copy_taint(
3073                       exim_str_fail_toolong(argv[i], EXIM_CIPHERNAME_MAX, "-MCt cipher"),
3074                       GET_TAINTED);
3075                   else badarg = TRUE;
3076                   /*FALLTHROUGH*/
3077
3078     /* -MCT: set the tls_offered flag; this is useful only when it
3079     precedes -MC (see above). The flag indicates that the host to which
3080     Exim is connected has offered TLS support. */
3081
3082         case 'T': smtp_peer_options |= OPTION_TLS; break;
3083 #endif
3084
3085         default:  badarg = TRUE; break;
3086         }
3087       break;
3088       }
3089
3090     /* -M[x]: various operations on the following list of message ids:
3091        -M    deliver the messages, ignoring next retry times and thawing
3092        -Mc   deliver the messages, checking next retry times, no thawing
3093        -Mf   freeze the messages
3094        -Mg   give up on the messages
3095        -Mt   thaw the messages
3096        -Mrm  remove the messages
3097     In the above cases, this must be the last option. There are also the
3098     following options which are followed by a single message id, and which
3099     act on that message. Some of them use the "recipient" addresses as well.
3100        -Mar  add recipient(s)
3101        -MG   move to a different queue
3102        -Mmad mark all recipients delivered
3103        -Mmd  mark recipients(s) delivered
3104        -Mes  edit sender
3105        -Mset load a message for use with -be
3106        -Mvb  show body
3107        -Mvc  show copy (of whole message, in RFC 2822 format)
3108        -Mvh  show header
3109        -Mvl  show log
3110     */
3111
3112     else if (!*argrest)
3113       {
3114       msg_action = MSG_DELIVER;
3115       forced_delivery = f.deliver_force_thaw = TRUE;
3116       }
3117     else if (Ustrcmp(argrest, "ar") == 0)
3118       {
3119       msg_action = MSG_ADD_RECIPIENT;
3120       one_msg_action = TRUE;
3121       }
3122     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
3123     else if (Ustrcmp(argrest, "es") == 0)
3124       {
3125       msg_action = MSG_EDIT_SENDER;
3126       one_msg_action = TRUE;
3127       }
3128     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
3129     else if (Ustrcmp(argrest, "g") == 0)
3130       {
3131       msg_action = MSG_DELIVER;
3132       deliver_give_up = TRUE;
3133       }
3134    else if (Ustrcmp(argrest, "G") == 0)
3135       {
3136       msg_action = MSG_SETQUEUE;
3137       queue_name_dest = string_copy_taint(
3138         exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-MG"),
3139         GET_TAINTED);
3140       }
3141     else if (Ustrcmp(argrest, "mad") == 0) msg_action = MSG_MARK_ALL_DELIVERED;
3142     else if (Ustrcmp(argrest, "md") == 0)
3143       {
3144       msg_action = MSG_MARK_DELIVERED;
3145       one_msg_action = TRUE;
3146       }
3147     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
3148     else if (Ustrcmp(argrest, "set") == 0)
3149       {
3150       msg_action = MSG_LOAD;
3151       one_msg_action = TRUE;
3152       }
3153     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
3154     else if (Ustrcmp(argrest, "vb") == 0)
3155       {
3156       msg_action = MSG_SHOW_BODY;
3157       one_msg_action = TRUE;
3158       }
3159     else if (Ustrcmp(argrest, "vc") == 0)
3160       {
3161       msg_action = MSG_SHOW_COPY;
3162       one_msg_action = TRUE;
3163       }
3164     else if (Ustrcmp(argrest, "vh") == 0)
3165       {
3166       msg_action = MSG_SHOW_HEADER;
3167       one_msg_action = TRUE;
3168       }
3169     else if (Ustrcmp(argrest, "vl") == 0)
3170       {
3171       msg_action = MSG_SHOW_LOG;
3172       one_msg_action = TRUE;
3173       }
3174     else { badarg = TRUE; break; }
3175
3176     /* All the -Mxx options require at least one message id. */
3177
3178     msg_action_arg = i + 1;
3179     if (msg_action_arg >= argc)
3180       exim_fail("exim: no message ids given after %s option\n", arg);
3181
3182     /* Some require only message ids to follow */
3183
3184     if (!one_msg_action)
3185       {
3186       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
3187         exim_fail("exim: malformed message id %s after %s option\n",
3188           argv[j], arg);
3189       goto END_ARG;   /* Remaining args are ids */
3190       }
3191
3192     /* Others require only one message id, possibly followed by addresses,
3193     which will be handled as normal arguments. */
3194
3195     else
3196       {
3197       if (!mac_ismsgid(argv[msg_action_arg]))
3198         exim_fail("exim: malformed message id %s after %s option\n",
3199           argv[msg_action_arg], arg);
3200       i++;
3201       }
3202     break;
3203
3204
3205     /* Some programs seem to call the -om option without the leading o;
3206     for sendmail it askes for "me too". Exim always does this. */
3207
3208     case 'm':
3209     if (*argrest) badarg = TRUE;
3210     break;
3211
3212
3213     /* -N: don't do delivery - a debugging option that stops transports doing
3214     their thing. It implies debugging at the D_v level. */
3215
3216     case 'N':
3217     if (!*argrest)
3218       {
3219       f.dont_deliver = TRUE;
3220       debug_selector |= D_v;
3221       debug_file = stderr;
3222       }
3223     else badarg = TRUE;
3224     break;
3225
3226
3227     /* -n: This means "don't alias" in sendmail, apparently.
3228     For normal invocations, it has no effect.
3229     It may affect some other options. */
3230
3231     case 'n':
3232     flag_n = TRUE;
3233     break;
3234
3235     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
3236     option to the specified value. This form uses long names. We need to handle
3237     -O option=value and -Ooption=value. */
3238
3239     case 'O':
3240     if (!*argrest)
3241       if (++i >= argc)
3242         exim_fail("exim: string expected after -O\n");
3243     break;
3244
3245     case 'o':
3246     switch (*argrest++)
3247       {
3248       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
3249       file" option). */
3250       case 'A':
3251         if (!*(alias_arg = argrest))
3252           if (i+1 < argc) alias_arg = argv[++i];
3253           else exim_fail("exim: string expected after -oA\n");
3254         break;
3255
3256       /* -oB: Set a connection message max value for remote deliveries */
3257       case 'B':
3258         {
3259         uschar * p = argrest;
3260         if (!*p)
3261           if (i+1 < argc && isdigit((argv[i+1][0])))
3262             p = argv[++i];
3263           else
3264             {
3265             connection_max_messages = 1;
3266             p = NULL;
3267             }
3268
3269         if (p)
3270           {
3271           if (!isdigit(*p))
3272             exim_fail("exim: number expected after -oB\n");
3273           connection_max_messages = Uatoi(p);
3274           }
3275         }
3276         break;
3277
3278       /* -odb: background delivery */
3279
3280       case 'd':
3281         if (Ustrcmp(argrest, "b") == 0)
3282           {
3283           f.synchronous_delivery = FALSE;
3284           arg_queue_only = FALSE;
3285           queue_only_set = TRUE;
3286           }
3287
3288       /* -odd: testsuite-only: add no inter-process delays */
3289
3290         else if (Ustrcmp(argrest, "d") == 0)
3291           f.testsuite_delays = FALSE;
3292
3293       /* -odf: foreground delivery (smail-compatible option); same effect as
3294          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3295       */
3296
3297         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3298           {
3299           f.synchronous_delivery = TRUE;
3300           arg_queue_only = FALSE;
3301           queue_only_set = TRUE;
3302           }
3303
3304       /* -odq: queue only */
3305
3306         else if (Ustrcmp(argrest, "q") == 0)
3307           {
3308           f.synchronous_delivery = FALSE;
3309           arg_queue_only = TRUE;
3310           queue_only_set = TRUE;
3311           }
3312
3313       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3314       but no remote delivery */
3315
3316         else if (Ustrcmp(argrest, "qs") == 0)
3317           {
3318           f.queue_smtp = TRUE;
3319           arg_queue_only = FALSE;
3320           queue_only_set = TRUE;
3321           }
3322         else badarg = TRUE;
3323         break;
3324
3325       /* -oex: Sendmail error flags. As these are also accepted without the
3326       leading -o prefix, for compatibility with vacation and other callers,
3327       they are handled with -e above. */
3328
3329       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3330          -oitrue: Another sendmail syntax for the same */
3331
3332       case 'i':
3333         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3334           f.dot_ends = FALSE;
3335         else badarg = TRUE;
3336         break;
3337
3338     /* -oM*: Set various characteristics for an incoming message; actually
3339     acted on for trusted callers only. */
3340
3341       case 'M':
3342         {
3343         if (i+1 >= argc)
3344           exim_fail("exim: data expected after -oM%s\n", argrest);
3345
3346         /* -oMa: Set sender host address */
3347
3348         if (Ustrcmp(argrest, "a") == 0)
3349           sender_host_address = string_copy_taint(
3350             exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-oMa"),
3351             GET_TAINTED);
3352
3353         /* -oMaa: Set authenticator name */
3354
3355         else if (Ustrcmp(argrest, "aa") == 0)
3356           sender_host_authenticated = string_copy_taint(
3357             exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-oMaa"),
3358             GET_TAINTED);
3359
3360         /* -oMas: setting authenticated sender */
3361
3362         else if (Ustrcmp(argrest, "as") == 0)
3363           authenticated_sender = string_copy_taint(
3364             exim_str_fail_toolong(argv[++i], EXIM_EMAILADDR_MAX, "-oMas"),
3365             GET_TAINTED);
3366
3367         /* -oMai: setting authenticated id */
3368
3369         else if (Ustrcmp(argrest, "ai") == 0)
3370           authenticated_id = string_copy_taint(
3371             exim_str_fail_toolong(argv[++i], EXIM_EMAILADDR_MAX, "-oMas"),
3372             GET_TAINTED);
3373
3374         /* -oMi: Set incoming interface address */
3375
3376         else if (Ustrcmp(argrest, "i") == 0)
3377           interface_address = string_copy_taint(
3378             exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-oMi"),
3379             GET_TAINTED);
3380
3381         /* -oMm: Message reference */
3382
3383         else if (Ustrcmp(argrest, "m") == 0)
3384           {
3385           if (!mac_ismsgid(argv[i+1]))
3386               exim_fail("-oMm must be a valid message ID\n");
3387           if (!f.trusted_config)
3388               exim_fail("-oMm must be called by a trusted user/config\n");
3389             message_reference = argv[++i];
3390           }
3391
3392         /* -oMr: Received protocol */
3393
3394         else if (Ustrcmp(argrest, "r") == 0)
3395
3396           if (received_protocol)
3397             exim_fail("received_protocol is set already\n");
3398           else
3399             received_protocol = string_copy_taint(
3400               exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-oMr"),
3401               GET_TAINTED);
3402
3403         /* -oMs: Set sender host name */
3404
3405         else if (Ustrcmp(argrest, "s") == 0)
3406           sender_host_name = string_copy_taint(
3407             exim_str_fail_toolong(argv[++i], EXIM_HOSTNAME_MAX, "-oMs"),
3408             GET_TAINTED);
3409
3410         /* -oMt: Set sender ident */
3411
3412         else if (Ustrcmp(argrest, "t") == 0)
3413           {
3414           sender_ident_set = TRUE;
3415           sender_ident = string_copy_taint(
3416             exim_str_fail_toolong(argv[++i], EXIM_IDENTUSER_MAX, "-oMt"),
3417             GET_TAINTED);
3418           }
3419
3420         /* Else a bad argument */
3421
3422         else
3423           badarg = TRUE;
3424         }
3425         break;
3426
3427       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3428       seem to call this as -m (undocumented), so that is also accepted (see
3429       above). */
3430       /* -oo: An ancient flag for old-style addresses which still seems to
3431       crop up in some calls (see in SCO). */
3432
3433       case 'm':
3434       case 'o':
3435         if (*argrest) badarg = TRUE;
3436         break;
3437
3438       /* -oP <name>: set pid file path for daemon
3439          -oPX:       delete pid file of daemon */
3440
3441       case 'P':
3442         if (!f.running_in_test_harness && real_uid != root_uid && real_uid != exim_uid)
3443           exim_fail("exim: only uid=%d or uid=%d can use -oP and -oPX "
3444                     "(uid=%d euid=%d | %d)\n",
3445                     root_uid, exim_uid, getuid(), geteuid(), real_uid);
3446         if (!*argrest) override_pid_file_path = argv[++i];
3447         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3448         else badarg = TRUE;
3449         break;
3450
3451
3452       /* -or <n>: set timeout for non-SMTP acceptance
3453          -os <n>: set timeout for SMTP acceptance */
3454
3455       case 'r':
3456       case 's':
3457         {
3458         int * tp = argrest[-1] == 'r'
3459           ? &arg_receive_timeout : &arg_smtp_receive_timeout;
3460         if (*argrest)
3461           *tp = readconf_readtime(argrest, 0, FALSE);
3462         else if (i+1 < argc)
3463           *tp = readconf_readtime(argv[++i], 0, FALSE);
3464
3465         if (*tp < 0)
3466           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3467         }
3468         break;
3469
3470       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3471       /* Limits: Is there a real limit we want here?  1024 is very arbitrary. */
3472
3473       case 'X':
3474         if (*argrest) badarg = TRUE;
3475         else override_local_interfaces = string_copy_taint(
3476           exim_str_fail_toolong(argv[++i], 1024, "-oX"),
3477           GET_TAINTED);
3478         break;
3479
3480       /* -oY: Override creation of daemon notifier socket */
3481
3482       case 'Y':
3483         if (*argrest) badarg = TRUE;
3484         else notifier_socket = NULL;
3485         break;
3486
3487       /* Unknown -o argument */
3488
3489       default:
3490         badarg = TRUE;
3491       }
3492     break;
3493
3494
3495     /* -ps: force Perl startup; -pd force delayed Perl startup */
3496
3497     case 'p':
3498     #ifdef EXIM_PERL
3499     if (*argrest == 's' && argrest[1] == 0)
3500       {
3501       perl_start_option = 1;
3502       break;
3503       }
3504     if (*argrest == 'd' && argrest[1] == 0)
3505       {
3506       perl_start_option = -1;
3507       break;
3508       }
3509     #endif
3510
3511     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3512     which sets the host protocol and host name */
3513
3514     if (!*argrest)
3515       if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
3516
3517     if (*argrest)
3518       {
3519       uschar * hn = Ustrchr(argrest, ':');
3520
3521       if (received_protocol)
3522         exim_fail("received_protocol is set already\n");
3523
3524       if (!hn)
3525         received_protocol = string_copy_taint(
3526           exim_str_fail_toolong(argrest, EXIM_DRIVERNAME_MAX, "-p<protocol>"),
3527           GET_TAINTED);
3528       else
3529         {
3530         (void) exim_str_fail_toolong(argrest, (EXIM_DRIVERNAME_MAX+1+EXIM_HOSTNAME_MAX), "-p<protocol>:<host>");
3531         received_protocol = string_copyn_taint(argrest, hn - argrest, GET_TAINTED);
3532         sender_host_name = string_copy_taint(hn + 1, GET_TAINTED);
3533         }
3534       }
3535     break;
3536
3537
3538     case 'q':
3539     receiving_message = FALSE;
3540     if (queue_interval >= 0)
3541       exim_fail("exim: -q specified more than once\n");
3542
3543     /* -qq...: Do queue runs in a 2-stage manner */
3544
3545     if (*argrest == 'q')
3546       {
3547       f.queue_2stage = TRUE;
3548       argrest++;
3549       }
3550
3551     /* -qi...: Do only first (initial) deliveries */
3552
3553     if (*argrest == 'i')
3554       {
3555       f.queue_run_first_delivery = TRUE;
3556       argrest++;
3557       }
3558
3559     /* -qf...: Run the queue, forcing deliveries
3560        -qff..: Ditto, forcing thawing as well */
3561
3562     if (*argrest == 'f')
3563       {
3564       f.queue_run_force = TRUE;
3565       if (*++argrest == 'f')
3566         {
3567         f.deliver_force_thaw = TRUE;
3568         argrest++;
3569         }
3570       }
3571
3572     /* -q[f][f]l...: Run the queue only on local deliveries */
3573
3574     if (*argrest == 'l')
3575       {
3576       f.queue_run_local = TRUE;
3577       argrest++;
3578       }
3579
3580     /* -q[f][f][l][G<name>]... Work on the named queue */
3581
3582     if (*argrest == 'G')
3583       {
3584       int i;
3585       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3586       exim_len_fail_toolong(i, EXIM_DRIVERNAME_MAX, "-q*G<name>");
3587       queue_name = string_copyn(argrest, i);
3588       argrest += i;
3589       if (*argrest == '/') argrest++;
3590       }
3591
3592     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3593     only, optionally named, optionally starting from a given message id. */
3594
3595     if (!(list_queue || count_queue))
3596       if (  !*argrest
3597          && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3598         {
3599         queue_interval = 0;
3600         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3601           start_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3602         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3603           stop_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3604         }
3605
3606     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3607     forced, optionally local only, optionally named. */
3608
3609       else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3610                                                   0, FALSE)) <= 0)
3611         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3612     break;
3613
3614
3615     case 'R':   /* Synonymous with -qR... */
3616       {
3617       const uschar *tainted_selectstr;
3618
3619       receiving_message = FALSE;
3620
3621     /* -Rf:   As -R (below) but force all deliveries,
3622        -Rff:  Ditto, but also thaw all frozen messages,
3623        -Rr:   String is regex
3624        -Rrf:  Regex and force
3625        -Rrff: Regex and force and thaw
3626
3627     in all cases provided there are no further characters in this
3628     argument. */
3629
3630       if (*argrest)
3631         for (int i = 0; i < nelem(rsopts); i++)
3632           if (Ustrcmp(argrest, rsopts[i]) == 0)
3633             {
3634             if (i != 2) f.queue_run_force = TRUE;
3635             if (i >= 2) f.deliver_selectstring_regex = TRUE;
3636             if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3637             argrest += Ustrlen(rsopts[i]);
3638             }
3639
3640     /* -R: Set string to match in addresses for forced queue run to
3641     pick out particular messages. */
3642
3643       /* Avoid attacks from people providing very long strings, and do so before
3644       we make copies. */
3645       if (*argrest)
3646         tainted_selectstr = argrest;
3647       else if (i+1 < argc)
3648         tainted_selectstr = argv[++i];
3649       else
3650         exim_fail("exim: string expected after -R\n");
3651       deliver_selectstring = string_copy_taint(
3652         exim_str_fail_toolong(tainted_selectstr, EXIM_EMAILADDR_MAX, "-R"),
3653         GET_TAINTED);
3654       }
3655     break;
3656
3657     /* -r: an obsolete synonym for -f (see above) */
3658
3659
3660     /* -S: Like -R but works on sender. */
3661
3662     case 'S':   /* Synonymous with -qS... */
3663       {
3664       const uschar *tainted_selectstr;
3665
3666       receiving_message = FALSE;
3667
3668     /* -Sf:   As -S (below) but force all deliveries,
3669        -Sff:  Ditto, but also thaw all frozen messages,
3670        -Sr:   String is regex
3671        -Srf:  Regex and force
3672        -Srff: Regex and force and thaw
3673
3674     in all cases provided there are no further characters in this
3675     argument. */
3676
3677       if (*argrest)
3678         for (int i = 0; i < nelem(rsopts); i++)
3679           if (Ustrcmp(argrest, rsopts[i]) == 0)
3680             {
3681             if (i != 2) f.queue_run_force = TRUE;
3682             if (i >= 2) f.deliver_selectstring_sender_regex = TRUE;
3683             if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3684             argrest += Ustrlen(rsopts[i]);
3685             }
3686
3687     /* -S: Set string to match in addresses for forced queue run to
3688     pick out particular messages. */
3689
3690       if (*argrest)
3691         tainted_selectstr = argrest;
3692       else if (i+1 < argc)
3693         tainted_selectstr = argv[++i];
3694       else
3695         exim_fail("exim: string expected after -S\n");
3696       deliver_selectstring_sender = string_copy_taint(
3697         exim_str_fail_toolong(tainted_selectstr, EXIM_EMAILADDR_MAX, "-S"),
3698         GET_TAINTED);
3699       }
3700     break;
3701
3702     /* -Tqt is an option that is exclusively for use by the testing suite.
3703     It is not recognized in other circumstances. It allows for the setting up
3704     of explicit "queue times" so that various warning/retry things can be
3705     tested. Otherwise variability of clock ticks etc. cause problems. */
3706
3707     case 'T':
3708     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3709       fudged_queue_times = string_copy_taint(argv[++i], GET_TAINTED);
3710     else badarg = TRUE;
3711     break;
3712
3713
3714     /* -t: Set flag to extract recipients from body of message. */
3715
3716     case 't':
3717     if (!*argrest) extract_recipients = TRUE;
3718
3719     /* -ti: Set flag to extract recipients from body of message, and also
3720     specify that dot does not end the message. */
3721
3722     else if (Ustrcmp(argrest, "i") == 0)
3723       {
3724       extract_recipients = TRUE;
3725       f.dot_ends = FALSE;
3726       }
3727
3728     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3729
3730     #ifndef DISABLE_TLS
3731     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3732     #endif
3733
3734     else badarg = TRUE;
3735     break;
3736
3737
3738     /* -U: This means "initial user submission" in sendmail, apparently. The
3739     doc claims that in future sendmail may refuse syntactically invalid
3740     messages instead of fixing them. For the moment, we just ignore it. */
3741
3742     case 'U':
3743     break;
3744
3745
3746     /* -v: verify things - this is a very low-level debugging */
3747
3748     case 'v':
3749     if (!*argrest)
3750       {
3751       debug_selector |= D_v;
3752       debug_file = stderr;
3753       }
3754     else badarg = TRUE;
3755     break;
3756
3757
3758     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3759
3760       The -x flag tells the sendmail command that mail from a local
3761       mail program has National Language Support (NLS) extended characters
3762       in the body of the mail item. The sendmail command can send mail with
3763       extended NLS characters across networks that normally corrupts these
3764       8-bit characters.
3765
3766     As Exim is 8-bit clean, it just ignores this flag. */
3767
3768     case 'x':
3769     if (*argrest) badarg = TRUE;
3770     break;
3771
3772     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3773     logs to that file.  We swallow the parameter and otherwise ignore it. */
3774
3775     case 'X':
3776     if (!*argrest)
3777       if (++i >= argc)
3778         exim_fail("exim: string expected after -X\n");
3779     break;
3780
3781     /* -z: a line of text to log */
3782
3783     case 'z':
3784     if (!*argrest)
3785       if (++i < argc)
3786         log_oneline = string_copy_taint(
3787           exim_str_fail_toolong(argv[i], 2048, "-z logtext"),
3788           GET_TAINTED);
3789       else
3790         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3791     break;
3792
3793     /* All other initial characters are errors */
3794
3795     default:
3796     badarg = TRUE;
3797     break;
3798     }         /* End of high-level switch statement */
3799
3800   /* Failed to recognize the option, or syntax error */
3801
3802   if (badarg)
3803     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3804       "option %s\n", arg);
3805   }
3806
3807
3808 /* If -R or -S have been specified without -q, assume a single queue run. */
3809
3810  if (  (deliver_selectstring || deliver_selectstring_sender)
3811     && queue_interval < 0)
3812   queue_interval = 0;
3813
3814
3815 END_ARG:
3816  store_pool = old_pool;
3817  }
3818
3819 /* If usage_wanted is set we call the usage function - which never returns */
3820 if (usage_wanted) exim_usage(called_as);
3821
3822 /* Arguments have been processed. Check for incompatibilities. */
3823 if (  (  (smtp_input || extract_recipients || recipients_arg < argc)
3824       && (  f.daemon_listen || queue_interval >= 0 || bi_option
3825          || test_retry_arg >= 0 || test_rewrite_arg >= 0
3826          || filter_test != FTEST_NONE
3827          || msg_action_arg > 0 && !one_msg_action
3828       )  )
3829    || (  msg_action_arg > 0
3830       && (  f.daemon_listen || queue_interval > 0 || list_options
3831          || checking && msg_action != MSG_LOAD
3832          || bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0
3833       )  )
3834    || (  (f.daemon_listen || queue_interval > 0)
3835       && (  sender_address || list_options || list_queue || checking
3836          || bi_option
3837       )  )
3838    || f.daemon_listen && queue_interval == 0
3839    || f.inetd_wait_mode && queue_interval >= 0
3840    || (  list_options
3841       && (  checking || smtp_input || extract_recipients
3842          || filter_test != FTEST_NONE || bi_option
3843       )  )
3844    || (  verify_address_mode
3845       && (  f.address_test_mode || smtp_input || extract_recipients
3846          || filter_test != FTEST_NONE || bi_option
3847       )  )
3848    || (  f.address_test_mode
3849       && (  smtp_input || extract_recipients || filter_test != FTEST_NONE
3850          || bi_option
3851       )  )
3852    || (  smtp_input
3853       && (sender_address || filter_test != FTEST_NONE || extract_recipients)
3854       )
3855    || deliver_selectstring && queue_interval < 0
3856    || msg_action == MSG_LOAD && (!expansion_test || expansion_test_message)
3857    )
3858   exim_fail("exim: incompatible command-line options or arguments\n");
3859
3860 /* If debugging is set up, set the file and the file descriptor to pass on to
3861 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3862 to run in the foreground. */
3863
3864 if (debug_selector != 0)
3865   {
3866   debug_file = stderr;
3867   debug_fd = fileno(debug_file);
3868   f.background_daemon = FALSE;
3869   testharness_pause_ms(100);   /* lets caller finish */
3870   if (debug_selector != D_v)    /* -v only doesn't show this */
3871     {
3872     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3873       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3874       debug_selector);
3875     if (!version_printed)
3876       show_whats_supported(FALSE);
3877     }
3878   }
3879
3880 /* When started with root privilege, ensure that the limits on the number of
3881 open files and the number of processes (where that is accessible) are
3882 sufficiently large, or are unset, in case Exim has been called from an
3883 environment where the limits are screwed down. Not all OS have the ability to
3884 change some of these limits. */
3885
3886 if (unprivileged)
3887   {
3888   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3889   }
3890 else
3891   {
3892   struct rlimit rlp;
3893
3894 #ifdef RLIMIT_NOFILE
3895   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3896     {
3897     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3898       strerror(errno));
3899     rlp.rlim_cur = rlp.rlim_max = 0;
3900     }
3901
3902   /* I originally chose 1000 as a nice big number that was unlikely to
3903   be exceeded. It turns out that some older OS have a fixed upper limit of
3904   256. */
3905
3906   if (rlp.rlim_cur < 1000)
3907     {
3908     rlp.rlim_cur = rlp.rlim_max = 1000;
3909     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3910       {
3911       rlp.rlim_cur = rlp.rlim_max = 256;
3912       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3913         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3914           strerror(errno));
3915       }
3916     }
3917 #endif
3918
3919 #ifdef RLIMIT_NPROC
3920   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3921     {
3922     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3923       strerror(errno));
3924     rlp.rlim_cur = rlp.rlim_max = 0;
3925     }
3926
3927 # ifdef RLIM_INFINITY
3928   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3929     {
3930     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3931 # else
3932   if (rlp.rlim_cur < 1000)
3933     {
3934     rlp.rlim_cur = rlp.rlim_max = 1000;
3935 # endif
3936     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3937       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3938         strerror(errno));
3939     }
3940 #endif
3941   }
3942
3943 /* Exim is normally entered as root (but some special configurations are
3944 possible that don't do this). However, it always spins off sub-processes that
3945 set their uid and gid as required for local delivery. We don't want to pass on
3946 any extra groups that root may belong to, so we want to get rid of them all at
3947 this point.
3948
3949 We need to obey setgroups() at this stage, before possibly giving up root
3950 privilege for a changed configuration file, but later on we might need to
3951 check on the additional groups for the admin user privilege - can't do that
3952 till after reading the config, which might specify the exim gid. Therefore,
3953 save the group list here first. */
3954
3955 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3956   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3957
3958 /* There is a fundamental difference in some BSD systems in the matter of
3959 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3960 known not to be different. On the "different" systems there is a single group
3961 list, and the first entry in it is the current group. On all other versions of
3962 Unix there is a supplementary group list, which is in *addition* to the current
3963 group. Consequently, to get rid of all extraneous groups on a "standard" system
3964 you pass over 0 groups to setgroups(), while on a "different" system you pass
3965 over a single group - the current group, which is always the first group in the
3966 list. Calling setgroups() with zero groups on a "different" system results in
3967 an error return. The following code should cope with both types of system.
3968
3969  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
3970  the "setgroups() with zero groups" - and changes the egid.
3971  Thanks to that we had to stash the original_egid above, for use below
3972  in the call to exim_setugid().
3973
3974 However, if this process isn't running as root, setgroups() can't be used
3975 since you have to be root to run it, even if throwing away groups.
3976 Except, sigh, for Hurd - where you can.
3977 Not being root here happens only in some unusual configurations. */
3978
3979 if (  !unprivileged
3980 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
3981    && setgroups(0, NULL) != 0
3982 #endif
3983    && setgroups(1, group_list) != 0)
3984   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
3985
3986 /* If the configuration file name has been altered by an argument on the
3987 command line (either a new file name or a macro definition) and the caller is
3988 not root, or if this is a filter testing run, remove any setuid privilege the
3989 program has and run as the underlying user.
3990
3991 The exim user is locked out of this, which severely restricts the use of -C
3992 for some purposes.
3993
3994 Otherwise, set the real ids to the effective values (should be root unless run
3995 from inetd, which it can either be root or the exim uid, if one is configured).
3996
3997 There is a private mechanism for bypassing some of this, in order to make it
3998 possible to test lots of configurations automatically, without having either to
3999 recompile each time, or to patch in an actual configuration file name and other
4000 values (such as the path name). If running in the test harness, pretend that
4001 configuration file changes and macro definitions haven't happened. */
4002
4003 if ((                                            /* EITHER */
4004     (!f.trusted_config ||                          /* Config changed, or */
4005      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
4006     real_uid != root_uid &&                      /* Not root, and */
4007     !f.running_in_test_harness                     /* Not fudged */
4008     ) ||                                         /*   OR   */
4009     expansion_test                               /* expansion testing */
4010     ||                                           /*   OR   */
4011     filter_test != FTEST_NONE)                   /* Filter testing */
4012   {
4013   setgroups(group_count, group_list);
4014   exim_setugid(real_uid, real_gid, FALSE,
4015     US"-C, -D, -be or -bf forces real uid");
4016   removed_privilege = TRUE;
4017
4018   /* In the normal case when Exim is called like this, stderr is available
4019   and should be used for any logging information because attempts to write
4020   to the log will usually fail. To arrange this, we unset really_exim. However,
4021   if no stderr is available there is no point - we might as well have a go
4022   at the log (if it fails, syslog will be written).
4023
4024   Note that if the invoker is Exim, the logs remain available. Messing with
4025   this causes unlogged successful deliveries.  */
4026
4027   if (log_stderr && real_uid != exim_uid)
4028     f.really_exim = FALSE;
4029   }
4030
4031 /* Privilege is to be retained for the moment. It may be dropped later,
4032 depending on the job that this Exim process has been asked to do. For now, set
4033 the real uid to the effective so that subsequent re-execs of Exim are done by a
4034 privileged user. */
4035
4036 else
4037   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
4038
4039 /* If testing a filter, open the file(s) now, before wasting time doing other
4040 setups and reading the message. */
4041
4042 if (filter_test & FTEST_SYSTEM)
4043   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
4044     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
4045       strerror(errno));
4046
4047 if (filter_test & FTEST_USER)
4048   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
4049     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
4050       strerror(errno));
4051
4052 /* Initialise lookup_list
4053 If debugging, already called above via version reporting.
4054 In either case, we initialise the list of available lookups while running
4055 as root.  All dynamically modules are loaded from a directory which is
4056 hard-coded into the binary and is code which, if not a module, would be
4057 part of Exim already.  Ability to modify the content of the directory
4058 is equivalent to the ability to modify a setuid binary!
4059
4060 This needs to happen before we read the main configuration. */
4061 init_lookup_list();
4062
4063 /*XXX this excrescence could move to the testsuite standard config setup file */
4064 #ifdef SUPPORT_I18N
4065 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
4066 #endif
4067
4068 /* Read the main runtime configuration data; this gives up if there
4069 is a failure. It leaves the configuration file open so that the subsequent
4070 configuration data for delivery can be read if needed.
4071
4072 NOTE: immediately after opening the configuration file we change the working
4073 directory to "/"! Later we change to $spool_directory. We do it there, because
4074 during readconf_main() some expansion takes place already. */
4075
4076 /* Store the initial cwd before we change directories.  Can be NULL if the
4077 dir has already been unlinked. */
4078 initial_cwd = os_getcwd(NULL, 0);
4079 if (!initial_cwd && errno)
4080   exim_fail("exim: getting initial cwd failed: %s\n", strerror(errno));
4081
4082 if (initial_cwd && (strlen(CCS initial_cwd) >= BIG_BUFFER_SIZE))
4083   exim_fail("exim: initial cwd is far too long (%d)\n", Ustrlen(CCS initial_cwd));
4084
4085 /* checking:
4086     -be[m] expansion test        -
4087     -b[fF] filter test           new
4088     -bh[c] host test             -
4089     -bmalware malware_test_file  new
4090     -brt   retry test            new
4091     -brw   rewrite test          new
4092     -bt    address test          -
4093     -bv[s] address verify        -
4094    list_options:
4095     -bP <option> (except -bP config, which sets list_config)
4096
4097 If any of these options is set, we suppress warnings about configuration
4098 issues (currently about tls_advertise_hosts and keep_environment not being
4099 defined) */
4100
4101   {
4102   int old_pool = store_pool;
4103 #ifdef MEASURE_TIMING
4104   struct timeval t0, diff;
4105   (void)gettimeofday(&t0, NULL);
4106 #endif
4107
4108   store_pool = POOL_CONFIG;
4109   readconf_main(checking || list_options);
4110   store_pool = old_pool;
4111
4112 #ifdef MEASURE_TIMING
4113   report_time_since(&t0, US"readconf_main (delta)");
4114 #endif
4115   }
4116
4117 /* Now in directory "/" */
4118
4119 if (cleanup_environment() == FALSE)
4120   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
4121
4122
4123 /* If an action on specific messages is requested, or if a daemon or queue
4124 runner is being started, we need to know if Exim was called by an admin user.
4125 This is the case if the real user is root or exim, or if the real group is
4126 exim, or if one of the supplementary groups is exim or a group listed in
4127 admin_groups. We don't fail all message actions immediately if not admin_user,
4128 since some actions can be performed by non-admin users. Instead, set admin_user
4129 for later interrogation. */
4130
4131 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
4132   f.admin_user = TRUE;
4133 else
4134   for (int i = 0; i < group_count && !f.admin_user; i++)
4135     if (group_list[i] == exim_gid)
4136       f.admin_user = TRUE;
4137     else if (admin_groups)
4138       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
4139         if (admin_groups[j] == group_list[i])
4140           f.admin_user = TRUE;
4141
4142 /* Another group of privileged users are the trusted users. These are root,
4143 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
4144 are permitted to specify sender_addresses with -f on the command line, and
4145 other message parameters as well. */
4146
4147 if (real_uid == root_uid || real_uid == exim_uid)
4148   f.trusted_caller = TRUE;
4149 else
4150   {
4151   if (trusted_users)
4152     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
4153       if (trusted_users[i] == real_uid)
4154         f.trusted_caller = TRUE;
4155
4156   if (trusted_groups)
4157     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
4158       if (trusted_groups[i] == real_gid)
4159         f.trusted_caller = TRUE;
4160       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
4161         if (trusted_groups[i] == group_list[j])
4162           f.trusted_caller = TRUE;
4163   }
4164
4165 /* At this point, we know if the user is privileged and some command-line
4166 options become possibly impermissible, depending upon the configuration file. */
4167
4168 if (checking && commandline_checks_require_admin && !f.admin_user)
4169   exim_fail("exim: those command-line flags are set to require admin\n");
4170
4171 /* Handle the decoding of logging options. */
4172
4173 decode_bits(log_selector, log_selector_size, log_notall,
4174   log_selector_string, log_options, log_options_count, US"log", 0);
4175
4176 DEBUG(D_any)
4177   {
4178   debug_printf("configuration file is %s\n", config_main_filename);
4179   debug_printf("log selectors =");
4180   for (int i = 0; i < log_selector_size; i++)
4181     debug_printf(" %08x", log_selector[i]);
4182   debug_printf("\n");
4183   }
4184
4185 /* If domain literals are not allowed, check the sender address that was
4186 supplied with -f. Ditto for a stripped trailing dot. */
4187
4188 if (sender_address)
4189   {
4190   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
4191     exim_fail("exim: bad -f address \"%s\": domain literals not "
4192       "allowed\n", sender_address);
4193   if (f_end_dot && !strip_trailing_dot)
4194     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
4195       "(trailing dot not allowed)\n", sender_address);
4196   }
4197
4198 /* See if an admin user overrode our logging. */
4199
4200 if (cmdline_syslog_name)
4201   if (f.admin_user)
4202     {
4203     syslog_processname = cmdline_syslog_name;
4204     log_file_path = string_copy(CUS"syslog");
4205     }
4206   else
4207     /* not a panic, non-privileged users should not be able to spam paniclog */
4208     exim_fail(
4209         "exim: you lack sufficient privilege to specify syslog process name\n");
4210
4211 /* Paranoia check of maximum lengths of certain strings. There is a check
4212 on the length of the log file path in log.c, which will come into effect
4213 if there are any calls to write the log earlier than this. However, if we
4214 get this far but the string is very long, it is better to stop now than to
4215 carry on and (e.g.) receive a message and then have to collapse. The call to
4216 log_write() from here will cause the ultimate panic collapse if the complete
4217 file name exceeds the buffer length. */
4218
4219 if (Ustrlen(log_file_path) > 200)
4220   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4221     "log_file_path is longer than 200 chars: aborting");
4222
4223 if (Ustrlen(pid_file_path) > 200)
4224   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4225     "pid_file_path is longer than 200 chars: aborting");
4226
4227 if (Ustrlen(spool_directory) > 200)
4228   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4229     "spool_directory is longer than 200 chars: aborting");
4230
4231 /* Length check on the process name given to syslog for its TAG field,
4232 which is only permitted to be 32 characters or less. See RFC 3164. */
4233
4234 if (Ustrlen(syslog_processname) > 32)
4235   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4236     "syslog_processname is longer than 32 chars: aborting");
4237
4238 if (log_oneline)
4239   if (f.admin_user)
4240     {
4241     log_write(0, LOG_MAIN, "%s", log_oneline);
4242     return EXIT_SUCCESS;
4243     }
4244   else
4245     return EXIT_FAILURE;
4246
4247 /* In some operating systems, the environment variable TMPDIR controls where
4248 temporary files are created; Exim doesn't use these (apart from when delivering
4249 to MBX mailboxes), but called libraries such as DBM libraries may require them.
4250 If TMPDIR is found in the environment, reset it to the value defined in the
4251 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
4252 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
4253 EXIM_TMPDIR by the build scripts.
4254 */
4255
4256 #ifdef EXIM_TMPDIR
4257   if (environ) for (uschar ** p = USS environ; *p; p++)
4258     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
4259       {
4260       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
4261       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
4262       *p = newp;
4263       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
4264       }
4265 #endif
4266
4267 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
4268 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
4269 we may need to get rid of a bogus timezone setting. This can arise when Exim is
4270 called by a user who has set the TZ variable. This then affects the timestamps
4271 in log files and in Received: headers, and any created Date: header lines. The
4272 required timezone is settable in the configuration file, so nothing can be done
4273 about this earlier - but hopefully nothing will normally be logged earlier than
4274 this. We have to make a new environment if TZ is wrong, but don't bother if
4275 timestamps_utc is set, because then all times are in UTC anyway. */
4276
4277 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
4278   f.timestamps_utc = TRUE;
4279 else
4280   {
4281   uschar *envtz = US getenv("TZ");
4282   if (envtz
4283       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
4284       : timezone_string != NULL
4285      )
4286     {
4287     uschar **p = USS environ;
4288     uschar **new;
4289     uschar **newp;
4290     int count = 0;
4291     if (environ) while (*p++) count++;
4292     if (!envtz) count++;
4293     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4294     if (environ) for (p = USS environ; *p; p++)
4295       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4296     if (timezone_string)
4297       {
4298       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4299       sprintf(CS *newp++, "TZ=%s", timezone_string);
4300       }
4301     *newp = NULL;
4302     environ = CSS new;
4303     tzset();
4304     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4305       tod_stamp(tod_log));
4306     }
4307   }
4308
4309 /* Handle the case when we have removed the setuid privilege because of -C or
4310 -D. This means that the caller of Exim was not root.
4311
4312 There is a problem if we were running as the Exim user. The sysadmin may
4313 expect this case to retain privilege because "the binary was called by the
4314 Exim user", but it hasn't, because either the -D option set macros, or the
4315 -C option set a non-trusted configuration file. There are two possibilities:
4316
4317   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4318       to do message deliveries. Thus, the fact that it is running as a
4319       non-privileged user is plausible, and might be wanted in some special
4320       configurations. However, really_exim will have been set false when
4321       privilege was dropped, to stop Exim trying to write to its normal log
4322       files. Therefore, re-enable normal log processing, assuming the sysadmin
4323       has set up the log directory correctly.
4324
4325   (2) If deliver_drop_privilege is not set, the configuration won't work as
4326       apparently intended, and so we log a panic message. In order to retain
4327       root for -C or -D, the caller must either be root or be invoking a
4328       trusted configuration file (when deliver_drop_privilege is false). */
4329
4330 if (  removed_privilege
4331    && (!f.trusted_config || opt_D_used)
4332    && real_uid == exim_uid)
4333   if (deliver_drop_privilege)
4334     f.really_exim = TRUE; /* let logging work normally */
4335   else
4336     log_write(0, LOG_MAIN|LOG_PANIC,
4337       "exim user lost privilege for using %s option",
4338       f.trusted_config? "-D" : "-C");
4339
4340 /* Start up Perl interpreter if Perl support is configured and there is a
4341 perl_startup option, and the configuration or the command line specifies
4342 initializing starting. Note that the global variables are actually called
4343 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4344
4345 #ifdef EXIM_PERL
4346 if (perl_start_option != 0)
4347   opt_perl_at_start = (perl_start_option > 0);
4348 if (opt_perl_at_start && opt_perl_startup != NULL)
4349   {
4350   uschar *errstr;
4351   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4352   if ((errstr = init_perl(opt_perl_startup)))
4353     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4354   opt_perl_started = TRUE;
4355   }
4356 #endif /* EXIM_PERL */
4357
4358 /* Log the arguments of the call if the configuration file said so. This is
4359 a debugging feature for finding out what arguments certain MUAs actually use.
4360 Don't attempt it if logging is disabled, or if listing variables or if
4361 verifying/testing addresses or expansions. */
4362
4363 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4364    && f.really_exim && !list_options && !checking)
4365   {
4366   uschar *p = big_buffer;
4367   Ustrcpy(p, US"cwd= (failed)");
4368
4369   if (!initial_cwd)
4370     p += 13;
4371   else
4372     {
4373     p += 4;
4374     snprintf(CS p, big_buffer_size - (p - big_buffer), "%s", CCS initial_cwd);
4375     p += Ustrlen(CCS p);
4376     }
4377
4378   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4379   while (*p) p++;
4380   for (int i = 0; i < argc; i++)
4381     {
4382     int len = Ustrlen(argv[i]);
4383     const uschar *printing;
4384     uschar *quote;
4385     if (p + len + 8 >= big_buffer + big_buffer_size)
4386       {
4387       Ustrcpy(p, US" ...");
4388       log_write(0, LOG_MAIN, "%s", big_buffer);
4389       Ustrcpy(big_buffer, US"...");
4390       p = big_buffer + 3;
4391       }
4392     printing = string_printing(argv[i]);
4393     if (!*printing) quote = US"\"";
4394     else
4395       {
4396       const uschar *pp = printing;
4397       quote = US"";
4398       while (*pp) if (isspace(*pp++)) { quote = US"\""; break; }
4399       }
4400     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4401       (p - big_buffer) - 4), printing, quote);
4402     }
4403
4404   if (LOGGING(arguments))
4405     log_write(0, LOG_MAIN, "%s", big_buffer);
4406   else
4407     debug_printf("%s\n", big_buffer);
4408   }
4409
4410 /* Set the working directory to be the top-level spool directory. We don't rely
4411 on this in the code, which always uses fully qualified names, but it's useful
4412 for core dumps etc. Don't complain if it fails - the spool directory might not
4413 be generally accessible and calls with the -C option (and others) have lost
4414 privilege by now. Before the chdir, we try to ensure that the directory exists.
4415 */
4416
4417 if (Uchdir(spool_directory) != 0)
4418   {
4419   (void) directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4420   (void) Uchdir(spool_directory);
4421   }
4422
4423 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4424 alias file. Exim doesn't have such a concept, but this call is screwed into
4425 Sun's YP makefiles. Handle this by calling a configured script, as the real
4426 user who called Exim. The -oA option can be used to pass an argument to the
4427 script. */
4428
4429 if (bi_option)
4430   {
4431   (void) fclose(config_file);
4432   if (bi_command && *bi_command)
4433     {
4434     int i = 0;
4435     uschar *argv[3];
4436     argv[i++] = bi_command;     /* nonexpanded option so assume untainted */
4437     if (alias_arg) argv[i++] = alias_arg;
4438     argv[i++] = NULL;
4439
4440     setgroups(group_count, group_list);
4441     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4442
4443     DEBUG(D_exec) debug_printf("exec '%.256s' %s%.256s%s\n", argv[0],
4444       argv[1] ? "'" : "", argv[1] ? argv[1] : US"", argv[1] ? "'" : "");
4445
4446     execv(CS argv[0], (char *const *)argv);
4447     exim_fail("exim: exec '%s' failed: %s\n", argv[0], strerror(errno));
4448     }
4449   else
4450     {
4451     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4452     exit(EXIT_SUCCESS);
4453     }
4454   }
4455
4456 /* We moved the admin/trusted check to be immediately after reading the
4457 configuration file.  We leave these prints here to ensure that syslog setup,
4458 logfile setup, and so on has already happened. */
4459
4460 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4461 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4462
4463 /* Only an admin user may start the daemon or force a queue run in the default
4464 configuration, but the queue run restriction can be relaxed. Only an admin
4465 user may request that a message be returned to its sender forthwith. Only an
4466 admin user may specify a debug level greater than D_v (because it might show
4467 passwords, etc. in lookup queries). Only an admin user may request a queue
4468 count. Only an admin user can use the test interface to scan for email
4469 (because Exim will be in the spool dir and able to look at mails). */
4470
4471 if (!f.admin_user)
4472   {
4473   BOOL debugset = (debug_selector & ~D_v) != 0;
4474   if (  deliver_give_up || f.daemon_listen || malware_test_file
4475      || count_queue && queue_list_requires_admin
4476      || list_queue && queue_list_requires_admin
4477      || queue_interval >= 0 && prod_requires_admin
4478      || queue_name_dest && prod_requires_admin
4479      || debugset && !f.running_in_test_harness
4480      )
4481     exim_fail("exim:%s permission denied\n", debugset ? " debugging" : "");
4482   }
4483
4484 /* If the real user is not root or the exim uid, the argument for passing
4485 in an open TCP/IP connection for another message is not permitted, nor is
4486 running with the -N option for any delivery action, unless this call to exim is
4487 one that supplied an input message, or we are using a patched exim for
4488 regression testing. */
4489
4490 if (  real_uid != root_uid && real_uid != exim_uid
4491    && (  continue_hostname
4492       || (  f.dont_deliver
4493          && (queue_interval >= 0 || f.daemon_listen || msg_action_arg > 0)
4494       )  )
4495    && !f.running_in_test_harness
4496    )
4497   exim_fail("exim: Permission denied\n");
4498
4499 /* If the caller is not trusted, certain arguments are ignored when running for
4500 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4501 Note that authority for performing certain actions on messages is tested in the
4502 queue_action() function. */
4503
4504 if (!f.trusted_caller && !checking)
4505   {
4506   sender_host_name = sender_host_address = interface_address =
4507     sender_ident = received_protocol = NULL;
4508   sender_host_port = interface_port = 0;
4509   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4510   }
4511
4512 /* If a sender host address is set, extract the optional port number off the
4513 end of it and check its syntax. Do the same thing for the interface address.
4514 Exim exits if the syntax is bad. */
4515
4516 else
4517   {
4518   if (sender_host_address)
4519     sender_host_port = check_port(sender_host_address);
4520   if (interface_address)
4521     interface_port = check_port(interface_address);
4522   }
4523
4524 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4525 if (flag_G)
4526   {
4527   if (f.trusted_caller)
4528     {
4529     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4530     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4531     }
4532   else
4533     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4534   }
4535
4536 /* If an SMTP message is being received check to see if the standard input is a
4537 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4538 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4539 barf. */
4540
4541 if (smtp_input)
4542   {
4543   union sockaddr_46 inetd_sock;
4544   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4545   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4546     {
4547     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4548     if (family == AF_INET || family == AF_INET6)
4549       {
4550       union sockaddr_46 interface_sock;
4551       size = sizeof(interface_sock);
4552
4553       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4554         interface_address = host_ntoa(-1, &interface_sock, NULL,
4555           &interface_port);
4556
4557       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4558
4559       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4560         {
4561         f.is_inetd = TRUE;
4562         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4563           NULL, &sender_host_port);
4564         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4565           "inetd is not supported when mua_wrapper is set");
4566         }
4567       else
4568         exim_fail(
4569           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4570       }
4571     }
4572   }
4573
4574 /* If the load average is going to be needed while receiving a message, get it
4575 now for those OS that require the first call to os_getloadavg() to be done as
4576 root. There will be further calls later for each message received. */
4577
4578 #ifdef LOAD_AVG_NEEDS_ROOT
4579 if (  receiving_message
4580    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4581   load_average = OS_GETLOADAVG();
4582 #endif
4583
4584 /* The queue_only configuration option can be overridden by -odx on the command
4585 line, except that if queue_only_override is false, queue_only cannot be unset
4586 from the command line. */
4587
4588 if (queue_only_set && (queue_only_override || arg_queue_only))
4589   queue_only = arg_queue_only;
4590
4591 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4592 -or and -os. */
4593
4594 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4595 if (arg_smtp_receive_timeout >= 0)
4596   smtp_receive_timeout = arg_smtp_receive_timeout;
4597
4598 /* If Exim was started with root privilege, unless we have already removed the
4599 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4600 except when starting the daemon or doing some kind of delivery or address
4601 testing (-bt). These are the only cases when root need to be retained. We run
4602 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4603 retained only for starting the daemon. We always do the initgroups() in this
4604 situation (controlled by the TRUE below), in order to be as close as possible
4605 to the state Exim usually runs in. */
4606
4607 if (  !unprivileged                             /* originally had root AND */
4608    && !removed_privilege                        /* still got root AND      */
4609    && !f.daemon_listen                          /* not starting the daemon */
4610    && queue_interval <= 0                       /* (either kind of daemon) */
4611    && (                                         /*    AND EITHER           */
4612          deliver_drop_privilege                 /* requested unprivileged  */
4613       || (                                      /*       OR                */
4614             queue_interval < 0                  /* not running the queue   */
4615          && (  msg_action_arg < 0               /*       and               */
4616             || msg_action != MSG_DELIVER        /* not delivering          */
4617             )                                   /*       and               */
4618          && (!checking || !f.address_test_mode) /* not address checking    */
4619          && !rcpt_verify_quota                  /* and not quota checking  */
4620    )  )  )
4621   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4622
4623 /* When we are retaining a privileged uid, we still change to the exim gid. */
4624
4625 else
4626   {
4627   int rv;
4628   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4629   rv = setgid(exim_gid);
4630   /* Impact of failure is that some stuff might end up with an incorrect group.
4631   We track this for failures from root, since any attempt to change privilege
4632   by root should succeed and failures should be examined.  For non-root,
4633   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4634   no need to complain then. */
4635   if (rv == -1)
4636     if (!(unprivileged || removed_privilege))
4637       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4638     else
4639       {
4640       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4641           (long int)exim_gid, strerror(errno));
4642       }
4643   }
4644
4645 /* Handle a request to scan a file for malware */
4646 if (malware_test_file)
4647   {
4648 #ifdef WITH_CONTENT_SCAN
4649   int result;
4650   set_process_info("scanning file for malware");
4651   if ((result = malware_in_file(malware_test_file)) == FAIL)
4652     {
4653     printf("No malware found.\n");
4654     exit(EXIT_SUCCESS);
4655     }
4656   if (result != OK)
4657     {
4658     printf("Malware lookup returned non-okay/fail: %d\n", result);
4659     exit(EXIT_FAILURE);
4660     }
4661   if (malware_name)
4662     printf("Malware found: %s\n", malware_name);
4663   else
4664     printf("Malware scan detected malware of unknown name.\n");
4665 #else
4666   printf("Malware scanning not enabled at compile time.\n");
4667 #endif
4668   exit(EXIT_FAILURE);
4669   }
4670
4671 /* Handle a request to list the delivery queue */
4672
4673 if (list_queue)
4674   {
4675   set_process_info("listing the queue");
4676   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4677   exit(EXIT_SUCCESS);
4678   }
4679
4680 /* Handle a request to count the delivery queue */
4681
4682 if (count_queue)
4683   {
4684   set_process_info("counting the queue");
4685   fprintf(stdout, "%u\n", queue_count());
4686   exit(EXIT_SUCCESS);
4687   }
4688
4689 /* Handle actions on specific messages, except for the force delivery and
4690 message load actions, which are done below. Some actions take a whole list of
4691 message ids, which are known to continue up to the end of the arguments. Others
4692 take a single message id and then operate on the recipients list. */
4693
4694 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4695   {
4696   int yield = EXIT_SUCCESS;
4697   set_process_info("acting on specified messages");
4698
4699   /* ACL definitions may be needed when removing a message (-Mrm) because
4700   event_action gets expanded */
4701
4702   if (msg_action == MSG_REMOVE)
4703     {
4704     int old_pool = store_pool;
4705     store_pool = POOL_CONFIG;
4706     readconf_rest();
4707     store_pool = old_pool;
4708     store_writeprotect(POOL_CONFIG);
4709     }
4710
4711   if (!one_msg_action)
4712     {
4713     for (i = msg_action_arg; i < argc; i++)
4714       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4715         yield = EXIT_FAILURE;
4716     switch (msg_action)
4717       {
4718       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4719       default: printf("\n"); break;
4720       }
4721     }
4722
4723   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4724     recipients_arg)) yield = EXIT_FAILURE;
4725   exit(yield);
4726   }
4727
4728 /* We used to set up here to skip reading the ACL section, on
4729  (msg_action_arg > 0 || (queue_interval == 0 && !f.daemon_listen)
4730 Now, since the intro of the ${acl } expansion, ACL definitions may be
4731 needed in transports so we lost the optimisation. */
4732
4733   {
4734   int old_pool = store_pool;
4735 #ifdef MEASURE_TIMING
4736   struct timeval t0, diff;
4737   (void)gettimeofday(&t0, NULL);
4738 #endif
4739
4740   store_pool = POOL_CONFIG;
4741   readconf_rest();
4742   store_pool = old_pool;
4743
4744   /* -be can add macro definitions, needing to link to the macro structure
4745   chain.  Otherwise, make the memory used for config data readonly. */
4746
4747   if (!expansion_test)
4748     store_writeprotect(POOL_CONFIG);
4749
4750 #ifdef MEASURE_TIMING
4751   report_time_since(&t0, US"readconf_rest (delta)");
4752 #endif
4753   }
4754
4755 /* Handle a request to check quota */
4756 if (rcpt_verify_quota)
4757   if (real_uid != root_uid && real_uid != exim_uid)
4758     exim_fail("exim: Permission denied\n");
4759   else if (recipients_arg >= argc)
4760     exim_fail("exim: missing recipient for quota check\n");
4761   else
4762     {
4763     verify_quota(argv[recipients_arg]);
4764     exim_exit(EXIT_SUCCESS);
4765     }
4766
4767 /* Handle the -brt option. This is for checking out retry configurations.
4768 The next three arguments are a domain name or a complete address, and
4769 optionally two error numbers. All it does is to call the function that
4770 scans the retry configuration data. */
4771
4772 if (test_retry_arg >= 0)
4773   {
4774   retry_config *yield;
4775   int basic_errno = 0;
4776   int more_errno = 0;
4777   const uschar *s1, *s2;
4778
4779   if (test_retry_arg >= argc)
4780     {
4781     printf("-brt needs a domain or address argument\n");
4782     exim_exit(EXIT_FAILURE);
4783     }
4784   s1 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_EMAILADDR_MAX, "-brt");
4785   s2 = NULL;
4786
4787   /* If the first argument contains no @ and no . it might be a local user
4788   or it might be a single-component name. Treat as a domain. */
4789
4790   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4791     {
4792     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4793       "being \ntreated as a one-component domain, not as a local part.\n\n",
4794       s1);
4795     }
4796
4797   /* There may be an optional second domain arg. */
4798
4799   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4800     s2 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_DOMAINNAME_MAX, "-brt 2nd");
4801
4802   /* The final arg is an error name */
4803
4804   if (test_retry_arg < argc)
4805     {
4806     const uschar *ss = exim_str_fail_toolong(argv[test_retry_arg], EXIM_DRIVERNAME_MAX, "-brt 3rd");
4807     uschar *error =
4808       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4809     if (error != NULL)
4810       {
4811       printf("%s\n", CS error);
4812       return EXIT_FAILURE;
4813       }
4814
4815     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4816     code > 100 as an error is for matching codes to the decade. Turn them into
4817     a real error code, off the decade. */
4818
4819     if (basic_errno == ERRNO_MAIL4XX ||
4820         basic_errno == ERRNO_RCPT4XX ||
4821         basic_errno == ERRNO_DATA4XX)
4822       {
4823       int code = (more_errno >> 8) & 255;
4824       if (code == 255)
4825         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4826       else if (code > 100)
4827         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4828       }
4829     }
4830
4831   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4832     printf("No retry information found\n");
4833   else
4834     {
4835     more_errno = yield->more_errno;
4836     printf("Retry rule: %s  ", yield->pattern);
4837
4838     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4839       {
4840       printf("quota%s%s  ",
4841         (more_errno > 0)? "_" : "",
4842         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4843       }
4844     else if (yield->basic_errno == ECONNREFUSED)
4845       {
4846       printf("refused%s%s  ",
4847         (more_errno > 0)? "_" : "",
4848         (more_errno == 'M')? "MX" :
4849         (more_errno == 'A')? "A" : "");
4850       }
4851     else if (yield->basic_errno == ETIMEDOUT)
4852       {
4853       printf("timeout");
4854       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4855       more_errno &= 255;
4856       if (more_errno != 0) printf("_%s",
4857         (more_errno == 'M')? "MX" : "A");
4858       printf("  ");
4859       }
4860     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4861       printf("auth_failed  ");
4862     else printf("*  ");
4863
4864     for (retry_rule * r = yield->rules; r; r = r->next)
4865       {
4866       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4867       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4868       if (r->rule == 'G')
4869         {
4870         int x = r->p2;
4871         int f = x % 1000;
4872         int d = 100;
4873         printf(",%d.", x/1000);
4874         do
4875           {
4876           printf("%d", f/d);
4877           f %= d;
4878           d /= 10;
4879           }
4880         while (f != 0);
4881         }
4882       printf("; ");
4883       }
4884
4885     printf("\n");
4886     }
4887   exim_exit(EXIT_SUCCESS);
4888   }
4889
4890 /* Handle a request to list one or more configuration options */
4891 /* If -n was set, we suppress some information */
4892
4893 if (list_options)
4894   {
4895   BOOL fail = FALSE;
4896   set_process_info("listing variables");
4897   if (recipients_arg >= argc)
4898     fail = !readconf_print(US"all", NULL, flag_n);
4899   else for (i = recipients_arg; i < argc; i++)
4900     {
4901     if (i < argc - 1 &&
4902         (Ustrcmp(argv[i], "router") == 0 ||
4903          Ustrcmp(argv[i], "transport") == 0 ||
4904          Ustrcmp(argv[i], "authenticator") == 0 ||
4905          Ustrcmp(argv[i], "macro") == 0 ||
4906          Ustrcmp(argv[i], "environment") == 0))
4907       {
4908       fail |= !readconf_print(exim_str_fail_toolong(argv[i+1], EXIM_DRIVERNAME_MAX, "-bP name"), argv[i], flag_n);
4909       i++;
4910       }
4911     else
4912       fail = !readconf_print(exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-bP item"), NULL, flag_n);
4913     }
4914   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS);
4915   }
4916
4917 if (list_config)
4918   {
4919   set_process_info("listing config");
4920   exim_exit(readconf_print(US"config", NULL, flag_n)
4921                 ? EXIT_SUCCESS : EXIT_FAILURE);
4922   }
4923
4924
4925 /* Initialise subsystems as required. */
4926
4927 tcp_init();
4928
4929 /* Handle a request to deliver one or more messages that are already on the
4930 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4931 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4932
4933 Delivery of specific messages is typically used for a small number when
4934 prodding by hand (when the option forced_delivery will be set) or when
4935 re-execing to regain root privilege. Each message delivery must happen in a
4936 separate process, so we fork a process for each one, and run them sequentially
4937 so that debugging output doesn't get intertwined, and to avoid spawning too
4938 many processes if a long list is given. However, don't fork for the last one;
4939 this saves a process in the common case when Exim is called to deliver just one
4940 message. */
4941
4942 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4943   {
4944   if (prod_requires_admin && !f.admin_user)
4945     {
4946     fprintf(stderr, "exim: Permission denied\n");
4947     exim_exit(EXIT_FAILURE);
4948     }
4949   set_process_info("delivering specified messages");
4950   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4951   for (i = msg_action_arg; i < argc; i++)
4952     {
4953     int status;
4954     pid_t pid;
4955     /*XXX This use of argv[i] for msg_id should really be tainted, but doing
4956     that runs into a later copy into the untainted global message_id[] */
4957     /*XXX Do we need a length limit check here? */
4958     if (i == argc - 1)
4959       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4960     else if ((pid = exim_fork(US"cmdline-delivery")) == 0)
4961       {
4962       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4963       exim_underbar_exit(EXIT_SUCCESS);
4964       }
4965     else if (pid < 0)
4966       {
4967       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4968         strerror(errno));
4969       exim_exit(EXIT_FAILURE);
4970       }
4971     else wait(&status);
4972     }
4973   exim_exit(EXIT_SUCCESS);
4974   }
4975
4976
4977 /* If only a single queue run is requested, without SMTP listening, we can just
4978 turn into a queue runner, with an optional starting message id. */
4979
4980 if (queue_interval == 0 && !f.daemon_listen)
4981   {
4982   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4983     start_queue_run_id ? US" starting at " : US"",
4984     start_queue_run_id ? start_queue_run_id: US"",
4985     stop_queue_run_id ?  US" stopping at " : US"",
4986     stop_queue_run_id ?  stop_queue_run_id : US"");
4987   if (*queue_name)
4988     set_process_info("running the '%s' queue (single queue run)", queue_name);
4989   else
4990     set_process_info("running the queue (single queue run)");
4991   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4992   exim_exit(EXIT_SUCCESS);
4993   }
4994
4995
4996 /* Find the login name of the real user running this process. This is always
4997 needed when receiving a message, because it is written into the spool file. It
4998 may also be used to construct a from: or a sender: header, and in this case we
4999 need the user's full name as well, so save a copy of it, checked for RFC822
5000 syntax and munged if necessary, if it hasn't previously been set by the -F
5001 argument. We may try to get the passwd entry more than once, in case NIS or
5002 other delays are in evidence. Save the home directory for use in filter testing
5003 (only). */
5004
5005 for (i = 0;;)
5006   {
5007   if ((pw = getpwuid(real_uid)) != NULL)
5008     {
5009     originator_login = string_copy(US pw->pw_name);
5010     originator_home = string_copy(US pw->pw_dir);
5011
5012     /* If user name has not been set by -F, set it from the passwd entry
5013     unless -f has been used to set the sender address by a trusted user. */
5014
5015     if (!originator_name)
5016       {
5017       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
5018         {
5019         uschar *name = US pw->pw_gecos;
5020         uschar *amp = Ustrchr(name, '&');
5021         uschar buffer[256];
5022
5023         /* Most Unix specify that a '&' character in the gecos field is
5024         replaced by a copy of the login name, and some even specify that
5025         the first character should be upper cased, so that's what we do. */
5026
5027         if (amp)
5028           {
5029           int loffset;
5030           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
5031             (int)(amp - name), name, &loffset, originator_login, amp + 1);
5032           buffer[loffset] = toupper(buffer[loffset]);
5033           name = buffer;
5034           }
5035
5036         /* If a pattern for matching the gecos field was supplied, apply
5037         it and then expand the name string. */
5038
5039         if (gecos_pattern && gecos_name)
5040           {
5041           const pcre2_code *re;
5042           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
5043
5044           if (regex_match_and_setup(re, name, 0, -1))
5045             {
5046             uschar *new_name = expand_string(gecos_name);
5047             expand_nmax = -1;
5048             if (new_name)
5049               {
5050               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
5051                 "gecos field \"%s\"\n", new_name, name);
5052               name = new_name;
5053               }
5054             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
5055               "\"%s\": %s\n", gecos_name, expand_string_message);
5056             }
5057           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
5058             "gecos field \"%s\"\n", gecos_pattern, name);
5059           store_free((void *)re);
5060           }
5061         originator_name = string_copy(name);
5062         }
5063
5064       /* A trusted caller has used -f but not -F */
5065
5066       else originator_name = US"";
5067       }
5068
5069     /* Break the retry loop */
5070
5071     break;
5072     }
5073
5074   if (++i > finduser_retries) break;
5075   sleep(1);
5076   }
5077
5078 /* If we cannot get a user login, log the incident and give up, unless the
5079 configuration specifies something to use. When running in the test harness,
5080 any setting of unknown_login overrides the actual name. */
5081
5082 if (!originator_login || f.running_in_test_harness)
5083   {
5084   if (unknown_login)
5085     {
5086     originator_login = expand_string(unknown_login);
5087     if (!originator_name && unknown_username)
5088       originator_name = expand_string(unknown_username);
5089     if (!originator_name) originator_name = US"";
5090     }
5091   if (!originator_login)
5092     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
5093       (int)real_uid);
5094   }
5095
5096 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
5097 RFC822 address.*/
5098
5099 originator_name = US parse_fix_phrase(originator_name, Ustrlen(originator_name));
5100
5101 /* If a message is created by this call of Exim, the uid/gid of its originator
5102 are those of the caller. These values are overridden if an existing message is
5103 read in from the spool. */
5104
5105 originator_uid = real_uid;
5106 originator_gid = real_gid;
5107
5108 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
5109   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
5110
5111 /* Run in daemon and/or queue-running mode. The function daemon_go() never
5112 returns. We leave this till here so that the originator_ fields are available
5113 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
5114 mode. */
5115
5116 if (f.daemon_listen || f.inetd_wait_mode || queue_interval > 0)
5117   {
5118   if (mua_wrapper)
5119     {
5120     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
5121     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
5122       "mua_wrapper is set");
5123     }
5124
5125 # ifndef DISABLE_TLS
5126   /* This also checks that the library linkage is working and we can call
5127   routines in it, so call even if tls_require_ciphers is unset */
5128     {
5129 # ifdef MEASURE_TIMING
5130     struct timeval t0, diff;
5131     (void)gettimeofday(&t0, NULL);
5132 # endif
5133     if (!tls_dropprivs_validate_require_cipher(FALSE))
5134       exit(1);
5135 # ifdef MEASURE_TIMING
5136     report_time_since(&t0, US"validate_ciphers (delta)");
5137 # endif
5138     }
5139 #endif
5140
5141   daemon_go();
5142   }
5143
5144 /* If the sender ident has not been set (by a trusted caller) set it to
5145 the caller. This will get overwritten below for an inetd call. If a trusted
5146 caller has set it empty, unset it. */
5147
5148 if (!sender_ident) sender_ident = originator_login;
5149 else if (!*sender_ident) sender_ident = NULL;
5150
5151 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
5152 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
5153 originator_* variables set. */
5154
5155 if (test_rewrite_arg >= 0)
5156   {
5157   f.really_exim = FALSE;
5158   if (test_rewrite_arg >= argc)
5159     {
5160     printf("-brw needs an address argument\n");
5161     exim_exit(EXIT_FAILURE);
5162     }
5163   rewrite_test(exim_str_fail_toolong(argv[test_rewrite_arg], EXIM_EMAILADDR_MAX, "-brw"));
5164   exim_exit(EXIT_SUCCESS);
5165   }
5166
5167 /* A locally-supplied message is considered to be coming from a local user
5168 unless a trusted caller supplies a sender address with -f, or is passing in the
5169 message via SMTP (inetd invocation or otherwise). */
5170
5171 if (  !sender_address && !smtp_input
5172    || !f.trusted_caller && filter_test == FTEST_NONE)
5173   {
5174   f.sender_local = TRUE;
5175
5176   /* A trusted caller can supply authenticated_sender and authenticated_id
5177   via -oMas and -oMai and if so, they will already be set. Otherwise, force
5178   defaults except when host checking. */
5179
5180   if (!authenticated_sender && !host_checking)
5181     authenticated_sender = string_sprintf("%s@%s", originator_login,
5182       qualify_domain_sender);
5183   if (!authenticated_id && !host_checking)
5184     authenticated_id = originator_login;
5185   }
5186
5187 /* Trusted callers are always permitted to specify the sender address.
5188 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
5189 is specified is the empty address. However, if a trusted caller does not
5190 specify a sender address for SMTP input, we leave sender_address unset. This
5191 causes the MAIL commands to be honoured. */
5192
5193 if (  !smtp_input && !sender_address
5194    || !receive_check_set_sender(sender_address))
5195   {
5196   /* Either the caller is not permitted to set a general sender, or this is
5197   non-SMTP input and the trusted caller has not set a sender. If there is no
5198   sender, or if a sender other than <> is set, override with the originator's
5199   login (which will get qualified below), except when checking things. */
5200
5201   if (  !sender_address                  /* No sender_address set */
5202      ||                                  /*         OR            */
5203        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
5204        !checking))                       /* Not running tests, including filter tests */
5205     {
5206     sender_address = originator_login;
5207     f.sender_address_forced = FALSE;
5208     sender_address_domain = 0;
5209     }
5210   }
5211
5212 /* Remember whether an untrusted caller set the sender address */
5213
5214 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
5215
5216 /* Ensure that the sender address is fully qualified unless it is the empty
5217 address, which indicates an error message, or doesn't exist (root caller, smtp
5218 interface, no -f argument). */
5219
5220 if (sender_address && *sender_address && sender_address_domain == 0)
5221   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
5222     qualify_domain_sender);
5223
5224 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
5225
5226 /* Handle a request to verify a list of addresses, or test them for delivery.
5227 This must follow the setting of the sender address, since routers can be
5228 predicated upon the sender. If no arguments are given, read addresses from
5229 stdin. Set debug_level to at least D_v to get full output for address testing.
5230 */
5231
5232 if (verify_address_mode || f.address_test_mode)
5233   {
5234   int exit_value = 0;
5235   int flags = vopt_qualify;
5236
5237   if (verify_address_mode)
5238     {
5239     if (!verify_as_sender) flags |= vopt_is_recipient;
5240     DEBUG(D_verify) debug_print_ids(US"Verifying:");
5241     }
5242
5243   else
5244     {
5245     flags |= vopt_is_recipient;
5246     debug_selector |= D_v;
5247     debug_file = stderr;
5248     debug_fd = fileno(debug_file);
5249     DEBUG(D_verify) debug_print_ids(US"Address testing:");
5250     }
5251
5252   if (recipients_arg < argc)
5253     while (recipients_arg < argc)
5254       {
5255       /* Supplied addresses are tainted since they come from a user */
5256       uschar * s = string_copy_taint(
5257         exim_str_fail_toolong(argv[recipients_arg++], EXIM_DISPLAYMAIL_MAX, "address verification"),
5258         GET_TAINTED);
5259       while (*s)
5260         {
5261         BOOL finished = FALSE;
5262         uschar *ss = parse_find_address_end(s, FALSE);
5263         if (*ss == ',') *ss = 0; else finished = TRUE;
5264         test_address(s, flags, &exit_value);
5265         s = ss;
5266         if (!finished)
5267           while (*++s == ',' || isspace(*s)) ;
5268         }
5269       }
5270
5271   else for (;;)
5272     {
5273     uschar * s = get_stdinput(NULL, NULL);
5274     if (!s) break;
5275     test_address(string_copy_taint(
5276         exim_str_fail_toolong(s, EXIM_DISPLAYMAIL_MAX, "address verification (stdin)"),
5277         GET_TAINTED),
5278       flags, &exit_value);
5279     }
5280
5281   route_tidyup();
5282   exim_exit(exit_value);
5283   }
5284
5285 /* Handle expansion checking. Either expand items on the command line, or read
5286 from stdin if there aren't any. If -Mset was specified, load the message so
5287 that its variables can be used, but restrict this facility to admin users.
5288 Otherwise, if -bem was used, read a message from stdin. */
5289
5290 if (expansion_test)
5291   {
5292   dns_init(FALSE, FALSE, FALSE);
5293   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
5294     {
5295     uschar * spoolname;
5296     if (!f.admin_user)
5297       exim_fail("exim: permission denied\n");
5298     message_id = US exim_str_fail_toolong(argv[msg_action_arg], MESSAGE_ID_LENGTH, "message-id");
5299     /* Checking the length of the ID is sufficient to validate it.
5300     Get an untainted version so file opens can be done. */
5301     message_id = string_copy_taint(message_id, GET_UNTAINTED);
5302
5303     spoolname = string_sprintf("%s-H", message_id);
5304     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
5305       printf ("Failed to load message datafile %s\n", message_id);
5306     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
5307       printf ("Failed to load message %s\n", message_id);
5308     }
5309
5310   /* Read a test message from a file. We fudge it up to be on stdin, saving
5311   stdin itself for later reading of expansion strings. */
5312
5313   else if (expansion_test_message)
5314     {
5315     int save_stdin = dup(0);
5316     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
5317     if (fd < 0)
5318       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
5319         strerror(errno));
5320     (void) dup2(fd, 0);
5321     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5322     message_ended = END_NOTENDED;
5323     read_message_body(receive_msg(extract_recipients));
5324     message_linecount += body_linecount;
5325     (void)dup2(save_stdin, 0);
5326     (void)close(save_stdin);
5327     clearerr(stdin);               /* Required by Darwin */
5328     }
5329
5330   /* Only admin users may see config-file macros this way */
5331
5332   if (!f.admin_user) macros_user = macros = mlast = NULL;
5333
5334   /* Allow $recipients for this testing */
5335
5336   f.enable_dollar_recipients = TRUE;
5337
5338   /* Expand command line items */
5339
5340   if (recipients_arg < argc)
5341     while (recipients_arg < argc)
5342       expansion_test_line(exim_str_fail_toolong(argv[recipients_arg++], EXIM_EMAILADDR_MAX, "recipient"));
5343
5344   /* Read stdin */
5345
5346   else
5347     {
5348     char *(*fn_readline)(const char *) = NULL;
5349     void (*fn_addhist)(const char *) = NULL;
5350     uschar * s;
5351
5352 #ifdef USE_READLINE
5353     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5354 #endif
5355
5356     while (s = get_stdinput(fn_readline, fn_addhist))
5357       expansion_test_line(s);
5358
5359 #ifdef USE_READLINE
5360     if (dlhandle) dlclose(dlhandle);
5361 #endif
5362     }
5363
5364   /* The data file will be open after -Mset */
5365
5366   if (deliver_datafile >= 0)
5367     {
5368     (void)close(deliver_datafile);
5369     deliver_datafile = -1;
5370     }
5371
5372   exim_exit(EXIT_SUCCESS);
5373   }
5374
5375
5376 /* The active host name is normally the primary host name, but it can be varied
5377 for hosts that want to play several parts at once. We need to ensure that it is
5378 set for host checking, and for receiving messages. */
5379
5380 smtp_active_hostname = primary_hostname;
5381 if (raw_active_hostname != NULL)
5382   {
5383   uschar *nah = expand_string(raw_active_hostname);
5384   if (nah == NULL)
5385     {
5386     if (!f.expand_string_forcedfail)
5387       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5388         "(smtp_active_hostname): %s", raw_active_hostname,
5389         expand_string_message);
5390     }
5391   else if (nah[0] != 0) smtp_active_hostname = nah;
5392   }
5393
5394 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5395 given IP address so that the blocking and relay configuration can be tested.
5396 Unless a sender_ident was set by -oMt, we discard it (the default is the
5397 caller's login name). An RFC 1413 call is made only if we are running in the
5398 test harness and an incoming interface and both ports are specified, because
5399 there is no TCP/IP call to find the ident for. */
5400
5401 if (host_checking)
5402   {
5403   int x[4];
5404   int size;
5405
5406   if (!sender_ident_set)
5407     {
5408     sender_ident = NULL;
5409     if (f.running_in_test_harness && sender_host_port
5410        && interface_address && interface_port)
5411       verify_get_ident(1223);           /* note hardwired port number */
5412     }
5413
5414   /* In case the given address is a non-canonical IPv6 address, canonicalize
5415   it. The code works for both IPv4 and IPv6, as it happens. */
5416
5417   size = host_aton(sender_host_address, x);
5418   sender_host_address = store_get(48, GET_UNTAINTED);  /* large enough for full IPv6 */
5419   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5420
5421   /* Now set up for testing */
5422
5423   host_build_sender_fullhost();
5424   smtp_input = TRUE;
5425   smtp_in = stdin;
5426   smtp_out = stdout;
5427   f.sender_local = FALSE;
5428   f.sender_host_notsocket = TRUE;
5429   debug_file = stderr;
5430   debug_fd = fileno(debug_file);
5431   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5432     "**** but without any ident (RFC 1413) callback.\n"
5433     "**** This is not for real!\n\n",
5434       sender_host_address);
5435
5436   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5437   if (verify_check_host(&hosts_connection_nolog) == OK)
5438     {
5439     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5440     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5441     }
5442   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5443
5444   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5445   because a log line has already been written for all its failure exists
5446   (usually "connection refused: <reason>") and writing another one is
5447   unnecessary clutter. */
5448
5449   if (smtp_start_session())
5450     {
5451     rmark reset_point;
5452     for (; (reset_point = store_mark()); store_reset(reset_point))
5453       {
5454       if (smtp_setup_msg() <= 0) break;
5455       if (!receive_msg(FALSE)) break;
5456
5457       return_path = sender_address = NULL;
5458       dnslist_domain = dnslist_matched = NULL;
5459 #ifndef DISABLE_DKIM
5460       dkim_cur_signer = NULL;
5461 #endif
5462       acl_var_m = NULL;
5463       deliver_localpart_orig = NULL;
5464       deliver_domain_orig = NULL;
5465       callout_address = sending_ip_address = NULL;
5466       deliver_localpart_data = deliver_domain_data =
5467       recipient_data = sender_data = NULL;
5468       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5469       }
5470     smtp_log_no_mail();
5471     }
5472   exim_exit(EXIT_SUCCESS);
5473   }
5474
5475
5476 /* Arrange for message reception if recipients or SMTP were specified;
5477 otherwise complain unless a version print (-bV) happened or this is a filter
5478 verification test or info dump.
5479 In the former case, show the configuration file name. */
5480
5481 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5482   {
5483   if (version_printed)
5484     {
5485     if (Ustrchr(config_main_filelist, ':'))
5486       printf("Configuration file search path is %s\n", config_main_filelist);
5487     printf("Configuration file is %s\n", config_main_filename);
5488     return EXIT_SUCCESS;
5489     }
5490
5491   if (info_flag != CMDINFO_NONE)
5492     {
5493     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5494     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5495     }
5496
5497   if (filter_test == FTEST_NONE)
5498     exim_usage(called_as);
5499   }
5500
5501
5502 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5503 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5504 that we are not called from inetd, because that is rejected above. The
5505 following configuration settings are forced here:
5506
5507   (1) Synchronous delivery (-odi)
5508   (2) Errors to stderr (-oep == -oeq)
5509   (3) No parallel remote delivery
5510   (4) Unprivileged delivery
5511
5512 We don't force overall queueing options because there are several of them;
5513 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5514 to override any SMTP queueing. */
5515
5516 if (mua_wrapper)
5517   {
5518   f.synchronous_delivery = TRUE;
5519   arg_error_handling = ERRORS_STDERR;
5520   remote_max_parallel = 1;
5521   deliver_drop_privilege = TRUE;
5522   f.queue_smtp = FALSE;
5523   queue_smtp_domains = NULL;
5524 #ifdef SUPPORT_I18N
5525   message_utf8_downconvert = -1;        /* convert-if-needed */
5526 #endif
5527   }
5528
5529
5530 /* Prepare to accept one or more new messages on the standard input. When a
5531 message has been read, its id is returned in message_id[]. If doing immediate
5532 delivery, we fork a delivery process for each received message, except for the
5533 last one, where we can save a process switch.
5534
5535 It is only in non-smtp mode that error_handling is allowed to be changed from
5536 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5537 sendmail error modes other than -oem ever actually used? Later: yes.) */
5538
5539 if (!smtp_input) error_handling = arg_error_handling;
5540
5541 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5542 logging being sent down the socket and make an identd call to get the
5543 sender_ident. */
5544
5545 else if (f.is_inetd)
5546   {
5547   (void)fclose(stderr);
5548   exim_nullstd();                       /* Re-open to /dev/null */
5549   verify_get_ident(IDENT_PORT);
5550   host_build_sender_fullhost();
5551   set_process_info("handling incoming connection from %s via inetd",
5552     sender_fullhost);
5553   }
5554
5555 /* If the sender host address has been set, build sender_fullhost if it hasn't
5556 already been done (which it will have been for inetd). This caters for the
5557 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5558 so that the test for IP options is skipped for -bs input. */
5559
5560 if (sender_host_address && !sender_fullhost)
5561   {
5562   host_build_sender_fullhost();
5563   set_process_info("handling incoming connection from %s via -oMa",
5564     sender_fullhost);
5565   f.sender_host_notsocket = TRUE;
5566   }
5567
5568 /* Otherwise, set the sender host as unknown except for inetd calls. This
5569 prevents host checking in the case of -bs not from inetd and also for -bS. */
5570
5571 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5572
5573 /* If stdout does not exist, then dup stdin to stdout. This can happen
5574 if exim is started from inetd. In this case fd 0 will be set to the socket,
5575 but fd 1 will not be set. This also happens for passed SMTP channels. */
5576
5577 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5578
5579 /* Set up the incoming protocol name and the state of the program. Root is
5580 allowed to force received protocol via the -oMr option above. If we have come
5581 via inetd, the process info has already been set up. We don't set
5582 received_protocol here for smtp input, as it varies according to
5583 batch/HELO/EHLO/AUTH/TLS. */
5584
5585 if (smtp_input)
5586   {
5587   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5588     smtp_batched_input? "batched " : "",
5589     sender_address ? sender_address : originator_login);
5590   }
5591 else
5592   {
5593   int old_pool = store_pool;
5594   store_pool = POOL_PERM;
5595   if (!received_protocol)
5596     received_protocol = string_sprintf("local%s", called_as);
5597   store_pool = old_pool;
5598   set_process_info("accepting a local non-SMTP message from <%s>",
5599     sender_address);
5600   }
5601
5602 /* Initialize the session_local_queue-only flag (this will be ignored if
5603 mua_wrapper is set) */
5604
5605 queue_check_only();
5606 session_local_queue_only = queue_only;
5607
5608 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5609 the spool if so configured. On failure, we must not attempt to send an error
5610 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5611 error code is given.) */
5612
5613 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5614   exim_fail("exim: insufficient disk space\n");
5615
5616 /* If this is smtp input of any kind, real or batched, handle the start of the
5617 SMTP session.
5618
5619 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5620 because a log line has already been written for all its failure exists
5621 (usually "connection refused: <reason>") and writing another one is
5622 unnecessary clutter. */
5623
5624 if (smtp_input)
5625   {
5626   smtp_in = stdin;
5627   smtp_out = stdout;
5628   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5629   if (verify_check_host(&hosts_connection_nolog) == OK)
5630     {
5631     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5632     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5633     }
5634   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5635   if (!smtp_start_session())
5636     {
5637     mac_smtp_fflush();
5638     exim_exit(EXIT_SUCCESS);
5639     }
5640   }
5641
5642 /* Otherwise, set up the input size limit here and set no stdin stdio buffer
5643 (we handle buferring so as to have visibility of fill level). */
5644
5645 else
5646   {
5647   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5648   if (expand_string_message)
5649     if (thismessage_size_limit == -1)
5650       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5651         "message_size_limit: %s", expand_string_message);
5652     else
5653       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5654         "message_size_limit: %s", expand_string_message);
5655
5656   setvbuf(stdin, NULL, _IONBF, 0);
5657   }
5658
5659 /* Loop for several messages when reading SMTP input. If we fork any child
5660 processes, we don't want to wait for them unless synchronous delivery is
5661 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5662 same as SIG_DFL, despite the fact that documentation often lists the default as
5663 "ignore". This is a confusing area. This is what I know:
5664
5665 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5666 processes that complete simply to go away without ever becoming defunct. You
5667 can't then wait for them - but we don't want to wait for them in the
5668 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5669 happen for all OS (e.g. *BSD is different).
5670
5671 But that's not the end of the story. Some (many? all?) systems have the
5672 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5673 has by default, so it seems that the difference is merely one of default
5674 (compare restarting vs non-restarting signals).
5675
5676 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5677 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5678 of the loop below. Paranoia rules.
5679
5680 February 2003: That's *still* not the end of the story. There are now versions
5681 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5682 process then calls waitpid(), a grumble is written to the system log, because
5683 this is logically inconsistent. In other words, it doesn't like the paranoia.
5684 As a consequence of this, the waitpid() below is now excluded if we are sure
5685 that SIG_IGN works. */
5686
5687 if (!f.synchronous_delivery)
5688   {
5689 #ifdef SA_NOCLDWAIT
5690   struct sigaction act;
5691   act.sa_handler = SIG_IGN;
5692   sigemptyset(&(act.sa_mask));
5693   act.sa_flags = SA_NOCLDWAIT;
5694   sigaction(SIGCHLD, &act, NULL);
5695 #else
5696   signal(SIGCHLD, SIG_IGN);
5697 #endif
5698   }
5699
5700 /* Save the current store pool point, for resetting at the start of
5701 each message, and save the real sender address, if any. */
5702
5703 real_sender_address = sender_address;
5704
5705 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5706 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5707 collapsed). */
5708
5709 for (BOOL more = TRUE; more; )
5710   {
5711   rmark reset_point = store_mark();
5712   message_id[0] = 0;
5713
5714   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5715   input and build the recipients list, before calling receive_msg() to read the
5716   message proper. Whatever sender address is given in the SMTP transaction is
5717   often ignored for local senders - we use the actual sender, which is normally
5718   either the underlying user running this process or a -f argument provided by
5719   a trusted caller. It is saved in real_sender_address. The test for whether to
5720   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5721
5722   if (smtp_input)
5723     {
5724     int rc;
5725     if ((rc = smtp_setup_msg()) > 0)
5726       {
5727       if (real_sender_address != NULL &&
5728           !receive_check_set_sender(sender_address))
5729         {
5730         sender_address = raw_sender = real_sender_address;
5731         sender_address_unrewritten = NULL;
5732         }
5733
5734       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5735       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5736       the very end. The result of the ACL is ignored (as for other non-SMTP
5737       messages). It is run for its potential side effects. */
5738
5739       if (smtp_batched_input && acl_not_smtp_start != NULL)
5740         {
5741         uschar *user_msg, *log_msg;
5742         f.enable_dollar_recipients = TRUE;
5743         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5744           &user_msg, &log_msg);
5745         f.enable_dollar_recipients = FALSE;
5746         }
5747
5748       /* Now get the data for the message */
5749
5750       more = receive_msg(extract_recipients);
5751       if (!message_id[0])
5752         {
5753         cancel_cutthrough_connection(TRUE, US"receive dropped");
5754         if (more) goto MORELOOP;
5755         smtp_log_no_mail();               /* Log no mail if configured */
5756         exim_exit(EXIT_FAILURE);
5757         }
5758       }
5759     else
5760       {
5761       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5762       smtp_log_no_mail();               /* Log no mail if configured */
5763       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
5764       }
5765     }
5766
5767   /* In the non-SMTP case, we have all the information from the command
5768   line, but must process it in case it is in the more general RFC822
5769   format, and in any case, to detect syntax errors. Also, it appears that
5770   the use of comma-separated lists as single arguments is common, so we
5771   had better support them. */
5772
5773   else
5774     {
5775     int rcount = 0;
5776     int count = argc - recipients_arg;
5777     uschar **list = argv + recipients_arg;
5778
5779     /* These options cannot be changed dynamically for non-SMTP messages */
5780
5781     f.active_local_sender_retain = local_sender_retain;
5782     f.active_local_from_check = local_from_check;
5783
5784     /* Save before any rewriting */
5785
5786     raw_sender = string_copy(sender_address);
5787
5788     /* Loop for each argument (supplied by user hence tainted) */
5789
5790     for (int i = 0; i < count; i++)
5791       {
5792       int start, end, domain;
5793       uschar * errmess;
5794       /* There can be multiple addresses, so EXIM_DISPLAYMAIL_MAX (tuned for 1) is too short.
5795        * We'll still want to cap it to something, just in case. */
5796       uschar * s = string_copy_taint(
5797         exim_str_fail_toolong(list[i], BIG_BUFFER_SIZE, "address argument"),
5798         GET_TAINTED);
5799
5800       /* Loop for each comma-separated address */
5801
5802       while (*s)
5803         {
5804         BOOL finished = FALSE;
5805         uschar *recipient;
5806         uschar *ss = parse_find_address_end(s, FALSE);
5807
5808         if (*ss == ',') *ss = 0; else finished = TRUE;
5809
5810         /* Check max recipients - if -t was used, these aren't recipients */
5811
5812         if (recipients_max > 0 && ++rcount > recipients_max &&
5813             !extract_recipients)
5814           if (error_handling == ERRORS_STDERR)
5815             {
5816             fprintf(stderr, "exim: too many recipients\n");
5817             exim_exit(EXIT_FAILURE);
5818             }
5819           else
5820             return
5821               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5822                 errors_sender_rc : EXIT_FAILURE;
5823
5824 #ifdef SUPPORT_I18N
5825         {
5826         BOOL b = allow_utf8_domains;
5827         allow_utf8_domains = TRUE;
5828 #endif
5829         recipient =
5830           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5831
5832 #ifdef SUPPORT_I18N
5833         if (recipient)
5834           if (string_is_utf8(recipient)) message_smtputf8 = TRUE;
5835           else allow_utf8_domains = b;
5836         }
5837 #else
5838         ;
5839 #endif
5840         if (domain == 0 && !f.allow_unqualified_recipient)
5841           {
5842           recipient = NULL;
5843           errmess = US"unqualified recipient address not allowed";
5844           }
5845
5846         if (!recipient)
5847           if (error_handling == ERRORS_STDERR)
5848             {
5849             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5850               string_printing(list[i]), errmess);
5851             exim_exit(EXIT_FAILURE);
5852             }
5853           else
5854             {
5855             error_block eblock;
5856             eblock.next = NULL;
5857             eblock.text1 = string_printing(list[i]);
5858             eblock.text2 = errmess;
5859             return
5860               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5861                 errors_sender_rc : EXIT_FAILURE;
5862             }
5863
5864         receive_add_recipient(string_copy_taint(recipient, GET_TAINTED), -1);
5865         s = ss;
5866         if (!finished)
5867           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5868         }
5869       }
5870
5871     /* Show the recipients when debugging */
5872
5873     DEBUG(D_receive)
5874       {
5875       if (sender_address) debug_printf("Sender: %s\n", sender_address);
5876       if (recipients_list)
5877         {
5878         debug_printf("Recipients:\n");
5879         for (int i = 0; i < recipients_count; i++)
5880           debug_printf("  %s\n", recipients_list[i].address);
5881         }
5882       }
5883
5884     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5885     ignored; rejecting here would just add complication, and it can just as
5886     well be done later. Allow $recipients to be visible in the ACL. */
5887
5888     if (acl_not_smtp_start)
5889       {
5890       uschar *user_msg, *log_msg;
5891       f.enable_dollar_recipients = TRUE;
5892       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5893         &user_msg, &log_msg);
5894       f.enable_dollar_recipients = FALSE;
5895       }
5896
5897     /* Pause for a while waiting for input.  If none received in that time,
5898     close the logfile, if we had one open; then if we wait for a long-running
5899     datasource (months, in one use-case) log rotation will not leave us holding
5900     the file copy. */
5901
5902     if (!receive_timeout)
5903       if (poll_one_fd(0, POLLIN, 30*60*1000) == 0)      /* 30 minutes */
5904         mainlog_close();
5905
5906     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5907     will just read the headers for the message, and not write anything onto the
5908     spool. */
5909
5910     message_ended = END_NOTENDED;
5911     more = receive_msg(extract_recipients);
5912
5913     /* more is always FALSE here (not SMTP message) when reading a message
5914     for real; when reading the headers of a message for filter testing,
5915     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5916
5917     if (!message_id[0]) exim_exit(EXIT_FAILURE);
5918     }  /* Non-SMTP message reception */
5919
5920   /* If this is a filter testing run, there are headers in store, but
5921   no message on the spool. Run the filtering code in testing mode, setting
5922   the domain to the qualify domain and the local part to the current user,
5923   unless they have been set by options. The prefix and suffix are left unset
5924   unless specified. The the return path is set to to the sender unless it has
5925   already been set from a return-path header in the message. */
5926
5927   if (filter_test != FTEST_NONE)
5928     {
5929     deliver_domain = ftest_domain ? ftest_domain : qualify_domain_recipient;
5930     deliver_domain_orig = deliver_domain;
5931     deliver_localpart = ftest_localpart ? US ftest_localpart : originator_login;
5932     deliver_localpart_orig = deliver_localpart;
5933     deliver_localpart_prefix = US ftest_prefix;
5934     deliver_localpart_suffix = US ftest_suffix;
5935     deliver_home = originator_home;
5936
5937     if (!return_path)
5938       {
5939       printf("Return-path copied from sender\n");
5940       return_path = string_copy(sender_address);
5941       }
5942     else
5943       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5944     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5945
5946     receive_add_recipient(
5947       string_sprintf("%s%s%s@%s",
5948         ftest_prefix ? ftest_prefix : US"",
5949         deliver_localpart,
5950         ftest_suffix ? ftest_suffix : US"",
5951         deliver_domain), -1);
5952
5953     printf("Recipient   = %s\n", recipients_list[0].address);
5954     if (ftest_prefix) printf("Prefix    = %s\n", ftest_prefix);
5955     if (ftest_suffix) printf("Suffix    = %s\n", ftest_suffix);
5956
5957     if (chdir("/"))   /* Get away from wherever the user is running this from */
5958       {
5959       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5960       exim_exit(EXIT_FAILURE);
5961       }
5962
5963     /* Now we run either a system filter test, or a user filter test, or both.
5964     In the latter case, headers added by the system filter will persist and be
5965     available to the user filter. We need to copy the filter variables
5966     explicitly. */
5967
5968     if (filter_test & FTEST_SYSTEM)
5969       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5970         exim_exit(EXIT_FAILURE);
5971
5972     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5973
5974     if (filter_test & FTEST_USER)
5975       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5976         exim_exit(EXIT_FAILURE);
5977
5978     exim_exit(EXIT_SUCCESS);
5979     }
5980
5981   /* Else act on the result of message reception. We should not get here unless
5982   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5983   will be TRUE. If it is not, check on the number of messages received in this
5984   connection. */
5985
5986   if (  !session_local_queue_only
5987      && smtp_accept_queue_per_connection > 0
5988      && receive_messagecount > smtp_accept_queue_per_connection)
5989     {
5990     session_local_queue_only = TRUE;
5991     queue_only_reason = 2;
5992     }
5993
5994   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5995   and queue_only_load is set, check that the load average is below it. If it is
5996   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5997   default), we put the whole session into queue_only mode. It then remains this
5998   way for any subsequent messages on the same SMTP connection. This is a
5999   deliberate choice; even though the load average may fall, it doesn't seem
6000   right to deliver later messages on the same call when not delivering earlier
6001   ones. However, there are odd cases where this is not wanted, so this can be
6002   changed by setting queue_only_load_latch false. */
6003
6004   if (!(local_queue_only = session_local_queue_only) && queue_only_load >= 0)
6005     if ((local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load))
6006       {
6007       queue_only_reason = 3;
6008       if (queue_only_load_latch) session_local_queue_only = TRUE;
6009       }
6010
6011   /* If running as an MUA wrapper, all queueing options and freezing options
6012   are ignored. */
6013
6014   if (mua_wrapper)
6015     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
6016
6017   /* Log the queueing here, when it will get a message id attached, but
6018   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
6019   connections). */
6020
6021   if (local_queue_only)
6022     {
6023     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6024     switch(queue_only_reason)
6025       {
6026       case 2:
6027         log_write(L_delay_delivery,
6028                 LOG_MAIN, "no immediate delivery: more than %d messages "
6029           "received in one connection", smtp_accept_queue_per_connection);
6030         break;
6031
6032       case 3:
6033         log_write(L_delay_delivery,
6034                 LOG_MAIN, "no immediate delivery: load average %.2f",
6035                 (double)load_average/1000.0);
6036       break;
6037       }
6038     }
6039
6040   else if (f.queue_only_policy || f.deliver_freeze)
6041     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6042
6043   /* Else do the delivery unless the ACL or local_scan() called for queue only
6044   or froze the message. Always deliver in a separate process. A fork failure is
6045   not a disaster, as the delivery will eventually happen on a subsequent queue
6046   run. The search cache must be tidied before the fork, as the parent will
6047   do it before exiting. The child will trigger a lookup failure and
6048   thereby defer the delivery if it tries to use (for example) a cached ldap
6049   connection that the parent has called unbind on. */
6050
6051   else
6052     {
6053     pid_t pid;
6054     search_tidyup();
6055
6056     if ((pid = exim_fork(US"local-accept-delivery")) == 0)
6057       {
6058       int rc;
6059       close_unwanted();      /* Close unwanted file descriptors and TLS */
6060       exim_nullstd();        /* Ensure std{in,out,err} exist */
6061
6062       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
6063       mode, deliver_drop_privilege is forced TRUE). */
6064
6065       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
6066         {
6067         delivery_re_exec(CEE_EXEC_EXIT);
6068         /* Control does not return here. */
6069         }
6070
6071       /* No need to re-exec */
6072
6073       rc = deliver_message(message_id, FALSE, FALSE);
6074       search_tidyup();
6075       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
6076         ? EXIT_SUCCESS : EXIT_FAILURE);
6077       }
6078
6079     if (pid < 0)
6080       {
6081       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
6082       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
6083         "process: %s", strerror(errno));
6084       }
6085     else
6086       {
6087       release_cutthrough_connection(US"msg passed for delivery");
6088
6089       /* In the parent, wait if synchronous delivery is required. This will
6090       always be the case in MUA wrapper mode. */
6091
6092       if (f.synchronous_delivery)
6093         {
6094         int status;
6095         while (wait(&status) != pid);
6096         if ((status & 0x00ff) != 0)
6097           log_write(0, LOG_MAIN|LOG_PANIC,
6098             "process %d crashed with signal %d while delivering %s",
6099             (int)pid, status & 0x00ff, message_id);
6100         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
6101         }
6102       }
6103     }
6104
6105   /* The loop will repeat if more is TRUE. If we do not know know that the OS
6106   automatically reaps children (see comments above the loop), clear away any
6107   finished subprocesses here, in case there are lots of messages coming in
6108   from the same source. */
6109
6110 #ifndef SIG_IGN_WORKS
6111   while (waitpid(-1, NULL, WNOHANG) > 0);
6112 #endif
6113
6114 MORELOOP:
6115   return_path = sender_address = NULL;
6116   authenticated_sender = NULL;
6117   deliver_localpart_orig = NULL;
6118   deliver_domain_orig = NULL;
6119   deliver_host = deliver_host_address = NULL;
6120   dnslist_domain = dnslist_matched = NULL;
6121 #ifdef WITH_CONTENT_SCAN
6122   malware_name = NULL;
6123 #endif
6124   callout_address = NULL;
6125   sending_ip_address = NULL;
6126   deliver_localpart_data = deliver_domain_data =
6127   recipient_data = sender_data = NULL;
6128   acl_var_m = NULL;
6129   for(int i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
6130
6131   store_reset(reset_point);
6132   }
6133
6134 exim_exit(EXIT_SUCCESS);   /* Never returns */
6135 return 0;                  /* To stop compiler warning */
6136 }
6137
6138
6139 /* End of exim.c */