Appendfile: release regex-match store every thousand files. Bug 3047
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) The Exim Maintainers 2020 - 2023 */
6 /* Copyright (c) University of Cambridge 1995 - 2018 */
7 /* See the file NOTICE for conditions of use and distribution. */
8 /* SPDX-License-Identifier: GPL-2.0-or-later */
9
10
11 /* The main function: entry point, initialization, and high-level control.
12 Also a few functions that don't naturally fit elsewhere. */
13
14
15 #include "exim.h"
16
17 #if defined(__GLIBC__) && !defined(__UCLIBC__)
18 # include <gnu/libc-version.h>
19 #endif
20
21 #ifndef _TIME_H
22 # include <time.h>
23 #endif
24 #ifndef NO_EXECINFO
25 # include <execinfo.h>
26 #endif
27
28 #ifdef USE_GNUTLS
29 # include <gnutls/gnutls.h>
30 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
31 #  define DISABLE_OCSP
32 # endif
33 #endif
34
35 extern void init_lookup_list(void);
36
37
38
39 /*************************************************
40 *      Function interface to store functions     *
41 *************************************************/
42
43 /* We need some real functions to pass to the PCRE regular expression library
44 for store allocation via Exim's store manager. The normal calls are actually
45 macros that pass over location information to make tracing easier. These
46 functions just interface to the standard macro calls. A good compiler will
47 optimize out the tail recursion and so not make them too expensive. */
48
49 static void *
50 function_store_malloc(PCRE2_SIZE size, void * tag)
51 {
52 if (size > INT_MAX)
53   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "excessive memory alloc request");
54 return store_malloc((int)size);
55 }
56
57 static void
58 function_store_free(void * block, void * tag)
59 {
60 /* At least some version of pcre2 pass a null pointer */
61 if (block) store_free(block);
62 }
63
64
65 static void *
66 function_store_get(PCRE2_SIZE size, void * tag)
67 {
68 if (size > INT_MAX)
69   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "excessive memory alloc request");
70 return store_get((int)size, GET_UNTAINTED);     /* loses track of taint */
71 }
72
73 static void
74 function_store_nullfree(void * block, void * tag)
75 {
76 /* We cannot free memory allocated using store_get() */
77 }
78
79
80
81
82 /*************************************************
83 *         Enums for cmdline interface            *
84 *************************************************/
85
86 enum commandline_info { CMDINFO_NONE=0,
87   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
88
89
90
91
92 static void
93 pcre_init(void)
94 {
95 pcre_mlc_ctx = pcre2_general_context_create(function_store_malloc, function_store_free, NULL);
96 pcre_gen_ctx = pcre2_general_context_create(function_store_get, function_store_nullfree, NULL);
97
98 pcre_mlc_cmp_ctx = pcre2_compile_context_create(pcre_mlc_ctx);
99 pcre_gen_cmp_ctx = pcre2_compile_context_create(pcre_gen_ctx);
100
101 pcre_gen_mtc_ctx = pcre2_match_context_create(pcre_gen_ctx);
102 }
103
104
105
106
107 /*************************************************
108 *   Execute regular expression and set strings   *
109 *************************************************/
110
111 /* This function runs a regular expression match, and sets up the pointers to
112 the matched substrings.  The matched strings are copied so the lifetime of
113 the subject is not a problem.  Matched strings will have the same taint status
114 as the subject string (this is not a de-taint method, and must not be made so
115 given the support for wildcards in REs).
116
117 Arguments:
118   re          the compiled expression
119   subject     the subject string
120   options     additional PCRE options
121   setup       if < 0 do full setup
122               if >= 0 setup from setup+1 onwards,
123                 excluding the full matched string
124
125 Returns:      TRUE if matched, or FALSE
126 */
127
128 BOOL
129 regex_match_and_setup(const pcre2_code * re, const uschar * subject, int options, int setup)
130 {
131 pcre2_match_data * md = pcre2_match_data_create_from_pattern(re, pcre_gen_ctx);
132 int res = pcre2_match(re, (PCRE2_SPTR)subject, PCRE2_ZERO_TERMINATED, 0,
133                         PCRE_EOPT | options, md, pcre_gen_mtc_ctx);
134 BOOL yield;
135
136 if ((yield = (res >= 0)))
137   {
138   PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
139   res = pcre2_get_ovector_count(md);
140   expand_nmax = setup < 0 ? 0 : setup + 1;
141   for (int matchnum = setup < 0 ? 0 : 1; matchnum < res; matchnum++)
142     {
143     /* Although PCRE2 has a pcre2_substring_get_bynumber() conveneience, it
144     seems to return a bad pointer when a capture group had no data, eg. (.*)
145     matching zero letters.  So use the underlying ovec and hope (!) that the
146     offsets are sane (including that case).  Should we go further and range-
147     check each one vs. the subject string length? */
148     int off = matchnum * 2;
149     int len = ovec[off + 1] - ovec[off];
150     expand_nstring[expand_nmax] = string_copyn(subject + ovec[off], len);
151     expand_nlength[expand_nmax++] = len;
152     }
153   expand_nmax--;
154   }
155 else if (res != PCRE2_ERROR_NOMATCH) DEBUG(D_any)
156   {
157   uschar errbuf[128];
158   pcre2_get_error_message(res, errbuf, sizeof(errbuf));
159   debug_printf_indent("pcre2: %s\n", errbuf);
160   }
161 /* pcre2_match_data_free(md);   gen ctx needs no free */
162 return yield;
163 }
164
165
166 /* Check just for match with regex.  Uses the common memory-handling.
167
168 Arguments:
169         re      compiled regex
170         subject string to be checked
171         slen    length of subject; -1 for nul-terminated
172         rptr    pointer for matched string, copied, or NULL
173
174 Return: TRUE for a match.
175 */
176
177 BOOL
178 regex_match(const pcre2_code * re, const uschar * subject, int slen, uschar ** rptr)
179 {
180 pcre2_match_data * md = pcre2_match_data_create(1, pcre_gen_ctx);
181 int rc = pcre2_match(re, (PCRE2_SPTR)subject,
182                       slen >= 0 ? slen : PCRE2_ZERO_TERMINATED,
183                       0, PCRE_EOPT, md, pcre_gen_mtc_ctx);
184 PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
185 BOOL ret = FALSE;
186
187 if (rc >= 0)
188   {
189   if (rptr)
190     *rptr = string_copyn(subject + ovec[0], ovec[1] - ovec[0]);
191   ret = TRUE;
192   }
193 /* pcre2_match_data_free(md);   gen ctx needs no free */
194 return ret;
195 }
196
197
198
199 /*************************************************
200 *            Set up processing details           *
201 *************************************************/
202
203 /* Save a text string for dumping when SIGUSR1 is received.
204 Do checks for overruns.
205
206 Arguments: format and arguments, as for printf()
207 Returns:   nothing
208 */
209
210 void
211 set_process_info(const char * format, ...)
212 {
213 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
214 gstring * g;
215 int len;
216 uschar * s;
217 va_list ap;
218
219 g = string_fmt_append(&gs, "%5d ", (int)getpid());
220 len = gstring_length(g);
221 va_start(ap, format);
222 if (!string_vformat(g, 0, format, ap))
223   {
224   gs.ptr = len;
225   g = string_cat(&gs, US"**** string overflowed buffer ****");
226   }
227 g = string_catn(g, US"\n", 1);
228 process_info_len = len_string_from_gstring(g, &s);
229 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
230 va_end(ap);
231 }
232
233 /***********************************************
234 *            Handler for SIGTERM               *
235 ***********************************************/
236
237 static void
238 term_handler(int sig)
239 {
240 exit(1);
241 }
242
243
244 /***********************************************
245 *            Handler for SIGSEGV               *
246 ***********************************************/
247
248 #define STACKDUMP_MAX 24
249 void
250 stackdump(void)
251 {
252 #ifndef NO_EXECINFO
253 void * buf[STACKDUMP_MAX];
254 char ** ss;
255 int nptrs = backtrace(buf, STACKDUMP_MAX);
256
257 log_write(0, LOG_MAIN|LOG_PANIC, "backtrace");
258 log_write(0, LOG_MAIN|LOG_PANIC, "---");
259 if ((ss = backtrace_symbols(buf, nptrs)))
260   {
261   for (int i = 0; i < nptrs; i++)
262     log_write(0, LOG_MAIN|LOG_PANIC, "\t%s", ss[i]);
263   free(ss);
264   }
265 else
266   log_write(0, LOG_MAIN|LOG_PANIC, "backtrace_symbols: %s", strerror(errno));
267 log_write(0, LOG_MAIN|LOG_PANIC, "---");
268 #endif
269 }
270 #undef STACKDUMP_MAX
271
272
273 static void
274 #ifdef SA_SIGINFO
275 segv_handler(int sig, siginfo_t * info, void * uctx)
276 {
277 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (fault address: %p)", info->si_addr);
278 # if defined(SEGV_MAPERR) && defined(SEGV_ACCERR) && defined(SEGV_BNDERR) && defined(SEGV_PKUERR)
279 switch (info->si_code)
280   {
281   case SEGV_MAPERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_MAPERR"); break;
282   case SEGV_ACCERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_ACCERR"); break;
283   case SEGV_BNDERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_BNDERR"); break;
284   case SEGV_PKUERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_PKUERR"); break;
285   }
286 # endif
287 if (US info->si_addr < US 4096)
288   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (null pointer indirection)");
289 else
290   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
291 if (process_info_len > 0)
292   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
293 stackdump();
294 signal(SIGSEGV, SIG_DFL);
295 kill(getpid(), sig);
296 }
297
298 #else
299 segv_handler(int sig)
300 {
301 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
302 if (process_info_len > 0)
303   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
304 stackdump();
305 signal(SIGSEGV, SIG_DFL);
306 kill(getpid(), sig);
307 }
308 #endif
309
310
311 /*************************************************
312 *             Handler for SIGUSR1                *
313 *************************************************/
314
315 /* SIGUSR1 causes any exim process to write to the process log details of
316 what it is currently doing. It will only be used if the OS is capable of
317 setting up a handler that causes automatic restarting of any system call
318 that is in progress at the time.
319
320 This function takes care to be signal-safe.
321
322 Argument: the signal number (SIGUSR1)
323 Returns:  nothing
324 */
325
326 static void
327 usr1_handler(int sig)
328 {
329 int fd;
330
331 os_restarting_signal(sig, usr1_handler);
332
333 if (!process_log_path) return;
334 fd = log_open_as_exim(process_log_path);
335
336 /* If we are neither exim nor root, or if we failed to create the log file,
337 give up. There is not much useful we can do with errors, since we don't want
338 to disrupt whatever is going on outside the signal handler. */
339
340 if (fd < 0) return;
341
342 (void)write(fd, process_info, process_info_len);
343 (void)close(fd);
344 }
345
346
347
348 /*************************************************
349 *             Timeout handler                    *
350 *************************************************/
351
352 /* This handler is enabled most of the time that Exim is running. The handler
353 doesn't actually get used unless alarm() has been called to set a timer, to
354 place a time limit on a system call of some kind. When the handler is run, it
355 re-enables itself.
356
357 There are some other SIGALRM handlers that are used in special cases when more
358 than just a flag setting is required; for example, when reading a message's
359 input. These are normally set up in the code module that uses them, and the
360 SIGALRM handler is reset to this one afterwards.
361
362 Argument: the signal value (SIGALRM)
363 Returns:  nothing
364 */
365
366 void
367 sigalrm_handler(int sig)
368 {
369 sigalrm_seen = TRUE;
370 os_non_restarting_signal(SIGALRM, sigalrm_handler);
371 }
372
373
374
375 /*************************************************
376 *      Sleep for a fractional time interval      *
377 *************************************************/
378
379 /* This function is called by millisleep() and exim_wait_tick() to wait for a
380 period of time that may include a fraction of a second. The coding is somewhat
381 tedious. We do not expect setitimer() ever to fail, but if it does, the process
382 will wait for ever, so we panic in this instance. (There was a case of this
383 when a bug in a function that calls milliwait() caused it to pass invalid data.
384 That's when I added the check. :-)
385
386 We assume it to be not worth sleeping for under 50us; this value will
387 require revisiting as hardware advances.  This avoids the issue of
388 a zero-valued timer setting meaning "never fire".
389
390 Argument:  an itimerval structure containing the interval
391 Returns:   nothing
392 */
393
394 static void
395 milliwait(struct itimerval *itval)
396 {
397 sigset_t sigmask;
398 sigset_t old_sigmask;
399 int save_errno = errno;
400
401 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
402   return;
403 (void)sigemptyset(&sigmask);                           /* Empty mask */
404 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
405 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
406 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
407   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
408     "setitimer() failed: %s", strerror(errno));
409 (void)sigfillset(&sigmask);                            /* All signals */
410 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
411 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
412 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
413 errno = save_errno;
414 sigalrm_seen = FALSE;
415 }
416
417
418
419
420 /*************************************************
421 *         Millisecond sleep function             *
422 *************************************************/
423
424 /* The basic sleep() function has a granularity of 1 second, which is too rough
425 in some cases - for example, when using an increasing delay to slow down
426 spammers.
427
428 Argument:    number of millseconds
429 Returns:     nothing
430 */
431
432 void
433 millisleep(int msec)
434 {
435 struct itimerval itval = {.it_interval = {.tv_sec = 0, .tv_usec = 0},
436                           .it_value = {.tv_sec = msec/1000,
437                                        .tv_usec = (msec % 1000) * 1000}};
438 milliwait(&itval);
439 }
440
441
442
443 /*************************************************
444 *         Compare microsecond times              *
445 *************************************************/
446
447 /*
448 Arguments:
449   tv1         the first time
450   tv2         the second time
451
452 Returns:      -1, 0, or +1
453 */
454
455 static int
456 exim_tvcmp(struct timeval *t1, struct timeval *t2)
457 {
458 if (t1->tv_sec > t2->tv_sec) return +1;
459 if (t1->tv_sec < t2->tv_sec) return -1;
460 if (t1->tv_usec > t2->tv_usec) return +1;
461 if (t1->tv_usec < t2->tv_usec) return -1;
462 return 0;
463 }
464
465
466
467
468 /*************************************************
469 *          Clock tick wait function              *
470 *************************************************/
471
472 #ifdef _POSIX_MONOTONIC_CLOCK
473 # ifdef CLOCK_BOOTTIME
474 #  define EXIM_CLOCKTYPE CLOCK_BOOTTIME
475 # else
476 #  define EXIM_CLOCKTYPE CLOCK_MONOTONIC
477 # endif
478
479 /* Amount EXIM_CLOCK is behind realtime, at startup. */
480 static struct timespec offset_ts;
481
482 static void
483 exim_clock_init(void)
484 {
485 struct timeval tv;
486 if (clock_gettime(EXIM_CLOCKTYPE, &offset_ts) != 0) return;
487 (void)gettimeofday(&tv, NULL);
488 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
489 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
490 if (offset_ts.tv_nsec >= 0) return;
491 offset_ts.tv_sec--;
492 offset_ts.tv_nsec += 1000*1000*1000;
493 }
494 #endif
495
496
497 void
498 exim_gettime(struct timeval * tv)
499 {
500 #ifdef _POSIX_MONOTONIC_CLOCK
501 struct timespec now_ts;
502
503 if (clock_gettime(EXIM_CLOCKTYPE, &now_ts) == 0)
504   {
505   now_ts.tv_sec += offset_ts.tv_sec;
506   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
507     {
508     now_ts.tv_sec++;
509     now_ts.tv_nsec -= 1000*1000*1000;
510     }
511   tv->tv_sec = now_ts.tv_sec;
512   tv->tv_usec = now_ts.tv_nsec / 1000;
513   }
514 else
515 #endif
516   (void)gettimeofday(tv, NULL);
517 }
518
519
520 /* Exim uses a time + a pid to generate a unique identifier in two places: its
521 message IDs, and in file names for maildir deliveries. Because some OS now
522 re-use pids within the same second, sub-second times are now being used.
523 However, for absolute certainty, we must ensure the clock has ticked before
524 allowing the relevant process to complete. At the time of implementation of
525 this code (February 2003), the speed of processors is such that the clock will
526 invariably have ticked already by the time a process has done its job. This
527 function prepares for the time when things are faster - and it also copes with
528 clocks that go backwards.
529
530 Arguments:
531   prev_tv      A timeval which was used to create uniqueness; its usec field
532                  has been rounded down to the value of the resolution.
533                  We want to be sure the current time is greater than this.
534                  On return, updated to current (rounded down).
535   resolution   The resolution that was used to divide the microseconds
536                  (1 for maildir, larger for message ids)
537
538 Returns:       nothing
539 */
540
541 void
542 exim_wait_tick(struct timeval * prev_tv, int resolution)
543 {
544 struct timeval now_tv;
545 long int now_true_usec;
546
547 exim_gettime(&now_tv);
548 now_true_usec = now_tv.tv_usec;
549 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
550
551 while (exim_tvcmp(&now_tv, prev_tv) <= 0)
552   {
553   struct itimerval itval;
554   itval.it_interval.tv_sec = 0;
555   itval.it_interval.tv_usec = 0;
556   itval.it_value.tv_sec = prev_tv->tv_sec - now_tv.tv_sec;
557   itval.it_value.tv_usec = prev_tv->tv_usec + resolution - now_true_usec;
558
559   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
560   negative value for the microseconds is possible only in the case when "now"
561   is more than a second less than "tgt". That means that itval.it_value.tv_sec
562   is greater than zero. The following correction is therefore safe. */
563
564   if (itval.it_value.tv_usec < 0)
565     {
566     itval.it_value.tv_usec += 1000000;
567     itval.it_value.tv_sec -= 1;
568     }
569
570   DEBUG(D_transport|D_receive)
571     {
572     if (!f.running_in_test_harness)
573       {
574       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
575         prev_tv->tv_sec, (long) prev_tv->tv_usec,
576         now_tv.tv_sec, (long) now_tv.tv_usec);
577       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
578         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
579       }
580     }
581
582   milliwait(&itval);
583
584   /* Be prapared to go around if the kernel does not implement subtick
585   granularity (GNU Hurd) */
586
587   exim_gettime(&now_tv);
588   now_true_usec = now_tv.tv_usec;
589   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
590   }
591 *prev_tv = now_tv;
592 }
593
594
595
596
597 /*************************************************
598 *   Call fopen() with umask 777 and adjust mode  *
599 *************************************************/
600
601 /* Exim runs with umask(0) so that files created with open() have the mode that
602 is specified in the open() call. However, there are some files, typically in
603 the spool directory, that are created with fopen(). They end up world-writeable
604 if no precautions are taken. Although the spool directory is not accessible to
605 the world, this is an untidiness. So this is a wrapper function for fopen()
606 that sorts out the mode of the created file.
607
608 Arguments:
609    filename       the file name
610    options        the fopen() options
611    mode           the required mode
612
613 Returns:          the fopened FILE or NULL
614 */
615
616 FILE *
617 modefopen(const uschar *filename, const char *options, mode_t mode)
618 {
619 mode_t saved_umask = umask(0777);
620 FILE *f = Ufopen(filename, options);
621 (void)umask(saved_umask);
622 if (f != NULL) (void)fchmod(fileno(f), mode);
623 return f;
624 }
625
626
627 /*************************************************
628 *   Ensure stdin, stdout, and stderr exist       *
629 *************************************************/
630
631 /* Some operating systems grumble if an exec() happens without a standard
632 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
633 file will be opened and will use these fd values, and then some other bit of
634 code will assume, for example, that it can write error messages to stderr.
635 This function ensures that fds 0, 1, and 2 are open if they do not already
636 exist, by connecting them to /dev/null.
637
638 This function is also used to ensure that std{in,out,err} exist at all times,
639 so that if any library that Exim calls tries to use them, it doesn't crash.
640
641 Arguments:  None
642 Returns:    Nothing
643 */
644
645 void
646 exim_nullstd(void)
647 {
648 int devnull = -1;
649 struct stat statbuf;
650 for (int i = 0; i <= 2; i++)
651   {
652   if (fstat(i, &statbuf) < 0 && errno == EBADF)
653     {
654     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
655     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
656       string_open_failed("/dev/null", NULL));
657     if (devnull != i) (void)dup2(devnull, i);
658     }
659   }
660 if (devnull > 2) (void)close(devnull);
661 }
662
663
664
665
666 /*************************************************
667 *   Close unwanted file descriptors for delivery *
668 *************************************************/
669
670 /* This function is called from a new process that has been forked to deliver
671 an incoming message, either directly, or using exec.
672
673 We want any smtp input streams to be closed in this new process. However, it
674 has been observed that using fclose() here causes trouble. When reading in -bS
675 input, duplicate copies of messages have been seen. The files will be sharing a
676 file pointer with the parent process, and it seems that fclose() (at least on
677 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
678 least sometimes. Hence we go for closing the underlying file descriptors.
679
680 If TLS is active, we want to shut down the TLS library, but without molesting
681 the parent's SSL connection.
682
683 For delivery of a non-SMTP message, we want to close stdin and stdout (and
684 stderr unless debugging) because the calling process might have set them up as
685 pipes and be waiting for them to close before it waits for the submission
686 process to terminate. If they aren't closed, they hold up the calling process
687 until the initial delivery process finishes, which is not what we want.
688
689 Exception: We do want it for synchronous delivery!
690
691 And notwithstanding all the above, if D_resolver is set, implying resolver
692 debugging, leave stdout open, because that's where the resolver writes its
693 debugging output.
694
695 When we close stderr (which implies we've also closed stdout), we also get rid
696 of any controlling terminal.
697
698 Arguments:   None
699 Returns:     Nothing
700 */
701
702 static void
703 close_unwanted(void)
704 {
705 if (smtp_input)
706   {
707 #ifndef DISABLE_TLS
708   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
709 #endif
710   (void)close(fileno(smtp_in));
711   (void)close(fileno(smtp_out));
712   smtp_in = NULL;
713   }
714 else
715   {
716   (void)close(0);                                          /* stdin */
717   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
718   if (debug_selector == 0)                                 /* stderr */
719     {
720     if (!f.synchronous_delivery)
721       {
722       (void)close(2);
723       log_stderr = NULL;
724       }
725     (void)setsid();
726     }
727   }
728 }
729
730
731
732
733 /*************************************************
734 *          Set uid and gid                       *
735 *************************************************/
736
737 /* This function sets a new uid and gid permanently, optionally calling
738 initgroups() to set auxiliary groups. There are some special cases when running
739 Exim in unprivileged modes. In these situations the effective uid will not be
740 root; if we already have the right effective uid/gid, and don't need to
741 initialize any groups, leave things as they are.
742
743 Arguments:
744   uid        the uid
745   gid        the gid
746   igflag     TRUE if initgroups() wanted
747   msg        text to use in debugging output and failure log
748
749 Returns:     nothing; bombs out on failure
750 */
751
752 void
753 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, const uschar * msg)
754 {
755 uid_t euid = geteuid();
756 gid_t egid = getegid();
757
758 if (euid == root_uid || euid != uid || egid != gid || igflag)
759   {
760   /* At least one OS returns +1 for initgroups failure, so just check for
761   non-zero. */
762
763   if (igflag)
764     {
765     struct passwd *pw = getpwuid(uid);
766     if (!pw)
767       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
768         "no passwd entry for uid=%ld", (long int)uid);
769
770     if (initgroups(pw->pw_name, gid) != 0)
771       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
772         (long int)uid, strerror(errno));
773     }
774
775   if (setgid(gid) < 0 || setuid(uid) < 0)
776     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
777       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
778   }
779
780 /* Debugging output included uid/gid and all groups */
781
782 DEBUG(D_uid)
783   {
784   int group_count, save_errno;
785   gid_t group_list[EXIM_GROUPLIST_SIZE];
786   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
787     (long int)geteuid(), (long int)getegid(), (long int)getpid());
788   group_count = getgroups(nelem(group_list), group_list);
789   save_errno = errno;
790   debug_printf("  auxiliary group list:");
791   if (group_count > 0)
792     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
793   else if (group_count < 0)
794     debug_printf(" <error: %s>", strerror(save_errno));
795   else debug_printf(" <none>");
796   debug_printf("\n");
797   }
798 }
799
800
801
802
803 /*************************************************
804 *               Exit point                       *
805 *************************************************/
806
807 /* Exim exits via this function so that it always clears up any open
808 databases.
809
810 Arguments:
811   rc         return code
812
813 Returns:     does not return
814 */
815
816 void
817 exim_exit(int rc)
818 {
819 search_tidyup();
820 store_exit();
821 DEBUG(D_any)
822   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
823     ">>>>>>>>>>>>>>>>\n",
824     (int)getpid(), process_purpose, rc);
825 exit(rc);
826 }
827
828
829 void
830 exim_underbar_exit(int rc)
831 {
832 store_exit();
833 DEBUG(D_any)
834   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
835     ">>>>>>>>>>>>>>>>\n",
836     (int)getpid(), process_purpose, rc);
837 _exit(rc);
838 }
839
840
841
842 /* Print error string, then die */
843 static void
844 exim_fail(const char * fmt, ...)
845 {
846 va_list ap;
847 va_start(ap, fmt);
848 vfprintf(stderr, fmt, ap);
849 va_end(ap);
850 exit(EXIT_FAILURE);
851 }
852
853 /* fail if a length is too long */
854 static inline void
855 exim_len_fail_toolong(int itemlen, int maxlen, const char * description)
856 {
857 if (itemlen <= maxlen)
858   return;
859 fprintf(stderr, "exim: length limit exceeded (%d > %d) for: %s\n",
860         itemlen, maxlen, description);
861 exit(EXIT_FAILURE);
862 }
863
864 /* only pass through the string item back to the caller if it's short enough */
865 static inline const uschar *
866 exim_str_fail_toolong(const uschar * item, int maxlen, const char * description)
867 {
868 if (!item)
869   exim_fail("exim: bad item for: %s\n", description);
870 exim_len_fail_toolong(Ustrlen(item), maxlen, description);
871 return item;
872 }
873
874 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
875 of chown()/fchown().  See src/functions.h for more explanation */
876 int
877 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
878 {
879 int saved_errno = errno;  /* from the preceeding chown call */
880 #if 1
881 log_write(0, LOG_MAIN|LOG_PANIC,
882   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
883   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
884   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
885 #else
886 /* I leave this here, commented, in case the "bug"(?) comes up again.
887    It is not an Exim bug, but we can provide a workaround.
888    See Bug 2391
889    HS 2019-04-18 */
890
891 struct stat buf;
892
893 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
894   {
895   if (buf.st_uid == owner && buf.st_gid == group) return 0;
896   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
897   }
898 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
899
900 #endif
901 errno = saved_errno;
902 return -1;
903 }
904
905
906 /* Bump the index for argv, checking for overflow,
907 and return the argument. */
908
909 static const uschar *
910 next_argv(const uschar ** argv, int * pi, int argc, const uschar * where)
911 {
912 int i = *pi;
913 if (++i >= argc) exim_fail("exim: bad item for: %s\n", where);
914 return argv[*pi = i];
915 }
916
917
918 /*************************************************
919 *         Extract port from host address         *
920 *************************************************/
921
922 /* Called to extract the port from the values given to -oMa and -oMi.
923 It also checks the syntax of the address, and terminates it before the
924 port data when a port is extracted.
925
926 Argument:
927   address   the address, with possible port on the end
928
929 Returns:    the port, or zero if there isn't one
930             bombs out on a syntax error
931 */
932
933 static int
934 check_port(uschar *address)
935 {
936 int port = host_address_extract_port(address);
937 if (string_is_ip_address(address, NULL) == 0)
938   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
939 return port;
940 }
941
942
943
944 /*************************************************
945 *              Test/verify an address            *
946 *************************************************/
947
948 /* This function is called by the -bv and -bt code. It extracts a working
949 address from a full RFC 822 address. This isn't really necessary per se, but it
950 has the effect of collapsing source routes.
951
952 Arguments:
953   s            the address string
954   flags        flag bits for verify_address()
955   exit_value   to be set for failures
956
957 Returns:       nothing
958 */
959
960 static void
961 test_address(uschar *s, int flags, int *exit_value)
962 {
963 int start, end, domain;
964 uschar *parse_error = NULL;
965 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
966   FALSE);
967 if (!address)
968   {
969   fprintf(stdout, "syntax error: %s\n", parse_error);
970   *exit_value = 2;
971   }
972 else
973   {
974   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
975     -1, -1, NULL, NULL, NULL);
976   if (rc == FAIL) *exit_value = 2;
977   else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
978   }
979 }
980
981
982
983 /*************************************************
984 *          Show supported features               *
985 *************************************************/
986
987 static void
988 show_string(BOOL is_stdout, gstring * g)
989 {
990 const uschar * s = string_from_gstring(g);
991 if (s)
992   if (is_stdout) fputs(CCS s, stdout);
993   else debug_printf("%s", s);
994 }
995
996
997 static gstring *
998 show_db_version(gstring * g)
999 {
1000 #ifdef DB_VERSION_STRING
1001 DEBUG(D_any)
1002   {
1003   g = string_fmt_append(g, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
1004   g = string_fmt_append(g, "                      Runtime: %s\n",
1005     db_version(NULL, NULL, NULL));
1006   }
1007 else
1008   g = string_fmt_append(g, "Berkeley DB: %s\n", DB_VERSION_STRING);
1009
1010 #elif defined(BTREEVERSION) && defined(HASHVERSION)
1011 # ifdef USE_DB
1012   g = string_cat(g, US"Probably Berkeley DB version 1.8x (native mode)\n");
1013 # else
1014   g = string_cat(g, US"Probably Berkeley DB version 1.8x (compatibility mode)\n");
1015 # endif
1016
1017 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
1018 g = string_cat(g, US"Probably ndbm\n");
1019 #elif defined(USE_TDB)
1020 g = string_cat(g, US"Using tdb\n");
1021 #else
1022 # ifdef USE_GDBM
1023   g = string_cat(g, US"Probably GDBM (native mode)\n");
1024 # else
1025   g = string_cat(g, US"Probably GDBM (compatibility mode)\n");
1026 # endif
1027 #endif
1028 return g;
1029 }
1030
1031
1032 /* This function is called for -bV/--version and for -d to output the optional
1033 features of the current Exim binary.
1034
1035 Arguments:  BOOL, true for stdout else debug channel
1036 Returns:    nothing
1037 */
1038
1039 static void
1040 show_whats_supported(BOOL is_stdout)
1041 {
1042 rmark reset_point = store_mark();
1043 gstring * g = NULL;
1044
1045 DEBUG(D_any) {} else g = show_db_version(g);
1046
1047 g = string_cat(g, US"Support for:");
1048 #ifdef WITH_CONTENT_SCAN
1049   g = string_cat(g, US" Content_Scanning");
1050 #endif
1051 #ifdef SUPPORT_CRYPTEQ
1052   g = string_cat(g, US" crypteq");
1053 #endif
1054 #ifdef EXPAND_DLFUNC
1055   g = string_cat(g, US" Expand_dlfunc");
1056 #endif
1057 #if HAVE_ICONV
1058   g = string_cat(g, US" iconv()");
1059 #endif
1060 #if HAVE_IPV6
1061   g = string_cat(g, US" IPv6");
1062 #endif
1063 #ifdef SUPPORT_PAM
1064   g = string_cat(g, US" PAM");
1065 #endif
1066 #ifdef EXIM_PERL
1067   g = string_cat(g, US" Perl");
1068 #endif
1069 #ifdef USE_GNUTLS
1070   g = string_cat(g, US" GnuTLS");
1071 #endif
1072 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
1073   g = string_cat(g, US" move_frozen_messages");
1074 #endif
1075 #ifdef USE_OPENSSL
1076   g = string_cat(g, US" OpenSSL");
1077 #endif
1078 #if defined(CYRUS_PWCHECK_SOCKET)
1079   g = string_cat(g, US" pwcheck");
1080 #endif
1081 #if defined(RADIUS_CONFIG_FILE)
1082   g = string_cat(g, US" radius");
1083 #endif
1084 #ifndef DISABLE_TLS_RESUME
1085   g = string_cat(g, US" TLS_resume");
1086 #endif
1087 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
1088   g = string_cat(g, US" translate_ip_address");
1089 #endif
1090 #ifdef USE_TCP_WRAPPERS
1091   g = string_cat(g, US" TCPwrappers");
1092 #endif
1093 #ifdef HAVE_SETCLASSRESOURCES
1094   g = string_cat(g, US" use_setclassresources");
1095 #endif
1096 #ifdef SUPPORT_DANE
1097   g = string_cat(g, US" DANE");
1098 #endif
1099 #ifndef DISABLE_DKIM
1100   g = string_cat(g, US" DKIM");
1101 #endif
1102 #ifdef SUPPORT_DMARC
1103   g = string_cat(g, US" DMARC");
1104 #endif
1105 #ifndef DISABLE_DNSSEC
1106   g = string_cat(g, US" DNSSEC");
1107 #endif
1108 #ifndef DISABLE_EVENT
1109   g = string_cat(g, US" Event");
1110 #endif
1111 #ifdef SUPPORT_I18N
1112   g = string_cat(g, US" I18N");
1113 #endif
1114 #ifndef DISABLE_OCSP
1115   g = string_cat(g, US" OCSP");
1116 #endif
1117 #ifndef DISABLE_PIPE_CONNECT
1118   g = string_cat(g, US" PIPECONNECT");
1119 #endif
1120 #ifndef DISABLE_PRDR
1121   g = string_cat(g, US" PRDR");
1122 #endif
1123 #ifdef SUPPORT_PROXY
1124   g = string_cat(g, US" PROXY");
1125 #endif
1126 #ifndef DISABLE_QUEUE_RAMP
1127   g = string_cat(g, US" Queue_Ramp");
1128 #endif
1129 #ifdef SUPPORT_SOCKS
1130   g = string_cat(g, US" SOCKS");
1131 #endif
1132 #ifdef SUPPORT_SPF
1133   g = string_cat(g, US" SPF");
1134 #endif
1135 #if defined(SUPPORT_SRS)
1136   g = string_cat(g, US" SRS");
1137 #endif
1138 #ifdef TCP_FASTOPEN
1139   tcp_init();
1140   if (f.tcp_fastopen_ok) g = string_cat(g, US" TCP_Fast_Open");
1141 #endif
1142 #ifdef EXPERIMENTAL_ARC
1143   g = string_cat(g, US" Experimental_ARC");
1144 #endif
1145 #ifdef EXPERIMENTAL_BRIGHTMAIL
1146   g = string_cat(g, US" Experimental_Brightmail");
1147 #endif
1148 #ifdef EXPERIMENTAL_DCC
1149   g = string_cat(g, US" Experimental_DCC");
1150 #endif
1151 #ifdef EXPERIMENTAL_DSN_INFO
1152   g = string_cat(g, US" Experimental_DSN_info");
1153 #endif
1154 #ifdef EXPERIMENTAL_ESMTP_LIMITS
1155   g = string_cat(g, US" Experimental_ESMTP_Limits");
1156 #endif
1157 #ifdef EXPERIMENTAL_QUEUEFILE
1158   g = string_cat(g, US" Experimental_QUEUEFILE");
1159 #endif
1160 #ifdef EXPERIMENTAL_XCLIENT
1161   g = string_cat(g, US" Experimental_XCLIENT");
1162 #endif
1163 g = string_cat(g, US"\n");
1164
1165 g = string_cat(g, US"Lookups (built-in):");
1166 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1167   g = string_cat(g, US" lsearch wildlsearch nwildlsearch iplsearch");
1168 #endif
1169 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1170   g = string_cat(g, US" cdb");
1171 #endif
1172 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1173   g = string_cat(g, US" dbm dbmjz dbmnz");
1174 #endif
1175 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1176   g = string_cat(g, US" dnsdb");
1177 #endif
1178 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1179   g = string_cat(g, US" dsearch");
1180 #endif
1181 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1182   g = string_cat(g, US" ibase");
1183 #endif
1184 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1185   g = string_cat(g, US" json");
1186 #endif
1187 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1188   g = string_cat(g, US" ldap ldapdn ldapm");
1189 #endif
1190 #ifdef LOOKUP_LMDB
1191   g = string_cat(g, US" lmdb");
1192 #endif
1193 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1194   g = string_cat(g, US" mysql");
1195 #endif
1196 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1197   g = string_cat(g, US" nis nis0");
1198 #endif
1199 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1200   g = string_cat(g, US" nisplus");
1201 #endif
1202 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1203   g = string_cat(g, US" oracle");
1204 #endif
1205 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1206   g = string_cat(g, US" passwd");
1207 #endif
1208 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1209   g = string_cat(g, US" pgsql");
1210 #endif
1211 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1212   g = string_cat(g, US" redis");
1213 #endif
1214 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1215   g = string_cat(g, US" sqlite");
1216 #endif
1217 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1218   g = string_cat(g, US" testdb");
1219 #endif
1220 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1221   g = string_cat(g, US" whoson");
1222 #endif
1223 g = string_cat(g, US"\n");
1224
1225 g = auth_show_supported(g);
1226 g = route_show_supported(g);
1227 g = transport_show_supported(g);
1228
1229 #ifdef WITH_CONTENT_SCAN
1230 g = malware_show_supported(g);
1231 #endif
1232 show_string(is_stdout, g); g = NULL;
1233
1234 if (fixed_never_users[0] > 0)
1235   {
1236   int i;
1237   g = string_cat(g, US"Fixed never_users: ");
1238   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1239     string_fmt_append(g, "%u:", (unsigned)fixed_never_users[i]);
1240   g = string_fmt_append(g, "%u\n", (unsigned)fixed_never_users[i]);
1241   }
1242
1243 g = string_fmt_append(g, "Configure owner: %d:%d\n", config_uid, config_gid);
1244
1245 g = string_fmt_append(g, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1246
1247 /* Everything else is details which are only worth reporting when debugging.
1248 Perhaps the tls_version_report should move into this too. */
1249 DEBUG(D_any)
1250   {
1251
1252 /* clang defines __GNUC__ (at least, for me) so test for it first */
1253 #if defined(__clang__)
1254   g = string_fmt_append(g, "Compiler: CLang [%s]\n", __clang_version__);
1255 #elif defined(__GNUC__)
1256 # ifdef __VERSION__
1257   g = string_fmt_append(g, "Compiler: GCC [%s]\n", __VERSION__);
1258 # else
1259   g = string_fmt_append(g, "Compiler: GCC [%s]\n", "? unknown version ?";
1260 # endif
1261 #else
1262   g = string_cat(g, US"Compiler: <unknown>\n");
1263 #endif
1264
1265 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1266   g = string_fmt_append(g, "Library version: Glibc: Compile: %d.%d\n",
1267                 __GLIBC__, __GLIBC_MINOR__);
1268   if (__GLIBC_PREREQ(2, 1))
1269     g = string_fmt_append(g, "                        Runtime: %s\n",
1270                 gnu_get_libc_version());
1271 #endif
1272
1273 g = show_db_version(g);
1274
1275 #ifndef DISABLE_TLS
1276   g = tls_version_report(g);
1277 #endif
1278 #ifdef SUPPORT_I18N
1279   g = utf8_version_report(g);
1280 #endif
1281 #ifdef SUPPORT_DMARC
1282   g = dmarc_version_report(g);
1283 #endif
1284 #ifdef SUPPORT_SPF
1285   g = spf_lib_version_report(g);
1286 #endif
1287
1288 show_string(is_stdout, g);
1289 g = NULL;
1290
1291 for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1292   if (authi->version_report)
1293     g = (*authi->version_report)(g);
1294
1295   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1296   characters; unless it's an ancient version of PCRE in which case it
1297   is not defined. */
1298 #ifndef PCRE_PRERELEASE
1299 # define PCRE_PRERELEASE
1300 #endif
1301 #define QUOTE(X) #X
1302 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1303   {
1304   uschar buf[24];
1305   pcre2_config(PCRE2_CONFIG_VERSION, buf);
1306   g = string_fmt_append(g, "Library version: PCRE2: Compile: %d.%d%s\n"
1307               "                        Runtime: %s\n",
1308           PCRE2_MAJOR, PCRE2_MINOR,
1309           EXPAND_AND_QUOTE(PCRE2_PRERELEASE) "",
1310           buf);
1311   }
1312 #undef QUOTE
1313 #undef EXPAND_AND_QUOTE
1314
1315 show_string(is_stdout, g);
1316 g = NULL;
1317
1318 init_lookup_list();
1319 for (int i = 0; i < lookup_list_count; i++)
1320   if (lookup_list[i]->version_report)
1321     g = lookup_list[i]->version_report(g);
1322 show_string(is_stdout, g);
1323 g = NULL;
1324
1325 #ifdef WHITELIST_D_MACROS
1326   g = string_fmt_append(g, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1327 #else
1328   g = string_cat(g, US"WHITELIST_D_MACROS unset\n");
1329 #endif
1330 #ifdef TRUSTED_CONFIG_LIST
1331   g = string_fmt_append(g, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1332 #else
1333   g = string_cat(g, US"TRUSTED_CONFIG_LIST unset\n");
1334 #endif
1335   }
1336
1337 show_string(is_stdout, g);
1338 store_reset(reset_point);
1339 }
1340
1341
1342 /*************************************************
1343 *     Show auxiliary information about Exim      *
1344 *************************************************/
1345
1346 static void
1347 show_exim_information(enum commandline_info request, FILE *stream)
1348 {
1349 switch(request)
1350   {
1351   case CMDINFO_NONE:
1352     fprintf(stream, "Oops, something went wrong.\n");
1353     return;
1354   case CMDINFO_HELP:
1355     fprintf(stream,
1356 "The -bI: flag takes a string indicating which information to provide.\n"
1357 "If the string is not recognised, you'll get this help (on stderr).\n"
1358 "\n"
1359 "  exim -bI:help    this information\n"
1360 "  exim -bI:dscp    list of known dscp value keywords\n"
1361 "  exim -bI:sieve   list of supported sieve extensions\n"
1362 );
1363     return;
1364   case CMDINFO_SIEVE:
1365     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1366       fprintf(stream, "%s\n", *pp);
1367     return;
1368   case CMDINFO_DSCP:
1369     dscp_list_to_stream(stream);
1370     return;
1371   }
1372 }
1373
1374
1375 /*************************************************
1376 *               Quote a local part               *
1377 *************************************************/
1378
1379 /* This function is used when a sender address or a From: or Sender: header
1380 line is being created from the caller's login, or from an authenticated_id. It
1381 applies appropriate quoting rules for a local part.
1382
1383 Argument:    the local part
1384 Returns:     the local part, quoted if necessary
1385 */
1386
1387 const uschar *
1388 local_part_quote(const uschar * lpart)
1389 {
1390 BOOL needs_quote = FALSE;
1391 gstring * g;
1392
1393 for (const uschar * t = lpart; !needs_quote && *t; t++)
1394   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1395     (*t != '.' || t == lpart || t[1] == 0);
1396
1397 if (!needs_quote) return lpart;
1398
1399 g = string_catn(NULL, US"\"", 1);
1400
1401 for (;;)
1402   {
1403   uschar * nq = US Ustrpbrk(lpart, "\\\"");
1404   if (!nq)
1405     {
1406     g = string_cat(g, lpart);
1407     break;
1408     }
1409   g = string_catn(g, lpart, nq - lpart);
1410   g = string_catn(g, US"\\", 1);
1411   g = string_catn(g, nq, 1);
1412   lpart = nq + 1;
1413   }
1414
1415 g = string_catn(g, US"\"", 1);
1416 return string_from_gstring(g);
1417 }
1418
1419
1420
1421 #ifdef USE_READLINE
1422 /*************************************************
1423 *         Load readline() functions              *
1424 *************************************************/
1425
1426 /* This function is called from testing executions that read data from stdin,
1427 but only when running as the calling user. Currently, only -be does this. The
1428 function loads the readline() function library and passes back the functions.
1429 On some systems, it needs the curses library, so load that too, but try without
1430 it if loading fails. All this functionality has to be requested at build time.
1431
1432 Arguments:
1433   fn_readline_ptr   pointer to where to put the readline pointer
1434   fn_addhist_ptr    pointer to where to put the addhistory function
1435
1436 Returns:            the dlopen handle or NULL on failure
1437 */
1438
1439 static void *
1440 set_readline(char * (**fn_readline_ptr)(const char *),
1441              void   (**fn_addhist_ptr)(const char *))
1442 {
1443 void *dlhandle;
1444 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1445
1446 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1447 if (dlhandle_curses) dlclose(dlhandle_curses);
1448
1449 if (dlhandle)
1450   {
1451   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1452    *   char * readline (const char *prompt);
1453    *   void add_history (const char *string);
1454    */
1455   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1456   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1457   }
1458 else
1459   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1460
1461 return dlhandle;
1462 }
1463 #endif
1464
1465
1466
1467 /*************************************************
1468 *    Get a line from stdin for testing things    *
1469 *************************************************/
1470
1471 /* This function is called when running tests that can take a number of lines
1472 of input (for example, -be and -bt). It handles continuations and trailing
1473 spaces. And prompting and a blank line output on eof. If readline() is in use,
1474 the arguments are non-NULL and provide the relevant functions.
1475
1476 Arguments:
1477   fn_readline   readline function or NULL
1478   fn_addhist    addhist function or NULL
1479
1480 Returns:        pointer to dynamic memory, or NULL at end of file
1481 */
1482
1483 static uschar *
1484 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1485 {
1486 gstring * g = NULL;
1487 BOOL had_input = FALSE;
1488
1489 if (!fn_readline) { printf("> "); fflush(stdout); }
1490
1491 for (int i = 0;; i++)
1492   {
1493   uschar buffer[1024];
1494   uschar * p, * ss;
1495
1496 #ifdef USE_READLINE
1497   char *readline_line = NULL;
1498   if (fn_readline)
1499     {
1500     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1501     if (*readline_line && fn_addhist) fn_addhist(readline_line);
1502     p = US readline_line;
1503     }
1504   else
1505 #endif
1506
1507   /* readline() not in use */
1508
1509     {
1510     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;   /*EOF*/
1511     p = buffer;
1512     }
1513
1514   /* Handle the line */
1515
1516   had_input = TRUE;
1517   ss = p + Ustrlen(p);
1518   while (ss > p && isspace(ss[-1])) ss--; /* strip trailing newline (and spaces) */
1519
1520   if (i > 0)
1521     while (p < ss && isspace(*p)) p++;   /* strip leading space after cont */
1522
1523   g = string_catn(g, p, ss - p);
1524
1525 #ifdef USE_READLINE
1526   if (fn_readline) free(readline_line);
1527 #endif
1528
1529   /* g can only be NULL if ss==p */
1530   if (ss == p || gstring_last_char(g) != '\\') /* not continuation; done */
1531     break;
1532
1533   gstring_trim(g, 1);                           /* drop the \ */
1534   }
1535
1536 if (had_input) return g ? string_from_gstring(g) : US"";
1537 printf("\n");
1538 return NULL;
1539 }
1540
1541
1542
1543 /*************************************************
1544 *    Output usage information for the program    *
1545 *************************************************/
1546
1547 /* This function is called when there are no recipients
1548    or a specific --help argument was added.
1549
1550 Arguments:
1551   progname      information on what name we were called by
1552
1553 Returns:        DOES NOT RETURN
1554 */
1555
1556 static void
1557 exim_usage(const uschar * progname)
1558 {
1559
1560 /* Handle specific program invocation variants */
1561 if (Ustrcmp(progname, US"-mailq") == 0)
1562   exim_fail(
1563     "mailq - list the contents of the mail queue\n\n"
1564     "For a list of options, see the Exim documentation.\n");
1565
1566 /* Generic usage - we output this whatever happens */
1567 exim_fail(
1568   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1569   "not directly from a shell command line. Options and/or arguments control\n"
1570   "what it does when called. For a list of options, see the Exim documentation.\n");
1571 }
1572
1573
1574
1575 /*************************************************
1576 *    Validate that the macros given are okay     *
1577 *************************************************/
1578
1579 /* Typically, Exim will drop privileges if macros are supplied.  In some
1580 cases, we want to not do so.
1581
1582 Arguments:    opt_D_used - true if the commandline had a "-D" option
1583 Returns:      true if trusted, false otherwise
1584 */
1585
1586 static BOOL
1587 macros_trusted(BOOL opt_D_used)
1588 {
1589 #ifdef WHITELIST_D_MACROS
1590 uschar *whitelisted, *end, *p, **whites;
1591 int white_count, i, n;
1592 size_t len;
1593 BOOL prev_char_item, found;
1594 #endif
1595
1596 if (!opt_D_used)
1597   return TRUE;
1598 #ifndef WHITELIST_D_MACROS
1599 return FALSE;
1600 #else
1601
1602 /* We only trust -D overrides for some invoking users:
1603 root, the exim run-time user, the optional config owner user.
1604 I don't know why config-owner would be needed, but since they can own the
1605 config files anyway, there's no security risk to letting them override -D. */
1606 if ( ! ((real_uid == root_uid)
1607      || (real_uid == exim_uid)
1608 #ifdef CONFIGURE_OWNER
1609      || (real_uid == config_uid)
1610 #endif
1611    ))
1612   {
1613   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1614   return FALSE;
1615   }
1616
1617 /* Get a list of macros which are whitelisted */
1618 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1619 prev_char_item = FALSE;
1620 white_count = 0;
1621 for (p = whitelisted; *p != '\0'; ++p)
1622   {
1623   if (*p == ':' || isspace(*p))
1624     {
1625     *p = '\0';
1626     if (prev_char_item)
1627       ++white_count;
1628     prev_char_item = FALSE;
1629     continue;
1630     }
1631   if (!prev_char_item)
1632     prev_char_item = TRUE;
1633   }
1634 end = p;
1635 if (prev_char_item)
1636   ++white_count;
1637 if (!white_count)
1638   return FALSE;
1639 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1640 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1641   {
1642   if (*p != '\0')
1643     {
1644     whites[i++] = p;
1645     if (i == white_count)
1646       break;
1647     while (*p != '\0' && p < end)
1648       ++p;
1649     }
1650   }
1651 whites[i] = NULL;
1652
1653 /* The list of commandline macros should be very short.
1654 Accept the N*M complexity. */
1655 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1656   {
1657   found = FALSE;
1658   for (uschar ** w = whites; *w; ++w)
1659     if (Ustrcmp(*w, m->name) == 0)
1660       {
1661       found = TRUE;
1662       break;
1663       }
1664   if (!found)
1665     return FALSE;
1666   if (!m->replacement)
1667     continue;
1668   if ((len = m->replen) == 0)
1669     continue;
1670   if (!regex_match(regex_whitelisted_macro, m->replacement, len, NULL))
1671     return FALSE;
1672   }
1673 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1674 return TRUE;
1675 #endif
1676 }
1677
1678
1679 /*************************************************
1680 *          Expansion testing                     *
1681 *************************************************/
1682
1683 /* Expand and print one item, doing macro-processing.
1684
1685 Arguments:
1686   item          line for expansion
1687 */
1688
1689 static void
1690 expansion_test_line(const uschar * line)
1691 {
1692 int len;
1693 BOOL dummy_macexp;
1694 uschar * s;
1695
1696 Ustrncpy(big_buffer, line, big_buffer_size);
1697 big_buffer[big_buffer_size-1] = '\0';
1698 len = Ustrlen(big_buffer);
1699
1700 (void) macros_expand(0, &len, &dummy_macexp);
1701
1702 if (isupper(big_buffer[0]))
1703   {
1704   if (macro_read_assignment(big_buffer))
1705     printf("Defined macro '%s'\n", mlast->name);
1706   }
1707 else if (Ustrncmp(big_buffer, "set ", 4) == 0)
1708   printf("%s\n", acl_standalone_setvar(big_buffer+4));
1709 else
1710   if ((s = expand_string(big_buffer))) printf("%s\n", CS s);
1711   else printf("Failed: %s\n", expand_string_message);
1712 }
1713
1714
1715
1716 /*************************************************
1717 *          Queue-runner operations               *
1718 *************************************************/
1719
1720 /* Prefix a new qrunner descriptor to the qrunners list */
1721
1722 static qrunner *
1723 alloc_qrunner(void)
1724 {
1725 qrunner * q = qrunners;
1726 qrunners = store_get(sizeof(qrunner), GET_UNTAINTED);
1727 memset(qrunners, 0, sizeof(qrunner));           /* default queue, zero interval */
1728 qrunners->next = q;
1729 qrunners->next_tick = time(NULL);               /* run right away */
1730 return qrunners;
1731 }
1732
1733 static qrunner *
1734 alloc_onetime_qrunner(void)
1735 {
1736 qrunners = store_get_perm(sizeof(qrunner), GET_UNTAINTED);
1737 memset(qrunners, 0, sizeof(qrunner));           /* default queue, zero interval */
1738 qrunners->next_tick = time(NULL);               /* run right away */
1739 qrunners->run_max = 1;
1740 return qrunners;
1741 }
1742
1743
1744 /*************************************************
1745 *          Entry point and high-level code       *
1746 *************************************************/
1747
1748 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1749 the appropriate action. All the necessary functions are present in the one
1750 binary. I originally thought one should split it up, but it turns out that so
1751 much of the apparatus is needed in each chunk that one might as well just have
1752 it all available all the time, which then makes the coding easier as well.
1753
1754 Arguments:
1755   argc      count of entries in argv
1756   argv      argument strings, with argv[0] being the program name
1757
1758 Returns:    EXIT_SUCCESS if terminated successfully
1759             EXIT_FAILURE otherwise, except when a message has been sent
1760               to the sender, and -oee was given
1761 */
1762
1763 int
1764 main(int argc, char ** cargv)
1765 {
1766 const uschar ** argv = CUSS cargv;
1767 int  arg_receive_timeout = -1;
1768 int  arg_smtp_receive_timeout = -1;
1769 int  arg_error_handling = error_handling;
1770 int  filter_sfd = -1;
1771 int  filter_ufd = -1;
1772 int  group_count;
1773 int  i, rv;
1774 int  list_queue_option = QL_BASIC;
1775 int  msg_action = 0;
1776 int  msg_action_arg = -1;
1777 int  namelen = argv[0] ? Ustrlen(argv[0]) : 0;
1778 int  queue_only_reason = 0;
1779 #ifdef EXIM_PERL
1780 int  perl_start_option = 0;
1781 #endif
1782 int  recipients_arg = argc;
1783 int  sender_address_domain = 0;
1784 int  test_retry_arg = -1;
1785 int  test_rewrite_arg = -1;
1786 gid_t original_egid;
1787 BOOL arg_queue_only = FALSE;
1788 BOOL bi_option = FALSE;
1789 BOOL checking = FALSE;
1790 BOOL count_queue = FALSE;
1791 BOOL expansion_test = FALSE;
1792 BOOL extract_recipients = FALSE;
1793 BOOL flag_G = FALSE;
1794 BOOL flag_n = FALSE;
1795 BOOL forced_delivery = FALSE;
1796 BOOL f_end_dot = FALSE;
1797 BOOL deliver_give_up = FALSE;
1798 BOOL list_queue = FALSE;
1799 BOOL list_options = FALSE;
1800 BOOL list_config = FALSE;
1801 BOOL local_queue_only;
1802 BOOL one_msg_action = FALSE;
1803 BOOL opt_D_used = FALSE;
1804 BOOL queue_only_set = FALSE;
1805 BOOL receiving_message = TRUE;
1806 BOOL sender_ident_set = FALSE;
1807 BOOL session_local_queue_only;
1808 BOOL unprivileged;
1809 BOOL removed_privilege = FALSE;
1810 BOOL usage_wanted = FALSE;
1811 BOOL verify_address_mode = FALSE;
1812 BOOL verify_as_sender = FALSE;
1813 BOOL rcpt_verify_quota = FALSE;
1814 BOOL version_printed = FALSE;
1815 const uschar * alias_arg = NULL;
1816 const uschar * called_as = US"";
1817 const uschar * cmdline_syslog_name = NULL;
1818 const uschar * start_queue_run_id = NULL;
1819 const uschar * stop_queue_run_id = NULL;
1820 const uschar * expansion_test_message = NULL;
1821 const uschar * ftest_domain = NULL;
1822 const uschar * ftest_localpart = NULL;
1823 const uschar * ftest_prefix = NULL;
1824 const uschar * ftest_suffix = NULL;
1825 uschar * log_oneline = NULL;
1826 const uschar * malware_test_file = NULL;
1827 const uschar * real_sender_address;
1828 uschar * originator_home = US"/";
1829 size_t sz;
1830
1831 struct passwd *pw;
1832 struct stat statbuf;
1833 pid_t passed_qr_pid = (pid_t)0;
1834 int passed_qr_pipe = -1;
1835 gid_t group_list[EXIM_GROUPLIST_SIZE];
1836
1837 /* For the -bI: flag */
1838 enum commandline_info info_flag = CMDINFO_NONE;
1839 BOOL info_stdout = FALSE;
1840
1841 /* Possible options for -R and -S */
1842
1843 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1844
1845 /* Need to define this in case we need to change the environment in order
1846 to get rid of a bogus time zone. We have to make it char rather than uschar
1847 because some OS define it in /usr/include/unistd.h. */
1848
1849 extern char **environ;
1850
1851 #ifdef MEASURE_TIMING
1852 (void)gettimeofday(&timestamp_startup, NULL);
1853 #endif
1854
1855 store_init();   /* Initialise the memory allocation susbsystem */
1856 pcre_init();    /* Set up memory handling for pcre */
1857
1858 /* If the Exim user and/or group and/or the configuration file owner/group were
1859 defined by ref:name at build time, we must now find the actual uid/gid values.
1860 This is a feature to make the lives of binary distributors easier. */
1861
1862 #ifdef EXIM_USERNAME
1863 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1864   {
1865   if (exim_uid == 0)
1866     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1867
1868   /* If ref:name uses a number as the name, route_finduser() returns
1869   TRUE with exim_uid set and pw coerced to NULL. */
1870   if (pw)
1871     exim_gid = pw->pw_gid;
1872 #ifndef EXIM_GROUPNAME
1873   else
1874     exim_fail(
1875         "exim: ref:name should specify a usercode, not a group.\n"
1876         "exim: can't let you get away with it unless you also specify a group.\n");
1877 #endif
1878   }
1879 else
1880   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1881 #endif
1882
1883 #ifdef EXIM_GROUPNAME
1884 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1885   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1886 #endif
1887
1888 #ifdef CONFIGURE_OWNERNAME
1889 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1890   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1891     CONFIGURE_OWNERNAME);
1892 #endif
1893
1894 /* We default the system_filter_user to be the Exim run-time user, as a
1895 sane non-root value. */
1896 system_filter_uid = exim_uid;
1897
1898 #ifdef CONFIGURE_GROUPNAME
1899 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1900   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1901     CONFIGURE_GROUPNAME);
1902 #endif
1903
1904 /* In the Cygwin environment, some initialization used to need doing.
1905 It was fudged in by means of this macro; now no longer but we'll leave
1906 it in case of others. */
1907
1908 #ifdef OS_INIT
1909 OS_INIT
1910 #endif
1911
1912 /* Check a field which is patched when we are running Exim within its
1913 testing harness; do a fast initial check, and then the whole thing. */
1914
1915 f.running_in_test_harness =
1916   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1917 if (f.running_in_test_harness)
1918   debug_store = TRUE;
1919
1920 /* Protect against abusive argv[0] */
1921 if (!argv[0] || !argc) exim_fail("exim: executable name required\n");
1922 exim_str_fail_toolong(argv[0], PATH_MAX, "argv[0]");
1923
1924 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1925 at the start of a program; however, it seems that some environments do not
1926 follow this. A "strange" locale can affect the formatting of timestamps, so we
1927 make quite sure. */
1928
1929 setlocale(LC_ALL, "C");
1930
1931 /* Get the offset between CLOCK_MONOTONIC/CLOCK_BOOTTIME and wallclock */
1932
1933 #ifdef _POSIX_MONOTONIC_CLOCK
1934 exim_clock_init();
1935 #endif
1936
1937 /* Set up the default handler for timing using alarm(). */
1938
1939 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1940
1941 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1942 because store_malloc writes a log entry on failure. */
1943
1944 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1945   exim_fail("exim: failed to get store for log buffer\n");
1946
1947 /* Initialize the default log options. */
1948
1949 bits_set(log_selector, log_selector_size, log_default);
1950
1951 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1952 NULL when the daemon is run and the file is closed. We have to use this
1953 indirection, because some systems don't allow writing to the variable "stderr".
1954 */
1955
1956 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1957
1958 /* Ensure there is a big buffer for temporary use in several places. It is put
1959 in malloc store so that it can be freed for enlargement if necessary. */
1960
1961 big_buffer = store_malloc(big_buffer_size);
1962
1963 /* Set up the handler for the data request signal, and set the initial
1964 descriptive text. */
1965
1966 process_info = store_get(PROCESS_INFO_SIZE, GET_TAINTED);
1967 set_process_info("initializing");
1968 os_restarting_signal(SIGUSR1, usr1_handler);            /* exiwhat */
1969 #ifdef SA_SIGINFO
1970   {
1971   struct sigaction act = { .sa_sigaction = segv_handler, .sa_flags = SA_RESETHAND | SA_SIGINFO };
1972   sigaction(SIGSEGV, &act, NULL);
1973   }
1974 #else
1975 signal(SIGSEGV, segv_handler);                          /* log faults */
1976 #endif
1977
1978 /* If running in a dockerized environment, the TERM signal is only
1979 delegated to the PID 1 if we request it by setting an signal handler */
1980
1981 if (getpid() == 1) signal(SIGTERM, term_handler);
1982
1983 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1984 in the daemon code. For the rest of Exim's uses, we ignore it. */
1985
1986 signal(SIGHUP, SIG_IGN);
1987
1988 /* We don't want to die on pipe errors as the code is written to handle
1989 the write error instead. */
1990
1991 signal(SIGPIPE, SIG_IGN);
1992
1993 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1994 set to SIG_IGN. This causes subprocesses that complete before the parent
1995 process waits for them not to hang around, so when Exim calls wait(), nothing
1996 is there. The wait() code has been made robust against this, but let's ensure
1997 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1998 ending status. We use sigaction rather than plain signal() on those OS where
1999 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
2000 problem on AIX with this.) */
2001
2002 #ifdef SA_NOCLDWAIT
2003   {
2004   struct sigaction act;
2005   act.sa_handler = SIG_DFL;
2006   sigemptyset(&(act.sa_mask));
2007   act.sa_flags = 0;
2008   sigaction(SIGCHLD, &act, NULL);
2009   }
2010 #else
2011 signal(SIGCHLD, SIG_DFL);
2012 #endif
2013
2014 /* Save the arguments for use if we re-exec exim as a daemon after receiving
2015 SIGHUP. */
2016
2017 sighup_argv = argv;
2018
2019 /* Set up the version number. Set up the leading 'E' for the external form of
2020 message ids, set the pointer to the internal form, and initialize it to
2021 indicate no message being processed. */
2022
2023 version_init();
2024 message_id_option[0] = '-';
2025 message_id_external = message_id_option + 1;
2026 message_id_external[0] = 'E';
2027 message_id = message_id_external + 1;
2028 message_id[0] = 0;
2029
2030 /* Set the umask to zero so that any files Exim creates using open() are
2031 created with the modes that it specifies. NOTE: Files created with fopen() have
2032 a problem, which was not recognized till rather late (February 2006). With this
2033 umask, such files will be world writeable. (They are all content scanning files
2034 in the spool directory, which isn't world-accessible, so this is not a
2035 disaster, but it's untidy.) I don't want to change this overall setting,
2036 however, because it will interact badly with the open() calls. Instead, there's
2037 now a function called modefopen() that fiddles with the umask while calling
2038 fopen(). */
2039
2040 (void)umask(0);
2041
2042 /* Precompile the regular expression for matching a message id. Keep this in
2043 step with the code that generates ids in the accept.c module. We need to do
2044 this here, because the -M options check their arguments for syntactic validity
2045 using mac_ismsgid, which uses this. */
2046
2047 regex_ismsgid =
2048   regex_must_compile(US"^(?:"
2049           "[^\\W_]{" str(MESSAGE_ID_TIME_LEN) "}"
2050           "-[^\\W_]{" str(MESSAGE_ID_PID_LEN) "}"
2051           "-[^\\W_]{" str(MESSAGE_ID_SUBTIME_LEN) "}"
2052         "|"
2053           "(?:[^\\W_]{6}-){2}[^\\W_]{2}"                /* old ID format */
2054         ")$",
2055     MCS_NOFLAGS, TRUE);
2056
2057 /* Precompile the regular expression that is used for matching an SMTP error
2058 code, possibly extended, at the start of an error message. Note that the
2059 terminating whitespace character is included. */
2060
2061 regex_smtp_code =
2062   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
2063     MCS_NOFLAGS, TRUE);
2064
2065 #ifdef WHITELIST_D_MACROS
2066 /* Precompile the regular expression used to filter the content of macros
2067 given to -D for permissibility. */
2068
2069 regex_whitelisted_macro =
2070   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", MCS_NOFLAGS, TRUE);
2071 #endif
2072
2073 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
2074 this seems to be a generally accepted convention, since one finds symbolic
2075 links called "mailq" in standard OS configurations. */
2076
2077 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
2078     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
2079   {
2080   list_queue = TRUE;
2081   receiving_message = FALSE;
2082   called_as = US"-mailq";
2083   }
2084
2085 /* If the program is called as "rmail" treat it as equivalent to
2086 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
2087 i.e. preventing a single dot on a line from terminating the message, and
2088 returning with zero return code, even in cases of error (provided an error
2089 message has been sent). */
2090
2091 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
2092     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
2093   {
2094   f.dot_ends = FALSE;
2095   called_as = US"-rmail";
2096   errors_sender_rc = EXIT_SUCCESS;
2097   }
2098
2099 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
2100 this is a smail convention. */
2101
2102 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
2103     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
2104   {
2105   smtp_input = smtp_batched_input = TRUE;
2106   called_as = US"-rsmtp";
2107   }
2108
2109 /* If the program is called as "runq" treat it as equivalent to "exim -q";
2110 this is a smail convention. */
2111
2112 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
2113     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
2114   {
2115   alloc_onetime_qrunner();
2116   receiving_message = FALSE;
2117   called_as = US"-runq";
2118   }
2119
2120 /* If the program is called as "newaliases" treat it as equivalent to
2121 "exim -bi"; this is a sendmail convention. */
2122
2123 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
2124     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
2125   {
2126   bi_option = TRUE;
2127   receiving_message = FALSE;
2128   called_as = US"-newaliases";
2129   }
2130
2131 /* Save the original effective uid for a couple of uses later. It should
2132 normally be root, but in some esoteric environments it may not be. */
2133
2134 original_euid = geteuid();
2135 original_egid = getegid();
2136
2137 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
2138 to be the same as the real ones. This makes a difference only if Exim is setuid
2139 (or setgid) to something other than root, which could be the case in some
2140 special configurations. */
2141
2142 real_uid = getuid();
2143 real_gid = getgid();
2144
2145 if (real_uid == root_uid)
2146   {
2147   if ((rv = setgid(real_gid)))
2148     exim_fail("exim: setgid(%ld) failed: %s\n",
2149         (long int)real_gid, strerror(errno));
2150   if ((rv = setuid(real_uid)))
2151     exim_fail("exim: setuid(%ld) failed: %s\n",
2152         (long int)real_uid, strerror(errno));
2153   }
2154
2155 /* If neither the original real uid nor the original euid was root, Exim is
2156 running in an unprivileged state. */
2157
2158 unprivileged = (real_uid != root_uid && original_euid != root_uid);
2159
2160 /* For most of the args-parsing we need to use permanent pool memory */
2161  {
2162  int old_pool = store_pool;
2163  store_pool = POOL_PERM;
2164
2165 /* Scan the program's arguments. Some can be dealt with right away; others are
2166 simply recorded for checking and handling afterwards. Do a high-level switch
2167 on the second character (the one after '-'), to save some effort. */
2168
2169  for (i = 1; i < argc; i++)
2170   {
2171   BOOL badarg = FALSE;
2172   const uschar * arg = argv[i];
2173   const uschar * argrest;
2174   uschar switchchar;
2175
2176   /* An argument not starting with '-' is the start of a recipients list;
2177   break out of the options-scanning loop. */
2178
2179   if (arg[0] != '-')
2180     {
2181     recipients_arg = i;
2182     break;
2183     }
2184
2185   /* An option consisting of -- terminates the options */
2186
2187   if (Ustrcmp(arg, "--") == 0)
2188     {
2189     recipients_arg = i + 1;
2190     break;
2191     }
2192
2193   /* Handle flagged options */
2194
2195   switchchar = arg[1];
2196   argrest = arg+2;
2197
2198   /* Make all -ex options synonymous with -oex arguments, since that
2199   is assumed by various callers. Also make -qR options synonymous with -R
2200   options, as that seems to be required as well. Allow for -qqR too, and
2201   the same for -S options. */
2202
2203   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
2204       Ustrncmp(arg+1, "qR", 2) == 0 ||
2205       Ustrncmp(arg+1, "qS", 2) == 0)
2206     {
2207     switchchar = arg[2];
2208     argrest++;
2209     }
2210   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
2211     {
2212     switchchar = arg[3];
2213     argrest += 2;
2214     f.queue_2stage = TRUE;
2215     }
2216
2217   /* Make -r synonymous with -f, since it is a documented alias */
2218
2219   else if (arg[1] == 'r') switchchar = 'f';
2220
2221   /* Make -ov synonymous with -v */
2222
2223   else if (Ustrcmp(arg, "-ov") == 0)
2224     {
2225     switchchar = 'v';
2226     argrest++;
2227     }
2228
2229   /* deal with --option_aliases */
2230   else if (switchchar == '-')
2231     {
2232     if (Ustrcmp(argrest, "help") == 0)
2233       {
2234       usage_wanted = TRUE;
2235       break;
2236       }
2237     else if (Ustrcmp(argrest, "version") == 0)
2238       {
2239       switchchar = 'b';
2240       argrest = US"V";
2241       }
2242     }
2243
2244   /* High-level switch on active initial letter */
2245
2246   switch(switchchar)
2247     {
2248
2249     /* sendmail uses -Ac and -Am to control which .cf file is used;
2250     we ignore them. */
2251     case 'A':
2252     if (!*argrest) { badarg = TRUE; break; }
2253     else
2254       {
2255       BOOL ignore = FALSE;
2256       switch (*argrest)
2257         {
2258         case 'c':
2259         case 'm':
2260           if (*(argrest + 1) == '\0')
2261             ignore = TRUE;
2262           break;
2263         }
2264       if (!ignore) badarg = TRUE;
2265       }
2266     break;
2267
2268     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2269     so has no need of it. */
2270
2271     case 'B':
2272     if (!*argrest) i++;       /* Skip over the type */
2273     break;
2274
2275
2276     case 'b':
2277       {
2278       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2279
2280       switch (*argrest++)
2281         {
2282         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2283            -bdf: Ditto, but in the foreground.
2284         */
2285         case 'd':
2286           f.daemon_listen = f.daemon_scion = TRUE;
2287           if (*argrest == 'f') f.background_daemon = FALSE;
2288           else if (*argrest) badarg = TRUE;
2289           break;
2290
2291         /* -be:  Run in expansion test mode
2292            -bem: Ditto, but read a message from a file first
2293         */
2294         case 'e':
2295           expansion_test = checking = TRUE;
2296           if (*argrest == 'm')
2297             {
2298             if (++i >= argc) { badarg = TRUE; break; }
2299             expansion_test_message = argv[i];
2300             argrest++;
2301             }
2302           if (*argrest) badarg = TRUE;
2303           break;
2304
2305         /* -bF:  Run system filter test */
2306         case 'F':
2307           filter_test |= checking = FTEST_SYSTEM;
2308           if (*argrest) badarg = TRUE;
2309           else if (++i < argc) filter_test_sfile = argv[i];
2310           else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2311           break;
2312
2313         /* -bf:  Run user filter test
2314            -bfd: Set domain for filter testing
2315            -bfl: Set local part for filter testing
2316            -bfp: Set prefix for filter testing
2317            -bfs: Set suffix for filter testing
2318         */
2319         case 'f':
2320           if (!*argrest)
2321             {
2322             filter_test |= checking = FTEST_USER;
2323             if (++i < argc) filter_test_ufile = argv[i];
2324             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2325             }
2326           else
2327             {
2328             if (++i >= argc)
2329               exim_fail("exim: string expected after %s\n", arg);
2330             if (Ustrcmp(argrest, "d") == 0) ftest_domain = exim_str_fail_toolong(argv[i], EXIM_DOMAINNAME_MAX, "-bfd");
2331             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfl");
2332             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfp");
2333             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfs");
2334             else badarg = TRUE;
2335             }
2336           break;
2337
2338         /* -bh: Host checking - an IP address must follow. */
2339         case 'h':
2340           if (!*argrest || Ustrcmp(argrest, "c") == 0)
2341             {
2342             if (++i >= argc) { badarg = TRUE; break; }
2343             sender_host_address = string_copy_taint(
2344                   exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-bh"),
2345                   GET_TAINTED);
2346             host_checking = checking = f.log_testing_mode = TRUE;
2347             f.host_checking_callout = *argrest == 'c';
2348             message_logs = FALSE;
2349             }
2350           else badarg = TRUE;
2351           break;
2352
2353         /* -bi: This option is used by sendmail to initialize *the* alias file,
2354         though it has the -oA option to specify a different file. Exim has no
2355         concept of *the* alias file, but since Sun's YP make script calls
2356         sendmail this way, some support must be provided. */
2357         case 'i':
2358           if (!*argrest) bi_option = TRUE;
2359           else badarg = TRUE;
2360           break;
2361
2362         /* -bI: provide information, of the type to follow after a colon.
2363         This is an Exim flag. */
2364         case 'I':
2365           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2366             {
2367             const uschar * p = argrest+1;
2368             info_flag = CMDINFO_HELP;
2369             if (Ustrlen(p))
2370               if (strcmpic(p, CUS"sieve") == 0)
2371                 {
2372                 info_flag = CMDINFO_SIEVE;
2373                 info_stdout = TRUE;
2374                 }
2375               else if (strcmpic(p, CUS"dscp") == 0)
2376                 {
2377                 info_flag = CMDINFO_DSCP;
2378                 info_stdout = TRUE;
2379                 }
2380               else if (strcmpic(p, CUS"help") == 0)
2381                 info_stdout = TRUE;
2382             }
2383           else badarg = TRUE;
2384           break;
2385
2386         /* -bm: Accept and deliver message - the default option. Reinstate
2387         receiving_message, which got turned off for all -b options.
2388            -bmalware: test the filename given for malware */
2389         case 'm':
2390           if (!*argrest) receiving_message = TRUE;
2391           else if (Ustrcmp(argrest, "alware") == 0)
2392             {
2393             if (++i >= argc) { badarg = TRUE; break; }
2394             checking = TRUE;
2395             malware_test_file = argv[i];
2396             }
2397           else badarg = TRUE;
2398           break;
2399
2400         /* -bnq: For locally originating messages, do not qualify unqualified
2401         addresses. In the envelope, this causes errors; in header lines they
2402         just get left. */
2403         case 'n':
2404           if (Ustrcmp(argrest, "q") == 0)
2405             {
2406             f.allow_unqualified_sender = FALSE;
2407             f.allow_unqualified_recipient = FALSE;
2408             }
2409           else badarg = TRUE;
2410           break;
2411
2412         /* -bpxx: List the contents of the mail queue, in various forms. If
2413         the option is -bpc, just a queue count is needed. Otherwise, if the
2414         first letter after p is r, then order is random. */
2415         case 'p':
2416           if (*argrest == 'c')
2417             {
2418             count_queue = TRUE;
2419             if (*++argrest) badarg = TRUE;
2420             break;
2421             }
2422
2423           if (*argrest == 'r')
2424             list_queue_option = QL_UNSORTED, argrest++;
2425           else
2426             list_queue_option = QL_BASIC;
2427
2428           list_queue = TRUE;
2429
2430           /* -bp: List the contents of the mail queue, top-level only */
2431
2432           if (!*argrest) {}
2433
2434           /* -bpu: List the contents of the mail queue, top-level undelivered */
2435
2436           else if (Ustrcmp(argrest, "u") == 0) list_queue_option |= QL_UNDELIVERED_ONLY;
2437
2438           /* -bpa: List the contents of the mail queue, including all delivered */
2439
2440           else if (Ustrcmp(argrest, "a") == 0) list_queue_option |= QL_PLUS_GENERATED;
2441
2442           /* -bpi: List only message IDs */
2443
2444           else if (Ustrcmp(argrest, "i") == 0) list_queue_option |= QL_MSGID_ONLY;
2445
2446           /* Unknown after -bp[r] */
2447
2448           else badarg = TRUE;
2449           break;
2450
2451
2452         /* -bP: List the configuration variables given as the address list.
2453         Force -v, so configuration errors get displayed. */
2454         case 'P':
2455
2456           /* -bP config: we need to setup here, because later,
2457           when list_options is checked, the config is read already */
2458           if (*argrest)
2459             badarg = TRUE;
2460           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2461             {
2462             list_config = TRUE;
2463             readconf_save_config(version_string);
2464             }
2465           else
2466             {
2467             list_options = TRUE;
2468             debug_selector |= D_v;
2469             debug_file = stderr;
2470             }
2471           break;
2472
2473         /* -brt: Test retry configuration lookup */
2474         case 'r':
2475           if (Ustrcmp(argrest, "t") == 0)
2476             {
2477             checking = TRUE;
2478             test_retry_arg = i + 1;
2479             goto END_ARG;
2480             }
2481
2482           /* -brw: Test rewrite configuration */
2483
2484           else if (Ustrcmp(argrest, "w") == 0)
2485             {
2486             checking = TRUE;
2487             test_rewrite_arg = i + 1;
2488             goto END_ARG;
2489             }
2490           else badarg = TRUE;
2491           break;
2492
2493         /* -bS: Read SMTP commands on standard input, but produce no replies -
2494         all errors are reported by sending messages. */
2495         case 'S':
2496           if (!*argrest)
2497             smtp_input = smtp_batched_input = receiving_message = TRUE;
2498           else badarg = TRUE;
2499           break;
2500
2501         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2502         on standard output. */
2503         case 's':
2504           if (!*argrest) smtp_input = receiving_message = TRUE;
2505           else badarg = TRUE;
2506           break;
2507
2508         /* -bt: address testing mode */
2509         case 't':
2510           if (!*argrest)
2511             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2512           else badarg = TRUE;
2513           break;
2514
2515         /* -bv: verify addresses */
2516         case 'v':
2517           if (!*argrest)
2518             verify_address_mode = checking = f.log_testing_mode = TRUE;
2519
2520         /* -bvs: verify sender addresses */
2521
2522           else if (Ustrcmp(argrest, "s") == 0)
2523             {
2524             verify_address_mode = checking = f.log_testing_mode = TRUE;
2525             verify_as_sender = TRUE;
2526             }
2527           else badarg = TRUE;
2528           break;
2529
2530         /* -bV: Print version string and support details */
2531         case 'V':
2532           if (!*argrest)
2533             {
2534             printf("Exim version %s #%s built %s\n", version_string,
2535               version_cnumber, version_date);
2536             printf("%s\n", CS version_copyright);
2537             version_printed = TRUE;
2538             show_whats_supported(TRUE);
2539             f.log_testing_mode = TRUE;
2540             }
2541           else badarg = TRUE;
2542           break;
2543
2544         /* -bw: inetd wait mode, accept a listening socket as stdin */
2545         case 'w':
2546           f.inetd_wait_mode = TRUE;
2547           f.background_daemon = FALSE;
2548           f.daemon_listen = f.daemon_scion = TRUE;
2549           if (*argrest)
2550             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2551               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2552           break;
2553
2554         default:
2555           badarg = TRUE;
2556           break;
2557         }
2558       break;
2559       }
2560
2561
2562     /* -C: change configuration file list; ignore if it isn't really
2563     a change! Enforce a prefix check if required. */
2564
2565     case 'C':
2566     if (!*argrest)
2567       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2568     if (Ustrcmp(config_main_filelist, argrest) != 0)
2569       {
2570       #ifdef ALT_CONFIG_PREFIX
2571       int sep = 0;
2572       int len = Ustrlen(ALT_CONFIG_PREFIX);
2573       const uschar *list = argrest;
2574       uschar *filename;
2575       /* The argv is untainted, so big_buffer (also untainted) is ok to use */
2576       while((filename = string_nextinlist(&list, &sep, big_buffer,
2577              big_buffer_size)))
2578         if (  (  Ustrlen(filename) < len
2579               || Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0
2580               || Ustrstr(filename, "/../") != NULL
2581               )
2582            && (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid)
2583            )
2584           exim_fail("-C Permission denied\n");
2585       #endif
2586       if (real_uid != root_uid)
2587         {
2588         #ifdef TRUSTED_CONFIG_LIST
2589
2590         if (real_uid != exim_uid
2591             #ifdef CONFIGURE_OWNER
2592             && real_uid != config_uid
2593             #endif
2594             )
2595           f.trusted_config = FALSE;
2596         else
2597           {
2598           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2599           if (trust_list)
2600             {
2601             struct stat statbuf;
2602
2603             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2604                 (statbuf.st_uid != root_uid        /* owner not root */
2605                  #ifdef CONFIGURE_OWNER
2606                  && statbuf.st_uid != config_uid   /* owner not the special one */
2607                  #endif
2608                    ) ||                            /* or */
2609                 (statbuf.st_gid != root_gid        /* group not root */
2610                  #ifdef CONFIGURE_GROUP
2611                  && statbuf.st_gid != config_gid   /* group not the special one */
2612                  #endif
2613                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2614                    ) ||                            /* or */
2615                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2616               {
2617               f.trusted_config = FALSE;
2618               fclose(trust_list);
2619               }
2620             else
2621               {
2622               /* Well, the trust list at least is up to scratch... */
2623               rmark reset_point;
2624               uschar *trusted_configs[32];
2625               int nr_configs = 0;
2626               int i = 0;
2627               int old_pool = store_pool;
2628               store_pool = POOL_MAIN;
2629
2630               reset_point = store_mark();
2631               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2632                 {
2633                 uschar *start = big_buffer, *nl;
2634                 while (*start && isspace(*start))
2635                 start++;
2636                 if (*start != '/')
2637                   continue;
2638                 nl = Ustrchr(start, '\n');
2639                 if (nl)
2640                   *nl = 0;
2641                 trusted_configs[nr_configs++] = string_copy(start);
2642                 if (nr_configs == nelem(trusted_configs))
2643                   break;
2644                 }
2645               fclose(trust_list);
2646
2647               if (nr_configs)
2648                 {
2649                 int sep = 0;
2650                 const uschar *list = argrest;
2651                 uschar *filename;
2652                 while (f.trusted_config && (filename = string_nextinlist(&list,
2653                         &sep, big_buffer, big_buffer_size)))
2654                   {
2655                   for (i=0; i < nr_configs; i++)
2656                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2657                       break;
2658                   if (i == nr_configs)
2659                     {
2660                     f.trusted_config = FALSE;
2661                     break;
2662                     }
2663                   }
2664                 }
2665               else      /* No valid prefixes found in trust_list file. */
2666                 f.trusted_config = FALSE;
2667               store_reset(reset_point);
2668               store_pool = old_pool;
2669               }
2670             }
2671           else          /* Could not open trust_list file. */
2672             f.trusted_config = FALSE;
2673           }
2674       #else
2675         /* Not root; don't trust config */
2676         f.trusted_config = FALSE;
2677       #endif
2678         }
2679
2680       config_main_filelist = argrest;
2681       f.config_changed = TRUE;
2682       }
2683     break;
2684
2685
2686     /* -D: set up a macro definition */
2687
2688     case 'D':
2689 #ifdef DISABLE_D_OPTION
2690       exim_fail("exim: -D is not available in this Exim binary\n");
2691 #else
2692       {
2693       int ptr = 0;
2694       macro_item * m;
2695       uschar name[24];
2696       const uschar * s = argrest;
2697
2698       opt_D_used = TRUE;
2699       while (isspace(*s)) s++;
2700
2701       if (*s < 'A' || *s > 'Z')
2702         exim_fail("exim: macro name set by -D must start with "
2703           "an upper case letter\n");
2704
2705       while (isalnum(*s) || *s == '_')
2706         {
2707         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2708         s++;
2709         }
2710       name[ptr] = 0;
2711       if (ptr == 0) { badarg = TRUE; break; }
2712       while (isspace(*s)) s++;
2713       if (*s != 0)
2714         {
2715         if (*s++ != '=') { badarg = TRUE; break; }
2716         while (isspace(*s)) s++;
2717         }
2718
2719       for (m = macros_user; m; m = m->next)
2720         if (Ustrcmp(m->name, name) == 0)
2721           exim_fail("exim: duplicated -D in command line\n");
2722
2723       m = macro_create(name, s, TRUE);
2724
2725       if (clmacro_count >= MAX_CLMACROS)
2726         exim_fail("exim: too many -D options on command line\n");
2727       clmacros[clmacro_count++] =
2728         string_sprintf("-D%s=%s", m->name, m->replacement);
2729       }
2730     #endif
2731     break;
2732
2733     case 'd':
2734
2735     /* -dropcr: Set this option.  Now a no-op, retained for compatibility only. */
2736
2737     if (Ustrcmp(argrest, "ropcr") == 0)
2738       {
2739       /* drop_cr = TRUE; */
2740       }
2741
2742     /* -dp: Set up a debug pretrigger buffer with given size. */
2743
2744     else if (Ustrcmp(argrest, "p") == 0)
2745       if (++i >= argc)
2746         badarg = TRUE;
2747       else
2748         debug_pretrigger_setup(argv[i]);
2749
2750     /* -dt: Set a debug trigger selector */
2751
2752     else if (Ustrncmp(argrest, "t=", 2) == 0)
2753       dtrigger_selector = (unsigned int) Ustrtol(argrest + 2, NULL, 0);
2754
2755     /* -d: Set debug level (see also -v below).
2756     If -dd is used, debugging subprocesses of the daemon is disabled. */
2757
2758     else
2759       {
2760       /* Use an intermediate variable so that we don't set debugging while
2761       decoding the debugging bits. */
2762
2763       unsigned int selector = D_default;
2764       debug_selector = 0;
2765       debug_file = NULL;
2766       if (*argrest == 'd')
2767         {
2768         f.debug_daemon = TRUE;
2769         argrest++;
2770         }
2771       if (*argrest)
2772         decode_bits(&selector, 1, debug_notall, argrest,
2773           debug_options, debug_options_count, US"debug", 0);
2774       debug_selector = selector;
2775       }
2776     break;
2777
2778
2779     /* -E: This is a local error message. This option is not intended for
2780     external use at all, but is not restricted to trusted callers because it
2781     does no harm (just suppresses certain error messages) and if Exim is run
2782     not setuid root it won't always be trusted when it generates error
2783     messages using this option. If there is a message id following -E, point
2784     message_reference at it, for logging. */
2785
2786     case 'E':
2787     f.local_error_message = TRUE;
2788     if (mac_ismsgid(argrest)) message_reference = argrest;
2789     break;
2790
2791
2792     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2793     option, so it looks as if historically the -oex options are also callable
2794     without the leading -o. So we have to accept them. Before the switch,
2795     anything starting -oe has been converted to -e. Exim does not support all
2796     of the sendmail error options. */
2797
2798     case 'e':
2799     if (Ustrcmp(argrest, "e") == 0)
2800       {
2801       arg_error_handling = ERRORS_SENDER;
2802       errors_sender_rc = EXIT_SUCCESS;
2803       }
2804     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2805     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2806     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2807     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2808     else badarg = TRUE;
2809     break;
2810
2811
2812     /* -F: Set sender's full name, used instead of the gecos entry from
2813     the password file. Since users can usually alter their gecos entries,
2814     there's no security involved in using this instead. The data can follow
2815     the -F or be in the next argument. */
2816
2817     case 'F':
2818     if (!*argrest)
2819       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2820     originator_name = string_copy_taint(
2821                   exim_str_fail_toolong(argrest, EXIM_HUMANNAME_MAX, "-F"),
2822                   GET_TAINTED);
2823     f.sender_name_forced = TRUE;
2824     break;
2825
2826
2827     /* -f: Set sender's address - this value is only actually used if Exim is
2828     run by a trusted user, or if untrusted_set_sender is set and matches the
2829     address, except that the null address can always be set by any user. The
2830     test for this happens later, when the value given here is ignored when not
2831     permitted. For an untrusted user, the actual sender is still put in Sender:
2832     if it doesn't match the From: header (unless no_local_from_check is set).
2833     The data can follow the -f or be in the next argument. The -r switch is an
2834     obsolete form of -f but since there appear to be programs out there that
2835     use anything that sendmail has ever supported, better accept it - the
2836     synonymizing is done before the switch above.
2837
2838     At this stage, we must allow domain literal addresses, because we don't
2839     know what the setting of allow_domain_literals is yet. Ditto for trailing
2840     dots and strip_trailing_dot. */
2841
2842     case 'f':
2843       {
2844       int dummy_start, dummy_end;
2845       uschar *errmess;
2846       if (!*argrest)
2847         if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
2848       (void) exim_str_fail_toolong(argrest, EXIM_DISPLAYMAIL_MAX, "-f");
2849       if (!*argrest)
2850         {
2851         uschar * s = store_get(1, GET_UNTAINTED);       /* Ensure writeable memory */
2852         *s = '\0';
2853         sender_address = s;
2854         }
2855       else
2856         {
2857         const uschar * temp = argrest + Ustrlen(argrest) - 1;
2858         while (temp >= argrest && isspace(*temp)) temp--;
2859         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2860         allow_domain_literals = TRUE;
2861         strip_trailing_dot = TRUE;
2862 #ifdef SUPPORT_I18N
2863         allow_utf8_domains = TRUE;
2864 #endif
2865         if (!(sender_address = parse_extract_address(argrest, &errmess,
2866                   &dummy_start, &dummy_end, &sender_address_domain, TRUE)))
2867           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2868
2869         sender_address = string_copy_taint(sender_address, GET_TAINTED);
2870 #ifdef SUPPORT_I18N
2871         message_smtputf8 =  string_is_utf8(sender_address);
2872         allow_utf8_domains = FALSE;
2873 #endif
2874         allow_domain_literals = FALSE;
2875         strip_trailing_dot = FALSE;
2876         }
2877       f.sender_address_forced = TRUE;
2878       }
2879     break;
2880
2881     /* -G: sendmail invocation to specify that it's a gateway submission and
2882     sendmail may complain about problems instead of fixing them.
2883     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2884     not at this time complain about problems. */
2885
2886     case 'G':
2887     flag_G = TRUE;
2888     break;
2889
2890     /* -h: Set the hop count for an incoming message. Exim does not currently
2891     support this; it always computes it by counting the Received: headers.
2892     To put it in will require a change to the spool header file format. */
2893
2894     case 'h':
2895     if (!*argrest)
2896       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2897     if (!isdigit(*argrest)) badarg = TRUE;
2898     break;
2899
2900
2901     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2902     not to be documented for sendmail but mailx (at least) uses it) */
2903
2904     case 'i':
2905     if (!*argrest) f.dot_ends = FALSE; else badarg = TRUE;
2906     break;
2907
2908
2909     /* -L: set the identifier used for syslog; equivalent to setting
2910     syslog_processname in the config file, but needs to be an admin option. */
2911
2912     case 'L':
2913     if (!*argrest)
2914       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2915     if ((sz = Ustrlen(argrest)) > 32)
2916       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2917     if (sz < 1)
2918       exim_fail("exim: the -L syslog name is too short\n");
2919     cmdline_syslog_name = string_copy_taint(argrest, GET_TAINTED);
2920     break;
2921
2922     case 'M':
2923     receiving_message = FALSE;
2924
2925     /* -MC:  continue delivery of another message via an existing open
2926     file descriptor. This option is used for an internal call by the
2927     smtp transport when there is a pending message waiting to go to an
2928     address to which it has got a connection. Five subsequent arguments are
2929     required: transport name, host name, IP address, sequence number, and
2930     message_id. Transports may decline to create new processes if the sequence
2931     number gets too big. The channel is stdin. This (-MC) must be the last
2932     argument. There's a subsequent check that the real-uid is privileged.
2933
2934     If we are running in the test harness. delay for a bit, to let the process
2935     that set this one up complete. This makes for repeatability of the logging,
2936     etc. output. */
2937
2938     if (Ustrcmp(argrest, "C") == 0)
2939       {
2940       union sockaddr_46 interface_sock;
2941       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2942
2943       if (argc != i + 6)
2944         exim_fail("exim: too many or too few arguments after -MC\n");
2945
2946       if (msg_action_arg >= 0)
2947         exim_fail("exim: incompatible arguments\n");
2948
2949       continue_transport = string_copy_taint(
2950         exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-C internal transport"),
2951         GET_TAINTED);
2952       continue_hostname = string_copy_taint(
2953         exim_str_fail_toolong(argv[++i], EXIM_HOSTNAME_MAX, "-C internal hostname"),
2954         GET_TAINTED);
2955       continue_host_address = string_copy_taint(
2956         exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-C internal hostaddr"),
2957         GET_TAINTED);
2958       continue_sequence = Uatoi(argv[++i]);
2959       msg_action = MSG_DELIVER;
2960       msg_action_arg = ++i;
2961       forced_delivery = TRUE;
2962       queue_run_pid = passed_qr_pid;
2963       queue_run_pipe = passed_qr_pipe;
2964
2965       if (!mac_ismsgid(argv[i]))
2966         exim_fail("exim: malformed message id %s after -MC option\n",
2967           argv[i]);
2968
2969       /* Set up $sending_ip_address and $sending_port, unless proxied */
2970
2971       if (!continue_proxy_cipher)
2972         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2973             &size) == 0)
2974           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2975             &sending_port);
2976         else
2977           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2978             strerror(errno));
2979
2980       testharness_pause_ms(500);
2981       break;
2982       }
2983
2984     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2985       {
2986       switch(argrest[1])
2987         {
2988     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2989     precedes -MC (see above). The flag indicates that the host to which
2990     Exim is connected has accepted an AUTH sequence. */
2991
2992         case 'A': f.smtp_authenticated = TRUE; break;
2993
2994     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2995        that exim is connected to supports the esmtp extension DSN */
2996
2997         case 'D': smtp_peer_options |= OPTION_DSN; break;
2998
2999     /* -MCd: for debug, set a process-purpose string */
3000
3001         case 'd': if (++i < argc)
3002                     process_purpose = string_copy_taint(
3003                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCd"),
3004                       GET_TAINTED);
3005                   else badarg = TRUE;
3006                   break;
3007
3008     /* -MCG: set the queue name, to a non-default value. Arguably, anything
3009        from the commandline should be tainted - but we will need an untainted
3010        value for the spoolfile when doing a -odi delivery process. */
3011
3012         case 'G': if (++i < argc) queue_name = string_copy_taint(
3013                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCG"),
3014                       GET_UNTAINTED);
3015                   else badarg = TRUE;
3016                   break;
3017
3018     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
3019
3020         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
3021
3022 #ifdef EXPERIMENTAL_ESMTP_LIMITS
3023     /* -MCL: peer used LIMITS RCPTMAX and/or RCPTDOMAINMAX */
3024         case 'L': if (++i < argc) continue_limit_mail = Uatoi(argv[i]);
3025                   else badarg = TRUE;
3026                   if (++i < argc) continue_limit_rcpt = Uatoi(argv[i]);
3027                   else badarg = TRUE;
3028                   if (++i < argc) continue_limit_rcptdom = Uatoi(argv[i]);
3029                   else badarg = TRUE;
3030                   break;
3031 #endif
3032
3033     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
3034     it preceded -MC (see above) */
3035
3036         case 'P': smtp_peer_options |= OPTION_PIPE; break;
3037
3038 #ifdef SUPPORT_SOCKS
3039     /* -MCp: Socks proxy in use; nearside IP, port, external IP, port */
3040         case 'p': proxy_session = TRUE;
3041                   if (++i < argc)
3042                     {
3043                     proxy_local_address = string_copy_taint(argv[i], GET_TAINTED);
3044                     if (++i < argc)
3045                       {
3046                       proxy_local_port = Uatoi(argv[i]);
3047                       if (++i < argc)
3048                         {
3049                         proxy_external_address = string_copy_taint(argv[i], GET_TAINTED);
3050                         if (++i < argc)
3051                           {
3052                           proxy_external_port = Uatoi(argv[i]);
3053                           break;
3054                     } } } }
3055                   badarg = TRUE;
3056                   break;
3057 #endif
3058     /* -MCQ: pass on the pid of the queue-running process that started
3059     this chain of deliveries and the fd of its synchronizing pipe; this
3060     is useful only when it precedes -MC (see above) */
3061
3062         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
3063                   else badarg = TRUE;
3064                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
3065                   else badarg = TRUE;
3066                   break;
3067
3068     /* -MCq: do a quota check on the given recipient for the given size
3069     of message.  Separate from -MC. */
3070         case 'q': rcpt_verify_quota = TRUE;
3071                   if (++i < argc) message_size = Uatoi(argv[i]);
3072                   else badarg = TRUE;
3073                   break;
3074
3075     /* -MCS: set the smtp_use_size flag; this is useful only when it
3076     precedes -MC (see above) */
3077
3078         case 'S': smtp_peer_options |= OPTION_SIZE; break;
3079
3080 #ifndef DISABLE_TLS
3081     /* -MCs: used with -MCt; SNI was sent */
3082     /* -MCr: ditto, DANE */
3083
3084         case 'r':
3085         case 's': if (++i < argc)
3086                     {
3087                     continue_proxy_sni = string_copy_taint(
3088                       exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-MCr/-MCs"),
3089                       GET_TAINTED);
3090                     if (argrest[1] == 'r') continue_proxy_dane = TRUE;
3091                     }
3092                   else badarg = TRUE;
3093                   break;
3094
3095     /* -MCt: similar to -MCT below but the connection is still open
3096     via a proxy process which handles the TLS context and coding.
3097     Require three arguments for the proxied local address and port,
3098     and the TLS cipher. */
3099
3100         case 't': if (++i < argc)
3101                     sending_ip_address = string_copy_taint(
3102                       exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-MCt IP"),
3103                       GET_TAINTED);
3104                   else badarg = TRUE;
3105                   if (++i < argc)
3106                     sending_port = (int)(Uatol(argv[i]));
3107                   else badarg = TRUE;
3108                   if (++i < argc)
3109                     continue_proxy_cipher = string_copy_taint(
3110                       exim_str_fail_toolong(argv[i], EXIM_CIPHERNAME_MAX, "-MCt cipher"),
3111                       GET_TAINTED);
3112                   else badarg = TRUE;
3113                   /*FALLTHROUGH*/
3114
3115     /* -MCT: set the tls_offered flag; this is useful only when it
3116     precedes -MC (see above). The flag indicates that the host to which
3117     Exim is connected has offered TLS support. */
3118
3119         case 'T': smtp_peer_options |= OPTION_TLS; break;
3120 #endif
3121
3122         default:  badarg = TRUE; break;
3123         }
3124       break;
3125       }
3126
3127     /* -M[x]: various operations on the following list of message ids:
3128        -M    deliver the messages, ignoring next retry times and thawing
3129        -Mc   deliver the messages, checking next retry times, no thawing
3130        -Mf   freeze the messages
3131        -Mg   give up on the messages
3132        -Mt   thaw the messages
3133        -Mrm  remove the messages
3134     In the above cases, this must be the last option. There are also the
3135     following options which are followed by a single message id, and which
3136     act on that message. Some of them use the "recipient" addresses as well.
3137        -Mar  add recipient(s)
3138        -MG   move to a different queue
3139        -Mmad mark all recipients delivered
3140        -Mmd  mark recipients(s) delivered
3141        -Mes  edit sender
3142        -Mset load a message for use with -be
3143        -Mvb  show body
3144        -Mvc  show copy (of whole message, in RFC 2822 format)
3145        -Mvh  show header
3146        -Mvl  show log
3147     */
3148
3149     else if (!*argrest)
3150       {
3151       msg_action = MSG_DELIVER;
3152       forced_delivery = f.deliver_force_thaw = TRUE;
3153       }
3154     else if (Ustrcmp(argrest, "ar") == 0)
3155       {
3156       msg_action = MSG_ADD_RECIPIENT;
3157       one_msg_action = TRUE;
3158       }
3159     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
3160     else if (Ustrcmp(argrest, "es") == 0)
3161       {
3162       msg_action = MSG_EDIT_SENDER;
3163       one_msg_action = TRUE;
3164       }
3165     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
3166     else if (Ustrcmp(argrest, "g") == 0)
3167       {
3168       msg_action = MSG_DELIVER;
3169       deliver_give_up = TRUE;
3170       }
3171    else if (Ustrcmp(argrest, "G") == 0)
3172       {
3173       msg_action = MSG_SETQUEUE;
3174       queue_name_dest = string_copy_taint(
3175         exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3176                               EXIM_DRIVERNAME_MAX, "-MG"),
3177         GET_TAINTED);
3178       }
3179     else if (Ustrcmp(argrest, "mad") == 0) msg_action = MSG_MARK_ALL_DELIVERED;
3180     else if (Ustrcmp(argrest, "md") == 0)
3181       {
3182       msg_action = MSG_MARK_DELIVERED;
3183       one_msg_action = TRUE;
3184       }
3185     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
3186     else if (Ustrcmp(argrest, "set") == 0)
3187       {
3188       msg_action = MSG_LOAD;
3189       one_msg_action = TRUE;
3190       }
3191     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
3192     else if (Ustrcmp(argrest, "vb") == 0)
3193       {
3194       msg_action = MSG_SHOW_BODY;
3195       one_msg_action = TRUE;
3196       }
3197     else if (Ustrcmp(argrest, "vc") == 0)
3198       {
3199       msg_action = MSG_SHOW_COPY;
3200       one_msg_action = TRUE;
3201       }
3202     else if (Ustrcmp(argrest, "vh") == 0)
3203       {
3204       msg_action = MSG_SHOW_HEADER;
3205       one_msg_action = TRUE;
3206       }
3207     else if (Ustrcmp(argrest, "vl") == 0)
3208       {
3209       msg_action = MSG_SHOW_LOG;
3210       one_msg_action = TRUE;
3211       }
3212     else { badarg = TRUE; break; }
3213
3214     /* All the -Mxx options require at least one message id. */
3215
3216     msg_action_arg = i + 1;
3217     if (msg_action_arg >= argc)
3218       exim_fail("exim: no message ids given after %s option\n", arg);
3219
3220     /* Some require only message ids to follow */
3221
3222     if (!one_msg_action)
3223       {
3224       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
3225         exim_fail("exim: malformed message id %s after %s option\n",
3226           argv[j], arg);
3227       goto END_ARG;   /* Remaining args are ids */
3228       }
3229
3230     /* Others require only one message id, possibly followed by addresses,
3231     which will be handled as normal arguments. */
3232
3233     else
3234       {
3235       if (!mac_ismsgid(argv[msg_action_arg]))
3236         exim_fail("exim: malformed message id %s after %s option\n",
3237           argv[msg_action_arg], arg);
3238       i++;
3239       }
3240     break;
3241
3242
3243     /* Some programs seem to call the -om option without the leading o;
3244     for sendmail it askes for "me too". Exim always does this. */
3245
3246     case 'm':
3247     if (*argrest) badarg = TRUE;
3248     break;
3249
3250
3251     /* -N: don't do delivery - a debugging option that stops transports doing
3252     their thing. It implies debugging at the D_v level. */
3253
3254     case 'N':
3255     if (!*argrest)
3256       {
3257       f.dont_deliver = TRUE;
3258       debug_selector |= D_v;
3259       debug_file = stderr;
3260       }
3261     else badarg = TRUE;
3262     break;
3263
3264
3265     /* -n: This means "don't alias" in sendmail, apparently.
3266     For normal invocations, it has no effect.
3267     It may affect some other options. */
3268
3269     case 'n':
3270     flag_n = TRUE;
3271     break;
3272
3273     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
3274     option to the specified value. This form uses long names. We need to handle
3275     -O option=value and -Ooption=value. */
3276
3277     case 'O':
3278     if (!*argrest)
3279       if (++i >= argc)
3280         exim_fail("exim: string expected after -O\n");
3281     break;
3282
3283     case 'o':
3284     switch (*argrest++)
3285       {
3286       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
3287       file" option). */
3288       case 'A':
3289         if (!*(alias_arg = argrest))
3290           if (i+1 < argc) alias_arg = argv[++i];
3291           else exim_fail("exim: string expected after -oA\n");
3292         break;
3293
3294       /* -oB: Set a connection message max value for remote deliveries */
3295       case 'B':
3296         {
3297         const uschar * p = argrest;
3298         if (!*p)
3299           if (i+1 < argc && isdigit((argv[i+1][0])))
3300             p = argv[++i];
3301           else
3302             {
3303             connection_max_messages = 1;
3304             p = NULL;
3305             }
3306
3307         if (p)
3308           {
3309           if (!isdigit(*p))
3310             exim_fail("exim: number expected after -oB\n");
3311           connection_max_messages = Uatoi(p);
3312           }
3313         }
3314         break;
3315
3316       /* -odb: background delivery */
3317
3318       case 'd':
3319         if (Ustrcmp(argrest, "b") == 0)
3320           {
3321           f.synchronous_delivery = FALSE;
3322           arg_queue_only = FALSE;
3323           queue_only_set = TRUE;
3324           }
3325
3326       /* -odd: testsuite-only: add no inter-process delays */
3327
3328         else if (Ustrcmp(argrest, "d") == 0)
3329           f.testsuite_delays = FALSE;
3330
3331       /* -odf: foreground delivery (smail-compatible option); same effect as
3332          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3333       */
3334
3335         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3336           {
3337           f.synchronous_delivery = TRUE;
3338           arg_queue_only = FALSE;
3339           queue_only_set = TRUE;
3340           }
3341
3342       /* -odq: queue only */
3343
3344         else if (Ustrcmp(argrest, "q") == 0)
3345           {
3346           f.synchronous_delivery = FALSE;
3347           arg_queue_only = TRUE;
3348           queue_only_set = TRUE;
3349           }
3350
3351       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3352       but no remote delivery */
3353
3354         else if (Ustrcmp(argrest, "qs") == 0)
3355           {
3356           f.queue_smtp = TRUE;
3357           arg_queue_only = FALSE;
3358           queue_only_set = TRUE;
3359           }
3360         else badarg = TRUE;
3361         break;
3362
3363       /* -oex: Sendmail error flags. As these are also accepted without the
3364       leading -o prefix, for compatibility with vacation and other callers,
3365       they are handled with -e above. */
3366
3367       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3368          -oitrue: Another sendmail syntax for the same */
3369
3370       case 'i':
3371         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3372           f.dot_ends = FALSE;
3373         else badarg = TRUE;
3374         break;
3375
3376     /* -oM*: Set various characteristics for an incoming message; actually
3377     acted on for trusted callers only. */
3378
3379       case 'M':
3380         {
3381         if (i+1 >= argc)
3382           exim_fail("exim: data expected after -oM%s\n", argrest);
3383
3384         /* -oMa: Set sender host address */
3385
3386         if (Ustrcmp(argrest, "a") == 0)
3387           sender_host_address = string_copy_taint(
3388             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3389                                   EXIM_IPADDR_MAX, "-oMa"), GET_TAINTED);
3390
3391         /* -oMaa: Set authenticator name */
3392
3393         else if (Ustrcmp(argrest, "aa") == 0)
3394           sender_host_authenticated = string_copy_taint(
3395             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3396                                   EXIM_DRIVERNAME_MAX, "-oMaa"), GET_TAINTED);
3397
3398         /* -oMas: setting authenticated sender */
3399
3400         else if (Ustrcmp(argrest, "as") == 0)
3401           authenticated_sender = string_copy_taint(
3402             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3403                                   EXIM_EMAILADDR_MAX, "-oMas"), GET_TAINTED);
3404
3405         /* -oMai: setting authenticated id */
3406
3407         else if (Ustrcmp(argrest, "ai") == 0)
3408           authenticated_id = string_copy_taint(
3409             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3410                                   EXIM_EMAILADDR_MAX, "-oMai"), GET_TAINTED);
3411
3412         /* -oMi: Set incoming interface address */
3413
3414         else if (Ustrcmp(argrest, "i") == 0)
3415           interface_address = string_copy_taint(
3416             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3417                                   EXIM_IPADDR_MAX, "-oMi"), GET_TAINTED);
3418
3419         /* -oMm: Message reference */
3420
3421         else if (Ustrcmp(argrest, "m") == 0)
3422           {
3423           if (!mac_ismsgid(argv[i+1]))
3424               exim_fail("-oMm must be a valid message ID\n");
3425           if (!f.trusted_config)
3426               exim_fail("-oMm must be called by a trusted user/config\n");
3427             message_reference = next_argv(argv, &i, argc, arg);
3428           }
3429
3430         /* -oMr: Received protocol */
3431
3432         else if (Ustrcmp(argrest, "r") == 0)
3433
3434           if (received_protocol)
3435             exim_fail("received_protocol is set already\n");
3436           else
3437             if (++i >= argc) badarg = TRUE;
3438             else
3439               received_protocol = string_copy_taint(
3440                 exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-oMr"),
3441                 GET_TAINTED);
3442
3443         /* -oMs: Set sender host name */
3444
3445         else if (Ustrcmp(argrest, "s") == 0)
3446           if (++i >= argc) badarg = TRUE;
3447           else
3448             sender_host_name = string_copy_taint(
3449               exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-oMs"),
3450               GET_TAINTED);
3451
3452         /* -oMt: Set sender ident */
3453
3454         else if (Ustrcmp(argrest, "t") == 0)
3455           if (++i >= argc) badarg = TRUE;
3456           else
3457             {
3458             sender_ident_set = TRUE;
3459             sender_ident = string_copy_taint(
3460               exim_str_fail_toolong(argv[i], EXIM_IDENTUSER_MAX, "-oMt"),
3461               GET_TAINTED);
3462             }
3463
3464         /* Else a bad argument */
3465
3466         else
3467           badarg = TRUE;
3468         }
3469         break;
3470
3471       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3472       seem to call this as -m (undocumented), so that is also accepted (see
3473       above). */
3474       /* -oo: An ancient flag for old-style addresses which still seems to
3475       crop up in some calls (see in SCO). */
3476
3477       case 'm':
3478       case 'o':
3479         if (*argrest) badarg = TRUE;
3480         break;
3481
3482       /* -oP <name>: set pid file path for daemon
3483          -oPX:       delete pid file of daemon */
3484
3485       case 'P':
3486         if (!f.running_in_test_harness && real_uid != root_uid && real_uid != exim_uid)
3487           exim_fail("exim: only uid=%d or uid=%d can use -oP and -oPX "
3488                     "(uid=%d euid=%d | %d)\n",
3489                     root_uid, exim_uid, getuid(), geteuid(), real_uid);
3490         if (!*argrest)
3491           if (++i < argc) override_pid_file_path = argv[i];
3492           else badarg = TRUE;
3493         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3494         else badarg = TRUE;
3495         break;
3496
3497
3498       /* -or <n>: set timeout for non-SMTP acceptance
3499          -os <n>: set timeout for SMTP acceptance */
3500
3501       case 'r':
3502       case 's':
3503         {
3504         int * tp = argrest[-1] == 'r'
3505           ? &arg_receive_timeout : &arg_smtp_receive_timeout;
3506         if (*argrest)
3507           *tp = readconf_readtime(argrest, 0, FALSE);
3508         else if (i+1 < argc)
3509           *tp = readconf_readtime(argv[++i], 0, FALSE);
3510
3511         if (*tp < 0)
3512           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3513         }
3514         break;
3515
3516       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3517       /* Limits: Is there a real limit we want here?  1024 is very arbitrary. */
3518
3519       case 'X':
3520         if (*argrest || ++i >= argc) badarg = TRUE;
3521         else override_local_interfaces = string_copy_taint(
3522           exim_str_fail_toolong(argv[i], 1024, "-oX"), GET_TAINTED);
3523         break;
3524
3525       /* -oY: Override creation of daemon notifier socket */
3526
3527       case 'Y':
3528         if (*argrest) badarg = TRUE;
3529         else f.notifier_socket_en = FALSE;
3530         break;
3531
3532       /* Unknown -o argument */
3533
3534       default:
3535         badarg = TRUE;
3536       }
3537     break;
3538
3539
3540     /* -ps: force Perl startup; -pd force delayed Perl startup */
3541
3542     case 'p':
3543     #ifdef EXIM_PERL
3544     if (*argrest == 's' && argrest[1] == 0)
3545       {
3546       perl_start_option = 1;
3547       break;
3548       }
3549     if (*argrest == 'd' && argrest[1] == 0)
3550       {
3551       perl_start_option = -1;
3552       break;
3553       }
3554     #endif
3555
3556     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3557     which sets the host protocol and host name */
3558
3559     if (!*argrest)
3560       argrest = next_argv(argv, &i, argc, arg);
3561
3562     if (*argrest)
3563       {
3564       uschar * hn = Ustrchr(argrest, ':');
3565
3566       if (received_protocol)
3567         exim_fail("received_protocol is set already\n");
3568
3569       if (!hn)
3570         received_protocol = string_copy_taint(
3571           exim_str_fail_toolong(argrest, EXIM_DRIVERNAME_MAX, "-p<protocol>"),
3572           GET_TAINTED);
3573       else
3574         {
3575         (void) exim_str_fail_toolong(argrest, (EXIM_DRIVERNAME_MAX+1+EXIM_HOSTNAME_MAX), "-p<protocol>:<host>");
3576         received_protocol = string_copyn_taint(argrest, hn - argrest, GET_TAINTED);
3577         sender_host_name = string_copy_taint(hn + 1, GET_TAINTED);
3578         }
3579       }
3580     break;
3581
3582     /* -q:  set up queue runs */
3583
3584     case 'q':
3585       {
3586       BOOL two_stage, first_del, force, thaw = FALSE, local;
3587
3588       receiving_message = FALSE;
3589
3590       /* -qq...: Do queue runs in a 2-stage manner */
3591
3592       if ((two_stage = *argrest == 'q'))
3593         argrest++;
3594
3595       /* -qi...: Do only first (initial) deliveries */
3596
3597       if ((first_del = *argrest == 'i'))
3598         argrest++;
3599
3600       /* -qf...: Run the queue, forcing deliveries
3601          -qff..: Ditto, forcing thawing as well */
3602
3603       if ((force = *argrest == 'f'))
3604         if ((thaw = *++argrest == 'f'))
3605           argrest++;
3606
3607       /* -q[f][f]l...: Run the queue only on local deliveries */
3608
3609       if ((local = *argrest == 'l'))
3610         argrest++;
3611
3612       /* -q[f][f][l][G<name>]... Work on the named queue */
3613
3614       if (*argrest == 'G')
3615         {
3616         int i;
3617         for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3618         exim_len_fail_toolong(i, EXIM_DRIVERNAME_MAX, "-q*G<name>");
3619         queue_name = string_copyn(argrest, i);
3620         argrest += i;
3621         if (*argrest == '/') argrest++;
3622         }
3623
3624       /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3625       only, optionally named, optionally starting from a given message id. */
3626
3627       if (!(list_queue || count_queue))
3628         {
3629         qrunner * q;
3630
3631         if (  !*argrest
3632            && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3633           {
3634           q = alloc_onetime_qrunner();
3635           if (i+1 < argc && mac_ismsgid(argv[i+1]))
3636             start_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3637           if (i+1 < argc && mac_ismsgid(argv[i+1]))
3638             stop_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3639           }
3640
3641       /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3642       forced, optionally local only, optionally named. */
3643
3644         else
3645           {
3646           int intvl;
3647           const uschar * s;
3648
3649           if (*argrest) s = argrest;
3650           else if (++i < argc) { badarg = TRUE; break; }
3651           else s = argv[i];
3652
3653           if ((intvl = readconf_readtime(s, 0, FALSE)) <= 0)
3654             exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3655
3656           for (qrunner * qq = qrunners; qq; qq = qq->next)
3657             if (  queue_name && qq->name && Ustrcmp(queue_name, qq->name) == 0
3658                || !queue_name && !qq->name)
3659               exim_fail("exim: queue-runner specified more than once\n");
3660
3661           q = alloc_qrunner();
3662           q->interval = intvl;
3663           }
3664
3665         q->name = *queue_name ? queue_name : NULL;      /* will be NULL for the default queue */
3666         q->queue_run_force = force;
3667         q->deliver_force_thaw = thaw;
3668         q->queue_run_first_delivery = first_del;
3669         q->queue_run_local = local;
3670         q->queue_2stage = two_stage;
3671         }
3672
3673       break;
3674       }
3675
3676
3677     case 'R':   /* Synonymous with -qR... */
3678     case 'S':   /* Synonymous with -qS... */
3679       {
3680       const uschar * tainted_selectstr;
3681       uschar * s;
3682
3683       receiving_message = FALSE;
3684
3685     /* -Rf:   As -R (below) but force all deliveries,
3686        -Rff:  Ditto, but also thaw all frozen messages,
3687        -Rr:   String is regex
3688        -Rrf:  Regex and force
3689        -Rrff: Regex and force and thaw
3690
3691        -S...: Like -R but works on sender.
3692
3693     in all cases provided there are no further characters in this
3694     argument. */
3695
3696       if (!qrunners) alloc_onetime_qrunner();
3697       qrunners->queue_2stage = f.queue_2stage;
3698       if (*argrest)
3699         for (int i = 0; i < nelem(rsopts); i++)
3700           if (Ustrcmp(argrest, rsopts[i]) == 0)
3701             {
3702             if (i != 2) qrunners->queue_run_force = TRUE;
3703             if (i >= 2)
3704               if (switchchar == 'R')
3705                 f.deliver_selectstring_regex = TRUE;
3706               else
3707                 f.deliver_selectstring_sender_regex = TRUE;
3708             if (i == 1 || i == 4) qrunners->deliver_force_thaw = TRUE;
3709             argrest += Ustrlen(rsopts[i]);
3710             }
3711
3712     /* -R or -S: Set string to match in addresses for forced queue run to
3713     pick out particular messages. */
3714
3715       /* Avoid attacks from people providing very long strings, and do so before
3716       we make copies. */
3717       if (*argrest)
3718         tainted_selectstr = argrest;
3719       else if (i+1 < argc)
3720         tainted_selectstr = argv[++i];
3721       else
3722         exim_fail("exim: string expected after %s\n", switchchar == 'R' ? "-R" : "-S");
3723
3724       s = string_copy_taint(
3725         exim_str_fail_toolong(tainted_selectstr, EXIM_EMAILADDR_MAX, "-R"),
3726         GET_TAINTED);
3727
3728       if (switchchar == 'R')
3729         deliver_selectstring = s;
3730       else
3731         deliver_selectstring_sender = s;
3732       }
3733     break;
3734
3735
3736     /* -r: an obsolete synonym for -f (see above) */
3737
3738     /* -Tqt is an option that is exclusively for use by the testing suite.
3739     It is not recognized in other circumstances. It allows for the setting up
3740     of explicit "queue times" so that various warning/retry things can be
3741     tested. Otherwise variability of clock ticks etc. cause problems. */
3742
3743     case 'T':
3744     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0 && ++i < argc)
3745       fudged_queue_times = string_copy_taint(argv[i], GET_TAINTED);
3746     else badarg = TRUE;
3747     break;
3748
3749
3750     /* -t: Set flag to extract recipients from body of message. */
3751
3752     case 't':
3753     if (!*argrest) extract_recipients = TRUE;
3754
3755     /* -ti: Set flag to extract recipients from body of message, and also
3756     specify that dot does not end the message. */
3757
3758     else if (Ustrcmp(argrest, "i") == 0)
3759       {
3760       extract_recipients = TRUE;
3761       f.dot_ends = FALSE;
3762       }
3763
3764     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3765
3766     #ifndef DISABLE_TLS
3767     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3768     #endif
3769
3770     else badarg = TRUE;
3771     break;
3772
3773
3774     /* -U: This means "initial user submission" in sendmail, apparently. The
3775     doc claims that in future sendmail may refuse syntactically invalid
3776     messages instead of fixing them. For the moment, we just ignore it. */
3777
3778     case 'U':
3779     break;
3780
3781
3782     /* -v: verify things - this is a very low-level debugging */
3783
3784     case 'v':
3785     if (!*argrest)
3786       {
3787       debug_selector |= D_v;
3788       debug_file = stderr;
3789       }
3790     else badarg = TRUE;
3791     break;
3792
3793
3794     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3795
3796       The -x flag tells the sendmail command that mail from a local
3797       mail program has National Language Support (NLS) extended characters
3798       in the body of the mail item. The sendmail command can send mail with
3799       extended NLS characters across networks that normally corrupts these
3800       8-bit characters.
3801
3802     As Exim is 8-bit clean, it just ignores this flag. */
3803
3804     case 'x':
3805     if (*argrest) badarg = TRUE;
3806     break;
3807
3808     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3809     logs to that file.  We swallow the parameter and otherwise ignore it. */
3810
3811     case 'X':
3812     if (!*argrest)
3813       if (++i >= argc)
3814         exim_fail("exim: string expected after -X\n");
3815     break;
3816
3817     /* -z: a line of text to log */
3818
3819     case 'z':
3820     if (!*argrest)
3821       if (++i < argc)
3822         log_oneline = string_copy_taint(
3823           exim_str_fail_toolong(argv[i], 2048, "-z logtext"),
3824           GET_TAINTED);
3825       else
3826         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3827     break;
3828
3829     /* All other initial characters are errors */
3830
3831     default:
3832     badarg = TRUE;
3833     break;
3834     }         /* End of high-level switch statement */
3835
3836   /* Failed to recognize the option, or syntax error */
3837
3838   if (badarg)
3839     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3840       "option %s\n", arg);
3841   }
3842
3843
3844 /* If -R or -S have been specified without -q, assume a single queue run. */
3845
3846  if ((deliver_selectstring || deliver_selectstring_sender) && !qrunners)
3847   alloc_onetime_qrunner();
3848
3849
3850 END_ARG:
3851  store_pool = old_pool;
3852  }
3853
3854 /* If usage_wanted is set we call the usage function - which never returns */
3855 if (usage_wanted) exim_usage(called_as);
3856
3857 /* Arguments have been processed. Check for incompatibilities. */
3858 if (  (  (smtp_input || extract_recipients || recipients_arg < argc)
3859       && (  f.daemon_listen || qrunners || bi_option
3860          || test_retry_arg >= 0 || test_rewrite_arg >= 0
3861          || filter_test != FTEST_NONE
3862          || msg_action_arg > 0 && !one_msg_action
3863       )  )
3864    || (  msg_action_arg > 0
3865       && (  f.daemon_listen || is_multiple_qrun() || list_options
3866          || checking && msg_action != MSG_LOAD
3867          || bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0
3868       )  )
3869    || (  (f.daemon_listen || is_multiple_qrun())
3870       && (  sender_address || list_options || list_queue || checking
3871          || bi_option
3872       )  )
3873    || f.daemon_listen && is_onetime_qrun()
3874    || f.inetd_wait_mode && qrunners
3875    || (  list_options
3876       && (  checking || smtp_input || extract_recipients
3877          || filter_test != FTEST_NONE || bi_option
3878       )  )
3879    || (  verify_address_mode
3880       && (  f.address_test_mode || smtp_input || extract_recipients
3881          || filter_test != FTEST_NONE || bi_option
3882       )  )
3883    || (  f.address_test_mode
3884       && (  smtp_input || extract_recipients || filter_test != FTEST_NONE
3885          || bi_option
3886       )  )
3887    || (  smtp_input
3888       && (sender_address || filter_test != FTEST_NONE || extract_recipients)
3889       )
3890    || deliver_selectstring && !qrunners
3891    || msg_action == MSG_LOAD && (!expansion_test || expansion_test_message)
3892    )
3893   exim_fail("exim: incompatible command-line options or arguments\n");
3894
3895 /* If debugging is set up, set the file and the file descriptor to pass on to
3896 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3897 to run in the foreground. */
3898
3899 if (debug_selector != 0)
3900   {
3901   debug_file = stderr;
3902   debug_fd = fileno(debug_file);
3903   f.background_daemon = FALSE;
3904   testharness_pause_ms(100);   /* lets caller finish */
3905   if (debug_selector != D_v)    /* -v only doesn't show this */
3906     {
3907     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3908       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3909       debug_selector);
3910     if (!version_printed)
3911       show_whats_supported(FALSE);
3912     }
3913   }
3914
3915 /* When started with root privilege, ensure that the limits on the number of
3916 open files and the number of processes (where that is accessible) are
3917 sufficiently large, or are unset, in case Exim has been called from an
3918 environment where the limits are screwed down. Not all OS have the ability to
3919 change some of these limits. */
3920
3921 if (unprivileged)
3922   {
3923   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3924   }
3925 else
3926   {
3927   struct rlimit rlp;
3928
3929 #ifdef RLIMIT_NOFILE
3930   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3931     {
3932     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3933       strerror(errno));
3934     rlp.rlim_cur = rlp.rlim_max = 0;
3935     }
3936
3937   /* I originally chose 1000 as a nice big number that was unlikely to
3938   be exceeded. It turns out that some older OS have a fixed upper limit of
3939   256. */
3940
3941   if (rlp.rlim_cur < 1000)
3942     {
3943     rlp.rlim_cur = rlp.rlim_max = 1000;
3944     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3945       {
3946       rlp.rlim_cur = rlp.rlim_max = 256;
3947       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3948         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3949           strerror(errno));
3950       }
3951     }
3952 #endif
3953
3954 #ifdef RLIMIT_NPROC
3955   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3956     {
3957     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3958       strerror(errno));
3959     rlp.rlim_cur = rlp.rlim_max = 0;
3960     }
3961
3962 # ifdef RLIM_INFINITY
3963   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3964     {
3965     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3966 # else
3967   if (rlp.rlim_cur < 1000)
3968     {
3969     rlp.rlim_cur = rlp.rlim_max = 1000;
3970 # endif
3971     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3972       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3973         strerror(errno));
3974     }
3975 #endif
3976   }
3977
3978 /* Exim is normally entered as root (but some special configurations are
3979 possible that don't do this). However, it always spins off sub-processes that
3980 set their uid and gid as required for local delivery. We don't want to pass on
3981 any extra groups that root may belong to, so we want to get rid of them all at
3982 this point.
3983
3984 We need to obey setgroups() at this stage, before possibly giving up root
3985 privilege for a changed configuration file, but later on we might need to
3986 check on the additional groups for the admin user privilege - can't do that
3987 till after reading the config, which might specify the exim gid. Therefore,
3988 save the group list here first. */
3989
3990 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3991   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3992
3993 /* There is a fundamental difference in some BSD systems in the matter of
3994 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3995 known not to be different. On the "different" systems there is a single group
3996 list, and the first entry in it is the current group. On all other versions of
3997 Unix there is a supplementary group list, which is in *addition* to the current
3998 group. Consequently, to get rid of all extraneous groups on a "standard" system
3999 you pass over 0 groups to setgroups(), while on a "different" system you pass
4000 over a single group - the current group, which is always the first group in the
4001 list. Calling setgroups() with zero groups on a "different" system results in
4002 an error return. The following code should cope with both types of system.
4003
4004  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
4005  the "setgroups() with zero groups" - and changes the egid.
4006  Thanks to that we had to stash the original_egid above, for use below
4007  in the call to exim_setugid().
4008
4009 However, if this process isn't running as root, setgroups() can't be used
4010 since you have to be root to run it, even if throwing away groups.
4011 Except, sigh, for Hurd - where you can.
4012 Not being root here happens only in some unusual configurations. */
4013
4014 if (  !unprivileged
4015 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
4016    && setgroups(0, NULL) != 0
4017 #endif
4018    && setgroups(1, group_list) != 0)
4019   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
4020
4021 /* If the configuration file name has been altered by an argument on the
4022 command line (either a new file name or a macro definition) and the caller is
4023 not root, or if this is a filter testing run, remove any setuid privilege the
4024 program has and run as the underlying user.
4025
4026 The exim user is locked out of this, which severely restricts the use of -C
4027 for some purposes.
4028
4029 Otherwise, set the real ids to the effective values (should be root unless run
4030 from inetd, which it can either be root or the exim uid, if one is configured).
4031
4032 There is a private mechanism for bypassing some of this, in order to make it
4033 possible to test lots of configurations automatically, without having either to
4034 recompile each time, or to patch in an actual configuration file name and other
4035 values (such as the path name). If running in the test harness, pretend that
4036 configuration file changes and macro definitions haven't happened. */
4037
4038 if ((                                            /* EITHER */
4039     (!f.trusted_config ||                          /* Config changed, or */
4040      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
4041     real_uid != root_uid &&                      /* Not root, and */
4042     !f.running_in_test_harness                     /* Not fudged */
4043     ) ||                                         /*   OR   */
4044     expansion_test                               /* expansion testing */
4045     ||                                           /*   OR   */
4046     filter_test != FTEST_NONE)                   /* Filter testing */
4047   {
4048   setgroups(group_count, group_list);
4049   exim_setugid(real_uid, real_gid, FALSE,
4050     US"-C, -D, -be or -bf forces real uid");
4051   removed_privilege = TRUE;
4052
4053   /* In the normal case when Exim is called like this, stderr is available
4054   and should be used for any logging information because attempts to write
4055   to the log will usually fail. To arrange this, we unset really_exim. However,
4056   if no stderr is available there is no point - we might as well have a go
4057   at the log (if it fails, syslog will be written).
4058
4059   Note that if the invoker is Exim, the logs remain available. Messing with
4060   this causes unlogged successful deliveries.  */
4061
4062   if (log_stderr && real_uid != exim_uid)
4063     f.really_exim = FALSE;
4064   }
4065
4066 /* Privilege is to be retained for the moment. It may be dropped later,
4067 depending on the job that this Exim process has been asked to do. For now, set
4068 the real uid to the effective so that subsequent re-execs of Exim are done by a
4069 privileged user. */
4070
4071 else
4072   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
4073
4074 /* If testing a filter, open the file(s) now, before wasting time doing other
4075 setups and reading the message. */
4076
4077 if (filter_test & FTEST_SYSTEM)
4078   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
4079     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
4080       strerror(errno));
4081
4082 if (filter_test & FTEST_USER)
4083   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
4084     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
4085       strerror(errno));
4086
4087 /* Initialise lookup_list
4088 If debugging, already called above via version reporting.
4089 In either case, we initialise the list of available lookups while running
4090 as root.  All dynamically modules are loaded from a directory which is
4091 hard-coded into the binary and is code which, if not a module, would be
4092 part of Exim already.  Ability to modify the content of the directory
4093 is equivalent to the ability to modify a setuid binary!
4094
4095 This needs to happen before we read the main configuration. */
4096 init_lookup_list();
4097
4098 /*XXX this excrescence could move to the testsuite standard config setup file */
4099 #ifdef SUPPORT_I18N
4100 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
4101 #endif
4102
4103 /* Read the main runtime configuration data; this gives up if there
4104 is a failure. It leaves the configuration file open so that the subsequent
4105 configuration data for delivery can be read if needed.
4106
4107 NOTE: immediately after opening the configuration file we change the working
4108 directory to "/"! Later we change to $spool_directory. We do it there, because
4109 during readconf_main() some expansion takes place already. */
4110
4111 /* Store the initial cwd before we change directories.  Can be NULL if the
4112 dir has already been unlinked. */
4113 initial_cwd = os_getcwd(NULL, 0);
4114 if (!initial_cwd && errno)
4115   exim_fail("exim: getting initial cwd failed: %s\n", strerror(errno));
4116
4117 if (initial_cwd && (strlen(CCS initial_cwd) >= BIG_BUFFER_SIZE))
4118   exim_fail("exim: initial cwd is far too long (%d)\n", Ustrlen(CCS initial_cwd));
4119
4120 /* checking:
4121     -be[m] expansion test        -
4122     -b[fF] filter test           new
4123     -bh[c] host test             -
4124     -bmalware malware_test_file  new
4125     -brt   retry test            new
4126     -brw   rewrite test          new
4127     -bt    address test          -
4128     -bv[s] address verify        -
4129    list_options:
4130     -bP <option> (except -bP config, which sets list_config)
4131
4132 If any of these options is set, we suppress warnings about configuration
4133 issues (currently about tls_advertise_hosts and keep_environment not being
4134 defined) */
4135
4136   {
4137   int old_pool = store_pool;
4138 #ifdef MEASURE_TIMING
4139   struct timeval t0;
4140   (void)gettimeofday(&t0, NULL);
4141 #endif
4142
4143   store_pool = POOL_CONFIG;
4144   readconf_main(checking || list_options);
4145   store_pool = old_pool;
4146
4147 #ifdef MEASURE_TIMING
4148   report_time_since(&t0, US"readconf_main (delta)");
4149 #endif
4150   }
4151
4152 /* Now in directory "/" */
4153
4154 if (cleanup_environment() == FALSE)
4155   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
4156
4157
4158 /* If an action on specific messages is requested, or if a daemon or queue
4159 runner is being started, we need to know if Exim was called by an admin user.
4160 This is the case if the real user is root or exim, or if the real group is
4161 exim, or if one of the supplementary groups is exim or a group listed in
4162 admin_groups. We don't fail all message actions immediately if not admin_user,
4163 since some actions can be performed by non-admin users. Instead, set admin_user
4164 for later interrogation. */
4165
4166 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
4167   f.admin_user = TRUE;
4168 else
4169   for (int i = 0; i < group_count && !f.admin_user; i++)
4170     if (group_list[i] == exim_gid)
4171       f.admin_user = TRUE;
4172     else if (admin_groups)
4173       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
4174         if (admin_groups[j] == group_list[i])
4175           f.admin_user = TRUE;
4176
4177 /* Another group of privileged users are the trusted users. These are root,
4178 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
4179 are permitted to specify sender_addresses with -f on the command line, and
4180 other message parameters as well. */
4181
4182 if (real_uid == root_uid || real_uid == exim_uid)
4183   f.trusted_caller = TRUE;
4184 else
4185   {
4186   if (trusted_users)
4187     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
4188       if (trusted_users[i] == real_uid)
4189         f.trusted_caller = TRUE;
4190
4191   if (trusted_groups)
4192     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
4193       if (trusted_groups[i] == real_gid)
4194         f.trusted_caller = TRUE;
4195       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
4196         if (trusted_groups[i] == group_list[j])
4197           f.trusted_caller = TRUE;
4198   }
4199
4200 /* At this point, we know if the user is privileged and some command-line
4201 options become possibly impermissible, depending upon the configuration file. */
4202
4203 if (checking && commandline_checks_require_admin && !f.admin_user)
4204   exim_fail("exim: those command-line flags are set to require admin\n");
4205
4206 /* Handle the decoding of logging options. */
4207
4208 decode_bits(log_selector, log_selector_size, log_notall,
4209   log_selector_string, log_options, log_options_count, US"log", 0);
4210
4211 DEBUG(D_any)
4212   {
4213   debug_printf("configuration file is %s\n", config_main_filename);
4214   debug_printf("log selectors =");
4215   for (int i = 0; i < log_selector_size; i++)
4216     debug_printf(" %08x", log_selector[i]);
4217   debug_printf("\n");
4218   }
4219
4220 /* If domain literals are not allowed, check the sender address that was
4221 supplied with -f. Ditto for a stripped trailing dot. */
4222
4223 if (sender_address)
4224   {
4225   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
4226     exim_fail("exim: bad -f address \"%s\": domain literals not "
4227       "allowed\n", sender_address);
4228   if (f_end_dot && !strip_trailing_dot)
4229     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
4230       "(trailing dot not allowed)\n", sender_address);
4231   }
4232
4233 /* See if an admin user overrode our logging. */
4234
4235 if (cmdline_syslog_name)
4236   if (f.admin_user)
4237     {
4238     syslog_processname = cmdline_syslog_name;
4239     log_file_path = string_copy(CUS"syslog");
4240     }
4241   else
4242     /* not a panic, non-privileged users should not be able to spam paniclog */
4243     exim_fail(
4244         "exim: you lack sufficient privilege to specify syslog process name\n");
4245
4246 /* Paranoia check of maximum lengths of certain strings. There is a check
4247 on the length of the log file path in log.c, which will come into effect
4248 if there are any calls to write the log earlier than this. However, if we
4249 get this far but the string is very long, it is better to stop now than to
4250 carry on and (e.g.) receive a message and then have to collapse. The call to
4251 log_write() from here will cause the ultimate panic collapse if the complete
4252 file name exceeds the buffer length. */
4253
4254 if (Ustrlen(log_file_path) > 200)
4255   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4256     "log_file_path is longer than 200 chars: aborting");
4257
4258 if (Ustrlen(pid_file_path) > 200)
4259   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4260     "pid_file_path is longer than 200 chars: aborting");
4261
4262 if (Ustrlen(spool_directory) > 200)
4263   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4264     "spool_directory is longer than 200 chars: aborting");
4265
4266 /* Length check on the process name given to syslog for its TAG field,
4267 which is only permitted to be 32 characters or less. See RFC 3164. */
4268
4269 if (Ustrlen(syslog_processname) > 32)
4270   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4271     "syslog_processname is longer than 32 chars: aborting");
4272
4273 if (log_oneline)
4274   if (f.admin_user)
4275     {
4276     log_write(0, LOG_MAIN, "%s", log_oneline);
4277     return EXIT_SUCCESS;
4278     }
4279   else
4280     return EXIT_FAILURE;
4281
4282 /* In some operating systems, the environment variable TMPDIR controls where
4283 temporary files are created; Exim doesn't use these (apart from when delivering
4284 to MBX mailboxes), but called libraries such as DBM libraries may require them.
4285 If TMPDIR is found in the environment, reset it to the value defined in the
4286 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
4287 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
4288 EXIM_TMPDIR by the build scripts.
4289 */
4290
4291 #ifdef EXIM_TMPDIR
4292   if (environ) for (uschar ** p = USS environ; *p; p++)
4293     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
4294       {
4295       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
4296       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
4297       *p = newp;
4298       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
4299       }
4300 #endif
4301
4302 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
4303 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
4304 we may need to get rid of a bogus timezone setting. This can arise when Exim is
4305 called by a user who has set the TZ variable. This then affects the timestamps
4306 in log files and in Received: headers, and any created Date: header lines. The
4307 required timezone is settable in the configuration file, so nothing can be done
4308 about this earlier - but hopefully nothing will normally be logged earlier than
4309 this. We have to make a new environment if TZ is wrong, but don't bother if
4310 timestamps_utc is set, because then all times are in UTC anyway. */
4311
4312 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
4313   f.timestamps_utc = TRUE;
4314 else
4315   {
4316   uschar *envtz = US getenv("TZ");
4317   if (envtz
4318       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
4319       : timezone_string != NULL
4320      )
4321     {
4322     uschar **p = USS environ;
4323     uschar **new;
4324     uschar **newp;
4325     int count = 0;
4326     if (environ) while (*p++) count++;
4327     if (!envtz) count++;
4328     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4329     if (environ) for (p = USS environ; *p; p++)
4330       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4331     if (timezone_string)
4332       {
4333       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4334       sprintf(CS *newp++, "TZ=%s", timezone_string);
4335       }
4336     *newp = NULL;
4337     environ = CSS new;
4338     tzset();
4339     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4340       tod_stamp(tod_log));
4341     }
4342   }
4343
4344 /* Handle the case when we have removed the setuid privilege because of -C or
4345 -D. This means that the caller of Exim was not root.
4346
4347 There is a problem if we were running as the Exim user. The sysadmin may
4348 expect this case to retain privilege because "the binary was called by the
4349 Exim user", but it hasn't, because either the -D option set macros, or the
4350 -C option set a non-trusted configuration file. There are two possibilities:
4351
4352   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4353       to do message deliveries. Thus, the fact that it is running as a
4354       non-privileged user is plausible, and might be wanted in some special
4355       configurations. However, really_exim will have been set false when
4356       privilege was dropped, to stop Exim trying to write to its normal log
4357       files. Therefore, re-enable normal log processing, assuming the sysadmin
4358       has set up the log directory correctly.
4359
4360   (2) If deliver_drop_privilege is not set, the configuration won't work as
4361       apparently intended, and so we log a panic message. In order to retain
4362       root for -C or -D, the caller must either be root or be invoking a
4363       trusted configuration file (when deliver_drop_privilege is false). */
4364
4365 if (  removed_privilege
4366    && (!f.trusted_config || opt_D_used)
4367    && real_uid == exim_uid)
4368   if (deliver_drop_privilege)
4369     f.really_exim = TRUE; /* let logging work normally */
4370   else
4371     log_write(0, LOG_MAIN|LOG_PANIC,
4372       "exim user lost privilege for using %s option",
4373       f.trusted_config? "-D" : "-C");
4374
4375 /* Start up Perl interpreter if Perl support is configured and there is a
4376 perl_startup option, and the configuration or the command line specifies
4377 initializing starting. Note that the global variables are actually called
4378 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4379
4380 #ifdef EXIM_PERL
4381 if (perl_start_option != 0)
4382   opt_perl_at_start = (perl_start_option > 0);
4383 if (opt_perl_at_start && opt_perl_startup != NULL)
4384   {
4385   uschar *errstr;
4386   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4387   if ((errstr = init_perl(opt_perl_startup)))
4388     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4389   opt_perl_started = TRUE;
4390   }
4391 #endif /* EXIM_PERL */
4392
4393 /* Log the arguments of the call if the configuration file said so. This is
4394 a debugging feature for finding out what arguments certain MUAs actually use.
4395 Don't attempt it if logging is disabled, or if listing variables or if
4396 verifying/testing addresses or expansions. */
4397
4398 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4399    && f.really_exim && !list_options && !checking)
4400   {
4401   uschar *p = big_buffer;
4402   Ustrcpy(p, US"cwd= (failed)");
4403
4404   if (!initial_cwd)
4405     p += 13;
4406   else
4407     {
4408     p += 4;
4409     snprintf(CS p, big_buffer_size - (p - big_buffer), "%s", CCS initial_cwd);
4410     p += Ustrlen(CCS p);
4411     }
4412
4413   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4414   while (*p) p++;
4415   for (int i = 0; i < argc; i++)
4416     {
4417     int len = Ustrlen(argv[i]);
4418     const uschar *printing;
4419     uschar *quote;
4420     if (p + len + 8 >= big_buffer + big_buffer_size)
4421       {
4422       Ustrcpy(p, US" ...");
4423       log_write(0, LOG_MAIN, "%s", big_buffer);
4424       Ustrcpy(big_buffer, US"...");
4425       p = big_buffer + 3;
4426       }
4427     printing = string_printing(argv[i]);
4428     if (!*printing) quote = US"\"";
4429     else
4430       {
4431       const uschar *pp = printing;
4432       quote = US"";
4433       while (*pp) if (isspace(*pp++)) { quote = US"\""; break; }
4434       }
4435     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4436       (p - big_buffer) - 4), printing, quote);
4437     }
4438
4439   if (LOGGING(arguments))
4440     log_write(0, LOG_MAIN, "%s", big_buffer);
4441   else
4442     debug_printf("%s\n", big_buffer);
4443   }
4444
4445 /* Set the working directory to be the top-level spool directory. We don't rely
4446 on this in the code, which always uses fully qualified names, but it's useful
4447 for core dumps etc. Don't complain if it fails - the spool directory might not
4448 be generally accessible and calls with the -C option (and others) have lost
4449 privilege by now. Before the chdir, we try to ensure that the directory exists.
4450 */
4451
4452 if (Uchdir(spool_directory) != 0)
4453   {
4454   (void) directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4455   (void) Uchdir(spool_directory);
4456   }
4457
4458 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4459 alias file. Exim doesn't have such a concept, but this call is screwed into
4460 Sun's YP makefiles. Handle this by calling a configured script, as the real
4461 user who called Exim. The -oA option can be used to pass an argument to the
4462 script. */
4463
4464 if (bi_option)
4465   {
4466   (void) fclose(config_file);
4467   if (bi_command && *bi_command)
4468     {
4469     int i = 0;
4470     const uschar * argv[3];
4471     argv[i++] = bi_command;     /* nonexpanded option so assume untainted */
4472     if (alias_arg) argv[i++] = alias_arg;
4473     argv[i++] = NULL;
4474
4475     setgroups(group_count, group_list);
4476     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4477
4478     DEBUG(D_exec) debug_printf("exec '%.256s' %s%.256s%s\n", argv[0],
4479       argv[1] ? "'" : "", argv[1] ? argv[1] : US"", argv[1] ? "'" : "");
4480
4481     execv(CS argv[0], (char *const *)argv);
4482     exim_fail("exim: exec '%s' failed: %s\n", argv[0], strerror(errno));
4483     }
4484   else
4485     {
4486     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4487     exit(EXIT_SUCCESS);
4488     }
4489   }
4490
4491 /* We moved the admin/trusted check to be immediately after reading the
4492 configuration file.  We leave these prints here to ensure that syslog setup,
4493 logfile setup, and so on has already happened. */
4494
4495 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4496 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4497
4498 /* Only an admin user may start the daemon or force a queue run in the default
4499 configuration, but the queue run restriction can be relaxed. Only an admin
4500 user may request that a message be returned to its sender forthwith. Only an
4501 admin user may specify a debug level greater than D_v (because it might show
4502 passwords, etc. in lookup queries). Only an admin user may request a queue
4503 count. Only an admin user can use the test interface to scan for email
4504 (because Exim will be in the spool dir and able to look at mails). */
4505
4506 if (!f.admin_user)
4507   {
4508   BOOL debugset = (debug_selector & ~D_v) != 0;
4509   if (  deliver_give_up || f.daemon_listen || malware_test_file
4510      || count_queue && queue_list_requires_admin
4511      || list_queue && queue_list_requires_admin
4512      || qrunners && prod_requires_admin
4513      || queue_name_dest && prod_requires_admin
4514      || debugset && !f.running_in_test_harness
4515      )
4516     exim_fail("exim:%s permission denied; not admin\n",
4517               debugset ? " debugging" : "");
4518   }
4519
4520 /* If the real user is not root or the exim uid, the argument for passing
4521 in an open TCP/IP connection for another message is not permitted, nor is
4522 running with the -N option for any delivery action, unless this call to exim is
4523 one that supplied an input message, or we are using a patched exim for
4524 regression testing. */
4525
4526 if (  real_uid != root_uid && real_uid != exim_uid
4527    && (  continue_hostname
4528       || (  f.dont_deliver
4529          && (qrunners || f.daemon_listen || msg_action_arg > 0)
4530       )  )
4531    && !f.running_in_test_harness
4532    )
4533   exim_fail("exim: Permission denied; not exim user or root\n");
4534
4535 /* If the caller is not trusted, certain arguments are ignored when running for
4536 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4537 Note that authority for performing certain actions on messages is tested in the
4538 queue_action() function. */
4539
4540 if (!f.trusted_caller && !checking)
4541   {
4542   sender_host_name = sender_host_address = interface_address =
4543     sender_ident = received_protocol = NULL;
4544   sender_host_port = interface_port = 0;
4545   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4546   }
4547
4548 /* If a sender host address is set, extract the optional port number off the
4549 end of it and check its syntax. Do the same thing for the interface address.
4550 Exim exits if the syntax is bad. */
4551
4552 else
4553   {
4554   if (sender_host_address)
4555     sender_host_port = check_port(sender_host_address);
4556   if (interface_address)
4557     interface_port = check_port(interface_address);
4558   }
4559
4560 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4561 if (flag_G)
4562   {
4563   if (f.trusted_caller)
4564     {
4565     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4566     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4567     }
4568   else
4569     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4570   }
4571
4572 /* If an SMTP message is being received check to see if the standard input is a
4573 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4574 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4575 barf. */
4576
4577 if (smtp_input)
4578   {
4579   union sockaddr_46 inetd_sock;
4580   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4581   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4582     {
4583     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4584     if (family == AF_INET || family == AF_INET6)
4585       {
4586       union sockaddr_46 interface_sock;
4587       size = sizeof(interface_sock);
4588
4589       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4590         interface_address = host_ntoa(-1, &interface_sock, NULL,
4591           &interface_port);
4592
4593       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4594
4595       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4596         {
4597         f.is_inetd = TRUE;
4598         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4599           NULL, &sender_host_port);
4600         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4601           "inetd is not supported when mua_wrapper is set");
4602         }
4603       else
4604         exim_fail(
4605           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4606       }
4607     }
4608   }
4609
4610 /* If the load average is going to be needed while receiving a message, get it
4611 now for those OS that require the first call to os_getloadavg() to be done as
4612 root. There will be further calls later for each message received. */
4613
4614 #ifdef LOAD_AVG_NEEDS_ROOT
4615 if (  receiving_message
4616    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4617   load_average = OS_GETLOADAVG();
4618 #endif
4619
4620 /* The queue_only configuration option can be overridden by -odx on the command
4621 line, except that if queue_only_override is false, queue_only cannot be unset
4622 from the command line. */
4623
4624 if (queue_only_set && (queue_only_override || arg_queue_only))
4625   queue_only = arg_queue_only;
4626
4627 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4628 -or and -os. */
4629
4630 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4631 if (arg_smtp_receive_timeout >= 0)
4632   smtp_receive_timeout = arg_smtp_receive_timeout;
4633
4634 /* If Exim was started with root privilege, unless we have already removed the
4635 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4636 except when starting the daemon or doing some kind of delivery or address
4637 testing (-bt). These are the only cases when root need to be retained. We run
4638 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4639 retained only for starting the daemon. We always do the initgroups() in this
4640 situation (controlled by the TRUE below), in order to be as close as possible
4641 to the state Exim usually runs in. */
4642
4643 if (  !unprivileged                             /* originally had root AND */
4644    && !removed_privilege                        /* still got root AND      */
4645    && !f.daemon_listen                          /* not starting the daemon */
4646    && (!qrunners || is_onetime_qrun())          /* (either kind of daemon) */
4647    && (                                         /*    AND EITHER           */
4648          deliver_drop_privilege                 /* requested unprivileged  */
4649       || (                                      /*       OR                */
4650             !qrunners                           /* not running the queue   */
4651          && (  msg_action_arg < 0               /*       and               */
4652             || msg_action != MSG_DELIVER        /* not delivering          */
4653             )                                   /*       and               */
4654          && (!checking || !f.address_test_mode) /* not address checking    */
4655          && !rcpt_verify_quota                  /* and not quota checking  */
4656    )  )  )
4657   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4658
4659 /* When we are retaining a privileged uid, we still change to the exim gid. */
4660
4661 else
4662   {
4663   int rv;
4664   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4665   rv = setgid(exim_gid);
4666   /* Impact of failure is that some stuff might end up with an incorrect group.
4667   We track this for failures from root, since any attempt to change privilege
4668   by root should succeed and failures should be examined.  For non-root,
4669   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4670   no need to complain then. */
4671   if (rv == -1)
4672     if (!(unprivileged || removed_privilege))
4673       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4674     else
4675       {
4676       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4677           (long int)exim_gid, strerror(errno));
4678       }
4679   }
4680
4681 /* Handle a request to scan a file for malware */
4682 if (malware_test_file)
4683   {
4684 #ifdef WITH_CONTENT_SCAN
4685   int result;
4686   set_process_info("scanning file for malware");
4687   if ((result = malware_in_file(malware_test_file)) == FAIL)
4688     {
4689     printf("No malware found.\n");
4690     exit(EXIT_SUCCESS);
4691     }
4692   if (result != OK)
4693     {
4694     printf("Malware lookup returned non-okay/fail: %d\n", result);
4695     exit(EXIT_FAILURE);
4696     }
4697   if (malware_name)
4698     printf("Malware found: %s\n", malware_name);
4699   else
4700     printf("Malware scan detected malware of unknown name.\n");
4701 #else
4702   printf("Malware scanning not enabled at compile time.\n");
4703 #endif
4704   exit(EXIT_FAILURE);
4705   }
4706
4707 /* Handle a request to list the delivery queue */
4708
4709 if (list_queue)
4710   {
4711   set_process_info("listing the queue");
4712   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4713   exit(EXIT_SUCCESS);
4714   }
4715
4716 /* Handle a request to count the delivery queue */
4717
4718 if (count_queue)
4719   {
4720   set_process_info("counting the queue");
4721   fprintf(stdout, "%u\n", queue_count());
4722   exit(EXIT_SUCCESS);
4723   }
4724
4725 /* Handle actions on specific messages, except for the force delivery and
4726 message load actions, which are done below. Some actions take a whole list of
4727 message ids, which are known to continue up to the end of the arguments. Others
4728 take a single message id and then operate on the recipients list. */
4729
4730 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4731   {
4732   int yield = EXIT_SUCCESS;
4733   set_process_info("acting on specified messages");
4734
4735   /* ACL definitions may be needed when removing a message (-Mrm) because
4736   event_action gets expanded */
4737
4738   if (msg_action == MSG_REMOVE)
4739     {
4740     int old_pool = store_pool;
4741     store_pool = POOL_CONFIG;
4742     readconf_rest();
4743     store_pool = old_pool;
4744     store_writeprotect(POOL_CONFIG);
4745     }
4746
4747   if (!one_msg_action)
4748     {
4749     for (i = msg_action_arg; i < argc; i++)
4750       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4751         yield = EXIT_FAILURE;
4752     switch (msg_action)
4753       {
4754       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4755       default: printf("\n"); break;
4756       }
4757     }
4758
4759   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4760     recipients_arg)) yield = EXIT_FAILURE;
4761   exit(yield);
4762   }
4763
4764 /* We used to set up here to skip reading the ACL section, on
4765  (msg_action_arg > 0 || (is_onetime_qrun() && !f.daemon_listen)
4766 Now, since the intro of the ${acl } expansion, ACL definitions may be
4767 needed in transports so we lost the optimisation. */
4768
4769   {
4770   int old_pool = store_pool;
4771 #ifdef MEASURE_TIMING
4772   struct timeval t0;
4773   (void)gettimeofday(&t0, NULL);
4774 #endif
4775
4776   store_pool = POOL_CONFIG;
4777   readconf_rest();
4778   store_pool = old_pool;
4779
4780   /* -be can add macro definitions, needing to link to the macro structure
4781   chain.  Otherwise, make the memory used for config data readonly. */
4782
4783   if (!expansion_test)
4784     store_writeprotect(POOL_CONFIG);
4785
4786 #ifdef MEASURE_TIMING
4787   report_time_since(&t0, US"readconf_rest (delta)");
4788 #endif
4789   }
4790
4791 /* Handle a request to check quota */
4792 if (rcpt_verify_quota)
4793   if (real_uid != root_uid && real_uid != exim_uid)
4794     exim_fail("exim: Permission denied\n");
4795   else if (recipients_arg >= argc)
4796     exim_fail("exim: missing recipient for quota check\n");
4797   else
4798     {
4799     verify_quota(US argv[recipients_arg]);      /*XXX we lose track of const here */
4800     exim_exit(EXIT_SUCCESS);
4801     }
4802
4803 /* Handle the -brt option. This is for checking out retry configurations.
4804 The next three arguments are a domain name or a complete address, and
4805 optionally two error numbers. All it does is to call the function that
4806 scans the retry configuration data. */
4807
4808 if (test_retry_arg >= 0)
4809   {
4810   retry_config *yield;
4811   int basic_errno = 0;
4812   int more_errno = 0;
4813   const uschar *s1, *s2;
4814
4815   if (test_retry_arg >= argc)
4816     {
4817     printf("-brt needs a domain or address argument\n");
4818     exim_exit(EXIT_FAILURE);
4819     }
4820   s1 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_EMAILADDR_MAX, "-brt");
4821   s2 = NULL;
4822
4823   /* If the first argument contains no @ and no . it might be a local user
4824   or it might be a single-component name. Treat as a domain. */
4825
4826   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4827     {
4828     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4829       "being \ntreated as a one-component domain, not as a local part.\n\n",
4830       s1);
4831     }
4832
4833   /* There may be an optional second domain arg. */
4834
4835   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4836     s2 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_DOMAINNAME_MAX, "-brt 2nd");
4837
4838   /* The final arg is an error name */
4839
4840   if (test_retry_arg < argc)
4841     {
4842     const uschar *ss = exim_str_fail_toolong(argv[test_retry_arg], EXIM_DRIVERNAME_MAX, "-brt 3rd");
4843     uschar *error =
4844       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4845     if (error != NULL)
4846       {
4847       printf("%s\n", CS error);
4848       return EXIT_FAILURE;
4849       }
4850
4851     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4852     code > 100 as an error is for matching codes to the decade. Turn them into
4853     a real error code, off the decade. */
4854
4855     if (basic_errno == ERRNO_MAIL4XX ||
4856         basic_errno == ERRNO_RCPT4XX ||
4857         basic_errno == ERRNO_DATA4XX)
4858       {
4859       int code = (more_errno >> 8) & 255;
4860       if (code == 255)
4861         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4862       else if (code > 100)
4863         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4864       }
4865     }
4866
4867   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4868     printf("No retry information found\n");
4869   else
4870     {
4871     more_errno = yield->more_errno;
4872     printf("Retry rule: %s  ", yield->pattern);
4873
4874     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4875       {
4876       printf("quota%s%s  ",
4877         (more_errno > 0)? "_" : "",
4878         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4879       }
4880     else if (yield->basic_errno == ECONNREFUSED)
4881       {
4882       printf("refused%s%s  ",
4883         (more_errno > 0)? "_" : "",
4884         (more_errno == 'M')? "MX" :
4885         (more_errno == 'A')? "A" : "");
4886       }
4887     else if (yield->basic_errno == ETIMEDOUT)
4888       {
4889       printf("timeout");
4890       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4891       more_errno &= 255;
4892       if (more_errno != 0) printf("_%s",
4893         (more_errno == 'M')? "MX" : "A");
4894       printf("  ");
4895       }
4896     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4897       printf("auth_failed  ");
4898     else printf("*  ");
4899
4900     for (retry_rule * r = yield->rules; r; r = r->next)
4901       {
4902       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4903       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4904       if (r->rule == 'G')
4905         {
4906         int x = r->p2;
4907         int f = x % 1000;
4908         int d = 100;
4909         printf(",%d.", x/1000);
4910         do
4911           {
4912           printf("%d", f/d);
4913           f %= d;
4914           d /= 10;
4915           }
4916         while (f != 0);
4917         }
4918       printf("; ");
4919       }
4920
4921     printf("\n");
4922     }
4923   exim_exit(EXIT_SUCCESS);
4924   }
4925
4926 /* Handle a request to list one or more configuration options */
4927 /* If -n was set, we suppress some information */
4928
4929 if (list_options)
4930   {
4931   BOOL fail = FALSE;
4932   set_process_info("listing variables");
4933   if (recipients_arg >= argc)
4934     fail = !readconf_print(US"all", NULL, flag_n);
4935   else for (i = recipients_arg; i < argc; i++)
4936     {
4937     if (i < argc - 1 &&
4938         (Ustrcmp(argv[i], "router") == 0 ||
4939          Ustrcmp(argv[i], "transport") == 0 ||
4940          Ustrcmp(argv[i], "authenticator") == 0 ||
4941          Ustrcmp(argv[i], "macro") == 0 ||
4942          Ustrcmp(argv[i], "environment") == 0))
4943       {
4944       fail |= !readconf_print(exim_str_fail_toolong(argv[i+1], EXIM_DRIVERNAME_MAX, "-bP name"), argv[i], flag_n);
4945       i++;
4946       }
4947     else
4948       fail = !readconf_print(exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-bP item"), NULL, flag_n);
4949     }
4950   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS);
4951   }
4952
4953 if (list_config)
4954   {
4955   set_process_info("listing config");
4956   exim_exit(readconf_print(US"config", NULL, flag_n)
4957                 ? EXIT_SUCCESS : EXIT_FAILURE);
4958   }
4959
4960
4961 /* Initialise subsystems as required. */
4962
4963 tcp_init();
4964
4965 /* Handle a request to deliver one or more messages that are already on the
4966 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4967 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4968
4969 Delivery of specific messages is typically used for a small number when
4970 prodding by hand (when the option forced_delivery will be set) or when
4971 re-execing to regain root privilege. Each message delivery must happen in a
4972 separate process, so we fork a process for each one, and run them sequentially
4973 so that debugging output doesn't get intertwined, and to avoid spawning too
4974 many processes if a long list is given. However, don't fork for the last one;
4975 this saves a process in the common case when Exim is called to deliver just one
4976 message. */
4977
4978 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4979   {
4980   if (prod_requires_admin && !f.admin_user)
4981     {
4982     fprintf(stderr, "exim: Permission denied\n");
4983     exim_exit(EXIT_FAILURE);
4984     }
4985   set_process_info("delivering specified messages");
4986   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4987   for (i = msg_action_arg; i < argc; i++)
4988     {
4989     int status;
4990     pid_t pid;
4991     /*XXX This use of argv[i] for msg_id should really be tainted, but doing
4992     that runs into a later copy into the untainted global message_id[] */
4993     /*XXX Do we need a length limit check here? */
4994     if (i == argc - 1)
4995       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4996     else if ((pid = exim_fork(US"cmdline-delivery")) == 0)
4997       {
4998       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4999       exim_underbar_exit(EXIT_SUCCESS);
5000       }
5001     else if (pid < 0)
5002       {
5003       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
5004         strerror(errno));
5005       exim_exit(EXIT_FAILURE);
5006       }
5007     else wait(&status);
5008     }
5009   exim_exit(EXIT_SUCCESS);
5010   }
5011
5012
5013 /* If only a single queue run is requested, without SMTP listening, we can just
5014 turn into a queue runner, with an optional starting message id. */
5015
5016 if (is_onetime_qrun() && !f.daemon_listen)
5017   {
5018   single_queue_run(qrunners, start_queue_run_id, stop_queue_run_id);
5019   exim_exit(EXIT_SUCCESS);
5020   }
5021
5022
5023 /* Find the login name of the real user running this process. This is always
5024 needed when receiving a message, because it is written into the spool file. It
5025 may also be used to construct a from: or a sender: header, and in this case we
5026 need the user's full name as well, so save a copy of it, checked for RFC822
5027 syntax and munged if necessary, if it hasn't previously been set by the -F
5028 argument. We may try to get the passwd entry more than once, in case NIS or
5029 other delays are in evidence. Save the home directory for use in filter testing
5030 (only). */
5031
5032 for (i = 0;;)
5033   {
5034   if ((pw = getpwuid(real_uid)) != NULL)
5035     {
5036     originator_login = string_copy(US pw->pw_name);
5037     originator_home = string_copy(US pw->pw_dir);
5038
5039     /* If user name has not been set by -F, set it from the passwd entry
5040     unless -f has been used to set the sender address by a trusted user. */
5041
5042     if (!originator_name)
5043       {
5044       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
5045         {
5046         uschar *name = US pw->pw_gecos;
5047         uschar *amp = Ustrchr(name, '&');
5048         uschar buffer[256];
5049
5050         /* Most Unix specify that a '&' character in the gecos field is
5051         replaced by a copy of the login name, and some even specify that
5052         the first character should be upper cased, so that's what we do. */
5053
5054         if (amp)
5055           {
5056           int loffset;
5057           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
5058             (int)(amp - name), name, &loffset, originator_login, amp + 1);
5059           buffer[loffset] = toupper(buffer[loffset]);
5060           name = buffer;
5061           }
5062
5063         /* If a pattern for matching the gecos field was supplied, apply
5064         it and then expand the name string. */
5065
5066         if (gecos_pattern && gecos_name)
5067           {
5068           const pcre2_code *re;
5069           re = regex_must_compile(gecos_pattern, MCS_NOFLAGS, TRUE); /* Use malloc */
5070
5071           if (regex_match_and_setup(re, name, 0, -1))
5072             {
5073             uschar *new_name = expand_string(gecos_name);
5074             expand_nmax = -1;
5075             if (new_name)
5076               {
5077               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
5078                 "gecos field \"%s\"\n", new_name, name);
5079               name = new_name;
5080               }
5081             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
5082               "\"%s\": %s\n", gecos_name, expand_string_message);
5083             }
5084           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
5085             "gecos field \"%s\"\n", gecos_pattern, name);
5086           store_free((void *)re);
5087           }
5088         originator_name = string_copy(name);
5089         }
5090
5091       /* A trusted caller has used -f but not -F */
5092
5093       else originator_name = US"";
5094       }
5095
5096     /* Break the retry loop */
5097
5098     break;
5099     }
5100
5101   if (++i > finduser_retries) break;
5102   sleep(1);
5103   }
5104
5105 /* If we cannot get a user login, log the incident and give up, unless the
5106 configuration specifies something to use. When running in the test harness,
5107 any setting of unknown_login overrides the actual name. */
5108
5109 if (!originator_login || f.running_in_test_harness)
5110   {
5111   if (unknown_login)
5112     {
5113     originator_login = expand_string(unknown_login);
5114     if (!originator_name && unknown_username)
5115       originator_name = expand_string(unknown_username);
5116     if (!originator_name) originator_name = US"";
5117     }
5118   if (!originator_login)
5119     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
5120       (int)real_uid);
5121   }
5122
5123 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
5124 RFC822 address.*/
5125
5126 originator_name = US parse_fix_phrase(originator_name, Ustrlen(originator_name));
5127
5128 /* If a message is created by this call of Exim, the uid/gid of its originator
5129 are those of the caller. These values are overridden if an existing message is
5130 read in from the spool. */
5131
5132 originator_uid = real_uid;
5133 originator_gid = real_gid;
5134
5135 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
5136   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
5137
5138 /* Run in daemon and/or queue-running mode. The function daemon_go() never
5139 returns. We leave this till here so that the originator_ fields are available
5140 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
5141 mode. */
5142
5143 if (f.daemon_listen || f.inetd_wait_mode || is_multiple_qrun())
5144   {
5145   if (mua_wrapper)
5146     {
5147     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
5148     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
5149       "mua_wrapper is set");
5150     }
5151
5152 # ifndef DISABLE_TLS
5153   /* This also checks that the library linkage is working and we can call
5154   routines in it, so call even if tls_require_ciphers is unset */
5155     {
5156 # ifdef MEASURE_TIMING
5157     struct timeval t0;
5158     (void)gettimeofday(&t0, NULL);
5159 # endif
5160     if (!tls_dropprivs_validate_require_cipher(FALSE))
5161       exit(1);
5162 # ifdef MEASURE_TIMING
5163     report_time_since(&t0, US"validate_ciphers (delta)");
5164 # endif
5165     }
5166 #endif
5167
5168   daemon_go();
5169   }
5170
5171 /* If the sender ident has not been set (by a trusted caller) set it to
5172 the caller. This will get overwritten below for an inetd call. If a trusted
5173 caller has set it empty, unset it. */
5174
5175 if (!sender_ident) sender_ident = originator_login;
5176 else if (!*sender_ident) sender_ident = NULL;
5177
5178 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
5179 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
5180 originator_* variables set. */
5181
5182 if (test_rewrite_arg >= 0)
5183   {
5184   f.really_exim = FALSE;
5185   if (test_rewrite_arg >= argc)
5186     {
5187     printf("-brw needs an address argument\n");
5188     exim_exit(EXIT_FAILURE);
5189     }
5190   rewrite_test(exim_str_fail_toolong(argv[test_rewrite_arg], EXIM_EMAILADDR_MAX, "-brw"));
5191   exim_exit(EXIT_SUCCESS);
5192   }
5193
5194 /* A locally-supplied message is considered to be coming from a local user
5195 unless a trusted caller supplies a sender address with -f, or is passing in the
5196 message via SMTP (inetd invocation or otherwise). */
5197
5198 if (  !sender_address && !smtp_input
5199    || !f.trusted_caller && filter_test == FTEST_NONE)
5200   {
5201   f.sender_local = TRUE;
5202
5203   /* A trusted caller can supply authenticated_sender and authenticated_id
5204   via -oMas and -oMai and if so, they will already be set. Otherwise, force
5205   defaults except when host checking. */
5206
5207   if (!authenticated_sender && !host_checking)
5208     authenticated_sender = string_sprintf("%s@%s", originator_login,
5209       qualify_domain_sender);
5210   if (!authenticated_id && !host_checking)
5211     authenticated_id = originator_login;
5212   }
5213
5214 /* Trusted callers are always permitted to specify the sender address.
5215 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
5216 is specified is the empty address. However, if a trusted caller does not
5217 specify a sender address for SMTP input, we leave sender_address unset. This
5218 causes the MAIL commands to be honoured. */
5219
5220 if (  !smtp_input && !sender_address
5221    || !receive_check_set_sender(sender_address))
5222   {
5223   /* Either the caller is not permitted to set a general sender, or this is
5224   non-SMTP input and the trusted caller has not set a sender. If there is no
5225   sender, or if a sender other than <> is set, override with the originator's
5226   login (which will get qualified below), except when checking things. */
5227
5228   if (  !sender_address                  /* No sender_address set */
5229      ||                                  /*         OR            */
5230        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
5231        !checking))                       /* Not running tests, including filter tests */
5232     {
5233     sender_address = originator_login;
5234     f.sender_address_forced = FALSE;
5235     sender_address_domain = 0;
5236     }
5237   }
5238
5239 /* Remember whether an untrusted caller set the sender address */
5240
5241 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
5242
5243 /* Ensure that the sender address is fully qualified unless it is the empty
5244 address, which indicates an error message, or doesn't exist (root caller, smtp
5245 interface, no -f argument). */
5246
5247 if (sender_address && *sender_address && sender_address_domain == 0)
5248   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
5249     qualify_domain_sender);
5250
5251 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
5252
5253 /* Handle a request to verify a list of addresses, or test them for delivery.
5254 This must follow the setting of the sender address, since routers can be
5255 predicated upon the sender. If no arguments are given, read addresses from
5256 stdin. Set debug_level to at least D_v to get full output for address testing.
5257 */
5258
5259 if (verify_address_mode || f.address_test_mode)
5260   {
5261   int exit_value = 0;
5262   int flags = vopt_qualify;
5263
5264   if (verify_address_mode)
5265     {
5266     if (!verify_as_sender) flags |= vopt_is_recipient;
5267     DEBUG(D_verify) debug_print_ids(US"Verifying:");
5268     }
5269
5270   else
5271     {
5272     flags |= vopt_is_recipient;
5273     debug_selector |= D_v;
5274     debug_file = stderr;
5275     debug_fd = fileno(debug_file);
5276     DEBUG(D_verify) debug_print_ids(US"Address testing:");
5277     }
5278
5279   if (recipients_arg < argc)
5280     while (recipients_arg < argc)
5281       {
5282       /* Supplied addresses are tainted since they come from a user */
5283       uschar * s = string_copy_taint(
5284         exim_str_fail_toolong(argv[recipients_arg++], EXIM_DISPLAYMAIL_MAX, "address verification"),
5285         GET_TAINTED);
5286       while (*s)
5287         {
5288         BOOL finished = FALSE;
5289         uschar *ss = parse_find_address_end(s, FALSE);
5290         if (*ss == ',') *ss = 0; else finished = TRUE;
5291         test_address(s, flags, &exit_value);
5292         s = ss;
5293         if (!finished)
5294           while (*++s == ',' || isspace(*s)) ;
5295         }
5296       }
5297
5298   else for (;;)
5299     {
5300     uschar * s = get_stdinput(NULL, NULL);
5301     if (!s) break;
5302     test_address(string_copy_taint(
5303         exim_str_fail_toolong(s, EXIM_DISPLAYMAIL_MAX, "address verification (stdin)"),
5304         GET_TAINTED),
5305       flags, &exit_value);
5306     }
5307
5308   route_tidyup();
5309   exim_exit(exit_value);
5310   }
5311
5312 /* Handle expansion checking. Either expand items on the command line, or read
5313 from stdin if there aren't any. If -Mset was specified, load the message so
5314 that its variables can be used, but restrict this facility to admin users.
5315 Otherwise, if -bem was used, read a message from stdin. */
5316
5317 if (expansion_test)
5318   {
5319   dns_init(FALSE, FALSE, FALSE);
5320   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
5321     {
5322     uschar * spoolname;
5323     if (!f.admin_user)
5324       exim_fail("exim: permission denied\n");
5325     message_id = US exim_str_fail_toolong(argv[msg_action_arg], MESSAGE_ID_LENGTH, "message-id");
5326     /* Checking the length of the ID is sufficient to validate it.
5327     Get an untainted version so file opens can be done. */
5328     message_id = string_copy_taint(message_id, GET_UNTAINTED);
5329
5330     spoolname = string_sprintf("%s-H", message_id);
5331     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
5332       printf ("Failed to load message datafile %s\n", message_id);
5333     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
5334       printf ("Failed to load message %s\n", message_id);
5335     }
5336
5337   /* Read a test message from a file. We fudge it up to be on stdin, saving
5338   stdin itself for later reading of expansion strings. */
5339
5340   else if (expansion_test_message)
5341     {
5342     int save_stdin = dup(0);
5343     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
5344     if (fd < 0)
5345       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
5346         strerror(errno));
5347     (void) dup2(fd, 0);
5348     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5349     message_ended = END_NOTENDED;
5350     read_message_body(receive_msg(extract_recipients));
5351     message_linecount += body_linecount;
5352     (void)dup2(save_stdin, 0);
5353     (void)close(save_stdin);
5354     clearerr(stdin);               /* Required by Darwin */
5355     }
5356
5357   /* Only admin users may see config-file macros this way */
5358
5359   if (!f.admin_user) macros_user = macros = mlast = NULL;
5360
5361   /* Allow $recipients for this testing */
5362
5363   f.enable_dollar_recipients = TRUE;
5364
5365   /* Expand command line items */
5366
5367   if (recipients_arg < argc)
5368     while (recipients_arg < argc)
5369       expansion_test_line(exim_str_fail_toolong(argv[recipients_arg++], EXIM_EMAILADDR_MAX, "recipient"));
5370
5371   /* Read stdin */
5372
5373   else
5374     {
5375     char *(*fn_readline)(const char *) = NULL;
5376     void (*fn_addhist)(const char *) = NULL;
5377     uschar * s;
5378
5379 #ifdef USE_READLINE
5380     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5381 #endif
5382
5383     while (s = get_stdinput(fn_readline, fn_addhist))
5384       expansion_test_line(s);
5385
5386 #ifdef USE_READLINE
5387     if (dlhandle) dlclose(dlhandle);
5388 #endif
5389     }
5390
5391   /* The data file will be open after -Mset */
5392
5393   if (deliver_datafile >= 0)
5394     {
5395     (void)close(deliver_datafile);
5396     deliver_datafile = -1;
5397     }
5398
5399   exim_exit(EXIT_SUCCESS);
5400   }
5401
5402
5403 /* The active host name is normally the primary host name, but it can be varied
5404 for hosts that want to play several parts at once. We need to ensure that it is
5405 set for host checking, and for receiving messages. */
5406
5407 smtp_active_hostname = primary_hostname;
5408 if (raw_active_hostname != NULL)
5409   {
5410   uschar *nah = expand_string(raw_active_hostname);
5411   if (nah == NULL)
5412     {
5413     if (!f.expand_string_forcedfail)
5414       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5415         "(smtp_active_hostname): %s", raw_active_hostname,
5416         expand_string_message);
5417     }
5418   else if (nah[0] != 0) smtp_active_hostname = nah;
5419   }
5420
5421 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5422 given IP address so that the blocking and relay configuration can be tested.
5423 Unless a sender_ident was set by -oMt, we discard it (the default is the
5424 caller's login name). An RFC 1413 call is made only if we are running in the
5425 test harness and an incoming interface and both ports are specified, because
5426 there is no TCP/IP call to find the ident for. */
5427
5428 if (host_checking)
5429   {
5430   int x[4];
5431   int size;
5432
5433   if (!sender_ident_set)
5434     {
5435     sender_ident = NULL;
5436     if (f.running_in_test_harness && sender_host_port
5437        && interface_address && interface_port)
5438       verify_get_ident(1223);           /* note hardwired port number */
5439     }
5440
5441   /* In case the given address is a non-canonical IPv6 address, canonicalize
5442   it. The code works for both IPv4 and IPv6, as it happens. */
5443
5444   size = host_aton(sender_host_address, x);
5445   sender_host_address = store_get(48, GET_UNTAINTED);  /* large enough for full IPv6 */
5446   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5447
5448   /* Now set up for testing */
5449
5450   host_build_sender_fullhost();
5451   smtp_input = TRUE;
5452   smtp_in = stdin;
5453   smtp_out = stdout;
5454   f.sender_local = FALSE;
5455   f.sender_host_notsocket = TRUE;
5456   debug_file = stderr;
5457   debug_fd = fileno(debug_file);
5458   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5459     "**** but without any ident (RFC 1413) callback.\n"
5460     "**** This is not for real!\n\n",
5461       sender_host_address);
5462
5463   connection_id = getpid();
5464   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5465   if (verify_check_host(&hosts_connection_nolog) == OK)
5466     {
5467     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5468     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5469     }
5470   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5471
5472   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5473   because a log line has already been written for all its failure exists
5474   (usually "connection refused: <reason>") and writing another one is
5475   unnecessary clutter. */
5476
5477   if (smtp_start_session())
5478     {
5479     rmark reset_point;
5480     for (; (reset_point = store_mark()); store_reset(reset_point))
5481       {
5482       if (smtp_setup_msg() <= 0) break;
5483       if (!receive_msg(FALSE)) break;
5484
5485       return_path = sender_address = NULL;
5486       dnslist_domain = dnslist_matched = NULL;
5487 #ifndef DISABLE_DKIM
5488       dkim_cur_signer = NULL;
5489 #endif
5490       acl_var_m = NULL;
5491       deliver_localpart_orig = NULL;
5492       deliver_domain_orig = NULL;
5493       callout_address = sending_ip_address = NULL;
5494       deliver_localpart_data = deliver_domain_data =
5495       recipient_data = sender_data = NULL;
5496       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5497       }
5498     smtp_log_no_mail();
5499     }
5500   exim_exit(EXIT_SUCCESS);
5501   }
5502
5503
5504 /* Arrange for message reception if recipients or SMTP were specified;
5505 otherwise complain unless a version print (-bV) happened or this is a filter
5506 verification test or info dump.
5507 In the former case, show the configuration file name. */
5508
5509 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5510   {
5511   if (version_printed)
5512     {
5513     if (Ustrchr(config_main_filelist, ':'))
5514       printf("Configuration file search path is %s\n", config_main_filelist);
5515     printf("Configuration file is %s\n", config_main_filename);
5516     return EXIT_SUCCESS;
5517     }
5518
5519   if (info_flag != CMDINFO_NONE)
5520     {
5521     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5522     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5523     }
5524
5525   if (filter_test == FTEST_NONE)
5526     exim_usage(called_as);
5527   }
5528
5529
5530 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5531 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5532 that we are not called from inetd, because that is rejected above. The
5533 following configuration settings are forced here:
5534
5535   (1) Synchronous delivery (-odi)
5536   (2) Errors to stderr (-oep == -oeq)
5537   (3) No parallel remote delivery
5538   (4) Unprivileged delivery
5539
5540 We don't force overall queueing options because there are several of them;
5541 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5542 to override any SMTP queueing. */
5543
5544 if (mua_wrapper)
5545   {
5546   f.synchronous_delivery = TRUE;
5547   arg_error_handling = ERRORS_STDERR;
5548   remote_max_parallel = 1;
5549   deliver_drop_privilege = TRUE;
5550   f.queue_smtp = FALSE;
5551   queue_smtp_domains = NULL;
5552 #ifdef SUPPORT_I18N
5553   message_utf8_downconvert = -1;        /* convert-if-needed */
5554 #endif
5555   }
5556
5557
5558 /* Prepare to accept one or more new messages on the standard input. When a
5559 message has been read, its id is returned in message_id[]. If doing immediate
5560 delivery, we fork a delivery process for each received message, except for the
5561 last one, where we can save a process switch.
5562
5563 It is only in non-smtp mode that error_handling is allowed to be changed from
5564 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5565 sendmail error modes other than -oem ever actually used? Later: yes.) */
5566
5567 if (!smtp_input) error_handling = arg_error_handling;
5568
5569 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5570 logging being sent down the socket and make an identd call to get the
5571 sender_ident. */
5572
5573 else if (f.is_inetd)
5574   {
5575   (void)fclose(stderr);
5576   exim_nullstd();                       /* Re-open to /dev/null */
5577   verify_get_ident(IDENT_PORT);
5578   host_build_sender_fullhost();
5579   set_process_info("handling incoming connection from %s via inetd",
5580     sender_fullhost);
5581   }
5582
5583 /* If the sender host address has been set, build sender_fullhost if it hasn't
5584 already been done (which it will have been for inetd). This caters for the
5585 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5586 so that the test for IP options is skipped for -bs input. */
5587
5588 if (sender_host_address && !sender_fullhost)
5589   {
5590   host_build_sender_fullhost();
5591   set_process_info("handling incoming connection from %s via -oMa",
5592     sender_fullhost);
5593   f.sender_host_notsocket = TRUE;
5594   }
5595
5596 /* Otherwise, set the sender host as unknown except for inetd calls. This
5597 prevents host checking in the case of -bs not from inetd and also for -bS. */
5598
5599 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5600
5601 /* If stdout does not exist, then dup stdin to stdout. This can happen
5602 if exim is started from inetd. In this case fd 0 will be set to the socket,
5603 but fd 1 will not be set. This also happens for passed SMTP channels. */
5604
5605 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5606
5607 /* Set up the incoming protocol name and the state of the program. Root is
5608 allowed to force received protocol via the -oMr option above. If we have come
5609 via inetd, the process info has already been set up. We don't set
5610 received_protocol here for smtp input, as it varies according to
5611 batch/HELO/EHLO/AUTH/TLS. */
5612
5613 if (smtp_input)
5614   {
5615   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5616     smtp_batched_input? "batched " : "",
5617     sender_address ? sender_address : originator_login);
5618   }
5619 else
5620   {
5621   int old_pool = store_pool;
5622   store_pool = POOL_PERM;
5623   if (!received_protocol)
5624     received_protocol = string_sprintf("local%s", called_as);
5625   store_pool = old_pool;
5626   set_process_info("accepting a local non-SMTP message from <%s>",
5627     sender_address);
5628   }
5629
5630 /* Initialize the session_local_queue-only flag (this will be ignored if
5631 mua_wrapper is set) */
5632
5633 queue_check_only();
5634 session_local_queue_only = queue_only;
5635
5636 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5637 the spool if so configured. On failure, we must not attempt to send an error
5638 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5639 error code is given.) */
5640
5641 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5642   exim_fail("exim: insufficient disk space\n");
5643
5644 /* If this is smtp input of any kind, real or batched, handle the start of the
5645 SMTP session.
5646
5647 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5648 because a log line has already been written for all its failure exists
5649 (usually "connection refused: <reason>") and writing another one is
5650 unnecessary clutter. */
5651
5652 connection_id = getpid();
5653 if (smtp_input)
5654   {
5655   smtp_in = stdin;
5656   smtp_out = stdout;
5657   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5658   if (verify_check_host(&hosts_connection_nolog) == OK)
5659     {
5660     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5661     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5662     }
5663   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5664   if (!smtp_start_session())
5665     {
5666     mac_smtp_fflush();
5667     exim_exit(EXIT_SUCCESS);
5668     }
5669   }
5670
5671 /* Otherwise, set up the input size limit here and set no stdin stdio buffer
5672 (we handle buferring so as to have visibility of fill level). */
5673
5674 else
5675   {
5676   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5677   if (expand_string_message)
5678     if (thismessage_size_limit == -1)
5679       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5680         "message_size_limit: %s", expand_string_message);
5681     else
5682       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5683         "message_size_limit: %s", expand_string_message);
5684
5685   setvbuf(stdin, NULL, _IONBF, 0);
5686   }
5687
5688 /* Loop for several messages when reading SMTP input. If we fork any child
5689 processes, we don't want to wait for them unless synchronous delivery is
5690 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5691 same as SIG_DFL, despite the fact that documentation often lists the default as
5692 "ignore". This is a confusing area. This is what I know:
5693
5694 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5695 processes that complete simply to go away without ever becoming defunct. You
5696 can't then wait for them - but we don't want to wait for them in the
5697 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5698 happen for all OS (e.g. *BSD is different).
5699
5700 But that's not the end of the story. Some (many? all?) systems have the
5701 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5702 has by default, so it seems that the difference is merely one of default
5703 (compare restarting vs non-restarting signals).
5704
5705 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5706 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5707 of the loop below. Paranoia rules.
5708
5709 February 2003: That's *still* not the end of the story. There are now versions
5710 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5711 process then calls waitpid(), a grumble is written to the system log, because
5712 this is logically inconsistent. In other words, it doesn't like the paranoia.
5713 As a consequence of this, the waitpid() below is now excluded if we are sure
5714 that SIG_IGN works. */
5715
5716 if (!f.synchronous_delivery)
5717   {
5718 #ifdef SA_NOCLDWAIT
5719   struct sigaction act;
5720   act.sa_handler = SIG_IGN;
5721   sigemptyset(&(act.sa_mask));
5722   act.sa_flags = SA_NOCLDWAIT;
5723   sigaction(SIGCHLD, &act, NULL);
5724 #else
5725   signal(SIGCHLD, SIG_IGN);
5726 #endif
5727   }
5728
5729 /* Save the current store pool point, for resetting at the start of
5730 each message, and save the real sender address, if any. */
5731
5732 real_sender_address = sender_address;
5733
5734 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5735 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5736 collapsed). */
5737
5738 for (BOOL more = TRUE; more; )
5739   {
5740   rmark reset_point = store_mark();
5741   message_id[0] = 0;
5742
5743   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5744   input and build the recipients list, before calling receive_msg() to read the
5745   message proper. Whatever sender address is given in the SMTP transaction is
5746   often ignored for local senders - we use the actual sender, which is normally
5747   either the underlying user running this process or a -f argument provided by
5748   a trusted caller. It is saved in real_sender_address. The test for whether to
5749   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5750
5751   if (smtp_input)
5752     {
5753     int rc;
5754     if ((rc = smtp_setup_msg()) > 0)
5755       {
5756       if (real_sender_address != NULL &&
5757           !receive_check_set_sender(sender_address))
5758         {
5759         sender_address = raw_sender = real_sender_address;
5760         sender_address_unrewritten = NULL;
5761         }
5762
5763       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5764       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5765       the very end. The result of the ACL is ignored (as for other non-SMTP
5766       messages). It is run for its potential side effects. */
5767
5768       if (smtp_batched_input && acl_not_smtp_start != NULL)
5769         {
5770         uschar *user_msg, *log_msg;
5771         f.enable_dollar_recipients = TRUE;
5772         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5773           &user_msg, &log_msg);
5774         f.enable_dollar_recipients = FALSE;
5775         }
5776
5777       /* Now get the data for the message */
5778
5779       more = receive_msg(extract_recipients);
5780       if (!message_id[0])
5781         {
5782         cancel_cutthrough_connection(TRUE, US"receive dropped");
5783         if (more) goto MORELOOP;
5784         smtp_log_no_mail();               /* Log no mail if configured */
5785         exim_exit(EXIT_FAILURE);
5786         }
5787       }
5788     else
5789       {
5790       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5791       smtp_log_no_mail();               /* Log no mail if configured */
5792       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
5793       }
5794     }
5795
5796   /* In the non-SMTP case, we have all the information from the command
5797   line, but must process it in case it is in the more general RFC822
5798   format, and in any case, to detect syntax errors. Also, it appears that
5799   the use of comma-separated lists as single arguments is common, so we
5800   had better support them. */
5801
5802   else
5803     {
5804     int rcount = 0;
5805     int count = argc - recipients_arg;
5806     const uschar ** list = argv + recipients_arg;
5807
5808     /* These options cannot be changed dynamically for non-SMTP messages */
5809
5810     f.active_local_sender_retain = local_sender_retain;
5811     f.active_local_from_check = local_from_check;
5812
5813     /* Save before any rewriting */
5814
5815     raw_sender = string_copy(sender_address);
5816
5817     /* Loop for each argument (supplied by user hence tainted) */
5818
5819     for (int i = 0; i < count; i++)
5820       {
5821       int start, end, domain;
5822       uschar * errmess;
5823       /* There can be multiple addresses, so EXIM_DISPLAYMAIL_MAX (tuned for 1) is too short.
5824       We'll still want to cap it to something, just in case. */
5825       uschar * s = string_copy_taint(
5826         exim_str_fail_toolong(list[i], BIG_BUFFER_SIZE, "address argument"),
5827         GET_TAINTED);
5828
5829       /* Loop for each comma-separated address */
5830
5831       while (*s)
5832         {
5833         BOOL finished = FALSE;
5834         uschar *recipient;
5835         uschar *ss = parse_find_address_end(s, FALSE);
5836
5837         if (*ss == ',') *ss = 0; else finished = TRUE;
5838
5839         /* Check max recipients - if -t was used, these aren't recipients */
5840
5841         if (recipients_max > 0 && ++rcount > recipients_max &&
5842             !extract_recipients)
5843           if (error_handling == ERRORS_STDERR)
5844             {
5845             fprintf(stderr, "exim: too many recipients\n");
5846             exim_exit(EXIT_FAILURE);
5847             }
5848           else
5849             return
5850               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5851                 errors_sender_rc : EXIT_FAILURE;
5852
5853 #ifdef SUPPORT_I18N
5854         {
5855         BOOL b = allow_utf8_domains;
5856         allow_utf8_domains = TRUE;
5857 #endif
5858         recipient =
5859           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5860
5861 #ifdef SUPPORT_I18N
5862         if (recipient)
5863           if (string_is_utf8(recipient)) message_smtputf8 = TRUE;
5864           else allow_utf8_domains = b;
5865         }
5866 #else
5867         ;
5868 #endif
5869         if (domain == 0 && !f.allow_unqualified_recipient)
5870           {
5871           recipient = NULL;
5872           errmess = US"unqualified recipient address not allowed";
5873           }
5874
5875         if (!recipient)
5876           if (error_handling == ERRORS_STDERR)
5877             {
5878             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5879               string_printing(list[i]), errmess);
5880             exim_exit(EXIT_FAILURE);
5881             }
5882           else
5883             {
5884             error_block eblock;
5885             eblock.next = NULL;
5886             eblock.text1 = string_printing(list[i]);
5887             eblock.text2 = errmess;
5888             return
5889               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5890                 errors_sender_rc : EXIT_FAILURE;
5891             }
5892
5893         receive_add_recipient(string_copy_taint(recipient, GET_TAINTED), -1);
5894         s = ss;
5895         if (!finished)
5896           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5897         }
5898       }
5899
5900     /* Show the recipients when debugging */
5901
5902     DEBUG(D_receive)
5903       {
5904       if (sender_address) debug_printf("Sender: %s\n", sender_address);
5905       if (recipients_list)
5906         {
5907         debug_printf("Recipients:\n");
5908         for (int i = 0; i < recipients_count; i++)
5909           debug_printf("  %s\n", recipients_list[i].address);
5910         }
5911       }
5912
5913     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5914     ignored; rejecting here would just add complication, and it can just as
5915     well be done later. Allow $recipients to be visible in the ACL. */
5916
5917     if (acl_not_smtp_start)
5918       {
5919       uschar *user_msg, *log_msg;
5920       f.enable_dollar_recipients = TRUE;
5921       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5922         &user_msg, &log_msg);
5923       f.enable_dollar_recipients = FALSE;
5924       }
5925
5926     /* Pause for a while waiting for input.  If none received in that time,
5927     close the logfile, if we had one open; then if we wait for a long-running
5928     datasource (months, in one use-case) log rotation will not leave us holding
5929     the file copy. */
5930
5931     if (!receive_timeout)
5932       if (poll_one_fd(0, POLLIN, 30*60*1000) == 0)      /* 30 minutes */
5933         mainlog_close();
5934
5935     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5936     will just read the headers for the message, and not write anything onto the
5937     spool. */
5938
5939     message_ended = END_NOTENDED;
5940     more = receive_msg(extract_recipients);
5941
5942     /* more is always FALSE here (not SMTP message) when reading a message
5943     for real; when reading the headers of a message for filter testing,
5944     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5945
5946     if (!message_id[0]) exim_exit(EXIT_FAILURE);
5947     }  /* Non-SMTP message reception */
5948
5949   /* If this is a filter testing run, there are headers in store, but
5950   no message on the spool. Run the filtering code in testing mode, setting
5951   the domain to the qualify domain and the local part to the current user,
5952   unless they have been set by options. The prefix and suffix are left unset
5953   unless specified. The the return path is set to to the sender unless it has
5954   already been set from a return-path header in the message. */
5955
5956   if (filter_test != FTEST_NONE)
5957     {
5958     deliver_domain = ftest_domain ? ftest_domain : qualify_domain_recipient;
5959     deliver_domain_orig = deliver_domain;
5960     deliver_localpart = ftest_localpart ? US ftest_localpart : originator_login;
5961     deliver_localpart_orig = deliver_localpart;
5962     deliver_localpart_prefix = US ftest_prefix;
5963     deliver_localpart_suffix = US ftest_suffix;
5964     deliver_home = originator_home;
5965
5966     if (!return_path)
5967       {
5968       printf("Return-path copied from sender\n");
5969       return_path = string_copy(sender_address);
5970       }
5971     else
5972       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5973     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5974
5975     receive_add_recipient(
5976       string_sprintf("%s%s%s@%s",
5977         ftest_prefix ? ftest_prefix : US"",
5978         deliver_localpart,
5979         ftest_suffix ? ftest_suffix : US"",
5980         deliver_domain), -1);
5981
5982     printf("Recipient   = %s\n", recipients_list[0].address);
5983     if (ftest_prefix) printf("Prefix    = %s\n", ftest_prefix);
5984     if (ftest_suffix) printf("Suffix    = %s\n", ftest_suffix);
5985
5986     if (chdir("/"))   /* Get away from wherever the user is running this from */
5987       {
5988       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5989       exim_exit(EXIT_FAILURE);
5990       }
5991
5992     /* Now we run either a system filter test, or a user filter test, or both.
5993     In the latter case, headers added by the system filter will persist and be
5994     available to the user filter. We need to copy the filter variables
5995     explicitly. */
5996
5997     if (filter_test & FTEST_SYSTEM)
5998       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5999         exim_exit(EXIT_FAILURE);
6000
6001     memcpy(filter_sn, filter_n, sizeof(filter_sn));
6002
6003     if (filter_test & FTEST_USER)
6004       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
6005         exim_exit(EXIT_FAILURE);
6006
6007     exim_exit(EXIT_SUCCESS);
6008     }
6009
6010   /* Else act on the result of message reception. We should not get here unless
6011   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
6012   will be TRUE. If it is not, check on the number of messages received in this
6013   connection. */
6014
6015   if (  !session_local_queue_only
6016      && smtp_accept_queue_per_connection > 0
6017      && receive_messagecount > smtp_accept_queue_per_connection)
6018     {
6019     session_local_queue_only = TRUE;
6020     queue_only_reason = 2;
6021     }
6022
6023   /* Initialize local_queue_only from session_local_queue_only. If it is false,
6024   and queue_only_load is set, check that the load average is below it. If it is
6025   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
6026   default), we put the whole session into queue_only mode. It then remains this
6027   way for any subsequent messages on the same SMTP connection. This is a
6028   deliberate choice; even though the load average may fall, it doesn't seem
6029   right to deliver later messages on the same call when not delivering earlier
6030   ones. However, there are odd cases where this is not wanted, so this can be
6031   changed by setting queue_only_load_latch false. */
6032
6033   if (!(local_queue_only = session_local_queue_only) && queue_only_load >= 0)
6034     if ((local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load))
6035       {
6036       queue_only_reason = 3;
6037       if (queue_only_load_latch) session_local_queue_only = TRUE;
6038       }
6039
6040   /* If running as an MUA wrapper, all queueing options and freezing options
6041   are ignored. */
6042
6043   if (mua_wrapper)
6044     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
6045
6046   /* Log the queueing here, when it will get a message id attached, but
6047   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
6048   connections). */
6049
6050   if (local_queue_only)
6051     {
6052     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6053     switch(queue_only_reason)
6054       {
6055       case 2:
6056         log_write(L_delay_delivery,
6057                 LOG_MAIN, "no immediate delivery: more than %d messages "
6058           "received in one connection", smtp_accept_queue_per_connection);
6059         break;
6060
6061       case 3:
6062         log_write(L_delay_delivery,
6063                 LOG_MAIN, "no immediate delivery: load average %.2f",
6064                 (double)load_average/1000.0);
6065       break;
6066       }
6067     }
6068
6069   else if (f.queue_only_policy || f.deliver_freeze)
6070     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6071
6072   /* Else do the delivery unless the ACL or local_scan() called for queue only
6073   or froze the message. Always deliver in a separate process. A fork failure is
6074   not a disaster, as the delivery will eventually happen on a subsequent queue
6075   run. The search cache must be tidied before the fork, as the parent will
6076   do it before exiting. The child will trigger a lookup failure and
6077   thereby defer the delivery if it tries to use (for example) a cached ldap
6078   connection that the parent has called unbind on. */
6079
6080   else
6081     {
6082     pid_t pid;
6083     search_tidyup();
6084
6085     if ((pid = exim_fork(US"local-accept-delivery")) == 0)
6086       {
6087       int rc;
6088       close_unwanted();      /* Close unwanted file descriptors and TLS */
6089       exim_nullstd();        /* Ensure std{in,out,err} exist */
6090
6091       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
6092       mode, deliver_drop_privilege is forced TRUE). */
6093
6094       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
6095         {
6096         delivery_re_exec(CEE_EXEC_EXIT);
6097         /* Control does not return here. */
6098         }
6099
6100       /* No need to re-exec */
6101
6102       rc = deliver_message(message_id, FALSE, FALSE);
6103       search_tidyup();
6104       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
6105         ? EXIT_SUCCESS : EXIT_FAILURE);
6106       }
6107
6108     if (pid < 0)
6109       {
6110       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
6111       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
6112         "process: %s", strerror(errno));
6113       }
6114     else
6115       {
6116       release_cutthrough_connection(US"msg passed for delivery");
6117
6118       /* In the parent, wait if synchronous delivery is required. This will
6119       always be the case in MUA wrapper mode. */
6120
6121       if (f.synchronous_delivery)
6122         {
6123         int status;
6124         while (wait(&status) != pid);
6125         if ((status & 0x00ff) != 0)
6126           log_write(0, LOG_MAIN|LOG_PANIC,
6127             "process %d crashed with signal %d while delivering %s",
6128             (int)pid, status & 0x00ff, message_id);
6129         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
6130         }
6131       }
6132     }
6133
6134   /* The loop will repeat if more is TRUE. If we do not know know that the OS
6135   automatically reaps children (see comments above the loop), clear away any
6136   finished subprocesses here, in case there are lots of messages coming in
6137   from the same source. */
6138
6139 #ifndef SIG_IGN_WORKS
6140   while (waitpid(-1, NULL, WNOHANG) > 0);
6141 #endif
6142
6143 MORELOOP:
6144   return_path = sender_address = NULL;
6145   authenticated_sender = NULL;
6146   deliver_localpart_orig = NULL;
6147   deliver_domain_orig = NULL;
6148   deliver_host = deliver_host_address = NULL;
6149   dnslist_domain = dnslist_matched = NULL;
6150 #ifdef WITH_CONTENT_SCAN
6151   malware_name = NULL;
6152   regex_vars_clear();
6153 #endif
6154   callout_address = NULL;
6155   sending_ip_address = NULL;
6156   deliver_localpart_data = deliver_domain_data =
6157   recipient_data = sender_data = NULL;
6158   acl_var_m = NULL;
6159   lookup_value = NULL;                            /* Can be set by ACL */
6160
6161   store_reset(reset_point);
6162   }
6163
6164 exim_exit(EXIT_SUCCESS);   /* Never returns */
6165 return 0;                  /* To stop compiler warning */
6166 }
6167
6168
6169 /* End of exim.c */