Use compressed form of ipv6 in $sender_host_address under -bh. Bug 3027
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) The Exim Maintainers 2020 - 2023 */
6 /* Copyright (c) University of Cambridge 1995 - 2018 */
7 /* See the file NOTICE for conditions of use and distribution. */
8 /* SPDX-License-Identifier: GPL-2.0-or-later */
9
10
11 /* The main function: entry point, initialization, and high-level control.
12 Also a few functions that don't naturally fit elsewhere. */
13
14
15 #include "exim.h"
16
17 #if defined(__GLIBC__) && !defined(__UCLIBC__)
18 # include <gnu/libc-version.h>
19 #endif
20
21 #ifndef _TIME_H
22 # include <time.h>
23 #endif
24 #ifndef NO_EXECINFO
25 # include <execinfo.h>
26 #endif
27
28 #ifdef USE_GNUTLS
29 # include <gnutls/gnutls.h>
30 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
31 #  define DISABLE_OCSP
32 # endif
33 #endif
34
35 extern void init_lookup_list(void);
36
37
38
39 /*************************************************
40 *      Function interface to store functions     *
41 *************************************************/
42
43 /* We need some real functions to pass to the PCRE regular expression library
44 for store allocation via Exim's store manager. The normal calls are actually
45 macros that pass over location information to make tracing easier. These
46 functions just interface to the standard macro calls. A good compiler will
47 optimize out the tail recursion and so not make them too expensive. */
48
49 static void *
50 function_store_malloc(PCRE2_SIZE size, void * tag)
51 {
52 if (size > INT_MAX)
53   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "excessive memory alloc request");
54 return store_malloc((int)size);
55 }
56
57 static void
58 function_store_free(void * block, void * tag)
59 {
60 /* At least some version of pcre2 pass a null pointer */
61 if (block) store_free(block);
62 }
63
64
65 static void *
66 function_store_get(PCRE2_SIZE size, void * tag)
67 {
68 if (size > INT_MAX)
69   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "excessive memory alloc request");
70 return store_get((int)size, GET_UNTAINTED);     /* loses track of taint */
71 }
72
73 static void
74 function_store_nullfree(void * block, void * tag)
75 {
76 /* We cannot free memory allocated using store_get() */
77 }
78
79
80
81
82 /*************************************************
83 *         Enums for cmdline interface            *
84 *************************************************/
85
86 enum commandline_info { CMDINFO_NONE=0,
87   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
88
89
90
91
92 static void
93 pcre_init(void)
94 {
95 pcre_mlc_ctx = pcre2_general_context_create(function_store_malloc, function_store_free, NULL);
96 pcre_gen_ctx = pcre2_general_context_create(function_store_get, function_store_nullfree, NULL);
97
98 pcre_mlc_cmp_ctx = pcre2_compile_context_create(pcre_mlc_ctx);
99 pcre_gen_cmp_ctx = pcre2_compile_context_create(pcre_gen_ctx);
100
101 pcre_gen_mtc_ctx = pcre2_match_context_create(pcre_gen_ctx);
102 }
103
104
105
106
107 /*************************************************
108 *   Execute regular expression and set strings   *
109 *************************************************/
110
111 /* This function runs a regular expression match, and sets up the pointers to
112 the matched substrings.  The matched strings are copied so the lifetime of
113 the subject is not a problem.  Matched strings will have the same taint status
114 as the subject string (this is not a de-taint method, and must not be made so
115 given the support for wildcards in REs).
116
117 Arguments:
118   re          the compiled expression
119   subject     the subject string
120   options     additional PCRE options
121   setup       if < 0 do full setup
122               if >= 0 setup from setup+1 onwards,
123                 excluding the full matched string
124
125 Returns:      TRUE if matched, or FALSE
126 */
127
128 BOOL
129 regex_match_and_setup(const pcre2_code * re, const uschar * subject, int options, int setup)
130 {
131 pcre2_match_data * md = pcre2_match_data_create_from_pattern(re, pcre_gen_ctx);
132 int res = pcre2_match(re, (PCRE2_SPTR)subject, PCRE2_ZERO_TERMINATED, 0,
133                         PCRE_EOPT | options, md, pcre_gen_mtc_ctx);
134 BOOL yield;
135
136 if ((yield = (res >= 0)))
137   {
138   PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
139   res = pcre2_get_ovector_count(md);
140   expand_nmax = setup < 0 ? 0 : setup + 1;
141   for (int matchnum = setup < 0 ? 0 : 1; matchnum < res; matchnum++)
142     {
143     /* Although PCRE2 has a pcre2_substring_get_bynumber() conveneience, it
144     seems to return a bad pointer when a capture group had no data, eg. (.*)
145     matching zero letters.  So use the underlying ovec and hope (!) that the
146     offsets are sane (including that case).  Should we go further and range-
147     check each one vs. the subject string length? */
148     int off = matchnum * 2;
149     int len = ovec[off + 1] - ovec[off];
150     expand_nstring[expand_nmax] = string_copyn(subject + ovec[off], len);
151     expand_nlength[expand_nmax++] = len;
152     }
153   expand_nmax--;
154   }
155 else if (res != PCRE2_ERROR_NOMATCH) DEBUG(D_any)
156   {
157   uschar errbuf[128];
158   pcre2_get_error_message(res, errbuf, sizeof(errbuf));
159   debug_printf_indent("pcre2: %s\n", errbuf);
160   }
161 /* pcre2_match_data_free(md);   gen ctx needs no free */
162 return yield;
163 }
164
165
166 /* Check just for match with regex.  Uses the common memory-handling.
167
168 Arguments:
169         re      compiled regex
170         subject string to be checked
171         slen    length of subject; -1 for nul-terminated
172         rptr    pointer for matched string, copied, or NULL
173
174 Return: TRUE for a match.
175 */
176
177 BOOL
178 regex_match(const pcre2_code * re, const uschar * subject, int slen, uschar ** rptr)
179 {
180 pcre2_match_data * md = pcre2_match_data_create(1, pcre_gen_ctx);
181 int rc = pcre2_match(re, (PCRE2_SPTR)subject,
182                       slen >= 0 ? slen : PCRE2_ZERO_TERMINATED,
183                       0, PCRE_EOPT, md, pcre_gen_mtc_ctx);
184 PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
185 BOOL ret = FALSE;
186
187 if (rc >= 0)
188   {
189   if (rptr)
190     *rptr = string_copyn(subject + ovec[0], ovec[1] - ovec[0]);
191   ret = TRUE;
192   }
193 /* pcre2_match_data_free(md);   gen ctx needs no free */
194 return ret;
195 }
196
197
198
199 /*************************************************
200 *            Set up processing details           *
201 *************************************************/
202
203 /* Save a text string for dumping when SIGUSR1 is received.
204 Do checks for overruns.
205
206 Arguments: format and arguments, as for printf()
207 Returns:   nothing
208 */
209
210 void
211 set_process_info(const char * format, ...)
212 {
213 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
214 gstring * g;
215 int len;
216 uschar * s;
217 va_list ap;
218
219 g = string_fmt_append(&gs, "%5d ", (int)getpid());
220 len = gstring_length(g);
221 va_start(ap, format);
222 if (!string_vformat(g, 0, format, ap))
223   {
224   gs.ptr = len;
225   g = string_cat(&gs, US"**** string overflowed buffer ****");
226   }
227 g = string_catn(g, US"\n", 1);
228 process_info_len = len_string_from_gstring(g, &s);
229 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
230 va_end(ap);
231 }
232
233 /***********************************************
234 *            Handler for SIGTERM               *
235 ***********************************************/
236
237 static void
238 term_handler(int sig)
239 {
240 exit(1);
241 }
242
243
244 /***********************************************
245 *            Handler for SIGSEGV               *
246 ***********************************************/
247
248 #define STACKDUMP_MAX 24
249 void
250 stackdump(void)
251 {
252 #ifndef NO_EXECINFO
253 void * buf[STACKDUMP_MAX];
254 char ** ss;
255 int nptrs = backtrace(buf, STACKDUMP_MAX);
256
257 log_write(0, LOG_MAIN|LOG_PANIC, "backtrace");
258 log_write(0, LOG_MAIN|LOG_PANIC, "---");
259 if ((ss = backtrace_symbols(buf, nptrs)))
260   {
261   for (int i = 0; i < nptrs; i++)
262     log_write(0, LOG_MAIN|LOG_PANIC, "\t%s", ss[i]);
263   free(ss);
264   }
265 else
266   log_write(0, LOG_MAIN|LOG_PANIC, "backtrace_symbols: %s", strerror(errno));
267 log_write(0, LOG_MAIN|LOG_PANIC, "---");
268 #endif
269 }
270 #undef STACKDUMP_MAX
271
272
273 static void
274 #ifdef SA_SIGINFO
275 segv_handler(int sig, siginfo_t * info, void * uctx)
276 {
277 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (fault address: %p)", info->si_addr);
278 # if defined(SEGV_MAPERR) && defined(SEGV_ACCERR) && defined(SEGV_BNDERR) && defined(SEGV_PKUERR)
279 switch (info->si_code)
280   {
281   case SEGV_MAPERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_MAPERR"); break;
282   case SEGV_ACCERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_ACCERR"); break;
283   case SEGV_BNDERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_BNDERR"); break;
284   case SEGV_PKUERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_PKUERR"); break;
285   }
286 # endif
287 if (US info->si_addr < US 4096)
288   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (null pointer indirection)");
289 else
290   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
291 if (process_info_len > 0)
292   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
293 stackdump();
294 signal(SIGSEGV, SIG_DFL);
295 kill(getpid(), sig);
296 }
297
298 #else
299 segv_handler(int sig)
300 {
301 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
302 if (process_info_len > 0)
303   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
304 stackdump();
305 signal(SIGSEGV, SIG_DFL);
306 kill(getpid(), sig);
307 }
308 #endif
309
310
311 /*************************************************
312 *             Handler for SIGUSR1                *
313 *************************************************/
314
315 /* SIGUSR1 causes any exim process to write to the process log details of
316 what it is currently doing. It will only be used if the OS is capable of
317 setting up a handler that causes automatic restarting of any system call
318 that is in progress at the time.
319
320 This function takes care to be signal-safe.
321
322 Argument: the signal number (SIGUSR1)
323 Returns:  nothing
324 */
325
326 static void
327 usr1_handler(int sig)
328 {
329 int fd;
330
331 os_restarting_signal(sig, usr1_handler);
332
333 if (!process_log_path) return;
334 fd = log_open_as_exim(process_log_path);
335
336 /* If we are neither exim nor root, or if we failed to create the log file,
337 give up. There is not much useful we can do with errors, since we don't want
338 to disrupt whatever is going on outside the signal handler. */
339
340 if (fd < 0) return;
341
342 (void)write(fd, process_info, process_info_len);
343 (void)close(fd);
344 }
345
346
347
348 /*************************************************
349 *             Timeout handler                    *
350 *************************************************/
351
352 /* This handler is enabled most of the time that Exim is running. The handler
353 doesn't actually get used unless alarm() has been called to set a timer, to
354 place a time limit on a system call of some kind. When the handler is run, it
355 re-enables itself.
356
357 There are some other SIGALRM handlers that are used in special cases when more
358 than just a flag setting is required; for example, when reading a message's
359 input. These are normally set up in the code module that uses them, and the
360 SIGALRM handler is reset to this one afterwards.
361
362 Argument: the signal value (SIGALRM)
363 Returns:  nothing
364 */
365
366 void
367 sigalrm_handler(int sig)
368 {
369 sigalrm_seen = TRUE;
370 os_non_restarting_signal(SIGALRM, sigalrm_handler);
371 }
372
373
374
375 /*************************************************
376 *      Sleep for a fractional time interval      *
377 *************************************************/
378
379 /* This function is called by millisleep() and exim_wait_tick() to wait for a
380 period of time that may include a fraction of a second. The coding is somewhat
381 tedious. We do not expect setitimer() ever to fail, but if it does, the process
382 will wait for ever, so we panic in this instance. (There was a case of this
383 when a bug in a function that calls milliwait() caused it to pass invalid data.
384 That's when I added the check. :-)
385
386 We assume it to be not worth sleeping for under 50us; this value will
387 require revisiting as hardware advances.  This avoids the issue of
388 a zero-valued timer setting meaning "never fire".
389
390 Argument:  an itimerval structure containing the interval
391 Returns:   nothing
392 */
393
394 static void
395 milliwait(struct itimerval *itval)
396 {
397 sigset_t sigmask;
398 sigset_t old_sigmask;
399 int save_errno = errno;
400
401 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
402   return;
403 (void)sigemptyset(&sigmask);                           /* Empty mask */
404 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
405 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
406 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
407   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
408     "setitimer() failed: %s", strerror(errno));
409 (void)sigfillset(&sigmask);                            /* All signals */
410 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
411 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
412 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
413 errno = save_errno;
414 sigalrm_seen = FALSE;
415 }
416
417
418
419
420 /*************************************************
421 *         Millisecond sleep function             *
422 *************************************************/
423
424 /* The basic sleep() function has a granularity of 1 second, which is too rough
425 in some cases - for example, when using an increasing delay to slow down
426 spammers.
427
428 Argument:    number of millseconds
429 Returns:     nothing
430 */
431
432 void
433 millisleep(int msec)
434 {
435 struct itimerval itval = {.it_interval = {.tv_sec = 0, .tv_usec = 0},
436                           .it_value = {.tv_sec = msec/1000,
437                                        .tv_usec = (msec % 1000) * 1000}};
438 milliwait(&itval);
439 }
440
441
442
443 /*************************************************
444 *         Compare microsecond times              *
445 *************************************************/
446
447 /*
448 Arguments:
449   tv1         the first time
450   tv2         the second time
451
452 Returns:      -1, 0, or +1
453 */
454
455 static int
456 exim_tvcmp(struct timeval *t1, struct timeval *t2)
457 {
458 if (t1->tv_sec > t2->tv_sec) return +1;
459 if (t1->tv_sec < t2->tv_sec) return -1;
460 if (t1->tv_usec > t2->tv_usec) return +1;
461 if (t1->tv_usec < t2->tv_usec) return -1;
462 return 0;
463 }
464
465
466
467
468 /*************************************************
469 *          Clock tick wait function              *
470 *************************************************/
471
472 #ifdef _POSIX_MONOTONIC_CLOCK
473 # ifdef CLOCK_BOOTTIME
474 #  define EXIM_CLOCKTYPE CLOCK_BOOTTIME
475 # else
476 #  define EXIM_CLOCKTYPE CLOCK_MONOTONIC
477 # endif
478
479 /* Amount EXIM_CLOCK is behind realtime, at startup. */
480 static struct timespec offset_ts;
481
482 static void
483 exim_clock_init(void)
484 {
485 struct timeval tv;
486 if (clock_gettime(EXIM_CLOCKTYPE, &offset_ts) != 0) return;
487 (void)gettimeofday(&tv, NULL);
488 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
489 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
490 if (offset_ts.tv_nsec >= 0) return;
491 offset_ts.tv_sec--;
492 offset_ts.tv_nsec += 1000*1000*1000;
493 }
494 #endif
495
496
497 void
498 exim_gettime(struct timeval * tv)
499 {
500 #ifdef _POSIX_MONOTONIC_CLOCK
501 struct timespec now_ts;
502
503 if (clock_gettime(EXIM_CLOCKTYPE, &now_ts) == 0)
504   {
505   now_ts.tv_sec += offset_ts.tv_sec;
506   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
507     {
508     now_ts.tv_sec++;
509     now_ts.tv_nsec -= 1000*1000*1000;
510     }
511   tv->tv_sec = now_ts.tv_sec;
512   tv->tv_usec = now_ts.tv_nsec / 1000;
513   }
514 else
515 #endif
516   (void)gettimeofday(tv, NULL);
517 }
518
519
520 /* Exim uses a time + a pid to generate a unique identifier in two places: its
521 message IDs, and in file names for maildir deliveries. Because some OS now
522 re-use pids within the same second, sub-second times are now being used.
523 However, for absolute certainty, we must ensure the clock has ticked before
524 allowing the relevant process to complete. At the time of implementation of
525 this code (February 2003), the speed of processors is such that the clock will
526 invariably have ticked already by the time a process has done its job. This
527 function prepares for the time when things are faster - and it also copes with
528 clocks that go backwards.
529
530 Arguments:
531   prev_tv      A timeval which was used to create uniqueness; its usec field
532                  has been rounded down to the value of the resolution.
533                  We want to be sure the current time is greater than this.
534                  On return, updated to current (rounded down).
535   resolution   The resolution that was used to divide the microseconds
536                  (1 for maildir, larger for message ids)
537
538 Returns:       nothing
539 */
540
541 void
542 exim_wait_tick(struct timeval * prev_tv, int resolution)
543 {
544 struct timeval now_tv;
545 long int now_true_usec;
546
547 exim_gettime(&now_tv);
548 now_true_usec = now_tv.tv_usec;
549 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
550
551 while (exim_tvcmp(&now_tv, prev_tv) <= 0)
552   {
553   struct itimerval itval;
554   itval.it_interval.tv_sec = 0;
555   itval.it_interval.tv_usec = 0;
556   itval.it_value.tv_sec = prev_tv->tv_sec - now_tv.tv_sec;
557   itval.it_value.tv_usec = prev_tv->tv_usec + resolution - now_true_usec;
558
559   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
560   negative value for the microseconds is possible only in the case when "now"
561   is more than a second less than "tgt". That means that itval.it_value.tv_sec
562   is greater than zero. The following correction is therefore safe. */
563
564   if (itval.it_value.tv_usec < 0)
565     {
566     itval.it_value.tv_usec += 1000000;
567     itval.it_value.tv_sec -= 1;
568     }
569
570   DEBUG(D_transport|D_receive)
571     {
572     if (!f.running_in_test_harness)
573       {
574       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
575         prev_tv->tv_sec, (long) prev_tv->tv_usec,
576         now_tv.tv_sec, (long) now_tv.tv_usec);
577       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
578         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
579       }
580     }
581
582   milliwait(&itval);
583
584   /* Be prapared to go around if the kernel does not implement subtick
585   granularity (GNU Hurd) */
586
587   exim_gettime(&now_tv);
588   now_true_usec = now_tv.tv_usec;
589   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
590   }
591 *prev_tv = now_tv;
592 }
593
594
595
596
597 /*************************************************
598 *   Call fopen() with umask 777 and adjust mode  *
599 *************************************************/
600
601 /* Exim runs with umask(0) so that files created with open() have the mode that
602 is specified in the open() call. However, there are some files, typically in
603 the spool directory, that are created with fopen(). They end up world-writeable
604 if no precautions are taken. Although the spool directory is not accessible to
605 the world, this is an untidiness. So this is a wrapper function for fopen()
606 that sorts out the mode of the created file.
607
608 Arguments:
609    filename       the file name
610    options        the fopen() options
611    mode           the required mode
612
613 Returns:          the fopened FILE or NULL
614 */
615
616 FILE *
617 modefopen(const uschar *filename, const char *options, mode_t mode)
618 {
619 mode_t saved_umask = umask(0777);
620 FILE *f = Ufopen(filename, options);
621 (void)umask(saved_umask);
622 if (f != NULL) (void)fchmod(fileno(f), mode);
623 return f;
624 }
625
626
627 /*************************************************
628 *   Ensure stdin, stdout, and stderr exist       *
629 *************************************************/
630
631 /* Some operating systems grumble if an exec() happens without a standard
632 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
633 file will be opened and will use these fd values, and then some other bit of
634 code will assume, for example, that it can write error messages to stderr.
635 This function ensures that fds 0, 1, and 2 are open if they do not already
636 exist, by connecting them to /dev/null.
637
638 This function is also used to ensure that std{in,out,err} exist at all times,
639 so that if any library that Exim calls tries to use them, it doesn't crash.
640
641 Arguments:  None
642 Returns:    Nothing
643 */
644
645 void
646 exim_nullstd(void)
647 {
648 int devnull = -1;
649 struct stat statbuf;
650 for (int i = 0; i <= 2; i++)
651   {
652   if (fstat(i, &statbuf) < 0 && errno == EBADF)
653     {
654     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
655     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
656       string_open_failed("/dev/null", NULL));
657     if (devnull != i) (void)dup2(devnull, i);
658     }
659   }
660 if (devnull > 2) (void)close(devnull);
661 }
662
663
664
665
666 /*************************************************
667 *   Close unwanted file descriptors for delivery *
668 *************************************************/
669
670 /* This function is called from a new process that has been forked to deliver
671 an incoming message, either directly, or using exec.
672
673 We want any smtp input streams to be closed in this new process. However, it
674 has been observed that using fclose() here causes trouble. When reading in -bS
675 input, duplicate copies of messages have been seen. The files will be sharing a
676 file pointer with the parent process, and it seems that fclose() (at least on
677 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
678 least sometimes. Hence we go for closing the underlying file descriptors.
679
680 If TLS is active, we want to shut down the TLS library, but without molesting
681 the parent's SSL connection.
682
683 For delivery of a non-SMTP message, we want to close stdin and stdout (and
684 stderr unless debugging) because the calling process might have set them up as
685 pipes and be waiting for them to close before it waits for the submission
686 process to terminate. If they aren't closed, they hold up the calling process
687 until the initial delivery process finishes, which is not what we want.
688
689 Exception: We do want it for synchronous delivery!
690
691 And notwithstanding all the above, if D_resolver is set, implying resolver
692 debugging, leave stdout open, because that's where the resolver writes its
693 debugging output.
694
695 When we close stderr (which implies we've also closed stdout), we also get rid
696 of any controlling terminal.
697
698 Arguments:   None
699 Returns:     Nothing
700 */
701
702 static void
703 close_unwanted(void)
704 {
705 if (smtp_input)
706   {
707 #ifndef DISABLE_TLS
708   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
709 #endif
710   (void)close(fileno(smtp_in));
711   (void)close(fileno(smtp_out));
712   smtp_in = NULL;
713   }
714 else
715   {
716   (void)close(0);                                          /* stdin */
717   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
718   if (debug_selector == 0)                                 /* stderr */
719     {
720     if (!f.synchronous_delivery)
721       {
722       (void)close(2);
723       log_stderr = NULL;
724       }
725     (void)setsid();
726     }
727   }
728 }
729
730
731
732
733 /*************************************************
734 *          Set uid and gid                       *
735 *************************************************/
736
737 /* This function sets a new uid and gid permanently, optionally calling
738 initgroups() to set auxiliary groups. There are some special cases when running
739 Exim in unprivileged modes. In these situations the effective uid will not be
740 root; if we already have the right effective uid/gid, and don't need to
741 initialize any groups, leave things as they are.
742
743 Arguments:
744   uid        the uid
745   gid        the gid
746   igflag     TRUE if initgroups() wanted
747   msg        text to use in debugging output and failure log
748
749 Returns:     nothing; bombs out on failure
750 */
751
752 void
753 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, const uschar * msg)
754 {
755 uid_t euid = geteuid();
756 gid_t egid = getegid();
757
758 if (euid == root_uid || euid != uid || egid != gid || igflag)
759   {
760   /* At least one OS returns +1 for initgroups failure, so just check for
761   non-zero. */
762
763   if (igflag)
764     {
765     struct passwd *pw = getpwuid(uid);
766     if (!pw)
767       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
768         "no passwd entry for uid=%ld", (long int)uid);
769
770     if (initgroups(pw->pw_name, gid) != 0)
771       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
772         (long int)uid, strerror(errno));
773     }
774
775   if (setgid(gid) < 0 || setuid(uid) < 0)
776     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
777       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
778   }
779
780 /* Debugging output included uid/gid and all groups */
781
782 DEBUG(D_uid)
783   {
784   int group_count, save_errno;
785   gid_t group_list[EXIM_GROUPLIST_SIZE];
786   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
787     (long int)geteuid(), (long int)getegid(), (long int)getpid());
788   group_count = getgroups(nelem(group_list), group_list);
789   save_errno = errno;
790   debug_printf("  auxiliary group list:");
791   if (group_count > 0)
792     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
793   else if (group_count < 0)
794     debug_printf(" <error: %s>", strerror(save_errno));
795   else debug_printf(" <none>");
796   debug_printf("\n");
797   }
798 }
799
800
801
802
803 /*************************************************
804 *               Exit point                       *
805 *************************************************/
806
807 /* Exim exits via this function so that it always clears up any open
808 databases.
809
810 Arguments:
811   rc         return code
812
813 Returns:     does not return
814 */
815
816 void
817 exim_exit(int rc)
818 {
819 search_tidyup();
820 store_exit();
821 DEBUG(D_any)
822   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
823     ">>>>>>>>>>>>>>>>\n",
824     (int)getpid(), process_purpose, rc);
825 exit(rc);
826 }
827
828
829 void
830 exim_underbar_exit(int rc)
831 {
832 store_exit();
833 DEBUG(D_any)
834   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
835     ">>>>>>>>>>>>>>>>\n",
836     (int)getpid(), process_purpose, rc);
837 _exit(rc);
838 }
839
840
841
842 /* Print error string, then die */
843 static void
844 exim_fail(const char * fmt, ...)
845 {
846 va_list ap;
847 va_start(ap, fmt);
848 vfprintf(stderr, fmt, ap);
849 va_end(ap);
850 exit(EXIT_FAILURE);
851 }
852
853 /* fail if a length is too long */
854 static inline void
855 exim_len_fail_toolong(int itemlen, int maxlen, const char * description)
856 {
857 if (itemlen <= maxlen)
858   return;
859 fprintf(stderr, "exim: length limit exceeded (%d > %d) for: %s\n",
860         itemlen, maxlen, description);
861 exit(EXIT_FAILURE);
862 }
863
864 /* only pass through the string item back to the caller if it's short enough */
865 static inline const uschar *
866 exim_str_fail_toolong(const uschar * item, int maxlen, const char * description)
867 {
868 if (!item)
869   exim_fail("exim: bad item for: %s\n", description);
870 exim_len_fail_toolong(Ustrlen(item), maxlen, description);
871 return item;
872 }
873
874 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
875 of chown()/fchown().  See src/functions.h for more explanation */
876 int
877 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
878 {
879 int saved_errno = errno;  /* from the preceeding chown call */
880 #if 1
881 log_write(0, LOG_MAIN|LOG_PANIC,
882   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
883   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
884   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
885 #else
886 /* I leave this here, commented, in case the "bug"(?) comes up again.
887    It is not an Exim bug, but we can provide a workaround.
888    See Bug 2391
889    HS 2019-04-18 */
890
891 struct stat buf;
892
893 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
894   {
895   if (buf.st_uid == owner && buf.st_gid == group) return 0;
896   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
897   }
898 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
899
900 #endif
901 errno = saved_errno;
902 return -1;
903 }
904
905
906 /* Bump the index for argv, checking for overflow,
907 and return the argument. */
908
909 static const uschar *
910 next_argv(const uschar ** argv, int * pi, int argc, const uschar * where)
911 {
912 int i = *pi;
913 if (++i >= argc) exim_fail("exim: bad item for: %s\n", where);
914 return argv[*pi = i];
915 }
916
917
918 /*************************************************
919 *         Extract port from host address         *
920 *************************************************/
921
922 /* Called to extract the port from the values given to -oMa and -oMi.
923 It also checks the syntax of the address, and terminates it before the
924 port data when a port is extracted.
925
926 Argument:
927   address   the address, with possible port on the end
928
929 Returns:    the port, or zero if there isn't one
930             bombs out on a syntax error
931 */
932
933 static int
934 check_port(uschar *address)
935 {
936 int port = host_address_extract_port(address);
937 if (string_is_ip_address(address, NULL) == 0)
938   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
939 return port;
940 }
941
942
943
944 /*************************************************
945 *              Test/verify an address            *
946 *************************************************/
947
948 /* This function is called by the -bv and -bt code. It extracts a working
949 address from a full RFC 822 address. This isn't really necessary per se, but it
950 has the effect of collapsing source routes.
951
952 Arguments:
953   s            the address string
954   flags        flag bits for verify_address()
955   exit_value   to be set for failures
956
957 Returns:       nothing
958 */
959
960 static void
961 test_address(uschar *s, int flags, int *exit_value)
962 {
963 int start, end, domain;
964 uschar *parse_error = NULL;
965 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
966   FALSE);
967 if (!address)
968   {
969   fprintf(stdout, "syntax error: %s\n", parse_error);
970   *exit_value = 2;
971   }
972 else
973   {
974   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
975     -1, -1, NULL, NULL, NULL);
976   if (rc == FAIL) *exit_value = 2;
977   else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
978   }
979 }
980
981
982
983 /*************************************************
984 *          Show supported features               *
985 *************************************************/
986
987 static void
988 show_string(BOOL is_stdout, gstring * g)
989 {
990 const uschar * s = string_from_gstring(g);
991 if (s)
992   if (is_stdout) fputs(CCS s, stdout);
993   else debug_printf("%s", s);
994 }
995
996
997 static gstring *
998 show_db_version(gstring * g)
999 {
1000 #ifdef DB_VERSION_STRING
1001 DEBUG(D_any)
1002   {
1003   g = string_fmt_append(g, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
1004   g = string_fmt_append(g, "                      Runtime: %s\n",
1005     db_version(NULL, NULL, NULL));
1006   }
1007 else
1008   g = string_fmt_append(g, "Berkeley DB: %s\n", DB_VERSION_STRING);
1009
1010 #elif defined(BTREEVERSION) && defined(HASHVERSION)
1011 # ifdef USE_DB
1012   g = string_cat(g, US"Probably Berkeley DB version 1.8x (native mode)\n");
1013 # else
1014   g = string_cat(g, US"Probably Berkeley DB version 1.8x (compatibility mode)\n");
1015 # endif
1016
1017 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
1018 g = string_cat(g, US"Probably ndbm\n");
1019 #elif defined(USE_TDB)
1020 g = string_cat(g, US"Using tdb\n");
1021 #else
1022 # ifdef USE_GDBM
1023   g = string_cat(g, US"Probably GDBM (native mode)\n");
1024 # else
1025   g = string_cat(g, US"Probably GDBM (compatibility mode)\n");
1026 # endif
1027 #endif
1028 return g;
1029 }
1030
1031
1032 /* This function is called for -bV/--version and for -d to output the optional
1033 features of the current Exim binary.
1034
1035 Arguments:  BOOL, true for stdout else debug channel
1036 Returns:    nothing
1037 */
1038
1039 static void
1040 show_whats_supported(BOOL is_stdout)
1041 {
1042 rmark reset_point = store_mark();
1043 gstring * g = NULL;
1044
1045 DEBUG(D_any) {} else g = show_db_version(g);
1046
1047 g = string_cat(g, US"Support for:");
1048 #ifdef WITH_CONTENT_SCAN
1049   g = string_cat(g, US" Content_Scanning");
1050 #endif
1051 #ifdef SUPPORT_CRYPTEQ
1052   g = string_cat(g, US" crypteq");
1053 #endif
1054 #ifdef EXPAND_DLFUNC
1055   g = string_cat(g, US" Expand_dlfunc");
1056 #endif
1057 #if HAVE_ICONV
1058   g = string_cat(g, US" iconv()");
1059 #endif
1060 #if HAVE_IPV6
1061   g = string_cat(g, US" IPv6");
1062 #endif
1063 #ifdef SUPPORT_PAM
1064   g = string_cat(g, US" PAM");
1065 #endif
1066 #ifdef EXIM_PERL
1067   g = string_cat(g, US" Perl");
1068 #endif
1069 #ifdef USE_GNUTLS
1070   g = string_cat(g, US" GnuTLS");
1071 #endif
1072 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
1073   g = string_cat(g, US" move_frozen_messages");
1074 #endif
1075 #ifdef USE_OPENSSL
1076   g = string_cat(g, US" OpenSSL");
1077 #endif
1078 #if defined(CYRUS_PWCHECK_SOCKET)
1079   g = string_cat(g, US" pwcheck");
1080 #endif
1081 #if defined(RADIUS_CONFIG_FILE)
1082   g = string_cat(g, US" radius");
1083 #endif
1084 #ifndef DISABLE_TLS_RESUME
1085   g = string_cat(g, US" TLS_resume");
1086 #endif
1087 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
1088   g = string_cat(g, US" translate_ip_address");
1089 #endif
1090 #ifdef USE_TCP_WRAPPERS
1091   g = string_cat(g, US" TCPwrappers");
1092 #endif
1093 #ifdef HAVE_SETCLASSRESOURCES
1094   g = string_cat(g, US" use_setclassresources");
1095 #endif
1096 #ifdef SUPPORT_DANE
1097   g = string_cat(g, US" DANE");
1098 #endif
1099 #ifndef DISABLE_DKIM
1100   g = string_cat(g, US" DKIM");
1101 #endif
1102 #ifdef SUPPORT_DMARC
1103   g = string_cat(g, US" DMARC");
1104 #endif
1105 #ifndef DISABLE_DNSSEC
1106   g = string_cat(g, US" DNSSEC");
1107 #endif
1108 #ifndef DISABLE_ESMTP_LIMITS
1109   g = string_cat(g, US" ESMTP_Limits");
1110 #endif
1111 #ifndef DISABLE_EVENT
1112   g = string_cat(g, US" Event");
1113 #endif
1114 #ifdef SUPPORT_I18N
1115   g = string_cat(g, US" I18N");
1116 #endif
1117 #ifndef DISABLE_OCSP
1118   g = string_cat(g, US" OCSP");
1119 #endif
1120 #ifndef DISABLE_PIPE_CONNECT
1121   g = string_cat(g, US" PIPECONNECT");
1122 #endif
1123 #ifndef DISABLE_PRDR
1124   g = string_cat(g, US" PRDR");
1125 #endif
1126 #ifdef SUPPORT_PROXY
1127   g = string_cat(g, US" PROXY");
1128 #endif
1129 #ifndef DISABLE_QUEUE_RAMP
1130   g = string_cat(g, US" Queue_Ramp");
1131 #endif
1132 #ifdef SUPPORT_SOCKS
1133   g = string_cat(g, US" SOCKS");
1134 #endif
1135 #ifdef SUPPORT_SPF
1136   g = string_cat(g, US" SPF");
1137 #endif
1138 #if defined(SUPPORT_SRS)
1139   g = string_cat(g, US" SRS");
1140 #endif
1141 #ifdef TCP_FASTOPEN
1142   tcp_init();
1143   if (f.tcp_fastopen_ok) g = string_cat(g, US" TCP_Fast_Open");
1144 #endif
1145 #ifdef EXPERIMENTAL_ARC
1146   g = string_cat(g, US" Experimental_ARC");
1147 #endif
1148 #ifdef EXPERIMENTAL_BRIGHTMAIL
1149   g = string_cat(g, US" Experimental_Brightmail");
1150 #endif
1151 #ifdef EXPERIMENTAL_DCC
1152   g = string_cat(g, US" Experimental_DCC");
1153 #endif
1154 #ifdef EXPERIMENTAL_DSN_INFO
1155   g = string_cat(g, US" Experimental_DSN_info");
1156 #endif
1157 #ifdef EXPERIMENTAL_QUEUEFILE
1158   g = string_cat(g, US" Experimental_QUEUEFILE");
1159 #endif
1160 #ifdef EXPERIMENTAL_XCLIENT
1161   g = string_cat(g, US" Experimental_XCLIENT");
1162 #endif
1163 g = string_cat(g, US"\n");
1164
1165 g = string_cat(g, US"Lookups (built-in):");
1166 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1167   g = string_cat(g, US" lsearch wildlsearch nwildlsearch iplsearch");
1168 #endif
1169 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1170   g = string_cat(g, US" cdb");
1171 #endif
1172 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1173   g = string_cat(g, US" dbm dbmjz dbmnz");
1174 #endif
1175 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1176   g = string_cat(g, US" dnsdb");
1177 #endif
1178 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1179   g = string_cat(g, US" dsearch");
1180 #endif
1181 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1182   g = string_cat(g, US" ibase");
1183 #endif
1184 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1185   g = string_cat(g, US" json");
1186 #endif
1187 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1188   g = string_cat(g, US" ldap ldapdn ldapm");
1189 #endif
1190 #ifdef LOOKUP_LMDB
1191   g = string_cat(g, US" lmdb");
1192 #endif
1193 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1194   g = string_cat(g, US" mysql");
1195 #endif
1196 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1197   g = string_cat(g, US" nis nis0");
1198 #endif
1199 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1200   g = string_cat(g, US" nisplus");
1201 #endif
1202 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1203   g = string_cat(g, US" oracle");
1204 #endif
1205 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1206   g = string_cat(g, US" passwd");
1207 #endif
1208 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1209   g = string_cat(g, US" pgsql");
1210 #endif
1211 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1212   g = string_cat(g, US" redis");
1213 #endif
1214 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1215   g = string_cat(g, US" sqlite");
1216 #endif
1217 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1218   g = string_cat(g, US" testdb");
1219 #endif
1220 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1221   g = string_cat(g, US" whoson");
1222 #endif
1223 g = string_cat(g, US"\n");
1224
1225 g = auth_show_supported(g);
1226 g = route_show_supported(g);
1227 g = transport_show_supported(g);
1228
1229 #ifdef WITH_CONTENT_SCAN
1230 g = malware_show_supported(g);
1231 #endif
1232 show_string(is_stdout, g); g = NULL;
1233
1234 if (fixed_never_users[0] > 0)
1235   {
1236   int i;
1237   g = string_cat(g, US"Fixed never_users: ");
1238   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1239     string_fmt_append(g, "%u:", (unsigned)fixed_never_users[i]);
1240   g = string_fmt_append(g, "%u\n", (unsigned)fixed_never_users[i]);
1241   }
1242
1243 g = string_fmt_append(g, "Configure owner: %d:%d\n", config_uid, config_gid);
1244
1245 g = string_fmt_append(g, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1246
1247 /* Everything else is details which are only worth reporting when debugging.
1248 Perhaps the tls_version_report should move into this too. */
1249 DEBUG(D_any)
1250   {
1251
1252 /* clang defines __GNUC__ (at least, for me) so test for it first */
1253 #if defined(__clang__)
1254   g = string_fmt_append(g, "Compiler: CLang [%s]\n", __clang_version__);
1255 #elif defined(__GNUC__)
1256 # ifdef __VERSION__
1257   g = string_fmt_append(g, "Compiler: GCC [%s]\n", __VERSION__);
1258 # else
1259   g = string_fmt_append(g, "Compiler: GCC [%s]\n", "? unknown version ?";
1260 # endif
1261 #else
1262   g = string_cat(g, US"Compiler: <unknown>\n");
1263 #endif
1264
1265 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1266   g = string_fmt_append(g, "Library version: Glibc: Compile: %d.%d\n",
1267                 __GLIBC__, __GLIBC_MINOR__);
1268   if (__GLIBC_PREREQ(2, 1))
1269     g = string_fmt_append(g, "                        Runtime: %s\n",
1270                 gnu_get_libc_version());
1271 #endif
1272
1273 g = show_db_version(g);
1274
1275 #ifndef DISABLE_TLS
1276   g = tls_version_report(g);
1277 #endif
1278 #ifdef SUPPORT_I18N
1279   g = utf8_version_report(g);
1280 #endif
1281 #ifdef SUPPORT_DMARC
1282   g = dmarc_version_report(g);
1283 #endif
1284 #ifdef SUPPORT_SPF
1285   g = spf_lib_version_report(g);
1286 #endif
1287
1288 show_string(is_stdout, g);
1289 g = NULL;
1290
1291 for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1292   if (authi->version_report)
1293     g = (*authi->version_report)(g);
1294
1295   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1296   characters; unless it's an ancient version of PCRE in which case it
1297   is not defined. */
1298 #ifndef PCRE_PRERELEASE
1299 # define PCRE_PRERELEASE
1300 #endif
1301 #define QUOTE(X) #X
1302 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1303   {
1304   uschar buf[24];
1305   pcre2_config(PCRE2_CONFIG_VERSION, buf);
1306   g = string_fmt_append(g, "Library version: PCRE2: Compile: %d.%d%s\n"
1307               "                        Runtime: %s\n",
1308           PCRE2_MAJOR, PCRE2_MINOR,
1309           EXPAND_AND_QUOTE(PCRE2_PRERELEASE) "",
1310           buf);
1311   }
1312 #undef QUOTE
1313 #undef EXPAND_AND_QUOTE
1314
1315 show_string(is_stdout, g);
1316 g = NULL;
1317
1318 init_lookup_list();
1319 for (int i = 0; i < lookup_list_count; i++)
1320   if (lookup_list[i]->version_report)
1321     g = lookup_list[i]->version_report(g);
1322 show_string(is_stdout, g);
1323 g = NULL;
1324
1325 #ifdef WHITELIST_D_MACROS
1326   g = string_fmt_append(g, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1327 #else
1328   g = string_cat(g, US"WHITELIST_D_MACROS unset\n");
1329 #endif
1330 #ifdef TRUSTED_CONFIG_LIST
1331   g = string_fmt_append(g, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1332 #else
1333   g = string_cat(g, US"TRUSTED_CONFIG_LIST unset\n");
1334 #endif
1335   }
1336
1337 show_string(is_stdout, g);
1338 store_reset(reset_point);
1339 }
1340
1341
1342 /*************************************************
1343 *     Show auxiliary information about Exim      *
1344 *************************************************/
1345
1346 static void
1347 show_exim_information(enum commandline_info request, FILE *stream)
1348 {
1349 switch(request)
1350   {
1351   case CMDINFO_NONE:
1352     fprintf(stream, "Oops, something went wrong.\n");
1353     return;
1354   case CMDINFO_HELP:
1355     fprintf(stream,
1356 "The -bI: flag takes a string indicating which information to provide.\n"
1357 "If the string is not recognised, you'll get this help (on stderr).\n"
1358 "\n"
1359 "  exim -bI:help    this information\n"
1360 "  exim -bI:dscp    list of known dscp value keywords\n"
1361 "  exim -bI:sieve   list of supported sieve extensions\n"
1362 );
1363     return;
1364   case CMDINFO_SIEVE:
1365     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1366       fprintf(stream, "%s\n", *pp);
1367     return;
1368   case CMDINFO_DSCP:
1369     dscp_list_to_stream(stream);
1370     return;
1371   }
1372 }
1373
1374
1375 /*************************************************
1376 *               Quote a local part               *
1377 *************************************************/
1378
1379 /* This function is used when a sender address or a From: or Sender: header
1380 line is being created from the caller's login, or from an authenticated_id. It
1381 applies appropriate quoting rules for a local part.
1382
1383 Argument:    the local part
1384 Returns:     the local part, quoted if necessary
1385 */
1386
1387 const uschar *
1388 local_part_quote(const uschar * lpart)
1389 {
1390 BOOL needs_quote = FALSE;
1391 gstring * g;
1392
1393 for (const uschar * t = lpart; !needs_quote && *t; t++)
1394   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1395     (*t != '.' || t == lpart || t[1] == 0);
1396
1397 if (!needs_quote) return lpart;
1398
1399 g = string_catn(NULL, US"\"", 1);
1400
1401 for (;;)
1402   {
1403   uschar * nq = US Ustrpbrk(lpart, "\\\"");
1404   if (!nq)
1405     {
1406     g = string_cat(g, lpart);
1407     break;
1408     }
1409   g = string_catn(g, lpart, nq - lpart);
1410   g = string_catn(g, US"\\", 1);
1411   g = string_catn(g, nq, 1);
1412   lpart = nq + 1;
1413   }
1414
1415 g = string_catn(g, US"\"", 1);
1416 return string_from_gstring(g);
1417 }
1418
1419
1420
1421 #ifdef USE_READLINE
1422 /*************************************************
1423 *         Load readline() functions              *
1424 *************************************************/
1425
1426 /* This function is called from testing executions that read data from stdin,
1427 but only when running as the calling user. Currently, only -be does this. The
1428 function loads the readline() function library and passes back the functions.
1429 On some systems, it needs the curses library, so load that too, but try without
1430 it if loading fails. All this functionality has to be requested at build time.
1431
1432 Arguments:
1433   fn_readline_ptr   pointer to where to put the readline pointer
1434   fn_addhist_ptr    pointer to where to put the addhistory function
1435
1436 Returns:            the dlopen handle or NULL on failure
1437 */
1438
1439 static void *
1440 set_readline(char * (**fn_readline_ptr)(const char *),
1441              void   (**fn_addhist_ptr)(const char *))
1442 {
1443 void *dlhandle;
1444 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1445
1446 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1447 if (dlhandle_curses) dlclose(dlhandle_curses);
1448
1449 if (dlhandle)
1450   {
1451   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1452    *   char * readline (const char *prompt);
1453    *   void add_history (const char *string);
1454    */
1455   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1456   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1457   }
1458 else
1459   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1460
1461 return dlhandle;
1462 }
1463 #endif
1464
1465
1466
1467 /*************************************************
1468 *    Get a line from stdin for testing things    *
1469 *************************************************/
1470
1471 /* This function is called when running tests that can take a number of lines
1472 of input (for example, -be and -bt). It handles continuations and trailing
1473 spaces. And prompting and a blank line output on eof. If readline() is in use,
1474 the arguments are non-NULL and provide the relevant functions.
1475
1476 Arguments:
1477   fn_readline   readline function or NULL
1478   fn_addhist    addhist function or NULL
1479
1480 Returns:        pointer to dynamic memory, or NULL at end of file
1481 */
1482
1483 static uschar *
1484 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1485 {
1486 gstring * g = NULL;
1487 BOOL had_input = FALSE;
1488
1489 if (!fn_readline) { printf("> "); fflush(stdout); }
1490
1491 for (int i = 0;; i++)
1492   {
1493   uschar buffer[1024];
1494   uschar * p, * ss;
1495
1496 #ifdef USE_READLINE
1497   char *readline_line = NULL;
1498   if (fn_readline)
1499     {
1500     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1501     if (*readline_line && fn_addhist) fn_addhist(readline_line);
1502     p = US readline_line;
1503     }
1504   else
1505 #endif
1506
1507   /* readline() not in use */
1508
1509     {
1510     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;   /*EOF*/
1511     p = buffer;
1512     }
1513
1514   /* Handle the line */
1515
1516   had_input = TRUE;
1517   ss = p + Ustrlen(p);
1518   while (ss > p && isspace(ss[-1])) ss--; /* strip trailing newline (and spaces) */
1519
1520   if (i > 0)
1521     while (p < ss && isspace(*p)) p++;   /* strip leading space after cont */
1522
1523   g = string_catn(g, p, ss - p);
1524
1525 #ifdef USE_READLINE
1526   if (fn_readline) free(readline_line);
1527 #endif
1528
1529   /* g can only be NULL if ss==p */
1530   if (ss == p || gstring_last_char(g) != '\\') /* not continuation; done */
1531     break;
1532
1533   gstring_trim(g, 1);                           /* drop the \ */
1534   }
1535
1536 if (had_input) return g ? string_from_gstring(g) : US"";
1537 printf("\n");
1538 return NULL;
1539 }
1540
1541
1542
1543 /*************************************************
1544 *    Output usage information for the program    *
1545 *************************************************/
1546
1547 /* This function is called when there are no recipients
1548    or a specific --help argument was added.
1549
1550 Arguments:
1551   progname      information on what name we were called by
1552
1553 Returns:        DOES NOT RETURN
1554 */
1555
1556 static void
1557 exim_usage(const uschar * progname)
1558 {
1559
1560 /* Handle specific program invocation variants */
1561 if (Ustrcmp(progname, US"-mailq") == 0)
1562   exim_fail(
1563     "mailq - list the contents of the mail queue\n\n"
1564     "For a list of options, see the Exim documentation.\n");
1565
1566 /* Generic usage - we output this whatever happens */
1567 exim_fail(
1568   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1569   "not directly from a shell command line. Options and/or arguments control\n"
1570   "what it does when called. For a list of options, see the Exim documentation.\n");
1571 }
1572
1573
1574
1575 /*************************************************
1576 *    Validate that the macros given are okay     *
1577 *************************************************/
1578
1579 /* Typically, Exim will drop privileges if macros are supplied.  In some
1580 cases, we want to not do so.
1581
1582 Arguments:    opt_D_used - true if the commandline had a "-D" option
1583 Returns:      true if trusted, false otherwise
1584 */
1585
1586 static BOOL
1587 macros_trusted(BOOL opt_D_used)
1588 {
1589 #ifdef WHITELIST_D_MACROS
1590 uschar *whitelisted, *end, *p, **whites;
1591 int white_count, i, n;
1592 size_t len;
1593 BOOL prev_char_item, found;
1594 #endif
1595
1596 if (!opt_D_used)
1597   return TRUE;
1598 #ifndef WHITELIST_D_MACROS
1599 return FALSE;
1600 #else
1601
1602 /* We only trust -D overrides for some invoking users:
1603 root, the exim run-time user, the optional config owner user.
1604 I don't know why config-owner would be needed, but since they can own the
1605 config files anyway, there's no security risk to letting them override -D. */
1606 if ( ! ((real_uid == root_uid)
1607      || (real_uid == exim_uid)
1608 #ifdef CONFIGURE_OWNER
1609      || (real_uid == config_uid)
1610 #endif
1611    ))
1612   {
1613   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1614   return FALSE;
1615   }
1616
1617 /* Get a list of macros which are whitelisted */
1618 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1619 prev_char_item = FALSE;
1620 white_count = 0;
1621 for (p = whitelisted; *p != '\0'; ++p)
1622   {
1623   if (*p == ':' || isspace(*p))
1624     {
1625     *p = '\0';
1626     if (prev_char_item)
1627       ++white_count;
1628     prev_char_item = FALSE;
1629     continue;
1630     }
1631   if (!prev_char_item)
1632     prev_char_item = TRUE;
1633   }
1634 end = p;
1635 if (prev_char_item)
1636   ++white_count;
1637 if (!white_count)
1638   return FALSE;
1639 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1640 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1641   {
1642   if (*p != '\0')
1643     {
1644     whites[i++] = p;
1645     if (i == white_count)
1646       break;
1647     while (*p != '\0' && p < end)
1648       ++p;
1649     }
1650   }
1651 whites[i] = NULL;
1652
1653 /* The list of commandline macros should be very short.
1654 Accept the N*M complexity. */
1655 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1656   {
1657   found = FALSE;
1658   for (uschar ** w = whites; *w; ++w)
1659     if (Ustrcmp(*w, m->name) == 0)
1660       {
1661       found = TRUE;
1662       break;
1663       }
1664   if (!found)
1665     return FALSE;
1666   if (!m->replacement)
1667     continue;
1668   if ((len = m->replen) == 0)
1669     continue;
1670   if (!regex_match(regex_whitelisted_macro, m->replacement, len, NULL))
1671     return FALSE;
1672   }
1673 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1674 return TRUE;
1675 #endif
1676 }
1677
1678
1679 /*************************************************
1680 *          Expansion testing                     *
1681 *************************************************/
1682
1683 /* Expand and print one item, doing macro-processing.
1684
1685 Arguments:
1686   item          line for expansion
1687 */
1688
1689 static void
1690 expansion_test_line(const uschar * line)
1691 {
1692 int len;
1693 BOOL dummy_macexp;
1694 uschar * s;
1695
1696 Ustrncpy(big_buffer, line, big_buffer_size);
1697 big_buffer[big_buffer_size-1] = '\0';
1698 len = Ustrlen(big_buffer);
1699
1700 (void) macros_expand(0, &len, &dummy_macexp);
1701
1702 if (isupper(big_buffer[0]))
1703   {
1704   if (macro_read_assignment(big_buffer))
1705     printf("Defined macro '%s'\n", mlast->name);
1706   }
1707 else if (Ustrncmp(big_buffer, "set,t ", 6) == 0)
1708   printf("%s\n", acl_standalone_setvar(big_buffer+6, TRUE));
1709 else if (Ustrncmp(big_buffer, "set ", 4) == 0)
1710   printf("%s\n", acl_standalone_setvar(big_buffer+4, FALSE));
1711 else
1712   if ((s = expand_string(big_buffer))) printf("%s\n", CS s);
1713   else printf("Failed: %s\n", expand_string_message);
1714 }
1715
1716
1717
1718 /*************************************************
1719 *          Queue-runner operations               *
1720 *************************************************/
1721
1722 /* Prefix a new qrunner descriptor to the qrunners list */
1723
1724 static qrunner *
1725 alloc_qrunner(void)
1726 {
1727 qrunner * q = qrunners;
1728 qrunners = store_get(sizeof(qrunner), GET_UNTAINTED);
1729 memset(qrunners, 0, sizeof(qrunner));           /* default queue, zero interval */
1730 qrunners->next = q;
1731 qrunners->next_tick = time(NULL);               /* run right away */
1732 return qrunners;
1733 }
1734
1735 static qrunner *
1736 alloc_onetime_qrunner(void)
1737 {
1738 qrunners = store_get_perm(sizeof(qrunner), GET_UNTAINTED);
1739 memset(qrunners, 0, sizeof(qrunner));           /* default queue, zero interval */
1740 qrunners->next_tick = time(NULL);               /* run right away */
1741 qrunners->run_max = 1;
1742 return qrunners;
1743 }
1744
1745
1746 /*************************************************
1747 *          Entry point and high-level code       *
1748 *************************************************/
1749
1750 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1751 the appropriate action. All the necessary functions are present in the one
1752 binary. I originally thought one should split it up, but it turns out that so
1753 much of the apparatus is needed in each chunk that one might as well just have
1754 it all available all the time, which then makes the coding easier as well.
1755
1756 Arguments:
1757   argc      count of entries in argv
1758   argv      argument strings, with argv[0] being the program name
1759
1760 Returns:    EXIT_SUCCESS if terminated successfully
1761             EXIT_FAILURE otherwise, except when a message has been sent
1762               to the sender, and -oee was given
1763 */
1764
1765 int
1766 main(int argc, char ** cargv)
1767 {
1768 const uschar ** argv = CUSS cargv;
1769 int  arg_receive_timeout = -1;
1770 int  arg_smtp_receive_timeout = -1;
1771 int  arg_error_handling = error_handling;
1772 int  filter_sfd = -1;
1773 int  filter_ufd = -1;
1774 int  group_count;
1775 int  i, rv;
1776 int  list_queue_option = QL_BASIC;
1777 int  msg_action = 0;
1778 int  msg_action_arg = -1;
1779 int  namelen = argv[0] ? Ustrlen(argv[0]) : 0;
1780 int  queue_only_reason = 0;
1781 #ifdef EXIM_PERL
1782 int  perl_start_option = 0;
1783 #endif
1784 int  recipients_arg = argc;
1785 int  sender_address_domain = 0;
1786 int  test_retry_arg = -1;
1787 int  test_rewrite_arg = -1;
1788 gid_t original_egid;
1789 BOOL arg_queue_only = FALSE;
1790 BOOL bi_option = FALSE;
1791 BOOL checking = FALSE;
1792 BOOL count_queue = FALSE;
1793 BOOL expansion_test = FALSE;
1794 BOOL extract_recipients = FALSE;
1795 BOOL flag_G = FALSE;
1796 BOOL flag_n = FALSE;
1797 BOOL forced_delivery = FALSE;
1798 BOOL f_end_dot = FALSE;
1799 BOOL deliver_give_up = FALSE;
1800 BOOL list_queue = FALSE;
1801 BOOL list_options = FALSE;
1802 BOOL list_config = FALSE;
1803 BOOL local_queue_only;
1804 BOOL one_msg_action = FALSE;
1805 BOOL opt_D_used = FALSE;
1806 BOOL queue_only_set = FALSE;
1807 BOOL receiving_message = TRUE;
1808 BOOL sender_ident_set = FALSE;
1809 BOOL session_local_queue_only;
1810 BOOL unprivileged;
1811 BOOL removed_privilege = FALSE;
1812 BOOL usage_wanted = FALSE;
1813 BOOL verify_address_mode = FALSE;
1814 BOOL verify_as_sender = FALSE;
1815 BOOL rcpt_verify_quota = FALSE;
1816 BOOL version_printed = FALSE;
1817 const uschar * alias_arg = NULL;
1818 const uschar * called_as = US"";
1819 const uschar * cmdline_syslog_name = NULL;
1820 const uschar * start_queue_run_id = NULL;
1821 const uschar * stop_queue_run_id = NULL;
1822 const uschar * expansion_test_message = NULL;
1823 const uschar * ftest_domain = NULL;
1824 const uschar * ftest_localpart = NULL;
1825 const uschar * ftest_prefix = NULL;
1826 const uschar * ftest_suffix = NULL;
1827 uschar * log_oneline = NULL;
1828 const uschar * malware_test_file = NULL;
1829 const uschar * real_sender_address;
1830 uschar * originator_home = US"/";
1831 size_t sz;
1832
1833 struct passwd *pw;
1834 struct stat statbuf;
1835 pid_t passed_qr_pid = (pid_t)0;
1836 int passed_qr_pipe = -1;
1837 gid_t group_list[EXIM_GROUPLIST_SIZE];
1838
1839 /* For the -bI: flag */
1840 enum commandline_info info_flag = CMDINFO_NONE;
1841 BOOL info_stdout = FALSE;
1842
1843 /* Possible options for -R and -S */
1844
1845 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1846
1847 /* Need to define this in case we need to change the environment in order
1848 to get rid of a bogus time zone. We have to make it char rather than uschar
1849 because some OS define it in /usr/include/unistd.h. */
1850
1851 extern char **environ;
1852
1853 #ifdef MEASURE_TIMING
1854 (void)gettimeofday(&timestamp_startup, NULL);
1855 #endif
1856
1857 store_init();   /* Initialise the memory allocation susbsystem */
1858 pcre_init();    /* Set up memory handling for pcre */
1859
1860 /* If the Exim user and/or group and/or the configuration file owner/group were
1861 defined by ref:name at build time, we must now find the actual uid/gid values.
1862 This is a feature to make the lives of binary distributors easier. */
1863
1864 #ifdef EXIM_USERNAME
1865 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1866   {
1867   if (exim_uid == 0)
1868     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1869
1870   /* If ref:name uses a number as the name, route_finduser() returns
1871   TRUE with exim_uid set and pw coerced to NULL. */
1872   if (pw)
1873     exim_gid = pw->pw_gid;
1874 #ifndef EXIM_GROUPNAME
1875   else
1876     exim_fail(
1877         "exim: ref:name should specify a usercode, not a group.\n"
1878         "exim: can't let you get away with it unless you also specify a group.\n");
1879 #endif
1880   }
1881 else
1882   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1883 #endif
1884
1885 #ifdef EXIM_GROUPNAME
1886 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1887   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1888 #endif
1889
1890 #ifdef CONFIGURE_OWNERNAME
1891 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1892   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1893     CONFIGURE_OWNERNAME);
1894 #endif
1895
1896 /* We default the system_filter_user to be the Exim run-time user, as a
1897 sane non-root value. */
1898 system_filter_uid = exim_uid;
1899
1900 #ifdef CONFIGURE_GROUPNAME
1901 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1902   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1903     CONFIGURE_GROUPNAME);
1904 #endif
1905
1906 /* In the Cygwin environment, some initialization used to need doing.
1907 It was fudged in by means of this macro; now no longer but we'll leave
1908 it in case of others. */
1909
1910 #ifdef OS_INIT
1911 OS_INIT
1912 #endif
1913
1914 /* Check a field which is patched when we are running Exim within its
1915 testing harness; do a fast initial check, and then the whole thing. */
1916
1917 f.running_in_test_harness =
1918   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1919 if (f.running_in_test_harness)
1920   debug_store = TRUE;
1921
1922 /* Protect against abusive argv[0] */
1923 if (!argv[0] || !argc) exim_fail("exim: executable name required\n");
1924 exim_str_fail_toolong(argv[0], PATH_MAX, "argv[0]");
1925
1926 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1927 at the start of a program; however, it seems that some environments do not
1928 follow this. A "strange" locale can affect the formatting of timestamps, so we
1929 make quite sure. */
1930
1931 setlocale(LC_ALL, "C");
1932
1933 /* Get the offset between CLOCK_MONOTONIC/CLOCK_BOOTTIME and wallclock */
1934
1935 #ifdef _POSIX_MONOTONIC_CLOCK
1936 exim_clock_init();
1937 #endif
1938
1939 /* Set up the default handler for timing using alarm(). */
1940
1941 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1942
1943 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1944 because store_malloc writes a log entry on failure. */
1945
1946 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1947   exim_fail("exim: failed to get store for log buffer\n");
1948
1949 /* Initialize the default log options. */
1950
1951 bits_set(log_selector, log_selector_size, log_default);
1952
1953 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1954 NULL when the daemon is run and the file is closed. We have to use this
1955 indirection, because some systems don't allow writing to the variable "stderr".
1956 */
1957
1958 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1959
1960 /* Ensure there is a big buffer for temporary use in several places. It is put
1961 in malloc store so that it can be freed for enlargement if necessary. */
1962
1963 big_buffer = store_malloc(big_buffer_size);
1964
1965 /* Set up the handler for the data request signal, and set the initial
1966 descriptive text. */
1967
1968 process_info = store_get(PROCESS_INFO_SIZE, GET_TAINTED);
1969 set_process_info("initializing");
1970 os_restarting_signal(SIGUSR1, usr1_handler);            /* exiwhat */
1971 #ifdef SA_SIGINFO
1972   {
1973   struct sigaction act = { .sa_sigaction = segv_handler, .sa_flags = SA_RESETHAND | SA_SIGINFO };
1974   sigaction(SIGSEGV, &act, NULL);
1975   }
1976 #else
1977 signal(SIGSEGV, segv_handler);                          /* log faults */
1978 #endif
1979
1980 /* If running in a dockerized environment, the TERM signal is only
1981 delegated to the PID 1 if we request it by setting an signal handler */
1982
1983 if (getpid() == 1) signal(SIGTERM, term_handler);
1984
1985 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1986 in the daemon code. For the rest of Exim's uses, we ignore it. */
1987
1988 signal(SIGHUP, SIG_IGN);
1989
1990 /* We don't want to die on pipe errors as the code is written to handle
1991 the write error instead. */
1992
1993 signal(SIGPIPE, SIG_IGN);
1994
1995 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1996 set to SIG_IGN. This causes subprocesses that complete before the parent
1997 process waits for them not to hang around, so when Exim calls wait(), nothing
1998 is there. The wait() code has been made robust against this, but let's ensure
1999 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
2000 ending status. We use sigaction rather than plain signal() on those OS where
2001 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
2002 problem on AIX with this.) */
2003
2004 #ifdef SA_NOCLDWAIT
2005   {
2006   struct sigaction act;
2007   act.sa_handler = SIG_DFL;
2008   sigemptyset(&(act.sa_mask));
2009   act.sa_flags = 0;
2010   sigaction(SIGCHLD, &act, NULL);
2011   }
2012 #else
2013 signal(SIGCHLD, SIG_DFL);
2014 #endif
2015
2016 /* Save the arguments for use if we re-exec exim as a daemon after receiving
2017 SIGHUP. */
2018
2019 sighup_argv = argv;
2020
2021 /* Set up the version number. Set up the leading 'E' for the external form of
2022 message ids, set the pointer to the internal form, and initialize it to
2023 indicate no message being processed. */
2024
2025 version_init();
2026 message_id_option[0] = '-';
2027 message_id_external = message_id_option + 1;
2028 message_id_external[0] = 'E';
2029 message_id = message_id_external + 1;
2030 message_id[0] = 0;
2031
2032 /* Set the umask to zero so that any files Exim creates using open() are
2033 created with the modes that it specifies. NOTE: Files created with fopen() have
2034 a problem, which was not recognized till rather late (February 2006). With this
2035 umask, such files will be world writeable. (They are all content scanning files
2036 in the spool directory, which isn't world-accessible, so this is not a
2037 disaster, but it's untidy.) I don't want to change this overall setting,
2038 however, because it will interact badly with the open() calls. Instead, there's
2039 now a function called modefopen() that fiddles with the umask while calling
2040 fopen(). */
2041
2042 (void)umask(0);
2043
2044 /* Precompile the regular expression for matching a message id. Keep this in
2045 step with the code that generates ids in the accept.c module. We need to do
2046 this here, because the -M options check their arguments for syntactic validity
2047 using mac_ismsgid, which uses this. */
2048
2049 regex_ismsgid =
2050   regex_must_compile(US"^(?:"
2051           "[^\\W_]{" str(MESSAGE_ID_TIME_LEN) "}"
2052           "-[^\\W_]{" str(MESSAGE_ID_PID_LEN) "}"
2053           "-[^\\W_]{" str(MESSAGE_ID_SUBTIME_LEN) "}"
2054         "|"
2055           "(?:[^\\W_]{6}-){2}[^\\W_]{2}"                /* old ID format */
2056         ")$",
2057     MCS_NOFLAGS, TRUE);
2058
2059 /* Precompile the regular expression that is used for matching an SMTP error
2060 code, possibly extended, at the start of an error message. Note that the
2061 terminating whitespace character is included. */
2062
2063 regex_smtp_code =
2064   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
2065     MCS_NOFLAGS, TRUE);
2066
2067 #ifdef WHITELIST_D_MACROS
2068 /* Precompile the regular expression used to filter the content of macros
2069 given to -D for permissibility. */
2070
2071 regex_whitelisted_macro =
2072   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", MCS_NOFLAGS, TRUE);
2073 #endif
2074
2075 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
2076 this seems to be a generally accepted convention, since one finds symbolic
2077 links called "mailq" in standard OS configurations. */
2078
2079 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
2080     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
2081   {
2082   list_queue = TRUE;
2083   receiving_message = FALSE;
2084   called_as = US"-mailq";
2085   }
2086
2087 /* If the program is called as "rmail" treat it as equivalent to
2088 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
2089 i.e. preventing a single dot on a line from terminating the message, and
2090 returning with zero return code, even in cases of error (provided an error
2091 message has been sent). */
2092
2093 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
2094     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
2095   {
2096   f.dot_ends = FALSE;
2097   called_as = US"-rmail";
2098   errors_sender_rc = EXIT_SUCCESS;
2099   }
2100
2101 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
2102 this is a smail convention. */
2103
2104 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
2105     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
2106   {
2107   smtp_input = smtp_batched_input = TRUE;
2108   called_as = US"-rsmtp";
2109   }
2110
2111 /* If the program is called as "runq" treat it as equivalent to "exim -q";
2112 this is a smail convention. */
2113
2114 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
2115     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
2116   {
2117   alloc_onetime_qrunner();
2118   receiving_message = FALSE;
2119   called_as = US"-runq";
2120   }
2121
2122 /* If the program is called as "newaliases" treat it as equivalent to
2123 "exim -bi"; this is a sendmail convention. */
2124
2125 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
2126     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
2127   {
2128   bi_option = TRUE;
2129   receiving_message = FALSE;
2130   called_as = US"-newaliases";
2131   }
2132
2133 /* Save the original effective uid for a couple of uses later. It should
2134 normally be root, but in some esoteric environments it may not be. */
2135
2136 original_euid = geteuid();
2137 original_egid = getegid();
2138
2139 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
2140 to be the same as the real ones. This makes a difference only if Exim is setuid
2141 (or setgid) to something other than root, which could be the case in some
2142 special configurations. */
2143
2144 real_uid = getuid();
2145 real_gid = getgid();
2146
2147 if (real_uid == root_uid)
2148   {
2149   if ((rv = setgid(real_gid)))
2150     exim_fail("exim: setgid(%ld) failed: %s\n",
2151         (long int)real_gid, strerror(errno));
2152   if ((rv = setuid(real_uid)))
2153     exim_fail("exim: setuid(%ld) failed: %s\n",
2154         (long int)real_uid, strerror(errno));
2155   }
2156
2157 /* If neither the original real uid nor the original euid was root, Exim is
2158 running in an unprivileged state. */
2159
2160 unprivileged = (real_uid != root_uid && original_euid != root_uid);
2161
2162 /* For most of the args-parsing we need to use permanent pool memory */
2163  {
2164  int old_pool = store_pool;
2165  store_pool = POOL_PERM;
2166
2167 /* Scan the program's arguments. Some can be dealt with right away; others are
2168 simply recorded for checking and handling afterwards. Do a high-level switch
2169 on the second character (the one after '-'), to save some effort. */
2170
2171  for (i = 1; i < argc; i++)
2172   {
2173   BOOL badarg = FALSE;
2174   const uschar * arg = argv[i];
2175   const uschar * argrest;
2176   uschar switchchar;
2177
2178   /* An argument not starting with '-' is the start of a recipients list;
2179   break out of the options-scanning loop. */
2180
2181   if (arg[0] != '-')
2182     {
2183     recipients_arg = i;
2184     break;
2185     }
2186
2187   /* An option consisting of -- terminates the options */
2188
2189   if (Ustrcmp(arg, "--") == 0)
2190     {
2191     recipients_arg = i + 1;
2192     break;
2193     }
2194
2195   /* Handle flagged options */
2196
2197   switchchar = arg[1];
2198   argrest = arg+2;
2199
2200   /* Make all -ex options synonymous with -oex arguments, since that
2201   is assumed by various callers. Also make -qR options synonymous with -R
2202   options, as that seems to be required as well. Allow for -qqR too, and
2203   the same for -S options. */
2204
2205   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
2206       Ustrncmp(arg+1, "qR", 2) == 0 ||
2207       Ustrncmp(arg+1, "qS", 2) == 0)
2208     {
2209     switchchar = arg[2];
2210     argrest++;
2211     }
2212   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
2213     {
2214     switchchar = arg[3];
2215     argrest += 2;
2216     f.queue_2stage = TRUE;
2217     }
2218
2219   /* Make -r synonymous with -f, since it is a documented alias */
2220
2221   else if (arg[1] == 'r') switchchar = 'f';
2222
2223   /* Make -ov synonymous with -v */
2224
2225   else if (Ustrcmp(arg, "-ov") == 0)
2226     {
2227     switchchar = 'v';
2228     argrest++;
2229     }
2230
2231   /* deal with --option_aliases */
2232   else if (switchchar == '-')
2233     {
2234     if (Ustrcmp(argrest, "help") == 0)
2235       {
2236       usage_wanted = TRUE;
2237       break;
2238       }
2239     else if (Ustrcmp(argrest, "version") == 0)
2240       {
2241       switchchar = 'b';
2242       argrest = US"V";
2243       }
2244     }
2245
2246   /* High-level switch on active initial letter */
2247
2248   switch(switchchar)
2249     {
2250
2251     /* sendmail uses -Ac and -Am to control which .cf file is used;
2252     we ignore them. */
2253     case 'A':
2254     if (!*argrest) { badarg = TRUE; break; }
2255     else
2256       {
2257       BOOL ignore = FALSE;
2258       switch (*argrest)
2259         {
2260         case 'c':
2261         case 'm':
2262           if (*(argrest + 1) == '\0')
2263             ignore = TRUE;
2264           break;
2265         }
2266       if (!ignore) badarg = TRUE;
2267       }
2268     break;
2269
2270     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2271     so has no need of it. */
2272
2273     case 'B':
2274     if (!*argrest) i++;       /* Skip over the type */
2275     break;
2276
2277
2278     case 'b':
2279       {
2280       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2281
2282       switch (*argrest++)
2283         {
2284         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2285            -bdf: Ditto, but in the foreground.
2286         */
2287         case 'd':
2288           f.daemon_listen = f.daemon_scion = TRUE;
2289           if (*argrest == 'f') f.background_daemon = FALSE;
2290           else if (*argrest) badarg = TRUE;
2291           break;
2292
2293         /* -be:  Run in expansion test mode
2294            -bem: Ditto, but read a message from a file first
2295         */
2296         case 'e':
2297           expansion_test = checking = TRUE;
2298           if (*argrest == 'm')
2299             {
2300             if (++i >= argc) { badarg = TRUE; break; }
2301             expansion_test_message = argv[i];
2302             argrest++;
2303             }
2304           if (*argrest) badarg = TRUE;
2305           break;
2306
2307         /* -bF:  Run system filter test */
2308         case 'F':
2309           filter_test |= checking = FTEST_SYSTEM;
2310           if (*argrest) badarg = TRUE;
2311           else if (++i < argc) filter_test_sfile = argv[i];
2312           else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2313           break;
2314
2315         /* -bf:  Run user filter test
2316            -bfd: Set domain for filter testing
2317            -bfl: Set local part for filter testing
2318            -bfp: Set prefix for filter testing
2319            -bfs: Set suffix for filter testing
2320         */
2321         case 'f':
2322           if (!*argrest)
2323             {
2324             filter_test |= checking = FTEST_USER;
2325             if (++i < argc) filter_test_ufile = argv[i];
2326             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2327             }
2328           else
2329             {
2330             if (++i >= argc)
2331               exim_fail("exim: string expected after %s\n", arg);
2332             if (Ustrcmp(argrest, "d") == 0) ftest_domain = exim_str_fail_toolong(argv[i], EXIM_DOMAINNAME_MAX, "-bfd");
2333             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfl");
2334             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfp");
2335             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfs");
2336             else badarg = TRUE;
2337             }
2338           break;
2339
2340         /* -bh: Host checking - an IP address must follow. */
2341         case 'h':
2342           if (  (!*argrest || Ustrcmp(argrest, "c") == 0)
2343              && ++i < argc)
2344             {
2345             sender_host_address = string_copy_taint(
2346                   exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-bh"),
2347                   GET_TAINTED);
2348             host_checking = checking = f.log_testing_mode = TRUE;
2349             f.host_checking_callout = *argrest == 'c';
2350             message_logs = FALSE;
2351             }
2352           else
2353             badarg = TRUE;
2354           break;
2355
2356         /* -bi: This option is used by sendmail to initialize *the* alias file,
2357         though it has the -oA option to specify a different file. Exim has no
2358         concept of *the* alias file, but since Sun's YP make script calls
2359         sendmail this way, some support must be provided. */
2360         case 'i':
2361           if (!*argrest) bi_option = TRUE;
2362           else badarg = TRUE;
2363           break;
2364
2365         /* -bI: provide information, of the type to follow after a colon.
2366         This is an Exim flag. */
2367         case 'I':
2368           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2369             {
2370             const uschar * p = argrest+1;
2371             info_flag = CMDINFO_HELP;
2372             if (Ustrlen(p))
2373               if (strcmpic(p, CUS"sieve") == 0)
2374                 {
2375                 info_flag = CMDINFO_SIEVE;
2376                 info_stdout = TRUE;
2377                 }
2378               else if (strcmpic(p, CUS"dscp") == 0)
2379                 {
2380                 info_flag = CMDINFO_DSCP;
2381                 info_stdout = TRUE;
2382                 }
2383               else if (strcmpic(p, CUS"help") == 0)
2384                 info_stdout = TRUE;
2385             }
2386           else badarg = TRUE;
2387           break;
2388
2389         /* -bm: Accept and deliver message - the default option. Reinstate
2390         receiving_message, which got turned off for all -b options.
2391            -bmalware: test the filename given for malware */
2392         case 'm':
2393           if (!*argrest) receiving_message = TRUE;
2394           else if (Ustrcmp(argrest, "alware") == 0)
2395             {
2396             if (++i >= argc) { badarg = TRUE; break; }
2397             checking = TRUE;
2398             malware_test_file = argv[i];
2399             }
2400           else badarg = TRUE;
2401           break;
2402
2403         /* -bnq: For locally originating messages, do not qualify unqualified
2404         addresses. In the envelope, this causes errors; in header lines they
2405         just get left. */
2406         case 'n':
2407           if (Ustrcmp(argrest, "q") == 0)
2408             {
2409             f.allow_unqualified_sender = FALSE;
2410             f.allow_unqualified_recipient = FALSE;
2411             }
2412           else badarg = TRUE;
2413           break;
2414
2415         /* -bpxx: List the contents of the mail queue, in various forms. If
2416         the option is -bpc, just a queue count is needed. Otherwise, if the
2417         first letter after p is r, then order is random. */
2418         case 'p':
2419           if (*argrest == 'c')
2420             {
2421             count_queue = TRUE;
2422             if (*++argrest) badarg = TRUE;
2423             break;
2424             }
2425
2426           if (*argrest == 'r')
2427             list_queue_option = QL_UNSORTED, argrest++;
2428           else
2429             list_queue_option = QL_BASIC;
2430
2431           list_queue = TRUE;
2432
2433           /* -bp: List the contents of the mail queue, top-level only */
2434
2435           if (!*argrest) {}
2436
2437           /* -bpu: List the contents of the mail queue, top-level undelivered */
2438
2439           else if (Ustrcmp(argrest, "u") == 0) list_queue_option |= QL_UNDELIVERED_ONLY;
2440
2441           /* -bpa: List the contents of the mail queue, including all delivered */
2442
2443           else if (Ustrcmp(argrest, "a") == 0) list_queue_option |= QL_PLUS_GENERATED;
2444
2445           /* -bpi: List only message IDs */
2446
2447           else if (Ustrcmp(argrest, "i") == 0) list_queue_option |= QL_MSGID_ONLY;
2448
2449           /* Unknown after -bp[r] */
2450
2451           else badarg = TRUE;
2452           break;
2453
2454
2455         /* -bP: List the configuration variables given as the address list.
2456         Force -v, so configuration errors get displayed. */
2457         case 'P':
2458
2459           /* -bP config: we need to setup here, because later,
2460           when list_options is checked, the config is read already */
2461           if (*argrest)
2462             badarg = TRUE;
2463           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2464             {
2465             list_config = TRUE;
2466             readconf_save_config(version_string);
2467             }
2468           else
2469             {
2470             list_options = TRUE;
2471             debug_selector |= D_v;
2472             debug_file = stderr;
2473             }
2474           break;
2475
2476         /* -brt: Test retry configuration lookup */
2477         case 'r':
2478           if (Ustrcmp(argrest, "t") == 0)
2479             {
2480             checking = TRUE;
2481             test_retry_arg = i + 1;
2482             goto END_ARG;
2483             }
2484
2485           /* -brw: Test rewrite configuration */
2486
2487           else if (Ustrcmp(argrest, "w") == 0)
2488             {
2489             checking = TRUE;
2490             test_rewrite_arg = i + 1;
2491             goto END_ARG;
2492             }
2493           else badarg = TRUE;
2494           break;
2495
2496         /* -bS: Read SMTP commands on standard input, but produce no replies -
2497         all errors are reported by sending messages. */
2498         case 'S':
2499           if (!*argrest)
2500             smtp_input = smtp_batched_input = receiving_message = TRUE;
2501           else badarg = TRUE;
2502           break;
2503
2504         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2505         on standard output. */
2506         case 's':
2507           if (!*argrest) smtp_input = receiving_message = TRUE;
2508           else badarg = TRUE;
2509           break;
2510
2511         /* -bt: address testing mode */
2512         case 't':
2513           if (!*argrest)
2514             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2515           else badarg = TRUE;
2516           break;
2517
2518         /* -bv: verify addresses */
2519         case 'v':
2520           if (!*argrest)
2521             verify_address_mode = checking = f.log_testing_mode = TRUE;
2522
2523         /* -bvs: verify sender addresses */
2524
2525           else if (Ustrcmp(argrest, "s") == 0)
2526             {
2527             verify_address_mode = checking = f.log_testing_mode = TRUE;
2528             verify_as_sender = TRUE;
2529             }
2530           else badarg = TRUE;
2531           break;
2532
2533         /* -bV: Print version string and support details */
2534         case 'V':
2535           if (!*argrest)
2536             {
2537             printf("Exim version %s #%s built %s\n", version_string,
2538               version_cnumber, version_date);
2539             printf("%s\n", CS version_copyright);
2540             version_printed = TRUE;
2541             show_whats_supported(TRUE);
2542             f.log_testing_mode = TRUE;
2543             }
2544           else badarg = TRUE;
2545           break;
2546
2547         /* -bw: inetd wait mode, accept a listening socket as stdin */
2548         case 'w':
2549           f.inetd_wait_mode = TRUE;
2550           f.background_daemon = FALSE;
2551           f.daemon_listen = f.daemon_scion = TRUE;
2552           if (*argrest)
2553             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2554               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2555           break;
2556
2557         default:
2558           badarg = TRUE;
2559           break;
2560         }
2561       break;
2562       }
2563
2564
2565     /* -C: change configuration file list; ignore if it isn't really
2566     a change! Enforce a prefix check if required. */
2567
2568     case 'C':
2569     if (!*argrest)
2570       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2571     if (Ustrcmp(config_main_filelist, argrest) != 0)
2572       {
2573       #ifdef ALT_CONFIG_PREFIX
2574       int sep = 0;
2575       int len = Ustrlen(ALT_CONFIG_PREFIX);
2576       const uschar *list = argrest;
2577       uschar *filename;
2578       /* The argv is untainted, so big_buffer (also untainted) is ok to use */
2579       while((filename = string_nextinlist(&list, &sep, big_buffer,
2580              big_buffer_size)))
2581         if (  (  Ustrlen(filename) < len
2582               || Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0
2583               || Ustrstr(filename, "/../") != NULL
2584               )
2585            && (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid)
2586            )
2587           exim_fail("-C Permission denied\n");
2588       #endif
2589       if (real_uid != root_uid)
2590         {
2591         #ifdef TRUSTED_CONFIG_LIST
2592
2593         if (real_uid != exim_uid
2594             #ifdef CONFIGURE_OWNER
2595             && real_uid != config_uid
2596             #endif
2597             )
2598           f.trusted_config = FALSE;
2599         else
2600           {
2601           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2602           if (trust_list)
2603             {
2604             struct stat statbuf;
2605
2606             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2607                 (statbuf.st_uid != root_uid        /* owner not root */
2608                  #ifdef CONFIGURE_OWNER
2609                  && statbuf.st_uid != config_uid   /* owner not the special one */
2610                  #endif
2611                    ) ||                            /* or */
2612                 (statbuf.st_gid != root_gid        /* group not root */
2613                  #ifdef CONFIGURE_GROUP
2614                  && statbuf.st_gid != config_gid   /* group not the special one */
2615                  #endif
2616                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2617                    ) ||                            /* or */
2618                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2619               {
2620               f.trusted_config = FALSE;
2621               fclose(trust_list);
2622               }
2623             else
2624               {
2625               /* Well, the trust list at least is up to scratch... */
2626               rmark reset_point;
2627               uschar *trusted_configs[32];
2628               int nr_configs = 0;
2629               int i = 0;
2630               int old_pool = store_pool;
2631               store_pool = POOL_MAIN;
2632
2633               reset_point = store_mark();
2634               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2635                 {
2636                 uschar * start = big_buffer, * nl;
2637                 if (Uskip_whitespace(&start) != '/')
2638                   continue;
2639                 if ((nl = Ustrchr(start, '\n')))
2640                   *nl = '\0';
2641                 trusted_configs[nr_configs++] = string_copy(start);
2642                 if (nr_configs == nelem(trusted_configs))
2643                   break;
2644                 }
2645               fclose(trust_list);
2646
2647               if (nr_configs)
2648                 {
2649                 int sep = 0;
2650                 const uschar *list = argrest;
2651                 uschar *filename;
2652                 while (f.trusted_config && (filename = string_nextinlist(&list,
2653                         &sep, big_buffer, big_buffer_size)))
2654                   {
2655                   for (i=0; i < nr_configs; i++)
2656                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2657                       break;
2658                   if (i == nr_configs)
2659                     {
2660                     f.trusted_config = FALSE;
2661                     break;
2662                     }
2663                   }
2664                 }
2665               else      /* No valid prefixes found in trust_list file. */
2666                 f.trusted_config = FALSE;
2667               store_reset(reset_point);
2668               store_pool = old_pool;
2669               }
2670             }
2671           else          /* Could not open trust_list file. */
2672             f.trusted_config = FALSE;
2673           }
2674       #else
2675         /* Not root; don't trust config */
2676         f.trusted_config = FALSE;
2677       #endif
2678         }
2679
2680       config_main_filelist = argrest;
2681       f.config_changed = TRUE;
2682       }
2683     break;
2684
2685
2686     /* -D: set up a macro definition */
2687
2688     case 'D':
2689 #ifdef DISABLE_D_OPTION
2690       exim_fail("exim: -D is not available in this Exim binary\n");
2691 #else
2692       {
2693       int ptr = 0;
2694       macro_item * m;
2695       uschar name[24];
2696       const uschar * s = argrest;
2697
2698       opt_D_used = TRUE;
2699       Uskip_whitespace(&s);
2700
2701       if (*s < 'A' || *s > 'Z')
2702         exim_fail("exim: macro name set by -D must start with "
2703           "an upper case letter\n");
2704
2705       while (isalnum(*s) || *s == '_')
2706         {
2707         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2708         s++;
2709         }
2710       name[ptr] = 0;
2711       if (ptr == 0) { badarg = TRUE; break; }
2712       if (Uskip_whitespace(&s))
2713         {
2714         if (*s++ != '=') { badarg = TRUE; break; }
2715         Uskip_whitespace(&s);
2716         }
2717
2718       for (m = macros_user; m; m = m->next)
2719         if (Ustrcmp(m->name, name) == 0)
2720           exim_fail("exim: duplicated -D in command line\n");
2721
2722       m = macro_create(name, s, TRUE);
2723
2724       if (clmacro_count >= MAX_CLMACROS)
2725         exim_fail("exim: too many -D options on command line\n");
2726       clmacros[clmacro_count++] =
2727         string_sprintf("-D%s=%s", m->name, m->replacement);
2728       }
2729     #endif
2730     break;
2731
2732     case 'd':
2733
2734     /* -dropcr: Set this option.  Now a no-op, retained for compatibility only. */
2735
2736     if (Ustrcmp(argrest, "ropcr") == 0)
2737       {
2738       /* drop_cr = TRUE; */
2739       }
2740
2741     /* -dp: Set up a debug pretrigger buffer with given size. */
2742
2743     else if (Ustrcmp(argrest, "p") == 0)
2744       if (++i >= argc)
2745         badarg = TRUE;
2746       else
2747         debug_pretrigger_setup(argv[i]);
2748
2749     /* -dt: Set a debug trigger selector */
2750
2751     else if (Ustrncmp(argrest, "t=", 2) == 0)
2752       dtrigger_selector = (unsigned int) Ustrtol(argrest + 2, NULL, 0);
2753
2754     /* -d: Set debug level (see also -v below).
2755     If -dd is used, debugging subprocesses of the daemon is disabled. */
2756
2757     else
2758       {
2759       /* Use an intermediate variable so that we don't set debugging while
2760       decoding the debugging bits. */
2761
2762       unsigned int selector = D_default;
2763       debug_selector = 0;
2764       debug_file = NULL;
2765       if (*argrest == 'd')
2766         {
2767         f.debug_daemon = TRUE;
2768         argrest++;
2769         }
2770       if (*argrest)
2771         decode_bits(&selector, 1, debug_notall, argrest,
2772           debug_options, debug_options_count, US"debug", 0);
2773       debug_selector = selector;
2774       }
2775     break;
2776
2777
2778     /* -E: This is a local error message. This option is not intended for
2779     external use at all, but is not restricted to trusted callers because it
2780     does no harm (just suppresses certain error messages) and if Exim is run
2781     not setuid root it won't always be trusted when it generates error
2782     messages using this option. If there is a message id following -E, point
2783     message_reference at it, for logging. */
2784
2785     case 'E':
2786     f.local_error_message = TRUE;
2787     if (mac_ismsgid(argrest)) message_reference = argrest;
2788     break;
2789
2790
2791     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2792     option, so it looks as if historically the -oex options are also callable
2793     without the leading -o. So we have to accept them. Before the switch,
2794     anything starting -oe has been converted to -e. Exim does not support all
2795     of the sendmail error options. */
2796
2797     case 'e':
2798     if (Ustrcmp(argrest, "e") == 0)
2799       {
2800       arg_error_handling = ERRORS_SENDER;
2801       errors_sender_rc = EXIT_SUCCESS;
2802       }
2803     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2804     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2805     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2806     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2807     else badarg = TRUE;
2808     break;
2809
2810
2811     /* -F: Set sender's full name, used instead of the gecos entry from
2812     the password file. Since users can usually alter their gecos entries,
2813     there's no security involved in using this instead. The data can follow
2814     the -F or be in the next argument. */
2815
2816     case 'F':
2817     if (!*argrest)
2818       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2819     originator_name = string_copy_taint(
2820                   exim_str_fail_toolong(argrest, EXIM_HUMANNAME_MAX, "-F"),
2821                   GET_TAINTED);
2822     f.sender_name_forced = TRUE;
2823     break;
2824
2825
2826     /* -f: Set sender's address - this value is only actually used if Exim is
2827     run by a trusted user, or if untrusted_set_sender is set and matches the
2828     address, except that the null address can always be set by any user. The
2829     test for this happens later, when the value given here is ignored when not
2830     permitted. For an untrusted user, the actual sender is still put in Sender:
2831     if it doesn't match the From: header (unless no_local_from_check is set).
2832     The data can follow the -f or be in the next argument. The -r switch is an
2833     obsolete form of -f but since there appear to be programs out there that
2834     use anything that sendmail has ever supported, better accept it - the
2835     synonymizing is done before the switch above.
2836
2837     At this stage, we must allow domain literal addresses, because we don't
2838     know what the setting of allow_domain_literals is yet. Ditto for trailing
2839     dots and strip_trailing_dot. */
2840
2841     case 'f':
2842       {
2843       int dummy_start, dummy_end;
2844       uschar *errmess;
2845       if (!*argrest)
2846         if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
2847       (void) exim_str_fail_toolong(argrest, EXIM_DISPLAYMAIL_MAX, "-f");
2848       if (!*argrest)
2849         {
2850         uschar * s = store_get(1, GET_UNTAINTED);       /* Ensure writeable memory */
2851         *s = '\0';
2852         sender_address = s;
2853         }
2854       else
2855         {
2856         const uschar * temp = argrest + Ustrlen(argrest) - 1;
2857         while (temp >= argrest && isspace(*temp)) temp--;
2858         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2859         allow_domain_literals = TRUE;
2860         strip_trailing_dot = TRUE;
2861 #ifdef SUPPORT_I18N
2862         allow_utf8_domains = TRUE;
2863 #endif
2864         if (!(sender_address = parse_extract_address(argrest, &errmess,
2865                   &dummy_start, &dummy_end, &sender_address_domain, TRUE)))
2866           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2867
2868         sender_address = string_copy_taint(sender_address, GET_TAINTED);
2869 #ifdef SUPPORT_I18N
2870         message_smtputf8 =  string_is_utf8(sender_address);
2871         allow_utf8_domains = FALSE;
2872 #endif
2873         allow_domain_literals = FALSE;
2874         strip_trailing_dot = FALSE;
2875         }
2876       f.sender_address_forced = TRUE;
2877       }
2878     break;
2879
2880     /* -G: sendmail invocation to specify that it's a gateway submission and
2881     sendmail may complain about problems instead of fixing them.
2882     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2883     not at this time complain about problems. */
2884
2885     case 'G':
2886     flag_G = TRUE;
2887     break;
2888
2889     /* -h: Set the hop count for an incoming message. Exim does not currently
2890     support this; it always computes it by counting the Received: headers.
2891     To put it in will require a change to the spool header file format. */
2892
2893     case 'h':
2894     if (!*argrest)
2895       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2896     if (!isdigit(*argrest)) badarg = TRUE;
2897     break;
2898
2899
2900     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2901     not to be documented for sendmail but mailx (at least) uses it) */
2902
2903     case 'i':
2904     if (!*argrest) f.dot_ends = FALSE; else badarg = TRUE;
2905     break;
2906
2907
2908     /* -L: set the identifier used for syslog; equivalent to setting
2909     syslog_processname in the config file, but needs to be an admin option. */
2910
2911     case 'L':
2912     if (!*argrest)
2913       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2914     if ((sz = Ustrlen(argrest)) > 32)
2915       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2916     if (sz < 1)
2917       exim_fail("exim: the -L syslog name is too short\n");
2918     cmdline_syslog_name = string_copy_taint(argrest, GET_TAINTED);
2919     break;
2920
2921     case 'M':
2922     receiving_message = FALSE;
2923
2924     /* -MC:  continue delivery of another message via an existing open
2925     file descriptor. This option is used for an internal call by the
2926     smtp transport when there is a pending message waiting to go to an
2927     address to which it has got a connection. Five subsequent arguments are
2928     required: transport name, host name, IP address, sequence number, and
2929     message_id. Transports may decline to create new processes if the sequence
2930     number gets too big. The channel is stdin. This (-MC) must be the last
2931     argument. There's a subsequent check that the real-uid is privileged.
2932
2933     If we are running in the test harness. delay for a bit, to let the process
2934     that set this one up complete. This makes for repeatability of the logging,
2935     etc. output. */
2936
2937     if (Ustrcmp(argrest, "C") == 0)
2938       {
2939       union sockaddr_46 interface_sock;
2940       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2941
2942       if (argc != i + 6)
2943         exim_fail("exim: too many or too few arguments after -MC\n");
2944
2945       if (msg_action_arg >= 0)
2946         exim_fail("exim: incompatible arguments\n");
2947
2948       continue_transport = string_copy_taint(
2949         exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-C internal transport"),
2950         GET_TAINTED);
2951       continue_hostname = string_copy_taint(
2952         exim_str_fail_toolong(argv[++i], EXIM_HOSTNAME_MAX, "-C internal hostname"),
2953         GET_TAINTED);
2954       continue_host_address = string_copy_taint(
2955         exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-C internal hostaddr"),
2956         GET_TAINTED);
2957       continue_sequence = Uatoi(argv[++i]);
2958       msg_action = MSG_DELIVER;
2959       msg_action_arg = ++i;
2960       forced_delivery = TRUE;
2961       queue_run_pid = passed_qr_pid;
2962       queue_run_pipe = passed_qr_pipe;
2963
2964       if (!mac_ismsgid(argv[i]))
2965         exim_fail("exim: malformed message id %s after -MC option\n",
2966           argv[i]);
2967
2968       /* Set up $sending_ip_address and $sending_port, unless proxied */
2969
2970       if (!continue_proxy_cipher)
2971         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2972             &size) == 0)
2973           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2974             &sending_port);
2975         else
2976           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2977             strerror(errno));
2978
2979       testharness_pause_ms(500);
2980       break;
2981       }
2982
2983     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2984       {
2985       switch(argrest[1])
2986         {
2987     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2988     precedes -MC (see above). The flag indicates that the host to which
2989     Exim is connected has accepted an AUTH sequence. */
2990
2991         case 'A': f.smtp_authenticated = TRUE; break;
2992
2993     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2994        that exim is connected to supports the esmtp extension DSN */
2995
2996         case 'D': smtp_peer_options |= OPTION_DSN; break;
2997
2998     /* -MCd: for debug, set a process-purpose string */
2999
3000         case 'd': if (++i < argc)
3001                     process_purpose = string_copy_taint(
3002                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCd"),
3003                       GET_TAINTED);
3004                   else badarg = TRUE;
3005                   break;
3006
3007     /* -MCG: set the queue name, to a non-default value. Arguably, anything
3008        from the commandline should be tainted - but we will need an untainted
3009        value for the spoolfile when doing a -odi delivery process. */
3010
3011         case 'G': if (++i < argc) queue_name = string_copy_taint(
3012                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCG"),
3013                       GET_UNTAINTED);
3014                   else badarg = TRUE;
3015                   break;
3016
3017     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
3018
3019         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
3020
3021 #ifndef DISABLE_ESMTP_LIMITS
3022     /* -MCL: peer used LIMITS RCPTMAX and/or RCPTDOMAINMAX */
3023         case 'L': if (++i < argc) continue_limit_mail = Uatoi(argv[i]);
3024                   else badarg = TRUE;
3025                   if (++i < argc) continue_limit_rcpt = Uatoi(argv[i]);
3026                   else badarg = TRUE;
3027                   if (++i < argc) continue_limit_rcptdom = Uatoi(argv[i]);
3028                   else badarg = TRUE;
3029                   break;
3030 #endif
3031
3032     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
3033     it preceded -MC (see above) */
3034
3035         case 'P': smtp_peer_options |= OPTION_PIPE; break;
3036
3037 #ifdef SUPPORT_SOCKS
3038     /* -MCp: Socks proxy in use; nearside IP, port, external IP, port */
3039         case 'p': proxy_session = TRUE;
3040                   if (++i < argc)
3041                     {
3042                     proxy_local_address = string_copy_taint(argv[i], GET_TAINTED);
3043                     if (++i < argc)
3044                       {
3045                       proxy_local_port = Uatoi(argv[i]);
3046                       if (++i < argc)
3047                         {
3048                         proxy_external_address = string_copy_taint(argv[i], GET_TAINTED);
3049                         if (++i < argc)
3050                           {
3051                           proxy_external_port = Uatoi(argv[i]);
3052                           break;
3053                     } } } }
3054                   badarg = TRUE;
3055                   break;
3056 #endif
3057     /* -MCQ: pass on the pid of the queue-running process that started
3058     this chain of deliveries and the fd of its synchronizing pipe; this
3059     is useful only when it precedes -MC (see above) */
3060
3061         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
3062                   else badarg = TRUE;
3063                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
3064                   else badarg = TRUE;
3065                   break;
3066
3067     /* -MCq: do a quota check on the given recipient for the given size
3068     of message.  Separate from -MC. */
3069         case 'q': rcpt_verify_quota = TRUE;
3070                   if (++i < argc) message_size = Uatoi(argv[i]);
3071                   else badarg = TRUE;
3072                   break;
3073
3074     /* -MCS: set the smtp_use_size flag; this is useful only when it
3075     precedes -MC (see above) */
3076
3077         case 'S': smtp_peer_options |= OPTION_SIZE; break;
3078
3079 #ifndef DISABLE_TLS
3080     /* -MCs: used with -MCt; SNI was sent */
3081     /* -MCr: ditto, DANE */
3082
3083         case 'r':
3084         case 's': if (++i < argc)
3085                     {
3086                     continue_proxy_sni = string_copy_taint(
3087                       exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-MCr/-MCs"),
3088                       GET_TAINTED);
3089                     if (argrest[1] == 'r') continue_proxy_dane = TRUE;
3090                     }
3091                   else badarg = TRUE;
3092                   break;
3093
3094     /* -MCt: similar to -MCT below but the connection is still open
3095     via a proxy process which handles the TLS context and coding.
3096     Require three arguments for the proxied local address and port,
3097     and the TLS cipher. */
3098
3099         case 't': if (++i < argc)
3100                     sending_ip_address = string_copy_taint(
3101                       exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-MCt IP"),
3102                       GET_TAINTED);
3103                   else badarg = TRUE;
3104                   if (++i < argc)
3105                     sending_port = (int)(Uatol(argv[i]));
3106                   else badarg = TRUE;
3107                   if (++i < argc)
3108                     continue_proxy_cipher = string_copy_taint(
3109                       exim_str_fail_toolong(argv[i], EXIM_CIPHERNAME_MAX, "-MCt cipher"),
3110                       GET_TAINTED);
3111                   else badarg = TRUE;
3112                   /*FALLTHROUGH*/
3113
3114     /* -MCT: set the tls_offered flag; this is useful only when it
3115     precedes -MC (see above). The flag indicates that the host to which
3116     Exim is connected has offered TLS support. */
3117
3118         case 'T': smtp_peer_options |= OPTION_TLS; break;
3119 #endif
3120
3121         default:  badarg = TRUE; break;
3122         }
3123       break;
3124       }
3125
3126     /* -M[x]: various operations on the following list of message ids:
3127        -M    deliver the messages, ignoring next retry times and thawing
3128        -Mc   deliver the messages, checking next retry times, no thawing
3129        -Mf   freeze the messages
3130        -Mg   give up on the messages
3131        -Mt   thaw the messages
3132        -Mrm  remove the messages
3133     In the above cases, this must be the last option. There are also the
3134     following options which are followed by a single message id, and which
3135     act on that message. Some of them use the "recipient" addresses as well.
3136        -Mar  add recipient(s)
3137        -MG   move to a different queue
3138        -Mmad mark all recipients delivered
3139        -Mmd  mark recipients(s) delivered
3140        -Mes  edit sender
3141        -Mset load a message for use with -be
3142        -Mvb  show body
3143        -Mvc  show copy (of whole message, in RFC 2822 format)
3144        -Mvh  show header
3145        -Mvl  show log
3146     */
3147
3148     else if (!*argrest)
3149       {
3150       msg_action = MSG_DELIVER;
3151       forced_delivery = f.deliver_force_thaw = TRUE;
3152       }
3153     else if (Ustrcmp(argrest, "ar") == 0)
3154       {
3155       msg_action = MSG_ADD_RECIPIENT;
3156       one_msg_action = TRUE;
3157       }
3158     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
3159     else if (Ustrcmp(argrest, "es") == 0)
3160       {
3161       msg_action = MSG_EDIT_SENDER;
3162       one_msg_action = TRUE;
3163       }
3164     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
3165     else if (Ustrcmp(argrest, "g") == 0)
3166       {
3167       msg_action = MSG_DELIVER;
3168       deliver_give_up = TRUE;
3169       }
3170    else if (Ustrcmp(argrest, "G") == 0)
3171       {
3172       msg_action = MSG_SETQUEUE;
3173       queue_name_dest = string_copy_taint(
3174         exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3175                               EXIM_DRIVERNAME_MAX, "-MG"),
3176         GET_TAINTED);
3177       }
3178     else if (Ustrcmp(argrest, "mad") == 0) msg_action = MSG_MARK_ALL_DELIVERED;
3179     else if (Ustrcmp(argrest, "md") == 0)
3180       {
3181       msg_action = MSG_MARK_DELIVERED;
3182       one_msg_action = TRUE;
3183       }
3184     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
3185     else if (Ustrcmp(argrest, "set") == 0)
3186       {
3187       msg_action = MSG_LOAD;
3188       one_msg_action = TRUE;
3189       }
3190     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
3191     else if (Ustrcmp(argrest, "vb") == 0)
3192       {
3193       msg_action = MSG_SHOW_BODY;
3194       one_msg_action = TRUE;
3195       }
3196     else if (Ustrcmp(argrest, "vc") == 0)
3197       {
3198       msg_action = MSG_SHOW_COPY;
3199       one_msg_action = TRUE;
3200       }
3201     else if (Ustrcmp(argrest, "vh") == 0)
3202       {
3203       msg_action = MSG_SHOW_HEADER;
3204       one_msg_action = TRUE;
3205       }
3206     else if (Ustrcmp(argrest, "vl") == 0)
3207       {
3208       msg_action = MSG_SHOW_LOG;
3209       one_msg_action = TRUE;
3210       }
3211     else { badarg = TRUE; break; }
3212
3213     /* All the -Mxx options require at least one message id. */
3214
3215     msg_action_arg = i + 1;
3216     if (msg_action_arg >= argc)
3217       exim_fail("exim: no message ids given after %s option\n", arg);
3218
3219     /* Some require only message ids to follow */
3220
3221     if (!one_msg_action)
3222       {
3223       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
3224         exim_fail("exim: malformed message id %s after %s option\n",
3225           argv[j], arg);
3226       goto END_ARG;   /* Remaining args are ids */
3227       }
3228
3229     /* Others require only one message id, possibly followed by addresses,
3230     which will be handled as normal arguments. */
3231
3232     else
3233       {
3234       if (!mac_ismsgid(argv[msg_action_arg]))
3235         exim_fail("exim: malformed message id %s after %s option\n",
3236           argv[msg_action_arg], arg);
3237       i++;
3238       }
3239     break;
3240
3241
3242     /* Some programs seem to call the -om option without the leading o;
3243     for sendmail it askes for "me too". Exim always does this. */
3244
3245     case 'm':
3246     if (*argrest) badarg = TRUE;
3247     break;
3248
3249
3250     /* -N: don't do delivery - a debugging option that stops transports doing
3251     their thing. It implies debugging at the D_v level. */
3252
3253     case 'N':
3254     if (!*argrest)
3255       {
3256       f.dont_deliver = TRUE;
3257       debug_selector |= D_v;
3258       debug_file = stderr;
3259       }
3260     else badarg = TRUE;
3261     break;
3262
3263
3264     /* -n: This means "don't alias" in sendmail, apparently.
3265     For normal invocations, it has no effect.
3266     It may affect some other options. */
3267
3268     case 'n':
3269     flag_n = TRUE;
3270     break;
3271
3272     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
3273     option to the specified value. This form uses long names. We need to handle
3274     -O option=value and -Ooption=value. */
3275
3276     case 'O':
3277     if (!*argrest)
3278       if (++i >= argc)
3279         exim_fail("exim: string expected after -O\n");
3280     break;
3281
3282     case 'o':
3283     switch (*argrest++)
3284       {
3285       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
3286       file" option). */
3287       case 'A':
3288         if (!*(alias_arg = argrest))
3289           if (i+1 < argc) alias_arg = argv[++i];
3290           else exim_fail("exim: string expected after -oA\n");
3291         break;
3292
3293       /* -oB: Set a connection message max value for remote deliveries */
3294       case 'B':
3295         {
3296         const uschar * p = argrest;
3297         if (!*p)
3298           if (i+1 < argc && isdigit((argv[i+1][0])))
3299             p = argv[++i];
3300           else
3301             {
3302             connection_max_messages = 1;
3303             p = NULL;
3304             }
3305
3306         if (p)
3307           {
3308           if (!isdigit(*p))
3309             exim_fail("exim: number expected after -oB\n");
3310           connection_max_messages = Uatoi(p);
3311           }
3312         }
3313         break;
3314
3315       /* -odb: background delivery */
3316
3317       case 'd':
3318         if (Ustrcmp(argrest, "b") == 0)
3319           {
3320           f.synchronous_delivery = FALSE;
3321           arg_queue_only = FALSE;
3322           queue_only_set = TRUE;
3323           }
3324
3325       /* -odd: testsuite-only: add no inter-process delays */
3326
3327         else if (Ustrcmp(argrest, "d") == 0)
3328           f.testsuite_delays = FALSE;
3329
3330       /* -odf: foreground delivery (smail-compatible option); same effect as
3331          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3332       */
3333
3334         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3335           {
3336           f.synchronous_delivery = TRUE;
3337           arg_queue_only = FALSE;
3338           queue_only_set = TRUE;
3339           }
3340
3341       /* -odq: queue only */
3342
3343         else if (Ustrcmp(argrest, "q") == 0)
3344           {
3345           f.synchronous_delivery = FALSE;
3346           arg_queue_only = TRUE;
3347           queue_only_set = TRUE;
3348           }
3349
3350       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3351       but no remote delivery */
3352
3353         else if (Ustrcmp(argrest, "qs") == 0)
3354           {
3355           f.queue_smtp = TRUE;
3356           arg_queue_only = FALSE;
3357           queue_only_set = TRUE;
3358           }
3359         else badarg = TRUE;
3360         break;
3361
3362       /* -oex: Sendmail error flags. As these are also accepted without the
3363       leading -o prefix, for compatibility with vacation and other callers,
3364       they are handled with -e above. */
3365
3366       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3367          -oitrue: Another sendmail syntax for the same */
3368
3369       case 'i':
3370         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3371           f.dot_ends = FALSE;
3372         else badarg = TRUE;
3373         break;
3374
3375     /* -oM*: Set various characteristics for an incoming message; actually
3376     acted on for trusted callers only. */
3377
3378       case 'M':
3379         {
3380         if (i+1 >= argc)
3381           exim_fail("exim: data expected after -oM%s\n", argrest);
3382
3383         /* -oMa: Set sender host address */
3384
3385         if (Ustrcmp(argrest, "a") == 0)
3386           sender_host_address = string_copy_taint(
3387             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3388                                   EXIM_IPADDR_MAX, "-oMa"), GET_TAINTED);
3389
3390         /* -oMaa: Set authenticator name */
3391
3392         else if (Ustrcmp(argrest, "aa") == 0)
3393           sender_host_authenticated = string_copy_taint(
3394             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3395                                   EXIM_DRIVERNAME_MAX, "-oMaa"), GET_TAINTED);
3396
3397         /* -oMas: setting authenticated sender */
3398
3399         else if (Ustrcmp(argrest, "as") == 0)
3400           authenticated_sender = string_copy_taint(
3401             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3402                                   EXIM_EMAILADDR_MAX, "-oMas"), GET_TAINTED);
3403
3404         /* -oMai: setting authenticated id */
3405
3406         else if (Ustrcmp(argrest, "ai") == 0)
3407           authenticated_id = string_copy_taint(
3408             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3409                                   EXIM_EMAILADDR_MAX, "-oMai"), GET_TAINTED);
3410
3411         /* -oMi: Set incoming interface address */
3412
3413         else if (Ustrcmp(argrest, "i") == 0)
3414           interface_address = string_copy_taint(
3415             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3416                                   EXIM_IPADDR_MAX, "-oMi"), GET_TAINTED);
3417
3418         /* -oMm: Message reference */
3419
3420         else if (Ustrcmp(argrest, "m") == 0)
3421           {
3422           if (!mac_ismsgid(argv[i+1]))
3423               exim_fail("-oMm must be a valid message ID\n");
3424           if (!f.trusted_config)
3425               exim_fail("-oMm must be called by a trusted user/config\n");
3426             message_reference = next_argv(argv, &i, argc, arg);
3427           }
3428
3429         /* -oMr: Received protocol */
3430
3431         else if (Ustrcmp(argrest, "r") == 0)
3432
3433           if (received_protocol)
3434             exim_fail("received_protocol is set already\n");
3435           else
3436             if (++i >= argc) badarg = TRUE;
3437             else
3438               received_protocol = string_copy_taint(
3439                 exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-oMr"),
3440                 GET_TAINTED);
3441
3442         /* -oMs: Set sender host name */
3443
3444         else if (Ustrcmp(argrest, "s") == 0)
3445           if (++i >= argc) badarg = TRUE;
3446           else
3447             sender_host_name = string_copy_taint(
3448               exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-oMs"),
3449               GET_TAINTED);
3450
3451         /* -oMt: Set sender ident */
3452
3453         else if (Ustrcmp(argrest, "t") == 0)
3454           if (++i >= argc) badarg = TRUE;
3455           else
3456             {
3457             sender_ident_set = TRUE;
3458             sender_ident = string_copy_taint(
3459               exim_str_fail_toolong(argv[i], EXIM_IDENTUSER_MAX, "-oMt"),
3460               GET_TAINTED);
3461             }
3462
3463         /* Else a bad argument */
3464
3465         else
3466           badarg = TRUE;
3467         }
3468         break;
3469
3470       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3471       seem to call this as -m (undocumented), so that is also accepted (see
3472       above). */
3473       /* -oo: An ancient flag for old-style addresses which still seems to
3474       crop up in some calls (see in SCO). */
3475
3476       case 'm':
3477       case 'o':
3478         if (*argrest) badarg = TRUE;
3479         break;
3480
3481       /* -oP <name>: set pid file path for daemon
3482          -oPX:       delete pid file of daemon */
3483
3484       case 'P':
3485         if (!f.running_in_test_harness && real_uid != root_uid && real_uid != exim_uid)
3486           exim_fail("exim: only uid=%d or uid=%d can use -oP and -oPX "
3487                     "(uid=%d euid=%d | %d)\n",
3488                     root_uid, exim_uid, getuid(), geteuid(), real_uid);
3489         if (!*argrest)
3490           if (++i < argc) override_pid_file_path = argv[i];
3491           else badarg = TRUE;
3492         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3493         else badarg = TRUE;
3494         break;
3495
3496
3497       /* -or <n>: set timeout for non-SMTP acceptance
3498          -os <n>: set timeout for SMTP acceptance */
3499
3500       case 'r':
3501       case 's':
3502         {
3503         int * tp = argrest[-1] == 'r'
3504           ? &arg_receive_timeout : &arg_smtp_receive_timeout;
3505         if (*argrest)
3506           *tp = readconf_readtime(argrest, 0, FALSE);
3507         else if (i+1 < argc)
3508           *tp = readconf_readtime(argv[++i], 0, FALSE);
3509
3510         if (*tp < 0)
3511           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3512         }
3513         break;
3514
3515       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3516       /* Limits: Is there a real limit we want here?  1024 is very arbitrary. */
3517
3518       case 'X':
3519         if (*argrest || ++i >= argc) badarg = TRUE;
3520         else override_local_interfaces = string_copy_taint(
3521           exim_str_fail_toolong(argv[i], 1024, "-oX"), GET_TAINTED);
3522         break;
3523
3524       /* -oY: Override creation of daemon notifier socket */
3525
3526       case 'Y':
3527         if (*argrest) badarg = TRUE;
3528         else f.notifier_socket_en = FALSE;
3529         break;
3530
3531       /* Unknown -o argument */
3532
3533       default:
3534         badarg = TRUE;
3535       }
3536     break;
3537
3538
3539     /* -ps: force Perl startup; -pd force delayed Perl startup */
3540
3541     case 'p':
3542     #ifdef EXIM_PERL
3543     if (*argrest == 's' && argrest[1] == 0)
3544       {
3545       perl_start_option = 1;
3546       break;
3547       }
3548     if (*argrest == 'd' && argrest[1] == 0)
3549       {
3550       perl_start_option = -1;
3551       break;
3552       }
3553     #endif
3554
3555     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3556     which sets the host protocol and host name */
3557
3558     if (!*argrest)
3559       argrest = next_argv(argv, &i, argc, arg);
3560
3561     if (*argrest)
3562       {
3563       uschar * hn = Ustrchr(argrest, ':');
3564
3565       if (received_protocol)
3566         exim_fail("received_protocol is set already\n");
3567
3568       if (!hn)
3569         received_protocol = string_copy_taint(
3570           exim_str_fail_toolong(argrest, EXIM_DRIVERNAME_MAX, "-p<protocol>"),
3571           GET_TAINTED);
3572       else
3573         {
3574         (void) exim_str_fail_toolong(argrest, (EXIM_DRIVERNAME_MAX+1+EXIM_HOSTNAME_MAX), "-p<protocol>:<host>");
3575         received_protocol = string_copyn_taint(argrest, hn - argrest, GET_TAINTED);
3576         sender_host_name = string_copy_taint(hn + 1, GET_TAINTED);
3577         }
3578       }
3579     break;
3580
3581     /* -q:  set up queue runs */
3582
3583     case 'q':
3584       {
3585       BOOL two_stage, first_del, force, thaw = FALSE, local;
3586
3587       receiving_message = FALSE;
3588
3589       /* -qq...: Do queue runs in a 2-stage manner */
3590
3591       if ((two_stage = *argrest == 'q'))
3592         argrest++;
3593
3594       /* -qi...: Do only first (initial) deliveries */
3595
3596       if ((first_del = *argrest == 'i'))
3597         argrest++;
3598
3599       /* -qf...: Run the queue, forcing deliveries
3600          -qff..: Ditto, forcing thawing as well */
3601
3602       if ((force = *argrest == 'f'))
3603         if ((thaw = *++argrest == 'f'))
3604           argrest++;
3605
3606       /* -q[f][f]l...: Run the queue only on local deliveries */
3607
3608       if ((local = *argrest == 'l'))
3609         argrest++;
3610
3611       /* -q[f][f][l][G<name>]... Work on the named queue */
3612
3613       if (*argrest == 'G')
3614         {
3615         int i;
3616         for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3617         exim_len_fail_toolong(i, EXIM_DRIVERNAME_MAX, "-q*G<name>");
3618         queue_name = string_copyn(argrest, i);
3619         argrest += i;
3620         if (*argrest == '/') argrest++;
3621         }
3622
3623       /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3624       only, optionally named, optionally starting from a given message id. */
3625
3626       if (!(list_queue || count_queue))
3627         {
3628         qrunner * q;
3629
3630         if (  !*argrest
3631            && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3632           {
3633           q = alloc_onetime_qrunner();
3634           if (i+1 < argc && mac_ismsgid(argv[i+1]))
3635             start_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3636           if (i+1 < argc && mac_ismsgid(argv[i+1]))
3637             stop_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3638           }
3639
3640       /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3641       forced, optionally local only, optionally named. */
3642
3643         else
3644           {
3645           int intvl;
3646           const uschar * s;
3647
3648           if (*argrest) s = argrest;
3649           else if (++i < argc) { badarg = TRUE; break; }
3650           else s = argv[i];
3651
3652           if ((intvl = readconf_readtime(s, 0, FALSE)) <= 0)
3653             exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3654
3655           for (qrunner * qq = qrunners; qq; qq = qq->next)
3656             if (  queue_name && qq->name && Ustrcmp(queue_name, qq->name) == 0
3657                || !queue_name && !qq->name)
3658               exim_fail("exim: queue-runner specified more than once\n");
3659
3660           q = alloc_qrunner();
3661           q->interval = intvl;
3662           }
3663
3664         q->name = *queue_name ? queue_name : NULL;      /* will be NULL for the default queue */
3665         q->queue_run_force = force;
3666         q->deliver_force_thaw = thaw;
3667         q->queue_run_first_delivery = first_del;
3668         q->queue_run_local = local;
3669         q->queue_2stage = two_stage;
3670         }
3671
3672       break;
3673       }
3674
3675
3676     case 'R':   /* Synonymous with -qR... */
3677     case 'S':   /* Synonymous with -qS... */
3678       {
3679       const uschar * tainted_selectstr;
3680       uschar * s;
3681
3682       receiving_message = FALSE;
3683
3684     /* -Rf:   As -R (below) but force all deliveries,
3685        -Rff:  Ditto, but also thaw all frozen messages,
3686        -Rr:   String is regex
3687        -Rrf:  Regex and force
3688        -Rrff: Regex and force and thaw
3689
3690        -S...: Like -R but works on sender.
3691
3692     in all cases provided there are no further characters in this
3693     argument. */
3694
3695       if (!qrunners) alloc_onetime_qrunner();
3696       qrunners->queue_2stage = f.queue_2stage;
3697       if (*argrest)
3698         for (int i = 0; i < nelem(rsopts); i++)
3699           if (Ustrcmp(argrest, rsopts[i]) == 0)
3700             {
3701             if (i != 2) qrunners->queue_run_force = TRUE;
3702             if (i >= 2)
3703               if (switchchar == 'R')
3704                 f.deliver_selectstring_regex = TRUE;
3705               else
3706                 f.deliver_selectstring_sender_regex = TRUE;
3707             if (i == 1 || i == 4) qrunners->deliver_force_thaw = TRUE;
3708             argrest += Ustrlen(rsopts[i]);
3709             }
3710
3711     /* -R or -S: Set string to match in addresses for forced queue run to
3712     pick out particular messages. */
3713
3714       /* Avoid attacks from people providing very long strings, and do so before
3715       we make copies. */
3716       if (*argrest)
3717         tainted_selectstr = argrest;
3718       else if (i+1 < argc)
3719         tainted_selectstr = argv[++i];
3720       else
3721         exim_fail("exim: string expected after %s\n", switchchar == 'R' ? "-R" : "-S");
3722
3723       s = string_copy_taint(
3724         exim_str_fail_toolong(tainted_selectstr, EXIM_EMAILADDR_MAX, "-R"),
3725         GET_TAINTED);
3726
3727       if (switchchar == 'R')
3728         deliver_selectstring = s;
3729       else
3730         deliver_selectstring_sender = s;
3731       }
3732     break;
3733
3734
3735     /* -r: an obsolete synonym for -f (see above) */
3736
3737     /* -Tqt is an option that is exclusively for use by the testing suite.
3738     It is not recognized in other circumstances. It allows for the setting up
3739     of explicit "queue times" so that various warning/retry things can be
3740     tested. Otherwise variability of clock ticks etc. cause problems. */
3741
3742     case 'T':
3743     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0 && ++i < argc)
3744       fudged_queue_times = string_copy_taint(argv[i], GET_TAINTED);
3745     else badarg = TRUE;
3746     break;
3747
3748
3749     /* -t: Set flag to extract recipients from body of message. */
3750
3751     case 't':
3752     if (!*argrest) extract_recipients = TRUE;
3753
3754     /* -ti: Set flag to extract recipients from body of message, and also
3755     specify that dot does not end the message. */
3756
3757     else if (Ustrcmp(argrest, "i") == 0)
3758       {
3759       extract_recipients = TRUE;
3760       f.dot_ends = FALSE;
3761       }
3762
3763     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3764
3765     #ifndef DISABLE_TLS
3766     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3767     #endif
3768
3769     else badarg = TRUE;
3770     break;
3771
3772
3773     /* -U: This means "initial user submission" in sendmail, apparently. The
3774     doc claims that in future sendmail may refuse syntactically invalid
3775     messages instead of fixing them. For the moment, we just ignore it. */
3776
3777     case 'U':
3778     break;
3779
3780
3781     /* -v: verify things - this is a very low-level debugging */
3782
3783     case 'v':
3784     if (!*argrest)
3785       {
3786       debug_selector |= D_v;
3787       debug_file = stderr;
3788       }
3789     else badarg = TRUE;
3790     break;
3791
3792
3793     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3794
3795       The -x flag tells the sendmail command that mail from a local
3796       mail program has National Language Support (NLS) extended characters
3797       in the body of the mail item. The sendmail command can send mail with
3798       extended NLS characters across networks that normally corrupts these
3799       8-bit characters.
3800
3801     As Exim is 8-bit clean, it just ignores this flag. */
3802
3803     case 'x':
3804     if (*argrest) badarg = TRUE;
3805     break;
3806
3807     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3808     logs to that file.  We swallow the parameter and otherwise ignore it. */
3809
3810     case 'X':
3811     if (!*argrest)
3812       if (++i >= argc)
3813         exim_fail("exim: string expected after -X\n");
3814     break;
3815
3816     /* -z: a line of text to log */
3817
3818     case 'z':
3819     if (!*argrest)
3820       if (++i < argc)
3821         log_oneline = string_copy_taint(
3822           exim_str_fail_toolong(argv[i], 2048, "-z logtext"),
3823           GET_TAINTED);
3824       else
3825         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3826     break;
3827
3828     /* All other initial characters are errors */
3829
3830     default:
3831     badarg = TRUE;
3832     break;
3833     }         /* End of high-level switch statement */
3834
3835   /* Failed to recognize the option, or syntax error */
3836
3837   if (badarg)
3838     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3839       "option %s\n", arg);
3840   }
3841
3842
3843 /* If -R or -S have been specified without -q, assume a single queue run. */
3844
3845  if ((deliver_selectstring || deliver_selectstring_sender) && !qrunners)
3846   alloc_onetime_qrunner();
3847
3848
3849 END_ARG:
3850  store_pool = old_pool;
3851  }
3852
3853 /* If usage_wanted is set we call the usage function - which never returns */
3854 if (usage_wanted) exim_usage(called_as);
3855
3856 /* Arguments have been processed. Check for incompatibilities. */
3857 if (  (  (smtp_input || extract_recipients || recipients_arg < argc)
3858       && (  f.daemon_listen || qrunners || bi_option
3859          || test_retry_arg >= 0 || test_rewrite_arg >= 0
3860          || filter_test != FTEST_NONE
3861          || msg_action_arg > 0 && !one_msg_action
3862       )  )
3863    || (  msg_action_arg > 0
3864       && (  f.daemon_listen || is_multiple_qrun() || list_options
3865          || checking && msg_action != MSG_LOAD
3866          || bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0
3867       )  )
3868    || (  (f.daemon_listen || is_multiple_qrun())
3869       && (  sender_address || list_options || list_queue || checking
3870          || bi_option
3871       )  )
3872    || f.daemon_listen && is_onetime_qrun()
3873    || f.inetd_wait_mode && qrunners
3874    || (  list_options
3875       && (  checking || smtp_input || extract_recipients
3876          || filter_test != FTEST_NONE || bi_option
3877       )  )
3878    || (  verify_address_mode
3879       && (  f.address_test_mode || smtp_input || extract_recipients
3880          || filter_test != FTEST_NONE || bi_option
3881       )  )
3882    || (  f.address_test_mode
3883       && (  smtp_input || extract_recipients || filter_test != FTEST_NONE
3884          || bi_option
3885       )  )
3886    || (  smtp_input
3887       && (sender_address || filter_test != FTEST_NONE || extract_recipients)
3888       )
3889    || deliver_selectstring && !qrunners
3890    || msg_action == MSG_LOAD && (!expansion_test || expansion_test_message)
3891    )
3892   exim_fail("exim: incompatible command-line options or arguments\n");
3893
3894 /* If debugging is set up, set the file and the file descriptor to pass on to
3895 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3896 to run in the foreground. */
3897
3898 if (debug_selector != 0)
3899   {
3900   debug_file = stderr;
3901   debug_fd = fileno(debug_file);
3902   f.background_daemon = FALSE;
3903   testharness_pause_ms(100);   /* lets caller finish */
3904   if (debug_selector != D_v)    /* -v only doesn't show this */
3905     {
3906     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3907       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3908       debug_selector);
3909     if (!version_printed)
3910       show_whats_supported(FALSE);
3911     }
3912   }
3913
3914 /* When started with root privilege, ensure that the limits on the number of
3915 open files and the number of processes (where that is accessible) are
3916 sufficiently large, or are unset, in case Exim has been called from an
3917 environment where the limits are screwed down. Not all OS have the ability to
3918 change some of these limits. */
3919
3920 if (unprivileged)
3921   {
3922   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3923   }
3924 else
3925   {
3926   struct rlimit rlp;
3927
3928 #ifdef RLIMIT_NOFILE
3929   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3930     {
3931     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3932       strerror(errno));
3933     rlp.rlim_cur = rlp.rlim_max = 0;
3934     }
3935
3936   /* I originally chose 1000 as a nice big number that was unlikely to
3937   be exceeded. It turns out that some older OS have a fixed upper limit of
3938   256. */
3939
3940   if (rlp.rlim_cur < 1000)
3941     {
3942     rlp.rlim_cur = rlp.rlim_max = 1000;
3943     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3944       {
3945       rlp.rlim_cur = rlp.rlim_max = 256;
3946       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3947         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3948           strerror(errno));
3949       }
3950     }
3951 #endif
3952
3953 #ifdef RLIMIT_NPROC
3954   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3955     {
3956     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3957       strerror(errno));
3958     rlp.rlim_cur = rlp.rlim_max = 0;
3959     }
3960
3961 # ifdef RLIM_INFINITY
3962   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3963     {
3964     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3965 # else
3966   if (rlp.rlim_cur < 1000)
3967     {
3968     rlp.rlim_cur = rlp.rlim_max = 1000;
3969 # endif
3970     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3971       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3972         strerror(errno));
3973     }
3974 #endif
3975   }
3976
3977 /* Exim is normally entered as root (but some special configurations are
3978 possible that don't do this). However, it always spins off sub-processes that
3979 set their uid and gid as required for local delivery. We don't want to pass on
3980 any extra groups that root may belong to, so we want to get rid of them all at
3981 this point.
3982
3983 We need to obey setgroups() at this stage, before possibly giving up root
3984 privilege for a changed configuration file, but later on we might need to
3985 check on the additional groups for the admin user privilege - can't do that
3986 till after reading the config, which might specify the exim gid. Therefore,
3987 save the group list here first. */
3988
3989 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3990   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3991
3992 /* There is a fundamental difference in some BSD systems in the matter of
3993 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3994 known not to be different. On the "different" systems there is a single group
3995 list, and the first entry in it is the current group. On all other versions of
3996 Unix there is a supplementary group list, which is in *addition* to the current
3997 group. Consequently, to get rid of all extraneous groups on a "standard" system
3998 you pass over 0 groups to setgroups(), while on a "different" system you pass
3999 over a single group - the current group, which is always the first group in the
4000 list. Calling setgroups() with zero groups on a "different" system results in
4001 an error return. The following code should cope with both types of system.
4002
4003  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
4004  the "setgroups() with zero groups" - and changes the egid.
4005  Thanks to that we had to stash the original_egid above, for use below
4006  in the call to exim_setugid().
4007
4008 However, if this process isn't running as root, setgroups() can't be used
4009 since you have to be root to run it, even if throwing away groups.
4010 Except, sigh, for Hurd - where you can.
4011 Not being root here happens only in some unusual configurations. */
4012
4013 if (  !unprivileged
4014 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
4015    && setgroups(0, NULL) != 0
4016 #endif
4017    && setgroups(1, group_list) != 0)
4018   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
4019
4020 /* If the configuration file name has been altered by an argument on the
4021 command line (either a new file name or a macro definition) and the caller is
4022 not root, or if this is a filter testing run, remove any setuid privilege the
4023 program has and run as the underlying user.
4024
4025 The exim user is locked out of this, which severely restricts the use of -C
4026 for some purposes.
4027
4028 Otherwise, set the real ids to the effective values (should be root unless run
4029 from inetd, which it can either be root or the exim uid, if one is configured).
4030
4031 There is a private mechanism for bypassing some of this, in order to make it
4032 possible to test lots of configurations automatically, without having either to
4033 recompile each time, or to patch in an actual configuration file name and other
4034 values (such as the path name). If running in the test harness, pretend that
4035 configuration file changes and macro definitions haven't happened. */
4036
4037 if ((                                            /* EITHER */
4038     (!f.trusted_config ||                          /* Config changed, or */
4039      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
4040     real_uid != root_uid &&                      /* Not root, and */
4041     !f.running_in_test_harness                     /* Not fudged */
4042     ) ||                                         /*   OR   */
4043     expansion_test                               /* expansion testing */
4044     ||                                           /*   OR   */
4045     filter_test != FTEST_NONE)                   /* Filter testing */
4046   {
4047   setgroups(group_count, group_list);
4048   exim_setugid(real_uid, real_gid, FALSE,
4049     US"-C, -D, -be or -bf forces real uid");
4050   removed_privilege = TRUE;
4051
4052   /* In the normal case when Exim is called like this, stderr is available
4053   and should be used for any logging information because attempts to write
4054   to the log will usually fail. To arrange this, we unset really_exim. However,
4055   if no stderr is available there is no point - we might as well have a go
4056   at the log (if it fails, syslog will be written).
4057
4058   Note that if the invoker is Exim, the logs remain available. Messing with
4059   this causes unlogged successful deliveries.  */
4060
4061   if (log_stderr && real_uid != exim_uid)
4062     f.really_exim = FALSE;
4063   }
4064
4065 /* Privilege is to be retained for the moment. It may be dropped later,
4066 depending on the job that this Exim process has been asked to do. For now, set
4067 the real uid to the effective so that subsequent re-execs of Exim are done by a
4068 privileged user. */
4069
4070 else
4071   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
4072
4073 /* If testing a filter, open the file(s) now, before wasting time doing other
4074 setups and reading the message. */
4075
4076 if (filter_test & FTEST_SYSTEM)
4077   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
4078     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
4079       strerror(errno));
4080
4081 if (filter_test & FTEST_USER)
4082   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
4083     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
4084       strerror(errno));
4085
4086 /* Initialise lookup_list
4087 If debugging, already called above via version reporting.
4088 In either case, we initialise the list of available lookups while running
4089 as root.  All dynamically modules are loaded from a directory which is
4090 hard-coded into the binary and is code which, if not a module, would be
4091 part of Exim already.  Ability to modify the content of the directory
4092 is equivalent to the ability to modify a setuid binary!
4093
4094 This needs to happen before we read the main configuration. */
4095 init_lookup_list();
4096
4097 /*XXX this excrescence could move to the testsuite standard config setup file */
4098 #ifdef SUPPORT_I18N
4099 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
4100 #endif
4101
4102 /* Read the main runtime configuration data; this gives up if there
4103 is a failure. It leaves the configuration file open so that the subsequent
4104 configuration data for delivery can be read if needed.
4105
4106 NOTE: immediately after opening the configuration file we change the working
4107 directory to "/"! Later we change to $spool_directory. We do it there, because
4108 during readconf_main() some expansion takes place already. */
4109
4110 /* Store the initial cwd before we change directories.  Can be NULL if the
4111 dir has already been unlinked. */
4112 initial_cwd = os_getcwd(NULL, 0);
4113 if (!initial_cwd && errno)
4114   exim_fail("exim: getting initial cwd failed: %s\n", strerror(errno));
4115
4116 if (initial_cwd && (strlen(CCS initial_cwd) >= BIG_BUFFER_SIZE))
4117   exim_fail("exim: initial cwd is far too long (%d)\n", Ustrlen(CCS initial_cwd));
4118
4119 /* checking:
4120     -be[m] expansion test        -
4121     -b[fF] filter test           new
4122     -bh[c] host test             -
4123     -bmalware malware_test_file  new
4124     -brt   retry test            new
4125     -brw   rewrite test          new
4126     -bt    address test          -
4127     -bv[s] address verify        -
4128    list_options:
4129     -bP <option> (except -bP config, which sets list_config)
4130
4131 If any of these options is set, we suppress warnings about configuration
4132 issues (currently about tls_advertise_hosts and keep_environment not being
4133 defined) */
4134
4135   {
4136   int old_pool = store_pool;
4137 #ifdef MEASURE_TIMING
4138   struct timeval t0;
4139   (void)gettimeofday(&t0, NULL);
4140 #endif
4141
4142   store_pool = POOL_CONFIG;
4143   readconf_main(checking || list_options);
4144   store_pool = old_pool;
4145
4146 #ifdef MEASURE_TIMING
4147   report_time_since(&t0, US"readconf_main (delta)");
4148 #endif
4149   }
4150
4151 /* Now in directory "/" */
4152
4153 if (cleanup_environment() == FALSE)
4154   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
4155
4156
4157 /* If an action on specific messages is requested, or if a daemon or queue
4158 runner is being started, we need to know if Exim was called by an admin user.
4159 This is the case if the real user is root or exim, or if the real group is
4160 exim, or if one of the supplementary groups is exim or a group listed in
4161 admin_groups. We don't fail all message actions immediately if not admin_user,
4162 since some actions can be performed by non-admin users. Instead, set admin_user
4163 for later interrogation. */
4164
4165 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
4166   f.admin_user = TRUE;
4167 else
4168   for (int i = 0; i < group_count && !f.admin_user; i++)
4169     if (group_list[i] == exim_gid)
4170       f.admin_user = TRUE;
4171     else if (admin_groups)
4172       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
4173         if (admin_groups[j] == group_list[i])
4174           f.admin_user = TRUE;
4175
4176 /* Another group of privileged users are the trusted users. These are root,
4177 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
4178 are permitted to specify sender_addresses with -f on the command line, and
4179 other message parameters as well. */
4180
4181 if (real_uid == root_uid || real_uid == exim_uid)
4182   f.trusted_caller = TRUE;
4183 else
4184   {
4185   if (trusted_users)
4186     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
4187       if (trusted_users[i] == real_uid)
4188         f.trusted_caller = TRUE;
4189
4190   if (trusted_groups)
4191     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
4192       if (trusted_groups[i] == real_gid)
4193         f.trusted_caller = TRUE;
4194       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
4195         if (trusted_groups[i] == group_list[j])
4196           f.trusted_caller = TRUE;
4197   }
4198
4199 /* At this point, we know if the user is privileged and some command-line
4200 options become possibly impermissible, depending upon the configuration file. */
4201
4202 if (checking && commandline_checks_require_admin && !f.admin_user)
4203   exim_fail("exim: those command-line flags are set to require admin\n");
4204
4205 /* Handle the decoding of logging options. */
4206
4207 decode_bits(log_selector, log_selector_size, log_notall,
4208   log_selector_string, log_options, log_options_count, US"log", 0);
4209
4210 DEBUG(D_any)
4211   {
4212   debug_printf("configuration file is %s\n", config_main_filename);
4213   debug_printf("log selectors =");
4214   for (int i = 0; i < log_selector_size; i++)
4215     debug_printf(" %08x", log_selector[i]);
4216   debug_printf("\n");
4217   }
4218
4219 /* If domain literals are not allowed, check the sender address that was
4220 supplied with -f. Ditto for a stripped trailing dot. */
4221
4222 if (sender_address)
4223   {
4224   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
4225     exim_fail("exim: bad -f address \"%s\": domain literals not "
4226       "allowed\n", sender_address);
4227   if (f_end_dot && !strip_trailing_dot)
4228     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
4229       "(trailing dot not allowed)\n", sender_address);
4230   }
4231
4232 /* See if an admin user overrode our logging. */
4233
4234 if (cmdline_syslog_name)
4235   if (f.admin_user)
4236     {
4237     syslog_processname = cmdline_syslog_name;
4238     log_file_path = string_copy(CUS"syslog");
4239     }
4240   else
4241     /* not a panic, non-privileged users should not be able to spam paniclog */
4242     exim_fail(
4243         "exim: you lack sufficient privilege to specify syslog process name\n");
4244
4245 /* Paranoia check of maximum lengths of certain strings. There is a check
4246 on the length of the log file path in log.c, which will come into effect
4247 if there are any calls to write the log earlier than this. However, if we
4248 get this far but the string is very long, it is better to stop now than to
4249 carry on and (e.g.) receive a message and then have to collapse. The call to
4250 log_write() from here will cause the ultimate panic collapse if the complete
4251 file name exceeds the buffer length. */
4252
4253 if (Ustrlen(log_file_path) > 200)
4254   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4255     "log_file_path is longer than 200 chars: aborting");
4256
4257 if (Ustrlen(pid_file_path) > 200)
4258   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4259     "pid_file_path is longer than 200 chars: aborting");
4260
4261 if (Ustrlen(spool_directory) > 200)
4262   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4263     "spool_directory is longer than 200 chars: aborting");
4264
4265 /* Length check on the process name given to syslog for its TAG field,
4266 which is only permitted to be 32 characters or less. See RFC 3164. */
4267
4268 if (Ustrlen(syslog_processname) > 32)
4269   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4270     "syslog_processname is longer than 32 chars: aborting");
4271
4272 if (log_oneline)
4273   if (f.admin_user)
4274     {
4275     log_write(0, LOG_MAIN, "%s", log_oneline);
4276     return EXIT_SUCCESS;
4277     }
4278   else
4279     return EXIT_FAILURE;
4280
4281 /* In some operating systems, the environment variable TMPDIR controls where
4282 temporary files are created; Exim doesn't use these (apart from when delivering
4283 to MBX mailboxes), but called libraries such as DBM libraries may require them.
4284 If TMPDIR is found in the environment, reset it to the value defined in the
4285 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
4286 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
4287 EXIM_TMPDIR by the build scripts.
4288 */
4289
4290 #ifdef EXIM_TMPDIR
4291   if (environ) for (uschar ** p = USS environ; *p; p++)
4292     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
4293       {
4294       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
4295       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
4296       *p = newp;
4297       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
4298       }
4299 #endif
4300
4301 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
4302 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
4303 we may need to get rid of a bogus timezone setting. This can arise when Exim is
4304 called by a user who has set the TZ variable. This then affects the timestamps
4305 in log files and in Received: headers, and any created Date: header lines. The
4306 required timezone is settable in the configuration file, so nothing can be done
4307 about this earlier - but hopefully nothing will normally be logged earlier than
4308 this. We have to make a new environment if TZ is wrong, but don't bother if
4309 timestamps_utc is set, because then all times are in UTC anyway. */
4310
4311 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
4312   f.timestamps_utc = TRUE;
4313 else
4314   {
4315   uschar *envtz = US getenv("TZ");
4316   if (envtz
4317       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
4318       : timezone_string != NULL
4319      )
4320     {
4321     uschar **p = USS environ;
4322     uschar **new;
4323     uschar **newp;
4324     int count = 0;
4325     if (environ) while (*p++) count++;
4326     if (!envtz) count++;
4327     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4328     if (environ) for (p = USS environ; *p; p++)
4329       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4330     if (timezone_string)
4331       {
4332       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4333       sprintf(CS *newp++, "TZ=%s", timezone_string);
4334       }
4335     *newp = NULL;
4336     environ = CSS new;
4337     tzset();
4338     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4339       tod_stamp(tod_log));
4340     }
4341   }
4342
4343 /* Handle the case when we have removed the setuid privilege because of -C or
4344 -D. This means that the caller of Exim was not root.
4345
4346 There is a problem if we were running as the Exim user. The sysadmin may
4347 expect this case to retain privilege because "the binary was called by the
4348 Exim user", but it hasn't, because either the -D option set macros, or the
4349 -C option set a non-trusted configuration file. There are two possibilities:
4350
4351   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4352       to do message deliveries. Thus, the fact that it is running as a
4353       non-privileged user is plausible, and might be wanted in some special
4354       configurations. However, really_exim will have been set false when
4355       privilege was dropped, to stop Exim trying to write to its normal log
4356       files. Therefore, re-enable normal log processing, assuming the sysadmin
4357       has set up the log directory correctly.
4358
4359   (2) If deliver_drop_privilege is not set, the configuration won't work as
4360       apparently intended, and so we log a panic message. In order to retain
4361       root for -C or -D, the caller must either be root or be invoking a
4362       trusted configuration file (when deliver_drop_privilege is false). */
4363
4364 if (  removed_privilege
4365    && (!f.trusted_config || opt_D_used)
4366    && real_uid == exim_uid)
4367   if (deliver_drop_privilege)
4368     f.really_exim = TRUE; /* let logging work normally */
4369   else
4370     log_write(0, LOG_MAIN|LOG_PANIC,
4371       "exim user lost privilege for using %s option",
4372       f.trusted_config? "-D" : "-C");
4373
4374 /* Start up Perl interpreter if Perl support is configured and there is a
4375 perl_startup option, and the configuration or the command line specifies
4376 initializing starting. Note that the global variables are actually called
4377 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4378
4379 #ifdef EXIM_PERL
4380 if (perl_start_option != 0)
4381   opt_perl_at_start = (perl_start_option > 0);
4382 if (opt_perl_at_start && opt_perl_startup != NULL)
4383   {
4384   uschar *errstr;
4385   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4386   if ((errstr = init_perl(opt_perl_startup)))
4387     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4388   opt_perl_started = TRUE;
4389   }
4390 #endif /* EXIM_PERL */
4391
4392 /* Log the arguments of the call if the configuration file said so. This is
4393 a debugging feature for finding out what arguments certain MUAs actually use.
4394 Don't attempt it if logging is disabled, or if listing variables or if
4395 verifying/testing addresses or expansions. */
4396
4397 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4398    && f.really_exim && !list_options && !checking)
4399   {
4400   uschar *p = big_buffer;
4401   Ustrcpy(p, US"cwd= (failed)");
4402
4403   if (!initial_cwd)
4404     p += 13;
4405   else
4406     {
4407     p += 4;
4408     snprintf(CS p, big_buffer_size - (p - big_buffer), "%s", CCS initial_cwd);
4409     p += Ustrlen(CCS p);
4410     }
4411
4412   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4413   while (*p) p++;
4414   for (int i = 0; i < argc; i++)
4415     {
4416     int len = Ustrlen(argv[i]);
4417     const uschar *printing;
4418     uschar *quote;
4419     if (p + len + 8 >= big_buffer + big_buffer_size)
4420       {
4421       Ustrcpy(p, US" ...");
4422       log_write(0, LOG_MAIN, "%s", big_buffer);
4423       Ustrcpy(big_buffer, US"...");
4424       p = big_buffer + 3;
4425       }
4426     printing = string_printing(argv[i]);
4427     if (!*printing) quote = US"\"";
4428     else
4429       {
4430       const uschar *pp = printing;
4431       quote = US"";
4432       while (*pp) if (isspace(*pp++)) { quote = US"\""; break; }
4433       }
4434     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4435       (p - big_buffer) - 4), printing, quote);
4436     }
4437
4438   if (LOGGING(arguments))
4439     log_write(0, LOG_MAIN, "%s", big_buffer);
4440   else
4441     debug_printf("%s\n", big_buffer);
4442   }
4443
4444 /* Set the working directory to be the top-level spool directory. We don't rely
4445 on this in the code, which always uses fully qualified names, but it's useful
4446 for core dumps etc. Don't complain if it fails - the spool directory might not
4447 be generally accessible and calls with the -C option (and others) have lost
4448 privilege by now. Before the chdir, we try to ensure that the directory exists.
4449 */
4450
4451 if (Uchdir(spool_directory) != 0)
4452   {
4453   (void) directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4454   (void) Uchdir(spool_directory);
4455   }
4456
4457 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4458 alias file. Exim doesn't have such a concept, but this call is screwed into
4459 Sun's YP makefiles. Handle this by calling a configured script, as the real
4460 user who called Exim. The -oA option can be used to pass an argument to the
4461 script. */
4462
4463 if (bi_option)
4464   {
4465   (void) fclose(config_file);
4466   if (bi_command && *bi_command)
4467     {
4468     int i = 0;
4469     const uschar * argv[3];
4470     argv[i++] = bi_command;     /* nonexpanded option so assume untainted */
4471     if (alias_arg) argv[i++] = alias_arg;
4472     argv[i++] = NULL;
4473
4474     setgroups(group_count, group_list);
4475     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4476
4477     DEBUG(D_exec) debug_printf("exec '%.256s' %s%.256s%s\n", argv[0],
4478       argv[1] ? "'" : "", argv[1] ? argv[1] : US"", argv[1] ? "'" : "");
4479
4480     execv(CS argv[0], (char *const *)argv);
4481     exim_fail("exim: exec '%s' failed: %s\n", argv[0], strerror(errno));
4482     }
4483   else
4484     {
4485     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4486     exit(EXIT_SUCCESS);
4487     }
4488   }
4489
4490 /* We moved the admin/trusted check to be immediately after reading the
4491 configuration file.  We leave these prints here to ensure that syslog setup,
4492 logfile setup, and so on has already happened. */
4493
4494 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4495 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4496
4497 /* Only an admin user may start the daemon or force a queue run in the default
4498 configuration, but the queue run restriction can be relaxed. Only an admin
4499 user may request that a message be returned to its sender forthwith. Only an
4500 admin user may specify a debug level greater than D_v (because it might show
4501 passwords, etc. in lookup queries). Only an admin user may request a queue
4502 count. Only an admin user can use the test interface to scan for email
4503 (because Exim will be in the spool dir and able to look at mails). */
4504
4505 if (!f.admin_user)
4506   {
4507   BOOL debugset = (debug_selector & ~D_v) != 0;
4508   if (  deliver_give_up || f.daemon_listen || malware_test_file
4509      || count_queue && queue_list_requires_admin
4510      || list_queue && queue_list_requires_admin
4511      || qrunners && prod_requires_admin
4512      || queue_name_dest && prod_requires_admin
4513      || debugset && !f.running_in_test_harness
4514      )
4515     exim_fail("exim:%s permission denied; not admin\n",
4516               debugset ? " debugging" : "");
4517   }
4518
4519 /* If the real user is not root or the exim uid, the argument for passing
4520 in an open TCP/IP connection for another message is not permitted, nor is
4521 running with the -N option for any delivery action, unless this call to exim is
4522 one that supplied an input message, or we are using a patched exim for
4523 regression testing. */
4524
4525 if (  real_uid != root_uid && real_uid != exim_uid
4526    && (  continue_hostname
4527       || (  f.dont_deliver
4528          && (qrunners || f.daemon_listen || msg_action_arg > 0)
4529       )  )
4530    && !f.running_in_test_harness
4531    )
4532   exim_fail("exim: Permission denied; not exim user or root\n");
4533
4534 /* If the caller is not trusted, certain arguments are ignored when running for
4535 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4536 Note that authority for performing certain actions on messages is tested in the
4537 queue_action() function. */
4538
4539 if (!f.trusted_caller && !checking)
4540   {
4541   sender_host_name = sender_host_address = interface_address =
4542     sender_ident = received_protocol = NULL;
4543   sender_host_port = interface_port = 0;
4544   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4545   }
4546
4547 /* If a sender host address is set, extract the optional port number off the
4548 end of it and check its syntax. Do the same thing for the interface address.
4549 Exim exits if the syntax is bad. */
4550
4551 else
4552   {
4553   if (sender_host_address)
4554     sender_host_port = check_port(sender_host_address);
4555   if (interface_address)
4556     interface_port = check_port(interface_address);
4557   }
4558
4559 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4560 if (flag_G)
4561   {
4562   if (f.trusted_caller)
4563     {
4564     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4565     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4566     }
4567   else
4568     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4569   }
4570
4571 /* If an SMTP message is being received check to see if the standard input is a
4572 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4573 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4574 barf. */
4575
4576 if (smtp_input)
4577   {
4578   union sockaddr_46 inetd_sock;
4579   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4580   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4581     {
4582     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4583     if (family == AF_INET || family == AF_INET6)
4584       {
4585       union sockaddr_46 interface_sock;
4586       size = sizeof(interface_sock);
4587
4588       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4589         interface_address = host_ntoa(-1, &interface_sock, NULL,
4590           &interface_port);
4591
4592       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4593
4594       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4595         {
4596         f.is_inetd = TRUE;
4597         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4598           NULL, &sender_host_port);
4599         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4600           "inetd is not supported when mua_wrapper is set");
4601         }
4602       else
4603         exim_fail(
4604           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4605       }
4606     }
4607   }
4608
4609 /* If the load average is going to be needed while receiving a message, get it
4610 now for those OS that require the first call to os_getloadavg() to be done as
4611 root. There will be further calls later for each message received. */
4612
4613 #ifdef LOAD_AVG_NEEDS_ROOT
4614 if (  receiving_message
4615    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4616   load_average = OS_GETLOADAVG();
4617 #endif
4618
4619 /* The queue_only configuration option can be overridden by -odx on the command
4620 line, except that if queue_only_override is false, queue_only cannot be unset
4621 from the command line. */
4622
4623 if (queue_only_set && (queue_only_override || arg_queue_only))
4624   queue_only = arg_queue_only;
4625
4626 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4627 -or and -os. */
4628
4629 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4630 if (arg_smtp_receive_timeout >= 0)
4631   smtp_receive_timeout = arg_smtp_receive_timeout;
4632
4633 /* If Exim was started with root privilege, unless we have already removed the
4634 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4635 except when starting the daemon or doing some kind of delivery or address
4636 testing (-bt). These are the only cases when root need to be retained. We run
4637 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4638 retained only for starting the daemon. We always do the initgroups() in this
4639 situation (controlled by the TRUE below), in order to be as close as possible
4640 to the state Exim usually runs in. */
4641
4642 if (  !unprivileged                             /* originally had root AND */
4643    && !removed_privilege                        /* still got root AND      */
4644    && !f.daemon_listen                          /* not starting the daemon */
4645    && (!qrunners || is_onetime_qrun())          /* (either kind of daemon) */
4646    && (                                         /*    AND EITHER           */
4647          deliver_drop_privilege                 /* requested unprivileged  */
4648       || (                                      /*       OR                */
4649             !qrunners                           /* not running the queue   */
4650          && (  msg_action_arg < 0               /*       and               */
4651             || msg_action != MSG_DELIVER        /* not delivering          */
4652             )                                   /*       and               */
4653          && (!checking || !f.address_test_mode) /* not address checking    */
4654          && !rcpt_verify_quota                  /* and not quota checking  */
4655    )  )  )
4656   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4657
4658 /* When we are retaining a privileged uid, we still change to the exim gid. */
4659
4660 else
4661   {
4662   int rv;
4663   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4664   rv = setgid(exim_gid);
4665   /* Impact of failure is that some stuff might end up with an incorrect group.
4666   We track this for failures from root, since any attempt to change privilege
4667   by root should succeed and failures should be examined.  For non-root,
4668   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4669   no need to complain then. */
4670   if (rv == -1)
4671     if (!(unprivileged || removed_privilege))
4672       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4673     else
4674       {
4675       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4676           (long int)exim_gid, strerror(errno));
4677       }
4678   }
4679
4680 /* Handle a request to scan a file for malware */
4681 if (malware_test_file)
4682   {
4683 #ifdef WITH_CONTENT_SCAN
4684   int result;
4685   set_process_info("scanning file for malware");
4686   if ((result = malware_in_file(malware_test_file)) == FAIL)
4687     {
4688     printf("No malware found.\n");
4689     exit(EXIT_SUCCESS);
4690     }
4691   if (result != OK)
4692     {
4693     printf("Malware lookup returned non-okay/fail: %d\n", result);
4694     exit(EXIT_FAILURE);
4695     }
4696   if (malware_name)
4697     printf("Malware found: %s\n", malware_name);
4698   else
4699     printf("Malware scan detected malware of unknown name.\n");
4700 #else
4701   printf("Malware scanning not enabled at compile time.\n");
4702 #endif
4703   exit(EXIT_FAILURE);
4704   }
4705
4706 /* Handle a request to list the delivery queue */
4707
4708 if (list_queue)
4709   {
4710   set_process_info("listing the queue");
4711   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4712   exit(EXIT_SUCCESS);
4713   }
4714
4715 /* Handle a request to count the delivery queue */
4716
4717 if (count_queue)
4718   {
4719   set_process_info("counting the queue");
4720   fprintf(stdout, "%u\n", queue_count());
4721   exit(EXIT_SUCCESS);
4722   }
4723
4724 /* Handle actions on specific messages, except for the force delivery and
4725 message load actions, which are done below. Some actions take a whole list of
4726 message ids, which are known to continue up to the end of the arguments. Others
4727 take a single message id and then operate on the recipients list. */
4728
4729 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4730   {
4731   int yield = EXIT_SUCCESS;
4732   set_process_info("acting on specified messages");
4733
4734   /* ACL definitions may be needed when removing a message (-Mrm) because
4735   event_action gets expanded */
4736
4737   if (msg_action == MSG_REMOVE)
4738     {
4739     int old_pool = store_pool;
4740     store_pool = POOL_CONFIG;
4741     readconf_rest();
4742     store_pool = old_pool;
4743     store_writeprotect(POOL_CONFIG);
4744     }
4745
4746   if (!one_msg_action)
4747     {
4748     for (i = msg_action_arg; i < argc; i++)
4749       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4750         yield = EXIT_FAILURE;
4751     switch (msg_action)
4752       {
4753       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4754       default: printf("\n"); break;
4755       }
4756     }
4757
4758   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4759     recipients_arg)) yield = EXIT_FAILURE;
4760   exit(yield);
4761   }
4762
4763 /* We used to set up here to skip reading the ACL section, on
4764  (msg_action_arg > 0 || (is_onetime_qrun() && !f.daemon_listen)
4765 Now, since the intro of the ${acl } expansion, ACL definitions may be
4766 needed in transports so we lost the optimisation. */
4767
4768   {
4769   int old_pool = store_pool;
4770 #ifdef MEASURE_TIMING
4771   struct timeval t0;
4772   (void)gettimeofday(&t0, NULL);
4773 #endif
4774
4775   store_pool = POOL_CONFIG;
4776   readconf_rest();
4777   store_pool = old_pool;
4778
4779   /* -be can add macro definitions, needing to link to the macro structure
4780   chain.  Otherwise, make the memory used for config data readonly. */
4781
4782   if (!expansion_test)
4783     store_writeprotect(POOL_CONFIG);
4784
4785 #ifdef MEASURE_TIMING
4786   report_time_since(&t0, US"readconf_rest (delta)");
4787 #endif
4788   }
4789
4790 /* Handle a request to check quota */
4791 if (rcpt_verify_quota)
4792   if (real_uid != root_uid && real_uid != exim_uid)
4793     exim_fail("exim: Permission denied\n");
4794   else if (recipients_arg >= argc)
4795     exim_fail("exim: missing recipient for quota check\n");
4796   else
4797     {
4798     verify_quota(US argv[recipients_arg]);      /*XXX we lose track of const here */
4799     exim_exit(EXIT_SUCCESS);
4800     }
4801
4802 /* Handle the -brt option. This is for checking out retry configurations.
4803 The next three arguments are a domain name or a complete address, and
4804 optionally two error numbers. All it does is to call the function that
4805 scans the retry configuration data. */
4806
4807 if (test_retry_arg >= 0)
4808   {
4809   retry_config *yield;
4810   int basic_errno = 0;
4811   int more_errno = 0;
4812   const uschar *s1, *s2;
4813
4814   if (test_retry_arg >= argc)
4815     {
4816     printf("-brt needs a domain or address argument\n");
4817     exim_exit(EXIT_FAILURE);
4818     }
4819   s1 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_EMAILADDR_MAX, "-brt");
4820   s2 = NULL;
4821
4822   /* If the first argument contains no @ and no . it might be a local user
4823   or it might be a single-component name. Treat as a domain. */
4824
4825   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4826     {
4827     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4828       "being \ntreated as a one-component domain, not as a local part.\n\n",
4829       s1);
4830     }
4831
4832   /* There may be an optional second domain arg. */
4833
4834   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4835     s2 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_DOMAINNAME_MAX, "-brt 2nd");
4836
4837   /* The final arg is an error name */
4838
4839   if (test_retry_arg < argc)
4840     {
4841     const uschar *ss = exim_str_fail_toolong(argv[test_retry_arg], EXIM_DRIVERNAME_MAX, "-brt 3rd");
4842     uschar *error =
4843       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4844     if (error != NULL)
4845       {
4846       printf("%s\n", CS error);
4847       return EXIT_FAILURE;
4848       }
4849
4850     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4851     code > 100 as an error is for matching codes to the decade. Turn them into
4852     a real error code, off the decade. */
4853
4854     if (basic_errno == ERRNO_MAIL4XX ||
4855         basic_errno == ERRNO_RCPT4XX ||
4856         basic_errno == ERRNO_DATA4XX)
4857       {
4858       int code = (more_errno >> 8) & 255;
4859       if (code == 255)
4860         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4861       else if (code > 100)
4862         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4863       }
4864     }
4865
4866   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4867     printf("No retry information found\n");
4868   else
4869     {
4870     more_errno = yield->more_errno;
4871     printf("Retry rule: %s  ", yield->pattern);
4872
4873     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4874       {
4875       printf("quota%s%s  ",
4876         (more_errno > 0)? "_" : "",
4877         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4878       }
4879     else if (yield->basic_errno == ECONNREFUSED)
4880       {
4881       printf("refused%s%s  ",
4882         (more_errno > 0)? "_" : "",
4883         (more_errno == 'M')? "MX" :
4884         (more_errno == 'A')? "A" : "");
4885       }
4886     else if (yield->basic_errno == ETIMEDOUT)
4887       {
4888       printf("timeout");
4889       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4890       more_errno &= 255;
4891       if (more_errno != 0) printf("_%s",
4892         (more_errno == 'M')? "MX" : "A");
4893       printf("  ");
4894       }
4895     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4896       printf("auth_failed  ");
4897     else printf("*  ");
4898
4899     for (retry_rule * r = yield->rules; r; r = r->next)
4900       {
4901       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4902       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4903       if (r->rule == 'G')
4904         {
4905         int x = r->p2;
4906         int f = x % 1000;
4907         int d = 100;
4908         printf(",%d.", x/1000);
4909         do
4910           {
4911           printf("%d", f/d);
4912           f %= d;
4913           d /= 10;
4914           }
4915         while (f != 0);
4916         }
4917       printf("; ");
4918       }
4919
4920     printf("\n");
4921     }
4922   exim_exit(EXIT_SUCCESS);
4923   }
4924
4925 /* Handle a request to list one or more configuration options */
4926 /* If -n was set, we suppress some information */
4927
4928 if (list_options)
4929   {
4930   BOOL fail = FALSE;
4931   set_process_info("listing variables");
4932   if (recipients_arg >= argc)
4933     fail = !readconf_print(US"all", NULL, flag_n);
4934   else for (i = recipients_arg; i < argc; i++)
4935     {
4936     if (i < argc - 1 &&
4937         (Ustrcmp(argv[i], "router") == 0 ||
4938          Ustrcmp(argv[i], "transport") == 0 ||
4939          Ustrcmp(argv[i], "authenticator") == 0 ||
4940          Ustrcmp(argv[i], "macro") == 0 ||
4941          Ustrcmp(argv[i], "environment") == 0))
4942       {
4943       fail |= !readconf_print(exim_str_fail_toolong(argv[i+1], EXIM_DRIVERNAME_MAX, "-bP name"), argv[i], flag_n);
4944       i++;
4945       }
4946     else
4947       fail = !readconf_print(exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-bP item"), NULL, flag_n);
4948     }
4949   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS);
4950   }
4951
4952 if (list_config)
4953   {
4954   set_process_info("listing config");
4955   exim_exit(readconf_print(US"config", NULL, flag_n)
4956                 ? EXIT_SUCCESS : EXIT_FAILURE);
4957   }
4958
4959
4960 /* Initialise subsystems as required. */
4961
4962 tcp_init();
4963
4964 /* Handle a request to deliver one or more messages that are already on the
4965 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4966 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4967
4968 Delivery of specific messages is typically used for a small number when
4969 prodding by hand (when the option forced_delivery will be set) or when
4970 re-execing to regain root privilege. Each message delivery must happen in a
4971 separate process, so we fork a process for each one, and run them sequentially
4972 so that debugging output doesn't get intertwined, and to avoid spawning too
4973 many processes if a long list is given. However, don't fork for the last one;
4974 this saves a process in the common case when Exim is called to deliver just one
4975 message. */
4976
4977 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4978   {
4979   if (prod_requires_admin && !f.admin_user)
4980     {
4981     fprintf(stderr, "exim: Permission denied\n");
4982     exim_exit(EXIT_FAILURE);
4983     }
4984   set_process_info("delivering specified messages");
4985   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4986   for (i = msg_action_arg; i < argc; i++)
4987     {
4988     int status;
4989     pid_t pid;
4990     /*XXX This use of argv[i] for msg_id should really be tainted, but doing
4991     that runs into a later copy into the untainted global message_id[] */
4992     /*XXX Do we need a length limit check here? */
4993     if (i == argc - 1)
4994       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4995     else if ((pid = exim_fork(US"cmdline-delivery")) == 0)
4996       {
4997       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4998       exim_underbar_exit(EXIT_SUCCESS);
4999       }
5000     else if (pid < 0)
5001       {
5002       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
5003         strerror(errno));
5004       exim_exit(EXIT_FAILURE);
5005       }
5006     else wait(&status);
5007     }
5008   exim_exit(EXIT_SUCCESS);
5009   }
5010
5011
5012 /* If only a single queue run is requested, without SMTP listening, we can just
5013 turn into a queue runner, with an optional starting message id. */
5014
5015 if (is_onetime_qrun() && !f.daemon_listen)
5016   {
5017   single_queue_run(qrunners, start_queue_run_id, stop_queue_run_id);
5018   exim_exit(EXIT_SUCCESS);
5019   }
5020
5021
5022 /* Find the login name of the real user running this process. This is always
5023 needed when receiving a message, because it is written into the spool file. It
5024 may also be used to construct a from: or a sender: header, and in this case we
5025 need the user's full name as well, so save a copy of it, checked for RFC822
5026 syntax and munged if necessary, if it hasn't previously been set by the -F
5027 argument. We may try to get the passwd entry more than once, in case NIS or
5028 other delays are in evidence. Save the home directory for use in filter testing
5029 (only). */
5030
5031 for (i = 0;;)
5032   {
5033   if ((pw = getpwuid(real_uid)) != NULL)
5034     {
5035     originator_login = string_copy(US pw->pw_name);
5036     originator_home = string_copy(US pw->pw_dir);
5037
5038     /* If user name has not been set by -F, set it from the passwd entry
5039     unless -f has been used to set the sender address by a trusted user. */
5040
5041     if (!originator_name)
5042       {
5043       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
5044         {
5045         uschar *name = US pw->pw_gecos;
5046         uschar *amp = Ustrchr(name, '&');
5047         uschar buffer[256];
5048
5049         /* Most Unix specify that a '&' character in the gecos field is
5050         replaced by a copy of the login name, and some even specify that
5051         the first character should be upper cased, so that's what we do. */
5052
5053         if (amp)
5054           {
5055           int loffset;
5056           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
5057             (int)(amp - name), name, &loffset, originator_login, amp + 1);
5058           buffer[loffset] = toupper(buffer[loffset]);
5059           name = buffer;
5060           }
5061
5062         /* If a pattern for matching the gecos field was supplied, apply
5063         it and then expand the name string. */
5064
5065         GET_OPTION("gecos_pattern");
5066         GET_OPTION("gecos_name");
5067         if (gecos_pattern && gecos_name)
5068           {
5069           const pcre2_code *re;
5070           re = regex_must_compile(gecos_pattern, MCS_NOFLAGS, TRUE); /* Use malloc */
5071
5072           if (regex_match_and_setup(re, name, 0, -1))
5073             {
5074             uschar *new_name = expand_string(gecos_name);
5075             expand_nmax = -1;
5076             if (new_name)
5077               {
5078               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
5079                 "gecos field \"%s\"\n", new_name, name);
5080               name = new_name;
5081               }
5082             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
5083               "\"%s\": %s\n", gecos_name, expand_string_message);
5084             }
5085           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
5086             "gecos field \"%s\"\n", gecos_pattern, name);
5087           store_free((void *)re);
5088           }
5089         originator_name = string_copy(name);
5090         }
5091
5092       /* A trusted caller has used -f but not -F */
5093
5094       else originator_name = US"";
5095       }
5096
5097     /* Break the retry loop */
5098
5099     break;
5100     }
5101
5102   if (++i > finduser_retries) break;
5103   sleep(1);
5104   }
5105
5106 /* If we cannot get a user login, log the incident and give up, unless the
5107 configuration specifies something to use. When running in the test harness,
5108 any setting of unknown_login overrides the actual name. */
5109
5110 if (!originator_login || f.running_in_test_harness)
5111   {
5112   GET_OPTION("unknown_login");
5113   if (unknown_login)
5114     {
5115     originator_login = expand_string(unknown_login);
5116     if (!originator_name && unknown_username)
5117       originator_name = expand_string(unknown_username);
5118     if (!originator_name) originator_name = US"";
5119     }
5120   if (!originator_login)
5121     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
5122       (int)real_uid);
5123   }
5124
5125 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
5126 RFC822 address.*/
5127
5128 originator_name = US parse_fix_phrase(originator_name, Ustrlen(originator_name));
5129
5130 /* If a message is created by this call of Exim, the uid/gid of its originator
5131 are those of the caller. These values are overridden if an existing message is
5132 read in from the spool. */
5133
5134 originator_uid = real_uid;
5135 originator_gid = real_gid;
5136
5137 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
5138   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
5139
5140 /* Run in daemon and/or queue-running mode. The function daemon_go() never
5141 returns. We leave this till here so that the originator_ fields are available
5142 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
5143 mode. */
5144
5145 if (f.daemon_listen || f.inetd_wait_mode || is_multiple_qrun())
5146   {
5147   if (mua_wrapper)
5148     {
5149     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
5150     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
5151       "mua_wrapper is set");
5152     }
5153
5154 # ifndef DISABLE_TLS
5155   /* This also checks that the library linkage is working and we can call
5156   routines in it, so call even if tls_require_ciphers is unset */
5157     {
5158 # ifdef MEASURE_TIMING
5159     struct timeval t0;
5160     (void)gettimeofday(&t0, NULL);
5161 # endif
5162     if (!tls_dropprivs_validate_require_cipher(FALSE))
5163       exit(1);
5164 # ifdef MEASURE_TIMING
5165     report_time_since(&t0, US"validate_ciphers (delta)");
5166 # endif
5167     }
5168 #endif
5169
5170   daemon_go();
5171   }
5172
5173 /* If the sender ident has not been set (by a trusted caller) set it to
5174 the caller. This will get overwritten below for an inetd call. If a trusted
5175 caller has set it empty, unset it. */
5176
5177 if (!sender_ident) sender_ident = originator_login;
5178 else if (!*sender_ident) sender_ident = NULL;
5179
5180 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
5181 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
5182 originator_* variables set. */
5183
5184 if (test_rewrite_arg >= 0)
5185   {
5186   f.really_exim = FALSE;
5187   if (test_rewrite_arg >= argc)
5188     {
5189     printf("-brw needs an address argument\n");
5190     exim_exit(EXIT_FAILURE);
5191     }
5192   rewrite_test(exim_str_fail_toolong(argv[test_rewrite_arg], EXIM_EMAILADDR_MAX, "-brw"));
5193   exim_exit(EXIT_SUCCESS);
5194   }
5195
5196 /* A locally-supplied message is considered to be coming from a local user
5197 unless a trusted caller supplies a sender address with -f, or is passing in the
5198 message via SMTP (inetd invocation or otherwise). */
5199
5200 if (  !sender_address && !smtp_input
5201    || !f.trusted_caller && filter_test == FTEST_NONE)
5202   {
5203   f.sender_local = TRUE;
5204
5205   /* A trusted caller can supply authenticated_sender and authenticated_id
5206   via -oMas and -oMai and if so, they will already be set. Otherwise, force
5207   defaults except when host checking. */
5208
5209   if (!authenticated_sender && !host_checking)
5210     authenticated_sender = string_sprintf("%s@%s", originator_login,
5211       qualify_domain_sender);
5212   if (!authenticated_id && !host_checking)
5213     authenticated_id = originator_login;
5214   }
5215
5216 /* Trusted callers are always permitted to specify the sender address.
5217 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
5218 is specified is the empty address. However, if a trusted caller does not
5219 specify a sender address for SMTP input, we leave sender_address unset. This
5220 causes the MAIL commands to be honoured. */
5221
5222 if (  !smtp_input && !sender_address
5223    || !receive_check_set_sender(sender_address))
5224   {
5225   /* Either the caller is not permitted to set a general sender, or this is
5226   non-SMTP input and the trusted caller has not set a sender. If there is no
5227   sender, or if a sender other than <> is set, override with the originator's
5228   login (which will get qualified below), except when checking things. */
5229
5230   if (  !sender_address                  /* No sender_address set */
5231      ||                                  /*         OR            */
5232        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
5233        !checking))                       /* Not running tests, including filter tests */
5234     {
5235     sender_address = originator_login;
5236     f.sender_address_forced = FALSE;
5237     sender_address_domain = 0;
5238     }
5239   }
5240
5241 /* Remember whether an untrusted caller set the sender address */
5242
5243 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
5244
5245 /* Ensure that the sender address is fully qualified unless it is the empty
5246 address, which indicates an error message, or doesn't exist (root caller, smtp
5247 interface, no -f argument). */
5248
5249 if (sender_address && *sender_address && sender_address_domain == 0)
5250   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
5251     qualify_domain_sender);
5252
5253 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
5254
5255 /* Handle a request to verify a list of addresses, or test them for delivery.
5256 This must follow the setting of the sender address, since routers can be
5257 predicated upon the sender. If no arguments are given, read addresses from
5258 stdin. Set debug_level to at least D_v to get full output for address testing.
5259 */
5260
5261 if (verify_address_mode || f.address_test_mode)
5262   {
5263   int exit_value = 0;
5264   int flags = vopt_qualify;
5265
5266   if (verify_address_mode)
5267     {
5268     if (!verify_as_sender) flags |= vopt_is_recipient;
5269     DEBUG(D_verify) debug_print_ids(US"Verifying:");
5270     }
5271
5272   else
5273     {
5274     flags |= vopt_is_recipient;
5275     debug_selector |= D_v;
5276     debug_file = stderr;
5277     debug_fd = fileno(debug_file);
5278     DEBUG(D_verify) debug_print_ids(US"Address testing:");
5279     }
5280
5281   if (recipients_arg < argc)
5282     while (recipients_arg < argc)
5283       {
5284       /* Supplied addresses are tainted since they come from a user */
5285       uschar * s = string_copy_taint(
5286         exim_str_fail_toolong(argv[recipients_arg++], EXIM_DISPLAYMAIL_MAX, "address verification"),
5287         GET_TAINTED);
5288       while (*s)
5289         {
5290         BOOL finished = FALSE;
5291         uschar *ss = parse_find_address_end(s, FALSE);
5292         if (*ss == ',') *ss = 0; else finished = TRUE;
5293         test_address(s, flags, &exit_value);
5294         s = ss;
5295         if (!finished)
5296           while (*++s == ',' || isspace(*s)) ;
5297         }
5298       }
5299
5300   else for (;;)
5301     {
5302     uschar * s = get_stdinput(NULL, NULL);
5303     if (!s) break;
5304     test_address(string_copy_taint(
5305         exim_str_fail_toolong(s, EXIM_DISPLAYMAIL_MAX, "address verification (stdin)"),
5306         GET_TAINTED),
5307       flags, &exit_value);
5308     }
5309
5310   route_tidyup();
5311   exim_exit(exit_value);
5312   }
5313
5314 /* Handle expansion checking. Either expand items on the command line, or read
5315 from stdin if there aren't any. If -Mset was specified, load the message so
5316 that its variables can be used, but restrict this facility to admin users.
5317 Otherwise, if -bem was used, read a message from stdin. */
5318
5319 if (expansion_test)
5320   {
5321   dns_init(FALSE, FALSE, FALSE);
5322   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
5323     {
5324     uschar * spoolname;
5325     if (!f.admin_user)
5326       exim_fail("exim: permission denied\n");
5327     message_id = US exim_str_fail_toolong(argv[msg_action_arg], MESSAGE_ID_LENGTH, "message-id");
5328     /* Checking the length of the ID is sufficient to validate it.
5329     Get an untainted version so file opens can be done. */
5330     message_id = string_copy_taint(message_id, GET_UNTAINTED);
5331
5332     spoolname = string_sprintf("%s-H", message_id);
5333     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
5334       printf ("Failed to load message datafile %s\n", message_id);
5335     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
5336       printf ("Failed to load message %s\n", message_id);
5337     }
5338
5339   /* Read a test message from a file. We fudge it up to be on stdin, saving
5340   stdin itself for later reading of expansion strings. */
5341
5342   else if (expansion_test_message)
5343     {
5344     uschar * rme = expand_string(recipients_max);
5345     int save_stdin = dup(0);
5346     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
5347     if (fd < 0)
5348       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
5349         strerror(errno));
5350     (void) dup2(fd, 0);
5351     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5352     message_ended = END_NOTENDED;
5353     recipients_max_expanded = atoi(CCS rme);
5354     read_message_body(receive_msg(extract_recipients));
5355     message_linecount += body_linecount;
5356     (void)dup2(save_stdin, 0);
5357     (void)close(save_stdin);
5358     clearerr(stdin);               /* Required by Darwin */
5359     }
5360
5361   /* Only admin users may see config-file macros this way */
5362
5363   if (!f.admin_user) macros_user = macros = mlast = NULL;
5364
5365   /* Allow $recipients for this testing */
5366
5367   f.enable_dollar_recipients = TRUE;
5368
5369   /* Expand command line items */
5370
5371   if (recipients_arg < argc)
5372     while (recipients_arg < argc)
5373       expansion_test_line(exim_str_fail_toolong(argv[recipients_arg++], EXIM_EMAILADDR_MAX, "recipient"));
5374
5375   /* Read stdin */
5376
5377   else
5378     {
5379     char *(*fn_readline)(const char *) = NULL;
5380     void (*fn_addhist)(const char *) = NULL;
5381     uschar * s;
5382
5383 #ifdef USE_READLINE
5384     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5385 #endif
5386
5387     while (s = get_stdinput(fn_readline, fn_addhist))
5388       expansion_test_line(s);
5389
5390 #ifdef USE_READLINE
5391     if (dlhandle) dlclose(dlhandle);
5392 #endif
5393     }
5394
5395   /* The data file will be open after -Mset */
5396
5397   if (deliver_datafile >= 0)
5398     {
5399     (void)close(deliver_datafile);
5400     deliver_datafile = -1;
5401     }
5402
5403   exim_exit(EXIT_SUCCESS);
5404   }
5405
5406
5407 /* The active host name is normally the primary host name, but it can be varied
5408 for hosts that want to play several parts at once. We need to ensure that it is
5409 set for host checking, and for receiving messages. */
5410
5411 smtp_active_hostname = primary_hostname;
5412 GET_OPTION("smtp_active_hostname");
5413 if (raw_active_hostname)
5414   {
5415   uschar * nah = expand_string(raw_active_hostname);
5416   if (!nah)
5417     {
5418     if (!f.expand_string_forcedfail)
5419       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5420         "(smtp_active_hostname): %s", raw_active_hostname,
5421         expand_string_message);
5422     }
5423   else if (nah[0]) smtp_active_hostname = nah;
5424   }
5425
5426 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5427 given IP address so that the blocking and relay configuration can be tested.
5428 Unless a sender_ident was set by -oMt, we discard it (the default is the
5429 caller's login name). An RFC 1413 call is made only if we are running in the
5430 test harness and an incoming interface and both ports are specified, because
5431 there is no TCP/IP call to find the ident for. */
5432
5433 if (host_checking)
5434   {
5435   int x[4];
5436   int size;
5437
5438   if (!sender_ident_set)
5439     {
5440     sender_ident = NULL;
5441     if (f.running_in_test_harness && sender_host_port
5442        && interface_address && interface_port)
5443       verify_get_ident(1223);           /* note hardwired port number */
5444     }
5445
5446   /* In case the given address is a non-canonical IPv6 address, canonicalize
5447   it. Use the compressed form for IPv6. */
5448
5449   size = host_aton(sender_host_address, x);
5450   sender_host_address = store_get(48, GET_UNTAINTED);  /* large enough for full IPv6 */
5451   if (size == 1)
5452     (void) host_nmtoa(size, x, -1, sender_host_address, ':');
5453   else
5454     (void) ipv6_nmtoa(x, sender_host_address);
5455
5456   /* Now set up for testing */
5457
5458   host_build_sender_fullhost();
5459   smtp_input = TRUE;
5460   smtp_in = stdin;
5461   smtp_out = stdout;
5462   f.sender_local = FALSE;
5463   f.sender_host_notsocket = TRUE;
5464   debug_file = stderr;
5465   debug_fd = fileno(debug_file);
5466   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5467     "**** but without any ident (RFC 1413) callback.\n"
5468     "**** This is not for real!\n\n",
5469       sender_host_address);
5470
5471   connection_id = getpid();
5472   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5473   if (verify_check_host(&hosts_connection_nolog) == OK)
5474     {
5475     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5476     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5477     }
5478   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5479
5480   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5481   because a log line has already been written for all its failure exists
5482   (usually "connection refused: <reason>") and writing another one is
5483   unnecessary clutter. */
5484
5485   if (smtp_start_session())
5486     {
5487     rmark reset_point;
5488     for (; (reset_point = store_mark()); store_reset(reset_point))
5489       {
5490       if (smtp_setup_msg() <= 0) break;
5491       if (!receive_msg(FALSE)) break;
5492
5493       return_path = sender_address = NULL;
5494       dnslist_domain = dnslist_matched = NULL;
5495 #ifndef DISABLE_DKIM
5496       dkim_cur_signer = NULL;
5497 #endif
5498       acl_var_m = NULL;
5499       deliver_localpart_orig = NULL;
5500       deliver_domain_orig = NULL;
5501       callout_address = sending_ip_address = NULL;
5502       deliver_localpart_data = deliver_domain_data =
5503       recipient_data = sender_data = NULL;
5504       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5505       }
5506     smtp_log_no_mail();
5507     }
5508   exim_exit(EXIT_SUCCESS);
5509   }
5510
5511
5512 /* Arrange for message reception if recipients or SMTP were specified;
5513 otherwise complain unless a version print (-bV) happened or this is a filter
5514 verification test or info dump.
5515 In the former case, show the configuration file name. */
5516
5517 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5518   {
5519   if (version_printed)
5520     {
5521     if (Ustrchr(config_main_filelist, ':'))
5522       printf("Configuration file search path is %s\n", config_main_filelist);
5523     printf("Configuration file is %s\n", config_main_filename);
5524     return EXIT_SUCCESS;
5525     }
5526
5527   if (info_flag != CMDINFO_NONE)
5528     {
5529     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5530     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5531     }
5532
5533   if (filter_test == FTEST_NONE)
5534     exim_usage(called_as);
5535   }
5536
5537
5538 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5539 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5540 that we are not called from inetd, because that is rejected above. The
5541 following configuration settings are forced here:
5542
5543   (1) Synchronous delivery (-odi)
5544   (2) Errors to stderr (-oep == -oeq)
5545   (3) No parallel remote delivery
5546   (4) Unprivileged delivery
5547
5548 We don't force overall queueing options because there are several of them;
5549 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5550 to override any SMTP queueing. */
5551
5552 if (mua_wrapper)
5553   {
5554   f.synchronous_delivery = TRUE;
5555   arg_error_handling = ERRORS_STDERR;
5556   remote_max_parallel = 1;
5557   deliver_drop_privilege = TRUE;
5558   f.queue_smtp = FALSE;
5559   queue_smtp_domains = NULL;
5560 #ifdef SUPPORT_I18N
5561   message_utf8_downconvert = -1;        /* convert-if-needed */
5562 #endif
5563   }
5564
5565
5566 /* Prepare to accept one or more new messages on the standard input. When a
5567 message has been read, its id is returned in message_id[]. If doing immediate
5568 delivery, we fork a delivery process for each received message, except for the
5569 last one, where we can save a process switch.
5570
5571 It is only in non-smtp mode that error_handling is allowed to be changed from
5572 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5573 sendmail error modes other than -oem ever actually used? Later: yes.) */
5574
5575 if (!smtp_input) error_handling = arg_error_handling;
5576
5577 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5578 logging being sent down the socket and make an identd call to get the
5579 sender_ident. */
5580
5581 else if (f.is_inetd)
5582   {
5583   (void)fclose(stderr);
5584   exim_nullstd();                       /* Re-open to /dev/null */
5585   verify_get_ident(IDENT_PORT);
5586   host_build_sender_fullhost();
5587   set_process_info("handling incoming connection from %s via inetd",
5588     sender_fullhost);
5589   }
5590
5591 /* If the sender host address has been set, build sender_fullhost if it hasn't
5592 already been done (which it will have been for inetd). This caters for the
5593 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5594 so that the test for IP options is skipped for -bs input. */
5595
5596 if (sender_host_address && !sender_fullhost)
5597   {
5598   host_build_sender_fullhost();
5599   set_process_info("handling incoming connection from %s via -oMa",
5600     sender_fullhost);
5601   f.sender_host_notsocket = TRUE;
5602   }
5603
5604 /* Otherwise, set the sender host as unknown except for inetd calls. This
5605 prevents host checking in the case of -bs not from inetd and also for -bS. */
5606
5607 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5608
5609 /* If stdout does not exist, then dup stdin to stdout. This can happen
5610 if exim is started from inetd. In this case fd 0 will be set to the socket,
5611 but fd 1 will not be set. This also happens for passed SMTP channels. */
5612
5613 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5614
5615 /* Set up the incoming protocol name and the state of the program. Root is
5616 allowed to force received protocol via the -oMr option above. If we have come
5617 via inetd, the process info has already been set up. We don't set
5618 received_protocol here for smtp input, as it varies according to
5619 batch/HELO/EHLO/AUTH/TLS. */
5620
5621 if (smtp_input)
5622   {
5623   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5624     smtp_batched_input? "batched " : "",
5625     sender_address ? sender_address : originator_login);
5626   }
5627 else
5628   {
5629   int old_pool = store_pool;
5630   store_pool = POOL_PERM;
5631   if (!received_protocol)
5632     received_protocol = string_sprintf("local%s", called_as);
5633   store_pool = old_pool;
5634   set_process_info("accepting a local non-SMTP message from <%s>",
5635     sender_address);
5636   }
5637
5638 /* Initialize the session_local_queue-only flag (this will be ignored if
5639 mua_wrapper is set) */
5640
5641 queue_check_only();
5642 session_local_queue_only = queue_only;
5643
5644 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5645 the spool if so configured. On failure, we must not attempt to send an error
5646 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5647 error code is given.) */
5648
5649 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5650   exim_fail("exim: insufficient disk space\n");
5651
5652 /* If this is smtp input of any kind, real or batched, handle the start of the
5653 SMTP session.
5654
5655 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5656 because a log line has already been written for all its failure exists
5657 (usually "connection refused: <reason>") and writing another one is
5658 unnecessary clutter. */
5659
5660 connection_id = getpid();
5661 if (smtp_input)
5662   {
5663   smtp_in = stdin;
5664   smtp_out = stdout;
5665   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5666   if (verify_check_host(&hosts_connection_nolog) == OK)
5667     {
5668     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5669     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5670     }
5671   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5672   if (!smtp_start_session())
5673     {
5674     mac_smtp_fflush();
5675     exim_exit(EXIT_SUCCESS);
5676     }
5677   }
5678
5679 /* Otherwise, set up the input size limit here and set no stdin stdio buffer
5680 (we handle buferring so as to have visibility of fill level). */
5681
5682 else
5683   {
5684   GET_OPTION("message_size_limit");
5685   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5686   if (expand_string_message)
5687     if (thismessage_size_limit == -1)
5688       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5689         "message_size_limit: %s", expand_string_message);
5690     else
5691       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5692         "message_size_limit: %s", expand_string_message);
5693
5694   setvbuf(stdin, NULL, _IONBF, 0);
5695   }
5696
5697 /* Loop for several messages when reading SMTP input. If we fork any child
5698 processes, we don't want to wait for them unless synchronous delivery is
5699 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5700 same as SIG_DFL, despite the fact that documentation often lists the default as
5701 "ignore". This is a confusing area. This is what I know:
5702
5703 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5704 processes that complete simply to go away without ever becoming defunct. You
5705 can't then wait for them - but we don't want to wait for them in the
5706 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5707 happen for all OS (e.g. *BSD is different).
5708
5709 But that's not the end of the story. Some (many? all?) systems have the
5710 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5711 has by default, so it seems that the difference is merely one of default
5712 (compare restarting vs non-restarting signals).
5713
5714 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5715 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5716 of the loop below. Paranoia rules.
5717
5718 February 2003: That's *still* not the end of the story. There are now versions
5719 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5720 process then calls waitpid(), a grumble is written to the system log, because
5721 this is logically inconsistent. In other words, it doesn't like the paranoia.
5722 As a consequence of this, the waitpid() below is now excluded if we are sure
5723 that SIG_IGN works. */
5724
5725 if (!f.synchronous_delivery)
5726   {
5727 #ifdef SA_NOCLDWAIT
5728   struct sigaction act;
5729   act.sa_handler = SIG_IGN;
5730   sigemptyset(&(act.sa_mask));
5731   act.sa_flags = SA_NOCLDWAIT;
5732   sigaction(SIGCHLD, &act, NULL);
5733 #else
5734   signal(SIGCHLD, SIG_IGN);
5735 #endif
5736   }
5737
5738 /* Save the current store pool point, for resetting at the start of
5739 each message, and save the real sender address, if any. */
5740
5741 real_sender_address = sender_address;
5742
5743 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5744 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5745 collapsed). */
5746
5747 for (BOOL more = TRUE; more; )
5748   {
5749   rmark reset_point = store_mark();
5750   message_id[0] = 0;
5751
5752   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5753   input and build the recipients list, before calling receive_msg() to read the
5754   message proper. Whatever sender address is given in the SMTP transaction is
5755   often ignored for local senders - we use the actual sender, which is normally
5756   either the underlying user running this process or a -f argument provided by
5757   a trusted caller. It is saved in real_sender_address. The test for whether to
5758   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5759
5760   if (smtp_input)
5761     {
5762     int rc;
5763     if ((rc = smtp_setup_msg()) > 0)
5764       {
5765       if (   real_sender_address
5766           && !receive_check_set_sender(sender_address))
5767         {
5768         sender_address = raw_sender = real_sender_address;
5769         sender_address_unrewritten = NULL;
5770         }
5771
5772       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5773       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5774       the very end. The result of the ACL is ignored (as for other non-SMTP
5775       messages). It is run for its potential side effects. */
5776
5777       if (smtp_batched_input)
5778         {
5779         GET_OPTION("acl_not_smtp_start");
5780         if (acl_not_smtp_start)
5781           {
5782           uschar * user_msg, * log_msg;
5783           f.enable_dollar_recipients = TRUE;
5784           (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5785             &user_msg, &log_msg);
5786           f.enable_dollar_recipients = FALSE;
5787           }
5788         }
5789
5790       /* Now get the data for the message */
5791
5792       more = receive_msg(extract_recipients);
5793       if (!message_id[0])
5794         {
5795         cancel_cutthrough_connection(TRUE, US"receive dropped");
5796         if (more) goto MORELOOP;
5797         smtp_log_no_mail();               /* Log no mail if configured */
5798         exim_exit(EXIT_FAILURE);
5799         }
5800       }
5801     else
5802       {
5803       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5804       smtp_log_no_mail();               /* Log no mail if configured */
5805       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
5806       }
5807     }
5808
5809   /* In the non-SMTP case, we have all the information from the command
5810   line, but must process it in case it is in the more general RFC822
5811   format, and in any case, to detect syntax errors. Also, it appears that
5812   the use of comma-separated lists as single arguments is common, so we
5813   had better support them. */
5814
5815   else
5816     {
5817     uschar * rme = expand_string(recipients_max);
5818     int rcount = 0, count = argc - recipients_arg;
5819     const uschar ** list = argv + recipients_arg;
5820
5821     recipients_max_expanded = atoi(CCS rme);
5822
5823     /* These options cannot be changed dynamically for non-SMTP messages */
5824
5825     f.active_local_sender_retain = local_sender_retain;
5826     f.active_local_from_check = local_from_check;
5827
5828     /* Save before any rewriting */
5829
5830     raw_sender = string_copy(sender_address);
5831
5832     /* Loop for each argument (supplied by user hence tainted) */
5833
5834     for (int i = 0; i < count; i++)
5835       {
5836       int start, end, domain;
5837       uschar * errmess;
5838       /* There can be multiple addresses, so EXIM_DISPLAYMAIL_MAX (tuned for 1) is too short.
5839       We'll still want to cap it to something, just in case. */
5840       uschar * s = string_copy_taint(
5841         exim_str_fail_toolong(list[i], BIG_BUFFER_SIZE, "address argument"),
5842         GET_TAINTED);
5843
5844       /* Loop for each comma-separated address */
5845
5846       while (*s)
5847         {
5848         BOOL finished = FALSE;
5849         uschar * recipient;
5850         uschar * ss = parse_find_address_end(s, FALSE);
5851
5852         if (*ss == ',') *ss = 0; else finished = TRUE;
5853
5854         /* Check max recipients - if -t was used, these aren't recipients */
5855
5856         if (  recipients_max_expanded > 0 && ++rcount > recipients_max_expanded
5857            && !extract_recipients)
5858           {
5859           DEBUG(D_all) debug_printf("excess reipients (max %d)\n",
5860             recipients_max_expanded);
5861
5862           if (error_handling == ERRORS_STDERR)
5863             {
5864             fprintf(stderr, "exim: too many recipients\n");
5865             exim_exit(EXIT_FAILURE);
5866             }
5867           else
5868             return
5869               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5870                 errors_sender_rc : EXIT_FAILURE;
5871           }
5872
5873 #ifdef SUPPORT_I18N
5874         {
5875         BOOL b = allow_utf8_domains;
5876         allow_utf8_domains = TRUE;
5877 #endif
5878         recipient =
5879           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5880
5881 #ifdef SUPPORT_I18N
5882         if (recipient)
5883           if (string_is_utf8(recipient)) message_smtputf8 = TRUE;
5884           else allow_utf8_domains = b;
5885         }
5886 #else
5887         ;
5888 #endif
5889         if (domain == 0 && !f.allow_unqualified_recipient)
5890           {
5891           recipient = NULL;
5892           errmess = US"unqualified recipient address not allowed";
5893           }
5894
5895         if (!recipient)
5896           {
5897           DEBUG(D_all) debug_printf("bad recipient address \"%s\": %s\n",
5898             string_printing(list[i]), errmess);
5899
5900           if (error_handling == ERRORS_STDERR)
5901             {
5902             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5903               string_printing(list[i]), errmess);
5904             exim_exit(EXIT_FAILURE);
5905             }
5906           else
5907             {
5908             error_block eblock;
5909             eblock.next = NULL;
5910             eblock.text1 = string_printing(list[i]);
5911             eblock.text2 = errmess;
5912             return
5913               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5914                 errors_sender_rc : EXIT_FAILURE;
5915             }
5916           }
5917
5918         receive_add_recipient(string_copy_taint(recipient, GET_TAINTED), -1);
5919         s = ss;
5920         if (!finished)
5921           while (*++s && (*s == ',' || isspace(*s)));
5922         }
5923       }
5924
5925     /* Show the recipients when debugging */
5926
5927     DEBUG(D_receive)
5928       {
5929       if (sender_address) debug_printf("Sender: %s\n", sender_address);
5930       if (recipients_list)
5931         {
5932         debug_printf("Recipients:\n");
5933         for (int i = 0; i < recipients_count; i++)
5934           debug_printf("  %s\n", recipients_list[i].address);
5935         }
5936       }
5937
5938     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5939     ignored; rejecting here would just add complication, and it can just as
5940     well be done later. Allow $recipients to be visible in the ACL. */
5941
5942     GET_OPTION("acl_not_smtp_start");
5943     if (acl_not_smtp_start)
5944       {
5945       uschar * user_msg, * log_msg;
5946       f.enable_dollar_recipients = TRUE;
5947       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5948         &user_msg, &log_msg);
5949       f.enable_dollar_recipients = FALSE;
5950       }
5951
5952     /* Pause for a while waiting for input.  If none received in that time,
5953     close the logfile, if we had one open; then if we wait for a long-running
5954     datasource (months, in one use-case) log rotation will not leave us holding
5955     the file copy. */
5956
5957     if (!receive_timeout)
5958       if (poll_one_fd(0, POLLIN, 30*60*1000) == 0)      /* 30 minutes */
5959         mainlog_close();
5960
5961     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5962     will just read the headers for the message, and not write anything onto the
5963     spool. */
5964
5965     message_ended = END_NOTENDED;
5966     more = receive_msg(extract_recipients);
5967
5968     /* more is always FALSE here (not SMTP message) when reading a message
5969     for real; when reading the headers of a message for filter testing,
5970     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5971
5972     if (!message_id[0]) exim_exit(EXIT_FAILURE);
5973     }  /* Non-SMTP message reception */
5974
5975   /* If this is a filter testing run, there are headers in store, but
5976   no message on the spool. Run the filtering code in testing mode, setting
5977   the domain to the qualify domain and the local part to the current user,
5978   unless they have been set by options. The prefix and suffix are left unset
5979   unless specified. The the return path is set to to the sender unless it has
5980   already been set from a return-path header in the message. */
5981
5982   if (filter_test != FTEST_NONE)
5983     {
5984     deliver_domain = ftest_domain ? ftest_domain : qualify_domain_recipient;
5985     deliver_domain_orig = deliver_domain;
5986     deliver_localpart = ftest_localpart ? US ftest_localpart : originator_login;
5987     deliver_localpart_orig = deliver_localpart;
5988     deliver_localpart_prefix = US ftest_prefix;
5989     deliver_localpart_suffix = US ftest_suffix;
5990     deliver_home = originator_home;
5991
5992     if (!return_path)
5993       {
5994       printf("Return-path copied from sender\n");
5995       return_path = string_copy(sender_address);
5996       }
5997     else
5998       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5999     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
6000
6001     receive_add_recipient(
6002       string_sprintf("%s%s%s@%s",
6003         ftest_prefix ? ftest_prefix : US"",
6004         deliver_localpart,
6005         ftest_suffix ? ftest_suffix : US"",
6006         deliver_domain), -1);
6007
6008     printf("Recipient   = %s\n", recipients_list[0].address);
6009     if (ftest_prefix) printf("Prefix    = %s\n", ftest_prefix);
6010     if (ftest_suffix) printf("Suffix    = %s\n", ftest_suffix);
6011
6012     if (chdir("/"))   /* Get away from wherever the user is running this from */
6013       {
6014       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
6015       exim_exit(EXIT_FAILURE);
6016       }
6017
6018     /* Now we run either a system filter test, or a user filter test, or both.
6019     In the latter case, headers added by the system filter will persist and be
6020     available to the user filter. We need to copy the filter variables
6021     explicitly. */
6022
6023     if (filter_test & FTEST_SYSTEM)
6024       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
6025         exim_exit(EXIT_FAILURE);
6026
6027     memcpy(filter_sn, filter_n, sizeof(filter_sn));
6028
6029     if (filter_test & FTEST_USER)
6030       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
6031         exim_exit(EXIT_FAILURE);
6032
6033     exim_exit(EXIT_SUCCESS);
6034     }
6035
6036   /* Else act on the result of message reception. We should not get here unless
6037   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
6038   will be TRUE. If it is not, check on the number of messages received in this
6039   connection. */
6040
6041   if (  !session_local_queue_only
6042      && smtp_accept_queue_per_connection > 0
6043      && receive_messagecount > smtp_accept_queue_per_connection)
6044     {
6045     session_local_queue_only = TRUE;
6046     queue_only_reason = 2;
6047     }
6048
6049   /* Initialize local_queue_only from session_local_queue_only. If it is false,
6050   and queue_only_load is set, check that the load average is below it. If it is
6051   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
6052   default), we put the whole session into queue_only mode. It then remains this
6053   way for any subsequent messages on the same SMTP connection. This is a
6054   deliberate choice; even though the load average may fall, it doesn't seem
6055   right to deliver later messages on the same call when not delivering earlier
6056   ones. However, there are odd cases where this is not wanted, so this can be
6057   changed by setting queue_only_load_latch false. */
6058
6059   if (!(local_queue_only = session_local_queue_only) && queue_only_load >= 0)
6060     if ((local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load))
6061       {
6062       queue_only_reason = 3;
6063       if (queue_only_load_latch) session_local_queue_only = TRUE;
6064       }
6065
6066   /* If running as an MUA wrapper, all queueing options and freezing options
6067   are ignored. */
6068
6069   if (mua_wrapper)
6070     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
6071
6072   /* Log the queueing here, when it will get a message id attached, but
6073   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
6074   connections). */
6075
6076   if (local_queue_only)
6077     {
6078     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6079     switch(queue_only_reason)
6080       {
6081       case 2:
6082         log_write(L_delay_delivery,
6083                 LOG_MAIN, "no immediate delivery: more than %d messages "
6084           "received in one connection", smtp_accept_queue_per_connection);
6085         break;
6086
6087       case 3:
6088         log_write(L_delay_delivery,
6089                 LOG_MAIN, "no immediate delivery: load average %.2f",
6090                 (double)load_average/1000.0);
6091       break;
6092       }
6093     }
6094
6095   else if (f.queue_only_policy || f.deliver_freeze)
6096     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6097
6098   /* Else do the delivery unless the ACL or local_scan() called for queue only
6099   or froze the message. Always deliver in a separate process. A fork failure is
6100   not a disaster, as the delivery will eventually happen on a subsequent queue
6101   run. The search cache must be tidied before the fork, as the parent will
6102   do it before exiting. The child will trigger a lookup failure and
6103   thereby defer the delivery if it tries to use (for example) a cached ldap
6104   connection that the parent has called unbind on. */
6105
6106   else
6107     {
6108     pid_t pid;
6109     search_tidyup();
6110
6111     if ((pid = exim_fork(US"local-accept-delivery")) == 0)
6112       {
6113       int rc;
6114       close_unwanted();      /* Close unwanted file descriptors and TLS */
6115       exim_nullstd();        /* Ensure std{in,out,err} exist */
6116
6117       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
6118       mode, deliver_drop_privilege is forced TRUE). */
6119
6120       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
6121         {
6122         delivery_re_exec(CEE_EXEC_EXIT);
6123         /* Control does not return here. */
6124         }
6125
6126       /* No need to re-exec */
6127
6128       rc = deliver_message(message_id, FALSE, FALSE);
6129       search_tidyup();
6130       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
6131         ? EXIT_SUCCESS : EXIT_FAILURE);
6132       }
6133
6134     if (pid < 0)
6135       {
6136       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
6137       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
6138         "process: %s", strerror(errno));
6139       }
6140     else
6141       {
6142       release_cutthrough_connection(US"msg passed for delivery");
6143
6144       /* In the parent, wait if synchronous delivery is required. This will
6145       always be the case in MUA wrapper mode. */
6146
6147       if (f.synchronous_delivery)
6148         {
6149         int status;
6150         while (wait(&status) != pid);
6151         if ((status & 0x00ff) != 0)
6152           log_write(0, LOG_MAIN|LOG_PANIC,
6153             "process %d crashed with signal %d while delivering %s",
6154             (int)pid, status & 0x00ff, message_id);
6155         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
6156         }
6157       }
6158     }
6159
6160   /* The loop will repeat if more is TRUE. If we do not know know that the OS
6161   automatically reaps children (see comments above the loop), clear away any
6162   finished subprocesses here, in case there are lots of messages coming in
6163   from the same source. */
6164
6165 #ifndef SIG_IGN_WORKS
6166   while (waitpid(-1, NULL, WNOHANG) > 0);
6167 #endif
6168
6169 MORELOOP:
6170   return_path = sender_address = NULL;
6171   authenticated_sender = NULL;
6172   deliver_localpart_orig = NULL;
6173   deliver_domain_orig = NULL;
6174   deliver_host = deliver_host_address = NULL;
6175   dnslist_domain = dnslist_matched = NULL;
6176 #ifdef WITH_CONTENT_SCAN
6177   malware_name = NULL;
6178   regex_vars_clear();
6179 #endif
6180   callout_address = NULL;
6181   sending_ip_address = NULL;
6182   deliver_localpart_data = deliver_domain_data =
6183   recipient_data = sender_data = NULL;
6184   acl_var_m = NULL;
6185   lookup_value = NULL;                            /* Can be set by ACL */
6186
6187   store_reset(reset_point);
6188   }
6189
6190 exim_exit(EXIT_SUCCESS);   /* Never returns */
6191 return 0;                  /* To stop compiler warning */
6192 }
6193
6194
6195 /* End of exim.c */
6196 /* vi: aw ai sw=2
6197 */