5c9e640218d9e25154827a973a53af2bf3d7ddd5
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) The Exim Maintainers 2020 - 2023 */
6 /* Copyright (c) University of Cambridge 1995 - 2018 */
7 /* See the file NOTICE for conditions of use and distribution. */
8 /* SPDX-License-Identifier: GPL-2.0-or-later */
9
10
11 /* The main function: entry point, initialization, and high-level control.
12 Also a few functions that don't naturally fit elsewhere. */
13
14
15 #include "exim.h"
16
17 #if defined(__GLIBC__) && !defined(__UCLIBC__)
18 # include <gnu/libc-version.h>
19 #endif
20
21 #ifndef _TIME_H
22 # include <time.h>
23 #endif
24 #ifndef NO_EXECINFO
25 # include <execinfo.h>
26 #endif
27
28 #ifdef USE_GNUTLS
29 # include <gnutls/gnutls.h>
30 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
31 #  define DISABLE_OCSP
32 # endif
33 #endif
34
35 extern void init_lookup_list(void);
36
37
38
39 /*************************************************
40 *      Function interface to store functions     *
41 *************************************************/
42
43 /* We need some real functions to pass to the PCRE regular expression library
44 for store allocation via Exim's store manager. The normal calls are actually
45 macros that pass over location information to make tracing easier. These
46 functions just interface to the standard macro calls. A good compiler will
47 optimize out the tail recursion and so not make them too expensive. */
48
49 static void *
50 function_store_malloc(PCRE2_SIZE size, void * tag)
51 {
52 if (size > INT_MAX)
53   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "excessive memory alloc request");
54 return store_malloc((int)size);
55 }
56
57 static void
58 function_store_free(void * block, void * tag)
59 {
60 /* At least some version of pcre2 pass a null pointer */
61 if (block) store_free(block);
62 }
63
64
65 static void *
66 function_store_get(PCRE2_SIZE size, void * tag)
67 {
68 if (size > INT_MAX)
69   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "excessive memory alloc request");
70 return store_get((int)size, GET_UNTAINTED);     /* loses track of taint */
71 }
72
73 static void
74 function_store_nullfree(void * block, void * tag)
75 {
76 /* We cannot free memory allocated using store_get() */
77 }
78
79
80
81
82 /*************************************************
83 *         Enums for cmdline interface            *
84 *************************************************/
85
86 enum commandline_info { CMDINFO_NONE=0,
87   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
88
89
90
91
92 static void
93 pcre_init(void)
94 {
95 pcre_mlc_ctx = pcre2_general_context_create(function_store_malloc, function_store_free, NULL);
96 pcre_gen_ctx = pcre2_general_context_create(function_store_get, function_store_nullfree, NULL);
97
98 pcre_mlc_cmp_ctx = pcre2_compile_context_create(pcre_mlc_ctx);
99 pcre_gen_cmp_ctx = pcre2_compile_context_create(pcre_gen_ctx);
100
101 pcre_gen_mtc_ctx = pcre2_match_context_create(pcre_gen_ctx);
102 }
103
104
105
106
107 /*************************************************
108 *   Execute regular expression and set strings   *
109 *************************************************/
110
111 /* This function runs a regular expression match, and sets up the pointers to
112 the matched substrings.  The matched strings are copied so the lifetime of
113 the subject is not a problem.  Matched strings will have the same taint status
114 as the subject string (this is not a de-taint method, and must not be made so
115 given the support for wildcards in REs).
116
117 Arguments:
118   re          the compiled expression
119   subject     the subject string
120   options     additional PCRE options
121   setup       if < 0 do full setup
122               if >= 0 setup from setup+1 onwards,
123                 excluding the full matched string
124
125 Returns:      TRUE if matched, or FALSE
126 */
127
128 BOOL
129 regex_match_and_setup(const pcre2_code * re, const uschar * subject, int options, int setup)
130 {
131 pcre2_match_data * md = pcre2_match_data_create_from_pattern(re, pcre_gen_ctx);
132 int res = pcre2_match(re, (PCRE2_SPTR)subject, PCRE2_ZERO_TERMINATED, 0,
133                         PCRE_EOPT | options, md, pcre_gen_mtc_ctx);
134 BOOL yield;
135
136 if ((yield = (res >= 0)))
137   {
138   PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
139   res = pcre2_get_ovector_count(md);
140   expand_nmax = setup < 0 ? 0 : setup + 1;
141   for (int matchnum = setup < 0 ? 0 : 1; matchnum < res; matchnum++)
142     {
143     /* Although PCRE2 has a pcre2_substring_get_bynumber() conveneience, it
144     seems to return a bad pointer when a capture group had no data, eg. (.*)
145     matching zero letters.  So use the underlying ovec and hope (!) that the
146     offsets are sane (including that case).  Should we go further and range-
147     check each one vs. the subject string length? */
148     int off = matchnum * 2;
149     int len = ovec[off + 1] - ovec[off];
150     expand_nstring[expand_nmax] = string_copyn(subject + ovec[off], len);
151     expand_nlength[expand_nmax++] = len;
152     }
153   expand_nmax--;
154   }
155 else if (res != PCRE2_ERROR_NOMATCH) DEBUG(D_any)
156   {
157   uschar errbuf[128];
158   pcre2_get_error_message(res, errbuf, sizeof(errbuf));
159   debug_printf_indent("pcre2: %s\n", errbuf);
160   }
161 /* pcre2_match_data_free(md);   gen ctx needs no free */
162 return yield;
163 }
164
165
166 /* Check just for match with regex.  Uses the common memory-handling.
167
168 Arguments:
169         re      compiled regex
170         subject string to be checked
171         slen    length of subject; -1 for nul-terminated
172         rptr    pointer for matched string, copied, or NULL
173
174 Return: TRUE for a match.
175 */
176
177 BOOL
178 regex_match(const pcre2_code * re, const uschar * subject, int slen, uschar ** rptr)
179 {
180 pcre2_match_data * md = pcre2_match_data_create(1, pcre_gen_ctx);
181 int rc = pcre2_match(re, (PCRE2_SPTR)subject,
182                       slen >= 0 ? slen : PCRE2_ZERO_TERMINATED,
183                       0, PCRE_EOPT, md, pcre_gen_mtc_ctx);
184 PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
185 BOOL ret = FALSE;
186
187 if (rc >= 0)
188   {
189   if (rptr)
190     *rptr = string_copyn(subject + ovec[0], ovec[1] - ovec[0]);
191   ret = TRUE;
192   }
193 /* pcre2_match_data_free(md);   gen ctx needs no free */
194 return ret;
195 }
196
197
198
199 /*************************************************
200 *            Set up processing details           *
201 *************************************************/
202
203 /* Save a text string for dumping when SIGUSR1 is received.
204 Do checks for overruns.
205
206 Arguments: format and arguments, as for printf()
207 Returns:   nothing
208 */
209
210 void
211 set_process_info(const char * format, ...)
212 {
213 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
214 gstring * g;
215 int len;
216 uschar * s;
217 va_list ap;
218
219 g = string_fmt_append(&gs, "%5d ", (int)getpid());
220 len = gstring_length(g);
221 va_start(ap, format);
222 if (!string_vformat(g, 0, format, ap))
223   {
224   gs.ptr = len;
225   g = string_cat(&gs, US"**** string overflowed buffer ****");
226   }
227 g = string_catn(g, US"\n", 1);
228 process_info_len = len_string_from_gstring(g, &s);
229 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
230 va_end(ap);
231 }
232
233 /***********************************************
234 *            Handler for SIGTERM               *
235 ***********************************************/
236
237 static void
238 term_handler(int sig)
239 {
240 exit(1);
241 }
242
243
244 /***********************************************
245 *            Handler for SIGSEGV               *
246 ***********************************************/
247
248 #define STACKDUMP_MAX 24
249 void
250 stackdump(void)
251 {
252 #ifndef NO_EXECINFO
253 void * buf[STACKDUMP_MAX];
254 char ** ss;
255 int nptrs = backtrace(buf, STACKDUMP_MAX);
256
257 log_write(0, LOG_MAIN|LOG_PANIC, "backtrace");
258 log_write(0, LOG_MAIN|LOG_PANIC, "---");
259 if ((ss = backtrace_symbols(buf, nptrs)))
260   {
261   for (int i = 0; i < nptrs; i++)
262     log_write(0, LOG_MAIN|LOG_PANIC, "\t%s", ss[i]);
263   free(ss);
264   }
265 else
266   log_write(0, LOG_MAIN|LOG_PANIC, "backtrace_symbols: %s", strerror(errno));
267 log_write(0, LOG_MAIN|LOG_PANIC, "---");
268 #endif
269 }
270 #undef STACKDUMP_MAX
271
272
273 static void
274 #ifdef SA_SIGINFO
275 segv_handler(int sig, siginfo_t * info, void * uctx)
276 {
277 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (fault address: %p)", info->si_addr);
278 # if defined(SEGV_MAPERR) && defined(SEGV_ACCERR) && defined(SEGV_BNDERR) && defined(SEGV_PKUERR)
279 switch (info->si_code)
280   {
281   case SEGV_MAPERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_MAPERR"); break;
282   case SEGV_ACCERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_ACCERR"); break;
283   case SEGV_BNDERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_BNDERR"); break;
284   case SEGV_PKUERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_PKUERR"); break;
285   }
286 # endif
287 if (US info->si_addr < US 4096)
288   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (null pointer indirection)");
289 else
290   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
291 if (process_info_len > 0)
292   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
293 stackdump();
294 signal(SIGSEGV, SIG_DFL);
295 kill(getpid(), sig);
296 }
297
298 #else
299 segv_handler(int sig)
300 {
301 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
302 if (process_info_len > 0)
303   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
304 stackdump();
305 signal(SIGSEGV, SIG_DFL);
306 kill(getpid(), sig);
307 }
308 #endif
309
310
311 /*************************************************
312 *             Handler for SIGUSR1                *
313 *************************************************/
314
315 /* SIGUSR1 causes any exim process to write to the process log details of
316 what it is currently doing. It will only be used if the OS is capable of
317 setting up a handler that causes automatic restarting of any system call
318 that is in progress at the time.
319
320 This function takes care to be signal-safe.
321
322 Argument: the signal number (SIGUSR1)
323 Returns:  nothing
324 */
325
326 static void
327 usr1_handler(int sig)
328 {
329 int fd;
330
331 os_restarting_signal(sig, usr1_handler);
332
333 if (!process_log_path) return;
334 fd = log_open_as_exim(process_log_path);
335
336 /* If we are neither exim nor root, or if we failed to create the log file,
337 give up. There is not much useful we can do with errors, since we don't want
338 to disrupt whatever is going on outside the signal handler. */
339
340 if (fd < 0) return;
341
342 (void)write(fd, process_info, process_info_len);
343 (void)close(fd);
344 }
345
346
347
348 /*************************************************
349 *             Timeout handler                    *
350 *************************************************/
351
352 /* This handler is enabled most of the time that Exim is running. The handler
353 doesn't actually get used unless alarm() has been called to set a timer, to
354 place a time limit on a system call of some kind. When the handler is run, it
355 re-enables itself.
356
357 There are some other SIGALRM handlers that are used in special cases when more
358 than just a flag setting is required; for example, when reading a message's
359 input. These are normally set up in the code module that uses them, and the
360 SIGALRM handler is reset to this one afterwards.
361
362 Argument: the signal value (SIGALRM)
363 Returns:  nothing
364 */
365
366 void
367 sigalrm_handler(int sig)
368 {
369 sigalrm_seen = TRUE;
370 os_non_restarting_signal(SIGALRM, sigalrm_handler);
371 }
372
373
374
375 /*************************************************
376 *      Sleep for a fractional time interval      *
377 *************************************************/
378
379 /* This function is called by millisleep() and exim_wait_tick() to wait for a
380 period of time that may include a fraction of a second. The coding is somewhat
381 tedious. We do not expect setitimer() ever to fail, but if it does, the process
382 will wait for ever, so we panic in this instance. (There was a case of this
383 when a bug in a function that calls milliwait() caused it to pass invalid data.
384 That's when I added the check. :-)
385
386 We assume it to be not worth sleeping for under 50us; this value will
387 require revisiting as hardware advances.  This avoids the issue of
388 a zero-valued timer setting meaning "never fire".
389
390 Argument:  an itimerval structure containing the interval
391 Returns:   nothing
392 */
393
394 static void
395 milliwait(struct itimerval *itval)
396 {
397 sigset_t sigmask;
398 sigset_t old_sigmask;
399 int save_errno = errno;
400
401 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
402   return;
403 (void)sigemptyset(&sigmask);                           /* Empty mask */
404 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
405 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
406 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
407   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
408     "setitimer() failed: %s", strerror(errno));
409 (void)sigfillset(&sigmask);                            /* All signals */
410 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
411 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
412 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
413 errno = save_errno;
414 sigalrm_seen = FALSE;
415 }
416
417
418
419
420 /*************************************************
421 *         Millisecond sleep function             *
422 *************************************************/
423
424 /* The basic sleep() function has a granularity of 1 second, which is too rough
425 in some cases - for example, when using an increasing delay to slow down
426 spammers.
427
428 Argument:    number of millseconds
429 Returns:     nothing
430 */
431
432 void
433 millisleep(int msec)
434 {
435 struct itimerval itval = {.it_interval = {.tv_sec = 0, .tv_usec = 0},
436                           .it_value = {.tv_sec = msec/1000,
437                                        .tv_usec = (msec % 1000) * 1000}};
438 milliwait(&itval);
439 }
440
441
442
443 /*************************************************
444 *         Compare microsecond times              *
445 *************************************************/
446
447 /*
448 Arguments:
449   tv1         the first time
450   tv2         the second time
451
452 Returns:      -1, 0, or +1
453 */
454
455 static int
456 exim_tvcmp(struct timeval *t1, struct timeval *t2)
457 {
458 if (t1->tv_sec > t2->tv_sec) return +1;
459 if (t1->tv_sec < t2->tv_sec) return -1;
460 if (t1->tv_usec > t2->tv_usec) return +1;
461 if (t1->tv_usec < t2->tv_usec) return -1;
462 return 0;
463 }
464
465
466
467
468 /*************************************************
469 *          Clock tick wait function              *
470 *************************************************/
471
472 #ifdef _POSIX_MONOTONIC_CLOCK
473 # ifdef CLOCK_BOOTTIME
474 #  define EXIM_CLOCKTYPE CLOCK_BOOTTIME
475 # else
476 #  define EXIM_CLOCKTYPE CLOCK_MONOTONIC
477 # endif
478
479 /* Amount EXIM_CLOCK is behind realtime, at startup. */
480 static struct timespec offset_ts;
481
482 static void
483 exim_clock_init(void)
484 {
485 struct timeval tv;
486 if (clock_gettime(EXIM_CLOCKTYPE, &offset_ts) != 0) return;
487 (void)gettimeofday(&tv, NULL);
488 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
489 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
490 if (offset_ts.tv_nsec >= 0) return;
491 offset_ts.tv_sec--;
492 offset_ts.tv_nsec += 1000*1000*1000;
493 }
494 #endif
495
496
497 void
498 exim_gettime(struct timeval * tv)
499 {
500 #ifdef _POSIX_MONOTONIC_CLOCK
501 struct timespec now_ts;
502
503 if (clock_gettime(EXIM_CLOCKTYPE, &now_ts) == 0)
504   {
505   now_ts.tv_sec += offset_ts.tv_sec;
506   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
507     {
508     now_ts.tv_sec++;
509     now_ts.tv_nsec -= 1000*1000*1000;
510     }
511   tv->tv_sec = now_ts.tv_sec;
512   tv->tv_usec = now_ts.tv_nsec / 1000;
513   }
514 else
515 #endif
516   (void)gettimeofday(tv, NULL);
517 }
518
519
520 /* Exim uses a time + a pid to generate a unique identifier in two places: its
521 message IDs, and in file names for maildir deliveries. Because some OS now
522 re-use pids within the same second, sub-second times are now being used.
523 However, for absolute certainty, we must ensure the clock has ticked before
524 allowing the relevant process to complete. At the time of implementation of
525 this code (February 2003), the speed of processors is such that the clock will
526 invariably have ticked already by the time a process has done its job. This
527 function prepares for the time when things are faster - and it also copes with
528 clocks that go backwards.
529
530 Arguments:
531   prev_tv      A timeval which was used to create uniqueness; its usec field
532                  has been rounded down to the value of the resolution.
533                  We want to be sure the current time is greater than this.
534                  On return, updated to current (rounded down).
535   resolution   The resolution that was used to divide the microseconds
536                  (1 for maildir, larger for message ids)
537
538 Returns:       nothing
539 */
540
541 void
542 exim_wait_tick(struct timeval * prev_tv, int resolution)
543 {
544 struct timeval now_tv;
545 long int now_true_usec;
546
547 exim_gettime(&now_tv);
548 now_true_usec = now_tv.tv_usec;
549 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
550
551 while (exim_tvcmp(&now_tv, prev_tv) <= 0)
552   {
553   struct itimerval itval;
554   itval.it_interval.tv_sec = 0;
555   itval.it_interval.tv_usec = 0;
556   itval.it_value.tv_sec = prev_tv->tv_sec - now_tv.tv_sec;
557   itval.it_value.tv_usec = prev_tv->tv_usec + resolution - now_true_usec;
558
559   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
560   negative value for the microseconds is possible only in the case when "now"
561   is more than a second less than "tgt". That means that itval.it_value.tv_sec
562   is greater than zero. The following correction is therefore safe. */
563
564   if (itval.it_value.tv_usec < 0)
565     {
566     itval.it_value.tv_usec += 1000000;
567     itval.it_value.tv_sec -= 1;
568     }
569
570   DEBUG(D_transport|D_receive)
571     {
572     if (!f.running_in_test_harness)
573       {
574       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
575         prev_tv->tv_sec, (long) prev_tv->tv_usec,
576         now_tv.tv_sec, (long) now_tv.tv_usec);
577       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
578         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
579       }
580     }
581
582   milliwait(&itval);
583
584   /* Be prapared to go around if the kernel does not implement subtick
585   granularity (GNU Hurd) */
586
587   exim_gettime(&now_tv);
588   now_true_usec = now_tv.tv_usec;
589   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
590   }
591 *prev_tv = now_tv;
592 }
593
594
595
596
597 /*************************************************
598 *   Call fopen() with umask 777 and adjust mode  *
599 *************************************************/
600
601 /* Exim runs with umask(0) so that files created with open() have the mode that
602 is specified in the open() call. However, there are some files, typically in
603 the spool directory, that are created with fopen(). They end up world-writeable
604 if no precautions are taken. Although the spool directory is not accessible to
605 the world, this is an untidiness. So this is a wrapper function for fopen()
606 that sorts out the mode of the created file.
607
608 Arguments:
609    filename       the file name
610    options        the fopen() options
611    mode           the required mode
612
613 Returns:          the fopened FILE or NULL
614 */
615
616 FILE *
617 modefopen(const uschar *filename, const char *options, mode_t mode)
618 {
619 mode_t saved_umask = umask(0777);
620 FILE *f = Ufopen(filename, options);
621 (void)umask(saved_umask);
622 if (f != NULL) (void)fchmod(fileno(f), mode);
623 return f;
624 }
625
626
627 /*************************************************
628 *   Ensure stdin, stdout, and stderr exist       *
629 *************************************************/
630
631 /* Some operating systems grumble if an exec() happens without a standard
632 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
633 file will be opened and will use these fd values, and then some other bit of
634 code will assume, for example, that it can write error messages to stderr.
635 This function ensures that fds 0, 1, and 2 are open if they do not already
636 exist, by connecting them to /dev/null.
637
638 This function is also used to ensure that std{in,out,err} exist at all times,
639 so that if any library that Exim calls tries to use them, it doesn't crash.
640
641 Arguments:  None
642 Returns:    Nothing
643 */
644
645 void
646 exim_nullstd(void)
647 {
648 int devnull = -1;
649 struct stat statbuf;
650 for (int i = 0; i <= 2; i++)
651   {
652   if (fstat(i, &statbuf) < 0 && errno == EBADF)
653     {
654     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
655     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
656       string_open_failed("/dev/null", NULL));
657     if (devnull != i) (void)dup2(devnull, i);
658     }
659   }
660 if (devnull > 2) (void)close(devnull);
661 }
662
663
664
665
666 /*************************************************
667 *   Close unwanted file descriptors for delivery *
668 *************************************************/
669
670 /* This function is called from a new process that has been forked to deliver
671 an incoming message, either directly, or using exec.
672
673 We want any smtp input streams to be closed in this new process. However, it
674 has been observed that using fclose() here causes trouble. When reading in -bS
675 input, duplicate copies of messages have been seen. The files will be sharing a
676 file pointer with the parent process, and it seems that fclose() (at least on
677 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
678 least sometimes. Hence we go for closing the underlying file descriptors.
679
680 If TLS is active, we want to shut down the TLS library, but without molesting
681 the parent's SSL connection.
682
683 For delivery of a non-SMTP message, we want to close stdin and stdout (and
684 stderr unless debugging) because the calling process might have set them up as
685 pipes and be waiting for them to close before it waits for the submission
686 process to terminate. If they aren't closed, they hold up the calling process
687 until the initial delivery process finishes, which is not what we want.
688
689 Exception: We do want it for synchronous delivery!
690
691 And notwithstanding all the above, if D_resolver is set, implying resolver
692 debugging, leave stdout open, because that's where the resolver writes its
693 debugging output.
694
695 When we close stderr (which implies we've also closed stdout), we also get rid
696 of any controlling terminal.
697
698 Arguments:   None
699 Returns:     Nothing
700 */
701
702 static void
703 close_unwanted(void)
704 {
705 if (smtp_input)
706   {
707 #ifndef DISABLE_TLS
708   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
709 #endif
710   (void)close(fileno(smtp_in));
711   (void)close(fileno(smtp_out));
712   smtp_in = NULL;
713   }
714 else
715   {
716   (void)close(0);                                          /* stdin */
717   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
718   if (debug_selector == 0)                                 /* stderr */
719     {
720     if (!f.synchronous_delivery)
721       {
722       (void)close(2);
723       log_stderr = NULL;
724       }
725     (void)setsid();
726     }
727   }
728 }
729
730
731
732
733 /*************************************************
734 *          Set uid and gid                       *
735 *************************************************/
736
737 /* This function sets a new uid and gid permanently, optionally calling
738 initgroups() to set auxiliary groups. There are some special cases when running
739 Exim in unprivileged modes. In these situations the effective uid will not be
740 root; if we already have the right effective uid/gid, and don't need to
741 initialize any groups, leave things as they are.
742
743 Arguments:
744   uid        the uid
745   gid        the gid
746   igflag     TRUE if initgroups() wanted
747   msg        text to use in debugging output and failure log
748
749 Returns:     nothing; bombs out on failure
750 */
751
752 void
753 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, const uschar * msg)
754 {
755 uid_t euid = geteuid();
756 gid_t egid = getegid();
757
758 if (euid == root_uid || euid != uid || egid != gid || igflag)
759   {
760   /* At least one OS returns +1 for initgroups failure, so just check for
761   non-zero. */
762
763   if (igflag)
764     {
765     struct passwd *pw = getpwuid(uid);
766     if (!pw)
767       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
768         "no passwd entry for uid=%ld", (long int)uid);
769
770     if (initgroups(pw->pw_name, gid) != 0)
771       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
772         (long int)uid, strerror(errno));
773     }
774
775   if (setgid(gid) < 0 || setuid(uid) < 0)
776     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
777       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
778   }
779
780 /* Debugging output included uid/gid and all groups */
781
782 DEBUG(D_uid)
783   {
784   int group_count, save_errno;
785   gid_t group_list[EXIM_GROUPLIST_SIZE];
786   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
787     (long int)geteuid(), (long int)getegid(), (long int)getpid());
788   group_count = getgroups(nelem(group_list), group_list);
789   save_errno = errno;
790   debug_printf("  auxiliary group list:");
791   if (group_count > 0)
792     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
793   else if (group_count < 0)
794     debug_printf(" <error: %s>", strerror(save_errno));
795   else debug_printf(" <none>");
796   debug_printf("\n");
797   }
798 }
799
800
801
802
803 /*************************************************
804 *               Exit point                       *
805 *************************************************/
806
807 /* Exim exits via this function so that it always clears up any open
808 databases.
809
810 Arguments:
811   rc         return code
812
813 Returns:     does not return
814 */
815
816 void
817 exim_exit(int rc)
818 {
819 search_tidyup();
820 store_exit();
821 DEBUG(D_any)
822   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
823     ">>>>>>>>>>>>>>>>\n",
824     (int)getpid(), process_purpose, rc);
825 exit(rc);
826 }
827
828
829 void
830 exim_underbar_exit(int rc)
831 {
832 store_exit();
833 DEBUG(D_any)
834   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
835     ">>>>>>>>>>>>>>>>\n",
836     (int)getpid(), process_purpose, rc);
837 _exit(rc);
838 }
839
840
841
842 /* Print error string, then die */
843 static void
844 exim_fail(const char * fmt, ...)
845 {
846 va_list ap;
847 va_start(ap, fmt);
848 vfprintf(stderr, fmt, ap);
849 va_end(ap);
850 exit(EXIT_FAILURE);
851 }
852
853 /* fail if a length is too long */
854 static inline void
855 exim_len_fail_toolong(int itemlen, int maxlen, const char * description)
856 {
857 if (itemlen <= maxlen)
858   return;
859 fprintf(stderr, "exim: length limit exceeded (%d > %d) for: %s\n",
860         itemlen, maxlen, description);
861 exit(EXIT_FAILURE);
862 }
863
864 /* only pass through the string item back to the caller if it's short enough */
865 static inline const uschar *
866 exim_str_fail_toolong(const uschar * item, int maxlen, const char * description)
867 {
868 if (!item)
869   exim_fail("exim: bad item for: %s\n", description);
870 exim_len_fail_toolong(Ustrlen(item), maxlen, description);
871 return item;
872 }
873
874 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
875 of chown()/fchown().  See src/functions.h for more explanation */
876 int
877 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
878 {
879 int saved_errno = errno;  /* from the preceeding chown call */
880 #if 1
881 log_write(0, LOG_MAIN|LOG_PANIC,
882   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
883   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
884   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
885 #else
886 /* I leave this here, commented, in case the "bug"(?) comes up again.
887    It is not an Exim bug, but we can provide a workaround.
888    See Bug 2391
889    HS 2019-04-18 */
890
891 struct stat buf;
892
893 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
894   {
895   if (buf.st_uid == owner && buf.st_gid == group) return 0;
896   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
897   }
898 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
899
900 #endif
901 errno = saved_errno;
902 return -1;
903 }
904
905
906 /* Bump the index for argv, checking for overflow,
907 and return the argument. */
908
909 static const uschar *
910 next_argv(const uschar ** argv, int * pi, int argc, const uschar * where)
911 {
912 int i = *pi;
913 if (++i >= argc) exim_fail("exim: bad item for: %s\n", where);
914 return argv[*pi = i];
915 }
916
917
918 /*************************************************
919 *         Extract port from host address         *
920 *************************************************/
921
922 /* Called to extract the port from the values given to -oMa and -oMi.
923 It also checks the syntax of the address, and terminates it before the
924 port data when a port is extracted.
925
926 Argument:
927   address   the address, with possible port on the end
928
929 Returns:    the port, or zero if there isn't one
930             bombs out on a syntax error
931 */
932
933 static int
934 check_port(uschar *address)
935 {
936 int port = host_address_extract_port(address);
937 if (string_is_ip_address(address, NULL) == 0)
938   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
939 return port;
940 }
941
942
943
944 /*************************************************
945 *              Test/verify an address            *
946 *************************************************/
947
948 /* This function is called by the -bv and -bt code. It extracts a working
949 address from a full RFC 822 address. This isn't really necessary per se, but it
950 has the effect of collapsing source routes.
951
952 Arguments:
953   s            the address string
954   flags        flag bits for verify_address()
955   exit_value   to be set for failures
956
957 Returns:       nothing
958 */
959
960 static void
961 test_address(uschar *s, int flags, int *exit_value)
962 {
963 int start, end, domain;
964 uschar *parse_error = NULL;
965 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
966   FALSE);
967 if (!address)
968   {
969   fprintf(stdout, "syntax error: %s\n", parse_error);
970   *exit_value = 2;
971   }
972 else
973   {
974   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
975     -1, -1, NULL, NULL, NULL);
976   if (rc == FAIL) *exit_value = 2;
977   else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
978   }
979 }
980
981
982
983 /*************************************************
984 *          Show supported features               *
985 *************************************************/
986
987 static void
988 show_string(BOOL is_stdout, gstring * g)
989 {
990 const uschar * s = string_from_gstring(g);
991 if (s)
992   if (is_stdout) fputs(CCS s, stdout);
993   else debug_printf("%s", s);
994 }
995
996
997 static gstring *
998 show_db_version(gstring * g)
999 {
1000 #ifdef DB_VERSION_STRING
1001 DEBUG(D_any)
1002   {
1003   g = string_fmt_append(g, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
1004   g = string_fmt_append(g, "                      Runtime: %s\n",
1005     db_version(NULL, NULL, NULL));
1006   }
1007 else
1008   g = string_fmt_append(g, "Berkeley DB: %s\n", DB_VERSION_STRING);
1009
1010 #elif defined(BTREEVERSION) && defined(HASHVERSION)
1011 # ifdef USE_DB
1012   g = string_cat(g, US"Probably Berkeley DB version 1.8x (native mode)\n");
1013 # else
1014   g = string_cat(g, US"Probably Berkeley DB version 1.8x (compatibility mode)\n");
1015 # endif
1016
1017 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
1018 g = string_cat(g, US"Probably ndbm\n");
1019 #elif defined(USE_TDB)
1020 g = string_cat(g, US"Using tdb\n");
1021 #else
1022 # ifdef USE_GDBM
1023   g = string_cat(g, US"Probably GDBM (native mode)\n");
1024 # else
1025   g = string_cat(g, US"Probably GDBM (compatibility mode)\n");
1026 # endif
1027 #endif
1028 return g;
1029 }
1030
1031
1032 /* This function is called for -bV/--version and for -d to output the optional
1033 features of the current Exim binary.
1034
1035 Arguments:  BOOL, true for stdout else debug channel
1036 Returns:    nothing
1037 */
1038
1039 static void
1040 show_whats_supported(BOOL is_stdout)
1041 {
1042 rmark reset_point = store_mark();
1043 gstring * g = NULL;
1044
1045 DEBUG(D_any) {} else g = show_db_version(g);
1046
1047 g = string_cat(g, US"Support for:");
1048 #ifdef WITH_CONTENT_SCAN
1049   g = string_cat(g, US" Content_Scanning");
1050 #endif
1051 #ifdef SUPPORT_CRYPTEQ
1052   g = string_cat(g, US" crypteq");
1053 #endif
1054 #ifdef EXPAND_DLFUNC
1055   g = string_cat(g, US" Expand_dlfunc");
1056 #endif
1057 #if HAVE_ICONV
1058   g = string_cat(g, US" iconv()");
1059 #endif
1060 #if HAVE_IPV6
1061   g = string_cat(g, US" IPv6");
1062 #endif
1063 #ifdef SUPPORT_PAM
1064   g = string_cat(g, US" PAM");
1065 #endif
1066 #ifdef EXIM_PERL
1067   g = string_cat(g, US" Perl");
1068 #endif
1069 #ifdef USE_GNUTLS
1070   g = string_cat(g, US" GnuTLS");
1071 #endif
1072 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
1073   g = string_cat(g, US" move_frozen_messages");
1074 #endif
1075 #ifdef USE_OPENSSL
1076   g = string_cat(g, US" OpenSSL");
1077 #endif
1078 #if defined(CYRUS_PWCHECK_SOCKET)
1079   g = string_cat(g, US" pwcheck");
1080 #endif
1081 #if defined(RADIUS_CONFIG_FILE)
1082   g = string_cat(g, US" radius");
1083 #endif
1084 #ifndef DISABLE_TLS_RESUME
1085   g = string_cat(g, US" TLS_resume");
1086 #endif
1087 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
1088   g = string_cat(g, US" translate_ip_address");
1089 #endif
1090 #ifdef USE_TCP_WRAPPERS
1091   g = string_cat(g, US" TCPwrappers");
1092 #endif
1093 #ifdef HAVE_SETCLASSRESOURCES
1094   g = string_cat(g, US" use_setclassresources");
1095 #endif
1096 #ifdef SUPPORT_DANE
1097   g = string_cat(g, US" DANE");
1098 #endif
1099 #ifndef DISABLE_DKIM
1100   g = string_cat(g, US" DKIM");
1101 #endif
1102 #ifdef SUPPORT_DMARC
1103   g = string_cat(g, US" DMARC");
1104 #endif
1105 #ifndef DISABLE_DNSSEC
1106   g = string_cat(g, US" DNSSEC");
1107 #endif
1108 #ifndef DISABLE_ESMTP_LIMITS
1109   g = string_cat(g, US" ESMTP_Limits");
1110 #endif
1111 #ifndef DISABLE_EVENT
1112   g = string_cat(g, US" Event");
1113 #endif
1114 #ifdef SUPPORT_I18N
1115   g = string_cat(g, US" I18N");
1116 #endif
1117 #ifndef DISABLE_OCSP
1118   g = string_cat(g, US" OCSP");
1119 #endif
1120 #ifndef DISABLE_PIPE_CONNECT
1121   g = string_cat(g, US" PIPECONNECT");
1122 #endif
1123 #ifndef DISABLE_PRDR
1124   g = string_cat(g, US" PRDR");
1125 #endif
1126 #ifdef SUPPORT_PROXY
1127   g = string_cat(g, US" PROXY");
1128 #endif
1129 #ifndef DISABLE_QUEUE_RAMP
1130   g = string_cat(g, US" Queue_Ramp");
1131 #endif
1132 #ifdef SUPPORT_SOCKS
1133   g = string_cat(g, US" SOCKS");
1134 #endif
1135 #ifdef SUPPORT_SPF
1136   g = string_cat(g, US" SPF");
1137 #endif
1138 #if defined(SUPPORT_SRS)
1139   g = string_cat(g, US" SRS");
1140 #endif
1141 #ifdef TCP_FASTOPEN
1142   tcp_init();
1143   if (f.tcp_fastopen_ok) g = string_cat(g, US" TCP_Fast_Open");
1144 #endif
1145 #ifdef EXPERIMENTAL_ARC
1146   g = string_cat(g, US" Experimental_ARC");
1147 #endif
1148 #ifdef EXPERIMENTAL_BRIGHTMAIL
1149   g = string_cat(g, US" Experimental_Brightmail");
1150 #endif
1151 #ifdef EXPERIMENTAL_DCC
1152   g = string_cat(g, US" Experimental_DCC");
1153 #endif
1154 #ifdef EXPERIMENTAL_DSN_INFO
1155   g = string_cat(g, US" Experimental_DSN_info");
1156 #endif
1157 #ifdef EXPERIMENTAL_QUEUEFILE
1158   g = string_cat(g, US" Experimental_QUEUEFILE");
1159 #endif
1160 #ifdef EXPERIMENTAL_XCLIENT
1161   g = string_cat(g, US" Experimental_XCLIENT");
1162 #endif
1163 g = string_cat(g, US"\n");
1164
1165 g = string_cat(g, US"Lookups (built-in):");
1166 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1167   g = string_cat(g, US" lsearch wildlsearch nwildlsearch iplsearch");
1168 #endif
1169 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1170   g = string_cat(g, US" cdb");
1171 #endif
1172 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1173   g = string_cat(g, US" dbm dbmjz dbmnz");
1174 #endif
1175 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1176   g = string_cat(g, US" dnsdb");
1177 #endif
1178 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1179   g = string_cat(g, US" dsearch");
1180 #endif
1181 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1182   g = string_cat(g, US" ibase");
1183 #endif
1184 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1185   g = string_cat(g, US" json");
1186 #endif
1187 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1188   g = string_cat(g, US" ldap ldapdn ldapm");
1189 #endif
1190 #ifdef LOOKUP_LMDB
1191   g = string_cat(g, US" lmdb");
1192 #endif
1193 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1194   g = string_cat(g, US" mysql");
1195 #endif
1196 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1197   g = string_cat(g, US" nis nis0");
1198 #endif
1199 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1200   g = string_cat(g, US" nisplus");
1201 #endif
1202 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1203   g = string_cat(g, US" oracle");
1204 #endif
1205 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1206   g = string_cat(g, US" passwd");
1207 #endif
1208 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1209   g = string_cat(g, US" pgsql");
1210 #endif
1211 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1212   g = string_cat(g, US" redis");
1213 #endif
1214 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1215   g = string_cat(g, US" sqlite");
1216 #endif
1217 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1218   g = string_cat(g, US" testdb");
1219 #endif
1220 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1221   g = string_cat(g, US" whoson");
1222 #endif
1223 g = string_cat(g, US"\n");
1224
1225 g = auth_show_supported(g);
1226 g = route_show_supported(g);
1227 g = transport_show_supported(g);
1228
1229 #ifdef WITH_CONTENT_SCAN
1230 g = malware_show_supported(g);
1231 #endif
1232 show_string(is_stdout, g); g = NULL;
1233
1234 if (fixed_never_users[0] > 0)
1235   {
1236   int i;
1237   g = string_cat(g, US"Fixed never_users: ");
1238   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1239     string_fmt_append(g, "%u:", (unsigned)fixed_never_users[i]);
1240   g = string_fmt_append(g, "%u\n", (unsigned)fixed_never_users[i]);
1241   }
1242
1243 g = string_fmt_append(g, "Configure owner: %d:%d\n", config_uid, config_gid);
1244
1245 g = string_fmt_append(g, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1246
1247 /* Everything else is details which are only worth reporting when debugging.
1248 Perhaps the tls_version_report should move into this too. */
1249 DEBUG(D_any)
1250   {
1251
1252 /* clang defines __GNUC__ (at least, for me) so test for it first */
1253 #if defined(__clang__)
1254   g = string_fmt_append(g, "Compiler: CLang [%s]\n", __clang_version__);
1255 #elif defined(__GNUC__)
1256 # ifdef __VERSION__
1257   g = string_fmt_append(g, "Compiler: GCC [%s]\n", __VERSION__);
1258 # else
1259   g = string_fmt_append(g, "Compiler: GCC [%s]\n", "? unknown version ?";
1260 # endif
1261 #else
1262   g = string_cat(g, US"Compiler: <unknown>\n");
1263 #endif
1264
1265 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1266   g = string_fmt_append(g, "Library version: Glibc: Compile: %d.%d\n",
1267                 __GLIBC__, __GLIBC_MINOR__);
1268   if (__GLIBC_PREREQ(2, 1))
1269     g = string_fmt_append(g, "                        Runtime: %s\n",
1270                 gnu_get_libc_version());
1271 #endif
1272
1273 g = show_db_version(g);
1274
1275 #ifndef DISABLE_TLS
1276   g = tls_version_report(g);
1277 #endif
1278 #ifdef SUPPORT_I18N
1279   g = utf8_version_report(g);
1280 #endif
1281 #ifdef SUPPORT_DMARC
1282   g = dmarc_version_report(g);
1283 #endif
1284 #ifdef SUPPORT_SPF
1285   g = spf_lib_version_report(g);
1286 #endif
1287
1288 show_string(is_stdout, g);
1289 g = NULL;
1290
1291 for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1292   if (authi->version_report)
1293     g = (*authi->version_report)(g);
1294
1295   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1296   characters; unless it's an ancient version of PCRE in which case it
1297   is not defined. */
1298 #ifndef PCRE_PRERELEASE
1299 # define PCRE_PRERELEASE
1300 #endif
1301 #define QUOTE(X) #X
1302 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1303   {
1304   uschar buf[24];
1305   pcre2_config(PCRE2_CONFIG_VERSION, buf);
1306   g = string_fmt_append(g, "Library version: PCRE2: Compile: %d.%d%s\n"
1307               "                        Runtime: %s\n",
1308           PCRE2_MAJOR, PCRE2_MINOR,
1309           EXPAND_AND_QUOTE(PCRE2_PRERELEASE) "",
1310           buf);
1311   }
1312 #undef QUOTE
1313 #undef EXPAND_AND_QUOTE
1314
1315 show_string(is_stdout, g);
1316 g = NULL;
1317
1318 init_lookup_list();
1319 for (int i = 0; i < lookup_list_count; i++)
1320   if (lookup_list[i]->version_report)
1321     g = lookup_list[i]->version_report(g);
1322 show_string(is_stdout, g);
1323 g = NULL;
1324
1325 #ifdef WHITELIST_D_MACROS
1326   g = string_fmt_append(g, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1327 #else
1328   g = string_cat(g, US"WHITELIST_D_MACROS unset\n");
1329 #endif
1330 #ifdef TRUSTED_CONFIG_LIST
1331   g = string_fmt_append(g, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1332 #else
1333   g = string_cat(g, US"TRUSTED_CONFIG_LIST unset\n");
1334 #endif
1335   }
1336
1337 show_string(is_stdout, g);
1338 store_reset(reset_point);
1339 }
1340
1341
1342 /*************************************************
1343 *     Show auxiliary information about Exim      *
1344 *************************************************/
1345
1346 static void
1347 show_exim_information(enum commandline_info request, FILE *stream)
1348 {
1349 switch(request)
1350   {
1351   case CMDINFO_NONE:
1352     fprintf(stream, "Oops, something went wrong.\n");
1353     return;
1354   case CMDINFO_HELP:
1355     fprintf(stream,
1356 "The -bI: flag takes a string indicating which information to provide.\n"
1357 "If the string is not recognised, you'll get this help (on stderr).\n"
1358 "\n"
1359 "  exim -bI:help    this information\n"
1360 "  exim -bI:dscp    list of known dscp value keywords\n"
1361 "  exim -bI:sieve   list of supported sieve extensions\n"
1362 );
1363     return;
1364   case CMDINFO_SIEVE:
1365     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1366       fprintf(stream, "%s\n", *pp);
1367     return;
1368   case CMDINFO_DSCP:
1369     dscp_list_to_stream(stream);
1370     return;
1371   }
1372 }
1373
1374
1375 /*************************************************
1376 *               Quote a local part               *
1377 *************************************************/
1378
1379 /* This function is used when a sender address or a From: or Sender: header
1380 line is being created from the caller's login, or from an authenticated_id. It
1381 applies appropriate quoting rules for a local part.
1382
1383 Argument:    the local part
1384 Returns:     the local part, quoted if necessary
1385 */
1386
1387 const uschar *
1388 local_part_quote(const uschar * lpart)
1389 {
1390 BOOL needs_quote = FALSE;
1391 gstring * g;
1392
1393 for (const uschar * t = lpart; !needs_quote && *t; t++)
1394   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1395     (*t != '.' || t == lpart || t[1] == 0);
1396
1397 if (!needs_quote) return lpart;
1398
1399 g = string_catn(NULL, US"\"", 1);
1400
1401 for (;;)
1402   {
1403   uschar * nq = US Ustrpbrk(lpart, "\\\"");
1404   if (!nq)
1405     {
1406     g = string_cat(g, lpart);
1407     break;
1408     }
1409   g = string_catn(g, lpart, nq - lpart);
1410   g = string_catn(g, US"\\", 1);
1411   g = string_catn(g, nq, 1);
1412   lpart = nq + 1;
1413   }
1414
1415 g = string_catn(g, US"\"", 1);
1416 return string_from_gstring(g);
1417 }
1418
1419
1420
1421 #ifdef USE_READLINE
1422 /*************************************************
1423 *         Load readline() functions              *
1424 *************************************************/
1425
1426 /* This function is called from testing executions that read data from stdin,
1427 but only when running as the calling user. Currently, only -be does this. The
1428 function loads the readline() function library and passes back the functions.
1429 On some systems, it needs the curses library, so load that too, but try without
1430 it if loading fails. All this functionality has to be requested at build time.
1431
1432 Arguments:
1433   fn_readline_ptr   pointer to where to put the readline pointer
1434   fn_addhist_ptr    pointer to where to put the addhistory function
1435
1436 Returns:            the dlopen handle or NULL on failure
1437 */
1438
1439 static void *
1440 set_readline(char * (**fn_readline_ptr)(const char *),
1441              void   (**fn_addhist_ptr)(const char *))
1442 {
1443 void *dlhandle;
1444 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1445
1446 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1447 if (dlhandle_curses) dlclose(dlhandle_curses);
1448
1449 if (dlhandle)
1450   {
1451   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1452    *   char * readline (const char *prompt);
1453    *   void add_history (const char *string);
1454    */
1455   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1456   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1457   }
1458 else
1459   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1460
1461 return dlhandle;
1462 }
1463 #endif
1464
1465
1466
1467 /*************************************************
1468 *    Get a line from stdin for testing things    *
1469 *************************************************/
1470
1471 /* This function is called when running tests that can take a number of lines
1472 of input (for example, -be and -bt). It handles continuations and trailing
1473 spaces. And prompting and a blank line output on eof. If readline() is in use,
1474 the arguments are non-NULL and provide the relevant functions.
1475
1476 Arguments:
1477   fn_readline   readline function or NULL
1478   fn_addhist    addhist function or NULL
1479
1480 Returns:        pointer to dynamic memory, or NULL at end of file
1481 */
1482
1483 static uschar *
1484 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1485 {
1486 gstring * g = NULL;
1487 BOOL had_input = FALSE;
1488
1489 if (!fn_readline) { printf("> "); fflush(stdout); }
1490
1491 for (int i = 0;; i++)
1492   {
1493   uschar buffer[1024];
1494   uschar * p, * ss;
1495
1496 #ifdef USE_READLINE
1497   char *readline_line = NULL;
1498   if (fn_readline)
1499     {
1500     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1501     if (*readline_line && fn_addhist) fn_addhist(readline_line);
1502     p = US readline_line;
1503     }
1504   else
1505 #endif
1506
1507   /* readline() not in use */
1508
1509     {
1510     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;   /*EOF*/
1511     p = buffer;
1512     }
1513
1514   /* Handle the line */
1515
1516   had_input = TRUE;
1517   ss = p + Ustrlen(p);
1518   while (ss > p && isspace(ss[-1])) ss--; /* strip trailing newline (and spaces) */
1519
1520   if (i > 0)
1521     while (p < ss && isspace(*p)) p++;   /* strip leading space after cont */
1522
1523   g = string_catn(g, p, ss - p);
1524
1525 #ifdef USE_READLINE
1526   if (fn_readline) free(readline_line);
1527 #endif
1528
1529   /* g can only be NULL if ss==p */
1530   if (ss == p || gstring_last_char(g) != '\\') /* not continuation; done */
1531     break;
1532
1533   gstring_trim(g, 1);                           /* drop the \ */
1534   }
1535
1536 if (had_input) return g ? string_from_gstring(g) : US"";
1537 printf("\n");
1538 return NULL;
1539 }
1540
1541
1542
1543 /*************************************************
1544 *    Output usage information for the program    *
1545 *************************************************/
1546
1547 /* This function is called when there are no recipients
1548    or a specific --help argument was added.
1549
1550 Arguments:
1551   progname      information on what name we were called by
1552
1553 Returns:        DOES NOT RETURN
1554 */
1555
1556 static void
1557 exim_usage(const uschar * progname)
1558 {
1559
1560 /* Handle specific program invocation variants */
1561 if (Ustrcmp(progname, US"-mailq") == 0)
1562   exim_fail(
1563     "mailq - list the contents of the mail queue\n\n"
1564     "For a list of options, see the Exim documentation.\n");
1565
1566 /* Generic usage - we output this whatever happens */
1567 exim_fail(
1568   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1569   "not directly from a shell command line. Options and/or arguments control\n"
1570   "what it does when called. For a list of options, see the Exim documentation.\n");
1571 }
1572
1573
1574
1575 /*************************************************
1576 *    Validate that the macros given are okay     *
1577 *************************************************/
1578
1579 /* Typically, Exim will drop privileges if macros are supplied.  In some
1580 cases, we want to not do so.
1581
1582 Arguments:    opt_D_used - true if the commandline had a "-D" option
1583 Returns:      true if trusted, false otherwise
1584 */
1585
1586 static BOOL
1587 macros_trusted(BOOL opt_D_used)
1588 {
1589 #ifdef WHITELIST_D_MACROS
1590 uschar *whitelisted, *end, *p, **whites;
1591 int white_count, i, n;
1592 size_t len;
1593 BOOL prev_char_item, found;
1594 #endif
1595
1596 if (!opt_D_used)
1597   return TRUE;
1598 #ifndef WHITELIST_D_MACROS
1599 return FALSE;
1600 #else
1601
1602 /* We only trust -D overrides for some invoking users:
1603 root, the exim run-time user, the optional config owner user.
1604 I don't know why config-owner would be needed, but since they can own the
1605 config files anyway, there's no security risk to letting them override -D. */
1606 if ( ! ((real_uid == root_uid)
1607      || (real_uid == exim_uid)
1608 #ifdef CONFIGURE_OWNER
1609      || (real_uid == config_uid)
1610 #endif
1611    ))
1612   {
1613   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1614   return FALSE;
1615   }
1616
1617 /* Get a list of macros which are whitelisted */
1618 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1619 prev_char_item = FALSE;
1620 white_count = 0;
1621 for (p = whitelisted; *p != '\0'; ++p)
1622   {
1623   if (*p == ':' || isspace(*p))
1624     {
1625     *p = '\0';
1626     if (prev_char_item)
1627       ++white_count;
1628     prev_char_item = FALSE;
1629     continue;
1630     }
1631   if (!prev_char_item)
1632     prev_char_item = TRUE;
1633   }
1634 end = p;
1635 if (prev_char_item)
1636   ++white_count;
1637 if (!white_count)
1638   return FALSE;
1639 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1640 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1641   {
1642   if (*p != '\0')
1643     {
1644     whites[i++] = p;
1645     if (i == white_count)
1646       break;
1647     while (*p != '\0' && p < end)
1648       ++p;
1649     }
1650   }
1651 whites[i] = NULL;
1652
1653 /* The list of commandline macros should be very short.
1654 Accept the N*M complexity. */
1655 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1656   {
1657   found = FALSE;
1658   for (uschar ** w = whites; *w; ++w)
1659     if (Ustrcmp(*w, m->name) == 0)
1660       {
1661       found = TRUE;
1662       break;
1663       }
1664   if (!found)
1665     return FALSE;
1666   if (!m->replacement)
1667     continue;
1668   if ((len = m->replen) == 0)
1669     continue;
1670   if (!regex_match(regex_whitelisted_macro, m->replacement, len, NULL))
1671     return FALSE;
1672   }
1673 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1674 return TRUE;
1675 #endif
1676 }
1677
1678
1679 /*************************************************
1680 *          Expansion testing                     *
1681 *************************************************/
1682
1683 /* Expand and print one item, doing macro-processing.
1684
1685 Arguments:
1686   item          line for expansion
1687 */
1688
1689 static void
1690 expansion_test_line(const uschar * line)
1691 {
1692 int len;
1693 BOOL dummy_macexp;
1694 uschar * s;
1695
1696 Ustrncpy(big_buffer, line, big_buffer_size);
1697 big_buffer[big_buffer_size-1] = '\0';
1698 len = Ustrlen(big_buffer);
1699
1700 (void) macros_expand(0, &len, &dummy_macexp);
1701
1702 if (isupper(big_buffer[0]))
1703   {
1704   if (macro_read_assignment(big_buffer))
1705     printf("Defined macro '%s'\n", mlast->name);
1706   }
1707 else if (Ustrncmp(big_buffer, "set,t ", 6) == 0)
1708   printf("%s\n", acl_standalone_setvar(big_buffer+6, TRUE));
1709 else if (Ustrncmp(big_buffer, "set ", 4) == 0)
1710   printf("%s\n", acl_standalone_setvar(big_buffer+4, FALSE));
1711 else
1712   if ((s = expand_string(big_buffer))) printf("%s\n", CS s);
1713   else printf("Failed: %s\n", expand_string_message);
1714 }
1715
1716
1717
1718 /*************************************************
1719 *          Queue-runner operations               *
1720 *************************************************/
1721
1722 /* Prefix a new qrunner descriptor to the qrunners list */
1723
1724 static qrunner *
1725 alloc_qrunner(void)
1726 {
1727 qrunner * q = qrunners;
1728 qrunners = store_get(sizeof(qrunner), GET_UNTAINTED);
1729 memset(qrunners, 0, sizeof(qrunner));           /* default queue, zero interval */
1730 qrunners->next = q;
1731 qrunners->next_tick = time(NULL);               /* run right away */
1732 return qrunners;
1733 }
1734
1735 static qrunner *
1736 alloc_onetime_qrunner(void)
1737 {
1738 qrunners = store_get_perm(sizeof(qrunner), GET_UNTAINTED);
1739 memset(qrunners, 0, sizeof(qrunner));           /* default queue, zero interval */
1740 qrunners->next_tick = time(NULL);               /* run right away */
1741 qrunners->run_max = 1;
1742 return qrunners;
1743 }
1744
1745
1746 /*************************************************
1747 *          Entry point and high-level code       *
1748 *************************************************/
1749
1750 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1751 the appropriate action. All the necessary functions are present in the one
1752 binary. I originally thought one should split it up, but it turns out that so
1753 much of the apparatus is needed in each chunk that one might as well just have
1754 it all available all the time, which then makes the coding easier as well.
1755
1756 Arguments:
1757   argc      count of entries in argv
1758   argv      argument strings, with argv[0] being the program name
1759
1760 Returns:    EXIT_SUCCESS if terminated successfully
1761             EXIT_FAILURE otherwise, except when a message has been sent
1762               to the sender, and -oee was given
1763 */
1764
1765 int
1766 main(int argc, char ** cargv)
1767 {
1768 const uschar ** argv = CUSS cargv;
1769 int  arg_receive_timeout = -1;
1770 int  arg_smtp_receive_timeout = -1;
1771 int  arg_error_handling = error_handling;
1772 int  filter_sfd = -1;
1773 int  filter_ufd = -1;
1774 int  group_count;
1775 int  i, rv;
1776 int  list_queue_option = QL_BASIC;
1777 int  msg_action = 0;
1778 int  msg_action_arg = -1;
1779 int  namelen = argv[0] ? Ustrlen(argv[0]) : 0;
1780 int  queue_only_reason = 0;
1781 #ifdef EXIM_PERL
1782 int  perl_start_option = 0;
1783 #endif
1784 int  recipients_arg = argc;
1785 int  sender_address_domain = 0;
1786 int  test_retry_arg = -1;
1787 int  test_rewrite_arg = -1;
1788 gid_t original_egid;
1789 BOOL arg_queue_only = FALSE;
1790 BOOL bi_option = FALSE;
1791 BOOL checking = FALSE;
1792 BOOL count_queue = FALSE;
1793 BOOL expansion_test = FALSE;
1794 BOOL extract_recipients = FALSE;
1795 BOOL flag_G = FALSE;
1796 BOOL flag_n = FALSE;
1797 BOOL forced_delivery = FALSE;
1798 BOOL f_end_dot = FALSE;
1799 BOOL deliver_give_up = FALSE;
1800 BOOL list_queue = FALSE;
1801 BOOL list_options = FALSE;
1802 BOOL list_config = FALSE;
1803 BOOL local_queue_only;
1804 BOOL one_msg_action = FALSE;
1805 BOOL opt_D_used = FALSE;
1806 BOOL queue_only_set = FALSE;
1807 BOOL receiving_message = TRUE;
1808 BOOL sender_ident_set = FALSE;
1809 BOOL session_local_queue_only;
1810 BOOL unprivileged;
1811 BOOL removed_privilege = FALSE;
1812 BOOL usage_wanted = FALSE;
1813 BOOL verify_address_mode = FALSE;
1814 BOOL verify_as_sender = FALSE;
1815 BOOL rcpt_verify_quota = FALSE;
1816 BOOL version_printed = FALSE;
1817 const uschar * alias_arg = NULL;
1818 const uschar * called_as = US"";
1819 const uschar * cmdline_syslog_name = NULL;
1820 const uschar * start_queue_run_id = NULL;
1821 const uschar * stop_queue_run_id = NULL;
1822 const uschar * expansion_test_message = NULL;
1823 const uschar * ftest_domain = NULL;
1824 const uschar * ftest_localpart = NULL;
1825 const uschar * ftest_prefix = NULL;
1826 const uschar * ftest_suffix = NULL;
1827 uschar * log_oneline = NULL;
1828 const uschar * malware_test_file = NULL;
1829 const uschar * real_sender_address;
1830 uschar * originator_home = US"/";
1831 size_t sz;
1832
1833 struct passwd *pw;
1834 struct stat statbuf;
1835 pid_t passed_qr_pid = (pid_t)0;
1836 int passed_qr_pipe = -1;
1837 gid_t group_list[EXIM_GROUPLIST_SIZE];
1838
1839 /* For the -bI: flag */
1840 enum commandline_info info_flag = CMDINFO_NONE;
1841 BOOL info_stdout = FALSE;
1842
1843 /* Possible options for -R and -S */
1844
1845 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1846
1847 /* Need to define this in case we need to change the environment in order
1848 to get rid of a bogus time zone. We have to make it char rather than uschar
1849 because some OS define it in /usr/include/unistd.h. */
1850
1851 extern char **environ;
1852
1853 #ifdef MEASURE_TIMING
1854 (void)gettimeofday(&timestamp_startup, NULL);
1855 #endif
1856
1857 store_init();   /* Initialise the memory allocation susbsystem */
1858 pcre_init();    /* Set up memory handling for pcre */
1859
1860 /* If the Exim user and/or group and/or the configuration file owner/group were
1861 defined by ref:name at build time, we must now find the actual uid/gid values.
1862 This is a feature to make the lives of binary distributors easier. */
1863
1864 #ifdef EXIM_USERNAME
1865 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1866   {
1867   if (exim_uid == 0)
1868     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1869
1870   /* If ref:name uses a number as the name, route_finduser() returns
1871   TRUE with exim_uid set and pw coerced to NULL. */
1872   if (pw)
1873     exim_gid = pw->pw_gid;
1874 #ifndef EXIM_GROUPNAME
1875   else
1876     exim_fail(
1877         "exim: ref:name should specify a usercode, not a group.\n"
1878         "exim: can't let you get away with it unless you also specify a group.\n");
1879 #endif
1880   }
1881 else
1882   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1883 #endif
1884
1885 #ifdef EXIM_GROUPNAME
1886 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1887   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1888 #endif
1889
1890 #ifdef CONFIGURE_OWNERNAME
1891 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1892   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1893     CONFIGURE_OWNERNAME);
1894 #endif
1895
1896 /* We default the system_filter_user to be the Exim run-time user, as a
1897 sane non-root value. */
1898 system_filter_uid = exim_uid;
1899
1900 #ifdef CONFIGURE_GROUPNAME
1901 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1902   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1903     CONFIGURE_GROUPNAME);
1904 #endif
1905
1906 /* In the Cygwin environment, some initialization used to need doing.
1907 It was fudged in by means of this macro; now no longer but we'll leave
1908 it in case of others. */
1909
1910 #ifdef OS_INIT
1911 OS_INIT
1912 #endif
1913
1914 /* Check a field which is patched when we are running Exim within its
1915 testing harness; do a fast initial check, and then the whole thing. */
1916
1917 f.running_in_test_harness =
1918   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1919 if (f.running_in_test_harness)
1920   debug_store = TRUE;
1921
1922 /* Protect against abusive argv[0] */
1923 if (!argv[0] || !argc) exim_fail("exim: executable name required\n");
1924 exim_str_fail_toolong(argv[0], PATH_MAX, "argv[0]");
1925
1926 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1927 at the start of a program; however, it seems that some environments do not
1928 follow this. A "strange" locale can affect the formatting of timestamps, so we
1929 make quite sure. */
1930
1931 setlocale(LC_ALL, "C");
1932
1933 /* Get the offset between CLOCK_MONOTONIC/CLOCK_BOOTTIME and wallclock */
1934
1935 #ifdef _POSIX_MONOTONIC_CLOCK
1936 exim_clock_init();
1937 #endif
1938
1939 /* Set up the default handler for timing using alarm(). */
1940
1941 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1942
1943 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1944 because store_malloc writes a log entry on failure. */
1945
1946 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1947   exim_fail("exim: failed to get store for log buffer\n");
1948
1949 /* Initialize the default log options. */
1950
1951 bits_set(log_selector, log_selector_size, log_default);
1952
1953 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1954 NULL when the daemon is run and the file is closed. We have to use this
1955 indirection, because some systems don't allow writing to the variable "stderr".
1956 */
1957
1958 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1959
1960 /* Ensure there is a big buffer for temporary use in several places. It is put
1961 in malloc store so that it can be freed for enlargement if necessary. */
1962
1963 big_buffer = store_malloc(big_buffer_size);
1964
1965 /* Set up the handler for the data request signal, and set the initial
1966 descriptive text. */
1967
1968 process_info = store_get(PROCESS_INFO_SIZE, GET_TAINTED);
1969 set_process_info("initializing");
1970 os_restarting_signal(SIGUSR1, usr1_handler);            /* exiwhat */
1971 #ifdef SA_SIGINFO
1972   {
1973   struct sigaction act = { .sa_sigaction = segv_handler, .sa_flags = SA_RESETHAND | SA_SIGINFO };
1974   sigaction(SIGSEGV, &act, NULL);
1975   }
1976 #else
1977 signal(SIGSEGV, segv_handler);                          /* log faults */
1978 #endif
1979
1980 /* If running in a dockerized environment, the TERM signal is only
1981 delegated to the PID 1 if we request it by setting an signal handler */
1982
1983 if (getpid() == 1) signal(SIGTERM, term_handler);
1984
1985 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1986 in the daemon code. For the rest of Exim's uses, we ignore it. */
1987
1988 signal(SIGHUP, SIG_IGN);
1989
1990 /* We don't want to die on pipe errors as the code is written to handle
1991 the write error instead. */
1992
1993 signal(SIGPIPE, SIG_IGN);
1994
1995 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1996 set to SIG_IGN. This causes subprocesses that complete before the parent
1997 process waits for them not to hang around, so when Exim calls wait(), nothing
1998 is there. The wait() code has been made robust against this, but let's ensure
1999 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
2000 ending status. We use sigaction rather than plain signal() on those OS where
2001 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
2002 problem on AIX with this.) */
2003
2004 #ifdef SA_NOCLDWAIT
2005   {
2006   struct sigaction act;
2007   act.sa_handler = SIG_DFL;
2008   sigemptyset(&(act.sa_mask));
2009   act.sa_flags = 0;
2010   sigaction(SIGCHLD, &act, NULL);
2011   }
2012 #else
2013 signal(SIGCHLD, SIG_DFL);
2014 #endif
2015
2016 /* Save the arguments for use if we re-exec exim as a daemon after receiving
2017 SIGHUP. */
2018
2019 sighup_argv = argv;
2020
2021 /* Set up the version number. Set up the leading 'E' for the external form of
2022 message ids, set the pointer to the internal form, and initialize it to
2023 indicate no message being processed. */
2024
2025 version_init();
2026 message_id_option[0] = '-';
2027 message_id_external = message_id_option + 1;
2028 message_id_external[0] = 'E';
2029 message_id = message_id_external + 1;
2030 message_id[0] = 0;
2031
2032 /* Set the umask to zero so that any files Exim creates using open() are
2033 created with the modes that it specifies. NOTE: Files created with fopen() have
2034 a problem, which was not recognized till rather late (February 2006). With this
2035 umask, such files will be world writeable. (They are all content scanning files
2036 in the spool directory, which isn't world-accessible, so this is not a
2037 disaster, but it's untidy.) I don't want to change this overall setting,
2038 however, because it will interact badly with the open() calls. Instead, there's
2039 now a function called modefopen() that fiddles with the umask while calling
2040 fopen(). */
2041
2042 (void)umask(0);
2043
2044 /* Precompile the regular expression for matching a message id. Keep this in
2045 step with the code that generates ids in the accept.c module. We need to do
2046 this here, because the -M options check their arguments for syntactic validity
2047 using mac_ismsgid, which uses this. */
2048
2049 regex_ismsgid =
2050   regex_must_compile(US"^(?:"
2051           "[^\\W_]{" str(MESSAGE_ID_TIME_LEN) "}"
2052           "-[^\\W_]{" str(MESSAGE_ID_PID_LEN) "}"
2053           "-[^\\W_]{" str(MESSAGE_ID_SUBTIME_LEN) "}"
2054         "|"
2055           "(?:[^\\W_]{6}-){2}[^\\W_]{2}"                /* old ID format */
2056         ")$",
2057     MCS_NOFLAGS, TRUE);
2058
2059 /* Precompile the regular expression that is used for matching an SMTP error
2060 code, possibly extended, at the start of an error message. Note that the
2061 terminating whitespace character is included. */
2062
2063 regex_smtp_code =
2064   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
2065     MCS_NOFLAGS, TRUE);
2066
2067 #ifdef WHITELIST_D_MACROS
2068 /* Precompile the regular expression used to filter the content of macros
2069 given to -D for permissibility. */
2070
2071 regex_whitelisted_macro =
2072   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", MCS_NOFLAGS, TRUE);
2073 #endif
2074
2075 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
2076 this seems to be a generally accepted convention, since one finds symbolic
2077 links called "mailq" in standard OS configurations. */
2078
2079 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
2080     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
2081   {
2082   list_queue = TRUE;
2083   receiving_message = FALSE;
2084   called_as = US"-mailq";
2085   }
2086
2087 /* If the program is called as "rmail" treat it as equivalent to
2088 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
2089 i.e. preventing a single dot on a line from terminating the message, and
2090 returning with zero return code, even in cases of error (provided an error
2091 message has been sent). */
2092
2093 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
2094     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
2095   {
2096   f.dot_ends = FALSE;
2097   called_as = US"-rmail";
2098   errors_sender_rc = EXIT_SUCCESS;
2099   }
2100
2101 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
2102 this is a smail convention. */
2103
2104 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
2105     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
2106   {
2107   smtp_input = smtp_batched_input = TRUE;
2108   called_as = US"-rsmtp";
2109   }
2110
2111 /* If the program is called as "runq" treat it as equivalent to "exim -q";
2112 this is a smail convention. */
2113
2114 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
2115     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
2116   {
2117   alloc_onetime_qrunner();
2118   receiving_message = FALSE;
2119   called_as = US"-runq";
2120   }
2121
2122 /* If the program is called as "newaliases" treat it as equivalent to
2123 "exim -bi"; this is a sendmail convention. */
2124
2125 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
2126     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
2127   {
2128   bi_option = TRUE;
2129   receiving_message = FALSE;
2130   called_as = US"-newaliases";
2131   }
2132
2133 /* Save the original effective uid for a couple of uses later. It should
2134 normally be root, but in some esoteric environments it may not be. */
2135
2136 original_euid = geteuid();
2137 original_egid = getegid();
2138
2139 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
2140 to be the same as the real ones. This makes a difference only if Exim is setuid
2141 (or setgid) to something other than root, which could be the case in some
2142 special configurations. */
2143
2144 real_uid = getuid();
2145 real_gid = getgid();
2146
2147 if (real_uid == root_uid)
2148   {
2149   if ((rv = setgid(real_gid)))
2150     exim_fail("exim: setgid(%ld) failed: %s\n",
2151         (long int)real_gid, strerror(errno));
2152   if ((rv = setuid(real_uid)))
2153     exim_fail("exim: setuid(%ld) failed: %s\n",
2154         (long int)real_uid, strerror(errno));
2155   }
2156
2157 /* If neither the original real uid nor the original euid was root, Exim is
2158 running in an unprivileged state. */
2159
2160 unprivileged = (real_uid != root_uid && original_euid != root_uid);
2161
2162 /* For most of the args-parsing we need to use permanent pool memory */
2163  {
2164  int old_pool = store_pool;
2165  store_pool = POOL_PERM;
2166
2167 /* Scan the program's arguments. Some can be dealt with right away; others are
2168 simply recorded for checking and handling afterwards. Do a high-level switch
2169 on the second character (the one after '-'), to save some effort. */
2170
2171  for (i = 1; i < argc; i++)
2172   {
2173   BOOL badarg = FALSE;
2174   const uschar * arg = argv[i];
2175   const uschar * argrest;
2176   uschar switchchar;
2177
2178   /* An argument not starting with '-' is the start of a recipients list;
2179   break out of the options-scanning loop. */
2180
2181   if (arg[0] != '-')
2182     {
2183     recipients_arg = i;
2184     break;
2185     }
2186
2187   /* An option consisting of -- terminates the options */
2188
2189   if (Ustrcmp(arg, "--") == 0)
2190     {
2191     recipients_arg = i + 1;
2192     break;
2193     }
2194
2195   /* Handle flagged options */
2196
2197   switchchar = arg[1];
2198   argrest = arg+2;
2199
2200   /* Make all -ex options synonymous with -oex arguments, since that
2201   is assumed by various callers. Also make -qR options synonymous with -R
2202   options, as that seems to be required as well. Allow for -qqR too, and
2203   the same for -S options. */
2204
2205   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
2206       Ustrncmp(arg+1, "qR", 2) == 0 ||
2207       Ustrncmp(arg+1, "qS", 2) == 0)
2208     {
2209     switchchar = arg[2];
2210     argrest++;
2211     }
2212   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
2213     {
2214     switchchar = arg[3];
2215     argrest += 2;
2216     f.queue_2stage = TRUE;
2217     }
2218
2219   /* Make -r synonymous with -f, since it is a documented alias */
2220
2221   else if (arg[1] == 'r') switchchar = 'f';
2222
2223   /* Make -ov synonymous with -v */
2224
2225   else if (Ustrcmp(arg, "-ov") == 0)
2226     {
2227     switchchar = 'v';
2228     argrest++;
2229     }
2230
2231   /* deal with --option_aliases */
2232   else if (switchchar == '-')
2233     {
2234     if (Ustrcmp(argrest, "help") == 0)
2235       {
2236       usage_wanted = TRUE;
2237       break;
2238       }
2239     else if (Ustrcmp(argrest, "version") == 0)
2240       {
2241       switchchar = 'b';
2242       argrest = US"V";
2243       }
2244     }
2245
2246   /* High-level switch on active initial letter */
2247
2248   switch(switchchar)
2249     {
2250
2251     /* sendmail uses -Ac and -Am to control which .cf file is used;
2252     we ignore them. */
2253     case 'A':
2254     if (!*argrest) { badarg = TRUE; break; }
2255     else
2256       {
2257       BOOL ignore = FALSE;
2258       switch (*argrest)
2259         {
2260         case 'c':
2261         case 'm':
2262           if (*(argrest + 1) == '\0')
2263             ignore = TRUE;
2264           break;
2265         }
2266       if (!ignore) badarg = TRUE;
2267       }
2268     break;
2269
2270     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2271     so has no need of it. */
2272
2273     case 'B':
2274     if (!*argrest) i++;       /* Skip over the type */
2275     break;
2276
2277
2278     case 'b':
2279       {
2280       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2281
2282       switch (*argrest++)
2283         {
2284         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2285            -bdf: Ditto, but in the foreground.
2286         */
2287         case 'd':
2288           f.daemon_listen = f.daemon_scion = TRUE;
2289           if (*argrest == 'f') f.background_daemon = FALSE;
2290           else if (*argrest) badarg = TRUE;
2291           break;
2292
2293         /* -be:  Run in expansion test mode
2294            -bem: Ditto, but read a message from a file first
2295         */
2296         case 'e':
2297           expansion_test = checking = TRUE;
2298           if (*argrest == 'm')
2299             {
2300             if (++i >= argc) { badarg = TRUE; break; }
2301             expansion_test_message = argv[i];
2302             argrest++;
2303             }
2304           if (*argrest) badarg = TRUE;
2305           break;
2306
2307         /* -bF:  Run system filter test */
2308         case 'F':
2309           filter_test |= checking = FTEST_SYSTEM;
2310           if (*argrest) badarg = TRUE;
2311           else if (++i < argc) filter_test_sfile = argv[i];
2312           else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2313           break;
2314
2315         /* -bf:  Run user filter test
2316            -bfd: Set domain for filter testing
2317            -bfl: Set local part for filter testing
2318            -bfp: Set prefix for filter testing
2319            -bfs: Set suffix for filter testing
2320         */
2321         case 'f':
2322           if (!*argrest)
2323             {
2324             filter_test |= checking = FTEST_USER;
2325             if (++i < argc) filter_test_ufile = argv[i];
2326             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2327             }
2328           else
2329             {
2330             if (++i >= argc)
2331               exim_fail("exim: string expected after %s\n", arg);
2332             if (Ustrcmp(argrest, "d") == 0) ftest_domain = exim_str_fail_toolong(argv[i], EXIM_DOMAINNAME_MAX, "-bfd");
2333             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfl");
2334             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfp");
2335             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfs");
2336             else badarg = TRUE;
2337             }
2338           break;
2339
2340         /* -bh: Host checking - an IP address must follow. */
2341         case 'h':
2342           if (!*argrest || Ustrcmp(argrest, "c") == 0)
2343             {
2344             if (++i >= argc) { badarg = TRUE; break; }
2345             sender_host_address = string_copy_taint(
2346                   exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-bh"),
2347                   GET_TAINTED);
2348             host_checking = checking = f.log_testing_mode = TRUE;
2349             f.host_checking_callout = *argrest == 'c';
2350             message_logs = FALSE;
2351             }
2352           else badarg = TRUE;
2353           break;
2354
2355         /* -bi: This option is used by sendmail to initialize *the* alias file,
2356         though it has the -oA option to specify a different file. Exim has no
2357         concept of *the* alias file, but since Sun's YP make script calls
2358         sendmail this way, some support must be provided. */
2359         case 'i':
2360           if (!*argrest) bi_option = TRUE;
2361           else badarg = TRUE;
2362           break;
2363
2364         /* -bI: provide information, of the type to follow after a colon.
2365         This is an Exim flag. */
2366         case 'I':
2367           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2368             {
2369             const uschar * p = argrest+1;
2370             info_flag = CMDINFO_HELP;
2371             if (Ustrlen(p))
2372               if (strcmpic(p, CUS"sieve") == 0)
2373                 {
2374                 info_flag = CMDINFO_SIEVE;
2375                 info_stdout = TRUE;
2376                 }
2377               else if (strcmpic(p, CUS"dscp") == 0)
2378                 {
2379                 info_flag = CMDINFO_DSCP;
2380                 info_stdout = TRUE;
2381                 }
2382               else if (strcmpic(p, CUS"help") == 0)
2383                 info_stdout = TRUE;
2384             }
2385           else badarg = TRUE;
2386           break;
2387
2388         /* -bm: Accept and deliver message - the default option. Reinstate
2389         receiving_message, which got turned off for all -b options.
2390            -bmalware: test the filename given for malware */
2391         case 'm':
2392           if (!*argrest) receiving_message = TRUE;
2393           else if (Ustrcmp(argrest, "alware") == 0)
2394             {
2395             if (++i >= argc) { badarg = TRUE; break; }
2396             checking = TRUE;
2397             malware_test_file = argv[i];
2398             }
2399           else badarg = TRUE;
2400           break;
2401
2402         /* -bnq: For locally originating messages, do not qualify unqualified
2403         addresses. In the envelope, this causes errors; in header lines they
2404         just get left. */
2405         case 'n':
2406           if (Ustrcmp(argrest, "q") == 0)
2407             {
2408             f.allow_unqualified_sender = FALSE;
2409             f.allow_unqualified_recipient = FALSE;
2410             }
2411           else badarg = TRUE;
2412           break;
2413
2414         /* -bpxx: List the contents of the mail queue, in various forms. If
2415         the option is -bpc, just a queue count is needed. Otherwise, if the
2416         first letter after p is r, then order is random. */
2417         case 'p':
2418           if (*argrest == 'c')
2419             {
2420             count_queue = TRUE;
2421             if (*++argrest) badarg = TRUE;
2422             break;
2423             }
2424
2425           if (*argrest == 'r')
2426             list_queue_option = QL_UNSORTED, argrest++;
2427           else
2428             list_queue_option = QL_BASIC;
2429
2430           list_queue = TRUE;
2431
2432           /* -bp: List the contents of the mail queue, top-level only */
2433
2434           if (!*argrest) {}
2435
2436           /* -bpu: List the contents of the mail queue, top-level undelivered */
2437
2438           else if (Ustrcmp(argrest, "u") == 0) list_queue_option |= QL_UNDELIVERED_ONLY;
2439
2440           /* -bpa: List the contents of the mail queue, including all delivered */
2441
2442           else if (Ustrcmp(argrest, "a") == 0) list_queue_option |= QL_PLUS_GENERATED;
2443
2444           /* -bpi: List only message IDs */
2445
2446           else if (Ustrcmp(argrest, "i") == 0) list_queue_option |= QL_MSGID_ONLY;
2447
2448           /* Unknown after -bp[r] */
2449
2450           else badarg = TRUE;
2451           break;
2452
2453
2454         /* -bP: List the configuration variables given as the address list.
2455         Force -v, so configuration errors get displayed. */
2456         case 'P':
2457
2458           /* -bP config: we need to setup here, because later,
2459           when list_options is checked, the config is read already */
2460           if (*argrest)
2461             badarg = TRUE;
2462           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2463             {
2464             list_config = TRUE;
2465             readconf_save_config(version_string);
2466             }
2467           else
2468             {
2469             list_options = TRUE;
2470             debug_selector |= D_v;
2471             debug_file = stderr;
2472             }
2473           break;
2474
2475         /* -brt: Test retry configuration lookup */
2476         case 'r':
2477           if (Ustrcmp(argrest, "t") == 0)
2478             {
2479             checking = TRUE;
2480             test_retry_arg = i + 1;
2481             goto END_ARG;
2482             }
2483
2484           /* -brw: Test rewrite configuration */
2485
2486           else if (Ustrcmp(argrest, "w") == 0)
2487             {
2488             checking = TRUE;
2489             test_rewrite_arg = i + 1;
2490             goto END_ARG;
2491             }
2492           else badarg = TRUE;
2493           break;
2494
2495         /* -bS: Read SMTP commands on standard input, but produce no replies -
2496         all errors are reported by sending messages. */
2497         case 'S':
2498           if (!*argrest)
2499             smtp_input = smtp_batched_input = receiving_message = TRUE;
2500           else badarg = TRUE;
2501           break;
2502
2503         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2504         on standard output. */
2505         case 's':
2506           if (!*argrest) smtp_input = receiving_message = TRUE;
2507           else badarg = TRUE;
2508           break;
2509
2510         /* -bt: address testing mode */
2511         case 't':
2512           if (!*argrest)
2513             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2514           else badarg = TRUE;
2515           break;
2516
2517         /* -bv: verify addresses */
2518         case 'v':
2519           if (!*argrest)
2520             verify_address_mode = checking = f.log_testing_mode = TRUE;
2521
2522         /* -bvs: verify sender addresses */
2523
2524           else if (Ustrcmp(argrest, "s") == 0)
2525             {
2526             verify_address_mode = checking = f.log_testing_mode = TRUE;
2527             verify_as_sender = TRUE;
2528             }
2529           else badarg = TRUE;
2530           break;
2531
2532         /* -bV: Print version string and support details */
2533         case 'V':
2534           if (!*argrest)
2535             {
2536             printf("Exim version %s #%s built %s\n", version_string,
2537               version_cnumber, version_date);
2538             printf("%s\n", CS version_copyright);
2539             version_printed = TRUE;
2540             show_whats_supported(TRUE);
2541             f.log_testing_mode = TRUE;
2542             }
2543           else badarg = TRUE;
2544           break;
2545
2546         /* -bw: inetd wait mode, accept a listening socket as stdin */
2547         case 'w':
2548           f.inetd_wait_mode = TRUE;
2549           f.background_daemon = FALSE;
2550           f.daemon_listen = f.daemon_scion = TRUE;
2551           if (*argrest)
2552             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2553               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2554           break;
2555
2556         default:
2557           badarg = TRUE;
2558           break;
2559         }
2560       break;
2561       }
2562
2563
2564     /* -C: change configuration file list; ignore if it isn't really
2565     a change! Enforce a prefix check if required. */
2566
2567     case 'C':
2568     if (!*argrest)
2569       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2570     if (Ustrcmp(config_main_filelist, argrest) != 0)
2571       {
2572       #ifdef ALT_CONFIG_PREFIX
2573       int sep = 0;
2574       int len = Ustrlen(ALT_CONFIG_PREFIX);
2575       const uschar *list = argrest;
2576       uschar *filename;
2577       /* The argv is untainted, so big_buffer (also untainted) is ok to use */
2578       while((filename = string_nextinlist(&list, &sep, big_buffer,
2579              big_buffer_size)))
2580         if (  (  Ustrlen(filename) < len
2581               || Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0
2582               || Ustrstr(filename, "/../") != NULL
2583               )
2584            && (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid)
2585            )
2586           exim_fail("-C Permission denied\n");
2587       #endif
2588       if (real_uid != root_uid)
2589         {
2590         #ifdef TRUSTED_CONFIG_LIST
2591
2592         if (real_uid != exim_uid
2593             #ifdef CONFIGURE_OWNER
2594             && real_uid != config_uid
2595             #endif
2596             )
2597           f.trusted_config = FALSE;
2598         else
2599           {
2600           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2601           if (trust_list)
2602             {
2603             struct stat statbuf;
2604
2605             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2606                 (statbuf.st_uid != root_uid        /* owner not root */
2607                  #ifdef CONFIGURE_OWNER
2608                  && statbuf.st_uid != config_uid   /* owner not the special one */
2609                  #endif
2610                    ) ||                            /* or */
2611                 (statbuf.st_gid != root_gid        /* group not root */
2612                  #ifdef CONFIGURE_GROUP
2613                  && statbuf.st_gid != config_gid   /* group not the special one */
2614                  #endif
2615                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2616                    ) ||                            /* or */
2617                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2618               {
2619               f.trusted_config = FALSE;
2620               fclose(trust_list);
2621               }
2622             else
2623               {
2624               /* Well, the trust list at least is up to scratch... */
2625               rmark reset_point;
2626               uschar *trusted_configs[32];
2627               int nr_configs = 0;
2628               int i = 0;
2629               int old_pool = store_pool;
2630               store_pool = POOL_MAIN;
2631
2632               reset_point = store_mark();
2633               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2634                 {
2635                 uschar * start = big_buffer, * nl;
2636                 if (Uskip_whitespace(&start) != '/')
2637                   continue;
2638                 if ((nl = Ustrchr(start, '\n')))
2639                   *nl = '\0';
2640                 trusted_configs[nr_configs++] = string_copy(start);
2641                 if (nr_configs == nelem(trusted_configs))
2642                   break;
2643                 }
2644               fclose(trust_list);
2645
2646               if (nr_configs)
2647                 {
2648                 int sep = 0;
2649                 const uschar *list = argrest;
2650                 uschar *filename;
2651                 while (f.trusted_config && (filename = string_nextinlist(&list,
2652                         &sep, big_buffer, big_buffer_size)))
2653                   {
2654                   for (i=0; i < nr_configs; i++)
2655                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2656                       break;
2657                   if (i == nr_configs)
2658                     {
2659                     f.trusted_config = FALSE;
2660                     break;
2661                     }
2662                   }
2663                 }
2664               else      /* No valid prefixes found in trust_list file. */
2665                 f.trusted_config = FALSE;
2666               store_reset(reset_point);
2667               store_pool = old_pool;
2668               }
2669             }
2670           else          /* Could not open trust_list file. */
2671             f.trusted_config = FALSE;
2672           }
2673       #else
2674         /* Not root; don't trust config */
2675         f.trusted_config = FALSE;
2676       #endif
2677         }
2678
2679       config_main_filelist = argrest;
2680       f.config_changed = TRUE;
2681       }
2682     break;
2683
2684
2685     /* -D: set up a macro definition */
2686
2687     case 'D':
2688 #ifdef DISABLE_D_OPTION
2689       exim_fail("exim: -D is not available in this Exim binary\n");
2690 #else
2691       {
2692       int ptr = 0;
2693       macro_item * m;
2694       uschar name[24];
2695       const uschar * s = argrest;
2696
2697       opt_D_used = TRUE;
2698       Uskip_whitespace(&s);
2699
2700       if (*s < 'A' || *s > 'Z')
2701         exim_fail("exim: macro name set by -D must start with "
2702           "an upper case letter\n");
2703
2704       while (isalnum(*s) || *s == '_')
2705         {
2706         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2707         s++;
2708         }
2709       name[ptr] = 0;
2710       if (ptr == 0) { badarg = TRUE; break; }
2711       if (Uskip_whitespace(&s))
2712         {
2713         if (*s++ != '=') { badarg = TRUE; break; }
2714         Uskip_whitespace(&s);
2715         }
2716
2717       for (m = macros_user; m; m = m->next)
2718         if (Ustrcmp(m->name, name) == 0)
2719           exim_fail("exim: duplicated -D in command line\n");
2720
2721       m = macro_create(name, s, TRUE);
2722
2723       if (clmacro_count >= MAX_CLMACROS)
2724         exim_fail("exim: too many -D options on command line\n");
2725       clmacros[clmacro_count++] =
2726         string_sprintf("-D%s=%s", m->name, m->replacement);
2727       }
2728     #endif
2729     break;
2730
2731     case 'd':
2732
2733     /* -dropcr: Set this option.  Now a no-op, retained for compatibility only. */
2734
2735     if (Ustrcmp(argrest, "ropcr") == 0)
2736       {
2737       /* drop_cr = TRUE; */
2738       }
2739
2740     /* -dp: Set up a debug pretrigger buffer with given size. */
2741
2742     else if (Ustrcmp(argrest, "p") == 0)
2743       if (++i >= argc)
2744         badarg = TRUE;
2745       else
2746         debug_pretrigger_setup(argv[i]);
2747
2748     /* -dt: Set a debug trigger selector */
2749
2750     else if (Ustrncmp(argrest, "t=", 2) == 0)
2751       dtrigger_selector = (unsigned int) Ustrtol(argrest + 2, NULL, 0);
2752
2753     /* -d: Set debug level (see also -v below).
2754     If -dd is used, debugging subprocesses of the daemon is disabled. */
2755
2756     else
2757       {
2758       /* Use an intermediate variable so that we don't set debugging while
2759       decoding the debugging bits. */
2760
2761       unsigned int selector = D_default;
2762       debug_selector = 0;
2763       debug_file = NULL;
2764       if (*argrest == 'd')
2765         {
2766         f.debug_daemon = TRUE;
2767         argrest++;
2768         }
2769       if (*argrest)
2770         decode_bits(&selector, 1, debug_notall, argrest,
2771           debug_options, debug_options_count, US"debug", 0);
2772       debug_selector = selector;
2773       }
2774     break;
2775
2776
2777     /* -E: This is a local error message. This option is not intended for
2778     external use at all, but is not restricted to trusted callers because it
2779     does no harm (just suppresses certain error messages) and if Exim is run
2780     not setuid root it won't always be trusted when it generates error
2781     messages using this option. If there is a message id following -E, point
2782     message_reference at it, for logging. */
2783
2784     case 'E':
2785     f.local_error_message = TRUE;
2786     if (mac_ismsgid(argrest)) message_reference = argrest;
2787     break;
2788
2789
2790     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2791     option, so it looks as if historically the -oex options are also callable
2792     without the leading -o. So we have to accept them. Before the switch,
2793     anything starting -oe has been converted to -e. Exim does not support all
2794     of the sendmail error options. */
2795
2796     case 'e':
2797     if (Ustrcmp(argrest, "e") == 0)
2798       {
2799       arg_error_handling = ERRORS_SENDER;
2800       errors_sender_rc = EXIT_SUCCESS;
2801       }
2802     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2803     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2804     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2805     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2806     else badarg = TRUE;
2807     break;
2808
2809
2810     /* -F: Set sender's full name, used instead of the gecos entry from
2811     the password file. Since users can usually alter their gecos entries,
2812     there's no security involved in using this instead. The data can follow
2813     the -F or be in the next argument. */
2814
2815     case 'F':
2816     if (!*argrest)
2817       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2818     originator_name = string_copy_taint(
2819                   exim_str_fail_toolong(argrest, EXIM_HUMANNAME_MAX, "-F"),
2820                   GET_TAINTED);
2821     f.sender_name_forced = TRUE;
2822     break;
2823
2824
2825     /* -f: Set sender's address - this value is only actually used if Exim is
2826     run by a trusted user, or if untrusted_set_sender is set and matches the
2827     address, except that the null address can always be set by any user. The
2828     test for this happens later, when the value given here is ignored when not
2829     permitted. For an untrusted user, the actual sender is still put in Sender:
2830     if it doesn't match the From: header (unless no_local_from_check is set).
2831     The data can follow the -f or be in the next argument. The -r switch is an
2832     obsolete form of -f but since there appear to be programs out there that
2833     use anything that sendmail has ever supported, better accept it - the
2834     synonymizing is done before the switch above.
2835
2836     At this stage, we must allow domain literal addresses, because we don't
2837     know what the setting of allow_domain_literals is yet. Ditto for trailing
2838     dots and strip_trailing_dot. */
2839
2840     case 'f':
2841       {
2842       int dummy_start, dummy_end;
2843       uschar *errmess;
2844       if (!*argrest)
2845         if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
2846       (void) exim_str_fail_toolong(argrest, EXIM_DISPLAYMAIL_MAX, "-f");
2847       if (!*argrest)
2848         {
2849         uschar * s = store_get(1, GET_UNTAINTED);       /* Ensure writeable memory */
2850         *s = '\0';
2851         sender_address = s;
2852         }
2853       else
2854         {
2855         const uschar * temp = argrest + Ustrlen(argrest) - 1;
2856         while (temp >= argrest && isspace(*temp)) temp--;
2857         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2858         allow_domain_literals = TRUE;
2859         strip_trailing_dot = TRUE;
2860 #ifdef SUPPORT_I18N
2861         allow_utf8_domains = TRUE;
2862 #endif
2863         if (!(sender_address = parse_extract_address(argrest, &errmess,
2864                   &dummy_start, &dummy_end, &sender_address_domain, TRUE)))
2865           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2866
2867         sender_address = string_copy_taint(sender_address, GET_TAINTED);
2868 #ifdef SUPPORT_I18N
2869         message_smtputf8 =  string_is_utf8(sender_address);
2870         allow_utf8_domains = FALSE;
2871 #endif
2872         allow_domain_literals = FALSE;
2873         strip_trailing_dot = FALSE;
2874         }
2875       f.sender_address_forced = TRUE;
2876       }
2877     break;
2878
2879     /* -G: sendmail invocation to specify that it's a gateway submission and
2880     sendmail may complain about problems instead of fixing them.
2881     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2882     not at this time complain about problems. */
2883
2884     case 'G':
2885     flag_G = TRUE;
2886     break;
2887
2888     /* -h: Set the hop count for an incoming message. Exim does not currently
2889     support this; it always computes it by counting the Received: headers.
2890     To put it in will require a change to the spool header file format. */
2891
2892     case 'h':
2893     if (!*argrest)
2894       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2895     if (!isdigit(*argrest)) badarg = TRUE;
2896     break;
2897
2898
2899     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2900     not to be documented for sendmail but mailx (at least) uses it) */
2901
2902     case 'i':
2903     if (!*argrest) f.dot_ends = FALSE; else badarg = TRUE;
2904     break;
2905
2906
2907     /* -L: set the identifier used for syslog; equivalent to setting
2908     syslog_processname in the config file, but needs to be an admin option. */
2909
2910     case 'L':
2911     if (!*argrest)
2912       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2913     if ((sz = Ustrlen(argrest)) > 32)
2914       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2915     if (sz < 1)
2916       exim_fail("exim: the -L syslog name is too short\n");
2917     cmdline_syslog_name = string_copy_taint(argrest, GET_TAINTED);
2918     break;
2919
2920     case 'M':
2921     receiving_message = FALSE;
2922
2923     /* -MC:  continue delivery of another message via an existing open
2924     file descriptor. This option is used for an internal call by the
2925     smtp transport when there is a pending message waiting to go to an
2926     address to which it has got a connection. Five subsequent arguments are
2927     required: transport name, host name, IP address, sequence number, and
2928     message_id. Transports may decline to create new processes if the sequence
2929     number gets too big. The channel is stdin. This (-MC) must be the last
2930     argument. There's a subsequent check that the real-uid is privileged.
2931
2932     If we are running in the test harness. delay for a bit, to let the process
2933     that set this one up complete. This makes for repeatability of the logging,
2934     etc. output. */
2935
2936     if (Ustrcmp(argrest, "C") == 0)
2937       {
2938       union sockaddr_46 interface_sock;
2939       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2940
2941       if (argc != i + 6)
2942         exim_fail("exim: too many or too few arguments after -MC\n");
2943
2944       if (msg_action_arg >= 0)
2945         exim_fail("exim: incompatible arguments\n");
2946
2947       continue_transport = string_copy_taint(
2948         exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-C internal transport"),
2949         GET_TAINTED);
2950       continue_hostname = string_copy_taint(
2951         exim_str_fail_toolong(argv[++i], EXIM_HOSTNAME_MAX, "-C internal hostname"),
2952         GET_TAINTED);
2953       continue_host_address = string_copy_taint(
2954         exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-C internal hostaddr"),
2955         GET_TAINTED);
2956       continue_sequence = Uatoi(argv[++i]);
2957       msg_action = MSG_DELIVER;
2958       msg_action_arg = ++i;
2959       forced_delivery = TRUE;
2960       queue_run_pid = passed_qr_pid;
2961       queue_run_pipe = passed_qr_pipe;
2962
2963       if (!mac_ismsgid(argv[i]))
2964         exim_fail("exim: malformed message id %s after -MC option\n",
2965           argv[i]);
2966
2967       /* Set up $sending_ip_address and $sending_port, unless proxied */
2968
2969       if (!continue_proxy_cipher)
2970         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2971             &size) == 0)
2972           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2973             &sending_port);
2974         else
2975           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2976             strerror(errno));
2977
2978       testharness_pause_ms(500);
2979       break;
2980       }
2981
2982     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2983       {
2984       switch(argrest[1])
2985         {
2986     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2987     precedes -MC (see above). The flag indicates that the host to which
2988     Exim is connected has accepted an AUTH sequence. */
2989
2990         case 'A': f.smtp_authenticated = TRUE; break;
2991
2992     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2993        that exim is connected to supports the esmtp extension DSN */
2994
2995         case 'D': smtp_peer_options |= OPTION_DSN; break;
2996
2997     /* -MCd: for debug, set a process-purpose string */
2998
2999         case 'd': if (++i < argc)
3000                     process_purpose = string_copy_taint(
3001                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCd"),
3002                       GET_TAINTED);
3003                   else badarg = TRUE;
3004                   break;
3005
3006     /* -MCG: set the queue name, to a non-default value. Arguably, anything
3007        from the commandline should be tainted - but we will need an untainted
3008        value for the spoolfile when doing a -odi delivery process. */
3009
3010         case 'G': if (++i < argc) queue_name = string_copy_taint(
3011                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCG"),
3012                       GET_UNTAINTED);
3013                   else badarg = TRUE;
3014                   break;
3015
3016     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
3017
3018         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
3019
3020 #ifndef DISABLE_ESMTP_LIMITS
3021     /* -MCL: peer used LIMITS RCPTMAX and/or RCPTDOMAINMAX */
3022         case 'L': if (++i < argc) continue_limit_mail = Uatoi(argv[i]);
3023                   else badarg = TRUE;
3024                   if (++i < argc) continue_limit_rcpt = Uatoi(argv[i]);
3025                   else badarg = TRUE;
3026                   if (++i < argc) continue_limit_rcptdom = Uatoi(argv[i]);
3027                   else badarg = TRUE;
3028                   break;
3029 #endif
3030
3031     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
3032     it preceded -MC (see above) */
3033
3034         case 'P': smtp_peer_options |= OPTION_PIPE; break;
3035
3036 #ifdef SUPPORT_SOCKS
3037     /* -MCp: Socks proxy in use; nearside IP, port, external IP, port */
3038         case 'p': proxy_session = TRUE;
3039                   if (++i < argc)
3040                     {
3041                     proxy_local_address = string_copy_taint(argv[i], GET_TAINTED);
3042                     if (++i < argc)
3043                       {
3044                       proxy_local_port = Uatoi(argv[i]);
3045                       if (++i < argc)
3046                         {
3047                         proxy_external_address = string_copy_taint(argv[i], GET_TAINTED);
3048                         if (++i < argc)
3049                           {
3050                           proxy_external_port = Uatoi(argv[i]);
3051                           break;
3052                     } } } }
3053                   badarg = TRUE;
3054                   break;
3055 #endif
3056     /* -MCQ: pass on the pid of the queue-running process that started
3057     this chain of deliveries and the fd of its synchronizing pipe; this
3058     is useful only when it precedes -MC (see above) */
3059
3060         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
3061                   else badarg = TRUE;
3062                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
3063                   else badarg = TRUE;
3064                   break;
3065
3066     /* -MCq: do a quota check on the given recipient for the given size
3067     of message.  Separate from -MC. */
3068         case 'q': rcpt_verify_quota = TRUE;
3069                   if (++i < argc) message_size = Uatoi(argv[i]);
3070                   else badarg = TRUE;
3071                   break;
3072
3073     /* -MCS: set the smtp_use_size flag; this is useful only when it
3074     precedes -MC (see above) */
3075
3076         case 'S': smtp_peer_options |= OPTION_SIZE; break;
3077
3078 #ifndef DISABLE_TLS
3079     /* -MCs: used with -MCt; SNI was sent */
3080     /* -MCr: ditto, DANE */
3081
3082         case 'r':
3083         case 's': if (++i < argc)
3084                     {
3085                     continue_proxy_sni = string_copy_taint(
3086                       exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-MCr/-MCs"),
3087                       GET_TAINTED);
3088                     if (argrest[1] == 'r') continue_proxy_dane = TRUE;
3089                     }
3090                   else badarg = TRUE;
3091                   break;
3092
3093     /* -MCt: similar to -MCT below but the connection is still open
3094     via a proxy process which handles the TLS context and coding.
3095     Require three arguments for the proxied local address and port,
3096     and the TLS cipher. */
3097
3098         case 't': if (++i < argc)
3099                     sending_ip_address = string_copy_taint(
3100                       exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-MCt IP"),
3101                       GET_TAINTED);
3102                   else badarg = TRUE;
3103                   if (++i < argc)
3104                     sending_port = (int)(Uatol(argv[i]));
3105                   else badarg = TRUE;
3106                   if (++i < argc)
3107                     continue_proxy_cipher = string_copy_taint(
3108                       exim_str_fail_toolong(argv[i], EXIM_CIPHERNAME_MAX, "-MCt cipher"),
3109                       GET_TAINTED);
3110                   else badarg = TRUE;
3111                   /*FALLTHROUGH*/
3112
3113     /* -MCT: set the tls_offered flag; this is useful only when it
3114     precedes -MC (see above). The flag indicates that the host to which
3115     Exim is connected has offered TLS support. */
3116
3117         case 'T': smtp_peer_options |= OPTION_TLS; break;
3118 #endif
3119
3120         default:  badarg = TRUE; break;
3121         }
3122       break;
3123       }
3124
3125     /* -M[x]: various operations on the following list of message ids:
3126        -M    deliver the messages, ignoring next retry times and thawing
3127        -Mc   deliver the messages, checking next retry times, no thawing
3128        -Mf   freeze the messages
3129        -Mg   give up on the messages
3130        -Mt   thaw the messages
3131        -Mrm  remove the messages
3132     In the above cases, this must be the last option. There are also the
3133     following options which are followed by a single message id, and which
3134     act on that message. Some of them use the "recipient" addresses as well.
3135        -Mar  add recipient(s)
3136        -MG   move to a different queue
3137        -Mmad mark all recipients delivered
3138        -Mmd  mark recipients(s) delivered
3139        -Mes  edit sender
3140        -Mset load a message for use with -be
3141        -Mvb  show body
3142        -Mvc  show copy (of whole message, in RFC 2822 format)
3143        -Mvh  show header
3144        -Mvl  show log
3145     */
3146
3147     else if (!*argrest)
3148       {
3149       msg_action = MSG_DELIVER;
3150       forced_delivery = f.deliver_force_thaw = TRUE;
3151       }
3152     else if (Ustrcmp(argrest, "ar") == 0)
3153       {
3154       msg_action = MSG_ADD_RECIPIENT;
3155       one_msg_action = TRUE;
3156       }
3157     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
3158     else if (Ustrcmp(argrest, "es") == 0)
3159       {
3160       msg_action = MSG_EDIT_SENDER;
3161       one_msg_action = TRUE;
3162       }
3163     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
3164     else if (Ustrcmp(argrest, "g") == 0)
3165       {
3166       msg_action = MSG_DELIVER;
3167       deliver_give_up = TRUE;
3168       }
3169    else if (Ustrcmp(argrest, "G") == 0)
3170       {
3171       msg_action = MSG_SETQUEUE;
3172       queue_name_dest = string_copy_taint(
3173         exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3174                               EXIM_DRIVERNAME_MAX, "-MG"),
3175         GET_TAINTED);
3176       }
3177     else if (Ustrcmp(argrest, "mad") == 0) msg_action = MSG_MARK_ALL_DELIVERED;
3178     else if (Ustrcmp(argrest, "md") == 0)
3179       {
3180       msg_action = MSG_MARK_DELIVERED;
3181       one_msg_action = TRUE;
3182       }
3183     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
3184     else if (Ustrcmp(argrest, "set") == 0)
3185       {
3186       msg_action = MSG_LOAD;
3187       one_msg_action = TRUE;
3188       }
3189     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
3190     else if (Ustrcmp(argrest, "vb") == 0)
3191       {
3192       msg_action = MSG_SHOW_BODY;
3193       one_msg_action = TRUE;
3194       }
3195     else if (Ustrcmp(argrest, "vc") == 0)
3196       {
3197       msg_action = MSG_SHOW_COPY;
3198       one_msg_action = TRUE;
3199       }
3200     else if (Ustrcmp(argrest, "vh") == 0)
3201       {
3202       msg_action = MSG_SHOW_HEADER;
3203       one_msg_action = TRUE;
3204       }
3205     else if (Ustrcmp(argrest, "vl") == 0)
3206       {
3207       msg_action = MSG_SHOW_LOG;
3208       one_msg_action = TRUE;
3209       }
3210     else { badarg = TRUE; break; }
3211
3212     /* All the -Mxx options require at least one message id. */
3213
3214     msg_action_arg = i + 1;
3215     if (msg_action_arg >= argc)
3216       exim_fail("exim: no message ids given after %s option\n", arg);
3217
3218     /* Some require only message ids to follow */
3219
3220     if (!one_msg_action)
3221       {
3222       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
3223         exim_fail("exim: malformed message id %s after %s option\n",
3224           argv[j], arg);
3225       goto END_ARG;   /* Remaining args are ids */
3226       }
3227
3228     /* Others require only one message id, possibly followed by addresses,
3229     which will be handled as normal arguments. */
3230
3231     else
3232       {
3233       if (!mac_ismsgid(argv[msg_action_arg]))
3234         exim_fail("exim: malformed message id %s after %s option\n",
3235           argv[msg_action_arg], arg);
3236       i++;
3237       }
3238     break;
3239
3240
3241     /* Some programs seem to call the -om option without the leading o;
3242     for sendmail it askes for "me too". Exim always does this. */
3243
3244     case 'm':
3245     if (*argrest) badarg = TRUE;
3246     break;
3247
3248
3249     /* -N: don't do delivery - a debugging option that stops transports doing
3250     their thing. It implies debugging at the D_v level. */
3251
3252     case 'N':
3253     if (!*argrest)
3254       {
3255       f.dont_deliver = TRUE;
3256       debug_selector |= D_v;
3257       debug_file = stderr;
3258       }
3259     else badarg = TRUE;
3260     break;
3261
3262
3263     /* -n: This means "don't alias" in sendmail, apparently.
3264     For normal invocations, it has no effect.
3265     It may affect some other options. */
3266
3267     case 'n':
3268     flag_n = TRUE;
3269     break;
3270
3271     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
3272     option to the specified value. This form uses long names. We need to handle
3273     -O option=value and -Ooption=value. */
3274
3275     case 'O':
3276     if (!*argrest)
3277       if (++i >= argc)
3278         exim_fail("exim: string expected after -O\n");
3279     break;
3280
3281     case 'o':
3282     switch (*argrest++)
3283       {
3284       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
3285       file" option). */
3286       case 'A':
3287         if (!*(alias_arg = argrest))
3288           if (i+1 < argc) alias_arg = argv[++i];
3289           else exim_fail("exim: string expected after -oA\n");
3290         break;
3291
3292       /* -oB: Set a connection message max value for remote deliveries */
3293       case 'B':
3294         {
3295         const uschar * p = argrest;
3296         if (!*p)
3297           if (i+1 < argc && isdigit((argv[i+1][0])))
3298             p = argv[++i];
3299           else
3300             {
3301             connection_max_messages = 1;
3302             p = NULL;
3303             }
3304
3305         if (p)
3306           {
3307           if (!isdigit(*p))
3308             exim_fail("exim: number expected after -oB\n");
3309           connection_max_messages = Uatoi(p);
3310           }
3311         }
3312         break;
3313
3314       /* -odb: background delivery */
3315
3316       case 'd':
3317         if (Ustrcmp(argrest, "b") == 0)
3318           {
3319           f.synchronous_delivery = FALSE;
3320           arg_queue_only = FALSE;
3321           queue_only_set = TRUE;
3322           }
3323
3324       /* -odd: testsuite-only: add no inter-process delays */
3325
3326         else if (Ustrcmp(argrest, "d") == 0)
3327           f.testsuite_delays = FALSE;
3328
3329       /* -odf: foreground delivery (smail-compatible option); same effect as
3330          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3331       */
3332
3333         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3334           {
3335           f.synchronous_delivery = TRUE;
3336           arg_queue_only = FALSE;
3337           queue_only_set = TRUE;
3338           }
3339
3340       /* -odq: queue only */
3341
3342         else if (Ustrcmp(argrest, "q") == 0)
3343           {
3344           f.synchronous_delivery = FALSE;
3345           arg_queue_only = TRUE;
3346           queue_only_set = TRUE;
3347           }
3348
3349       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3350       but no remote delivery */
3351
3352         else if (Ustrcmp(argrest, "qs") == 0)
3353           {
3354           f.queue_smtp = TRUE;
3355           arg_queue_only = FALSE;
3356           queue_only_set = TRUE;
3357           }
3358         else badarg = TRUE;
3359         break;
3360
3361       /* -oex: Sendmail error flags. As these are also accepted without the
3362       leading -o prefix, for compatibility with vacation and other callers,
3363       they are handled with -e above. */
3364
3365       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3366          -oitrue: Another sendmail syntax for the same */
3367
3368       case 'i':
3369         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3370           f.dot_ends = FALSE;
3371         else badarg = TRUE;
3372         break;
3373
3374     /* -oM*: Set various characteristics for an incoming message; actually
3375     acted on for trusted callers only. */
3376
3377       case 'M':
3378         {
3379         if (i+1 >= argc)
3380           exim_fail("exim: data expected after -oM%s\n", argrest);
3381
3382         /* -oMa: Set sender host address */
3383
3384         if (Ustrcmp(argrest, "a") == 0)
3385           sender_host_address = string_copy_taint(
3386             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3387                                   EXIM_IPADDR_MAX, "-oMa"), GET_TAINTED);
3388
3389         /* -oMaa: Set authenticator name */
3390
3391         else if (Ustrcmp(argrest, "aa") == 0)
3392           sender_host_authenticated = string_copy_taint(
3393             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3394                                   EXIM_DRIVERNAME_MAX, "-oMaa"), GET_TAINTED);
3395
3396         /* -oMas: setting authenticated sender */
3397
3398         else if (Ustrcmp(argrest, "as") == 0)
3399           authenticated_sender = string_copy_taint(
3400             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3401                                   EXIM_EMAILADDR_MAX, "-oMas"), GET_TAINTED);
3402
3403         /* -oMai: setting authenticated id */
3404
3405         else if (Ustrcmp(argrest, "ai") == 0)
3406           authenticated_id = string_copy_taint(
3407             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3408                                   EXIM_EMAILADDR_MAX, "-oMai"), GET_TAINTED);
3409
3410         /* -oMi: Set incoming interface address */
3411
3412         else if (Ustrcmp(argrest, "i") == 0)
3413           interface_address = string_copy_taint(
3414             exim_str_fail_toolong(next_argv(argv, &i, argc, arg),
3415                                   EXIM_IPADDR_MAX, "-oMi"), GET_TAINTED);
3416
3417         /* -oMm: Message reference */
3418
3419         else if (Ustrcmp(argrest, "m") == 0)
3420           {
3421           if (!mac_ismsgid(argv[i+1]))
3422               exim_fail("-oMm must be a valid message ID\n");
3423           if (!f.trusted_config)
3424               exim_fail("-oMm must be called by a trusted user/config\n");
3425             message_reference = next_argv(argv, &i, argc, arg);
3426           }
3427
3428         /* -oMr: Received protocol */
3429
3430         else if (Ustrcmp(argrest, "r") == 0)
3431
3432           if (received_protocol)
3433             exim_fail("received_protocol is set already\n");
3434           else
3435             if (++i >= argc) badarg = TRUE;
3436             else
3437               received_protocol = string_copy_taint(
3438                 exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-oMr"),
3439                 GET_TAINTED);
3440
3441         /* -oMs: Set sender host name */
3442
3443         else if (Ustrcmp(argrest, "s") == 0)
3444           if (++i >= argc) badarg = TRUE;
3445           else
3446             sender_host_name = string_copy_taint(
3447               exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-oMs"),
3448               GET_TAINTED);
3449
3450         /* -oMt: Set sender ident */
3451
3452         else if (Ustrcmp(argrest, "t") == 0)
3453           if (++i >= argc) badarg = TRUE;
3454           else
3455             {
3456             sender_ident_set = TRUE;
3457             sender_ident = string_copy_taint(
3458               exim_str_fail_toolong(argv[i], EXIM_IDENTUSER_MAX, "-oMt"),
3459               GET_TAINTED);
3460             }
3461
3462         /* Else a bad argument */
3463
3464         else
3465           badarg = TRUE;
3466         }
3467         break;
3468
3469       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3470       seem to call this as -m (undocumented), so that is also accepted (see
3471       above). */
3472       /* -oo: An ancient flag for old-style addresses which still seems to
3473       crop up in some calls (see in SCO). */
3474
3475       case 'm':
3476       case 'o':
3477         if (*argrest) badarg = TRUE;
3478         break;
3479
3480       /* -oP <name>: set pid file path for daemon
3481          -oPX:       delete pid file of daemon */
3482
3483       case 'P':
3484         if (!f.running_in_test_harness && real_uid != root_uid && real_uid != exim_uid)
3485           exim_fail("exim: only uid=%d or uid=%d can use -oP and -oPX "
3486                     "(uid=%d euid=%d | %d)\n",
3487                     root_uid, exim_uid, getuid(), geteuid(), real_uid);
3488         if (!*argrest)
3489           if (++i < argc) override_pid_file_path = argv[i];
3490           else badarg = TRUE;
3491         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3492         else badarg = TRUE;
3493         break;
3494
3495
3496       /* -or <n>: set timeout for non-SMTP acceptance
3497          -os <n>: set timeout for SMTP acceptance */
3498
3499       case 'r':
3500       case 's':
3501         {
3502         int * tp = argrest[-1] == 'r'
3503           ? &arg_receive_timeout : &arg_smtp_receive_timeout;
3504         if (*argrest)
3505           *tp = readconf_readtime(argrest, 0, FALSE);
3506         else if (i+1 < argc)
3507           *tp = readconf_readtime(argv[++i], 0, FALSE);
3508
3509         if (*tp < 0)
3510           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3511         }
3512         break;
3513
3514       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3515       /* Limits: Is there a real limit we want here?  1024 is very arbitrary. */
3516
3517       case 'X':
3518         if (*argrest || ++i >= argc) badarg = TRUE;
3519         else override_local_interfaces = string_copy_taint(
3520           exim_str_fail_toolong(argv[i], 1024, "-oX"), GET_TAINTED);
3521         break;
3522
3523       /* -oY: Override creation of daemon notifier socket */
3524
3525       case 'Y':
3526         if (*argrest) badarg = TRUE;
3527         else f.notifier_socket_en = FALSE;
3528         break;
3529
3530       /* Unknown -o argument */
3531
3532       default:
3533         badarg = TRUE;
3534       }
3535     break;
3536
3537
3538     /* -ps: force Perl startup; -pd force delayed Perl startup */
3539
3540     case 'p':
3541     #ifdef EXIM_PERL
3542     if (*argrest == 's' && argrest[1] == 0)
3543       {
3544       perl_start_option = 1;
3545       break;
3546       }
3547     if (*argrest == 'd' && argrest[1] == 0)
3548       {
3549       perl_start_option = -1;
3550       break;
3551       }
3552     #endif
3553
3554     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3555     which sets the host protocol and host name */
3556
3557     if (!*argrest)
3558       argrest = next_argv(argv, &i, argc, arg);
3559
3560     if (*argrest)
3561       {
3562       uschar * hn = Ustrchr(argrest, ':');
3563
3564       if (received_protocol)
3565         exim_fail("received_protocol is set already\n");
3566
3567       if (!hn)
3568         received_protocol = string_copy_taint(
3569           exim_str_fail_toolong(argrest, EXIM_DRIVERNAME_MAX, "-p<protocol>"),
3570           GET_TAINTED);
3571       else
3572         {
3573         (void) exim_str_fail_toolong(argrest, (EXIM_DRIVERNAME_MAX+1+EXIM_HOSTNAME_MAX), "-p<protocol>:<host>");
3574         received_protocol = string_copyn_taint(argrest, hn - argrest, GET_TAINTED);
3575         sender_host_name = string_copy_taint(hn + 1, GET_TAINTED);
3576         }
3577       }
3578     break;
3579
3580     /* -q:  set up queue runs */
3581
3582     case 'q':
3583       {
3584       BOOL two_stage, first_del, force, thaw = FALSE, local;
3585
3586       receiving_message = FALSE;
3587
3588       /* -qq...: Do queue runs in a 2-stage manner */
3589
3590       if ((two_stage = *argrest == 'q'))
3591         argrest++;
3592
3593       /* -qi...: Do only first (initial) deliveries */
3594
3595       if ((first_del = *argrest == 'i'))
3596         argrest++;
3597
3598       /* -qf...: Run the queue, forcing deliveries
3599          -qff..: Ditto, forcing thawing as well */
3600
3601       if ((force = *argrest == 'f'))
3602         if ((thaw = *++argrest == 'f'))
3603           argrest++;
3604
3605       /* -q[f][f]l...: Run the queue only on local deliveries */
3606
3607       if ((local = *argrest == 'l'))
3608         argrest++;
3609
3610       /* -q[f][f][l][G<name>]... Work on the named queue */
3611
3612       if (*argrest == 'G')
3613         {
3614         int i;
3615         for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3616         exim_len_fail_toolong(i, EXIM_DRIVERNAME_MAX, "-q*G<name>");
3617         queue_name = string_copyn(argrest, i);
3618         argrest += i;
3619         if (*argrest == '/') argrest++;
3620         }
3621
3622       /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3623       only, optionally named, optionally starting from a given message id. */
3624
3625       if (!(list_queue || count_queue))
3626         {
3627         qrunner * q;
3628
3629         if (  !*argrest
3630            && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3631           {
3632           q = alloc_onetime_qrunner();
3633           if (i+1 < argc && mac_ismsgid(argv[i+1]))
3634             start_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3635           if (i+1 < argc && mac_ismsgid(argv[i+1]))
3636             stop_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3637           }
3638
3639       /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3640       forced, optionally local only, optionally named. */
3641
3642         else
3643           {
3644           int intvl;
3645           const uschar * s;
3646
3647           if (*argrest) s = argrest;
3648           else if (++i < argc) { badarg = TRUE; break; }
3649           else s = argv[i];
3650
3651           if ((intvl = readconf_readtime(s, 0, FALSE)) <= 0)
3652             exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3653
3654           for (qrunner * qq = qrunners; qq; qq = qq->next)
3655             if (  queue_name && qq->name && Ustrcmp(queue_name, qq->name) == 0
3656                || !queue_name && !qq->name)
3657               exim_fail("exim: queue-runner specified more than once\n");
3658
3659           q = alloc_qrunner();
3660           q->interval = intvl;
3661           }
3662
3663         q->name = *queue_name ? queue_name : NULL;      /* will be NULL for the default queue */
3664         q->queue_run_force = force;
3665         q->deliver_force_thaw = thaw;
3666         q->queue_run_first_delivery = first_del;
3667         q->queue_run_local = local;
3668         q->queue_2stage = two_stage;
3669         }
3670
3671       break;
3672       }
3673
3674
3675     case 'R':   /* Synonymous with -qR... */
3676     case 'S':   /* Synonymous with -qS... */
3677       {
3678       const uschar * tainted_selectstr;
3679       uschar * s;
3680
3681       receiving_message = FALSE;
3682
3683     /* -Rf:   As -R (below) but force all deliveries,
3684        -Rff:  Ditto, but also thaw all frozen messages,
3685        -Rr:   String is regex
3686        -Rrf:  Regex and force
3687        -Rrff: Regex and force and thaw
3688
3689        -S...: Like -R but works on sender.
3690
3691     in all cases provided there are no further characters in this
3692     argument. */
3693
3694       if (!qrunners) alloc_onetime_qrunner();
3695       qrunners->queue_2stage = f.queue_2stage;
3696       if (*argrest)
3697         for (int i = 0; i < nelem(rsopts); i++)
3698           if (Ustrcmp(argrest, rsopts[i]) == 0)
3699             {
3700             if (i != 2) qrunners->queue_run_force = TRUE;
3701             if (i >= 2)
3702               if (switchchar == 'R')
3703                 f.deliver_selectstring_regex = TRUE;
3704               else
3705                 f.deliver_selectstring_sender_regex = TRUE;
3706             if (i == 1 || i == 4) qrunners->deliver_force_thaw = TRUE;
3707             argrest += Ustrlen(rsopts[i]);
3708             }
3709
3710     /* -R or -S: Set string to match in addresses for forced queue run to
3711     pick out particular messages. */
3712
3713       /* Avoid attacks from people providing very long strings, and do so before
3714       we make copies. */
3715       if (*argrest)
3716         tainted_selectstr = argrest;
3717       else if (i+1 < argc)
3718         tainted_selectstr = argv[++i];
3719       else
3720         exim_fail("exim: string expected after %s\n", switchchar == 'R' ? "-R" : "-S");
3721
3722       s = string_copy_taint(
3723         exim_str_fail_toolong(tainted_selectstr, EXIM_EMAILADDR_MAX, "-R"),
3724         GET_TAINTED);
3725
3726       if (switchchar == 'R')
3727         deliver_selectstring = s;
3728       else
3729         deliver_selectstring_sender = s;
3730       }
3731     break;
3732
3733
3734     /* -r: an obsolete synonym for -f (see above) */
3735
3736     /* -Tqt is an option that is exclusively for use by the testing suite.
3737     It is not recognized in other circumstances. It allows for the setting up
3738     of explicit "queue times" so that various warning/retry things can be
3739     tested. Otherwise variability of clock ticks etc. cause problems. */
3740
3741     case 'T':
3742     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0 && ++i < argc)
3743       fudged_queue_times = string_copy_taint(argv[i], GET_TAINTED);
3744     else badarg = TRUE;
3745     break;
3746
3747
3748     /* -t: Set flag to extract recipients from body of message. */
3749
3750     case 't':
3751     if (!*argrest) extract_recipients = TRUE;
3752
3753     /* -ti: Set flag to extract recipients from body of message, and also
3754     specify that dot does not end the message. */
3755
3756     else if (Ustrcmp(argrest, "i") == 0)
3757       {
3758       extract_recipients = TRUE;
3759       f.dot_ends = FALSE;
3760       }
3761
3762     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3763
3764     #ifndef DISABLE_TLS
3765     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3766     #endif
3767
3768     else badarg = TRUE;
3769     break;
3770
3771
3772     /* -U: This means "initial user submission" in sendmail, apparently. The
3773     doc claims that in future sendmail may refuse syntactically invalid
3774     messages instead of fixing them. For the moment, we just ignore it. */
3775
3776     case 'U':
3777     break;
3778
3779
3780     /* -v: verify things - this is a very low-level debugging */
3781
3782     case 'v':
3783     if (!*argrest)
3784       {
3785       debug_selector |= D_v;
3786       debug_file = stderr;
3787       }
3788     else badarg = TRUE;
3789     break;
3790
3791
3792     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3793
3794       The -x flag tells the sendmail command that mail from a local
3795       mail program has National Language Support (NLS) extended characters
3796       in the body of the mail item. The sendmail command can send mail with
3797       extended NLS characters across networks that normally corrupts these
3798       8-bit characters.
3799
3800     As Exim is 8-bit clean, it just ignores this flag. */
3801
3802     case 'x':
3803     if (*argrest) badarg = TRUE;
3804     break;
3805
3806     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3807     logs to that file.  We swallow the parameter and otherwise ignore it. */
3808
3809     case 'X':
3810     if (!*argrest)
3811       if (++i >= argc)
3812         exim_fail("exim: string expected after -X\n");
3813     break;
3814
3815     /* -z: a line of text to log */
3816
3817     case 'z':
3818     if (!*argrest)
3819       if (++i < argc)
3820         log_oneline = string_copy_taint(
3821           exim_str_fail_toolong(argv[i], 2048, "-z logtext"),
3822           GET_TAINTED);
3823       else
3824         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3825     break;
3826
3827     /* All other initial characters are errors */
3828
3829     default:
3830     badarg = TRUE;
3831     break;
3832     }         /* End of high-level switch statement */
3833
3834   /* Failed to recognize the option, or syntax error */
3835
3836   if (badarg)
3837     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3838       "option %s\n", arg);
3839   }
3840
3841
3842 /* If -R or -S have been specified without -q, assume a single queue run. */
3843
3844  if ((deliver_selectstring || deliver_selectstring_sender) && !qrunners)
3845   alloc_onetime_qrunner();
3846
3847
3848 END_ARG:
3849  store_pool = old_pool;
3850  }
3851
3852 /* If usage_wanted is set we call the usage function - which never returns */
3853 if (usage_wanted) exim_usage(called_as);
3854
3855 /* Arguments have been processed. Check for incompatibilities. */
3856 if (  (  (smtp_input || extract_recipients || recipients_arg < argc)
3857       && (  f.daemon_listen || qrunners || bi_option
3858          || test_retry_arg >= 0 || test_rewrite_arg >= 0
3859          || filter_test != FTEST_NONE
3860          || msg_action_arg > 0 && !one_msg_action
3861       )  )
3862    || (  msg_action_arg > 0
3863       && (  f.daemon_listen || is_multiple_qrun() || list_options
3864          || checking && msg_action != MSG_LOAD
3865          || bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0
3866       )  )
3867    || (  (f.daemon_listen || is_multiple_qrun())
3868       && (  sender_address || list_options || list_queue || checking
3869          || bi_option
3870       )  )
3871    || f.daemon_listen && is_onetime_qrun()
3872    || f.inetd_wait_mode && qrunners
3873    || (  list_options
3874       && (  checking || smtp_input || extract_recipients
3875          || filter_test != FTEST_NONE || bi_option
3876       )  )
3877    || (  verify_address_mode
3878       && (  f.address_test_mode || smtp_input || extract_recipients
3879          || filter_test != FTEST_NONE || bi_option
3880       )  )
3881    || (  f.address_test_mode
3882       && (  smtp_input || extract_recipients || filter_test != FTEST_NONE
3883          || bi_option
3884       )  )
3885    || (  smtp_input
3886       && (sender_address || filter_test != FTEST_NONE || extract_recipients)
3887       )
3888    || deliver_selectstring && !qrunners
3889    || msg_action == MSG_LOAD && (!expansion_test || expansion_test_message)
3890    )
3891   exim_fail("exim: incompatible command-line options or arguments\n");
3892
3893 /* If debugging is set up, set the file and the file descriptor to pass on to
3894 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3895 to run in the foreground. */
3896
3897 if (debug_selector != 0)
3898   {
3899   debug_file = stderr;
3900   debug_fd = fileno(debug_file);
3901   f.background_daemon = FALSE;
3902   testharness_pause_ms(100);   /* lets caller finish */
3903   if (debug_selector != D_v)    /* -v only doesn't show this */
3904     {
3905     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3906       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3907       debug_selector);
3908     if (!version_printed)
3909       show_whats_supported(FALSE);
3910     }
3911   }
3912
3913 /* When started with root privilege, ensure that the limits on the number of
3914 open files and the number of processes (where that is accessible) are
3915 sufficiently large, or are unset, in case Exim has been called from an
3916 environment where the limits are screwed down. Not all OS have the ability to
3917 change some of these limits. */
3918
3919 if (unprivileged)
3920   {
3921   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3922   }
3923 else
3924   {
3925   struct rlimit rlp;
3926
3927 #ifdef RLIMIT_NOFILE
3928   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3929     {
3930     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3931       strerror(errno));
3932     rlp.rlim_cur = rlp.rlim_max = 0;
3933     }
3934
3935   /* I originally chose 1000 as a nice big number that was unlikely to
3936   be exceeded. It turns out that some older OS have a fixed upper limit of
3937   256. */
3938
3939   if (rlp.rlim_cur < 1000)
3940     {
3941     rlp.rlim_cur = rlp.rlim_max = 1000;
3942     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3943       {
3944       rlp.rlim_cur = rlp.rlim_max = 256;
3945       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3946         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3947           strerror(errno));
3948       }
3949     }
3950 #endif
3951
3952 #ifdef RLIMIT_NPROC
3953   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3954     {
3955     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3956       strerror(errno));
3957     rlp.rlim_cur = rlp.rlim_max = 0;
3958     }
3959
3960 # ifdef RLIM_INFINITY
3961   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3962     {
3963     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3964 # else
3965   if (rlp.rlim_cur < 1000)
3966     {
3967     rlp.rlim_cur = rlp.rlim_max = 1000;
3968 # endif
3969     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3970       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3971         strerror(errno));
3972     }
3973 #endif
3974   }
3975
3976 /* Exim is normally entered as root (but some special configurations are
3977 possible that don't do this). However, it always spins off sub-processes that
3978 set their uid and gid as required for local delivery. We don't want to pass on
3979 any extra groups that root may belong to, so we want to get rid of them all at
3980 this point.
3981
3982 We need to obey setgroups() at this stage, before possibly giving up root
3983 privilege for a changed configuration file, but later on we might need to
3984 check on the additional groups for the admin user privilege - can't do that
3985 till after reading the config, which might specify the exim gid. Therefore,
3986 save the group list here first. */
3987
3988 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3989   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3990
3991 /* There is a fundamental difference in some BSD systems in the matter of
3992 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3993 known not to be different. On the "different" systems there is a single group
3994 list, and the first entry in it is the current group. On all other versions of
3995 Unix there is a supplementary group list, which is in *addition* to the current
3996 group. Consequently, to get rid of all extraneous groups on a "standard" system
3997 you pass over 0 groups to setgroups(), while on a "different" system you pass
3998 over a single group - the current group, which is always the first group in the
3999 list. Calling setgroups() with zero groups on a "different" system results in
4000 an error return. The following code should cope with both types of system.
4001
4002  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
4003  the "setgroups() with zero groups" - and changes the egid.
4004  Thanks to that we had to stash the original_egid above, for use below
4005  in the call to exim_setugid().
4006
4007 However, if this process isn't running as root, setgroups() can't be used
4008 since you have to be root to run it, even if throwing away groups.
4009 Except, sigh, for Hurd - where you can.
4010 Not being root here happens only in some unusual configurations. */
4011
4012 if (  !unprivileged
4013 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
4014    && setgroups(0, NULL) != 0
4015 #endif
4016    && setgroups(1, group_list) != 0)
4017   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
4018
4019 /* If the configuration file name has been altered by an argument on the
4020 command line (either a new file name or a macro definition) and the caller is
4021 not root, or if this is a filter testing run, remove any setuid privilege the
4022 program has and run as the underlying user.
4023
4024 The exim user is locked out of this, which severely restricts the use of -C
4025 for some purposes.
4026
4027 Otherwise, set the real ids to the effective values (should be root unless run
4028 from inetd, which it can either be root or the exim uid, if one is configured).
4029
4030 There is a private mechanism for bypassing some of this, in order to make it
4031 possible to test lots of configurations automatically, without having either to
4032 recompile each time, or to patch in an actual configuration file name and other
4033 values (such as the path name). If running in the test harness, pretend that
4034 configuration file changes and macro definitions haven't happened. */
4035
4036 if ((                                            /* EITHER */
4037     (!f.trusted_config ||                          /* Config changed, or */
4038      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
4039     real_uid != root_uid &&                      /* Not root, and */
4040     !f.running_in_test_harness                     /* Not fudged */
4041     ) ||                                         /*   OR   */
4042     expansion_test                               /* expansion testing */
4043     ||                                           /*   OR   */
4044     filter_test != FTEST_NONE)                   /* Filter testing */
4045   {
4046   setgroups(group_count, group_list);
4047   exim_setugid(real_uid, real_gid, FALSE,
4048     US"-C, -D, -be or -bf forces real uid");
4049   removed_privilege = TRUE;
4050
4051   /* In the normal case when Exim is called like this, stderr is available
4052   and should be used for any logging information because attempts to write
4053   to the log will usually fail. To arrange this, we unset really_exim. However,
4054   if no stderr is available there is no point - we might as well have a go
4055   at the log (if it fails, syslog will be written).
4056
4057   Note that if the invoker is Exim, the logs remain available. Messing with
4058   this causes unlogged successful deliveries.  */
4059
4060   if (log_stderr && real_uid != exim_uid)
4061     f.really_exim = FALSE;
4062   }
4063
4064 /* Privilege is to be retained for the moment. It may be dropped later,
4065 depending on the job that this Exim process has been asked to do. For now, set
4066 the real uid to the effective so that subsequent re-execs of Exim are done by a
4067 privileged user. */
4068
4069 else
4070   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
4071
4072 /* If testing a filter, open the file(s) now, before wasting time doing other
4073 setups and reading the message. */
4074
4075 if (filter_test & FTEST_SYSTEM)
4076   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
4077     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
4078       strerror(errno));
4079
4080 if (filter_test & FTEST_USER)
4081   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
4082     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
4083       strerror(errno));
4084
4085 /* Initialise lookup_list
4086 If debugging, already called above via version reporting.
4087 In either case, we initialise the list of available lookups while running
4088 as root.  All dynamically modules are loaded from a directory which is
4089 hard-coded into the binary and is code which, if not a module, would be
4090 part of Exim already.  Ability to modify the content of the directory
4091 is equivalent to the ability to modify a setuid binary!
4092
4093 This needs to happen before we read the main configuration. */
4094 init_lookup_list();
4095
4096 /*XXX this excrescence could move to the testsuite standard config setup file */
4097 #ifdef SUPPORT_I18N
4098 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
4099 #endif
4100
4101 /* Read the main runtime configuration data; this gives up if there
4102 is a failure. It leaves the configuration file open so that the subsequent
4103 configuration data for delivery can be read if needed.
4104
4105 NOTE: immediately after opening the configuration file we change the working
4106 directory to "/"! Later we change to $spool_directory. We do it there, because
4107 during readconf_main() some expansion takes place already. */
4108
4109 /* Store the initial cwd before we change directories.  Can be NULL if the
4110 dir has already been unlinked. */
4111 initial_cwd = os_getcwd(NULL, 0);
4112 if (!initial_cwd && errno)
4113   exim_fail("exim: getting initial cwd failed: %s\n", strerror(errno));
4114
4115 if (initial_cwd && (strlen(CCS initial_cwd) >= BIG_BUFFER_SIZE))
4116   exim_fail("exim: initial cwd is far too long (%d)\n", Ustrlen(CCS initial_cwd));
4117
4118 /* checking:
4119     -be[m] expansion test        -
4120     -b[fF] filter test           new
4121     -bh[c] host test             -
4122     -bmalware malware_test_file  new
4123     -brt   retry test            new
4124     -brw   rewrite test          new
4125     -bt    address test          -
4126     -bv[s] address verify        -
4127    list_options:
4128     -bP <option> (except -bP config, which sets list_config)
4129
4130 If any of these options is set, we suppress warnings about configuration
4131 issues (currently about tls_advertise_hosts and keep_environment not being
4132 defined) */
4133
4134   {
4135   int old_pool = store_pool;
4136 #ifdef MEASURE_TIMING
4137   struct timeval t0;
4138   (void)gettimeofday(&t0, NULL);
4139 #endif
4140
4141   store_pool = POOL_CONFIG;
4142   readconf_main(checking || list_options);
4143   store_pool = old_pool;
4144
4145 #ifdef MEASURE_TIMING
4146   report_time_since(&t0, US"readconf_main (delta)");
4147 #endif
4148   }
4149
4150 /* Now in directory "/" */
4151
4152 if (cleanup_environment() == FALSE)
4153   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
4154
4155
4156 /* If an action on specific messages is requested, or if a daemon or queue
4157 runner is being started, we need to know if Exim was called by an admin user.
4158 This is the case if the real user is root or exim, or if the real group is
4159 exim, or if one of the supplementary groups is exim or a group listed in
4160 admin_groups. We don't fail all message actions immediately if not admin_user,
4161 since some actions can be performed by non-admin users. Instead, set admin_user
4162 for later interrogation. */
4163
4164 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
4165   f.admin_user = TRUE;
4166 else
4167   for (int i = 0; i < group_count && !f.admin_user; i++)
4168     if (group_list[i] == exim_gid)
4169       f.admin_user = TRUE;
4170     else if (admin_groups)
4171       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
4172         if (admin_groups[j] == group_list[i])
4173           f.admin_user = TRUE;
4174
4175 /* Another group of privileged users are the trusted users. These are root,
4176 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
4177 are permitted to specify sender_addresses with -f on the command line, and
4178 other message parameters as well. */
4179
4180 if (real_uid == root_uid || real_uid == exim_uid)
4181   f.trusted_caller = TRUE;
4182 else
4183   {
4184   if (trusted_users)
4185     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
4186       if (trusted_users[i] == real_uid)
4187         f.trusted_caller = TRUE;
4188
4189   if (trusted_groups)
4190     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
4191       if (trusted_groups[i] == real_gid)
4192         f.trusted_caller = TRUE;
4193       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
4194         if (trusted_groups[i] == group_list[j])
4195           f.trusted_caller = TRUE;
4196   }
4197
4198 /* At this point, we know if the user is privileged and some command-line
4199 options become possibly impermissible, depending upon the configuration file. */
4200
4201 if (checking && commandline_checks_require_admin && !f.admin_user)
4202   exim_fail("exim: those command-line flags are set to require admin\n");
4203
4204 /* Handle the decoding of logging options. */
4205
4206 decode_bits(log_selector, log_selector_size, log_notall,
4207   log_selector_string, log_options, log_options_count, US"log", 0);
4208
4209 DEBUG(D_any)
4210   {
4211   debug_printf("configuration file is %s\n", config_main_filename);
4212   debug_printf("log selectors =");
4213   for (int i = 0; i < log_selector_size; i++)
4214     debug_printf(" %08x", log_selector[i]);
4215   debug_printf("\n");
4216   }
4217
4218 /* If domain literals are not allowed, check the sender address that was
4219 supplied with -f. Ditto for a stripped trailing dot. */
4220
4221 if (sender_address)
4222   {
4223   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
4224     exim_fail("exim: bad -f address \"%s\": domain literals not "
4225       "allowed\n", sender_address);
4226   if (f_end_dot && !strip_trailing_dot)
4227     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
4228       "(trailing dot not allowed)\n", sender_address);
4229   }
4230
4231 /* See if an admin user overrode our logging. */
4232
4233 if (cmdline_syslog_name)
4234   if (f.admin_user)
4235     {
4236     syslog_processname = cmdline_syslog_name;
4237     log_file_path = string_copy(CUS"syslog");
4238     }
4239   else
4240     /* not a panic, non-privileged users should not be able to spam paniclog */
4241     exim_fail(
4242         "exim: you lack sufficient privilege to specify syslog process name\n");
4243
4244 /* Paranoia check of maximum lengths of certain strings. There is a check
4245 on the length of the log file path in log.c, which will come into effect
4246 if there are any calls to write the log earlier than this. However, if we
4247 get this far but the string is very long, it is better to stop now than to
4248 carry on and (e.g.) receive a message and then have to collapse. The call to
4249 log_write() from here will cause the ultimate panic collapse if the complete
4250 file name exceeds the buffer length. */
4251
4252 if (Ustrlen(log_file_path) > 200)
4253   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4254     "log_file_path is longer than 200 chars: aborting");
4255
4256 if (Ustrlen(pid_file_path) > 200)
4257   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4258     "pid_file_path is longer than 200 chars: aborting");
4259
4260 if (Ustrlen(spool_directory) > 200)
4261   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4262     "spool_directory is longer than 200 chars: aborting");
4263
4264 /* Length check on the process name given to syslog for its TAG field,
4265 which is only permitted to be 32 characters or less. See RFC 3164. */
4266
4267 if (Ustrlen(syslog_processname) > 32)
4268   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4269     "syslog_processname is longer than 32 chars: aborting");
4270
4271 if (log_oneline)
4272   if (f.admin_user)
4273     {
4274     log_write(0, LOG_MAIN, "%s", log_oneline);
4275     return EXIT_SUCCESS;
4276     }
4277   else
4278     return EXIT_FAILURE;
4279
4280 /* In some operating systems, the environment variable TMPDIR controls where
4281 temporary files are created; Exim doesn't use these (apart from when delivering
4282 to MBX mailboxes), but called libraries such as DBM libraries may require them.
4283 If TMPDIR is found in the environment, reset it to the value defined in the
4284 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
4285 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
4286 EXIM_TMPDIR by the build scripts.
4287 */
4288
4289 #ifdef EXIM_TMPDIR
4290   if (environ) for (uschar ** p = USS environ; *p; p++)
4291     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
4292       {
4293       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
4294       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
4295       *p = newp;
4296       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
4297       }
4298 #endif
4299
4300 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
4301 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
4302 we may need to get rid of a bogus timezone setting. This can arise when Exim is
4303 called by a user who has set the TZ variable. This then affects the timestamps
4304 in log files and in Received: headers, and any created Date: header lines. The
4305 required timezone is settable in the configuration file, so nothing can be done
4306 about this earlier - but hopefully nothing will normally be logged earlier than
4307 this. We have to make a new environment if TZ is wrong, but don't bother if
4308 timestamps_utc is set, because then all times are in UTC anyway. */
4309
4310 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
4311   f.timestamps_utc = TRUE;
4312 else
4313   {
4314   uschar *envtz = US getenv("TZ");
4315   if (envtz
4316       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
4317       : timezone_string != NULL
4318      )
4319     {
4320     uschar **p = USS environ;
4321     uschar **new;
4322     uschar **newp;
4323     int count = 0;
4324     if (environ) while (*p++) count++;
4325     if (!envtz) count++;
4326     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4327     if (environ) for (p = USS environ; *p; p++)
4328       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4329     if (timezone_string)
4330       {
4331       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4332       sprintf(CS *newp++, "TZ=%s", timezone_string);
4333       }
4334     *newp = NULL;
4335     environ = CSS new;
4336     tzset();
4337     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4338       tod_stamp(tod_log));
4339     }
4340   }
4341
4342 /* Handle the case when we have removed the setuid privilege because of -C or
4343 -D. This means that the caller of Exim was not root.
4344
4345 There is a problem if we were running as the Exim user. The sysadmin may
4346 expect this case to retain privilege because "the binary was called by the
4347 Exim user", but it hasn't, because either the -D option set macros, or the
4348 -C option set a non-trusted configuration file. There are two possibilities:
4349
4350   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4351       to do message deliveries. Thus, the fact that it is running as a
4352       non-privileged user is plausible, and might be wanted in some special
4353       configurations. However, really_exim will have been set false when
4354       privilege was dropped, to stop Exim trying to write to its normal log
4355       files. Therefore, re-enable normal log processing, assuming the sysadmin
4356       has set up the log directory correctly.
4357
4358   (2) If deliver_drop_privilege is not set, the configuration won't work as
4359       apparently intended, and so we log a panic message. In order to retain
4360       root for -C or -D, the caller must either be root or be invoking a
4361       trusted configuration file (when deliver_drop_privilege is false). */
4362
4363 if (  removed_privilege
4364    && (!f.trusted_config || opt_D_used)
4365    && real_uid == exim_uid)
4366   if (deliver_drop_privilege)
4367     f.really_exim = TRUE; /* let logging work normally */
4368   else
4369     log_write(0, LOG_MAIN|LOG_PANIC,
4370       "exim user lost privilege for using %s option",
4371       f.trusted_config? "-D" : "-C");
4372
4373 /* Start up Perl interpreter if Perl support is configured and there is a
4374 perl_startup option, and the configuration or the command line specifies
4375 initializing starting. Note that the global variables are actually called
4376 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4377
4378 #ifdef EXIM_PERL
4379 if (perl_start_option != 0)
4380   opt_perl_at_start = (perl_start_option > 0);
4381 if (opt_perl_at_start && opt_perl_startup != NULL)
4382   {
4383   uschar *errstr;
4384   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4385   if ((errstr = init_perl(opt_perl_startup)))
4386     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4387   opt_perl_started = TRUE;
4388   }
4389 #endif /* EXIM_PERL */
4390
4391 /* Log the arguments of the call if the configuration file said so. This is
4392 a debugging feature for finding out what arguments certain MUAs actually use.
4393 Don't attempt it if logging is disabled, or if listing variables or if
4394 verifying/testing addresses or expansions. */
4395
4396 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4397    && f.really_exim && !list_options && !checking)
4398   {
4399   uschar *p = big_buffer;
4400   Ustrcpy(p, US"cwd= (failed)");
4401
4402   if (!initial_cwd)
4403     p += 13;
4404   else
4405     {
4406     p += 4;
4407     snprintf(CS p, big_buffer_size - (p - big_buffer), "%s", CCS initial_cwd);
4408     p += Ustrlen(CCS p);
4409     }
4410
4411   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4412   while (*p) p++;
4413   for (int i = 0; i < argc; i++)
4414     {
4415     int len = Ustrlen(argv[i]);
4416     const uschar *printing;
4417     uschar *quote;
4418     if (p + len + 8 >= big_buffer + big_buffer_size)
4419       {
4420       Ustrcpy(p, US" ...");
4421       log_write(0, LOG_MAIN, "%s", big_buffer);
4422       Ustrcpy(big_buffer, US"...");
4423       p = big_buffer + 3;
4424       }
4425     printing = string_printing(argv[i]);
4426     if (!*printing) quote = US"\"";
4427     else
4428       {
4429       const uschar *pp = printing;
4430       quote = US"";
4431       while (*pp) if (isspace(*pp++)) { quote = US"\""; break; }
4432       }
4433     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4434       (p - big_buffer) - 4), printing, quote);
4435     }
4436
4437   if (LOGGING(arguments))
4438     log_write(0, LOG_MAIN, "%s", big_buffer);
4439   else
4440     debug_printf("%s\n", big_buffer);
4441   }
4442
4443 /* Set the working directory to be the top-level spool directory. We don't rely
4444 on this in the code, which always uses fully qualified names, but it's useful
4445 for core dumps etc. Don't complain if it fails - the spool directory might not
4446 be generally accessible and calls with the -C option (and others) have lost
4447 privilege by now. Before the chdir, we try to ensure that the directory exists.
4448 */
4449
4450 if (Uchdir(spool_directory) != 0)
4451   {
4452   (void) directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4453   (void) Uchdir(spool_directory);
4454   }
4455
4456 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4457 alias file. Exim doesn't have such a concept, but this call is screwed into
4458 Sun's YP makefiles. Handle this by calling a configured script, as the real
4459 user who called Exim. The -oA option can be used to pass an argument to the
4460 script. */
4461
4462 if (bi_option)
4463   {
4464   (void) fclose(config_file);
4465   if (bi_command && *bi_command)
4466     {
4467     int i = 0;
4468     const uschar * argv[3];
4469     argv[i++] = bi_command;     /* nonexpanded option so assume untainted */
4470     if (alias_arg) argv[i++] = alias_arg;
4471     argv[i++] = NULL;
4472
4473     setgroups(group_count, group_list);
4474     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4475
4476     DEBUG(D_exec) debug_printf("exec '%.256s' %s%.256s%s\n", argv[0],
4477       argv[1] ? "'" : "", argv[1] ? argv[1] : US"", argv[1] ? "'" : "");
4478
4479     execv(CS argv[0], (char *const *)argv);
4480     exim_fail("exim: exec '%s' failed: %s\n", argv[0], strerror(errno));
4481     }
4482   else
4483     {
4484     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4485     exit(EXIT_SUCCESS);
4486     }
4487   }
4488
4489 /* We moved the admin/trusted check to be immediately after reading the
4490 configuration file.  We leave these prints here to ensure that syslog setup,
4491 logfile setup, and so on has already happened. */
4492
4493 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4494 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4495
4496 /* Only an admin user may start the daemon or force a queue run in the default
4497 configuration, but the queue run restriction can be relaxed. Only an admin
4498 user may request that a message be returned to its sender forthwith. Only an
4499 admin user may specify a debug level greater than D_v (because it might show
4500 passwords, etc. in lookup queries). Only an admin user may request a queue
4501 count. Only an admin user can use the test interface to scan for email
4502 (because Exim will be in the spool dir and able to look at mails). */
4503
4504 if (!f.admin_user)
4505   {
4506   BOOL debugset = (debug_selector & ~D_v) != 0;
4507   if (  deliver_give_up || f.daemon_listen || malware_test_file
4508      || count_queue && queue_list_requires_admin
4509      || list_queue && queue_list_requires_admin
4510      || qrunners && prod_requires_admin
4511      || queue_name_dest && prod_requires_admin
4512      || debugset && !f.running_in_test_harness
4513      )
4514     exim_fail("exim:%s permission denied; not admin\n",
4515               debugset ? " debugging" : "");
4516   }
4517
4518 /* If the real user is not root or the exim uid, the argument for passing
4519 in an open TCP/IP connection for another message is not permitted, nor is
4520 running with the -N option for any delivery action, unless this call to exim is
4521 one that supplied an input message, or we are using a patched exim for
4522 regression testing. */
4523
4524 if (  real_uid != root_uid && real_uid != exim_uid
4525    && (  continue_hostname
4526       || (  f.dont_deliver
4527          && (qrunners || f.daemon_listen || msg_action_arg > 0)
4528       )  )
4529    && !f.running_in_test_harness
4530    )
4531   exim_fail("exim: Permission denied; not exim user or root\n");
4532
4533 /* If the caller is not trusted, certain arguments are ignored when running for
4534 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4535 Note that authority for performing certain actions on messages is tested in the
4536 queue_action() function. */
4537
4538 if (!f.trusted_caller && !checking)
4539   {
4540   sender_host_name = sender_host_address = interface_address =
4541     sender_ident = received_protocol = NULL;
4542   sender_host_port = interface_port = 0;
4543   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4544   }
4545
4546 /* If a sender host address is set, extract the optional port number off the
4547 end of it and check its syntax. Do the same thing for the interface address.
4548 Exim exits if the syntax is bad. */
4549
4550 else
4551   {
4552   if (sender_host_address)
4553     sender_host_port = check_port(sender_host_address);
4554   if (interface_address)
4555     interface_port = check_port(interface_address);
4556   }
4557
4558 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4559 if (flag_G)
4560   {
4561   if (f.trusted_caller)
4562     {
4563     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4564     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4565     }
4566   else
4567     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4568   }
4569
4570 /* If an SMTP message is being received check to see if the standard input is a
4571 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4572 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4573 barf. */
4574
4575 if (smtp_input)
4576   {
4577   union sockaddr_46 inetd_sock;
4578   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4579   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4580     {
4581     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4582     if (family == AF_INET || family == AF_INET6)
4583       {
4584       union sockaddr_46 interface_sock;
4585       size = sizeof(interface_sock);
4586
4587       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4588         interface_address = host_ntoa(-1, &interface_sock, NULL,
4589           &interface_port);
4590
4591       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4592
4593       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4594         {
4595         f.is_inetd = TRUE;
4596         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4597           NULL, &sender_host_port);
4598         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4599           "inetd is not supported when mua_wrapper is set");
4600         }
4601       else
4602         exim_fail(
4603           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4604       }
4605     }
4606   }
4607
4608 /* If the load average is going to be needed while receiving a message, get it
4609 now for those OS that require the first call to os_getloadavg() to be done as
4610 root. There will be further calls later for each message received. */
4611
4612 #ifdef LOAD_AVG_NEEDS_ROOT
4613 if (  receiving_message
4614    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4615   load_average = OS_GETLOADAVG();
4616 #endif
4617
4618 /* The queue_only configuration option can be overridden by -odx on the command
4619 line, except that if queue_only_override is false, queue_only cannot be unset
4620 from the command line. */
4621
4622 if (queue_only_set && (queue_only_override || arg_queue_only))
4623   queue_only = arg_queue_only;
4624
4625 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4626 -or and -os. */
4627
4628 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4629 if (arg_smtp_receive_timeout >= 0)
4630   smtp_receive_timeout = arg_smtp_receive_timeout;
4631
4632 /* If Exim was started with root privilege, unless we have already removed the
4633 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4634 except when starting the daemon or doing some kind of delivery or address
4635 testing (-bt). These are the only cases when root need to be retained. We run
4636 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4637 retained only for starting the daemon. We always do the initgroups() in this
4638 situation (controlled by the TRUE below), in order to be as close as possible
4639 to the state Exim usually runs in. */
4640
4641 if (  !unprivileged                             /* originally had root AND */
4642    && !removed_privilege                        /* still got root AND      */
4643    && !f.daemon_listen                          /* not starting the daemon */
4644    && (!qrunners || is_onetime_qrun())          /* (either kind of daemon) */
4645    && (                                         /*    AND EITHER           */
4646          deliver_drop_privilege                 /* requested unprivileged  */
4647       || (                                      /*       OR                */
4648             !qrunners                           /* not running the queue   */
4649          && (  msg_action_arg < 0               /*       and               */
4650             || msg_action != MSG_DELIVER        /* not delivering          */
4651             )                                   /*       and               */
4652          && (!checking || !f.address_test_mode) /* not address checking    */
4653          && !rcpt_verify_quota                  /* and not quota checking  */
4654    )  )  )
4655   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4656
4657 /* When we are retaining a privileged uid, we still change to the exim gid. */
4658
4659 else
4660   {
4661   int rv;
4662   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4663   rv = setgid(exim_gid);
4664   /* Impact of failure is that some stuff might end up with an incorrect group.
4665   We track this for failures from root, since any attempt to change privilege
4666   by root should succeed and failures should be examined.  For non-root,
4667   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4668   no need to complain then. */
4669   if (rv == -1)
4670     if (!(unprivileged || removed_privilege))
4671       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4672     else
4673       {
4674       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4675           (long int)exim_gid, strerror(errno));
4676       }
4677   }
4678
4679 /* Handle a request to scan a file for malware */
4680 if (malware_test_file)
4681   {
4682 #ifdef WITH_CONTENT_SCAN
4683   int result;
4684   set_process_info("scanning file for malware");
4685   if ((result = malware_in_file(malware_test_file)) == FAIL)
4686     {
4687     printf("No malware found.\n");
4688     exit(EXIT_SUCCESS);
4689     }
4690   if (result != OK)
4691     {
4692     printf("Malware lookup returned non-okay/fail: %d\n", result);
4693     exit(EXIT_FAILURE);
4694     }
4695   if (malware_name)
4696     printf("Malware found: %s\n", malware_name);
4697   else
4698     printf("Malware scan detected malware of unknown name.\n");
4699 #else
4700   printf("Malware scanning not enabled at compile time.\n");
4701 #endif
4702   exit(EXIT_FAILURE);
4703   }
4704
4705 /* Handle a request to list the delivery queue */
4706
4707 if (list_queue)
4708   {
4709   set_process_info("listing the queue");
4710   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4711   exit(EXIT_SUCCESS);
4712   }
4713
4714 /* Handle a request to count the delivery queue */
4715
4716 if (count_queue)
4717   {
4718   set_process_info("counting the queue");
4719   fprintf(stdout, "%u\n", queue_count());
4720   exit(EXIT_SUCCESS);
4721   }
4722
4723 /* Handle actions on specific messages, except for the force delivery and
4724 message load actions, which are done below. Some actions take a whole list of
4725 message ids, which are known to continue up to the end of the arguments. Others
4726 take a single message id and then operate on the recipients list. */
4727
4728 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4729   {
4730   int yield = EXIT_SUCCESS;
4731   set_process_info("acting on specified messages");
4732
4733   /* ACL definitions may be needed when removing a message (-Mrm) because
4734   event_action gets expanded */
4735
4736   if (msg_action == MSG_REMOVE)
4737     {
4738     int old_pool = store_pool;
4739     store_pool = POOL_CONFIG;
4740     readconf_rest();
4741     store_pool = old_pool;
4742     store_writeprotect(POOL_CONFIG);
4743     }
4744
4745   if (!one_msg_action)
4746     {
4747     for (i = msg_action_arg; i < argc; i++)
4748       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4749         yield = EXIT_FAILURE;
4750     switch (msg_action)
4751       {
4752       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4753       default: printf("\n"); break;
4754       }
4755     }
4756
4757   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4758     recipients_arg)) yield = EXIT_FAILURE;
4759   exit(yield);
4760   }
4761
4762 /* We used to set up here to skip reading the ACL section, on
4763  (msg_action_arg > 0 || (is_onetime_qrun() && !f.daemon_listen)
4764 Now, since the intro of the ${acl } expansion, ACL definitions may be
4765 needed in transports so we lost the optimisation. */
4766
4767   {
4768   int old_pool = store_pool;
4769 #ifdef MEASURE_TIMING
4770   struct timeval t0;
4771   (void)gettimeofday(&t0, NULL);
4772 #endif
4773
4774   store_pool = POOL_CONFIG;
4775   readconf_rest();
4776   store_pool = old_pool;
4777
4778   /* -be can add macro definitions, needing to link to the macro structure
4779   chain.  Otherwise, make the memory used for config data readonly. */
4780
4781   if (!expansion_test)
4782     store_writeprotect(POOL_CONFIG);
4783
4784 #ifdef MEASURE_TIMING
4785   report_time_since(&t0, US"readconf_rest (delta)");
4786 #endif
4787   }
4788
4789 /* Handle a request to check quota */
4790 if (rcpt_verify_quota)
4791   if (real_uid != root_uid && real_uid != exim_uid)
4792     exim_fail("exim: Permission denied\n");
4793   else if (recipients_arg >= argc)
4794     exim_fail("exim: missing recipient for quota check\n");
4795   else
4796     {
4797     verify_quota(US argv[recipients_arg]);      /*XXX we lose track of const here */
4798     exim_exit(EXIT_SUCCESS);
4799     }
4800
4801 /* Handle the -brt option. This is for checking out retry configurations.
4802 The next three arguments are a domain name or a complete address, and
4803 optionally two error numbers. All it does is to call the function that
4804 scans the retry configuration data. */
4805
4806 if (test_retry_arg >= 0)
4807   {
4808   retry_config *yield;
4809   int basic_errno = 0;
4810   int more_errno = 0;
4811   const uschar *s1, *s2;
4812
4813   if (test_retry_arg >= argc)
4814     {
4815     printf("-brt needs a domain or address argument\n");
4816     exim_exit(EXIT_FAILURE);
4817     }
4818   s1 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_EMAILADDR_MAX, "-brt");
4819   s2 = NULL;
4820
4821   /* If the first argument contains no @ and no . it might be a local user
4822   or it might be a single-component name. Treat as a domain. */
4823
4824   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4825     {
4826     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4827       "being \ntreated as a one-component domain, not as a local part.\n\n",
4828       s1);
4829     }
4830
4831   /* There may be an optional second domain arg. */
4832
4833   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4834     s2 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_DOMAINNAME_MAX, "-brt 2nd");
4835
4836   /* The final arg is an error name */
4837
4838   if (test_retry_arg < argc)
4839     {
4840     const uschar *ss = exim_str_fail_toolong(argv[test_retry_arg], EXIM_DRIVERNAME_MAX, "-brt 3rd");
4841     uschar *error =
4842       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4843     if (error != NULL)
4844       {
4845       printf("%s\n", CS error);
4846       return EXIT_FAILURE;
4847       }
4848
4849     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4850     code > 100 as an error is for matching codes to the decade. Turn them into
4851     a real error code, off the decade. */
4852
4853     if (basic_errno == ERRNO_MAIL4XX ||
4854         basic_errno == ERRNO_RCPT4XX ||
4855         basic_errno == ERRNO_DATA4XX)
4856       {
4857       int code = (more_errno >> 8) & 255;
4858       if (code == 255)
4859         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4860       else if (code > 100)
4861         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4862       }
4863     }
4864
4865   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4866     printf("No retry information found\n");
4867   else
4868     {
4869     more_errno = yield->more_errno;
4870     printf("Retry rule: %s  ", yield->pattern);
4871
4872     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4873       {
4874       printf("quota%s%s  ",
4875         (more_errno > 0)? "_" : "",
4876         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4877       }
4878     else if (yield->basic_errno == ECONNREFUSED)
4879       {
4880       printf("refused%s%s  ",
4881         (more_errno > 0)? "_" : "",
4882         (more_errno == 'M')? "MX" :
4883         (more_errno == 'A')? "A" : "");
4884       }
4885     else if (yield->basic_errno == ETIMEDOUT)
4886       {
4887       printf("timeout");
4888       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4889       more_errno &= 255;
4890       if (more_errno != 0) printf("_%s",
4891         (more_errno == 'M')? "MX" : "A");
4892       printf("  ");
4893       }
4894     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4895       printf("auth_failed  ");
4896     else printf("*  ");
4897
4898     for (retry_rule * r = yield->rules; r; r = r->next)
4899       {
4900       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4901       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4902       if (r->rule == 'G')
4903         {
4904         int x = r->p2;
4905         int f = x % 1000;
4906         int d = 100;
4907         printf(",%d.", x/1000);
4908         do
4909           {
4910           printf("%d", f/d);
4911           f %= d;
4912           d /= 10;
4913           }
4914         while (f != 0);
4915         }
4916       printf("; ");
4917       }
4918
4919     printf("\n");
4920     }
4921   exim_exit(EXIT_SUCCESS);
4922   }
4923
4924 /* Handle a request to list one or more configuration options */
4925 /* If -n was set, we suppress some information */
4926
4927 if (list_options)
4928   {
4929   BOOL fail = FALSE;
4930   set_process_info("listing variables");
4931   if (recipients_arg >= argc)
4932     fail = !readconf_print(US"all", NULL, flag_n);
4933   else for (i = recipients_arg; i < argc; i++)
4934     {
4935     if (i < argc - 1 &&
4936         (Ustrcmp(argv[i], "router") == 0 ||
4937          Ustrcmp(argv[i], "transport") == 0 ||
4938          Ustrcmp(argv[i], "authenticator") == 0 ||
4939          Ustrcmp(argv[i], "macro") == 0 ||
4940          Ustrcmp(argv[i], "environment") == 0))
4941       {
4942       fail |= !readconf_print(exim_str_fail_toolong(argv[i+1], EXIM_DRIVERNAME_MAX, "-bP name"), argv[i], flag_n);
4943       i++;
4944       }
4945     else
4946       fail = !readconf_print(exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-bP item"), NULL, flag_n);
4947     }
4948   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS);
4949   }
4950
4951 if (list_config)
4952   {
4953   set_process_info("listing config");
4954   exim_exit(readconf_print(US"config", NULL, flag_n)
4955                 ? EXIT_SUCCESS : EXIT_FAILURE);
4956   }
4957
4958
4959 /* Initialise subsystems as required. */
4960
4961 tcp_init();
4962
4963 /* Handle a request to deliver one or more messages that are already on the
4964 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4965 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4966
4967 Delivery of specific messages is typically used for a small number when
4968 prodding by hand (when the option forced_delivery will be set) or when
4969 re-execing to regain root privilege. Each message delivery must happen in a
4970 separate process, so we fork a process for each one, and run them sequentially
4971 so that debugging output doesn't get intertwined, and to avoid spawning too
4972 many processes if a long list is given. However, don't fork for the last one;
4973 this saves a process in the common case when Exim is called to deliver just one
4974 message. */
4975
4976 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4977   {
4978   if (prod_requires_admin && !f.admin_user)
4979     {
4980     fprintf(stderr, "exim: Permission denied\n");
4981     exim_exit(EXIT_FAILURE);
4982     }
4983   set_process_info("delivering specified messages");
4984   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4985   for (i = msg_action_arg; i < argc; i++)
4986     {
4987     int status;
4988     pid_t pid;
4989     /*XXX This use of argv[i] for msg_id should really be tainted, but doing
4990     that runs into a later copy into the untainted global message_id[] */
4991     /*XXX Do we need a length limit check here? */
4992     if (i == argc - 1)
4993       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4994     else if ((pid = exim_fork(US"cmdline-delivery")) == 0)
4995       {
4996       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4997       exim_underbar_exit(EXIT_SUCCESS);
4998       }
4999     else if (pid < 0)
5000       {
5001       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
5002         strerror(errno));
5003       exim_exit(EXIT_FAILURE);
5004       }
5005     else wait(&status);
5006     }
5007   exim_exit(EXIT_SUCCESS);
5008   }
5009
5010
5011 /* If only a single queue run is requested, without SMTP listening, we can just
5012 turn into a queue runner, with an optional starting message id. */
5013
5014 if (is_onetime_qrun() && !f.daemon_listen)
5015   {
5016   single_queue_run(qrunners, start_queue_run_id, stop_queue_run_id);
5017   exim_exit(EXIT_SUCCESS);
5018   }
5019
5020
5021 /* Find the login name of the real user running this process. This is always
5022 needed when receiving a message, because it is written into the spool file. It
5023 may also be used to construct a from: or a sender: header, and in this case we
5024 need the user's full name as well, so save a copy of it, checked for RFC822
5025 syntax and munged if necessary, if it hasn't previously been set by the -F
5026 argument. We may try to get the passwd entry more than once, in case NIS or
5027 other delays are in evidence. Save the home directory for use in filter testing
5028 (only). */
5029
5030 for (i = 0;;)
5031   {
5032   if ((pw = getpwuid(real_uid)) != NULL)
5033     {
5034     originator_login = string_copy(US pw->pw_name);
5035     originator_home = string_copy(US pw->pw_dir);
5036
5037     /* If user name has not been set by -F, set it from the passwd entry
5038     unless -f has been used to set the sender address by a trusted user. */
5039
5040     if (!originator_name)
5041       {
5042       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
5043         {
5044         uschar *name = US pw->pw_gecos;
5045         uschar *amp = Ustrchr(name, '&');
5046         uschar buffer[256];
5047
5048         /* Most Unix specify that a '&' character in the gecos field is
5049         replaced by a copy of the login name, and some even specify that
5050         the first character should be upper cased, so that's what we do. */
5051
5052         if (amp)
5053           {
5054           int loffset;
5055           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
5056             (int)(amp - name), name, &loffset, originator_login, amp + 1);
5057           buffer[loffset] = toupper(buffer[loffset]);
5058           name = buffer;
5059           }
5060
5061         /* If a pattern for matching the gecos field was supplied, apply
5062         it and then expand the name string. */
5063
5064         GET_OPTION("gecos_pattern");
5065         GET_OPTION("gecos_name");
5066         if (gecos_pattern && gecos_name)
5067           {
5068           const pcre2_code *re;
5069           re = regex_must_compile(gecos_pattern, MCS_NOFLAGS, TRUE); /* Use malloc */
5070
5071           if (regex_match_and_setup(re, name, 0, -1))
5072             {
5073             uschar *new_name = expand_string(gecos_name);
5074             expand_nmax = -1;
5075             if (new_name)
5076               {
5077               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
5078                 "gecos field \"%s\"\n", new_name, name);
5079               name = new_name;
5080               }
5081             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
5082               "\"%s\": %s\n", gecos_name, expand_string_message);
5083             }
5084           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
5085             "gecos field \"%s\"\n", gecos_pattern, name);
5086           store_free((void *)re);
5087           }
5088         originator_name = string_copy(name);
5089         }
5090
5091       /* A trusted caller has used -f but not -F */
5092
5093       else originator_name = US"";
5094       }
5095
5096     /* Break the retry loop */
5097
5098     break;
5099     }
5100
5101   if (++i > finduser_retries) break;
5102   sleep(1);
5103   }
5104
5105 /* If we cannot get a user login, log the incident and give up, unless the
5106 configuration specifies something to use. When running in the test harness,
5107 any setting of unknown_login overrides the actual name. */
5108
5109 if (!originator_login || f.running_in_test_harness)
5110   {
5111   GET_OPTION("unknown_login");
5112   if (unknown_login)
5113     {
5114     originator_login = expand_string(unknown_login);
5115     if (!originator_name && unknown_username)
5116       originator_name = expand_string(unknown_username);
5117     if (!originator_name) originator_name = US"";
5118     }
5119   if (!originator_login)
5120     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
5121       (int)real_uid);
5122   }
5123
5124 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
5125 RFC822 address.*/
5126
5127 originator_name = US parse_fix_phrase(originator_name, Ustrlen(originator_name));
5128
5129 /* If a message is created by this call of Exim, the uid/gid of its originator
5130 are those of the caller. These values are overridden if an existing message is
5131 read in from the spool. */
5132
5133 originator_uid = real_uid;
5134 originator_gid = real_gid;
5135
5136 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
5137   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
5138
5139 /* Run in daemon and/or queue-running mode. The function daemon_go() never
5140 returns. We leave this till here so that the originator_ fields are available
5141 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
5142 mode. */
5143
5144 if (f.daemon_listen || f.inetd_wait_mode || is_multiple_qrun())
5145   {
5146   if (mua_wrapper)
5147     {
5148     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
5149     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
5150       "mua_wrapper is set");
5151     }
5152
5153 # ifndef DISABLE_TLS
5154   /* This also checks that the library linkage is working and we can call
5155   routines in it, so call even if tls_require_ciphers is unset */
5156     {
5157 # ifdef MEASURE_TIMING
5158     struct timeval t0;
5159     (void)gettimeofday(&t0, NULL);
5160 # endif
5161     if (!tls_dropprivs_validate_require_cipher(FALSE))
5162       exit(1);
5163 # ifdef MEASURE_TIMING
5164     report_time_since(&t0, US"validate_ciphers (delta)");
5165 # endif
5166     }
5167 #endif
5168
5169   daemon_go();
5170   }
5171
5172 /* If the sender ident has not been set (by a trusted caller) set it to
5173 the caller. This will get overwritten below for an inetd call. If a trusted
5174 caller has set it empty, unset it. */
5175
5176 if (!sender_ident) sender_ident = originator_login;
5177 else if (!*sender_ident) sender_ident = NULL;
5178
5179 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
5180 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
5181 originator_* variables set. */
5182
5183 if (test_rewrite_arg >= 0)
5184   {
5185   f.really_exim = FALSE;
5186   if (test_rewrite_arg >= argc)
5187     {
5188     printf("-brw needs an address argument\n");
5189     exim_exit(EXIT_FAILURE);
5190     }
5191   rewrite_test(exim_str_fail_toolong(argv[test_rewrite_arg], EXIM_EMAILADDR_MAX, "-brw"));
5192   exim_exit(EXIT_SUCCESS);
5193   }
5194
5195 /* A locally-supplied message is considered to be coming from a local user
5196 unless a trusted caller supplies a sender address with -f, or is passing in the
5197 message via SMTP (inetd invocation or otherwise). */
5198
5199 if (  !sender_address && !smtp_input
5200    || !f.trusted_caller && filter_test == FTEST_NONE)
5201   {
5202   f.sender_local = TRUE;
5203
5204   /* A trusted caller can supply authenticated_sender and authenticated_id
5205   via -oMas and -oMai and if so, they will already be set. Otherwise, force
5206   defaults except when host checking. */
5207
5208   if (!authenticated_sender && !host_checking)
5209     authenticated_sender = string_sprintf("%s@%s", originator_login,
5210       qualify_domain_sender);
5211   if (!authenticated_id && !host_checking)
5212     authenticated_id = originator_login;
5213   }
5214
5215 /* Trusted callers are always permitted to specify the sender address.
5216 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
5217 is specified is the empty address. However, if a trusted caller does not
5218 specify a sender address for SMTP input, we leave sender_address unset. This
5219 causes the MAIL commands to be honoured. */
5220
5221 if (  !smtp_input && !sender_address
5222    || !receive_check_set_sender(sender_address))
5223   {
5224   /* Either the caller is not permitted to set a general sender, or this is
5225   non-SMTP input and the trusted caller has not set a sender. If there is no
5226   sender, or if a sender other than <> is set, override with the originator's
5227   login (which will get qualified below), except when checking things. */
5228
5229   if (  !sender_address                  /* No sender_address set */
5230      ||                                  /*         OR            */
5231        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
5232        !checking))                       /* Not running tests, including filter tests */
5233     {
5234     sender_address = originator_login;
5235     f.sender_address_forced = FALSE;
5236     sender_address_domain = 0;
5237     }
5238   }
5239
5240 /* Remember whether an untrusted caller set the sender address */
5241
5242 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
5243
5244 /* Ensure that the sender address is fully qualified unless it is the empty
5245 address, which indicates an error message, or doesn't exist (root caller, smtp
5246 interface, no -f argument). */
5247
5248 if (sender_address && *sender_address && sender_address_domain == 0)
5249   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
5250     qualify_domain_sender);
5251
5252 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
5253
5254 /* Handle a request to verify a list of addresses, or test them for delivery.
5255 This must follow the setting of the sender address, since routers can be
5256 predicated upon the sender. If no arguments are given, read addresses from
5257 stdin. Set debug_level to at least D_v to get full output for address testing.
5258 */
5259
5260 if (verify_address_mode || f.address_test_mode)
5261   {
5262   int exit_value = 0;
5263   int flags = vopt_qualify;
5264
5265   if (verify_address_mode)
5266     {
5267     if (!verify_as_sender) flags |= vopt_is_recipient;
5268     DEBUG(D_verify) debug_print_ids(US"Verifying:");
5269     }
5270
5271   else
5272     {
5273     flags |= vopt_is_recipient;
5274     debug_selector |= D_v;
5275     debug_file = stderr;
5276     debug_fd = fileno(debug_file);
5277     DEBUG(D_verify) debug_print_ids(US"Address testing:");
5278     }
5279
5280   if (recipients_arg < argc)
5281     while (recipients_arg < argc)
5282       {
5283       /* Supplied addresses are tainted since they come from a user */
5284       uschar * s = string_copy_taint(
5285         exim_str_fail_toolong(argv[recipients_arg++], EXIM_DISPLAYMAIL_MAX, "address verification"),
5286         GET_TAINTED);
5287       while (*s)
5288         {
5289         BOOL finished = FALSE;
5290         uschar *ss = parse_find_address_end(s, FALSE);
5291         if (*ss == ',') *ss = 0; else finished = TRUE;
5292         test_address(s, flags, &exit_value);
5293         s = ss;
5294         if (!finished)
5295           while (*++s == ',' || isspace(*s)) ;
5296         }
5297       }
5298
5299   else for (;;)
5300     {
5301     uschar * s = get_stdinput(NULL, NULL);
5302     if (!s) break;
5303     test_address(string_copy_taint(
5304         exim_str_fail_toolong(s, EXIM_DISPLAYMAIL_MAX, "address verification (stdin)"),
5305         GET_TAINTED),
5306       flags, &exit_value);
5307     }
5308
5309   route_tidyup();
5310   exim_exit(exit_value);
5311   }
5312
5313 /* Handle expansion checking. Either expand items on the command line, or read
5314 from stdin if there aren't any. If -Mset was specified, load the message so
5315 that its variables can be used, but restrict this facility to admin users.
5316 Otherwise, if -bem was used, read a message from stdin. */
5317
5318 if (expansion_test)
5319   {
5320   dns_init(FALSE, FALSE, FALSE);
5321   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
5322     {
5323     uschar * spoolname;
5324     if (!f.admin_user)
5325       exim_fail("exim: permission denied\n");
5326     message_id = US exim_str_fail_toolong(argv[msg_action_arg], MESSAGE_ID_LENGTH, "message-id");
5327     /* Checking the length of the ID is sufficient to validate it.
5328     Get an untainted version so file opens can be done. */
5329     message_id = string_copy_taint(message_id, GET_UNTAINTED);
5330
5331     spoolname = string_sprintf("%s-H", message_id);
5332     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
5333       printf ("Failed to load message datafile %s\n", message_id);
5334     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
5335       printf ("Failed to load message %s\n", message_id);
5336     }
5337
5338   /* Read a test message from a file. We fudge it up to be on stdin, saving
5339   stdin itself for later reading of expansion strings. */
5340
5341   else if (expansion_test_message)
5342     {
5343     uschar * rme = expand_string(recipients_max);
5344     int save_stdin = dup(0);
5345     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
5346     if (fd < 0)
5347       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
5348         strerror(errno));
5349     (void) dup2(fd, 0);
5350     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5351     message_ended = END_NOTENDED;
5352     recipients_max_expanded = atoi(CCS rme);
5353     read_message_body(receive_msg(extract_recipients));
5354     message_linecount += body_linecount;
5355     (void)dup2(save_stdin, 0);
5356     (void)close(save_stdin);
5357     clearerr(stdin);               /* Required by Darwin */
5358     }
5359
5360   /* Only admin users may see config-file macros this way */
5361
5362   if (!f.admin_user) macros_user = macros = mlast = NULL;
5363
5364   /* Allow $recipients for this testing */
5365
5366   f.enable_dollar_recipients = TRUE;
5367
5368   /* Expand command line items */
5369
5370   if (recipients_arg < argc)
5371     while (recipients_arg < argc)
5372       expansion_test_line(exim_str_fail_toolong(argv[recipients_arg++], EXIM_EMAILADDR_MAX, "recipient"));
5373
5374   /* Read stdin */
5375
5376   else
5377     {
5378     char *(*fn_readline)(const char *) = NULL;
5379     void (*fn_addhist)(const char *) = NULL;
5380     uschar * s;
5381
5382 #ifdef USE_READLINE
5383     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5384 #endif
5385
5386     while (s = get_stdinput(fn_readline, fn_addhist))
5387       expansion_test_line(s);
5388
5389 #ifdef USE_READLINE
5390     if (dlhandle) dlclose(dlhandle);
5391 #endif
5392     }
5393
5394   /* The data file will be open after -Mset */
5395
5396   if (deliver_datafile >= 0)
5397     {
5398     (void)close(deliver_datafile);
5399     deliver_datafile = -1;
5400     }
5401
5402   exim_exit(EXIT_SUCCESS);
5403   }
5404
5405
5406 /* The active host name is normally the primary host name, but it can be varied
5407 for hosts that want to play several parts at once. We need to ensure that it is
5408 set for host checking, and for receiving messages. */
5409
5410 smtp_active_hostname = primary_hostname;
5411 GET_OPTION("smtp_active_hostname");
5412 if (raw_active_hostname)
5413   {
5414   uschar * nah = expand_string(raw_active_hostname);
5415   if (!nah)
5416     {
5417     if (!f.expand_string_forcedfail)
5418       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5419         "(smtp_active_hostname): %s", raw_active_hostname,
5420         expand_string_message);
5421     }
5422   else if (nah[0]) smtp_active_hostname = nah;
5423   }
5424
5425 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5426 given IP address so that the blocking and relay configuration can be tested.
5427 Unless a sender_ident was set by -oMt, we discard it (the default is the
5428 caller's login name). An RFC 1413 call is made only if we are running in the
5429 test harness and an incoming interface and both ports are specified, because
5430 there is no TCP/IP call to find the ident for. */
5431
5432 if (host_checking)
5433   {
5434   int x[4];
5435   int size;
5436
5437   if (!sender_ident_set)
5438     {
5439     sender_ident = NULL;
5440     if (f.running_in_test_harness && sender_host_port
5441        && interface_address && interface_port)
5442       verify_get_ident(1223);           /* note hardwired port number */
5443     }
5444
5445   /* In case the given address is a non-canonical IPv6 address, canonicalize
5446   it. The code works for both IPv4 and IPv6, as it happens. */
5447
5448   size = host_aton(sender_host_address, x);
5449   sender_host_address = store_get(48, GET_UNTAINTED);  /* large enough for full IPv6 */
5450   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5451
5452   /* Now set up for testing */
5453
5454   host_build_sender_fullhost();
5455   smtp_input = TRUE;
5456   smtp_in = stdin;
5457   smtp_out = stdout;
5458   f.sender_local = FALSE;
5459   f.sender_host_notsocket = TRUE;
5460   debug_file = stderr;
5461   debug_fd = fileno(debug_file);
5462   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5463     "**** but without any ident (RFC 1413) callback.\n"
5464     "**** This is not for real!\n\n",
5465       sender_host_address);
5466
5467   connection_id = getpid();
5468   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5469   if (verify_check_host(&hosts_connection_nolog) == OK)
5470     {
5471     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5472     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5473     }
5474   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5475
5476   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5477   because a log line has already been written for all its failure exists
5478   (usually "connection refused: <reason>") and writing another one is
5479   unnecessary clutter. */
5480
5481   if (smtp_start_session())
5482     {
5483     rmark reset_point;
5484     for (; (reset_point = store_mark()); store_reset(reset_point))
5485       {
5486       if (smtp_setup_msg() <= 0) break;
5487       if (!receive_msg(FALSE)) break;
5488
5489       return_path = sender_address = NULL;
5490       dnslist_domain = dnslist_matched = NULL;
5491 #ifndef DISABLE_DKIM
5492       dkim_cur_signer = NULL;
5493 #endif
5494       acl_var_m = NULL;
5495       deliver_localpart_orig = NULL;
5496       deliver_domain_orig = NULL;
5497       callout_address = sending_ip_address = NULL;
5498       deliver_localpart_data = deliver_domain_data =
5499       recipient_data = sender_data = NULL;
5500       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5501       }
5502     smtp_log_no_mail();
5503     }
5504   exim_exit(EXIT_SUCCESS);
5505   }
5506
5507
5508 /* Arrange for message reception if recipients or SMTP were specified;
5509 otherwise complain unless a version print (-bV) happened or this is a filter
5510 verification test or info dump.
5511 In the former case, show the configuration file name. */
5512
5513 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5514   {
5515   if (version_printed)
5516     {
5517     if (Ustrchr(config_main_filelist, ':'))
5518       printf("Configuration file search path is %s\n", config_main_filelist);
5519     printf("Configuration file is %s\n", config_main_filename);
5520     return EXIT_SUCCESS;
5521     }
5522
5523   if (info_flag != CMDINFO_NONE)
5524     {
5525     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5526     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5527     }
5528
5529   if (filter_test == FTEST_NONE)
5530     exim_usage(called_as);
5531   }
5532
5533
5534 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5535 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5536 that we are not called from inetd, because that is rejected above. The
5537 following configuration settings are forced here:
5538
5539   (1) Synchronous delivery (-odi)
5540   (2) Errors to stderr (-oep == -oeq)
5541   (3) No parallel remote delivery
5542   (4) Unprivileged delivery
5543
5544 We don't force overall queueing options because there are several of them;
5545 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5546 to override any SMTP queueing. */
5547
5548 if (mua_wrapper)
5549   {
5550   f.synchronous_delivery = TRUE;
5551   arg_error_handling = ERRORS_STDERR;
5552   remote_max_parallel = 1;
5553   deliver_drop_privilege = TRUE;
5554   f.queue_smtp = FALSE;
5555   queue_smtp_domains = NULL;
5556 #ifdef SUPPORT_I18N
5557   message_utf8_downconvert = -1;        /* convert-if-needed */
5558 #endif
5559   }
5560
5561
5562 /* Prepare to accept one or more new messages on the standard input. When a
5563 message has been read, its id is returned in message_id[]. If doing immediate
5564 delivery, we fork a delivery process for each received message, except for the
5565 last one, where we can save a process switch.
5566
5567 It is only in non-smtp mode that error_handling is allowed to be changed from
5568 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5569 sendmail error modes other than -oem ever actually used? Later: yes.) */
5570
5571 if (!smtp_input) error_handling = arg_error_handling;
5572
5573 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5574 logging being sent down the socket and make an identd call to get the
5575 sender_ident. */
5576
5577 else if (f.is_inetd)
5578   {
5579   (void)fclose(stderr);
5580   exim_nullstd();                       /* Re-open to /dev/null */
5581   verify_get_ident(IDENT_PORT);
5582   host_build_sender_fullhost();
5583   set_process_info("handling incoming connection from %s via inetd",
5584     sender_fullhost);
5585   }
5586
5587 /* If the sender host address has been set, build sender_fullhost if it hasn't
5588 already been done (which it will have been for inetd). This caters for the
5589 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5590 so that the test for IP options is skipped for -bs input. */
5591
5592 if (sender_host_address && !sender_fullhost)
5593   {
5594   host_build_sender_fullhost();
5595   set_process_info("handling incoming connection from %s via -oMa",
5596     sender_fullhost);
5597   f.sender_host_notsocket = TRUE;
5598   }
5599
5600 /* Otherwise, set the sender host as unknown except for inetd calls. This
5601 prevents host checking in the case of -bs not from inetd and also for -bS. */
5602
5603 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5604
5605 /* If stdout does not exist, then dup stdin to stdout. This can happen
5606 if exim is started from inetd. In this case fd 0 will be set to the socket,
5607 but fd 1 will not be set. This also happens for passed SMTP channels. */
5608
5609 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5610
5611 /* Set up the incoming protocol name and the state of the program. Root is
5612 allowed to force received protocol via the -oMr option above. If we have come
5613 via inetd, the process info has already been set up. We don't set
5614 received_protocol here for smtp input, as it varies according to
5615 batch/HELO/EHLO/AUTH/TLS. */
5616
5617 if (smtp_input)
5618   {
5619   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5620     smtp_batched_input? "batched " : "",
5621     sender_address ? sender_address : originator_login);
5622   }
5623 else
5624   {
5625   int old_pool = store_pool;
5626   store_pool = POOL_PERM;
5627   if (!received_protocol)
5628     received_protocol = string_sprintf("local%s", called_as);
5629   store_pool = old_pool;
5630   set_process_info("accepting a local non-SMTP message from <%s>",
5631     sender_address);
5632   }
5633
5634 /* Initialize the session_local_queue-only flag (this will be ignored if
5635 mua_wrapper is set) */
5636
5637 queue_check_only();
5638 session_local_queue_only = queue_only;
5639
5640 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5641 the spool if so configured. On failure, we must not attempt to send an error
5642 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5643 error code is given.) */
5644
5645 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5646   exim_fail("exim: insufficient disk space\n");
5647
5648 /* If this is smtp input of any kind, real or batched, handle the start of the
5649 SMTP session.
5650
5651 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5652 because a log line has already been written for all its failure exists
5653 (usually "connection refused: <reason>") and writing another one is
5654 unnecessary clutter. */
5655
5656 connection_id = getpid();
5657 if (smtp_input)
5658   {
5659   smtp_in = stdin;
5660   smtp_out = stdout;
5661   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5662   if (verify_check_host(&hosts_connection_nolog) == OK)
5663     {
5664     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5665     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_no_mail);
5666     }
5667   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5668   if (!smtp_start_session())
5669     {
5670     mac_smtp_fflush();
5671     exim_exit(EXIT_SUCCESS);
5672     }
5673   }
5674
5675 /* Otherwise, set up the input size limit here and set no stdin stdio buffer
5676 (we handle buferring so as to have visibility of fill level). */
5677
5678 else
5679   {
5680   GET_OPTION("message_size_limit");
5681   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5682   if (expand_string_message)
5683     if (thismessage_size_limit == -1)
5684       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5685         "message_size_limit: %s", expand_string_message);
5686     else
5687       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5688         "message_size_limit: %s", expand_string_message);
5689
5690   setvbuf(stdin, NULL, _IONBF, 0);
5691   }
5692
5693 /* Loop for several messages when reading SMTP input. If we fork any child
5694 processes, we don't want to wait for them unless synchronous delivery is
5695 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5696 same as SIG_DFL, despite the fact that documentation often lists the default as
5697 "ignore". This is a confusing area. This is what I know:
5698
5699 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5700 processes that complete simply to go away without ever becoming defunct. You
5701 can't then wait for them - but we don't want to wait for them in the
5702 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5703 happen for all OS (e.g. *BSD is different).
5704
5705 But that's not the end of the story. Some (many? all?) systems have the
5706 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5707 has by default, so it seems that the difference is merely one of default
5708 (compare restarting vs non-restarting signals).
5709
5710 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5711 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5712 of the loop below. Paranoia rules.
5713
5714 February 2003: That's *still* not the end of the story. There are now versions
5715 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5716 process then calls waitpid(), a grumble is written to the system log, because
5717 this is logically inconsistent. In other words, it doesn't like the paranoia.
5718 As a consequence of this, the waitpid() below is now excluded if we are sure
5719 that SIG_IGN works. */
5720
5721 if (!f.synchronous_delivery)
5722   {
5723 #ifdef SA_NOCLDWAIT
5724   struct sigaction act;
5725   act.sa_handler = SIG_IGN;
5726   sigemptyset(&(act.sa_mask));
5727   act.sa_flags = SA_NOCLDWAIT;
5728   sigaction(SIGCHLD, &act, NULL);
5729 #else
5730   signal(SIGCHLD, SIG_IGN);
5731 #endif
5732   }
5733
5734 /* Save the current store pool point, for resetting at the start of
5735 each message, and save the real sender address, if any. */
5736
5737 real_sender_address = sender_address;
5738
5739 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5740 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5741 collapsed). */
5742
5743 for (BOOL more = TRUE; more; )
5744   {
5745   rmark reset_point = store_mark();
5746   message_id[0] = 0;
5747
5748   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5749   input and build the recipients list, before calling receive_msg() to read the
5750   message proper. Whatever sender address is given in the SMTP transaction is
5751   often ignored for local senders - we use the actual sender, which is normally
5752   either the underlying user running this process or a -f argument provided by
5753   a trusted caller. It is saved in real_sender_address. The test for whether to
5754   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5755
5756   if (smtp_input)
5757     {
5758     int rc;
5759     if ((rc = smtp_setup_msg()) > 0)
5760       {
5761       if (   real_sender_address
5762           && !receive_check_set_sender(sender_address))
5763         {
5764         sender_address = raw_sender = real_sender_address;
5765         sender_address_unrewritten = NULL;
5766         }
5767
5768       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5769       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5770       the very end. The result of the ACL is ignored (as for other non-SMTP
5771       messages). It is run for its potential side effects. */
5772
5773       if (smtp_batched_input)
5774         {
5775         GET_OPTION("acl_not_smtp_start");
5776         if (acl_not_smtp_start)
5777           {
5778           uschar * user_msg, * log_msg;
5779           f.enable_dollar_recipients = TRUE;
5780           (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5781             &user_msg, &log_msg);
5782           f.enable_dollar_recipients = FALSE;
5783           }
5784         }
5785
5786       /* Now get the data for the message */
5787
5788       more = receive_msg(extract_recipients);
5789       if (!message_id[0])
5790         {
5791         cancel_cutthrough_connection(TRUE, US"receive dropped");
5792         if (more) goto MORELOOP;
5793         smtp_log_no_mail();               /* Log no mail if configured */
5794         exim_exit(EXIT_FAILURE);
5795         }
5796       }
5797     else
5798       {
5799       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5800       smtp_log_no_mail();               /* Log no mail if configured */
5801       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
5802       }
5803     }
5804
5805   /* In the non-SMTP case, we have all the information from the command
5806   line, but must process it in case it is in the more general RFC822
5807   format, and in any case, to detect syntax errors. Also, it appears that
5808   the use of comma-separated lists as single arguments is common, so we
5809   had better support them. */
5810
5811   else
5812     {
5813     uschar * rme = expand_string(recipients_max);
5814     int rcount = 0, count = argc - recipients_arg;
5815     const uschar ** list = argv + recipients_arg;
5816
5817     recipients_max_expanded = atoi(CCS rme);
5818
5819     /* These options cannot be changed dynamically for non-SMTP messages */
5820
5821     f.active_local_sender_retain = local_sender_retain;
5822     f.active_local_from_check = local_from_check;
5823
5824     /* Save before any rewriting */
5825
5826     raw_sender = string_copy(sender_address);
5827
5828     /* Loop for each argument (supplied by user hence tainted) */
5829
5830     for (int i = 0; i < count; i++)
5831       {
5832       int start, end, domain;
5833       uschar * errmess;
5834       /* There can be multiple addresses, so EXIM_DISPLAYMAIL_MAX (tuned for 1) is too short.
5835       We'll still want to cap it to something, just in case. */
5836       uschar * s = string_copy_taint(
5837         exim_str_fail_toolong(list[i], BIG_BUFFER_SIZE, "address argument"),
5838         GET_TAINTED);
5839
5840       /* Loop for each comma-separated address */
5841
5842       while (*s)
5843         {
5844         BOOL finished = FALSE;
5845         uschar * recipient;
5846         uschar * ss = parse_find_address_end(s, FALSE);
5847
5848         if (*ss == ',') *ss = 0; else finished = TRUE;
5849
5850         /* Check max recipients - if -t was used, these aren't recipients */
5851
5852         if (  recipients_max_expanded > 0 && ++rcount > recipients_max_expanded
5853            && !extract_recipients)
5854           {
5855           DEBUG(D_all) debug_printf("excess reipients (max %d)\n",
5856             recipients_max_expanded);
5857
5858           if (error_handling == ERRORS_STDERR)
5859             {
5860             fprintf(stderr, "exim: too many recipients\n");
5861             exim_exit(EXIT_FAILURE);
5862             }
5863           else
5864             return
5865               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5866                 errors_sender_rc : EXIT_FAILURE;
5867           }
5868
5869 #ifdef SUPPORT_I18N
5870         {
5871         BOOL b = allow_utf8_domains;
5872         allow_utf8_domains = TRUE;
5873 #endif
5874         recipient =
5875           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5876
5877 #ifdef SUPPORT_I18N
5878         if (recipient)
5879           if (string_is_utf8(recipient)) message_smtputf8 = TRUE;
5880           else allow_utf8_domains = b;
5881         }
5882 #else
5883         ;
5884 #endif
5885         if (domain == 0 && !f.allow_unqualified_recipient)
5886           {
5887           recipient = NULL;
5888           errmess = US"unqualified recipient address not allowed";
5889           }
5890
5891         if (!recipient)
5892           {
5893           DEBUG(D_all) debug_printf("bad recipient address \"%s\": %s\n",
5894             string_printing(list[i]), errmess);
5895
5896           if (error_handling == ERRORS_STDERR)
5897             {
5898             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5899               string_printing(list[i]), errmess);
5900             exim_exit(EXIT_FAILURE);
5901             }
5902           else
5903             {
5904             error_block eblock;
5905             eblock.next = NULL;
5906             eblock.text1 = string_printing(list[i]);
5907             eblock.text2 = errmess;
5908             return
5909               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5910                 errors_sender_rc : EXIT_FAILURE;
5911             }
5912           }
5913
5914         receive_add_recipient(string_copy_taint(recipient, GET_TAINTED), -1);
5915         s = ss;
5916         if (!finished)
5917           while (*++s && (*s == ',' || isspace(*s)));
5918         }
5919       }
5920
5921     /* Show the recipients when debugging */
5922
5923     DEBUG(D_receive)
5924       {
5925       if (sender_address) debug_printf("Sender: %s\n", sender_address);
5926       if (recipients_list)
5927         {
5928         debug_printf("Recipients:\n");
5929         for (int i = 0; i < recipients_count; i++)
5930           debug_printf("  %s\n", recipients_list[i].address);
5931         }
5932       }
5933
5934     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5935     ignored; rejecting here would just add complication, and it can just as
5936     well be done later. Allow $recipients to be visible in the ACL. */
5937
5938     GET_OPTION("acl_not_smtp_start");
5939     if (acl_not_smtp_start)
5940       {
5941       uschar * user_msg, * log_msg;
5942       f.enable_dollar_recipients = TRUE;
5943       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5944         &user_msg, &log_msg);
5945       f.enable_dollar_recipients = FALSE;
5946       }
5947
5948     /* Pause for a while waiting for input.  If none received in that time,
5949     close the logfile, if we had one open; then if we wait for a long-running
5950     datasource (months, in one use-case) log rotation will not leave us holding
5951     the file copy. */
5952
5953     if (!receive_timeout)
5954       if (poll_one_fd(0, POLLIN, 30*60*1000) == 0)      /* 30 minutes */
5955         mainlog_close();
5956
5957     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5958     will just read the headers for the message, and not write anything onto the
5959     spool. */
5960
5961     message_ended = END_NOTENDED;
5962     more = receive_msg(extract_recipients);
5963
5964     /* more is always FALSE here (not SMTP message) when reading a message
5965     for real; when reading the headers of a message for filter testing,
5966     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5967
5968     if (!message_id[0]) exim_exit(EXIT_FAILURE);
5969     }  /* Non-SMTP message reception */
5970
5971   /* If this is a filter testing run, there are headers in store, but
5972   no message on the spool. Run the filtering code in testing mode, setting
5973   the domain to the qualify domain and the local part to the current user,
5974   unless they have been set by options. The prefix and suffix are left unset
5975   unless specified. The the return path is set to to the sender unless it has
5976   already been set from a return-path header in the message. */
5977
5978   if (filter_test != FTEST_NONE)
5979     {
5980     deliver_domain = ftest_domain ? ftest_domain : qualify_domain_recipient;
5981     deliver_domain_orig = deliver_domain;
5982     deliver_localpart = ftest_localpart ? US ftest_localpart : originator_login;
5983     deliver_localpart_orig = deliver_localpart;
5984     deliver_localpart_prefix = US ftest_prefix;
5985     deliver_localpart_suffix = US ftest_suffix;
5986     deliver_home = originator_home;
5987
5988     if (!return_path)
5989       {
5990       printf("Return-path copied from sender\n");
5991       return_path = string_copy(sender_address);
5992       }
5993     else
5994       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5995     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5996
5997     receive_add_recipient(
5998       string_sprintf("%s%s%s@%s",
5999         ftest_prefix ? ftest_prefix : US"",
6000         deliver_localpart,
6001         ftest_suffix ? ftest_suffix : US"",
6002         deliver_domain), -1);
6003
6004     printf("Recipient   = %s\n", recipients_list[0].address);
6005     if (ftest_prefix) printf("Prefix    = %s\n", ftest_prefix);
6006     if (ftest_suffix) printf("Suffix    = %s\n", ftest_suffix);
6007
6008     if (chdir("/"))   /* Get away from wherever the user is running this from */
6009       {
6010       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
6011       exim_exit(EXIT_FAILURE);
6012       }
6013
6014     /* Now we run either a system filter test, or a user filter test, or both.
6015     In the latter case, headers added by the system filter will persist and be
6016     available to the user filter. We need to copy the filter variables
6017     explicitly. */
6018
6019     if (filter_test & FTEST_SYSTEM)
6020       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
6021         exim_exit(EXIT_FAILURE);
6022
6023     memcpy(filter_sn, filter_n, sizeof(filter_sn));
6024
6025     if (filter_test & FTEST_USER)
6026       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
6027         exim_exit(EXIT_FAILURE);
6028
6029     exim_exit(EXIT_SUCCESS);
6030     }
6031
6032   /* Else act on the result of message reception. We should not get here unless
6033   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
6034   will be TRUE. If it is not, check on the number of messages received in this
6035   connection. */
6036
6037   if (  !session_local_queue_only
6038      && smtp_accept_queue_per_connection > 0
6039      && receive_messagecount > smtp_accept_queue_per_connection)
6040     {
6041     session_local_queue_only = TRUE;
6042     queue_only_reason = 2;
6043     }
6044
6045   /* Initialize local_queue_only from session_local_queue_only. If it is false,
6046   and queue_only_load is set, check that the load average is below it. If it is
6047   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
6048   default), we put the whole session into queue_only mode. It then remains this
6049   way for any subsequent messages on the same SMTP connection. This is a
6050   deliberate choice; even though the load average may fall, it doesn't seem
6051   right to deliver later messages on the same call when not delivering earlier
6052   ones. However, there are odd cases where this is not wanted, so this can be
6053   changed by setting queue_only_load_latch false. */
6054
6055   if (!(local_queue_only = session_local_queue_only) && queue_only_load >= 0)
6056     if ((local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load))
6057       {
6058       queue_only_reason = 3;
6059       if (queue_only_load_latch) session_local_queue_only = TRUE;
6060       }
6061
6062   /* If running as an MUA wrapper, all queueing options and freezing options
6063   are ignored. */
6064
6065   if (mua_wrapper)
6066     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
6067
6068   /* Log the queueing here, when it will get a message id attached, but
6069   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
6070   connections). */
6071
6072   if (local_queue_only)
6073     {
6074     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6075     switch(queue_only_reason)
6076       {
6077       case 2:
6078         log_write(L_delay_delivery,
6079                 LOG_MAIN, "no immediate delivery: more than %d messages "
6080           "received in one connection", smtp_accept_queue_per_connection);
6081         break;
6082
6083       case 3:
6084         log_write(L_delay_delivery,
6085                 LOG_MAIN, "no immediate delivery: load average %.2f",
6086                 (double)load_average/1000.0);
6087       break;
6088       }
6089     }
6090
6091   else if (f.queue_only_policy || f.deliver_freeze)
6092     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6093
6094   /* Else do the delivery unless the ACL or local_scan() called for queue only
6095   or froze the message. Always deliver in a separate process. A fork failure is
6096   not a disaster, as the delivery will eventually happen on a subsequent queue
6097   run. The search cache must be tidied before the fork, as the parent will
6098   do it before exiting. The child will trigger a lookup failure and
6099   thereby defer the delivery if it tries to use (for example) a cached ldap
6100   connection that the parent has called unbind on. */
6101
6102   else
6103     {
6104     pid_t pid;
6105     search_tidyup();
6106
6107     if ((pid = exim_fork(US"local-accept-delivery")) == 0)
6108       {
6109       int rc;
6110       close_unwanted();      /* Close unwanted file descriptors and TLS */
6111       exim_nullstd();        /* Ensure std{in,out,err} exist */
6112
6113       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
6114       mode, deliver_drop_privilege is forced TRUE). */
6115
6116       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
6117         {
6118         delivery_re_exec(CEE_EXEC_EXIT);
6119         /* Control does not return here. */
6120         }
6121
6122       /* No need to re-exec */
6123
6124       rc = deliver_message(message_id, FALSE, FALSE);
6125       search_tidyup();
6126       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
6127         ? EXIT_SUCCESS : EXIT_FAILURE);
6128       }
6129
6130     if (pid < 0)
6131       {
6132       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
6133       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
6134         "process: %s", strerror(errno));
6135       }
6136     else
6137       {
6138       release_cutthrough_connection(US"msg passed for delivery");
6139
6140       /* In the parent, wait if synchronous delivery is required. This will
6141       always be the case in MUA wrapper mode. */
6142
6143       if (f.synchronous_delivery)
6144         {
6145         int status;
6146         while (wait(&status) != pid);
6147         if ((status & 0x00ff) != 0)
6148           log_write(0, LOG_MAIN|LOG_PANIC,
6149             "process %d crashed with signal %d while delivering %s",
6150             (int)pid, status & 0x00ff, message_id);
6151         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
6152         }
6153       }
6154     }
6155
6156   /* The loop will repeat if more is TRUE. If we do not know know that the OS
6157   automatically reaps children (see comments above the loop), clear away any
6158   finished subprocesses here, in case there are lots of messages coming in
6159   from the same source. */
6160
6161 #ifndef SIG_IGN_WORKS
6162   while (waitpid(-1, NULL, WNOHANG) > 0);
6163 #endif
6164
6165 MORELOOP:
6166   return_path = sender_address = NULL;
6167   authenticated_sender = NULL;
6168   deliver_localpart_orig = NULL;
6169   deliver_domain_orig = NULL;
6170   deliver_host = deliver_host_address = NULL;
6171   dnslist_domain = dnslist_matched = NULL;
6172 #ifdef WITH_CONTENT_SCAN
6173   malware_name = NULL;
6174   regex_vars_clear();
6175 #endif
6176   callout_address = NULL;
6177   sending_ip_address = NULL;
6178   deliver_localpart_data = deliver_domain_data =
6179   recipient_data = sender_data = NULL;
6180   acl_var_m = NULL;
6181   lookup_value = NULL;                            /* Can be set by ACL */
6182
6183   store_reset(reset_point);
6184   }
6185
6186 exim_exit(EXIT_SUCCESS);   /* Never returns */
6187 return 0;                  /* To stop compiler warning */
6188 }
6189
6190
6191 /* End of exim.c */