Convert more cases of list-walking to use self-assigned memory for the list-item
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* Copyright (c) The Exim Maintainers 2020 */
7 /* See the file NOTICE for conditions of use and distribution. */
8
9
10 /* The main function: entry point, initialization, and high-level control.
11 Also a few functions that don't naturally fit elsewhere. */
12
13
14 #include "exim.h"
15
16 #if defined(__GLIBC__) && !defined(__UCLIBC__)
17 # include <gnu/libc-version.h>
18 #endif
19
20 #ifdef USE_GNUTLS
21 # include <gnutls/gnutls.h>
22 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
23 #  define DISABLE_OCSP
24 # endif
25 #endif
26
27 #ifndef _TIME_H
28 # include <time.h>
29 #endif
30
31 extern void init_lookup_list(void);
32
33
34
35 /*************************************************
36 *      Function interface to store functions     *
37 *************************************************/
38
39 /* We need some real functions to pass to the PCRE regular expression library
40 for store allocation via Exim's store manager. The normal calls are actually
41 macros that pass over location information to make tracing easier. These
42 functions just interface to the standard macro calls. A good compiler will
43 optimize out the tail recursion and so not make them too expensive. There
44 are two sets of functions; one for use when we want to retain the compiled
45 regular expression for a long time; the other for short-term use. */
46
47 static void *
48 function_store_get(size_t size)
49 {
50 /* For now, regard all RE results as potentially tainted.  We might need
51 more intelligence on this point. */
52 return store_get((int)size, TRUE);
53 }
54
55 static void
56 function_dummy_free(void * block) {}
57
58 static void *
59 function_store_malloc(size_t size)
60 {
61 return store_malloc((int)size);
62 }
63
64 static void
65 function_store_free(void * block)
66 {
67 store_free(block);
68 }
69
70
71
72
73 /*************************************************
74 *         Enums for cmdline interface            *
75 *************************************************/
76
77 enum commandline_info { CMDINFO_NONE=0,
78   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
79
80
81
82
83 /*************************************************
84 *  Compile regular expression and panic on fail  *
85 *************************************************/
86
87 /* This function is called when failure to compile a regular expression leads
88 to a panic exit. In other cases, pcre_compile() is called directly. In many
89 cases where this function is used, the results of the compilation are to be
90 placed in long-lived store, so we temporarily reset the store management
91 functions that PCRE uses if the use_malloc flag is set.
92
93 Argument:
94   pattern     the pattern to compile
95   caseless    TRUE if caseless matching is required
96   use_malloc  TRUE if compile into malloc store
97
98 Returns:      pointer to the compiled pattern
99 */
100
101 const pcre *
102 regex_must_compile(const uschar *pattern, BOOL caseless, BOOL use_malloc)
103 {
104 int offset;
105 int options = PCRE_COPT;
106 const pcre *yield;
107 const uschar *error;
108 if (use_malloc)
109   {
110   pcre_malloc = function_store_malloc;
111   pcre_free = function_store_free;
112   }
113 if (caseless) options |= PCRE_CASELESS;
114 yield = pcre_compile(CCS pattern, options, CCSS &error, &offset, NULL);
115 pcre_malloc = function_store_get;
116 pcre_free = function_dummy_free;
117 if (yield == NULL)
118   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
119     "%s at offset %d while compiling %s", error, offset, pattern);
120 return yield;
121 }
122
123
124
125
126 /*************************************************
127 *   Execute regular expression and set strings   *
128 *************************************************/
129
130 /* This function runs a regular expression match, and sets up the pointers to
131 the matched substrings.
132
133 Arguments:
134   re          the compiled expression
135   subject     the subject string
136   options     additional PCRE options
137   setup       if < 0 do full setup
138               if >= 0 setup from setup+1 onwards,
139                 excluding the full matched string
140
141 Returns:      TRUE or FALSE
142 */
143
144 BOOL
145 regex_match_and_setup(const pcre *re, const uschar *subject, int options, int setup)
146 {
147 int ovector[3*(EXPAND_MAXN+1)];
148 uschar * s = string_copy(subject);      /* de-constifying */
149 int n = pcre_exec(re, NULL, CS s, Ustrlen(s), 0,
150   PCRE_EOPT | options, ovector, nelem(ovector));
151 BOOL yield = n >= 0;
152 if (n == 0) n = EXPAND_MAXN + 1;
153 if (yield)
154   {
155   expand_nmax = setup < 0 ? 0 : setup + 1;
156   for (int nn = setup < 0 ? 0 : 2; nn < n*2; nn += 2)
157     {
158     expand_nstring[expand_nmax] = s + ovector[nn];
159     expand_nlength[expand_nmax++] = ovector[nn+1] - ovector[nn];
160     }
161   expand_nmax--;
162   }
163 return yield;
164 }
165
166
167
168
169 /*************************************************
170 *            Set up processing details           *
171 *************************************************/
172
173 /* Save a text string for dumping when SIGUSR1 is received.
174 Do checks for overruns.
175
176 Arguments: format and arguments, as for printf()
177 Returns:   nothing
178 */
179
180 void
181 set_process_info(const char *format, ...)
182 {
183 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
184 gstring * g;
185 int len;
186 va_list ap;
187
188 g = string_fmt_append(&gs, "%5d ", (int)getpid());
189 len = g->ptr;
190 va_start(ap, format);
191 if (!string_vformat(g, 0, format, ap))
192   {
193   gs.ptr = len;
194   g = string_cat(&gs, US"**** string overflowed buffer ****");
195   }
196 g = string_catn(g, US"\n", 1);
197 string_from_gstring(g);
198 process_info_len = g->ptr;
199 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
200 va_end(ap);
201 }
202
203 /***********************************************
204 *            Handler for SIGTERM               *
205 ***********************************************/
206
207 static void
208 term_handler(int sig)
209 {
210 exit(1);
211 }
212
213
214 /*************************************************
215 *             Handler for SIGUSR1                *
216 *************************************************/
217
218 /* SIGUSR1 causes any exim process to write to the process log details of
219 what it is currently doing. It will only be used if the OS is capable of
220 setting up a handler that causes automatic restarting of any system call
221 that is in progress at the time.
222
223 This function takes care to be signal-safe.
224
225 Argument: the signal number (SIGUSR1)
226 Returns:  nothing
227 */
228
229 static void
230 usr1_handler(int sig)
231 {
232 int fd;
233
234 os_restarting_signal(sig, usr1_handler);
235
236 if ((fd = Uopen(process_log_path, O_APPEND|O_WRONLY, LOG_MODE)) < 0)
237   {
238   /* If we are already running as the Exim user, try to create it in the
239   current process (assuming spool_directory exists). Otherwise, if we are
240   root, do the creation in an exim:exim subprocess. */
241
242   int euid = geteuid();
243   if (euid == exim_uid)
244     fd = Uopen(process_log_path, O_CREAT|O_APPEND|O_WRONLY, LOG_MODE);
245   else if (euid == root_uid)
246     fd = log_create_as_exim(process_log_path);
247   }
248
249 /* If we are neither exim nor root, or if we failed to create the log file,
250 give up. There is not much useful we can do with errors, since we don't want
251 to disrupt whatever is going on outside the signal handler. */
252
253 if (fd < 0) return;
254
255 (void)write(fd, process_info, process_info_len);
256 (void)close(fd);
257 }
258
259
260
261 /*************************************************
262 *             Timeout handler                    *
263 *************************************************/
264
265 /* This handler is enabled most of the time that Exim is running. The handler
266 doesn't actually get used unless alarm() has been called to set a timer, to
267 place a time limit on a system call of some kind. When the handler is run, it
268 re-enables itself.
269
270 There are some other SIGALRM handlers that are used in special cases when more
271 than just a flag setting is required; for example, when reading a message's
272 input. These are normally set up in the code module that uses them, and the
273 SIGALRM handler is reset to this one afterwards.
274
275 Argument: the signal value (SIGALRM)
276 Returns:  nothing
277 */
278
279 void
280 sigalrm_handler(int sig)
281 {
282 sigalrm_seen = TRUE;
283 os_non_restarting_signal(SIGALRM, sigalrm_handler);
284 }
285
286
287
288 /*************************************************
289 *      Sleep for a fractional time interval      *
290 *************************************************/
291
292 /* This function is called by millisleep() and exim_wait_tick() to wait for a
293 period of time that may include a fraction of a second. The coding is somewhat
294 tedious. We do not expect setitimer() ever to fail, but if it does, the process
295 will wait for ever, so we panic in this instance. (There was a case of this
296 when a bug in a function that calls milliwait() caused it to pass invalid data.
297 That's when I added the check. :-)
298
299 We assume it to be not worth sleeping for under 50us; this value will
300 require revisiting as hardware advances.  This avoids the issue of
301 a zero-valued timer setting meaning "never fire".
302
303 Argument:  an itimerval structure containing the interval
304 Returns:   nothing
305 */
306
307 static void
308 milliwait(struct itimerval *itval)
309 {
310 sigset_t sigmask;
311 sigset_t old_sigmask;
312 int save_errno = errno;
313
314 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
315   return;
316 (void)sigemptyset(&sigmask);                           /* Empty mask */
317 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
318 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
319 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
320   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
321     "setitimer() failed: %s", strerror(errno));
322 (void)sigfillset(&sigmask);                            /* All signals */
323 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
324 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
325 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
326 errno = save_errno;
327 sigalrm_seen = FALSE;
328 }
329
330
331
332
333 /*************************************************
334 *         Millisecond sleep function             *
335 *************************************************/
336
337 /* The basic sleep() function has a granularity of 1 second, which is too rough
338 in some cases - for example, when using an increasing delay to slow down
339 spammers.
340
341 Argument:    number of millseconds
342 Returns:     nothing
343 */
344
345 void
346 millisleep(int msec)
347 {
348 struct itimerval itval = {.it_interval = {.tv_sec = 0, .tv_usec = 0},
349                           .it_value = {.tv_sec = msec/1000,
350                                        .tv_usec = (msec % 1000) * 1000}};
351 milliwait(&itval);
352 }
353
354
355
356 /*************************************************
357 *         Compare microsecond times              *
358 *************************************************/
359
360 /*
361 Arguments:
362   tv1         the first time
363   tv2         the second time
364
365 Returns:      -1, 0, or +1
366 */
367
368 static int
369 exim_tvcmp(struct timeval *t1, struct timeval *t2)
370 {
371 if (t1->tv_sec > t2->tv_sec) return +1;
372 if (t1->tv_sec < t2->tv_sec) return -1;
373 if (t1->tv_usec > t2->tv_usec) return +1;
374 if (t1->tv_usec < t2->tv_usec) return -1;
375 return 0;
376 }
377
378
379
380
381 /*************************************************
382 *          Clock tick wait function              *
383 *************************************************/
384
385 #ifdef _POSIX_MONOTONIC_CLOCK
386 # ifdef CLOCK_BOOTTIME
387 #  define EXIM_CLOCKTYPE CLOCK_BOOTTIME
388 # else
389 #  define EXIM_CLOCKTYPE CLOCK_MONOTONIC
390 # endif
391
392 /* Amount EXIM_CLOCK is behind realtime, at startup. */
393 static struct timespec offset_ts;
394
395 static void
396 exim_clock_init(void)
397 {
398 struct timeval tv;
399 if (clock_gettime(EXIM_CLOCKTYPE, &offset_ts) != 0) return;
400 (void)gettimeofday(&tv, NULL);
401 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
402 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
403 if (offset_ts.tv_nsec >= 0) return;
404 offset_ts.tv_sec--;
405 offset_ts.tv_nsec += 1000*1000*1000;
406 }
407 #endif
408
409
410 void
411 exim_gettime(struct timeval * tv)
412 {
413 #ifdef _POSIX_MONOTONIC_CLOCK
414 struct timespec now_ts;
415
416 if (clock_gettime(EXIM_CLOCKTYPE, &now_ts) == 0)
417   {
418   now_ts.tv_sec += offset_ts.tv_sec;
419   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
420     {
421     now_ts.tv_sec++;
422     now_ts.tv_nsec -= 1000*1000*1000;
423     }
424   tv->tv_sec = now_ts.tv_sec;
425   tv->tv_usec = now_ts.tv_nsec / 1000;
426   }
427 else
428 #endif
429   (void)gettimeofday(tv, NULL);
430 }
431
432
433 /* Exim uses a time + a pid to generate a unique identifier in two places: its
434 message IDs, and in file names for maildir deliveries. Because some OS now
435 re-use pids within the same second, sub-second times are now being used.
436 However, for absolute certainty, we must ensure the clock has ticked before
437 allowing the relevant process to complete. At the time of implementation of
438 this code (February 2003), the speed of processors is such that the clock will
439 invariably have ticked already by the time a process has done its job. This
440 function prepares for the time when things are faster - and it also copes with
441 clocks that go backwards.
442
443 Arguments:
444   tgt_tv       A timeval which was used to create uniqueness; its usec field
445                  has been rounded down to the value of the resolution.
446                  We want to be sure the current time is greater than this.
447   resolution   The resolution that was used to divide the microseconds
448                  (1 for maildir, larger for message ids)
449
450 Returns:       nothing
451 */
452
453 void
454 exim_wait_tick(struct timeval * tgt_tv, int resolution)
455 {
456 struct timeval now_tv;
457 long int now_true_usec;
458
459 exim_gettime(&now_tv);
460 now_true_usec = now_tv.tv_usec;
461 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
462
463 while (exim_tvcmp(&now_tv, tgt_tv) <= 0)
464   {
465   struct itimerval itval;
466   itval.it_interval.tv_sec = 0;
467   itval.it_interval.tv_usec = 0;
468   itval.it_value.tv_sec = tgt_tv->tv_sec - now_tv.tv_sec;
469   itval.it_value.tv_usec = tgt_tv->tv_usec + resolution - now_true_usec;
470
471   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
472   negative value for the microseconds is possible only in the case when "now"
473   is more than a second less than "tgt". That means that itval.it_value.tv_sec
474   is greater than zero. The following correction is therefore safe. */
475
476   if (itval.it_value.tv_usec < 0)
477     {
478     itval.it_value.tv_usec += 1000000;
479     itval.it_value.tv_sec -= 1;
480     }
481
482   DEBUG(D_transport|D_receive)
483     {
484     if (!f.running_in_test_harness)
485       {
486       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
487         tgt_tv->tv_sec, (long) tgt_tv->tv_usec,
488         now_tv.tv_sec, (long) now_tv.tv_usec);
489       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
490         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
491       }
492     }
493
494   milliwait(&itval);
495
496   /* Be prapared to go around if the kernel does not implement subtick
497   granularity (GNU Hurd) */
498
499   (void)gettimeofday(&now_tv, NULL);
500   now_true_usec = now_tv.tv_usec;
501   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
502   }
503 }
504
505
506
507
508 /*************************************************
509 *   Call fopen() with umask 777 and adjust mode  *
510 *************************************************/
511
512 /* Exim runs with umask(0) so that files created with open() have the mode that
513 is specified in the open() call. However, there are some files, typically in
514 the spool directory, that are created with fopen(). They end up world-writeable
515 if no precautions are taken. Although the spool directory is not accessible to
516 the world, this is an untidiness. So this is a wrapper function for fopen()
517 that sorts out the mode of the created file.
518
519 Arguments:
520    filename       the file name
521    options        the fopen() options
522    mode           the required mode
523
524 Returns:          the fopened FILE or NULL
525 */
526
527 FILE *
528 modefopen(const uschar *filename, const char *options, mode_t mode)
529 {
530 mode_t saved_umask = umask(0777);
531 FILE *f = Ufopen(filename, options);
532 (void)umask(saved_umask);
533 if (f != NULL) (void)fchmod(fileno(f), mode);
534 return f;
535 }
536
537
538 /*************************************************
539 *   Ensure stdin, stdout, and stderr exist       *
540 *************************************************/
541
542 /* Some operating systems grumble if an exec() happens without a standard
543 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
544 file will be opened and will use these fd values, and then some other bit of
545 code will assume, for example, that it can write error messages to stderr.
546 This function ensures that fds 0, 1, and 2 are open if they do not already
547 exist, by connecting them to /dev/null.
548
549 This function is also used to ensure that std{in,out,err} exist at all times,
550 so that if any library that Exim calls tries to use them, it doesn't crash.
551
552 Arguments:  None
553 Returns:    Nothing
554 */
555
556 void
557 exim_nullstd(void)
558 {
559 int devnull = -1;
560 struct stat statbuf;
561 for (int i = 0; i <= 2; i++)
562   {
563   if (fstat(i, &statbuf) < 0 && errno == EBADF)
564     {
565     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
566     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
567       string_open_failed("/dev/null", NULL));
568     if (devnull != i) (void)dup2(devnull, i);
569     }
570   }
571 if (devnull > 2) (void)close(devnull);
572 }
573
574
575
576
577 /*************************************************
578 *   Close unwanted file descriptors for delivery *
579 *************************************************/
580
581 /* This function is called from a new process that has been forked to deliver
582 an incoming message, either directly, or using exec.
583
584 We want any smtp input streams to be closed in this new process. However, it
585 has been observed that using fclose() here causes trouble. When reading in -bS
586 input, duplicate copies of messages have been seen. The files will be sharing a
587 file pointer with the parent process, and it seems that fclose() (at least on
588 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
589 least sometimes. Hence we go for closing the underlying file descriptors.
590
591 If TLS is active, we want to shut down the TLS library, but without molesting
592 the parent's SSL connection.
593
594 For delivery of a non-SMTP message, we want to close stdin and stdout (and
595 stderr unless debugging) because the calling process might have set them up as
596 pipes and be waiting for them to close before it waits for the submission
597 process to terminate. If they aren't closed, they hold up the calling process
598 until the initial delivery process finishes, which is not what we want.
599
600 Exception: We do want it for synchronous delivery!
601
602 And notwithstanding all the above, if D_resolver is set, implying resolver
603 debugging, leave stdout open, because that's where the resolver writes its
604 debugging output.
605
606 When we close stderr (which implies we've also closed stdout), we also get rid
607 of any controlling terminal.
608
609 Arguments:   None
610 Returns:     Nothing
611 */
612
613 static void
614 close_unwanted(void)
615 {
616 if (smtp_input)
617   {
618 #ifndef DISABLE_TLS
619   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
620 #endif
621   (void)close(fileno(smtp_in));
622   (void)close(fileno(smtp_out));
623   smtp_in = NULL;
624   }
625 else
626   {
627   (void)close(0);                                          /* stdin */
628   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
629   if (debug_selector == 0)                                 /* stderr */
630     {
631     if (!f.synchronous_delivery)
632       {
633       (void)close(2);
634       log_stderr = NULL;
635       }
636     (void)setsid();
637     }
638   }
639 }
640
641
642
643
644 /*************************************************
645 *          Set uid and gid                       *
646 *************************************************/
647
648 /* This function sets a new uid and gid permanently, optionally calling
649 initgroups() to set auxiliary groups. There are some special cases when running
650 Exim in unprivileged modes. In these situations the effective uid will not be
651 root; if we already have the right effective uid/gid, and don't need to
652 initialize any groups, leave things as they are.
653
654 Arguments:
655   uid        the uid
656   gid        the gid
657   igflag     TRUE if initgroups() wanted
658   msg        text to use in debugging output and failure log
659
660 Returns:     nothing; bombs out on failure
661 */
662
663 void
664 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, uschar *msg)
665 {
666 uid_t euid = geteuid();
667 gid_t egid = getegid();
668
669 if (euid == root_uid || euid != uid || egid != gid || igflag)
670   {
671   /* At least one OS returns +1 for initgroups failure, so just check for
672   non-zero. */
673
674   if (igflag)
675     {
676     struct passwd *pw = getpwuid(uid);
677     if (!pw)
678       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
679         "no passwd entry for uid=%ld", (long int)uid);
680
681     if (initgroups(pw->pw_name, gid) != 0)
682       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
683         (long int)uid, strerror(errno));
684     }
685
686   if (setgid(gid) < 0 || setuid(uid) < 0)
687     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
688       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
689   }
690
691 /* Debugging output included uid/gid and all groups */
692
693 DEBUG(D_uid)
694   {
695   int group_count, save_errno;
696   gid_t group_list[EXIM_GROUPLIST_SIZE];
697   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
698     (long int)geteuid(), (long int)getegid(), (long int)getpid());
699   group_count = getgroups(nelem(group_list), group_list);
700   save_errno = errno;
701   debug_printf("  auxiliary group list:");
702   if (group_count > 0)
703     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
704   else if (group_count < 0)
705     debug_printf(" <error: %s>", strerror(save_errno));
706   else debug_printf(" <none>");
707   debug_printf("\n");
708   }
709 }
710
711
712
713
714 /*************************************************
715 *               Exit point                       *
716 *************************************************/
717
718 /* Exim exits via this function so that it always clears up any open
719 databases.
720
721 Arguments:
722   rc         return code
723
724 Returns:     does not return
725 */
726
727 void
728 exim_exit(int rc)
729 {
730 search_tidyup();
731 store_exit();
732 DEBUG(D_any)
733   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
734     ">>>>>>>>>>>>>>>>\n",
735     (int)getpid(), process_purpose, rc);
736 exit(rc);
737 }
738
739
740 void
741 exim_underbar_exit(int rc)
742 {
743 store_exit();
744 DEBUG(D_any)
745   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
746     ">>>>>>>>>>>>>>>>\n",
747     (int)getpid(), process_purpose, rc);
748 _exit(rc);
749 }
750
751
752
753 /* Print error string, then die */
754 static void
755 exim_fail(const char * fmt, ...)
756 {
757 va_list ap;
758 va_start(ap, fmt);
759 vfprintf(stderr, fmt, ap);
760 exit(EXIT_FAILURE);
761 }
762
763 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
764 of chown()/fchown().  See src/functions.h for more explanation */
765 int
766 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
767 {
768 int saved_errno = errno;  /* from the preceeding chown call */
769 #if 1
770 log_write(0, LOG_MAIN|LOG_PANIC,
771   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
772   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
773   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
774 #else
775 /* I leave this here, commented, in case the "bug"(?) comes up again.
776    It is not an Exim bug, but we can provide a workaround.
777    See Bug 2391
778    HS 2019-04-18 */
779
780 struct stat buf;
781
782 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
783 {
784   if (buf.st_uid == owner && buf.st_gid == group) return 0;
785   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
786 }
787 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
788
789 #endif
790 errno = saved_errno;
791 return -1;
792 }
793
794
795 /*************************************************
796 *         Extract port from host address         *
797 *************************************************/
798
799 /* Called to extract the port from the values given to -oMa and -oMi.
800 It also checks the syntax of the address, and terminates it before the
801 port data when a port is extracted.
802
803 Argument:
804   address   the address, with possible port on the end
805
806 Returns:    the port, or zero if there isn't one
807             bombs out on a syntax error
808 */
809
810 static int
811 check_port(uschar *address)
812 {
813 int port = host_address_extract_port(address);
814 if (string_is_ip_address(address, NULL) == 0)
815   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
816 return port;
817 }
818
819
820
821 /*************************************************
822 *              Test/verify an address            *
823 *************************************************/
824
825 /* This function is called by the -bv and -bt code. It extracts a working
826 address from a full RFC 822 address. This isn't really necessary per se, but it
827 has the effect of collapsing source routes.
828
829 Arguments:
830   s            the address string
831   flags        flag bits for verify_address()
832   exit_value   to be set for failures
833
834 Returns:       nothing
835 */
836
837 static void
838 test_address(uschar *s, int flags, int *exit_value)
839 {
840 int start, end, domain;
841 uschar *parse_error = NULL;
842 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
843   FALSE);
844 if (!address)
845   {
846   fprintf(stdout, "syntax error: %s\n", parse_error);
847   *exit_value = 2;
848   }
849 else
850   {
851   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
852     -1, -1, NULL, NULL, NULL);
853   if (rc == FAIL) *exit_value = 2;
854     else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
855   }
856 }
857
858
859
860 /*************************************************
861 *          Show supported features               *
862 *************************************************/
863
864 static void
865 show_db_version(FILE * f)
866 {
867 #ifdef DB_VERSION_STRING
868 DEBUG(D_any)
869   {
870   fprintf(f, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
871   fprintf(f, "                      Runtime: %s\n",
872     db_version(NULL, NULL, NULL));
873   }
874 else
875   fprintf(f, "Berkeley DB: %s\n", DB_VERSION_STRING);
876
877 #elif defined(BTREEVERSION) && defined(HASHVERSION)
878   #ifdef USE_DB
879   fprintf(f, "Probably Berkeley DB version 1.8x (native mode)\n");
880   #else
881   fprintf(f, "Probably Berkeley DB version 1.8x (compatibility mode)\n");
882   #endif
883
884 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
885 fprintf(f, "Probably ndbm\n");
886 #elif defined(USE_TDB)
887 fprintf(f, "Using tdb\n");
888 #else
889   #ifdef USE_GDBM
890   fprintf(f, "Probably GDBM (native mode)\n");
891   #else
892   fprintf(f, "Probably GDBM (compatibility mode)\n");
893   #endif
894 #endif
895 }
896
897
898 /* This function is called for -bV/--version and for -d to output the optional
899 features of the current Exim binary.
900
901 Arguments:  a FILE for printing
902 Returns:    nothing
903 */
904
905 static void
906 show_whats_supported(FILE * fp)
907 {
908 rmark reset_point = store_mark();
909 gstring * g;
910 DEBUG(D_any) {} else show_db_version(fp);
911
912 g = string_cat(NULL, US"Support for:");
913 #ifdef SUPPORT_CRYPTEQ
914   g = string_cat(g, US" crypteq");
915 #endif
916 #if HAVE_ICONV
917   g = string_cat(g, US" iconv()");
918 #endif
919 #if HAVE_IPV6
920   g = string_cat(g, US" IPv6");
921 #endif
922 #ifdef HAVE_SETCLASSRESOURCES
923   g = string_cat(g, US" use_setclassresources");
924 #endif
925 #ifdef SUPPORT_PAM
926   g = string_cat(g, US" PAM");
927 #endif
928 #ifdef EXIM_PERL
929   g = string_cat(g, US" Perl");
930 #endif
931 #ifdef EXPAND_DLFUNC
932   g = string_cat(g, US" Expand_dlfunc");
933 #endif
934 #ifdef USE_TCP_WRAPPERS
935   g = string_cat(g, US" TCPwrappers");
936 #endif
937 #ifdef USE_GNUTLS
938   g = string_cat(g, US" GnuTLS");
939 #endif
940 #ifdef USE_OPENSSL
941   g = string_cat(g, US" OpenSSL");
942 #endif
943 #ifndef DISABLE_TLS_RESUME
944   g = string_cat(g, US" TLS_resume");
945 #endif
946 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
947   g = string_cat(g, US" translate_ip_address");
948 #endif
949 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
950   g = string_cat(g, US" move_frozen_messages");
951 #endif
952 #ifdef WITH_CONTENT_SCAN
953   g = string_cat(g, US" Content_Scanning");
954 #endif
955 #ifdef SUPPORT_DANE
956   g = string_cat(g, US" DANE");
957 #endif
958 #ifndef DISABLE_DKIM
959   g = string_cat(g, US" DKIM");
960 #endif
961 #ifdef SUPPORT_DMARC
962   g = string_cat(g, US" DMARC");
963 #endif
964 #ifndef DISABLE_DNSSEC
965   g = string_cat(g, US" DNSSEC");
966 #endif
967 #ifndef DISABLE_EVENT
968   g = string_cat(g, US" Event");
969 #endif
970 #ifdef SUPPORT_I18N
971   g = string_cat(g, US" I18N");
972 #endif
973 #ifndef DISABLE_OCSP
974   g = string_cat(g, US" OCSP");
975 #endif
976 #ifndef DISABLE_PIPE_CONNECT
977   g = string_cat(g, US" PIPE_CONNECT");
978 #endif
979 #ifndef DISABLE_PRDR
980   g = string_cat(g, US" PRDR");
981 #endif
982 #ifdef SUPPORT_PROXY
983   g = string_cat(g, US" PROXY");
984 #endif
985 #ifndef DISABLE_QUEUE_RAMP
986   g = string_cat(g, US" Experimental_Queue_Ramp");
987 #endif
988 #ifdef SUPPORT_SOCKS
989   g = string_cat(g, US" SOCKS");
990 #endif
991 #ifdef SUPPORT_SPF
992   g = string_cat(g, US" SPF");
993 #endif
994 #if defined(SUPPORT_SRS)
995   g = string_cat(g, US" SRS");
996 #endif
997 #ifdef TCP_FASTOPEN
998   tcp_init();
999   if (f.tcp_fastopen_ok) g = string_cat(g, US" TCP_Fast_Open");
1000 #endif
1001 #ifdef EXPERIMENTAL_ARC
1002   g = string_cat(g, US" Experimental_ARC");
1003 #endif
1004 #ifdef EXPERIMENTAL_BRIGHTMAIL
1005   g = string_cat(g, US" Experimental_Brightmail");
1006 #endif
1007 #ifdef EXPERIMENTAL_DCC
1008   g = string_cat(g, US" Experimental_DCC");
1009 #endif
1010 #ifdef EXPERIMENTAL_DSN_INFO
1011   g = string_cat(g, US" Experimental_DSN_info");
1012 #endif
1013 #ifdef EXPERIMENTAL_QUEUEFILE
1014   g = string_cat(g, US" Experimental_QUEUEFILE");
1015 #endif
1016 #if defined(EXPERIMENTAL_SRS_ALT)
1017   g = string_cat(g, US" Experimental_SRS");
1018 #endif
1019 g = string_cat(g, US"\n");
1020
1021 g = string_cat(g, US"Lookups (built-in):");
1022 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1023   g = string_cat(g, US" lsearch wildlsearch nwildlsearch iplsearch");
1024 #endif
1025 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1026   g = string_cat(g, US" cdb");
1027 #endif
1028 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1029   g = string_cat(g, US" dbm dbmjz dbmnz");
1030 #endif
1031 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1032   g = string_cat(g, US" dnsdb");
1033 #endif
1034 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1035   g = string_cat(g, US" dsearch");
1036 #endif
1037 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1038   g = string_cat(g, US" ibase");
1039 #endif
1040 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1041   g = string_cat(g, US" json");
1042 #endif
1043 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1044   g = string_cat(g, US" ldap ldapdn ldapm");
1045 #endif
1046 #ifdef LOOKUP_LMDB
1047   g = string_cat(g, US" lmdb");
1048 #endif
1049 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1050   g = string_cat(g, US" mysql");
1051 #endif
1052 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1053   g = string_cat(g, US" nis nis0");
1054 #endif
1055 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1056   g = string_cat(g, US" nisplus");
1057 #endif
1058 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1059   g = string_cat(g, US" oracle");
1060 #endif
1061 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1062   g = string_cat(g, US" passwd");
1063 #endif
1064 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1065   g = string_cat(g, US" pgsql");
1066 #endif
1067 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1068   g = string_cat(g, US" redis");
1069 #endif
1070 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1071   g = string_cat(g, US" sqlite");
1072 #endif
1073 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1074   g = string_cat(g, US" testdb");
1075 #endif
1076 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1077   g = string_cat(g, US" whoson");
1078 #endif
1079 g = string_cat(g, US"\n");
1080
1081 g = auth_show_supported(g);
1082 g = route_show_supported(g);
1083 g = transport_show_supported(g);
1084
1085 #ifdef WITH_CONTENT_SCAN
1086 g = malware_show_supported(g);
1087 #endif
1088
1089 if (fixed_never_users[0] > 0)
1090   {
1091   int i;
1092   g = string_cat(g, US"Fixed never_users: ");
1093   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1094     string_fmt_append(g, "%u:", (unsigned)fixed_never_users[i]);
1095   g = string_fmt_append(g, "%u\n", (unsigned)fixed_never_users[i]);
1096   }
1097
1098 g = string_fmt_append(g, "Configure owner: %d:%d\n", config_uid, config_gid);
1099 fputs(CS string_from_gstring(g), fp);
1100
1101 fprintf(fp, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1102
1103 /* Everything else is details which are only worth reporting when debugging.
1104 Perhaps the tls_version_report should move into this too. */
1105 DEBUG(D_any) do {
1106
1107 /* clang defines __GNUC__ (at least, for me) so test for it first */
1108 #if defined(__clang__)
1109   fprintf(fp, "Compiler: CLang [%s]\n", __clang_version__);
1110 #elif defined(__GNUC__)
1111   fprintf(fp, "Compiler: GCC [%s]\n",
1112 # ifdef __VERSION__
1113       __VERSION__
1114 # else
1115       "? unknown version ?"
1116 # endif
1117       );
1118 #else
1119   fprintf(fp, "Compiler: <unknown>\n");
1120 #endif
1121
1122 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1123   fprintf(fp, "Library version: Glibc: Compile: %d.%d\n",
1124                 __GLIBC__, __GLIBC_MINOR__);
1125   if (__GLIBC_PREREQ(2, 1))
1126     fprintf(fp, "                        Runtime: %s\n",
1127                 gnu_get_libc_version());
1128 #endif
1129
1130 show_db_version(fp);
1131
1132 #ifndef DISABLE_TLS
1133   tls_version_report(fp);
1134 #endif
1135 #ifdef SUPPORT_I18N
1136   utf8_version_report(fp);
1137 #endif
1138 #ifdef SUPPORT_SPF
1139   spf_lib_version_report(fp);
1140 #endif
1141
1142   for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1143     if (authi->version_report)
1144       (*authi->version_report)(fp);
1145
1146   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1147   characters; unless it's an ancient version of PCRE in which case it
1148   is not defined. */
1149 #ifndef PCRE_PRERELEASE
1150 # define PCRE_PRERELEASE
1151 #endif
1152 #define QUOTE(X) #X
1153 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1154   fprintf(fp, "Library version: PCRE: Compile: %d.%d%s\n"
1155              "                       Runtime: %s\n",
1156           PCRE_MAJOR, PCRE_MINOR,
1157           EXPAND_AND_QUOTE(PCRE_PRERELEASE) "",
1158           pcre_version());
1159 #undef QUOTE
1160 #undef EXPAND_AND_QUOTE
1161
1162   init_lookup_list();
1163   for (int i = 0; i < lookup_list_count; i++)
1164     if (lookup_list[i]->version_report)
1165       lookup_list[i]->version_report(fp);
1166
1167 #ifdef WHITELIST_D_MACROS
1168   fprintf(fp, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1169 #else
1170   fprintf(fp, "WHITELIST_D_MACROS unset\n");
1171 #endif
1172 #ifdef TRUSTED_CONFIG_LIST
1173   fprintf(fp, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1174 #else
1175   fprintf(fp, "TRUSTED_CONFIG_LIST unset\n");
1176 #endif
1177
1178 } while (0);
1179 store_reset(reset_point);
1180 }
1181
1182
1183 /*************************************************
1184 *     Show auxiliary information about Exim      *
1185 *************************************************/
1186
1187 static void
1188 show_exim_information(enum commandline_info request, FILE *stream)
1189 {
1190 switch(request)
1191   {
1192   case CMDINFO_NONE:
1193     fprintf(stream, "Oops, something went wrong.\n");
1194     return;
1195   case CMDINFO_HELP:
1196     fprintf(stream,
1197 "The -bI: flag takes a string indicating which information to provide.\n"
1198 "If the string is not recognised, you'll get this help (on stderr).\n"
1199 "\n"
1200 "  exim -bI:help    this information\n"
1201 "  exim -bI:dscp    list of known dscp value keywords\n"
1202 "  exim -bI:sieve   list of supported sieve extensions\n"
1203 );
1204     return;
1205   case CMDINFO_SIEVE:
1206     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1207       fprintf(stream, "%s\n", *pp);
1208     return;
1209   case CMDINFO_DSCP:
1210     dscp_list_to_stream(stream);
1211     return;
1212   }
1213 }
1214
1215
1216 /*************************************************
1217 *               Quote a local part               *
1218 *************************************************/
1219
1220 /* This function is used when a sender address or a From: or Sender: header
1221 line is being created from the caller's login, or from an authenticated_id. It
1222 applies appropriate quoting rules for a local part.
1223
1224 Argument:    the local part
1225 Returns:     the local part, quoted if necessary
1226 */
1227
1228 uschar *
1229 local_part_quote(uschar *lpart)
1230 {
1231 BOOL needs_quote = FALSE;
1232 gstring * g;
1233
1234 for (uschar * t = lpart; !needs_quote && *t != 0; t++)
1235   {
1236   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1237     (*t != '.' || t == lpart || t[1] == 0);
1238   }
1239
1240 if (!needs_quote) return lpart;
1241
1242 g = string_catn(NULL, US"\"", 1);
1243
1244 for (;;)
1245   {
1246   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1247   if (nq == NULL)
1248     {
1249     g = string_cat(g, lpart);
1250     break;
1251     }
1252   g = string_catn(g, lpart, nq - lpart);
1253   g = string_catn(g, US"\\", 1);
1254   g = string_catn(g, nq, 1);
1255   lpart = nq + 1;
1256   }
1257
1258 g = string_catn(g, US"\"", 1);
1259 return string_from_gstring(g);
1260 }
1261
1262
1263
1264 #ifdef USE_READLINE
1265 /*************************************************
1266 *         Load readline() functions              *
1267 *************************************************/
1268
1269 /* This function is called from testing executions that read data from stdin,
1270 but only when running as the calling user. Currently, only -be does this. The
1271 function loads the readline() function library and passes back the functions.
1272 On some systems, it needs the curses library, so load that too, but try without
1273 it if loading fails. All this functionality has to be requested at build time.
1274
1275 Arguments:
1276   fn_readline_ptr   pointer to where to put the readline pointer
1277   fn_addhist_ptr    pointer to where to put the addhistory function
1278
1279 Returns:            the dlopen handle or NULL on failure
1280 */
1281
1282 static void *
1283 set_readline(char * (**fn_readline_ptr)(const char *),
1284              void   (**fn_addhist_ptr)(const char *))
1285 {
1286 void *dlhandle;
1287 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1288
1289 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1290 if (dlhandle_curses) dlclose(dlhandle_curses);
1291
1292 if (dlhandle)
1293   {
1294   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1295    *   char * readline (const char *prompt);
1296    *   void add_history (const char *string);
1297    */
1298   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1299   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1300   }
1301 else
1302   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1303
1304 return dlhandle;
1305 }
1306 #endif
1307
1308
1309
1310 /*************************************************
1311 *    Get a line from stdin for testing things    *
1312 *************************************************/
1313
1314 /* This function is called when running tests that can take a number of lines
1315 of input (for example, -be and -bt). It handles continuations and trailing
1316 spaces. And prompting and a blank line output on eof. If readline() is in use,
1317 the arguments are non-NULL and provide the relevant functions.
1318
1319 Arguments:
1320   fn_readline   readline function or NULL
1321   fn_addhist    addhist function or NULL
1322
1323 Returns:        pointer to dynamic memory, or NULL at end of file
1324 */
1325
1326 static uschar *
1327 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1328 {
1329 gstring * g = NULL;
1330
1331 if (!fn_readline) { printf("> "); fflush(stdout); }
1332
1333 for (int i = 0;; i++)
1334   {
1335   uschar buffer[1024];
1336   uschar *p, *ss;
1337
1338   #ifdef USE_READLINE
1339   char *readline_line = NULL;
1340   if (fn_readline)
1341     {
1342     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1343     if (*readline_line != 0 && fn_addhist) fn_addhist(readline_line);
1344     p = US readline_line;
1345     }
1346   else
1347   #endif
1348
1349   /* readline() not in use */
1350
1351     {
1352     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;
1353     p = buffer;
1354     }
1355
1356   /* Handle the line */
1357
1358   ss = p + (int)Ustrlen(p);
1359   while (ss > p && isspace(ss[-1])) ss--;
1360
1361   if (i > 0)
1362     while (p < ss && isspace(*p)) p++;   /* leading space after cont */
1363
1364   g = string_catn(g, p, ss - p);
1365
1366   #ifdef USE_READLINE
1367   if (fn_readline) free(readline_line);
1368   #endif
1369
1370   /* g can only be NULL if ss==p */
1371   if (ss == p || g->s[g->ptr-1] != '\\')
1372     break;
1373
1374   --g->ptr;
1375   (void) string_from_gstring(g);
1376   }
1377
1378 if (!g) printf("\n");
1379 return string_from_gstring(g);
1380 }
1381
1382
1383
1384 /*************************************************
1385 *    Output usage information for the program    *
1386 *************************************************/
1387
1388 /* This function is called when there are no recipients
1389    or a specific --help argument was added.
1390
1391 Arguments:
1392   progname      information on what name we were called by
1393
1394 Returns:        DOES NOT RETURN
1395 */
1396
1397 static void
1398 exim_usage(uschar *progname)
1399 {
1400
1401 /* Handle specific program invocation variants */
1402 if (Ustrcmp(progname, US"-mailq") == 0)
1403   exim_fail(
1404     "mailq - list the contents of the mail queue\n\n"
1405     "For a list of options, see the Exim documentation.\n");
1406
1407 /* Generic usage - we output this whatever happens */
1408 exim_fail(
1409   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1410   "not directly from a shell command line. Options and/or arguments control\n"
1411   "what it does when called. For a list of options, see the Exim documentation.\n");
1412 }
1413
1414
1415
1416 /*************************************************
1417 *    Validate that the macros given are okay     *
1418 *************************************************/
1419
1420 /* Typically, Exim will drop privileges if macros are supplied.  In some
1421 cases, we want to not do so.
1422
1423 Arguments:    opt_D_used - true if the commandline had a "-D" option
1424 Returns:      true if trusted, false otherwise
1425 */
1426
1427 static BOOL
1428 macros_trusted(BOOL opt_D_used)
1429 {
1430 #ifdef WHITELIST_D_MACROS
1431 uschar *whitelisted, *end, *p, **whites;
1432 int white_count, i, n;
1433 size_t len;
1434 BOOL prev_char_item, found;
1435 #endif
1436
1437 if (!opt_D_used)
1438   return TRUE;
1439 #ifndef WHITELIST_D_MACROS
1440 return FALSE;
1441 #else
1442
1443 /* We only trust -D overrides for some invoking users:
1444 root, the exim run-time user, the optional config owner user.
1445 I don't know why config-owner would be needed, but since they can own the
1446 config files anyway, there's no security risk to letting them override -D. */
1447 if ( ! ((real_uid == root_uid)
1448      || (real_uid == exim_uid)
1449 #ifdef CONFIGURE_OWNER
1450      || (real_uid == config_uid)
1451 #endif
1452    ))
1453   {
1454   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1455   return FALSE;
1456   }
1457
1458 /* Get a list of macros which are whitelisted */
1459 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1460 prev_char_item = FALSE;
1461 white_count = 0;
1462 for (p = whitelisted; *p != '\0'; ++p)
1463   {
1464   if (*p == ':' || isspace(*p))
1465     {
1466     *p = '\0';
1467     if (prev_char_item)
1468       ++white_count;
1469     prev_char_item = FALSE;
1470     continue;
1471     }
1472   if (!prev_char_item)
1473     prev_char_item = TRUE;
1474   }
1475 end = p;
1476 if (prev_char_item)
1477   ++white_count;
1478 if (!white_count)
1479   return FALSE;
1480 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1481 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1482   {
1483   if (*p != '\0')
1484     {
1485     whites[i++] = p;
1486     if (i == white_count)
1487       break;
1488     while (*p != '\0' && p < end)
1489       ++p;
1490     }
1491   }
1492 whites[i] = NULL;
1493
1494 /* The list of commandline macros should be very short.
1495 Accept the N*M complexity. */
1496 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1497   {
1498   found = FALSE;
1499   for (uschar ** w = whites; *w; ++w)
1500     if (Ustrcmp(*w, m->name) == 0)
1501       {
1502       found = TRUE;
1503       break;
1504       }
1505   if (!found)
1506     return FALSE;
1507   if (!m->replacement)
1508     continue;
1509   if ((len = m->replen) == 0)
1510     continue;
1511   n = pcre_exec(regex_whitelisted_macro, NULL, CS m->replacement, len,
1512    0, PCRE_EOPT, NULL, 0);
1513   if (n < 0)
1514     {
1515     if (n != PCRE_ERROR_NOMATCH)
1516       debug_printf("macros_trusted checking %s returned %d\n", m->name, n);
1517     return FALSE;
1518     }
1519   }
1520 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1521 return TRUE;
1522 #endif
1523 }
1524
1525
1526 /*************************************************
1527 *          Expansion testing                     *
1528 *************************************************/
1529
1530 /* Expand and print one item, doing macro-processing.
1531
1532 Arguments:
1533   item          line for expansion
1534 */
1535
1536 static void
1537 expansion_test_line(uschar * line)
1538 {
1539 int len;
1540 BOOL dummy_macexp;
1541
1542 Ustrncpy(big_buffer, line, big_buffer_size);
1543 big_buffer[big_buffer_size-1] = '\0';
1544 len = Ustrlen(big_buffer);
1545
1546 (void) macros_expand(0, &len, &dummy_macexp);
1547
1548 if (isupper(big_buffer[0]))
1549   {
1550   if (macro_read_assignment(big_buffer))
1551     printf("Defined macro '%s'\n", mlast->name);
1552   }
1553 else
1554   if ((line = expand_string(big_buffer))) printf("%s\n", CS line);
1555   else printf("Failed: %s\n", expand_string_message);
1556 }
1557
1558
1559
1560 /*************************************************
1561 *          Entry point and high-level code       *
1562 *************************************************/
1563
1564 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1565 the appropriate action. All the necessary functions are present in the one
1566 binary. I originally thought one should split it up, but it turns out that so
1567 much of the apparatus is needed in each chunk that one might as well just have
1568 it all available all the time, which then makes the coding easier as well.
1569
1570 Arguments:
1571   argc      count of entries in argv
1572   argv      argument strings, with argv[0] being the program name
1573
1574 Returns:    EXIT_SUCCESS if terminated successfully
1575             EXIT_FAILURE otherwise, except when a message has been sent
1576               to the sender, and -oee was given
1577 */
1578
1579 int
1580 main(int argc, char **cargv)
1581 {
1582 uschar **argv = USS cargv;
1583 int  arg_receive_timeout = -1;
1584 int  arg_smtp_receive_timeout = -1;
1585 int  arg_error_handling = error_handling;
1586 int  filter_sfd = -1;
1587 int  filter_ufd = -1;
1588 int  group_count;
1589 int  i, rv;
1590 int  list_queue_option = 0;
1591 int  msg_action = 0;
1592 int  msg_action_arg = -1;
1593 int  namelen = (argv[0] == NULL)? 0 : Ustrlen(argv[0]);
1594 int  queue_only_reason = 0;
1595 #ifdef EXIM_PERL
1596 int  perl_start_option = 0;
1597 #endif
1598 int  recipients_arg = argc;
1599 int  sender_address_domain = 0;
1600 int  test_retry_arg = -1;
1601 int  test_rewrite_arg = -1;
1602 gid_t original_egid;
1603 BOOL arg_queue_only = FALSE;
1604 BOOL bi_option = FALSE;
1605 BOOL checking = FALSE;
1606 BOOL count_queue = FALSE;
1607 BOOL expansion_test = FALSE;
1608 BOOL extract_recipients = FALSE;
1609 BOOL flag_G = FALSE;
1610 BOOL flag_n = FALSE;
1611 BOOL forced_delivery = FALSE;
1612 BOOL f_end_dot = FALSE;
1613 BOOL deliver_give_up = FALSE;
1614 BOOL list_queue = FALSE;
1615 BOOL list_options = FALSE;
1616 BOOL list_config = FALSE;
1617 BOOL local_queue_only;
1618 BOOL more = TRUE;
1619 BOOL one_msg_action = FALSE;
1620 BOOL opt_D_used = FALSE;
1621 BOOL queue_only_set = FALSE;
1622 BOOL receiving_message = TRUE;
1623 BOOL sender_ident_set = FALSE;
1624 BOOL session_local_queue_only;
1625 BOOL unprivileged;
1626 BOOL removed_privilege = FALSE;
1627 BOOL usage_wanted = FALSE;
1628 BOOL verify_address_mode = FALSE;
1629 BOOL verify_as_sender = FALSE;
1630 BOOL rcpt_verify_quota = FALSE;
1631 BOOL version_printed = FALSE;
1632 uschar *alias_arg = NULL;
1633 uschar *called_as = US"";
1634 uschar *cmdline_syslog_name = NULL;
1635 uschar *start_queue_run_id = NULL;
1636 uschar *stop_queue_run_id = NULL;
1637 uschar *expansion_test_message = NULL;
1638 uschar *ftest_domain = NULL;
1639 uschar *ftest_localpart = NULL;
1640 uschar *ftest_prefix = NULL;
1641 uschar *ftest_suffix = NULL;
1642 uschar *log_oneline = NULL;
1643 uschar *malware_test_file = NULL;
1644 uschar *real_sender_address;
1645 uschar *originator_home = US"/";
1646 size_t sz;
1647
1648 struct passwd *pw;
1649 struct stat statbuf;
1650 pid_t passed_qr_pid = (pid_t)0;
1651 int passed_qr_pipe = -1;
1652 gid_t group_list[EXIM_GROUPLIST_SIZE];
1653
1654 /* For the -bI: flag */
1655 enum commandline_info info_flag = CMDINFO_NONE;
1656 BOOL info_stdout = FALSE;
1657
1658 /* Possible options for -R and -S */
1659
1660 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1661
1662 /* Need to define this in case we need to change the environment in order
1663 to get rid of a bogus time zone. We have to make it char rather than uschar
1664 because some OS define it in /usr/include/unistd.h. */
1665
1666 extern char **environ;
1667
1668 #ifdef MEASURE_TIMING
1669 (void)gettimeofday(&timestamp_startup, NULL);
1670 #endif
1671
1672 /* If the Exim user and/or group and/or the configuration file owner/group were
1673 defined by ref:name at build time, we must now find the actual uid/gid values.
1674 This is a feature to make the lives of binary distributors easier. */
1675
1676 #ifdef EXIM_USERNAME
1677 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1678   {
1679   if (exim_uid == 0)
1680     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1681
1682   /* If ref:name uses a number as the name, route_finduser() returns
1683   TRUE with exim_uid set and pw coerced to NULL. */
1684   if (pw)
1685     exim_gid = pw->pw_gid;
1686 #ifndef EXIM_GROUPNAME
1687   else
1688     exim_fail(
1689         "exim: ref:name should specify a usercode, not a group.\n"
1690         "exim: can't let you get away with it unless you also specify a group.\n");
1691 #endif
1692   }
1693 else
1694   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1695 #endif
1696
1697 #ifdef EXIM_GROUPNAME
1698 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1699   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1700 #endif
1701
1702 #ifdef CONFIGURE_OWNERNAME
1703 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1704   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1705     CONFIGURE_OWNERNAME);
1706 #endif
1707
1708 /* We default the system_filter_user to be the Exim run-time user, as a
1709 sane non-root value. */
1710 system_filter_uid = exim_uid;
1711
1712 #ifdef CONFIGURE_GROUPNAME
1713 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1714   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1715     CONFIGURE_GROUPNAME);
1716 #endif
1717
1718 /* In the Cygwin environment, some initialization used to need doing.
1719 It was fudged in by means of this macro; now no longer but we'll leave
1720 it in case of others. */
1721
1722 #ifdef OS_INIT
1723 OS_INIT
1724 #endif
1725
1726 /* Check a field which is patched when we are running Exim within its
1727 testing harness; do a fast initial check, and then the whole thing. */
1728
1729 f.running_in_test_harness =
1730   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1731 if (f.running_in_test_harness)
1732   debug_store = TRUE;
1733
1734 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1735 at the start of a program; however, it seems that some environments do not
1736 follow this. A "strange" locale can affect the formatting of timestamps, so we
1737 make quite sure. */
1738
1739 setlocale(LC_ALL, "C");
1740
1741 /* Get the offset between CLOCK_MONOTONIC/CLOCK_BOOTTIME and wallclock */
1742
1743 #ifdef _POSIX_MONOTONIC_CLOCK
1744 exim_clock_init();
1745 #endif
1746
1747 /* Set up the default handler for timing using alarm(). */
1748
1749 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1750
1751 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1752 because store_malloc writes a log entry on failure. */
1753
1754 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1755   exim_fail("exim: failed to get store for log buffer\n");
1756
1757 /* Initialize the default log options. */
1758
1759 bits_set(log_selector, log_selector_size, log_default);
1760
1761 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1762 NULL when the daemon is run and the file is closed. We have to use this
1763 indirection, because some systems don't allow writing to the variable "stderr".
1764 */
1765
1766 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1767
1768 /* Arrange for the PCRE regex library to use our store functions. Note that
1769 the normal calls are actually macros that add additional arguments for
1770 debugging purposes so we have to assign specially constructed functions here.
1771 The default is to use store in the stacking pool, but this is overridden in the
1772 regex_must_compile() function. */
1773
1774 pcre_malloc = function_store_get;
1775 pcre_free = function_dummy_free;
1776
1777 /* Ensure there is a big buffer for temporary use in several places. It is put
1778 in malloc store so that it can be freed for enlargement if necessary. */
1779
1780 big_buffer = store_malloc(big_buffer_size);
1781
1782 /* Set up the handler for the data request signal, and set the initial
1783 descriptive text. */
1784
1785 process_info = store_get(PROCESS_INFO_SIZE, TRUE);      /* tainted */
1786 set_process_info("initializing");
1787 os_restarting_signal(SIGUSR1, usr1_handler);
1788
1789 /* If running in a dockerized environment, the TERM signal is only
1790 delegated to the PID 1 if we request it by setting an signal handler */
1791 if (getpid() == 1) signal(SIGTERM, term_handler);
1792
1793 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1794 in the daemon code. For the rest of Exim's uses, we ignore it. */
1795
1796 signal(SIGHUP, SIG_IGN);
1797
1798 /* We don't want to die on pipe errors as the code is written to handle
1799 the write error instead. */
1800
1801 signal(SIGPIPE, SIG_IGN);
1802
1803 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1804 set to SIG_IGN. This causes subprocesses that complete before the parent
1805 process waits for them not to hang around, so when Exim calls wait(), nothing
1806 is there. The wait() code has been made robust against this, but let's ensure
1807 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1808 ending status. We use sigaction rather than plain signal() on those OS where
1809 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1810 problem on AIX with this.) */
1811
1812 #ifdef SA_NOCLDWAIT
1813   {
1814   struct sigaction act;
1815   act.sa_handler = SIG_DFL;
1816   sigemptyset(&(act.sa_mask));
1817   act.sa_flags = 0;
1818   sigaction(SIGCHLD, &act, NULL);
1819   }
1820 #else
1821 signal(SIGCHLD, SIG_DFL);
1822 #endif
1823
1824 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1825 SIGHUP. */
1826
1827 sighup_argv = argv;
1828
1829 /* Set up the version number. Set up the leading 'E' for the external form of
1830 message ids, set the pointer to the internal form, and initialize it to
1831 indicate no message being processed. */
1832
1833 version_init();
1834 message_id_option[0] = '-';
1835 message_id_external = message_id_option + 1;
1836 message_id_external[0] = 'E';
1837 message_id = message_id_external + 1;
1838 message_id[0] = 0;
1839
1840 /* Set the umask to zero so that any files Exim creates using open() are
1841 created with the modes that it specifies. NOTE: Files created with fopen() have
1842 a problem, which was not recognized till rather late (February 2006). With this
1843 umask, such files will be world writeable. (They are all content scanning files
1844 in the spool directory, which isn't world-accessible, so this is not a
1845 disaster, but it's untidy.) I don't want to change this overall setting,
1846 however, because it will interact badly with the open() calls. Instead, there's
1847 now a function called modefopen() that fiddles with the umask while calling
1848 fopen(). */
1849
1850 (void)umask(0);
1851
1852 /* Precompile the regular expression for matching a message id. Keep this in
1853 step with the code that generates ids in the accept.c module. We need to do
1854 this here, because the -M options check their arguments for syntactic validity
1855 using mac_ismsgid, which uses this. */
1856
1857 regex_ismsgid =
1858   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
1859
1860 /* Precompile the regular expression that is used for matching an SMTP error
1861 code, possibly extended, at the start of an error message. Note that the
1862 terminating whitespace character is included. */
1863
1864 regex_smtp_code =
1865   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
1866     FALSE, TRUE);
1867
1868 #ifdef WHITELIST_D_MACROS
1869 /* Precompile the regular expression used to filter the content of macros
1870 given to -D for permissibility. */
1871
1872 regex_whitelisted_macro =
1873   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
1874 #endif
1875
1876 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
1877
1878 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
1879 this seems to be a generally accepted convention, since one finds symbolic
1880 links called "mailq" in standard OS configurations. */
1881
1882 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
1883     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
1884   {
1885   list_queue = TRUE;
1886   receiving_message = FALSE;
1887   called_as = US"-mailq";
1888   }
1889
1890 /* If the program is called as "rmail" treat it as equivalent to
1891 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
1892 i.e. preventing a single dot on a line from terminating the message, and
1893 returning with zero return code, even in cases of error (provided an error
1894 message has been sent). */
1895
1896 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
1897     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
1898   {
1899   f.dot_ends = FALSE;
1900   called_as = US"-rmail";
1901   errors_sender_rc = EXIT_SUCCESS;
1902   }
1903
1904 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
1905 this is a smail convention. */
1906
1907 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
1908     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
1909   {
1910   smtp_input = smtp_batched_input = TRUE;
1911   called_as = US"-rsmtp";
1912   }
1913
1914 /* If the program is called as "runq" treat it as equivalent to "exim -q";
1915 this is a smail convention. */
1916
1917 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
1918     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
1919   {
1920   queue_interval = 0;
1921   receiving_message = FALSE;
1922   called_as = US"-runq";
1923   }
1924
1925 /* If the program is called as "newaliases" treat it as equivalent to
1926 "exim -bi"; this is a sendmail convention. */
1927
1928 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
1929     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
1930   {
1931   bi_option = TRUE;
1932   receiving_message = FALSE;
1933   called_as = US"-newaliases";
1934   }
1935
1936 /* Save the original effective uid for a couple of uses later. It should
1937 normally be root, but in some esoteric environments it may not be. */
1938
1939 original_euid = geteuid();
1940 original_egid = getegid();
1941
1942 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
1943 to be the same as the real ones. This makes a difference only if Exim is setuid
1944 (or setgid) to something other than root, which could be the case in some
1945 special configurations. */
1946
1947 real_uid = getuid();
1948 real_gid = getgid();
1949
1950 if (real_uid == root_uid)
1951   {
1952   if ((rv = setgid(real_gid)))
1953     exim_fail("exim: setgid(%ld) failed: %s\n",
1954         (long int)real_gid, strerror(errno));
1955   if ((rv = setuid(real_uid)))
1956     exim_fail("exim: setuid(%ld) failed: %s\n",
1957         (long int)real_uid, strerror(errno));
1958   }
1959
1960 /* If neither the original real uid nor the original euid was root, Exim is
1961 running in an unprivileged state. */
1962
1963 unprivileged = (real_uid != root_uid && original_euid != root_uid);
1964
1965 /* For most of the args-parsing we need to use permanent pool memory */
1966  {
1967  int old_pool = store_pool;
1968  store_pool = POOL_PERM;
1969
1970 /* Scan the program's arguments. Some can be dealt with right away; others are
1971 simply recorded for checking and handling afterwards. Do a high-level switch
1972 on the second character (the one after '-'), to save some effort. */
1973
1974  for (i = 1; i < argc; i++)
1975   {
1976   BOOL badarg = FALSE;
1977   uschar * arg = argv[i];
1978   uschar * argrest;
1979   int switchchar;
1980
1981   /* An argument not starting with '-' is the start of a recipients list;
1982   break out of the options-scanning loop. */
1983
1984   if (arg[0] != '-')
1985     {
1986     recipients_arg = i;
1987     break;
1988     }
1989
1990   /* An option consisting of -- terminates the options */
1991
1992   if (Ustrcmp(arg, "--") == 0)
1993     {
1994     recipients_arg = i + 1;
1995     break;
1996     }
1997
1998   /* Handle flagged options */
1999
2000   switchchar = arg[1];
2001   argrest = arg+2;
2002
2003   /* Make all -ex options synonymous with -oex arguments, since that
2004   is assumed by various callers. Also make -qR options synonymous with -R
2005   options, as that seems to be required as well. Allow for -qqR too, and
2006   the same for -S options. */
2007
2008   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
2009       Ustrncmp(arg+1, "qR", 2) == 0 ||
2010       Ustrncmp(arg+1, "qS", 2) == 0)
2011     {
2012     switchchar = arg[2];
2013     argrest++;
2014     }
2015   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
2016     {
2017     switchchar = arg[3];
2018     argrest += 2;
2019     f.queue_2stage = TRUE;
2020     }
2021
2022   /* Make -r synonymous with -f, since it is a documented alias */
2023
2024   else if (arg[1] == 'r') switchchar = 'f';
2025
2026   /* Make -ov synonymous with -v */
2027
2028   else if (Ustrcmp(arg, "-ov") == 0)
2029     {
2030     switchchar = 'v';
2031     argrest++;
2032     }
2033
2034   /* deal with --option_aliases */
2035   else if (switchchar == '-')
2036     {
2037     if (Ustrcmp(argrest, "help") == 0)
2038       {
2039       usage_wanted = TRUE;
2040       break;
2041       }
2042     else if (Ustrcmp(argrest, "version") == 0)
2043       {
2044       switchchar = 'b';
2045       argrest = US"V";
2046       }
2047     }
2048
2049   /* High-level switch on active initial letter */
2050
2051   switch(switchchar)
2052     {
2053
2054     /* sendmail uses -Ac and -Am to control which .cf file is used;
2055     we ignore them. */
2056     case 'A':
2057     if (!*argrest) { badarg = TRUE; break; }
2058     else
2059       {
2060       BOOL ignore = FALSE;
2061       switch (*argrest)
2062         {
2063         case 'c':
2064         case 'm':
2065           if (*(argrest + 1) == '\0')
2066             ignore = TRUE;
2067           break;
2068         }
2069       if (!ignore) badarg = TRUE;
2070       }
2071     break;
2072
2073     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2074     so has no need of it. */
2075
2076     case 'B':
2077     if (!*argrest) i++;       /* Skip over the type */
2078     break;
2079
2080
2081     case 'b':
2082       {
2083       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2084
2085       switch (*argrest++)
2086         {
2087         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2088            -bdf: Ditto, but in the foreground.
2089         */
2090         case 'd':
2091           f.daemon_listen = TRUE;
2092           if (*argrest == 'f') f.background_daemon = FALSE;
2093           else if (*argrest) badarg = TRUE;
2094           break;
2095
2096         /* -be:  Run in expansion test mode
2097            -bem: Ditto, but read a message from a file first
2098         */
2099         case 'e':
2100           expansion_test = checking = TRUE;
2101           if (*argrest == 'm')
2102             {
2103             if (++i >= argc) { badarg = TRUE; break; }
2104             expansion_test_message = argv[i];
2105             argrest++;
2106             }
2107           if (*argrest) badarg = TRUE;
2108           break;
2109
2110         /* -bF:  Run system filter test */
2111         case 'F':
2112           filter_test |= checking = FTEST_SYSTEM;
2113           if (*argrest) badarg = TRUE;
2114           else if (++i < argc) filter_test_sfile = argv[i];
2115           else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2116           break;
2117
2118         /* -bf:  Run user filter test
2119            -bfd: Set domain for filter testing
2120            -bfl: Set local part for filter testing
2121            -bfp: Set prefix for filter testing
2122            -bfs: Set suffix for filter testing
2123         */
2124         case 'f':
2125           if (!*argrest)
2126             {
2127             filter_test |= checking = FTEST_USER;
2128             if (++i < argc) filter_test_ufile = argv[i];
2129             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2130             }
2131           else
2132             {
2133             if (++i >= argc)
2134               exim_fail("exim: string expected after %s\n", arg);
2135             if (Ustrcmp(argrest, "d") == 0) ftest_domain = argv[i];
2136             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = argv[i];
2137             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = argv[i];
2138             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = argv[i];
2139             else badarg = TRUE;
2140             }
2141           break;
2142
2143         /* -bh: Host checking - an IP address must follow. */
2144         case 'h':
2145           if (!*argrest || Ustrcmp(argrest, "c") == 0)
2146             {
2147             if (++i >= argc) { badarg = TRUE; break; }
2148             sender_host_address = string_copy_taint(argv[i], TRUE);
2149             host_checking = checking = f.log_testing_mode = TRUE;
2150             f.host_checking_callout = *argrest == 'c';
2151             message_logs = FALSE;
2152             }
2153           else badarg = TRUE;
2154           break;
2155
2156         /* -bi: This option is used by sendmail to initialize *the* alias file,
2157         though it has the -oA option to specify a different file. Exim has no
2158         concept of *the* alias file, but since Sun's YP make script calls
2159         sendmail this way, some support must be provided. */
2160         case 'i':
2161           if (!*argrest) bi_option = TRUE;
2162           else badarg = TRUE;
2163           break;
2164
2165         /* -bI: provide information, of the type to follow after a colon.
2166         This is an Exim flag. */
2167         case 'I':
2168           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2169             {
2170             uschar *p = argrest+1;
2171             info_flag = CMDINFO_HELP;
2172             if (Ustrlen(p))
2173               if (strcmpic(p, CUS"sieve") == 0)
2174                 {
2175                 info_flag = CMDINFO_SIEVE;
2176                 info_stdout = TRUE;
2177                 }
2178               else if (strcmpic(p, CUS"dscp") == 0)
2179                 {
2180                 info_flag = CMDINFO_DSCP;
2181                 info_stdout = TRUE;
2182                 }
2183               else if (strcmpic(p, CUS"help") == 0)
2184                 info_stdout = TRUE;
2185             }
2186           else badarg = TRUE;
2187           break;
2188
2189         /* -bm: Accept and deliver message - the default option. Reinstate
2190         receiving_message, which got turned off for all -b options.
2191            -bmalware: test the filename given for malware */
2192         case 'm':
2193           if (!*argrest) receiving_message = TRUE;
2194           else if (Ustrcmp(argrest, "alware") == 0)
2195             {
2196             if (++i >= argc) { badarg = TRUE; break; }
2197             checking = TRUE;
2198             malware_test_file = argv[i];
2199             }
2200           else badarg = TRUE;
2201           break;
2202
2203         /* -bnq: For locally originating messages, do not qualify unqualified
2204         addresses. In the envelope, this causes errors; in header lines they
2205         just get left. */
2206         case 'n':
2207           if (Ustrcmp(argrest, "q") == 0)
2208             {
2209             f.allow_unqualified_sender = FALSE;
2210             f.allow_unqualified_recipient = FALSE;
2211             }
2212           else badarg = TRUE;
2213           break;
2214
2215         /* -bpxx: List the contents of the mail queue, in various forms. If
2216         the option is -bpc, just a queue count is needed. Otherwise, if the
2217         first letter after p is r, then order is random. */
2218         case 'p':
2219           if (*argrest == 'c')
2220             {
2221             count_queue = TRUE;
2222             if (*++argrest) badarg = TRUE;
2223             break;
2224             }
2225
2226           if (*argrest == 'r')
2227             {
2228             list_queue_option = 8;
2229             argrest++;
2230             }
2231           else list_queue_option = 0;
2232
2233           list_queue = TRUE;
2234
2235           /* -bp: List the contents of the mail queue, top-level only */
2236
2237           if (!*argrest) {}
2238
2239           /* -bpu: List the contents of the mail queue, top-level undelivered */
2240
2241           else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2242
2243           /* -bpa: List the contents of the mail queue, including all delivered */
2244
2245           else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2246
2247           /* Unknown after -bp[r] */
2248
2249           else badarg = TRUE;
2250           break;
2251
2252
2253         /* -bP: List the configuration variables given as the address list.
2254         Force -v, so configuration errors get displayed. */
2255         case 'P':
2256
2257           /* -bP config: we need to setup here, because later,
2258            * when list_options is checked, the config is read already */
2259           if (*argrest)
2260             badarg = TRUE;
2261           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2262             {
2263             list_config = TRUE;
2264             readconf_save_config(version_string);
2265             }
2266           else
2267             {
2268             list_options = TRUE;
2269             debug_selector |= D_v;
2270             debug_file = stderr;
2271             }
2272           break;
2273
2274         /* -brt: Test retry configuration lookup */
2275         case 'r':
2276           if (Ustrcmp(argrest, "t") == 0)
2277             {
2278             checking = TRUE;
2279             test_retry_arg = i + 1;
2280             goto END_ARG;
2281             }
2282
2283           /* -brw: Test rewrite configuration */
2284
2285           else if (Ustrcmp(argrest, "w") == 0)
2286             {
2287             checking = TRUE;
2288             test_rewrite_arg = i + 1;
2289             goto END_ARG;
2290             }
2291           else badarg = TRUE;
2292           break;
2293
2294         /* -bS: Read SMTP commands on standard input, but produce no replies -
2295         all errors are reported by sending messages. */
2296         case 'S':
2297           if (!*argrest)
2298             smtp_input = smtp_batched_input = receiving_message = TRUE;
2299           else badarg = TRUE;
2300           break;
2301
2302         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2303         on standard output. */
2304         case 's':
2305           if (!*argrest) smtp_input = receiving_message = TRUE;
2306           else badarg = TRUE;
2307           break;
2308
2309         /* -bt: address testing mode */
2310         case 't':
2311           if (!*argrest)
2312             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2313           else badarg = TRUE;
2314           break;
2315
2316         /* -bv: verify addresses */
2317         case 'v':
2318           if (!*argrest)
2319             verify_address_mode = checking = f.log_testing_mode = TRUE;
2320
2321         /* -bvs: verify sender addresses */
2322
2323           else if (Ustrcmp(argrest, "s") == 0)
2324             {
2325             verify_address_mode = checking = f.log_testing_mode = TRUE;
2326             verify_as_sender = TRUE;
2327             }
2328           else badarg = TRUE;
2329           break;
2330
2331         /* -bV: Print version string and support details */
2332         case 'V':
2333           if (!*argrest)
2334             {
2335             printf("Exim version %s #%s built %s\n", version_string,
2336               version_cnumber, version_date);
2337             printf("%s\n", CS version_copyright);
2338             version_printed = TRUE;
2339             show_whats_supported(stdout);
2340             f.log_testing_mode = TRUE;
2341             }
2342           else badarg = TRUE;
2343           break;
2344
2345         /* -bw: inetd wait mode, accept a listening socket as stdin */
2346         case 'w':
2347           f.inetd_wait_mode = TRUE;
2348           f.background_daemon = FALSE;
2349           f.daemon_listen = TRUE;
2350           if (*argrest)
2351             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2352               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2353           break;
2354
2355         default:
2356           badarg = TRUE;
2357           break;
2358         }
2359       break;
2360       }
2361
2362
2363     /* -C: change configuration file list; ignore if it isn't really
2364     a change! Enforce a prefix check if required. */
2365
2366     case 'C':
2367     if (!*argrest)
2368       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2369     if (Ustrcmp(config_main_filelist, argrest) != 0)
2370       {
2371       #ifdef ALT_CONFIG_PREFIX
2372       int sep = 0;
2373       int len = Ustrlen(ALT_CONFIG_PREFIX);
2374       const uschar *list = argrest;
2375       uschar *filename;
2376       /* The argv is untainted, so big_buffer (also untainted) is ok to use */
2377       while((filename = string_nextinlist(&list, &sep, big_buffer,
2378              big_buffer_size)))
2379         if (  (  Ustrlen(filename) < len
2380               || Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0
2381               || Ustrstr(filename, "/../") != NULL
2382               )
2383            && (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid)
2384            )
2385           exim_fail("-C Permission denied\n");
2386       #endif
2387       if (real_uid != root_uid)
2388         {
2389         #ifdef TRUSTED_CONFIG_LIST
2390
2391         if (real_uid != exim_uid
2392             #ifdef CONFIGURE_OWNER
2393             && real_uid != config_uid
2394             #endif
2395             )
2396           f.trusted_config = FALSE;
2397         else
2398           {
2399           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2400           if (trust_list)
2401             {
2402             struct stat statbuf;
2403
2404             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2405                 (statbuf.st_uid != root_uid        /* owner not root */
2406                  #ifdef CONFIGURE_OWNER
2407                  && statbuf.st_uid != config_uid   /* owner not the special one */
2408                  #endif
2409                    ) ||                            /* or */
2410                 (statbuf.st_gid != root_gid        /* group not root */
2411                  #ifdef CONFIGURE_GROUP
2412                  && statbuf.st_gid != config_gid   /* group not the special one */
2413                  #endif
2414                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2415                    ) ||                            /* or */
2416                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2417               {
2418               f.trusted_config = FALSE;
2419               fclose(trust_list);
2420               }
2421             else
2422               {
2423               /* Well, the trust list at least is up to scratch... */
2424               rmark reset_point;
2425               uschar *trusted_configs[32];
2426               int nr_configs = 0;
2427               int i = 0;
2428               int old_pool = store_pool;
2429               store_pool = POOL_MAIN;
2430
2431               reset_point = store_mark();
2432               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2433                 {
2434                 uschar *start = big_buffer, *nl;
2435                 while (*start && isspace(*start))
2436                 start++;
2437                 if (*start != '/')
2438                   continue;
2439                 nl = Ustrchr(start, '\n');
2440                 if (nl)
2441                   *nl = 0;
2442                 trusted_configs[nr_configs++] = string_copy(start);
2443                 if (nr_configs == nelem(trusted_configs))
2444                   break;
2445                 }
2446               fclose(trust_list);
2447
2448               if (nr_configs)
2449                 {
2450                 int sep = 0;
2451                 const uschar *list = argrest;
2452                 uschar *filename;
2453                 while (f.trusted_config && (filename = string_nextinlist(&list,
2454                         &sep, big_buffer, big_buffer_size)))
2455                   {
2456                   for (i=0; i < nr_configs; i++)
2457                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2458                       break;
2459                   if (i == nr_configs)
2460                     {
2461                     f.trusted_config = FALSE;
2462                     break;
2463                     }
2464                   }
2465                 }
2466               else      /* No valid prefixes found in trust_list file. */
2467                 f.trusted_config = FALSE;
2468               store_reset(reset_point);
2469               store_pool = old_pool;
2470               }
2471             }
2472           else          /* Could not open trust_list file. */
2473             f.trusted_config = FALSE;
2474           }
2475       #else
2476         /* Not root; don't trust config */
2477         f.trusted_config = FALSE;
2478       #endif
2479         }
2480
2481       config_main_filelist = argrest;
2482       f.config_changed = TRUE;
2483       }
2484     break;
2485
2486
2487     /* -D: set up a macro definition */
2488
2489     case 'D':
2490 #ifdef DISABLE_D_OPTION
2491       exim_fail("exim: -D is not available in this Exim binary\n");
2492 #else
2493       {
2494       int ptr = 0;
2495       macro_item *m;
2496       uschar name[24];
2497       uschar *s = argrest;
2498
2499       opt_D_used = TRUE;
2500       while (isspace(*s)) s++;
2501
2502       if (*s < 'A' || *s > 'Z')
2503         exim_fail("exim: macro name set by -D must start with "
2504           "an upper case letter\n");
2505
2506       while (isalnum(*s) || *s == '_')
2507         {
2508         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2509         s++;
2510         }
2511       name[ptr] = 0;
2512       if (ptr == 0) { badarg = TRUE; break; }
2513       while (isspace(*s)) s++;
2514       if (*s != 0)
2515         {
2516         if (*s++ != '=') { badarg = TRUE; break; }
2517         while (isspace(*s)) s++;
2518         }
2519
2520       for (m = macros_user; m; m = m->next)
2521         if (Ustrcmp(m->name, name) == 0)
2522           exim_fail("exim: duplicated -D in command line\n");
2523
2524       m = macro_create(name, s, TRUE);
2525
2526       if (clmacro_count >= MAX_CLMACROS)
2527         exim_fail("exim: too many -D options on command line\n");
2528       clmacros[clmacro_count++] =
2529         string_sprintf("-D%s=%s", m->name, m->replacement);
2530       }
2531     #endif
2532     break;
2533
2534     /* -d: Set debug level (see also -v below) or set the drop_cr option.
2535     The latter is now a no-op, retained for compatibility only. If -dd is used,
2536     debugging subprocesses of the daemon is disabled. */
2537
2538     case 'd':
2539     if (Ustrcmp(argrest, "ropcr") == 0)
2540       {
2541       /* drop_cr = TRUE; */
2542       }
2543
2544     /* Use an intermediate variable so that we don't set debugging while
2545     decoding the debugging bits. */
2546
2547     else
2548       {
2549       unsigned int selector = D_default;
2550       debug_selector = 0;
2551       debug_file = NULL;
2552       if (*argrest == 'd')
2553         {
2554         f.debug_daemon = TRUE;
2555         argrest++;
2556         }
2557       if (*argrest)
2558         decode_bits(&selector, 1, debug_notall, argrest,
2559           debug_options, debug_options_count, US"debug", 0);
2560       debug_selector = selector;
2561       }
2562     break;
2563
2564
2565     /* -E: This is a local error message. This option is not intended for
2566     external use at all, but is not restricted to trusted callers because it
2567     does no harm (just suppresses certain error messages) and if Exim is run
2568     not setuid root it won't always be trusted when it generates error
2569     messages using this option. If there is a message id following -E, point
2570     message_reference at it, for logging. */
2571
2572     case 'E':
2573     f.local_error_message = TRUE;
2574     if (mac_ismsgid(argrest)) message_reference = argrest;
2575     break;
2576
2577
2578     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2579     option, so it looks as if historically the -oex options are also callable
2580     without the leading -o. So we have to accept them. Before the switch,
2581     anything starting -oe has been converted to -e. Exim does not support all
2582     of the sendmail error options. */
2583
2584     case 'e':
2585     if (Ustrcmp(argrest, "e") == 0)
2586       {
2587       arg_error_handling = ERRORS_SENDER;
2588       errors_sender_rc = EXIT_SUCCESS;
2589       }
2590     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2591     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2592     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2593     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2594     else badarg = TRUE;
2595     break;
2596
2597
2598     /* -F: Set sender's full name, used instead of the gecos entry from
2599     the password file. Since users can usually alter their gecos entries,
2600     there's no security involved in using this instead. The data can follow
2601     the -F or be in the next argument. */
2602
2603     case 'F':
2604     if (!*argrest)
2605       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2606     originator_name = string_copy_taint(argrest, TRUE);
2607     f.sender_name_forced = TRUE;
2608     break;
2609
2610
2611     /* -f: Set sender's address - this value is only actually used if Exim is
2612     run by a trusted user, or if untrusted_set_sender is set and matches the
2613     address, except that the null address can always be set by any user. The
2614     test for this happens later, when the value given here is ignored when not
2615     permitted. For an untrusted user, the actual sender is still put in Sender:
2616     if it doesn't match the From: header (unless no_local_from_check is set).
2617     The data can follow the -f or be in the next argument. The -r switch is an
2618     obsolete form of -f but since there appear to be programs out there that
2619     use anything that sendmail has ever supported, better accept it - the
2620     synonymizing is done before the switch above.
2621
2622     At this stage, we must allow domain literal addresses, because we don't
2623     know what the setting of allow_domain_literals is yet. Ditto for trailing
2624     dots and strip_trailing_dot. */
2625
2626     case 'f':
2627       {
2628       int dummy_start, dummy_end;
2629       uschar *errmess;
2630       if (!*argrest)
2631         if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
2632       if (!*argrest)
2633         *(sender_address = store_get(1, FALSE)) = '\0';  /* Ensure writeable memory */
2634       else
2635         {
2636         uschar * temp = argrest + Ustrlen(argrest) - 1;
2637         while (temp >= argrest && isspace(*temp)) temp--;
2638         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2639         allow_domain_literals = TRUE;
2640         strip_trailing_dot = TRUE;
2641 #ifdef SUPPORT_I18N
2642         allow_utf8_domains = TRUE;
2643 #endif
2644         if (!(sender_address = parse_extract_address(argrest, &errmess,
2645                   &dummy_start, &dummy_end, &sender_address_domain, TRUE)))
2646           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2647
2648         sender_address = string_copy_taint(sender_address, TRUE);
2649 #ifdef SUPPORT_I18N
2650         message_smtputf8 =  string_is_utf8(sender_address);
2651         allow_utf8_domains = FALSE;
2652 #endif
2653         allow_domain_literals = FALSE;
2654         strip_trailing_dot = FALSE;
2655         }
2656       f.sender_address_forced = TRUE;
2657       }
2658     break;
2659
2660     /* -G: sendmail invocation to specify that it's a gateway submission and
2661     sendmail may complain about problems instead of fixing them.
2662     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2663     not at this time complain about problems. */
2664
2665     case 'G':
2666     flag_G = TRUE;
2667     break;
2668
2669     /* -h: Set the hop count for an incoming message. Exim does not currently
2670     support this; it always computes it by counting the Received: headers.
2671     To put it in will require a change to the spool header file format. */
2672
2673     case 'h':
2674     if (!*argrest)
2675       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2676     if (!isdigit(*argrest)) badarg = TRUE;
2677     break;
2678
2679
2680     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2681     not to be documented for sendmail but mailx (at least) uses it) */
2682
2683     case 'i':
2684     if (!*argrest) f.dot_ends = FALSE; else badarg = TRUE;
2685     break;
2686
2687
2688     /* -L: set the identifier used for syslog; equivalent to setting
2689     syslog_processname in the config file, but needs to be an admin option. */
2690
2691     case 'L':
2692     if (!*argrest)
2693       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2694     if ((sz = Ustrlen(argrest)) > 32)
2695       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2696     if (sz < 1)
2697       exim_fail("exim: the -L syslog name is too short\n");
2698     cmdline_syslog_name = string_copy_taint(argrest, TRUE);
2699     break;
2700
2701     case 'M':
2702     receiving_message = FALSE;
2703
2704     /* -MC:  continue delivery of another message via an existing open
2705     file descriptor. This option is used for an internal call by the
2706     smtp transport when there is a pending message waiting to go to an
2707     address to which it has got a connection. Five subsequent arguments are
2708     required: transport name, host name, IP address, sequence number, and
2709     message_id. Transports may decline to create new processes if the sequence
2710     number gets too big. The channel is stdin. This (-MC) must be the last
2711     argument. There's a subsequent check that the real-uid is privileged.
2712
2713     If we are running in the test harness. delay for a bit, to let the process
2714     that set this one up complete. This makes for repeatability of the logging,
2715     etc. output. */
2716
2717     if (Ustrcmp(argrest, "C") == 0)
2718       {
2719       union sockaddr_46 interface_sock;
2720       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2721
2722       if (argc != i + 6)
2723         exim_fail("exim: too many or too few arguments after -MC\n");
2724
2725       if (msg_action_arg >= 0)
2726         exim_fail("exim: incompatible arguments\n");
2727
2728       continue_transport = string_copy_taint(argv[++i], TRUE);
2729       continue_hostname = string_copy_taint(argv[++i], TRUE);
2730       continue_host_address = string_copy_taint(argv[++i], TRUE);
2731       continue_sequence = Uatoi(argv[++i]);
2732       msg_action = MSG_DELIVER;
2733       msg_action_arg = ++i;
2734       forced_delivery = TRUE;
2735       queue_run_pid = passed_qr_pid;
2736       queue_run_pipe = passed_qr_pipe;
2737
2738       if (!mac_ismsgid(argv[i]))
2739         exim_fail("exim: malformed message id %s after -MC option\n",
2740           argv[i]);
2741
2742       /* Set up $sending_ip_address and $sending_port, unless proxied */
2743
2744       if (!continue_proxy_cipher)
2745         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2746             &size) == 0)
2747           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2748             &sending_port);
2749         else
2750           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2751             strerror(errno));
2752
2753       testharness_pause_ms(500);
2754       break;
2755       }
2756
2757     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2758       {
2759       switch(argrest[1])
2760         {
2761     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2762     precedes -MC (see above). The flag indicates that the host to which
2763     Exim is connected has accepted an AUTH sequence. */
2764
2765         case 'A': f.smtp_authenticated = TRUE; break;
2766
2767     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2768        that exim is connected to supports the esmtp extension DSN */
2769
2770         case 'D': smtp_peer_options |= OPTION_DSN; break;
2771
2772     /* -MCd: for debug, set a process-purpose string */
2773
2774         case 'd': if (++i < argc)
2775                     process_purpose = string_copy_taint(argv[i], TRUE);
2776                   else badarg = TRUE;
2777                   break;
2778
2779     /* -MCG: set the queue name, to a non-default value */
2780
2781         case 'G': if (++i < argc) queue_name = string_copy_taint(argv[i], TRUE);
2782                   else badarg = TRUE;
2783                   break;
2784
2785     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2786
2787         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2788
2789     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2790     it preceded -MC (see above) */
2791
2792         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2793
2794     /* -MCQ: pass on the pid of the queue-running process that started
2795     this chain of deliveries and the fd of its synchronizing pipe; this
2796     is useful only when it precedes -MC (see above) */
2797
2798         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
2799                   else badarg = TRUE;
2800                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
2801                   else badarg = TRUE;
2802                   break;
2803
2804     /* -MCq: do a quota check on the given recipient for the given size
2805     of message.  Separate from -MC. */
2806         case 'q': rcpt_verify_quota = TRUE;
2807                   if (++i < argc) message_size = Uatoi(argv[i]);
2808                   else badarg = TRUE;
2809                   break;
2810
2811     /* -MCS: set the smtp_use_size flag; this is useful only when it
2812     precedes -MC (see above) */
2813
2814         case 'S': smtp_peer_options |= OPTION_SIZE; break;
2815
2816 #ifndef DISABLE_TLS
2817     /* -MCs: used with -MCt; SNI was sent */
2818     /* -MCr: ditto, DANE */
2819
2820         case 'r':
2821         case 's': if (++i < argc)
2822                     {
2823                     continue_proxy_sni = string_copy_taint(argv[i], TRUE);
2824                     if (argrest[1] == 'r') continue_proxy_dane = TRUE;
2825                     }
2826                   else badarg = TRUE;
2827                   break;
2828
2829     /* -MCt: similar to -MCT below but the connection is still open
2830     via a proxy process which handles the TLS context and coding.
2831     Require three arguments for the proxied local address and port,
2832     and the TLS cipher. */
2833
2834         case 't': if (++i < argc)
2835                     sending_ip_address = string_copy_taint(argv[i], TRUE);
2836                   else badarg = TRUE;
2837                   if (++i < argc)
2838                     sending_port = (int)(Uatol(argv[i]));
2839                   else badarg = TRUE;
2840                   if (++i < argc)
2841                     continue_proxy_cipher = string_copy_taint(argv[i], TRUE);
2842                   else badarg = TRUE;
2843                   /*FALLTHROUGH*/
2844
2845     /* -MCT: set the tls_offered flag; this is useful only when it
2846     precedes -MC (see above). The flag indicates that the host to which
2847     Exim is connected has offered TLS support. */
2848
2849         case 'T': smtp_peer_options |= OPTION_TLS; break;
2850 #endif
2851
2852         default:  badarg = TRUE; break;
2853         }
2854       break;
2855       }
2856
2857     /* -M[x]: various operations on the following list of message ids:
2858        -M    deliver the messages, ignoring next retry times and thawing
2859        -Mc   deliver the messages, checking next retry times, no thawing
2860        -Mf   freeze the messages
2861        -Mg   give up on the messages
2862        -Mt   thaw the messages
2863        -Mrm  remove the messages
2864     In the above cases, this must be the last option. There are also the
2865     following options which are followed by a single message id, and which
2866     act on that message. Some of them use the "recipient" addresses as well.
2867        -Mar  add recipient(s)
2868        -Mmad mark all recipients delivered
2869        -Mmd  mark recipients(s) delivered
2870        -Mes  edit sender
2871        -Mset load a message for use with -be
2872        -Mvb  show body
2873        -Mvc  show copy (of whole message, in RFC 2822 format)
2874        -Mvh  show header
2875        -Mvl  show log
2876     */
2877
2878     else if (!*argrest)
2879       {
2880       msg_action = MSG_DELIVER;
2881       forced_delivery = f.deliver_force_thaw = TRUE;
2882       }
2883     else if (Ustrcmp(argrest, "ar") == 0)
2884       {
2885       msg_action = MSG_ADD_RECIPIENT;
2886       one_msg_action = TRUE;
2887       }
2888     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
2889     else if (Ustrcmp(argrest, "es") == 0)
2890       {
2891       msg_action = MSG_EDIT_SENDER;
2892       one_msg_action = TRUE;
2893       }
2894     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
2895     else if (Ustrcmp(argrest, "g") == 0)
2896       {
2897       msg_action = MSG_DELIVER;
2898       deliver_give_up = TRUE;
2899       }
2900    else if (Ustrcmp(argrest, "G") == 0)
2901       {
2902       msg_action = MSG_SETQUEUE;
2903       queue_name_dest = string_copy_taint(argv[++i], TRUE);
2904       }
2905     else if (Ustrcmp(argrest, "mad") == 0)
2906       {
2907       msg_action = MSG_MARK_ALL_DELIVERED;
2908       }
2909     else if (Ustrcmp(argrest, "md") == 0)
2910       {
2911       msg_action = MSG_MARK_DELIVERED;
2912       one_msg_action = TRUE;
2913       }
2914     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
2915     else if (Ustrcmp(argrest, "set") == 0)
2916       {
2917       msg_action = MSG_LOAD;
2918       one_msg_action = TRUE;
2919       }
2920     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
2921     else if (Ustrcmp(argrest, "vb") == 0)
2922       {
2923       msg_action = MSG_SHOW_BODY;
2924       one_msg_action = TRUE;
2925       }
2926     else if (Ustrcmp(argrest, "vc") == 0)
2927       {
2928       msg_action = MSG_SHOW_COPY;
2929       one_msg_action = TRUE;
2930       }
2931     else if (Ustrcmp(argrest, "vh") == 0)
2932       {
2933       msg_action = MSG_SHOW_HEADER;
2934       one_msg_action = TRUE;
2935       }
2936     else if (Ustrcmp(argrest, "vl") == 0)
2937       {
2938       msg_action = MSG_SHOW_LOG;
2939       one_msg_action = TRUE;
2940       }
2941     else { badarg = TRUE; break; }
2942
2943     /* All the -Mxx options require at least one message id. */
2944
2945     msg_action_arg = i + 1;
2946     if (msg_action_arg >= argc)
2947       exim_fail("exim: no message ids given after %s option\n", arg);
2948
2949     /* Some require only message ids to follow */
2950
2951     if (!one_msg_action)
2952       {
2953       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
2954         exim_fail("exim: malformed message id %s after %s option\n",
2955           argv[j], arg);
2956       goto END_ARG;   /* Remaining args are ids */
2957       }
2958
2959     /* Others require only one message id, possibly followed by addresses,
2960     which will be handled as normal arguments. */
2961
2962     else
2963       {
2964       if (!mac_ismsgid(argv[msg_action_arg]))
2965         exim_fail("exim: malformed message id %s after %s option\n",
2966           argv[msg_action_arg], arg);
2967       i++;
2968       }
2969     break;
2970
2971
2972     /* Some programs seem to call the -om option without the leading o;
2973     for sendmail it askes for "me too". Exim always does this. */
2974
2975     case 'm':
2976     if (*argrest) badarg = TRUE;
2977     break;
2978
2979
2980     /* -N: don't do delivery - a debugging option that stops transports doing
2981     their thing. It implies debugging at the D_v level. */
2982
2983     case 'N':
2984     if (!*argrest)
2985       {
2986       f.dont_deliver = TRUE;
2987       debug_selector |= D_v;
2988       debug_file = stderr;
2989       }
2990     else badarg = TRUE;
2991     break;
2992
2993
2994     /* -n: This means "don't alias" in sendmail, apparently.
2995     For normal invocations, it has no effect.
2996     It may affect some other options. */
2997
2998     case 'n':
2999     flag_n = TRUE;
3000     break;
3001
3002     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
3003     option to the specified value. This form uses long names. We need to handle
3004     -O option=value and -Ooption=value. */
3005
3006     case 'O':
3007     if (!*argrest)
3008       if (++i >= argc)
3009         exim_fail("exim: string expected after -O\n");
3010     break;
3011
3012     case 'o':
3013     switch (*argrest++)
3014       {
3015       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
3016       file" option). */
3017       case 'A':
3018         if (!*(alias_arg = argrest))
3019           if (i+1 < argc) alias_arg = argv[++i];
3020           else exim_fail("exim: string expected after -oA\n");
3021         break;
3022
3023       /* -oB: Set a connection message max value for remote deliveries */
3024       case 'B':
3025         {
3026         uschar * p = argrest;
3027         if (!*p)
3028           if (i+1 < argc && isdigit((argv[i+1][0])))
3029             p = argv[++i];
3030           else
3031             {
3032             connection_max_messages = 1;
3033             p = NULL;
3034             }
3035
3036         if (p)
3037           {
3038           if (!isdigit(*p))
3039             exim_fail("exim: number expected after -oB\n");
3040           connection_max_messages = Uatoi(p);
3041           }
3042         }
3043         break;
3044
3045       /* -odb: background delivery */
3046
3047       case 'd':
3048         if (Ustrcmp(argrest, "b") == 0)
3049           {
3050           f.synchronous_delivery = FALSE;
3051           arg_queue_only = FALSE;
3052           queue_only_set = TRUE;
3053           }
3054
3055       /* -odd: testsuite-only: add no inter-process delays */
3056
3057         else if (Ustrcmp(argrest, "d") == 0)
3058           f.testsuite_delays = FALSE;
3059
3060       /* -odf: foreground delivery (smail-compatible option); same effect as
3061          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3062       */
3063
3064         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3065           {
3066           f.synchronous_delivery = TRUE;
3067           arg_queue_only = FALSE;
3068           queue_only_set = TRUE;
3069           }
3070
3071       /* -odq: queue only */
3072
3073         else if (Ustrcmp(argrest, "q") == 0)
3074           {
3075           f.synchronous_delivery = FALSE;
3076           arg_queue_only = TRUE;
3077           queue_only_set = TRUE;
3078           }
3079
3080       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3081       but no remote delivery */
3082
3083         else if (Ustrcmp(argrest, "qs") == 0)
3084           {
3085           f.queue_smtp = TRUE;
3086           arg_queue_only = FALSE;
3087           queue_only_set = TRUE;
3088           }
3089         else badarg = TRUE;
3090         break;
3091
3092       /* -oex: Sendmail error flags. As these are also accepted without the
3093       leading -o prefix, for compatibility with vacation and other callers,
3094       they are handled with -e above. */
3095
3096       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3097          -oitrue: Another sendmail syntax for the same */
3098
3099       case 'i':
3100         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3101           f.dot_ends = FALSE;
3102         else badarg = TRUE;
3103         break;
3104
3105     /* -oM*: Set various characteristics for an incoming message; actually
3106     acted on for trusted callers only. */
3107
3108       case 'M':
3109         {
3110         if (i+1 >= argc)
3111           exim_fail("exim: data expected after -oM%s\n", argrest);
3112
3113         /* -oMa: Set sender host address */
3114
3115         if (Ustrcmp(argrest, "a") == 0)
3116           sender_host_address = string_copy_taint(argv[++i], TRUE);
3117
3118         /* -oMaa: Set authenticator name */
3119
3120         else if (Ustrcmp(argrest, "aa") == 0)
3121           sender_host_authenticated = string_copy_taint(argv[++i], TRUE);
3122
3123         /* -oMas: setting authenticated sender */
3124
3125         else if (Ustrcmp(argrest, "as") == 0)
3126           authenticated_sender = string_copy_taint(argv[++i], TRUE);
3127
3128         /* -oMai: setting authenticated id */
3129
3130         else if (Ustrcmp(argrest, "ai") == 0)
3131           authenticated_id = string_copy_taint(argv[++i], TRUE);
3132
3133         /* -oMi: Set incoming interface address */
3134
3135         else if (Ustrcmp(argrest, "i") == 0)
3136           interface_address = string_copy_taint(argv[++i], TRUE);
3137
3138         /* -oMm: Message reference */
3139
3140         else if (Ustrcmp(argrest, "m") == 0)
3141           {
3142           if (!mac_ismsgid(argv[i+1]))
3143               exim_fail("-oMm must be a valid message ID\n");
3144           if (!f.trusted_config)
3145               exim_fail("-oMm must be called by a trusted user/config\n");
3146             message_reference = argv[++i];
3147           }
3148
3149         /* -oMr: Received protocol */
3150
3151         else if (Ustrcmp(argrest, "r") == 0)
3152
3153           if (received_protocol)
3154             exim_fail("received_protocol is set already\n");
3155           else
3156             received_protocol = string_copy_taint(argv[++i], TRUE);
3157
3158         /* -oMs: Set sender host name */
3159
3160         else if (Ustrcmp(argrest, "s") == 0)
3161           sender_host_name = string_copy_taint(argv[++i], TRUE);
3162
3163         /* -oMt: Set sender ident */
3164
3165         else if (Ustrcmp(argrest, "t") == 0)
3166           {
3167           sender_ident_set = TRUE;
3168           sender_ident = string_copy_taint(argv[++i], TRUE);
3169           }
3170
3171         /* Else a bad argument */
3172
3173         else
3174           badarg = TRUE;
3175         }
3176         break;
3177
3178       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3179       seem to call this as -m (undocumented), so that is also accepted (see
3180       above). */
3181       /* -oo: An ancient flag for old-style addresses which still seems to
3182       crop up in some calls (see in SCO). */
3183
3184       case 'm':
3185       case 'o':
3186         if (*argrest) badarg = TRUE;
3187         break;
3188
3189       /* -oP <name>: set pid file path for daemon
3190          -oPX:       delete pid file of daemon */
3191
3192       case 'P':
3193         if (!*argrest) override_pid_file_path = argv[++i];
3194         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3195         else badarg = TRUE;
3196         break;
3197
3198
3199       /* -or <n>: set timeout for non-SMTP acceptance
3200          -os <n>: set timeout for SMTP acceptance */
3201
3202       case 'r':
3203       case 's':
3204         {
3205         int * tp = argrest[-1] == 'r'
3206           ? &arg_receive_timeout : &arg_smtp_receive_timeout;
3207         if (*argrest)
3208           *tp = readconf_readtime(argrest, 0, FALSE);
3209         else if (i+1 < argc)
3210           *tp = readconf_readtime(argv[++i], 0, FALSE);
3211
3212         if (*tp < 0)
3213           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3214         }
3215         break;
3216
3217       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3218
3219       case 'X':
3220         if (*argrest) badarg = TRUE;
3221         else override_local_interfaces = string_copy_taint(argv[++i], TRUE);
3222         break;
3223
3224       /* -oY: Override creation of daemon notifier socket */
3225
3226       case 'Y':
3227         if (*argrest) badarg = TRUE;
3228         else notifier_socket = NULL;
3229         break;
3230
3231       /* Unknown -o argument */
3232
3233       default:
3234         badarg = TRUE;
3235       }
3236     break;
3237
3238
3239     /* -ps: force Perl startup; -pd force delayed Perl startup */
3240
3241     case 'p':
3242     #ifdef EXIM_PERL
3243     if (*argrest == 's' && argrest[1] == 0)
3244       {
3245       perl_start_option = 1;
3246       break;
3247       }
3248     if (*argrest == 'd' && argrest[1] == 0)
3249       {
3250       perl_start_option = -1;
3251       break;
3252       }
3253     #endif
3254
3255     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3256     which sets the host protocol and host name */
3257
3258     if (!*argrest)
3259       if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
3260
3261     if (*argrest)
3262       {
3263       uschar * hn = Ustrchr(argrest, ':');
3264
3265       if (received_protocol)
3266         exim_fail("received_protocol is set already\n");
3267
3268       if (!hn)
3269         received_protocol = string_copy_taint(argrest, TRUE);
3270       else
3271         {
3272         received_protocol = string_copyn_taint(argrest, hn - argrest, TRUE);
3273         sender_host_name = string_copy_taint(hn + 1, TRUE);
3274         }
3275       }
3276     break;
3277
3278
3279     case 'q':
3280     receiving_message = FALSE;
3281     if (queue_interval >= 0)
3282       exim_fail("exim: -q specified more than once\n");
3283
3284     /* -qq...: Do queue runs in a 2-stage manner */
3285
3286     if (*argrest == 'q')
3287       {
3288       f.queue_2stage = TRUE;
3289       argrest++;
3290       }
3291
3292     /* -qi...: Do only first (initial) deliveries */
3293
3294     if (*argrest == 'i')
3295       {
3296       f.queue_run_first_delivery = TRUE;
3297       argrest++;
3298       }
3299
3300     /* -qf...: Run the queue, forcing deliveries
3301        -qff..: Ditto, forcing thawing as well */
3302
3303     if (*argrest == 'f')
3304       {
3305       f.queue_run_force = TRUE;
3306       if (*++argrest == 'f')
3307         {
3308         f.deliver_force_thaw = TRUE;
3309         argrest++;
3310         }
3311       }
3312
3313     /* -q[f][f]l...: Run the queue only on local deliveries */
3314
3315     if (*argrest == 'l')
3316       {
3317       f.queue_run_local = TRUE;
3318       argrest++;
3319       }
3320
3321     /* -q[f][f][l][G<name>]... Work on the named queue */
3322
3323     if (*argrest == 'G')
3324       {
3325       int i;
3326       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3327       queue_name = string_copyn(argrest, i);
3328       argrest += i;
3329       if (*argrest == '/') argrest++;
3330       }
3331
3332     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3333     only, optionally named, optionally starting from a given message id. */
3334
3335     if (!(list_queue || count_queue))
3336       if (  !*argrest
3337          && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3338         {
3339         queue_interval = 0;
3340         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3341           start_queue_run_id = string_copy_taint(argv[++i], TRUE);
3342         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3343           stop_queue_run_id = string_copy_taint(argv[++i], TRUE);
3344         }
3345
3346     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3347     forced, optionally local only, optionally named. */
3348
3349       else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3350                                                   0, FALSE)) <= 0)
3351         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3352     break;
3353
3354
3355     case 'R':   /* Synonymous with -qR... */
3356     receiving_message = FALSE;
3357
3358     /* -Rf:   As -R (below) but force all deliveries,
3359        -Rff:  Ditto, but also thaw all frozen messages,
3360        -Rr:   String is regex
3361        -Rrf:  Regex and force
3362        -Rrff: Regex and force and thaw
3363
3364     in all cases provided there are no further characters in this
3365     argument. */
3366
3367     if (*argrest)
3368       for (int i = 0; i < nelem(rsopts); i++)
3369         if (Ustrcmp(argrest, rsopts[i]) == 0)
3370           {
3371           if (i != 2) f.queue_run_force = TRUE;
3372           if (i >= 2) f.deliver_selectstring_regex = TRUE;
3373           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3374           argrest += Ustrlen(rsopts[i]);
3375           }
3376
3377     /* -R: Set string to match in addresses for forced queue run to
3378     pick out particular messages. */
3379
3380     if (*argrest)
3381       deliver_selectstring = string_copy_taint(argrest, TRUE);
3382     else if (i+1 < argc)
3383       deliver_selectstring = string_copy_taint(argv[++i], TRUE);
3384     else
3385       exim_fail("exim: string expected after -R\n");
3386     break;
3387
3388
3389     /* -r: an obsolete synonym for -f (see above) */
3390
3391
3392     /* -S: Like -R but works on sender. */
3393
3394     case 'S':   /* Synonymous with -qS... */
3395     receiving_message = FALSE;
3396
3397     /* -Sf:   As -S (below) but force all deliveries,
3398        -Sff:  Ditto, but also thaw all frozen messages,
3399        -Sr:   String is regex
3400        -Srf:  Regex and force
3401        -Srff: Regex and force and thaw
3402
3403     in all cases provided there are no further characters in this
3404     argument. */
3405
3406     if (*argrest)
3407       for (int i = 0; i < nelem(rsopts); i++)
3408         if (Ustrcmp(argrest, rsopts[i]) == 0)
3409           {
3410           if (i != 2) f.queue_run_force = TRUE;
3411           if (i >= 2) f.deliver_selectstring_sender_regex = TRUE;
3412           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3413           argrest += Ustrlen(rsopts[i]);
3414           }
3415
3416     /* -S: Set string to match in addresses for forced queue run to
3417     pick out particular messages. */
3418
3419     if (*argrest)
3420       deliver_selectstring_sender = string_copy_taint(argrest, TRUE);
3421     else if (i+1 < argc)
3422       deliver_selectstring_sender = string_copy_taint(argv[++i], TRUE);
3423     else
3424       exim_fail("exim: string expected after -S\n");
3425     break;
3426
3427     /* -Tqt is an option that is exclusively for use by the testing suite.
3428     It is not recognized in other circumstances. It allows for the setting up
3429     of explicit "queue times" so that various warning/retry things can be
3430     tested. Otherwise variability of clock ticks etc. cause problems. */
3431
3432     case 'T':
3433     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3434       fudged_queue_times = string_copy_taint(argv[++i], TRUE);
3435     else badarg = TRUE;
3436     break;
3437
3438
3439     /* -t: Set flag to extract recipients from body of message. */
3440
3441     case 't':
3442     if (!*argrest) extract_recipients = TRUE;
3443
3444     /* -ti: Set flag to extract recipients from body of message, and also
3445     specify that dot does not end the message. */
3446
3447     else if (Ustrcmp(argrest, "i") == 0)
3448       {
3449       extract_recipients = TRUE;
3450       f.dot_ends = FALSE;
3451       }
3452
3453     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3454
3455     #ifndef DISABLE_TLS
3456     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3457     #endif
3458
3459     else badarg = TRUE;
3460     break;
3461
3462
3463     /* -U: This means "initial user submission" in sendmail, apparently. The
3464     doc claims that in future sendmail may refuse syntactically invalid
3465     messages instead of fixing them. For the moment, we just ignore it. */
3466
3467     case 'U':
3468     break;
3469
3470
3471     /* -v: verify things - this is a very low-level debugging */
3472
3473     case 'v':
3474     if (!*argrest)
3475       {
3476       debug_selector |= D_v;
3477       debug_file = stderr;
3478       }
3479     else badarg = TRUE;
3480     break;
3481
3482
3483     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3484
3485       The -x flag tells the sendmail command that mail from a local
3486       mail program has National Language Support (NLS) extended characters
3487       in the body of the mail item. The sendmail command can send mail with
3488       extended NLS characters across networks that normally corrupts these
3489       8-bit characters.
3490
3491     As Exim is 8-bit clean, it just ignores this flag. */
3492
3493     case 'x':
3494     if (*argrest) badarg = TRUE;
3495     break;
3496
3497     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3498     logs to that file.  We swallow the parameter and otherwise ignore it. */
3499
3500     case 'X':
3501     if (!*argrest)
3502       if (++i >= argc)
3503         exim_fail("exim: string expected after -X\n");
3504     break;
3505
3506     case 'z':
3507     if (!*argrest)
3508       if (++i < argc)
3509         log_oneline = string_copy_taint(argv[i], TRUE);
3510       else
3511         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3512     break;
3513
3514     /* All other initial characters are errors */
3515
3516     default:
3517     badarg = TRUE;
3518     break;
3519     }         /* End of high-level switch statement */
3520
3521   /* Failed to recognize the option, or syntax error */
3522
3523   if (badarg)
3524     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3525       "option %s\n", arg);
3526   }
3527
3528
3529 /* If -R or -S have been specified without -q, assume a single queue run. */
3530
3531  if (  (deliver_selectstring || deliver_selectstring_sender)
3532     && queue_interval < 0)
3533   queue_interval = 0;
3534
3535
3536 END_ARG:
3537  store_pool = old_pool;
3538  }
3539
3540 /* If usage_wanted is set we call the usage function - which never returns */
3541 if (usage_wanted) exim_usage(called_as);
3542
3543 /* Arguments have been processed. Check for incompatibilities. */
3544 if (  (  (smtp_input || extract_recipients || recipients_arg < argc)
3545       && (  f.daemon_listen || queue_interval >= 0 || bi_option
3546          || test_retry_arg >= 0 || test_rewrite_arg >= 0
3547          || filter_test != FTEST_NONE
3548          || msg_action_arg > 0 && !one_msg_action
3549       )  )
3550    || (  msg_action_arg > 0
3551       && (  f.daemon_listen || queue_interval > 0 || list_options
3552          || checking && msg_action != MSG_LOAD
3553          || bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0
3554       )  )
3555    || (  (f.daemon_listen || queue_interval > 0)
3556       && (  sender_address || list_options || list_queue || checking
3557          || bi_option
3558       )  )
3559    || f.daemon_listen && queue_interval == 0
3560    || f.inetd_wait_mode && queue_interval >= 0
3561    || (  list_options
3562       && (  checking || smtp_input || extract_recipients
3563          || filter_test != FTEST_NONE || bi_option
3564       )  )
3565    || (  verify_address_mode
3566       && (  f.address_test_mode || smtp_input || extract_recipients
3567          || filter_test != FTEST_NONE || bi_option
3568       )  )
3569    || (  f.address_test_mode
3570       && (  smtp_input || extract_recipients || filter_test != FTEST_NONE
3571          || bi_option
3572       )  )
3573    || (  smtp_input
3574       && (sender_address || filter_test != FTEST_NONE || extract_recipients)
3575       )
3576    || deliver_selectstring && queue_interval < 0
3577    || msg_action == MSG_LOAD && (!expansion_test || expansion_test_message)
3578    )
3579   exim_fail("exim: incompatible command-line options or arguments\n");
3580
3581 /* If debugging is set up, set the file and the file descriptor to pass on to
3582 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3583 to run in the foreground. */
3584
3585 if (debug_selector != 0)
3586   {
3587   debug_file = stderr;
3588   debug_fd = fileno(debug_file);
3589   f.background_daemon = FALSE;
3590   testharness_pause_ms(100);   /* lets caller finish */
3591   if (debug_selector != D_v)    /* -v only doesn't show this */
3592     {
3593     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3594       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3595       debug_selector);
3596     if (!version_printed)
3597       show_whats_supported(stderr);
3598     }
3599   }
3600
3601 /* When started with root privilege, ensure that the limits on the number of
3602 open files and the number of processes (where that is accessible) are
3603 sufficiently large, or are unset, in case Exim has been called from an
3604 environment where the limits are screwed down. Not all OS have the ability to
3605 change some of these limits. */
3606
3607 if (unprivileged)
3608   {
3609   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3610   }
3611 else
3612   {
3613   struct rlimit rlp;
3614
3615   #ifdef RLIMIT_NOFILE
3616   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3617     {
3618     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3619       strerror(errno));
3620     rlp.rlim_cur = rlp.rlim_max = 0;
3621     }
3622
3623   /* I originally chose 1000 as a nice big number that was unlikely to
3624   be exceeded. It turns out that some older OS have a fixed upper limit of
3625   256. */
3626
3627   if (rlp.rlim_cur < 1000)
3628     {
3629     rlp.rlim_cur = rlp.rlim_max = 1000;
3630     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3631       {
3632       rlp.rlim_cur = rlp.rlim_max = 256;
3633       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3634         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3635           strerror(errno));
3636       }
3637     }
3638   #endif
3639
3640   #ifdef RLIMIT_NPROC
3641   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3642     {
3643     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3644       strerror(errno));
3645     rlp.rlim_cur = rlp.rlim_max = 0;
3646     }
3647
3648   #ifdef RLIM_INFINITY
3649   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3650     {
3651     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3652   #else
3653   if (rlp.rlim_cur < 1000)
3654     {
3655     rlp.rlim_cur = rlp.rlim_max = 1000;
3656   #endif
3657     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3658       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3659         strerror(errno));
3660     }
3661   #endif
3662   }
3663
3664 /* Exim is normally entered as root (but some special configurations are
3665 possible that don't do this). However, it always spins off sub-processes that
3666 set their uid and gid as required for local delivery. We don't want to pass on
3667 any extra groups that root may belong to, so we want to get rid of them all at
3668 this point.
3669
3670 We need to obey setgroups() at this stage, before possibly giving up root
3671 privilege for a changed configuration file, but later on we might need to
3672 check on the additional groups for the admin user privilege - can't do that
3673 till after reading the config, which might specify the exim gid. Therefore,
3674 save the group list here first. */
3675
3676 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3677   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3678
3679 /* There is a fundamental difference in some BSD systems in the matter of
3680 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3681 known not to be different. On the "different" systems there is a single group
3682 list, and the first entry in it is the current group. On all other versions of
3683 Unix there is a supplementary group list, which is in *addition* to the current
3684 group. Consequently, to get rid of all extraneous groups on a "standard" system
3685 you pass over 0 groups to setgroups(), while on a "different" system you pass
3686 over a single group - the current group, which is always the first group in the
3687 list. Calling setgroups() with zero groups on a "different" system results in
3688 an error return. The following code should cope with both types of system.
3689
3690  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
3691  the "setgroups() with zero groups" - and changes the egid.
3692  Thanks to that we had to stash the original_egid above, for use below
3693  in the call to exim_setugid().
3694
3695 However, if this process isn't running as root, setgroups() can't be used
3696 since you have to be root to run it, even if throwing away groups.
3697 Except, sigh, for Hurd - where you can.
3698 Not being root here happens only in some unusual configurations. */
3699
3700 if (  !unprivileged
3701 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
3702    && setgroups(0, NULL) != 0
3703 #endif
3704    && setgroups(1, group_list) != 0)
3705   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
3706
3707 /* If the configuration file name has been altered by an argument on the
3708 command line (either a new file name or a macro definition) and the caller is
3709 not root, or if this is a filter testing run, remove any setuid privilege the
3710 program has and run as the underlying user.
3711
3712 The exim user is locked out of this, which severely restricts the use of -C
3713 for some purposes.
3714
3715 Otherwise, set the real ids to the effective values (should be root unless run
3716 from inetd, which it can either be root or the exim uid, if one is configured).
3717
3718 There is a private mechanism for bypassing some of this, in order to make it
3719 possible to test lots of configurations automatically, without having either to
3720 recompile each time, or to patch in an actual configuration file name and other
3721 values (such as the path name). If running in the test harness, pretend that
3722 configuration file changes and macro definitions haven't happened. */
3723
3724 if ((                                            /* EITHER */
3725     (!f.trusted_config ||                          /* Config changed, or */
3726      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
3727     real_uid != root_uid &&                      /* Not root, and */
3728     !f.running_in_test_harness                     /* Not fudged */
3729     ) ||                                         /*   OR   */
3730     expansion_test                               /* expansion testing */
3731     ||                                           /*   OR   */
3732     filter_test != FTEST_NONE)                   /* Filter testing */
3733   {
3734   setgroups(group_count, group_list);
3735   exim_setugid(real_uid, real_gid, FALSE,
3736     US"-C, -D, -be or -bf forces real uid");
3737   removed_privilege = TRUE;
3738
3739   /* In the normal case when Exim is called like this, stderr is available
3740   and should be used for any logging information because attempts to write
3741   to the log will usually fail. To arrange this, we unset really_exim. However,
3742   if no stderr is available there is no point - we might as well have a go
3743   at the log (if it fails, syslog will be written).
3744
3745   Note that if the invoker is Exim, the logs remain available. Messing with
3746   this causes unlogged successful deliveries.  */
3747
3748   if (log_stderr && real_uid != exim_uid)
3749     f.really_exim = FALSE;
3750   }
3751
3752 /* Privilege is to be retained for the moment. It may be dropped later,
3753 depending on the job that this Exim process has been asked to do. For now, set
3754 the real uid to the effective so that subsequent re-execs of Exim are done by a
3755 privileged user. */
3756
3757 else
3758   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
3759
3760 /* If testing a filter, open the file(s) now, before wasting time doing other
3761 setups and reading the message. */
3762
3763 if (filter_test & FTEST_SYSTEM)
3764   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
3765     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
3766       strerror(errno));
3767
3768 if (filter_test & FTEST_USER)
3769   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
3770     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
3771       strerror(errno));
3772
3773 /* Initialise lookup_list
3774 If debugging, already called above via version reporting.
3775 In either case, we initialise the list of available lookups while running
3776 as root.  All dynamically modules are loaded from a directory which is
3777 hard-coded into the binary and is code which, if not a module, would be
3778 part of Exim already.  Ability to modify the content of the directory
3779 is equivalent to the ability to modify a setuid binary!
3780
3781 This needs to happen before we read the main configuration. */
3782 init_lookup_list();
3783
3784 #ifdef SUPPORT_I18N
3785 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
3786 #endif
3787
3788 /* Read the main runtime configuration data; this gives up if there
3789 is a failure. It leaves the configuration file open so that the subsequent
3790 configuration data for delivery can be read if needed.
3791
3792 NOTE: immediately after opening the configuration file we change the working
3793 directory to "/"! Later we change to $spool_directory. We do it there, because
3794 during readconf_main() some expansion takes place already. */
3795
3796 /* Store the initial cwd before we change directories.  Can be NULL if the
3797 dir has already been unlinked. */
3798 initial_cwd = os_getcwd(NULL, 0);
3799
3800 /* checking:
3801     -be[m] expansion test        -
3802     -b[fF] filter test           new
3803     -bh[c] host test             -
3804     -bmalware malware_test_file  new
3805     -brt   retry test            new
3806     -brw   rewrite test          new
3807     -bt    address test          -
3808     -bv[s] address verify        -
3809    list_options:
3810     -bP <option> (except -bP config, which sets list_config)
3811
3812 If any of these options is set, we suppress warnings about configuration
3813 issues (currently about tls_advertise_hosts and keep_environment not being
3814 defined) */
3815
3816   {
3817 #ifdef MEASURE_TIMING
3818   struct timeval t0, diff;
3819   (void)gettimeofday(&t0, NULL);
3820 #endif
3821
3822   readconf_main(checking || list_options);
3823
3824 #ifdef MEASURE_TIMING
3825   report_time_since(&t0, US"readconf_main (delta)");
3826 #endif
3827   }
3828
3829
3830 /* Now in directory "/" */
3831
3832 if (cleanup_environment() == FALSE)
3833   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
3834
3835
3836 /* If an action on specific messages is requested, or if a daemon or queue
3837 runner is being started, we need to know if Exim was called by an admin user.
3838 This is the case if the real user is root or exim, or if the real group is
3839 exim, or if one of the supplementary groups is exim or a group listed in
3840 admin_groups. We don't fail all message actions immediately if not admin_user,
3841 since some actions can be performed by non-admin users. Instead, set admin_user
3842 for later interrogation. */
3843
3844 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
3845   f.admin_user = TRUE;
3846 else
3847   for (int i = 0; i < group_count && !f.admin_user; i++)
3848     if (group_list[i] == exim_gid)
3849       f.admin_user = TRUE;
3850     else if (admin_groups)
3851       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
3852         if (admin_groups[j] == group_list[i])
3853           f.admin_user = TRUE;
3854
3855 /* Another group of privileged users are the trusted users. These are root,
3856 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
3857 are permitted to specify sender_addresses with -f on the command line, and
3858 other message parameters as well. */
3859
3860 if (real_uid == root_uid || real_uid == exim_uid)
3861   f.trusted_caller = TRUE;
3862 else
3863   {
3864   if (trusted_users)
3865     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
3866       if (trusted_users[i] == real_uid)
3867         f.trusted_caller = TRUE;
3868
3869   if (trusted_groups)
3870     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
3871       if (trusted_groups[i] == real_gid)
3872         f.trusted_caller = TRUE;
3873       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
3874         if (trusted_groups[i] == group_list[j])
3875           f.trusted_caller = TRUE;
3876   }
3877
3878 /* At this point, we know if the user is privileged and some command-line
3879 options become possibly impermissible, depending upon the configuration file. */
3880
3881 if (checking && commandline_checks_require_admin && !f.admin_user)
3882   exim_fail("exim: those command-line flags are set to require admin\n");
3883
3884 /* Handle the decoding of logging options. */
3885
3886 decode_bits(log_selector, log_selector_size, log_notall,
3887   log_selector_string, log_options, log_options_count, US"log", 0);
3888
3889 DEBUG(D_any)
3890   {
3891   debug_printf("configuration file is %s\n", config_main_filename);
3892   debug_printf("log selectors =");
3893   for (int i = 0; i < log_selector_size; i++)
3894     debug_printf(" %08x", log_selector[i]);
3895   debug_printf("\n");
3896   }
3897
3898 /* If domain literals are not allowed, check the sender address that was
3899 supplied with -f. Ditto for a stripped trailing dot. */
3900
3901 if (sender_address)
3902   {
3903   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
3904     exim_fail("exim: bad -f address \"%s\": domain literals not "
3905       "allowed\n", sender_address);
3906   if (f_end_dot && !strip_trailing_dot)
3907     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
3908       "(trailing dot not allowed)\n", sender_address);
3909   }
3910
3911 /* See if an admin user overrode our logging. */
3912
3913 if (cmdline_syslog_name)
3914   if (f.admin_user)
3915     {
3916     syslog_processname = cmdline_syslog_name;
3917     log_file_path = string_copy(CUS"syslog");
3918     }
3919   else
3920     /* not a panic, non-privileged users should not be able to spam paniclog */
3921     exim_fail(
3922         "exim: you lack sufficient privilege to specify syslog process name\n");
3923
3924 /* Paranoia check of maximum lengths of certain strings. There is a check
3925 on the length of the log file path in log.c, which will come into effect
3926 if there are any calls to write the log earlier than this. However, if we
3927 get this far but the string is very long, it is better to stop now than to
3928 carry on and (e.g.) receive a message and then have to collapse. The call to
3929 log_write() from here will cause the ultimate panic collapse if the complete
3930 file name exceeds the buffer length. */
3931
3932 if (Ustrlen(log_file_path) > 200)
3933   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3934     "log_file_path is longer than 200 chars: aborting");
3935
3936 if (Ustrlen(pid_file_path) > 200)
3937   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3938     "pid_file_path is longer than 200 chars: aborting");
3939
3940 if (Ustrlen(spool_directory) > 200)
3941   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3942     "spool_directory is longer than 200 chars: aborting");
3943
3944 /* Length check on the process name given to syslog for its TAG field,
3945 which is only permitted to be 32 characters or less. See RFC 3164. */
3946
3947 if (Ustrlen(syslog_processname) > 32)
3948   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3949     "syslog_processname is longer than 32 chars: aborting");
3950
3951 if (log_oneline)
3952   if (f.admin_user)
3953     {
3954     log_write(0, LOG_MAIN, "%s", log_oneline);
3955     return EXIT_SUCCESS;
3956     }
3957   else
3958     return EXIT_FAILURE;
3959
3960 /* In some operating systems, the environment variable TMPDIR controls where
3961 temporary files are created; Exim doesn't use these (apart from when delivering
3962 to MBX mailboxes), but called libraries such as DBM libraries may require them.
3963 If TMPDIR is found in the environment, reset it to the value defined in the
3964 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
3965 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
3966 EXIM_TMPDIR by the build scripts.
3967 */
3968
3969 #ifdef EXIM_TMPDIR
3970   if (environ) for (uschar ** p = USS environ; *p; p++)
3971     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
3972       {
3973       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
3974       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
3975       *p = newp;
3976       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
3977       }
3978 #endif
3979
3980 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
3981 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
3982 we may need to get rid of a bogus timezone setting. This can arise when Exim is
3983 called by a user who has set the TZ variable. This then affects the timestamps
3984 in log files and in Received: headers, and any created Date: header lines. The
3985 required timezone is settable in the configuration file, so nothing can be done
3986 about this earlier - but hopefully nothing will normally be logged earlier than
3987 this. We have to make a new environment if TZ is wrong, but don't bother if
3988 timestamps_utc is set, because then all times are in UTC anyway. */
3989
3990 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
3991   f.timestamps_utc = TRUE;
3992 else
3993   {
3994   uschar *envtz = US getenv("TZ");
3995   if (envtz
3996       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
3997       : timezone_string != NULL
3998      )
3999     {
4000     uschar **p = USS environ;
4001     uschar **new;
4002     uschar **newp;
4003     int count = 0;
4004     if (environ) while (*p++) count++;
4005     if (!envtz) count++;
4006     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4007     if (environ) for (p = USS environ; *p; p++)
4008       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4009     if (timezone_string)
4010       {
4011       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4012       sprintf(CS *newp++, "TZ=%s", timezone_string);
4013       }
4014     *newp = NULL;
4015     environ = CSS new;
4016     tzset();
4017     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4018       tod_stamp(tod_log));
4019     }
4020   }
4021
4022 /* Handle the case when we have removed the setuid privilege because of -C or
4023 -D. This means that the caller of Exim was not root.
4024
4025 There is a problem if we were running as the Exim user. The sysadmin may
4026 expect this case to retain privilege because "the binary was called by the
4027 Exim user", but it hasn't, because either the -D option set macros, or the
4028 -C option set a non-trusted configuration file. There are two possibilities:
4029
4030   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4031       to do message deliveries. Thus, the fact that it is running as a
4032       non-privileged user is plausible, and might be wanted in some special
4033       configurations. However, really_exim will have been set false when
4034       privilege was dropped, to stop Exim trying to write to its normal log
4035       files. Therefore, re-enable normal log processing, assuming the sysadmin
4036       has set up the log directory correctly.
4037
4038   (2) If deliver_drop_privilege is not set, the configuration won't work as
4039       apparently intended, and so we log a panic message. In order to retain
4040       root for -C or -D, the caller must either be root or be invoking a
4041       trusted configuration file (when deliver_drop_privilege is false). */
4042
4043 if (  removed_privilege
4044    && (!f.trusted_config || opt_D_used)
4045    && real_uid == exim_uid)
4046   if (deliver_drop_privilege)
4047     f.really_exim = TRUE; /* let logging work normally */
4048   else
4049     log_write(0, LOG_MAIN|LOG_PANIC,
4050       "exim user lost privilege for using %s option",
4051       f.trusted_config? "-D" : "-C");
4052
4053 /* Start up Perl interpreter if Perl support is configured and there is a
4054 perl_startup option, and the configuration or the command line specifies
4055 initializing starting. Note that the global variables are actually called
4056 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4057
4058 #ifdef EXIM_PERL
4059 if (perl_start_option != 0)
4060   opt_perl_at_start = (perl_start_option > 0);
4061 if (opt_perl_at_start && opt_perl_startup != NULL)
4062   {
4063   uschar *errstr;
4064   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4065   if ((errstr = init_perl(opt_perl_startup)))
4066     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4067   opt_perl_started = TRUE;
4068   }
4069 #endif /* EXIM_PERL */
4070
4071 /* Log the arguments of the call if the configuration file said so. This is
4072 a debugging feature for finding out what arguments certain MUAs actually use.
4073 Don't attempt it if logging is disabled, or if listing variables or if
4074 verifying/testing addresses or expansions. */
4075
4076 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4077    && f.really_exim && !list_options && !checking)
4078   {
4079   uschar *p = big_buffer;
4080   Ustrcpy(p, US"cwd= (failed)");
4081
4082   if (!initial_cwd)
4083     p += 13;
4084   else
4085     {
4086     Ustrncpy(p + 4, initial_cwd, big_buffer_size-5);
4087     p += 4 + Ustrlen(initial_cwd);
4088     /* in case p is near the end and we don't provide enough space for
4089      * string_format to be willing to write. */
4090     *p = '\0';
4091     }
4092
4093   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4094   while (*p) p++;
4095   for (int i = 0; i < argc; i++)
4096     {
4097     int len = Ustrlen(argv[i]);
4098     const uschar *printing;
4099     uschar *quote;
4100     if (p + len + 8 >= big_buffer + big_buffer_size)
4101       {
4102       Ustrcpy(p, US" ...");
4103       log_write(0, LOG_MAIN, "%s", big_buffer);
4104       Ustrcpy(big_buffer, US"...");
4105       p = big_buffer + 3;
4106       }
4107     printing = string_printing(argv[i]);
4108     if (!*printing) quote = US"\"";
4109     else
4110       {
4111       const uschar *pp = printing;
4112       quote = US"";
4113       while (*pp) if (isspace(*pp++)) { quote = US"\""; break; }
4114       }
4115     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4116       (p - big_buffer) - 4), printing, quote);
4117     }
4118
4119   if (LOGGING(arguments))
4120     log_write(0, LOG_MAIN, "%s", big_buffer);
4121   else
4122     debug_printf("%s\n", big_buffer);
4123   }
4124
4125 /* Set the working directory to be the top-level spool directory. We don't rely
4126 on this in the code, which always uses fully qualified names, but it's useful
4127 for core dumps etc. Don't complain if it fails - the spool directory might not
4128 be generally accessible and calls with the -C option (and others) have lost
4129 privilege by now. Before the chdir, we try to ensure that the directory exists.
4130 */
4131
4132 if (Uchdir(spool_directory) != 0)
4133   {
4134   (void) directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4135   (void) Uchdir(spool_directory);
4136   }
4137
4138 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4139 alias file. Exim doesn't have such a concept, but this call is screwed into
4140 Sun's YP makefiles. Handle this by calling a configured script, as the real
4141 user who called Exim. The -oA option can be used to pass an argument to the
4142 script. */
4143
4144 if (bi_option)
4145   {
4146   (void) fclose(config_file);
4147   if (bi_command && *bi_command)
4148     {
4149     int i = 0;
4150     uschar *argv[3];
4151     argv[i++] = bi_command;
4152     if (alias_arg) argv[i++] = alias_arg;
4153     argv[i++] = NULL;
4154
4155     setgroups(group_count, group_list);
4156     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4157
4158     DEBUG(D_exec) debug_printf("exec '%.256s' %s%.256s%s\n", argv[0],
4159       argv[1] ? "'" : "", argv[1] ? argv[1] : US"", argv[1] ? "'" : "");
4160
4161     execv(CS argv[0], (char *const *)argv);
4162     exim_fail("exim: exec '%s' failed: %s\n", argv[0], strerror(errno));
4163     }
4164   else
4165     {
4166     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4167     exit(EXIT_SUCCESS);
4168     }
4169   }
4170
4171 /* We moved the admin/trusted check to be immediately after reading the
4172 configuration file.  We leave these prints here to ensure that syslog setup,
4173 logfile setup, and so on has already happened. */
4174
4175 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4176 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4177
4178 /* Only an admin user may start the daemon or force a queue run in the default
4179 configuration, but the queue run restriction can be relaxed. Only an admin
4180 user may request that a message be returned to its sender forthwith. Only an
4181 admin user may specify a debug level greater than D_v (because it might show
4182 passwords, etc. in lookup queries). Only an admin user may request a queue
4183 count. Only an admin user can use the test interface to scan for email
4184 (because Exim will be in the spool dir and able to look at mails). */
4185
4186 if (!f.admin_user)
4187   {
4188   BOOL debugset = (debug_selector & ~D_v) != 0;
4189   if (  deliver_give_up || f.daemon_listen || malware_test_file
4190      || count_queue && queue_list_requires_admin
4191      || list_queue && queue_list_requires_admin
4192      || queue_interval >= 0 && prod_requires_admin
4193      || queue_name_dest && prod_requires_admin
4194      || debugset && !f.running_in_test_harness
4195      )
4196     exim_fail("exim:%s permission denied\n", debugset ? " debugging" : "");
4197   }
4198
4199 /* If the real user is not root or the exim uid, the argument for passing
4200 in an open TCP/IP connection for another message is not permitted, nor is
4201 running with the -N option for any delivery action, unless this call to exim is
4202 one that supplied an input message, or we are using a patched exim for
4203 regression testing. */
4204
4205 if (  real_uid != root_uid && real_uid != exim_uid
4206    && (  continue_hostname
4207       || (  f.dont_deliver
4208          && (queue_interval >= 0 || f.daemon_listen || msg_action_arg > 0)
4209       )  )
4210    && !f.running_in_test_harness
4211    )
4212   exim_fail("exim: Permission denied\n");
4213
4214 /* If the caller is not trusted, certain arguments are ignored when running for
4215 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4216 Note that authority for performing certain actions on messages is tested in the
4217 queue_action() function. */
4218
4219 if (!f.trusted_caller && !checking)
4220   {
4221   sender_host_name = sender_host_address = interface_address =
4222     sender_ident = received_protocol = NULL;
4223   sender_host_port = interface_port = 0;
4224   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4225   }
4226
4227 /* If a sender host address is set, extract the optional port number off the
4228 end of it and check its syntax. Do the same thing for the interface address.
4229 Exim exits if the syntax is bad. */
4230
4231 else
4232   {
4233   if (sender_host_address)
4234     sender_host_port = check_port(sender_host_address);
4235   if (interface_address)
4236     interface_port = check_port(interface_address);
4237   }
4238
4239 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4240 if (flag_G)
4241   {
4242   if (f.trusted_caller)
4243     {
4244     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4245     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4246     }
4247   else
4248     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4249   }
4250
4251 /* If an SMTP message is being received check to see if the standard input is a
4252 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4253 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4254 barf. */
4255
4256 if (smtp_input)
4257   {
4258   union sockaddr_46 inetd_sock;
4259   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4260   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4261     {
4262     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4263     if (family == AF_INET || family == AF_INET6)
4264       {
4265       union sockaddr_46 interface_sock;
4266       size = sizeof(interface_sock);
4267
4268       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4269         interface_address = host_ntoa(-1, &interface_sock, NULL,
4270           &interface_port);
4271
4272       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4273
4274       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4275         {
4276         f.is_inetd = TRUE;
4277         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4278           NULL, &sender_host_port);
4279         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4280           "inetd is not supported when mua_wrapper is set");
4281         }
4282       else
4283         exim_fail(
4284           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4285       }
4286     }
4287   }
4288
4289 /* If the load average is going to be needed while receiving a message, get it
4290 now for those OS that require the first call to os_getloadavg() to be done as
4291 root. There will be further calls later for each message received. */
4292
4293 #ifdef LOAD_AVG_NEEDS_ROOT
4294 if (  receiving_message
4295    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4296   load_average = OS_GETLOADAVG();
4297 #endif
4298
4299 /* The queue_only configuration option can be overridden by -odx on the command
4300 line, except that if queue_only_override is false, queue_only cannot be unset
4301 from the command line. */
4302
4303 if (queue_only_set && (queue_only_override || arg_queue_only))
4304   queue_only = arg_queue_only;
4305
4306 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4307 -or and -os. */
4308
4309 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4310 if (arg_smtp_receive_timeout >= 0)
4311   smtp_receive_timeout = arg_smtp_receive_timeout;
4312
4313 /* If Exim was started with root privilege, unless we have already removed the
4314 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4315 except when starting the daemon or doing some kind of delivery or address
4316 testing (-bt). These are the only cases when root need to be retained. We run
4317 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4318 retained only for starting the daemon. We always do the initgroups() in this
4319 situation (controlled by the TRUE below), in order to be as close as possible
4320 to the state Exim usually runs in. */
4321
4322 if (  !unprivileged                             /* originally had root AND */
4323    && !removed_privilege                        /* still got root AND      */
4324    && !f.daemon_listen                          /* not starting the daemon */
4325    && queue_interval <= 0                       /* (either kind of daemon) */
4326    && (                                         /*    AND EITHER           */
4327          deliver_drop_privilege                 /* requested unprivileged  */
4328       || (                                      /*       OR                */
4329             queue_interval < 0                  /* not running the queue   */
4330          && (  msg_action_arg < 0               /*       and               */
4331             || msg_action != MSG_DELIVER        /* not delivering          */
4332             )                                   /*       and               */
4333          && (!checking || !f.address_test_mode) /* not address checking    */
4334          && !rcpt_verify_quota                  /* and not quota checking  */
4335    )  )  )
4336   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4337
4338 /* When we are retaining a privileged uid, we still change to the exim gid. */
4339
4340 else
4341   {
4342   int rv;
4343   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4344   rv = setgid(exim_gid);
4345   /* Impact of failure is that some stuff might end up with an incorrect group.
4346   We track this for failures from root, since any attempt to change privilege
4347   by root should succeed and failures should be examined.  For non-root,
4348   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4349   no need to complain then. */
4350   if (rv == -1)
4351     if (!(unprivileged || removed_privilege))
4352       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4353     else
4354       {
4355       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4356           (long int)exim_gid, strerror(errno));
4357       }
4358   }
4359
4360 /* Handle a request to scan a file for malware */
4361 if (malware_test_file)
4362   {
4363 #ifdef WITH_CONTENT_SCAN
4364   int result;
4365   set_process_info("scanning file for malware");
4366   if ((result = malware_in_file(malware_test_file)) == FAIL)
4367     {
4368     printf("No malware found.\n");
4369     exit(EXIT_SUCCESS);
4370     }
4371   if (result != OK)
4372     {
4373     printf("Malware lookup returned non-okay/fail: %d\n", result);
4374     exit(EXIT_FAILURE);
4375     }
4376   if (malware_name)
4377     printf("Malware found: %s\n", malware_name);
4378   else
4379     printf("Malware scan detected malware of unknown name.\n");
4380 #else
4381   printf("Malware scanning not enabled at compile time.\n");
4382 #endif
4383   exit(EXIT_FAILURE);
4384   }
4385
4386 /* Handle a request to list the delivery queue */
4387
4388 if (list_queue)
4389   {
4390   set_process_info("listing the queue");
4391   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4392   exit(EXIT_SUCCESS);
4393   }
4394
4395 /* Handle a request to count the delivery queue */
4396
4397 if (count_queue)
4398   {
4399   set_process_info("counting the queue");
4400   fprintf(stdout, "%u\n", queue_count());
4401   exit(EXIT_SUCCESS);
4402   }
4403
4404 /* Handle actions on specific messages, except for the force delivery and
4405 message load actions, which are done below. Some actions take a whole list of
4406 message ids, which are known to continue up to the end of the arguments. Others
4407 take a single message id and then operate on the recipients list. */
4408
4409 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4410   {
4411   int yield = EXIT_SUCCESS;
4412   set_process_info("acting on specified messages");
4413
4414   /* ACL definitions may be needed when removing a message (-Mrm) because
4415   event_action gets expanded */
4416
4417   if (msg_action == MSG_REMOVE)
4418     readconf_rest();
4419
4420   if (!one_msg_action)
4421     {
4422     for (i = msg_action_arg; i < argc; i++)
4423       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4424         yield = EXIT_FAILURE;
4425     switch (msg_action)
4426       {
4427       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4428       default: printf("\n"); break;
4429       }
4430     }
4431
4432   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4433     recipients_arg)) yield = EXIT_FAILURE;
4434   exit(yield);
4435   }
4436
4437 /* We used to set up here to skip reading the ACL section, on
4438  (msg_action_arg > 0 || (queue_interval == 0 && !f.daemon_listen)
4439 Now, since the intro of the ${acl } expansion, ACL definitions may be
4440 needed in transports so we lost the optimisation. */
4441
4442   {
4443 #ifdef MEASURE_TIMING
4444   struct timeval t0, diff;
4445   (void)gettimeofday(&t0, NULL);
4446 #endif
4447
4448   readconf_rest();
4449
4450 #ifdef MEASURE_TIMING
4451   report_time_since(&t0, US"readconf_rest (delta)");
4452 #endif
4453   }
4454
4455 /* Handle a request to check quota */
4456 if (rcpt_verify_quota)
4457   if (real_uid != root_uid && real_uid != exim_uid)
4458     exim_fail("exim: Permission denied\n");
4459   else if (recipients_arg >= argc)
4460     exim_fail("exim: missing recipient for quota check\n");
4461   else
4462     {
4463     verify_quota(argv[recipients_arg]);
4464     exim_exit(EXIT_SUCCESS);
4465     }
4466
4467 /* Handle the -brt option. This is for checking out retry configurations.
4468 The next three arguments are a domain name or a complete address, and
4469 optionally two error numbers. All it does is to call the function that
4470 scans the retry configuration data. */
4471
4472 if (test_retry_arg >= 0)
4473   {
4474   retry_config *yield;
4475   int basic_errno = 0;
4476   int more_errno = 0;
4477   uschar *s1, *s2;
4478
4479   if (test_retry_arg >= argc)
4480     {
4481     printf("-brt needs a domain or address argument\n");
4482     exim_exit(EXIT_FAILURE);
4483     }
4484   s1 = argv[test_retry_arg++];
4485   s2 = NULL;
4486
4487   /* If the first argument contains no @ and no . it might be a local user
4488   or it might be a single-component name. Treat as a domain. */
4489
4490   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4491     {
4492     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4493       "being \ntreated as a one-component domain, not as a local part.\n\n",
4494       s1);
4495     }
4496
4497   /* There may be an optional second domain arg. */
4498
4499   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4500     s2 = argv[test_retry_arg++];
4501
4502   /* The final arg is an error name */
4503
4504   if (test_retry_arg < argc)
4505     {
4506     uschar *ss = argv[test_retry_arg];
4507     uschar *error =
4508       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4509     if (error != NULL)
4510       {
4511       printf("%s\n", CS error);
4512       return EXIT_FAILURE;
4513       }
4514
4515     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4516     code > 100 as an error is for matching codes to the decade. Turn them into
4517     a real error code, off the decade. */
4518
4519     if (basic_errno == ERRNO_MAIL4XX ||
4520         basic_errno == ERRNO_RCPT4XX ||
4521         basic_errno == ERRNO_DATA4XX)
4522       {
4523       int code = (more_errno >> 8) & 255;
4524       if (code == 255)
4525         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4526       else if (code > 100)
4527         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4528       }
4529     }
4530
4531   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4532     printf("No retry information found\n");
4533   else
4534     {
4535     more_errno = yield->more_errno;
4536     printf("Retry rule: %s  ", yield->pattern);
4537
4538     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4539       {
4540       printf("quota%s%s  ",
4541         (more_errno > 0)? "_" : "",
4542         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4543       }
4544     else if (yield->basic_errno == ECONNREFUSED)
4545       {
4546       printf("refused%s%s  ",
4547         (more_errno > 0)? "_" : "",
4548         (more_errno == 'M')? "MX" :
4549         (more_errno == 'A')? "A" : "");
4550       }
4551     else if (yield->basic_errno == ETIMEDOUT)
4552       {
4553       printf("timeout");
4554       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4555       more_errno &= 255;
4556       if (more_errno != 0) printf("_%s",
4557         (more_errno == 'M')? "MX" : "A");
4558       printf("  ");
4559       }
4560     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4561       printf("auth_failed  ");
4562     else printf("*  ");
4563
4564     for (retry_rule * r = yield->rules; r; r = r->next)
4565       {
4566       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4567       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4568       if (r->rule == 'G')
4569         {
4570         int x = r->p2;
4571         int f = x % 1000;
4572         int d = 100;
4573         printf(",%d.", x/1000);
4574         do
4575           {
4576           printf("%d", f/d);
4577           f %= d;
4578           d /= 10;
4579           }
4580         while (f != 0);
4581         }
4582       printf("; ");
4583       }
4584
4585     printf("\n");
4586     }
4587   exim_exit(EXIT_SUCCESS);
4588   }
4589
4590 /* Handle a request to list one or more configuration options */
4591 /* If -n was set, we suppress some information */
4592
4593 if (list_options)
4594   {
4595   BOOL fail = FALSE;
4596   set_process_info("listing variables");
4597   if (recipients_arg >= argc)
4598     fail = !readconf_print(US"all", NULL, flag_n);
4599   else for (i = recipients_arg; i < argc; i++)
4600     {
4601     if (i < argc - 1 &&
4602         (Ustrcmp(argv[i], "router") == 0 ||
4603          Ustrcmp(argv[i], "transport") == 0 ||
4604          Ustrcmp(argv[i], "authenticator") == 0 ||
4605          Ustrcmp(argv[i], "macro") == 0 ||
4606          Ustrcmp(argv[i], "environment") == 0))
4607       {
4608       fail |= !readconf_print(argv[i+1], argv[i], flag_n);
4609       i++;
4610       }
4611     else
4612       fail = !readconf_print(argv[i], NULL, flag_n);
4613     }
4614   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS);
4615   }
4616
4617 if (list_config)
4618   {
4619   set_process_info("listing config");
4620   exim_exit(readconf_print(US"config", NULL, flag_n)
4621                 ? EXIT_SUCCESS : EXIT_FAILURE);
4622   }
4623
4624
4625 /* Initialise subsystems as required. */
4626
4627 tcp_init();
4628
4629 /* Handle a request to deliver one or more messages that are already on the
4630 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4631 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4632
4633 Delivery of specific messages is typically used for a small number when
4634 prodding by hand (when the option forced_delivery will be set) or when
4635 re-execing to regain root privilege. Each message delivery must happen in a
4636 separate process, so we fork a process for each one, and run them sequentially
4637 so that debugging output doesn't get intertwined, and to avoid spawning too
4638 many processes if a long list is given. However, don't fork for the last one;
4639 this saves a process in the common case when Exim is called to deliver just one
4640 message. */
4641
4642 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4643   {
4644   if (prod_requires_admin && !f.admin_user)
4645     {
4646     fprintf(stderr, "exim: Permission denied\n");
4647     exim_exit(EXIT_FAILURE);
4648     }
4649   set_process_info("delivering specified messages");
4650   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4651   for (i = msg_action_arg; i < argc; i++)
4652     {
4653     int status;
4654     pid_t pid;
4655     /*XXX This use of argv[i] for msg_id should really be tainted, but doing
4656     that runs into a later copy into the untainted global message_id[] */
4657     if (i == argc - 1)
4658       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4659     else if ((pid = exim_fork(US"cmdline-delivery")) == 0)
4660       {
4661       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4662       exim_underbar_exit(EXIT_SUCCESS);
4663       }
4664     else if (pid < 0)
4665       {
4666       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4667         strerror(errno));
4668       exim_exit(EXIT_FAILURE);
4669       }
4670     else wait(&status);
4671     }
4672   exim_exit(EXIT_SUCCESS);
4673   }
4674
4675
4676 /* If only a single queue run is requested, without SMTP listening, we can just
4677 turn into a queue runner, with an optional starting message id. */
4678
4679 if (queue_interval == 0 && !f.daemon_listen)
4680   {
4681   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4682     start_queue_run_id ? US" starting at " : US"",
4683     start_queue_run_id ? start_queue_run_id: US"",
4684     stop_queue_run_id ?  US" stopping at " : US"",
4685     stop_queue_run_id ?  stop_queue_run_id : US"");
4686   if (*queue_name)
4687     set_process_info("running the '%s' queue (single queue run)", queue_name);
4688   else
4689     set_process_info("running the queue (single queue run)");
4690   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4691   exim_exit(EXIT_SUCCESS);
4692   }
4693
4694
4695 /* Find the login name of the real user running this process. This is always
4696 needed when receiving a message, because it is written into the spool file. It
4697 may also be used to construct a from: or a sender: header, and in this case we
4698 need the user's full name as well, so save a copy of it, checked for RFC822
4699 syntax and munged if necessary, if it hasn't previously been set by the -F
4700 argument. We may try to get the passwd entry more than once, in case NIS or
4701 other delays are in evidence. Save the home directory for use in filter testing
4702 (only). */
4703
4704 for (i = 0;;)
4705   {
4706   if ((pw = getpwuid(real_uid)) != NULL)
4707     {
4708     originator_login = string_copy(US pw->pw_name);
4709     originator_home = string_copy(US pw->pw_dir);
4710
4711     /* If user name has not been set by -F, set it from the passwd entry
4712     unless -f has been used to set the sender address by a trusted user. */
4713
4714     if (!originator_name)
4715       {
4716       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
4717         {
4718         uschar *name = US pw->pw_gecos;
4719         uschar *amp = Ustrchr(name, '&');
4720         uschar buffer[256];
4721
4722         /* Most Unix specify that a '&' character in the gecos field is
4723         replaced by a copy of the login name, and some even specify that
4724         the first character should be upper cased, so that's what we do. */
4725
4726         if (amp)
4727           {
4728           int loffset;
4729           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
4730             (int)(amp - name), name, &loffset, originator_login, amp + 1);
4731           buffer[loffset] = toupper(buffer[loffset]);
4732           name = buffer;
4733           }
4734
4735         /* If a pattern for matching the gecos field was supplied, apply
4736         it and then expand the name string. */
4737
4738         if (gecos_pattern && gecos_name)
4739           {
4740           const pcre *re;
4741           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
4742
4743           if (regex_match_and_setup(re, name, 0, -1))
4744             {
4745             uschar *new_name = expand_string(gecos_name);
4746             expand_nmax = -1;
4747             if (new_name)
4748               {
4749               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
4750                 "gecos field \"%s\"\n", new_name, name);
4751               name = new_name;
4752               }
4753             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
4754               "\"%s\": %s\n", gecos_name, expand_string_message);
4755             }
4756           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
4757             "gecos field \"%s\"\n", gecos_pattern, name);
4758           store_free((void *)re);
4759           }
4760         originator_name = string_copy(name);
4761         }
4762
4763       /* A trusted caller has used -f but not -F */
4764
4765       else originator_name = US"";
4766       }
4767
4768     /* Break the retry loop */
4769
4770     break;
4771     }
4772
4773   if (++i > finduser_retries) break;
4774   sleep(1);
4775   }
4776
4777 /* If we cannot get a user login, log the incident and give up, unless the
4778 configuration specifies something to use. When running in the test harness,
4779 any setting of unknown_login overrides the actual name. */
4780
4781 if (!originator_login || f.running_in_test_harness)
4782   {
4783   if (unknown_login)
4784     {
4785     originator_login = expand_string(unknown_login);
4786     if (!originator_name && unknown_username)
4787       originator_name = expand_string(unknown_username);
4788     if (!originator_name) originator_name = US"";
4789     }
4790   if (!originator_login)
4791     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
4792       (int)real_uid);
4793   }
4794
4795 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
4796 RFC822 address.*/
4797
4798 originator_name = US parse_fix_phrase(originator_name, Ustrlen(originator_name));
4799
4800 /* If a message is created by this call of Exim, the uid/gid of its originator
4801 are those of the caller. These values are overridden if an existing message is
4802 read in from the spool. */
4803
4804 originator_uid = real_uid;
4805 originator_gid = real_gid;
4806
4807 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
4808   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
4809
4810 /* Run in daemon and/or queue-running mode. The function daemon_go() never
4811 returns. We leave this till here so that the originator_ fields are available
4812 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
4813 mode. */
4814
4815 if (f.daemon_listen || f.inetd_wait_mode || queue_interval > 0)
4816   {
4817   if (mua_wrapper)
4818     {
4819     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
4820     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
4821       "mua_wrapper is set");
4822     }
4823
4824 # ifndef DISABLE_TLS
4825   /* This also checks that the library linkage is working and we can call
4826   routines in it, so call even if tls_require_ciphers is unset */
4827     {
4828 # ifdef MEASURE_TIMING
4829     struct timeval t0, diff;
4830     (void)gettimeofday(&t0, NULL);
4831 # endif
4832     if (!tls_dropprivs_validate_require_cipher(FALSE))
4833       exit(1);
4834 # ifdef MEASURE_TIMING
4835     report_time_since(&t0, US"validate_ciphers (delta)");
4836 # endif
4837     }
4838 #endif
4839
4840   daemon_go();
4841   }
4842
4843 /* If the sender ident has not been set (by a trusted caller) set it to
4844 the caller. This will get overwritten below for an inetd call. If a trusted
4845 caller has set it empty, unset it. */
4846
4847 if (!sender_ident) sender_ident = originator_login;
4848 else if (!*sender_ident) sender_ident = NULL;
4849
4850 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
4851 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
4852 originator_* variables set. */
4853
4854 if (test_rewrite_arg >= 0)
4855   {
4856   f.really_exim = FALSE;
4857   if (test_rewrite_arg >= argc)
4858     {
4859     printf("-brw needs an address argument\n");
4860     exim_exit(EXIT_FAILURE);
4861     }
4862   rewrite_test(argv[test_rewrite_arg]);
4863   exim_exit(EXIT_SUCCESS);
4864   }
4865
4866 /* A locally-supplied message is considered to be coming from a local user
4867 unless a trusted caller supplies a sender address with -f, or is passing in the
4868 message via SMTP (inetd invocation or otherwise). */
4869
4870 if (  !sender_address && !smtp_input
4871    || !f.trusted_caller && filter_test == FTEST_NONE)
4872   {
4873   f.sender_local = TRUE;
4874
4875   /* A trusted caller can supply authenticated_sender and authenticated_id
4876   via -oMas and -oMai and if so, they will already be set. Otherwise, force
4877   defaults except when host checking. */
4878
4879   if (!authenticated_sender && !host_checking)
4880     authenticated_sender = string_sprintf("%s@%s", originator_login,
4881       qualify_domain_sender);
4882   if (!authenticated_id && !host_checking)
4883     authenticated_id = originator_login;
4884   }
4885
4886 /* Trusted callers are always permitted to specify the sender address.
4887 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
4888 is specified is the empty address. However, if a trusted caller does not
4889 specify a sender address for SMTP input, we leave sender_address unset. This
4890 causes the MAIL commands to be honoured. */
4891
4892 if (  !smtp_input && !sender_address
4893    || !receive_check_set_sender(sender_address))
4894   {
4895   /* Either the caller is not permitted to set a general sender, or this is
4896   non-SMTP input and the trusted caller has not set a sender. If there is no
4897   sender, or if a sender other than <> is set, override with the originator's
4898   login (which will get qualified below), except when checking things. */
4899
4900   if (  !sender_address                  /* No sender_address set */
4901      ||                                  /*         OR            */
4902        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
4903        !checking))                       /* Not running tests, including filter tests */
4904     {
4905     sender_address = originator_login;
4906     f.sender_address_forced = FALSE;
4907     sender_address_domain = 0;
4908     }
4909   }
4910
4911 /* Remember whether an untrusted caller set the sender address */
4912
4913 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
4914
4915 /* Ensure that the sender address is fully qualified unless it is the empty
4916 address, which indicates an error message, or doesn't exist (root caller, smtp
4917 interface, no -f argument). */
4918
4919 if (sender_address && *sender_address && sender_address_domain == 0)
4920   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
4921     qualify_domain_sender);
4922
4923 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
4924
4925 /* Handle a request to verify a list of addresses, or test them for delivery.
4926 This must follow the setting of the sender address, since routers can be
4927 predicated upon the sender. If no arguments are given, read addresses from
4928 stdin. Set debug_level to at least D_v to get full output for address testing.
4929 */
4930
4931 if (verify_address_mode || f.address_test_mode)
4932   {
4933   int exit_value = 0;
4934   int flags = vopt_qualify;
4935
4936   if (verify_address_mode)
4937     {
4938     if (!verify_as_sender) flags |= vopt_is_recipient;
4939     DEBUG(D_verify) debug_print_ids(US"Verifying:");
4940     }
4941
4942   else
4943     {
4944     flags |= vopt_is_recipient;
4945     debug_selector |= D_v;
4946     debug_file = stderr;
4947     debug_fd = fileno(debug_file);
4948     DEBUG(D_verify) debug_print_ids(US"Address testing:");
4949     }
4950
4951   if (recipients_arg < argc)
4952     while (recipients_arg < argc)
4953       {
4954       /* Supplied addresses are tainted since they come from a user */
4955       uschar * s = string_copy_taint(argv[recipients_arg++], TRUE);
4956       while (*s)
4957         {
4958         BOOL finished = FALSE;
4959         uschar *ss = parse_find_address_end(s, FALSE);
4960         if (*ss == ',') *ss = 0; else finished = TRUE;
4961         test_address(s, flags, &exit_value);
4962         s = ss;
4963         if (!finished)
4964           while (*++s == ',' || isspace(*s)) ;
4965         }
4966       }
4967
4968   else for (;;)
4969     {
4970     uschar * s = get_stdinput(NULL, NULL);
4971     if (!s) break;
4972     test_address(string_copy_taint(s, TRUE), flags, &exit_value);
4973     }
4974
4975   route_tidyup();
4976   exim_exit(exit_value);
4977   }
4978
4979 /* Handle expansion checking. Either expand items on the command line, or read
4980 from stdin if there aren't any. If -Mset was specified, load the message so
4981 that its variables can be used, but restrict this facility to admin users.
4982 Otherwise, if -bem was used, read a message from stdin. */
4983
4984 if (expansion_test)
4985   {
4986   dns_init(FALSE, FALSE, FALSE);
4987   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
4988     {
4989     uschar spoolname[256];  /* Not big_buffer; used in spool_read_header() */
4990     if (!f.admin_user)
4991       exim_fail("exim: permission denied\n");
4992     message_id = argv[msg_action_arg];
4993     (void)string_format(spoolname, sizeof(spoolname), "%s-H", message_id);
4994     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
4995       printf ("Failed to load message datafile %s\n", message_id);
4996     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
4997       printf ("Failed to load message %s\n", message_id);
4998     }
4999
5000   /* Read a test message from a file. We fudge it up to be on stdin, saving
5001   stdin itself for later reading of expansion strings. */
5002
5003   else if (expansion_test_message)
5004     {
5005     int save_stdin = dup(0);
5006     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
5007     if (fd < 0)
5008       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
5009         strerror(errno));
5010     (void) dup2(fd, 0);
5011     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5012     message_ended = END_NOTENDED;
5013     read_message_body(receive_msg(extract_recipients));
5014     message_linecount += body_linecount;
5015     (void)dup2(save_stdin, 0);
5016     (void)close(save_stdin);
5017     clearerr(stdin);               /* Required by Darwin */
5018     }
5019
5020   /* Only admin users may see config-file macros this way */
5021
5022   if (!f.admin_user) macros_user = macros = mlast = NULL;
5023
5024   /* Allow $recipients for this testing */
5025
5026   f.enable_dollar_recipients = TRUE;
5027
5028   /* Expand command line items */
5029
5030   if (recipients_arg < argc)
5031     while (recipients_arg < argc)
5032       expansion_test_line(argv[recipients_arg++]);
5033
5034   /* Read stdin */
5035
5036   else
5037     {
5038     char *(*fn_readline)(const char *) = NULL;
5039     void (*fn_addhist)(const char *) = NULL;
5040     uschar * s;
5041
5042 #ifdef USE_READLINE
5043     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5044 #endif
5045
5046     while (s = get_stdinput(fn_readline, fn_addhist))
5047       expansion_test_line(s);
5048
5049 #ifdef USE_READLINE
5050     if (dlhandle) dlclose(dlhandle);
5051 #endif
5052     }
5053
5054   /* The data file will be open after -Mset */
5055
5056   if (deliver_datafile >= 0)
5057     {
5058     (void)close(deliver_datafile);
5059     deliver_datafile = -1;
5060     }
5061
5062   exim_exit(EXIT_SUCCESS);
5063   }
5064
5065
5066 /* The active host name is normally the primary host name, but it can be varied
5067 for hosts that want to play several parts at once. We need to ensure that it is
5068 set for host checking, and for receiving messages. */
5069
5070 smtp_active_hostname = primary_hostname;
5071 if (raw_active_hostname != NULL)
5072   {
5073   uschar *nah = expand_string(raw_active_hostname);
5074   if (nah == NULL)
5075     {
5076     if (!f.expand_string_forcedfail)
5077       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5078         "(smtp_active_hostname): %s", raw_active_hostname,
5079         expand_string_message);
5080     }
5081   else if (nah[0] != 0) smtp_active_hostname = nah;
5082   }
5083
5084 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5085 given IP address so that the blocking and relay configuration can be tested.
5086 Unless a sender_ident was set by -oMt, we discard it (the default is the
5087 caller's login name). An RFC 1413 call is made only if we are running in the
5088 test harness and an incoming interface and both ports are specified, because
5089 there is no TCP/IP call to find the ident for. */
5090
5091 if (host_checking)
5092   {
5093   int x[4];
5094   int size;
5095
5096   if (!sender_ident_set)
5097     {
5098     sender_ident = NULL;
5099     if (f.running_in_test_harness && sender_host_port
5100        && interface_address && interface_port)
5101       verify_get_ident(1223);           /* note hardwired port number */
5102     }
5103
5104   /* In case the given address is a non-canonical IPv6 address, canonicalize
5105   it. The code works for both IPv4 and IPv6, as it happens. */
5106
5107   size = host_aton(sender_host_address, x);
5108   sender_host_address = store_get(48, FALSE);  /* large enough for full IPv6 */
5109   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5110
5111   /* Now set up for testing */
5112
5113   host_build_sender_fullhost();
5114   smtp_input = TRUE;
5115   smtp_in = stdin;
5116   smtp_out = stdout;
5117   f.sender_local = FALSE;
5118   f.sender_host_notsocket = TRUE;
5119   debug_file = stderr;
5120   debug_fd = fileno(debug_file);
5121   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5122     "**** but without any ident (RFC 1413) callback.\n"
5123     "**** This is not for real!\n\n",
5124       sender_host_address);
5125
5126   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5127   if (verify_check_host(&hosts_connection_nolog) == OK)
5128     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5129   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5130
5131   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5132   because a log line has already been written for all its failure exists
5133   (usually "connection refused: <reason>") and writing another one is
5134   unnecessary clutter. */
5135
5136   if (smtp_start_session())
5137     {
5138     rmark reset_point;
5139     for (; (reset_point = store_mark()); store_reset(reset_point))
5140       {
5141       if (smtp_setup_msg() <= 0) break;
5142       if (!receive_msg(FALSE)) break;
5143
5144       return_path = sender_address = NULL;
5145       dnslist_domain = dnslist_matched = NULL;
5146 #ifndef DISABLE_DKIM
5147       dkim_cur_signer = NULL;
5148 #endif
5149       acl_var_m = NULL;
5150       deliver_localpart_orig = NULL;
5151       deliver_domain_orig = NULL;
5152       callout_address = sending_ip_address = NULL;
5153       deliver_localpart_data = deliver_domain_data =
5154       recipient_data = sender_data = NULL;
5155       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5156       }
5157     smtp_log_no_mail();
5158     }
5159   exim_exit(EXIT_SUCCESS);
5160   }
5161
5162
5163 /* Arrange for message reception if recipients or SMTP were specified;
5164 otherwise complain unless a version print (-bV) happened or this is a filter
5165 verification test or info dump.
5166 In the former case, show the configuration file name. */
5167
5168 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5169   {
5170   if (version_printed)
5171     {
5172     if (Ustrchr(config_main_filelist, ':'))
5173       printf("Configuration file search path is %s\n", config_main_filelist);
5174     printf("Configuration file is %s\n", config_main_filename);
5175     return EXIT_SUCCESS;
5176     }
5177
5178   if (info_flag != CMDINFO_NONE)
5179     {
5180     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5181     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5182     }
5183
5184   if (filter_test == FTEST_NONE)
5185     exim_usage(called_as);
5186   }
5187
5188
5189 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5190 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5191 that we are not called from inetd, because that is rejected above. The
5192 following configuration settings are forced here:
5193
5194   (1) Synchronous delivery (-odi)
5195   (2) Errors to stderr (-oep == -oeq)
5196   (3) No parallel remote delivery
5197   (4) Unprivileged delivery
5198
5199 We don't force overall queueing options because there are several of them;
5200 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5201 to override any SMTP queueing. */
5202
5203 if (mua_wrapper)
5204   {
5205   f.synchronous_delivery = TRUE;
5206   arg_error_handling = ERRORS_STDERR;
5207   remote_max_parallel = 1;
5208   deliver_drop_privilege = TRUE;
5209   f.queue_smtp = FALSE;
5210   queue_smtp_domains = NULL;
5211 #ifdef SUPPORT_I18N
5212   message_utf8_downconvert = -1;        /* convert-if-needed */
5213 #endif
5214   }
5215
5216
5217 /* Prepare to accept one or more new messages on the standard input. When a
5218 message has been read, its id is returned in message_id[]. If doing immediate
5219 delivery, we fork a delivery process for each received message, except for the
5220 last one, where we can save a process switch.
5221
5222 It is only in non-smtp mode that error_handling is allowed to be changed from
5223 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5224 sendmail error modes other than -oem ever actually used? Later: yes.) */
5225
5226 if (!smtp_input) error_handling = arg_error_handling;
5227
5228 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5229 logging being sent down the socket and make an identd call to get the
5230 sender_ident. */
5231
5232 else if (f.is_inetd)
5233   {
5234   (void)fclose(stderr);
5235   exim_nullstd();                       /* Re-open to /dev/null */
5236   verify_get_ident(IDENT_PORT);
5237   host_build_sender_fullhost();
5238   set_process_info("handling incoming connection from %s via inetd",
5239     sender_fullhost);
5240   }
5241
5242 /* If the sender host address has been set, build sender_fullhost if it hasn't
5243 already been done (which it will have been for inetd). This caters for the
5244 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5245 so that the test for IP options is skipped for -bs input. */
5246
5247 if (sender_host_address && !sender_fullhost)
5248   {
5249   host_build_sender_fullhost();
5250   set_process_info("handling incoming connection from %s via -oMa",
5251     sender_fullhost);
5252   f.sender_host_notsocket = TRUE;
5253   }
5254
5255 /* Otherwise, set the sender host as unknown except for inetd calls. This
5256 prevents host checking in the case of -bs not from inetd and also for -bS. */
5257
5258 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5259
5260 /* If stdout does not exist, then dup stdin to stdout. This can happen
5261 if exim is started from inetd. In this case fd 0 will be set to the socket,
5262 but fd 1 will not be set. This also happens for passed SMTP channels. */
5263
5264 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5265
5266 /* Set up the incoming protocol name and the state of the program. Root is
5267 allowed to force received protocol via the -oMr option above. If we have come
5268 via inetd, the process info has already been set up. We don't set
5269 received_protocol here for smtp input, as it varies according to
5270 batch/HELO/EHLO/AUTH/TLS. */
5271
5272 if (smtp_input)
5273   {
5274   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5275     smtp_batched_input? "batched " : "",
5276     (sender_address!= NULL)? sender_address : originator_login);
5277   }
5278 else
5279   {
5280   int old_pool = store_pool;
5281   store_pool = POOL_PERM;
5282   if (!received_protocol)
5283     received_protocol = string_sprintf("local%s", called_as);
5284   store_pool = old_pool;
5285   set_process_info("accepting a local non-SMTP message from <%s>",
5286     sender_address);
5287   }
5288
5289 /* Initialize the session_local_queue-only flag (this will be ignored if
5290 mua_wrapper is set) */
5291
5292 queue_check_only();
5293 session_local_queue_only = queue_only;
5294
5295 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5296 the spool if so configured. On failure, we must not attempt to send an error
5297 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5298 error code is given.) */
5299
5300 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5301   exim_fail("exim: insufficient disk space\n");
5302
5303 /* If this is smtp input of any kind, real or batched, handle the start of the
5304 SMTP session.
5305
5306 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5307 because a log line has already been written for all its failure exists
5308 (usually "connection refused: <reason>") and writing another one is
5309 unnecessary clutter. */
5310
5311 if (smtp_input)
5312   {
5313   smtp_in = stdin;
5314   smtp_out = stdout;
5315   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5316   if (verify_check_host(&hosts_connection_nolog) == OK)
5317     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5318   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5319   if (!smtp_start_session())
5320     {
5321     mac_smtp_fflush();
5322     exim_exit(EXIT_SUCCESS);
5323     }
5324   }
5325
5326 /* Otherwise, set up the input size limit here. */
5327
5328 else
5329   {
5330   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5331   if (expand_string_message)
5332     if (thismessage_size_limit == -1)
5333       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5334         "message_size_limit: %s", expand_string_message);
5335     else
5336       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5337         "message_size_limit: %s", expand_string_message);
5338   }
5339
5340 /* Loop for several messages when reading SMTP input. If we fork any child
5341 processes, we don't want to wait for them unless synchronous delivery is
5342 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5343 same as SIG_DFL, despite the fact that documentation often lists the default as
5344 "ignore". This is a confusing area. This is what I know:
5345
5346 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5347 processes that complete simply to go away without ever becoming defunct. You
5348 can't then wait for them - but we don't want to wait for them in the
5349 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5350 happen for all OS (e.g. *BSD is different).
5351
5352 But that's not the end of the story. Some (many? all?) systems have the
5353 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5354 has by default, so it seems that the difference is merely one of default
5355 (compare restarting vs non-restarting signals).
5356
5357 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5358 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5359 of the loop below. Paranoia rules.
5360
5361 February 2003: That's *still* not the end of the story. There are now versions
5362 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5363 process then calls waitpid(), a grumble is written to the system log, because
5364 this is logically inconsistent. In other words, it doesn't like the paranoia.
5365 As a consequence of this, the waitpid() below is now excluded if we are sure
5366 that SIG_IGN works. */
5367
5368 if (!f.synchronous_delivery)
5369   {
5370   #ifdef SA_NOCLDWAIT
5371   struct sigaction act;
5372   act.sa_handler = SIG_IGN;
5373   sigemptyset(&(act.sa_mask));
5374   act.sa_flags = SA_NOCLDWAIT;
5375   sigaction(SIGCHLD, &act, NULL);
5376   #else
5377   signal(SIGCHLD, SIG_IGN);
5378   #endif
5379   }
5380
5381 /* Save the current store pool point, for resetting at the start of
5382 each message, and save the real sender address, if any. */
5383
5384 real_sender_address = sender_address;
5385
5386 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5387 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5388 collapsed). */
5389
5390 while (more)
5391   {
5392   rmark reset_point = store_mark();
5393   message_id[0] = 0;
5394
5395   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5396   input and build the recipients list, before calling receive_msg() to read the
5397   message proper. Whatever sender address is given in the SMTP transaction is
5398   often ignored for local senders - we use the actual sender, which is normally
5399   either the underlying user running this process or a -f argument provided by
5400   a trusted caller. It is saved in real_sender_address. The test for whether to
5401   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5402
5403   if (smtp_input)
5404     {
5405     int rc;
5406     if ((rc = smtp_setup_msg()) > 0)
5407       {
5408       if (real_sender_address != NULL &&
5409           !receive_check_set_sender(sender_address))
5410         {
5411         sender_address = raw_sender = real_sender_address;
5412         sender_address_unrewritten = NULL;
5413         }
5414
5415       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5416       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5417       the very end. The result of the ACL is ignored (as for other non-SMTP
5418       messages). It is run for its potential side effects. */
5419
5420       if (smtp_batched_input && acl_not_smtp_start != NULL)
5421         {
5422         uschar *user_msg, *log_msg;
5423         f.enable_dollar_recipients = TRUE;
5424         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5425           &user_msg, &log_msg);
5426         f.enable_dollar_recipients = FALSE;
5427         }
5428
5429       /* Now get the data for the message */
5430
5431       more = receive_msg(extract_recipients);
5432       if (message_id[0] == 0)
5433         {
5434         cancel_cutthrough_connection(TRUE, US"receive dropped");
5435         if (more) goto moreloop;
5436         smtp_log_no_mail();               /* Log no mail if configured */
5437         exim_exit(EXIT_FAILURE);
5438         }
5439       }
5440     else
5441       {
5442       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5443       smtp_log_no_mail();               /* Log no mail if configured */
5444       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
5445       }
5446     }
5447
5448   /* In the non-SMTP case, we have all the information from the command
5449   line, but must process it in case it is in the more general RFC822
5450   format, and in any case, to detect syntax errors. Also, it appears that
5451   the use of comma-separated lists as single arguments is common, so we
5452   had better support them. */
5453
5454   else
5455     {
5456     int rcount = 0;
5457     int count = argc - recipients_arg;
5458     uschar **list = argv + recipients_arg;
5459
5460     /* These options cannot be changed dynamically for non-SMTP messages */
5461
5462     f.active_local_sender_retain = local_sender_retain;
5463     f.active_local_from_check = local_from_check;
5464
5465     /* Save before any rewriting */
5466
5467     raw_sender = string_copy(sender_address);
5468
5469     /* Loop for each argument (supplied by user hence tainted) */
5470
5471     for (int i = 0; i < count; i++)
5472       {
5473       int start, end, domain;
5474       uschar * errmess;
5475       uschar * s = string_copy_taint(list[i], TRUE);
5476
5477       /* Loop for each comma-separated address */
5478
5479       while (*s != 0)
5480         {
5481         BOOL finished = FALSE;
5482         uschar *recipient;
5483         uschar *ss = parse_find_address_end(s, FALSE);
5484
5485         if (*ss == ',') *ss = 0; else finished = TRUE;
5486
5487         /* Check max recipients - if -t was used, these aren't recipients */
5488
5489         if (recipients_max > 0 && ++rcount > recipients_max &&
5490             !extract_recipients)
5491           if (error_handling == ERRORS_STDERR)
5492             {
5493             fprintf(stderr, "exim: too many recipients\n");
5494             exim_exit(EXIT_FAILURE);
5495             }
5496           else
5497             return
5498               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5499                 errors_sender_rc : EXIT_FAILURE;
5500
5501 #ifdef SUPPORT_I18N
5502         {
5503         BOOL b = allow_utf8_domains;
5504         allow_utf8_domains = TRUE;
5505 #endif
5506         recipient =
5507           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5508
5509 #ifdef SUPPORT_I18N
5510         if (string_is_utf8(recipient))
5511           message_smtputf8 = TRUE;
5512         else
5513           allow_utf8_domains = b;
5514         }
5515 #endif
5516         if (domain == 0 && !f.allow_unqualified_recipient)
5517           {
5518           recipient = NULL;
5519           errmess = US"unqualified recipient address not allowed";
5520           }
5521
5522         if (!recipient)
5523           if (error_handling == ERRORS_STDERR)
5524             {
5525             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5526               string_printing(list[i]), errmess);
5527             exim_exit(EXIT_FAILURE);
5528             }
5529           else
5530             {
5531             error_block eblock;
5532             eblock.next = NULL;
5533             eblock.text1 = string_printing(list[i]);
5534             eblock.text2 = errmess;
5535             return
5536               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5537                 errors_sender_rc : EXIT_FAILURE;
5538             }
5539
5540         receive_add_recipient(string_copy_taint(recipient, TRUE), -1);
5541         s = ss;
5542         if (!finished)
5543           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5544         }
5545       }
5546
5547     /* Show the recipients when debugging */
5548
5549     DEBUG(D_receive)
5550       {
5551       if (sender_address) debug_printf("Sender: %s\n", sender_address);
5552       if (recipients_list)
5553         {
5554         debug_printf("Recipients:\n");
5555         for (int i = 0; i < recipients_count; i++)
5556           debug_printf("  %s\n", recipients_list[i].address);
5557         }
5558       }
5559
5560     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5561     ignored; rejecting here would just add complication, and it can just as
5562     well be done later. Allow $recipients to be visible in the ACL. */
5563
5564     if (acl_not_smtp_start)
5565       {
5566       uschar *user_msg, *log_msg;
5567       f.enable_dollar_recipients = TRUE;
5568       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5569         &user_msg, &log_msg);
5570       f.enable_dollar_recipients = FALSE;
5571       }
5572
5573     /* Pause for a while waiting for input.  If none received in that time,
5574     close the logfile, if we had one open; then if we wait for a long-running
5575     datasource (months, in one use-case) log rotation will not leave us holding
5576     the file copy. */
5577
5578     if (!receive_timeout)
5579       {
5580       struct timeval t = { .tv_sec = 30*60, .tv_usec = 0 };     /* 30 minutes */
5581       fd_set r;
5582
5583       FD_ZERO(&r); FD_SET(0, &r);
5584       if (select(1, &r, NULL, NULL, &t) == 0) mainlog_close();
5585       }
5586
5587     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5588     will just read the headers for the message, and not write anything onto the
5589     spool. */
5590
5591     message_ended = END_NOTENDED;
5592     more = receive_msg(extract_recipients);
5593
5594     /* more is always FALSE here (not SMTP message) when reading a message
5595     for real; when reading the headers of a message for filter testing,
5596     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5597
5598     if (message_id[0] == 0) exim_exit(EXIT_FAILURE);
5599     }  /* Non-SMTP message reception */
5600
5601   /* If this is a filter testing run, there are headers in store, but
5602   no message on the spool. Run the filtering code in testing mode, setting
5603   the domain to the qualify domain and the local part to the current user,
5604   unless they have been set by options. The prefix and suffix are left unset
5605   unless specified. The the return path is set to to the sender unless it has
5606   already been set from a return-path header in the message. */
5607
5608   if (filter_test != FTEST_NONE)
5609     {
5610     deliver_domain = ftest_domain ? ftest_domain : qualify_domain_recipient;
5611     deliver_domain_orig = deliver_domain;
5612     deliver_localpart = ftest_localpart ? ftest_localpart : originator_login;
5613     deliver_localpart_orig = deliver_localpart;
5614     deliver_localpart_prefix = ftest_prefix;
5615     deliver_localpart_suffix = ftest_suffix;
5616     deliver_home = originator_home;
5617
5618     if (!return_path)
5619       {
5620       printf("Return-path copied from sender\n");
5621       return_path = string_copy(sender_address);
5622       }
5623     else
5624       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5625     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5626
5627     receive_add_recipient(
5628       string_sprintf("%s%s%s@%s",
5629         ftest_prefix ? ftest_prefix : US"",
5630         deliver_localpart,
5631         ftest_suffix ? ftest_suffix : US"",
5632         deliver_domain), -1);
5633
5634     printf("Recipient   = %s\n", recipients_list[0].address);
5635     if (ftest_prefix) printf("Prefix    = %s\n", ftest_prefix);
5636     if (ftest_suffix) printf("Suffix    = %s\n", ftest_suffix);
5637
5638     if (chdir("/"))   /* Get away from wherever the user is running this from */
5639       {
5640       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5641       exim_exit(EXIT_FAILURE);
5642       }
5643
5644     /* Now we run either a system filter test, or a user filter test, or both.
5645     In the latter case, headers added by the system filter will persist and be
5646     available to the user filter. We need to copy the filter variables
5647     explicitly. */
5648
5649     if (filter_test & FTEST_SYSTEM)
5650       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5651         exim_exit(EXIT_FAILURE);
5652
5653     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5654
5655     if (filter_test & FTEST_USER)
5656       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5657         exim_exit(EXIT_FAILURE);
5658
5659     exim_exit(EXIT_SUCCESS);
5660     }
5661
5662   /* Else act on the result of message reception. We should not get here unless
5663   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5664   will be TRUE. If it is not, check on the number of messages received in this
5665   connection. */
5666
5667   if (  !session_local_queue_only
5668      && smtp_accept_queue_per_connection > 0
5669      && receive_messagecount > smtp_accept_queue_per_connection)
5670     {
5671     session_local_queue_only = TRUE;
5672     queue_only_reason = 2;
5673     }
5674
5675   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5676   and queue_only_load is set, check that the load average is below it. If it is
5677   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5678   default), we put the whole session into queue_only mode. It then remains this
5679   way for any subsequent messages on the same SMTP connection. This is a
5680   deliberate choice; even though the load average may fall, it doesn't seem
5681   right to deliver later messages on the same call when not delivering earlier
5682   ones. However, there are odd cases where this is not wanted, so this can be
5683   changed by setting queue_only_load_latch false. */
5684
5685   if (!(local_queue_only = session_local_queue_only) && queue_only_load >= 0)
5686     if ((local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load))
5687       {
5688       queue_only_reason = 3;
5689       if (queue_only_load_latch) session_local_queue_only = TRUE;
5690       }
5691
5692   /* If running as an MUA wrapper, all queueing options and freezing options
5693   are ignored. */
5694
5695   if (mua_wrapper)
5696     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
5697
5698   /* Log the queueing here, when it will get a message id attached, but
5699   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
5700   connections). */
5701
5702   if (local_queue_only)
5703     {
5704     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5705     switch(queue_only_reason)
5706       {
5707       case 2:
5708         log_write(L_delay_delivery,
5709                 LOG_MAIN, "no immediate delivery: more than %d messages "
5710           "received in one connection", smtp_accept_queue_per_connection);
5711         break;
5712
5713       case 3:
5714         log_write(L_delay_delivery,
5715                 LOG_MAIN, "no immediate delivery: load average %.2f",
5716                 (double)load_average/1000.0);
5717       break;
5718       }
5719     }
5720
5721   else if (f.queue_only_policy || f.deliver_freeze)
5722     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5723
5724   /* Else do the delivery unless the ACL or local_scan() called for queue only
5725   or froze the message. Always deliver in a separate process. A fork failure is
5726   not a disaster, as the delivery will eventually happen on a subsequent queue
5727   run. The search cache must be tidied before the fork, as the parent will
5728   do it before exiting. The child will trigger a lookup failure and
5729   thereby defer the delivery if it tries to use (for example) a cached ldap
5730   connection that the parent has called unbind on. */
5731
5732   else
5733     {
5734     pid_t pid;
5735     search_tidyup();
5736
5737     if ((pid = exim_fork(US"local-accept-delivery")) == 0)
5738       {
5739       int rc;
5740       close_unwanted();      /* Close unwanted file descriptors and TLS */
5741       exim_nullstd();        /* Ensure std{in,out,err} exist */
5742
5743       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
5744       mode, deliver_drop_privilege is forced TRUE). */
5745
5746       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
5747         {
5748         delivery_re_exec(CEE_EXEC_EXIT);
5749         /* Control does not return here. */
5750         }
5751
5752       /* No need to re-exec */
5753
5754       rc = deliver_message(message_id, FALSE, FALSE);
5755       search_tidyup();
5756       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
5757         ? EXIT_SUCCESS : EXIT_FAILURE);
5758       }
5759
5760     if (pid < 0)
5761       {
5762       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
5763       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
5764         "process: %s", strerror(errno));
5765       }
5766     else
5767       {
5768       release_cutthrough_connection(US"msg passed for delivery");
5769
5770       /* In the parent, wait if synchronous delivery is required. This will
5771       always be the case in MUA wrapper mode. */
5772
5773       if (f.synchronous_delivery)
5774         {
5775         int status;
5776         while (wait(&status) != pid);
5777         if ((status & 0x00ff) != 0)
5778           log_write(0, LOG_MAIN|LOG_PANIC,
5779             "process %d crashed with signal %d while delivering %s",
5780             (int)pid, status & 0x00ff, message_id);
5781         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
5782         }
5783       }
5784     }
5785
5786   /* The loop will repeat if more is TRUE. If we do not know know that the OS
5787   automatically reaps children (see comments above the loop), clear away any
5788   finished subprocesses here, in case there are lots of messages coming in
5789   from the same source. */
5790
5791   #ifndef SIG_IGN_WORKS
5792   while (waitpid(-1, NULL, WNOHANG) > 0);
5793   #endif
5794
5795 moreloop:
5796   return_path = sender_address = NULL;
5797   authenticated_sender = NULL;
5798   deliver_localpart_orig = NULL;
5799   deliver_domain_orig = NULL;
5800   deliver_host = deliver_host_address = NULL;
5801   dnslist_domain = dnslist_matched = NULL;
5802 #ifdef WITH_CONTENT_SCAN
5803   malware_name = NULL;
5804 #endif
5805   callout_address = NULL;
5806   sending_ip_address = NULL;
5807   deliver_localpart_data = deliver_domain_data =
5808   recipient_data = sender_data = NULL;
5809   acl_var_m = NULL;
5810   for(int i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
5811
5812   store_reset(reset_point);
5813   }
5814
5815 exim_exit(EXIT_SUCCESS);   /* Never returns */
5816 return 0;                  /* To stop compiler warning */
5817 }
5818
5819
5820 /* End of exim.c */