92f5623d23af304dbd3ee9c4de7c59fc7f7a1c70
[users/jgh/exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8
9 /* The main function: entry point, initialization, and high-level control.
10 Also a few functions that don't naturally fit elsewhere. */
11
12
13 #include "exim.h"
14
15 #if defined(__GLIBC__) && !defined(__UCLIBC__)
16 # include <gnu/libc-version.h>
17 #endif
18
19 #ifdef USE_GNUTLS
20 # include <gnutls/gnutls.h>
21 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
22 #  define DISABLE_OCSP
23 # endif
24 #endif
25
26 #ifndef _TIME_H
27 # include <time.h>
28 #endif
29
30 extern void init_lookup_list(void);
31
32
33
34 /*************************************************
35 *      Function interface to store functions     *
36 *************************************************/
37
38 /* We need some real functions to pass to the PCRE regular expression library
39 for store allocation via Exim's store manager. The normal calls are actually
40 macros that pass over location information to make tracing easier. These
41 functions just interface to the standard macro calls. A good compiler will
42 optimize out the tail recursion and so not make them too expensive. There
43 are two sets of functions; one for use when we want to retain the compiled
44 regular expression for a long time; the other for short-term use. */
45
46 static void *
47 function_store_get(size_t size)
48 {
49 /* For now, regard all RE results as potentially tainted.  We might need
50 more intelligence on this point. */
51 return store_get((int)size, TRUE);
52 }
53
54 static void
55 function_dummy_free(void *block) { block = block; }
56
57 static void *
58 function_store_malloc(size_t size)
59 {
60 return store_malloc((int)size);
61 }
62
63 static void
64 function_store_free(void *block)
65 {
66 store_free(block);
67 }
68
69
70
71
72 /*************************************************
73 *         Enums for cmdline interface            *
74 *************************************************/
75
76 enum commandline_info { CMDINFO_NONE=0,
77   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
78
79
80
81
82 /*************************************************
83 *  Compile regular expression and panic on fail  *
84 *************************************************/
85
86 /* This function is called when failure to compile a regular expression leads
87 to a panic exit. In other cases, pcre_compile() is called directly. In many
88 cases where this function is used, the results of the compilation are to be
89 placed in long-lived store, so we temporarily reset the store management
90 functions that PCRE uses if the use_malloc flag is set.
91
92 Argument:
93   pattern     the pattern to compile
94   caseless    TRUE if caseless matching is required
95   use_malloc  TRUE if compile into malloc store
96
97 Returns:      pointer to the compiled pattern
98 */
99
100 const pcre *
101 regex_must_compile(const uschar *pattern, BOOL caseless, BOOL use_malloc)
102 {
103 int offset;
104 int options = PCRE_COPT;
105 const pcre *yield;
106 const uschar *error;
107 if (use_malloc)
108   {
109   pcre_malloc = function_store_malloc;
110   pcre_free = function_store_free;
111   }
112 if (caseless) options |= PCRE_CASELESS;
113 yield = pcre_compile(CCS pattern, options, (const char **)&error, &offset, NULL);
114 pcre_malloc = function_store_get;
115 pcre_free = function_dummy_free;
116 if (yield == NULL)
117   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
118     "%s at offset %d while compiling %s", error, offset, pattern);
119 return yield;
120 }
121
122
123
124
125 /*************************************************
126 *   Execute regular expression and set strings   *
127 *************************************************/
128
129 /* This function runs a regular expression match, and sets up the pointers to
130 the matched substrings.
131
132 Arguments:
133   re          the compiled expression
134   subject     the subject string
135   options     additional PCRE options
136   setup       if < 0 do full setup
137               if >= 0 setup from setup+1 onwards,
138                 excluding the full matched string
139
140 Returns:      TRUE or FALSE
141 */
142
143 BOOL
144 regex_match_and_setup(const pcre *re, const uschar *subject, int options, int setup)
145 {
146 int ovector[3*(EXPAND_MAXN+1)];
147 uschar * s = string_copy(subject);      /* de-constifying */
148 int n = pcre_exec(re, NULL, CS s, Ustrlen(s), 0,
149   PCRE_EOPT | options, ovector, nelem(ovector));
150 BOOL yield = n >= 0;
151 if (n == 0) n = EXPAND_MAXN + 1;
152 if (yield)
153   {
154   expand_nmax = setup < 0 ? 0 : setup + 1;
155   for (int nn = setup < 0 ? 0 : 2; nn < n*2; nn += 2)
156     {
157     expand_nstring[expand_nmax] = s + ovector[nn];
158     expand_nlength[expand_nmax++] = ovector[nn+1] - ovector[nn];
159     }
160   expand_nmax--;
161   }
162 return yield;
163 }
164
165
166
167
168 /*************************************************
169 *            Set up processing details           *
170 *************************************************/
171
172 /* Save a text string for dumping when SIGUSR1 is received.
173 Do checks for overruns.
174
175 Arguments: format and arguments, as for printf()
176 Returns:   nothing
177 */
178
179 void
180 set_process_info(const char *format, ...)
181 {
182 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
183 gstring * g;
184 int len;
185 va_list ap;
186
187 g = string_fmt_append(&gs, "%5d ", (int)getpid());
188 len = g->ptr;
189 va_start(ap, format);
190 if (!string_vformat(g, 0, format, ap))
191   {
192   gs.ptr = len;
193   g = string_cat(&gs, US"**** string overflowed buffer ****");
194   }
195 g = string_catn(g, US"\n", 1);
196 string_from_gstring(g);
197 process_info_len = g->ptr;
198 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
199 va_end(ap);
200 }
201
202 /***********************************************
203 *            Handler for SIGTERM               *
204 ***********************************************/
205
206 static void
207 term_handler(int sig)
208 {
209 exit(1);
210 }
211
212
213 /*************************************************
214 *             Handler for SIGUSR1                *
215 *************************************************/
216
217 /* SIGUSR1 causes any exim process to write to the process log details of
218 what it is currently doing. It will only be used if the OS is capable of
219 setting up a handler that causes automatic restarting of any system call
220 that is in progress at the time.
221
222 This function takes care to be signal-safe.
223
224 Argument: the signal number (SIGUSR1)
225 Returns:  nothing
226 */
227
228 static void
229 usr1_handler(int sig)
230 {
231 int fd;
232
233 os_restarting_signal(sig, usr1_handler);
234
235 if ((fd = Uopen(process_log_path, O_APPEND|O_WRONLY, LOG_MODE)) < 0)
236   {
237   /* If we are already running as the Exim user, try to create it in the
238   current process (assuming spool_directory exists). Otherwise, if we are
239   root, do the creation in an exim:exim subprocess. */
240
241   int euid = geteuid();
242   if (euid == exim_uid)
243     fd = Uopen(process_log_path, O_CREAT|O_APPEND|O_WRONLY, LOG_MODE);
244   else if (euid == root_uid)
245     fd = log_create_as_exim(process_log_path);
246   }
247
248 /* If we are neither exim nor root, or if we failed to create the log file,
249 give up. There is not much useful we can do with errors, since we don't want
250 to disrupt whatever is going on outside the signal handler. */
251
252 if (fd < 0) return;
253
254 (void)write(fd, process_info, process_info_len);
255 (void)close(fd);
256 }
257
258
259
260 /*************************************************
261 *             Timeout handler                    *
262 *************************************************/
263
264 /* This handler is enabled most of the time that Exim is running. The handler
265 doesn't actually get used unless alarm() has been called to set a timer, to
266 place a time limit on a system call of some kind. When the handler is run, it
267 re-enables itself.
268
269 There are some other SIGALRM handlers that are used in special cases when more
270 than just a flag setting is required; for example, when reading a message's
271 input. These are normally set up in the code module that uses them, and the
272 SIGALRM handler is reset to this one afterwards.
273
274 Argument: the signal value (SIGALRM)
275 Returns:  nothing
276 */
277
278 void
279 sigalrm_handler(int sig)
280 {
281 sig = sig;      /* Keep picky compilers happy */
282 sigalrm_seen = TRUE;
283 os_non_restarting_signal(SIGALRM, sigalrm_handler);
284 }
285
286
287
288 /*************************************************
289 *      Sleep for a fractional time interval      *
290 *************************************************/
291
292 /* This function is called by millisleep() and exim_wait_tick() to wait for a
293 period of time that may include a fraction of a second. The coding is somewhat
294 tedious. We do not expect setitimer() ever to fail, but if it does, the process
295 will wait for ever, so we panic in this instance. (There was a case of this
296 when a bug in a function that calls milliwait() caused it to pass invalid data.
297 That's when I added the check. :-)
298
299 We assume it to be not worth sleeping for under 50us; this value will
300 require revisiting as hardware advances.  This avoids the issue of
301 a zero-valued timer setting meaning "never fire".
302
303 Argument:  an itimerval structure containing the interval
304 Returns:   nothing
305 */
306
307 static void
308 milliwait(struct itimerval *itval)
309 {
310 sigset_t sigmask;
311 sigset_t old_sigmask;
312
313 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
314   return;
315 (void)sigemptyset(&sigmask);                           /* Empty mask */
316 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
317 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
318 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
319   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
320     "setitimer() failed: %s", strerror(errno));
321 (void)sigfillset(&sigmask);                            /* All signals */
322 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
323 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
324 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
325 }
326
327
328
329
330 /*************************************************
331 *         Millisecond sleep function             *
332 *************************************************/
333
334 /* The basic sleep() function has a granularity of 1 second, which is too rough
335 in some cases - for example, when using an increasing delay to slow down
336 spammers.
337
338 Argument:    number of millseconds
339 Returns:     nothing
340 */
341
342 void
343 millisleep(int msec)
344 {
345 struct itimerval itval;
346 itval.it_interval.tv_sec = 0;
347 itval.it_interval.tv_usec = 0;
348 itval.it_value.tv_sec = msec/1000;
349 itval.it_value.tv_usec = (msec % 1000) * 1000;
350 milliwait(&itval);
351 }
352
353
354
355 /*************************************************
356 *         Compare microsecond times              *
357 *************************************************/
358
359 /*
360 Arguments:
361   tv1         the first time
362   tv2         the second time
363
364 Returns:      -1, 0, or +1
365 */
366
367 static int
368 exim_tvcmp(struct timeval *t1, struct timeval *t2)
369 {
370 if (t1->tv_sec > t2->tv_sec) return +1;
371 if (t1->tv_sec < t2->tv_sec) return -1;
372 if (t1->tv_usec > t2->tv_usec) return +1;
373 if (t1->tv_usec < t2->tv_usec) return -1;
374 return 0;
375 }
376
377
378
379
380 /*************************************************
381 *          Clock tick wait function              *
382 *************************************************/
383
384 #ifdef _POSIX_MONOTONIC_CLOCK
385 /* Amount CLOCK_MONOTONIC is behind realtime, at startup. */
386 static struct timespec offset_ts;
387
388 static void
389 exim_clock_init(void)
390 {
391 struct timeval tv;
392 if (clock_gettime(CLOCK_MONOTONIC, &offset_ts) != 0) return;
393 (void)gettimeofday(&tv, NULL);
394 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
395 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
396 if (offset_ts.tv_nsec >= 0) return;
397 offset_ts.tv_sec--;
398 offset_ts.tv_nsec += 1000*1000*1000;
399 }
400 #endif
401
402
403 /* Exim uses a time + a pid to generate a unique identifier in two places: its
404 message IDs, and in file names for maildir deliveries. Because some OS now
405 re-use pids within the same second, sub-second times are now being used.
406 However, for absolute certainty, we must ensure the clock has ticked before
407 allowing the relevant process to complete. At the time of implementation of
408 this code (February 2003), the speed of processors is such that the clock will
409 invariably have ticked already by the time a process has done its job. This
410 function prepares for the time when things are faster - and it also copes with
411 clocks that go backwards.
412
413 Arguments:
414   tgt_tv       A timeval which was used to create uniqueness; its usec field
415                  has been rounded down to the value of the resolution.
416                  We want to be sure the current time is greater than this.
417   resolution   The resolution that was used to divide the microseconds
418                  (1 for maildir, larger for message ids)
419
420 Returns:       nothing
421 */
422
423 void
424 exim_wait_tick(struct timeval * tgt_tv, int resolution)
425 {
426 struct timeval now_tv;
427 long int now_true_usec;
428
429 #ifdef _POSIX_MONOTONIC_CLOCK
430 struct timespec now_ts;
431
432 if (clock_gettime(CLOCK_MONOTONIC, &now_ts) == 0)
433   {
434   now_ts.tv_sec += offset_ts.tv_sec;
435   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
436     {
437     now_ts.tv_sec++;
438     now_ts.tv_nsec -= 1000*1000*1000;
439     }
440   now_tv.tv_sec = now_ts.tv_sec;
441   now_true_usec = (now_ts.tv_nsec / (resolution * 1000)) * resolution;
442   now_tv.tv_usec = now_true_usec;
443   }
444 else
445 #endif
446   {
447   (void)gettimeofday(&now_tv, NULL);
448   now_true_usec = now_tv.tv_usec;
449   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
450   }
451
452 while (exim_tvcmp(&now_tv, tgt_tv) <= 0)
453   {
454   struct itimerval itval;
455   itval.it_interval.tv_sec = 0;
456   itval.it_interval.tv_usec = 0;
457   itval.it_value.tv_sec = tgt_tv->tv_sec - now_tv.tv_sec;
458   itval.it_value.tv_usec = tgt_tv->tv_usec + resolution - now_true_usec;
459
460   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
461   negative value for the microseconds is possible only in the case when "now"
462   is more than a second less than "tgt". That means that itval.it_value.tv_sec
463   is greater than zero. The following correction is therefore safe. */
464
465   if (itval.it_value.tv_usec < 0)
466     {
467     itval.it_value.tv_usec += 1000000;
468     itval.it_value.tv_sec -= 1;
469     }
470
471   DEBUG(D_transport|D_receive)
472     {
473     if (!f.running_in_test_harness)
474       {
475       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
476         tgt_tv->tv_sec, (long) tgt_tv->tv_usec,
477         now_tv.tv_sec, (long) now_tv.tv_usec);
478       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
479         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
480       }
481     }
482
483   milliwait(&itval);
484
485   /* Be prapared to go around if the kernel does not implement subtick
486   granularity (GNU Hurd) */
487
488   (void)gettimeofday(&now_tv, NULL);
489   now_true_usec = now_tv.tv_usec;
490   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
491   }
492 }
493
494
495
496
497 /*************************************************
498 *   Call fopen() with umask 777 and adjust mode  *
499 *************************************************/
500
501 /* Exim runs with umask(0) so that files created with open() have the mode that
502 is specified in the open() call. However, there are some files, typically in
503 the spool directory, that are created with fopen(). They end up world-writeable
504 if no precautions are taken. Although the spool directory is not accessible to
505 the world, this is an untidiness. So this is a wrapper function for fopen()
506 that sorts out the mode of the created file.
507
508 Arguments:
509    filename       the file name
510    options        the fopen() options
511    mode           the required mode
512
513 Returns:          the fopened FILE or NULL
514 */
515
516 FILE *
517 modefopen(const uschar *filename, const char *options, mode_t mode)
518 {
519 mode_t saved_umask = umask(0777);
520 FILE *f = Ufopen(filename, options);
521 (void)umask(saved_umask);
522 if (f != NULL) (void)fchmod(fileno(f), mode);
523 return f;
524 }
525
526
527 /*************************************************
528 *   Ensure stdin, stdout, and stderr exist       *
529 *************************************************/
530
531 /* Some operating systems grumble if an exec() happens without a standard
532 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
533 file will be opened and will use these fd values, and then some other bit of
534 code will assume, for example, that it can write error messages to stderr.
535 This function ensures that fds 0, 1, and 2 are open if they do not already
536 exist, by connecting them to /dev/null.
537
538 This function is also used to ensure that std{in,out,err} exist at all times,
539 so that if any library that Exim calls tries to use them, it doesn't crash.
540
541 Arguments:  None
542 Returns:    Nothing
543 */
544
545 void
546 exim_nullstd(void)
547 {
548 int devnull = -1;
549 struct stat statbuf;
550 for (int i = 0; i <= 2; i++)
551   {
552   if (fstat(i, &statbuf) < 0 && errno == EBADF)
553     {
554     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
555     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
556       string_open_failed(errno, "/dev/null", NULL));
557     if (devnull != i) (void)dup2(devnull, i);
558     }
559   }
560 if (devnull > 2) (void)close(devnull);
561 }
562
563
564
565
566 /*************************************************
567 *   Close unwanted file descriptors for delivery *
568 *************************************************/
569
570 /* This function is called from a new process that has been forked to deliver
571 an incoming message, either directly, or using exec.
572
573 We want any smtp input streams to be closed in this new process. However, it
574 has been observed that using fclose() here causes trouble. When reading in -bS
575 input, duplicate copies of messages have been seen. The files will be sharing a
576 file pointer with the parent process, and it seems that fclose() (at least on
577 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
578 least sometimes. Hence we go for closing the underlying file descriptors.
579
580 If TLS is active, we want to shut down the TLS library, but without molesting
581 the parent's SSL connection.
582
583 For delivery of a non-SMTP message, we want to close stdin and stdout (and
584 stderr unless debugging) because the calling process might have set them up as
585 pipes and be waiting for them to close before it waits for the submission
586 process to terminate. If they aren't closed, they hold up the calling process
587 until the initial delivery process finishes, which is not what we want.
588
589 Exception: We do want it for synchronous delivery!
590
591 And notwithstanding all the above, if D_resolver is set, implying resolver
592 debugging, leave stdout open, because that's where the resolver writes its
593 debugging output.
594
595 When we close stderr (which implies we've also closed stdout), we also get rid
596 of any controlling terminal.
597
598 Arguments:   None
599 Returns:     Nothing
600 */
601
602 static void
603 close_unwanted(void)
604 {
605 if (smtp_input)
606   {
607 #ifndef DISABLE_TLS
608   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
609 #endif
610   (void)close(fileno(smtp_in));
611   (void)close(fileno(smtp_out));
612   smtp_in = NULL;
613   }
614 else
615   {
616   (void)close(0);                                          /* stdin */
617   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
618   if (debug_selector == 0)                                 /* stderr */
619     {
620     if (!f.synchronous_delivery)
621       {
622       (void)close(2);
623       log_stderr = NULL;
624       }
625     (void)setsid();
626     }
627   }
628 }
629
630
631
632
633 /*************************************************
634 *          Set uid and gid                       *
635 *************************************************/
636
637 /* This function sets a new uid and gid permanently, optionally calling
638 initgroups() to set auxiliary groups. There are some special cases when running
639 Exim in unprivileged modes. In these situations the effective uid will not be
640 root; if we already have the right effective uid/gid, and don't need to
641 initialize any groups, leave things as they are.
642
643 Arguments:
644   uid        the uid
645   gid        the gid
646   igflag     TRUE if initgroups() wanted
647   msg        text to use in debugging output and failure log
648
649 Returns:     nothing; bombs out on failure
650 */
651
652 void
653 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, uschar *msg)
654 {
655 uid_t euid = geteuid();
656 gid_t egid = getegid();
657
658 if (euid == root_uid || euid != uid || egid != gid || igflag)
659   {
660   /* At least one OS returns +1 for initgroups failure, so just check for
661   non-zero. */
662
663   if (igflag)
664     {
665     struct passwd *pw = getpwuid(uid);
666     if (!pw)
667       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
668         "no passwd entry for uid=%ld", (long int)uid);
669
670     if (initgroups(pw->pw_name, gid) != 0)
671       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
672         (long int)uid, strerror(errno));
673     }
674
675   if (setgid(gid) < 0 || setuid(uid) < 0)
676     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
677       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
678   }
679
680 /* Debugging output included uid/gid and all groups */
681
682 DEBUG(D_uid)
683   {
684   int group_count, save_errno;
685   gid_t group_list[EXIM_GROUPLIST_SIZE];
686   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
687     (long int)geteuid(), (long int)getegid(), (long int)getpid());
688   group_count = getgroups(nelem(group_list), group_list);
689   save_errno = errno;
690   debug_printf("  auxiliary group list:");
691   if (group_count > 0)
692     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
693   else if (group_count < 0)
694     debug_printf(" <error: %s>", strerror(save_errno));
695   else debug_printf(" <none>");
696   debug_printf("\n");
697   }
698 }
699
700
701
702
703 /*************************************************
704 *               Exit point                       *
705 *************************************************/
706
707 /* Exim exits via this function so that it always clears up any open
708 databases.
709
710 Arguments:
711   rc         return code
712
713 Returns:     does not return
714 */
715
716 void
717 exim_exit(int rc, const uschar * process)
718 {
719 search_tidyup();
720 store_exit();
721 DEBUG(D_any)
722   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d %s%s%sterminating with rc=%d "
723     ">>>>>>>>>>>>>>>>\n", (int)getpid(),
724     process ? "(" : "", process, process ? ") " : "", rc);
725 exit(rc);
726 }
727
728
729 void
730 exim_underbar_exit(int rc)
731 {
732 store_exit();
733 _exit(rc);
734 }
735
736
737
738 /* Print error string, then die */
739 static void
740 exim_fail(const char * fmt, ...)
741 {
742 va_list ap;
743 va_start(ap, fmt);
744 vfprintf(stderr, fmt, ap);
745 exit(EXIT_FAILURE);
746 }
747
748 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
749 of chown()/fchown().  See src/functions.h for more explanation */
750 int
751 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
752 {
753 int saved_errno = errno;  /* from the preceeding chown call */
754 #if 1
755 log_write(0, LOG_MAIN|LOG_PANIC,
756   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
757   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
758   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
759 #else
760 /* I leave this here, commented, in case the "bug"(?) comes up again.
761    It is not an Exim bug, but we can provide a workaround.
762    See Bug 2391
763    HS 2019-04-18 */
764
765 struct stat buf;
766
767 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
768 {
769   if (buf.st_uid == owner && buf.st_gid == group) return 0;
770   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
771 }
772 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
773
774 #endif
775 errno = saved_errno;
776 return -1;
777 }
778
779
780 /*************************************************
781 *         Extract port from host address         *
782 *************************************************/
783
784 /* Called to extract the port from the values given to -oMa and -oMi.
785 It also checks the syntax of the address, and terminates it before the
786 port data when a port is extracted.
787
788 Argument:
789   address   the address, with possible port on the end
790
791 Returns:    the port, or zero if there isn't one
792             bombs out on a syntax error
793 */
794
795 static int
796 check_port(uschar *address)
797 {
798 int port = host_address_extract_port(address);
799 if (string_is_ip_address(address, NULL) == 0)
800   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
801 return port;
802 }
803
804
805
806 /*************************************************
807 *              Test/verify an address            *
808 *************************************************/
809
810 /* This function is called by the -bv and -bt code. It extracts a working
811 address from a full RFC 822 address. This isn't really necessary per se, but it
812 has the effect of collapsing source routes.
813
814 Arguments:
815   s            the address string
816   flags        flag bits for verify_address()
817   exit_value   to be set for failures
818
819 Returns:       nothing
820 */
821
822 static void
823 test_address(uschar *s, int flags, int *exit_value)
824 {
825 int start, end, domain;
826 uschar *parse_error = NULL;
827 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
828   FALSE);
829 if (address == NULL)
830   {
831   fprintf(stdout, "syntax error: %s\n", parse_error);
832   *exit_value = 2;
833   }
834 else
835   {
836   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
837     -1, -1, NULL, NULL, NULL);
838   if (rc == FAIL) *exit_value = 2;
839     else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
840   }
841 }
842
843
844
845 /*************************************************
846 *          Show supported features               *
847 *************************************************/
848
849 static void
850 show_db_version(FILE * f)
851 {
852 #ifdef DB_VERSION_STRING
853 DEBUG(D_any)
854   {
855   fprintf(f, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
856   fprintf(f, "                      Runtime: %s\n",
857     db_version(NULL, NULL, NULL));
858   }
859 else
860   fprintf(f, "Berkeley DB: %s\n", DB_VERSION_STRING);
861
862 #elif defined(BTREEVERSION) && defined(HASHVERSION)
863   #ifdef USE_DB
864   fprintf(f, "Probably Berkeley DB version 1.8x (native mode)\n");
865   #else
866   fprintf(f, "Probably Berkeley DB version 1.8x (compatibility mode)\n");
867   #endif
868
869 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
870 fprintf(f, "Probably ndbm\n");
871 #elif defined(USE_TDB)
872 fprintf(f, "Using tdb\n");
873 #else
874   #ifdef USE_GDBM
875   fprintf(f, "Probably GDBM (native mode)\n");
876   #else
877   fprintf(f, "Probably GDBM (compatibility mode)\n");
878   #endif
879 #endif
880 }
881
882
883 /* This function is called for -bV/--version and for -d to output the optional
884 features of the current Exim binary.
885
886 Arguments:  a FILE for printing
887 Returns:    nothing
888 */
889
890 static void
891 show_whats_supported(FILE * fp)
892 {
893 DEBUG(D_any) {} else show_db_version(fp);
894
895 fprintf(fp, "Support for:");
896 #ifdef SUPPORT_CRYPTEQ
897   fprintf(fp, " crypteq");
898 #endif
899 #if HAVE_ICONV
900   fprintf(fp, " iconv()");
901 #endif
902 #if HAVE_IPV6
903   fprintf(fp, " IPv6");
904 #endif
905 #ifdef HAVE_SETCLASSRESOURCES
906   fprintf(fp, " use_setclassresources");
907 #endif
908 #ifdef SUPPORT_PAM
909   fprintf(fp, " PAM");
910 #endif
911 #ifdef EXIM_PERL
912   fprintf(fp, " Perl");
913 #endif
914 #ifdef EXPAND_DLFUNC
915   fprintf(fp, " Expand_dlfunc");
916 #endif
917 #ifdef USE_TCP_WRAPPERS
918   fprintf(fp, " TCPwrappers");
919 #endif
920 #ifdef USE_GNUTLS
921   fprintf(fp, " GnuTLS");
922 #endif
923 #ifdef USE_OPENSSL
924   fprintf(fp, " OpenSSL");
925 #endif
926 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
927   fprintf(fp, " translate_ip_address");
928 #endif
929 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
930   fprintf(fp, " move_frozen_messages");
931 #endif
932 #ifdef WITH_CONTENT_SCAN
933   fprintf(fp, " Content_Scanning");
934 #endif
935 #ifdef SUPPORT_DANE
936   fprintf(fp, " DANE");
937 #endif
938 #ifndef DISABLE_DKIM
939   fprintf(fp, " DKIM");
940 #endif
941 #ifndef DISABLE_DNSSEC
942   fprintf(fp, " DNSSEC");
943 #endif
944 #ifndef DISABLE_EVENT
945   fprintf(fp, " Event");
946 #endif
947 #ifdef SUPPORT_I18N
948   fprintf(fp, " I18N");
949 #endif
950 #ifndef DISABLE_OCSP
951   fprintf(fp, " OCSP");
952 #endif
953 #ifndef DISABLE_PIPE_CONNECT
954   fprintf(fp, " PIPE_CONNECT");
955 #endif
956 #ifndef DISABLE_PRDR
957   fprintf(fp, " PRDR");
958 #endif
959 #ifdef SUPPORT_PROXY
960   fprintf(fp, " PROXY");
961 #endif
962 #ifdef SUPPORT_SOCKS
963   fprintf(fp, " SOCKS");
964 #endif
965 #ifdef SUPPORT_SPF
966   fprintf(fp, " SPF");
967 #endif
968 #ifdef SUPPORT_DMARC
969   fprintf(fp, " DMARC");
970 #endif
971 #ifdef TCP_FASTOPEN
972   tcp_init();
973   if (f.tcp_fastopen_ok) fprintf(fp, " TCP_Fast_Open");
974 #endif
975 #ifdef EXPERIMENTAL_LMDB
976   fprintf(fp, " Experimental_LMDB");
977 #endif
978 #ifdef EXPERIMENTAL_QUEUEFILE
979   fprintf(fp, " Experimental_QUEUEFILE");
980 #endif
981 #if defined(EXPERIMENTAL_SRS) || defined(EXPERIMENTAL_SRS_NATIVE)
982   fprintf(fp, " Experimental_SRS");
983 #endif
984 #ifdef EXPERIMENTAL_ARC
985   fprintf(fp, " Experimental_ARC");
986 #endif
987 #ifdef EXPERIMENTAL_BRIGHTMAIL
988   fprintf(fp, " Experimental_Brightmail");
989 #endif
990 #ifdef EXPERIMENTAL_DCC
991   fprintf(fp, " Experimental_DCC");
992 #endif
993 #ifdef EXPERIMENTAL_DSN_INFO
994   fprintf(fp, " Experimental_DSN_info");
995 #endif
996 #ifdef EXPERIMENTAL_TLS_RESUME
997   fprintf(fp, " Experimental_TLS_resume");
998 #endif
999 fprintf(fp, "\n");
1000
1001 fprintf(fp, "Lookups (built-in):");
1002 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1003   fprintf(fp, " lsearch wildlsearch nwildlsearch iplsearch");
1004 #endif
1005 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1006   fprintf(fp, " cdb");
1007 #endif
1008 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1009   fprintf(fp, " dbm dbmjz dbmnz");
1010 #endif
1011 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1012   fprintf(fp, " dnsdb");
1013 #endif
1014 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1015   fprintf(fp, " dsearch");
1016 #endif
1017 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1018   fprintf(fp, " ibase");
1019 #endif
1020 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1021   fprintf(fp, " json");
1022 #endif
1023 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1024   fprintf(fp, " ldap ldapdn ldapm");
1025 #endif
1026 #ifdef EXPERIMENTAL_LMDB
1027   fprintf(fp, " lmdb");
1028 #endif
1029 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1030   fprintf(fp, " mysql");
1031 #endif
1032 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1033   fprintf(fp, " nis nis0");
1034 #endif
1035 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1036   fprintf(fp, " nisplus");
1037 #endif
1038 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1039   fprintf(fp, " oracle");
1040 #endif
1041 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1042   fprintf(fp, " passwd");
1043 #endif
1044 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1045   fprintf(fp, " pgsql");
1046 #endif
1047 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1048   fprintf(fp, " redis");
1049 #endif
1050 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1051   fprintf(fp, " sqlite");
1052 #endif
1053 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1054   fprintf(fp, " testdb");
1055 #endif
1056 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1057   fprintf(fp, " whoson");
1058 #endif
1059 fprintf(fp, "\n");
1060
1061 auth_show_supported(fp);
1062 route_show_supported(fp);
1063 transport_show_supported(fp);
1064
1065 #ifdef WITH_CONTENT_SCAN
1066 malware_show_supported(fp);
1067 #endif
1068
1069 if (fixed_never_users[0] > 0)
1070   {
1071   int i;
1072   fprintf(fp, "Fixed never_users: ");
1073   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1074     fprintf(fp, "%d:", (unsigned int)fixed_never_users[i]);
1075   fprintf(fp, "%d\n", (unsigned int)fixed_never_users[i]);
1076   }
1077
1078 fprintf(fp, "Configure owner: %d:%d\n", config_uid, config_gid);
1079
1080 fprintf(fp, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1081
1082 /* Everything else is details which are only worth reporting when debugging.
1083 Perhaps the tls_version_report should move into this too. */
1084 DEBUG(D_any) do {
1085
1086 /* clang defines __GNUC__ (at least, for me) so test for it first */
1087 #if defined(__clang__)
1088   fprintf(fp, "Compiler: CLang [%s]\n", __clang_version__);
1089 #elif defined(__GNUC__)
1090   fprintf(fp, "Compiler: GCC [%s]\n",
1091 # ifdef __VERSION__
1092       __VERSION__
1093 # else
1094       "? unknown version ?"
1095 # endif
1096       );
1097 #else
1098   fprintf(fp, "Compiler: <unknown>\n");
1099 #endif
1100
1101 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1102   fprintf(fp, "Library version: Glibc: Compile: %d.%d\n",
1103                 __GLIBC__, __GLIBC_MINOR__);
1104   if (__GLIBC_PREREQ(2, 1))
1105     fprintf(fp, "                        Runtime: %s\n",
1106                 gnu_get_libc_version());
1107 #endif
1108
1109 show_db_version(fp);
1110
1111 #ifndef DISABLE_TLS
1112   tls_version_report(fp);
1113 #endif
1114 #ifdef SUPPORT_I18N
1115   utf8_version_report(fp);
1116 #endif
1117 #ifdef SUPPORT_SPF
1118   spf_lib_version_report(fp);
1119 #endif
1120
1121   for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1122     if (authi->version_report)
1123       (*authi->version_report)(fp);
1124
1125   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1126   characters; unless it's an ancient version of PCRE in which case it
1127   is not defined. */
1128 #ifndef PCRE_PRERELEASE
1129 # define PCRE_PRERELEASE
1130 #endif
1131 #define QUOTE(X) #X
1132 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1133   fprintf(fp, "Library version: PCRE: Compile: %d.%d%s\n"
1134              "                       Runtime: %s\n",
1135           PCRE_MAJOR, PCRE_MINOR,
1136           EXPAND_AND_QUOTE(PCRE_PRERELEASE) "",
1137           pcre_version());
1138 #undef QUOTE
1139 #undef EXPAND_AND_QUOTE
1140
1141   init_lookup_list();
1142   for (int i = 0; i < lookup_list_count; i++)
1143     if (lookup_list[i]->version_report)
1144       lookup_list[i]->version_report(fp);
1145
1146 #ifdef WHITELIST_D_MACROS
1147   fprintf(fp, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1148 #else
1149   fprintf(fp, "WHITELIST_D_MACROS unset\n");
1150 #endif
1151 #ifdef TRUSTED_CONFIG_LIST
1152   fprintf(fp, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1153 #else
1154   fprintf(fp, "TRUSTED_CONFIG_LIST unset\n");
1155 #endif
1156
1157 } while (0);
1158 }
1159
1160
1161 /*************************************************
1162 *     Show auxiliary information about Exim      *
1163 *************************************************/
1164
1165 static void
1166 show_exim_information(enum commandline_info request, FILE *stream)
1167 {
1168 switch(request)
1169   {
1170   case CMDINFO_NONE:
1171     fprintf(stream, "Oops, something went wrong.\n");
1172     return;
1173   case CMDINFO_HELP:
1174     fprintf(stream,
1175 "The -bI: flag takes a string indicating which information to provide.\n"
1176 "If the string is not recognised, you'll get this help (on stderr).\n"
1177 "\n"
1178 "  exim -bI:help    this information\n"
1179 "  exim -bI:dscp    list of known dscp value keywords\n"
1180 "  exim -bI:sieve   list of supported sieve extensions\n"
1181 );
1182     return;
1183   case CMDINFO_SIEVE:
1184     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1185       fprintf(stream, "%s\n", *pp);
1186     return;
1187   case CMDINFO_DSCP:
1188     dscp_list_to_stream(stream);
1189     return;
1190   }
1191 }
1192
1193
1194 /*************************************************
1195 *               Quote a local part               *
1196 *************************************************/
1197
1198 /* This function is used when a sender address or a From: or Sender: header
1199 line is being created from the caller's login, or from an authenticated_id. It
1200 applies appropriate quoting rules for a local part.
1201
1202 Argument:    the local part
1203 Returns:     the local part, quoted if necessary
1204 */
1205
1206 uschar *
1207 local_part_quote(uschar *lpart)
1208 {
1209 BOOL needs_quote = FALSE;
1210 gstring * g;
1211
1212 for (uschar * t = lpart; !needs_quote && *t != 0; t++)
1213   {
1214   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1215     (*t != '.' || t == lpart || t[1] == 0);
1216   }
1217
1218 if (!needs_quote) return lpart;
1219
1220 g = string_catn(NULL, US"\"", 1);
1221
1222 for (;;)
1223   {
1224   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1225   if (nq == NULL)
1226     {
1227     g = string_cat(g, lpart);
1228     break;
1229     }
1230   g = string_catn(g, lpart, nq - lpart);
1231   g = string_catn(g, US"\\", 1);
1232   g = string_catn(g, nq, 1);
1233   lpart = nq + 1;
1234   }
1235
1236 g = string_catn(g, US"\"", 1);
1237 return string_from_gstring(g);
1238 }
1239
1240
1241
1242 #ifdef USE_READLINE
1243 /*************************************************
1244 *         Load readline() functions              *
1245 *************************************************/
1246
1247 /* This function is called from testing executions that read data from stdin,
1248 but only when running as the calling user. Currently, only -be does this. The
1249 function loads the readline() function library and passes back the functions.
1250 On some systems, it needs the curses library, so load that too, but try without
1251 it if loading fails. All this functionality has to be requested at build time.
1252
1253 Arguments:
1254   fn_readline_ptr   pointer to where to put the readline pointer
1255   fn_addhist_ptr    pointer to where to put the addhistory function
1256
1257 Returns:            the dlopen handle or NULL on failure
1258 */
1259
1260 static void *
1261 set_readline(char * (**fn_readline_ptr)(const char *),
1262              void   (**fn_addhist_ptr)(const char *))
1263 {
1264 void *dlhandle;
1265 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1266
1267 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1268 if (dlhandle_curses) dlclose(dlhandle_curses);
1269
1270 if (dlhandle)
1271   {
1272   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1273    *   char * readline (const char *prompt);
1274    *   void add_history (const char *string);
1275    */
1276   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1277   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1278   }
1279 else
1280   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1281
1282 return dlhandle;
1283 }
1284 #endif
1285
1286
1287
1288 /*************************************************
1289 *    Get a line from stdin for testing things    *
1290 *************************************************/
1291
1292 /* This function is called when running tests that can take a number of lines
1293 of input (for example, -be and -bt). It handles continuations and trailing
1294 spaces. And prompting and a blank line output on eof. If readline() is in use,
1295 the arguments are non-NULL and provide the relevant functions.
1296
1297 Arguments:
1298   fn_readline   readline function or NULL
1299   fn_addhist    addhist function or NULL
1300
1301 Returns:        pointer to dynamic memory, or NULL at end of file
1302 */
1303
1304 static uschar *
1305 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1306 {
1307 gstring * g = NULL;
1308
1309 if (!fn_readline) { printf("> "); fflush(stdout); }
1310
1311 for (int i = 0;; i++)
1312   {
1313   uschar buffer[1024];
1314   uschar *p, *ss;
1315
1316   #ifdef USE_READLINE
1317   char *readline_line = NULL;
1318   if (fn_readline)
1319     {
1320     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1321     if (*readline_line != 0 && fn_addhist) fn_addhist(readline_line);
1322     p = US readline_line;
1323     }
1324   else
1325   #endif
1326
1327   /* readline() not in use */
1328
1329     {
1330     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;
1331     p = buffer;
1332     }
1333
1334   /* Handle the line */
1335
1336   ss = p + (int)Ustrlen(p);
1337   while (ss > p && isspace(ss[-1])) ss--;
1338
1339   if (i > 0)
1340     while (p < ss && isspace(*p)) p++;   /* leading space after cont */
1341
1342   g = string_catn(g, p, ss - p);
1343
1344   #ifdef USE_READLINE
1345   if (fn_readline) free(readline_line);
1346   #endif
1347
1348   /* g can only be NULL if ss==p */
1349   if (ss == p || g->s[g->ptr-1] != '\\')
1350     break;
1351
1352   --g->ptr;
1353   (void) string_from_gstring(g);
1354   }
1355
1356 if (!g) printf("\n");
1357 return string_from_gstring(g);
1358 }
1359
1360
1361
1362 /*************************************************
1363 *    Output usage information for the program    *
1364 *************************************************/
1365
1366 /* This function is called when there are no recipients
1367    or a specific --help argument was added.
1368
1369 Arguments:
1370   progname      information on what name we were called by
1371
1372 Returns:        DOES NOT RETURN
1373 */
1374
1375 static void
1376 exim_usage(uschar *progname)
1377 {
1378
1379 /* Handle specific program invocation variants */
1380 if (Ustrcmp(progname, US"-mailq") == 0)
1381   exim_fail(
1382     "mailq - list the contents of the mail queue\n\n"
1383     "For a list of options, see the Exim documentation.\n");
1384
1385 /* Generic usage - we output this whatever happens */
1386 exim_fail(
1387   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1388   "not directly from a shell command line. Options and/or arguments control\n"
1389   "what it does when called. For a list of options, see the Exim documentation.\n");
1390 }
1391
1392
1393
1394 /*************************************************
1395 *    Validate that the macros given are okay     *
1396 *************************************************/
1397
1398 /* Typically, Exim will drop privileges if macros are supplied.  In some
1399 cases, we want to not do so.
1400
1401 Arguments:    opt_D_used - true if the commandline had a "-D" option
1402 Returns:      true if trusted, false otherwise
1403 */
1404
1405 static BOOL
1406 macros_trusted(BOOL opt_D_used)
1407 {
1408 #ifdef WHITELIST_D_MACROS
1409 uschar *whitelisted, *end, *p, **whites;
1410 int white_count, i, n;
1411 size_t len;
1412 BOOL prev_char_item, found;
1413 #endif
1414
1415 if (!opt_D_used)
1416   return TRUE;
1417 #ifndef WHITELIST_D_MACROS
1418 return FALSE;
1419 #else
1420
1421 /* We only trust -D overrides for some invoking users:
1422 root, the exim run-time user, the optional config owner user.
1423 I don't know why config-owner would be needed, but since they can own the
1424 config files anyway, there's no security risk to letting them override -D. */
1425 if ( ! ((real_uid == root_uid)
1426      || (real_uid == exim_uid)
1427 #ifdef CONFIGURE_OWNER
1428      || (real_uid == config_uid)
1429 #endif
1430    ))
1431   {
1432   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1433   return FALSE;
1434   }
1435
1436 /* Get a list of macros which are whitelisted */
1437 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1438 prev_char_item = FALSE;
1439 white_count = 0;
1440 for (p = whitelisted; *p != '\0'; ++p)
1441   {
1442   if (*p == ':' || isspace(*p))
1443     {
1444     *p = '\0';
1445     if (prev_char_item)
1446       ++white_count;
1447     prev_char_item = FALSE;
1448     continue;
1449     }
1450   if (!prev_char_item)
1451     prev_char_item = TRUE;
1452   }
1453 end = p;
1454 if (prev_char_item)
1455   ++white_count;
1456 if (!white_count)
1457   return FALSE;
1458 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1459 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1460   {
1461   if (*p != '\0')
1462     {
1463     whites[i++] = p;
1464     if (i == white_count)
1465       break;
1466     while (*p != '\0' && p < end)
1467       ++p;
1468     }
1469   }
1470 whites[i] = NULL;
1471
1472 /* The list of commandline macros should be very short.
1473 Accept the N*M complexity. */
1474 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1475   {
1476   found = FALSE;
1477   for (uschar ** w = whites; *w; ++w)
1478     if (Ustrcmp(*w, m->name) == 0)
1479       {
1480       found = TRUE;
1481       break;
1482       }
1483   if (!found)
1484     return FALSE;
1485   if (!m->replacement)
1486     continue;
1487   if ((len = m->replen) == 0)
1488     continue;
1489   n = pcre_exec(regex_whitelisted_macro, NULL, CS m->replacement, len,
1490    0, PCRE_EOPT, NULL, 0);
1491   if (n < 0)
1492     {
1493     if (n != PCRE_ERROR_NOMATCH)
1494       debug_printf("macros_trusted checking %s returned %d\n", m->name, n);
1495     return FALSE;
1496     }
1497   }
1498 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1499 return TRUE;
1500 #endif
1501 }
1502
1503
1504 /*************************************************
1505 *          Expansion testing                     *
1506 *************************************************/
1507
1508 /* Expand and print one item, doing macro-processing.
1509
1510 Arguments:
1511   item          line for expansion
1512 */
1513
1514 static void
1515 expansion_test_line(uschar * line)
1516 {
1517 int len;
1518 BOOL dummy_macexp;
1519
1520 Ustrncpy(big_buffer, line, big_buffer_size);
1521 big_buffer[big_buffer_size-1] = '\0';
1522 len = Ustrlen(big_buffer);
1523
1524 (void) macros_expand(0, &len, &dummy_macexp);
1525
1526 if (isupper(big_buffer[0]))
1527   {
1528   if (macro_read_assignment(big_buffer))
1529     printf("Defined macro '%s'\n", mlast->name);
1530   }
1531 else
1532   if ((line = expand_string(big_buffer))) printf("%s\n", CS line);
1533   else printf("Failed: %s\n", expand_string_message);
1534 }
1535
1536
1537
1538 /*************************************************
1539 *          Entry point and high-level code       *
1540 *************************************************/
1541
1542 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1543 the appropriate action. All the necessary functions are present in the one
1544 binary. I originally thought one should split it up, but it turns out that so
1545 much of the apparatus is needed in each chunk that one might as well just have
1546 it all available all the time, which then makes the coding easier as well.
1547
1548 Arguments:
1549   argc      count of entries in argv
1550   argv      argument strings, with argv[0] being the program name
1551
1552 Returns:    EXIT_SUCCESS if terminated successfully
1553             EXIT_FAILURE otherwise, except when a message has been sent
1554               to the sender, and -oee was given
1555 */
1556
1557 int
1558 main(int argc, char **cargv)
1559 {
1560 uschar **argv = USS cargv;
1561 int  arg_receive_timeout = -1;
1562 int  arg_smtp_receive_timeout = -1;
1563 int  arg_error_handling = error_handling;
1564 int  filter_sfd = -1;
1565 int  filter_ufd = -1;
1566 int  group_count;
1567 int  i, rv;
1568 int  list_queue_option = 0;
1569 int  msg_action = 0;
1570 int  msg_action_arg = -1;
1571 int  namelen = (argv[0] == NULL)? 0 : Ustrlen(argv[0]);
1572 int  queue_only_reason = 0;
1573 #ifdef EXIM_PERL
1574 int  perl_start_option = 0;
1575 #endif
1576 int  recipients_arg = argc;
1577 int  sender_address_domain = 0;
1578 int  test_retry_arg = -1;
1579 int  test_rewrite_arg = -1;
1580 gid_t original_egid;
1581 BOOL arg_queue_only = FALSE;
1582 BOOL bi_option = FALSE;
1583 BOOL checking = FALSE;
1584 BOOL count_queue = FALSE;
1585 BOOL expansion_test = FALSE;
1586 BOOL extract_recipients = FALSE;
1587 BOOL flag_G = FALSE;
1588 BOOL flag_n = FALSE;
1589 BOOL forced_delivery = FALSE;
1590 BOOL f_end_dot = FALSE;
1591 BOOL deliver_give_up = FALSE;
1592 BOOL list_queue = FALSE;
1593 BOOL list_options = FALSE;
1594 BOOL list_config = FALSE;
1595 BOOL local_queue_only;
1596 BOOL more = TRUE;
1597 BOOL one_msg_action = FALSE;
1598 BOOL opt_D_used = FALSE;
1599 BOOL queue_only_set = FALSE;
1600 BOOL receiving_message = TRUE;
1601 BOOL sender_ident_set = FALSE;
1602 BOOL session_local_queue_only;
1603 BOOL unprivileged;
1604 BOOL removed_privilege = FALSE;
1605 BOOL usage_wanted = FALSE;
1606 BOOL verify_address_mode = FALSE;
1607 BOOL verify_as_sender = FALSE;
1608 BOOL version_printed = FALSE;
1609 uschar *alias_arg = NULL;
1610 uschar *called_as = US"";
1611 uschar *cmdline_syslog_name = NULL;
1612 uschar *start_queue_run_id = NULL;
1613 uschar *stop_queue_run_id = NULL;
1614 uschar *expansion_test_message = NULL;
1615 uschar *ftest_domain = NULL;
1616 uschar *ftest_localpart = NULL;
1617 uschar *ftest_prefix = NULL;
1618 uschar *ftest_suffix = NULL;
1619 uschar *log_oneline = NULL;
1620 uschar *malware_test_file = NULL;
1621 uschar *real_sender_address;
1622 uschar *originator_home = US"/";
1623 size_t sz;
1624 rmark reset_point;
1625
1626 struct passwd *pw;
1627 struct stat statbuf;
1628 pid_t passed_qr_pid = (pid_t)0;
1629 int passed_qr_pipe = -1;
1630 gid_t group_list[EXIM_GROUPLIST_SIZE];
1631
1632 /* For the -bI: flag */
1633 enum commandline_info info_flag = CMDINFO_NONE;
1634 BOOL info_stdout = FALSE;
1635
1636 /* Possible options for -R and -S */
1637
1638 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1639
1640 /* Need to define this in case we need to change the environment in order
1641 to get rid of a bogus time zone. We have to make it char rather than uschar
1642 because some OS define it in /usr/include/unistd.h. */
1643
1644 extern char **environ;
1645
1646 #ifdef MEASURE_TIMING
1647 (void)gettimeofday(&timestamp_startup, NULL);
1648 #endif
1649
1650 /* If the Exim user and/or group and/or the configuration file owner/group were
1651 defined by ref:name at build time, we must now find the actual uid/gid values.
1652 This is a feature to make the lives of binary distributors easier. */
1653
1654 #ifdef EXIM_USERNAME
1655 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1656   {
1657   if (exim_uid == 0)
1658     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1659
1660   /* If ref:name uses a number as the name, route_finduser() returns
1661   TRUE with exim_uid set and pw coerced to NULL. */
1662   if (pw)
1663     exim_gid = pw->pw_gid;
1664 #ifndef EXIM_GROUPNAME
1665   else
1666     exim_fail(
1667         "exim: ref:name should specify a usercode, not a group.\n"
1668         "exim: can't let you get away with it unless you also specify a group.\n");
1669 #endif
1670   }
1671 else
1672   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1673 #endif
1674
1675 #ifdef EXIM_GROUPNAME
1676 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1677   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1678 #endif
1679
1680 #ifdef CONFIGURE_OWNERNAME
1681 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1682   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1683     CONFIGURE_OWNERNAME);
1684 #endif
1685
1686 /* We default the system_filter_user to be the Exim run-time user, as a
1687 sane non-root value. */
1688 system_filter_uid = exim_uid;
1689
1690 #ifdef CONFIGURE_GROUPNAME
1691 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1692   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1693     CONFIGURE_GROUPNAME);
1694 #endif
1695
1696 /* In the Cygwin environment, some initialization used to need doing.
1697 It was fudged in by means of this macro; now no longer but we'll leave
1698 it in case of others. */
1699
1700 #ifdef OS_INIT
1701 OS_INIT
1702 #endif
1703
1704 /* Check a field which is patched when we are running Exim within its
1705 testing harness; do a fast initial check, and then the whole thing. */
1706
1707 f.running_in_test_harness =
1708   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1709 if (f.running_in_test_harness)
1710   debug_store = TRUE;
1711
1712 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1713 at the start of a program; however, it seems that some environments do not
1714 follow this. A "strange" locale can affect the formatting of timestamps, so we
1715 make quite sure. */
1716
1717 setlocale(LC_ALL, "C");
1718
1719 /* Get the offset between CLOCK_MONOTONIC and wallclock */
1720
1721 #ifdef _POSIX_MONOTONIC_CLOCK
1722 exim_clock_init();
1723 #endif
1724
1725 /* Set up the default handler for timing using alarm(). */
1726
1727 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1728
1729 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1730 because store_malloc writes a log entry on failure. */
1731
1732 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1733   exim_fail("exim: failed to get store for log buffer\n");
1734
1735 /* Initialize the default log options. */
1736
1737 bits_set(log_selector, log_selector_size, log_default);
1738
1739 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1740 NULL when the daemon is run and the file is closed. We have to use this
1741 indirection, because some systems don't allow writing to the variable "stderr".
1742 */
1743
1744 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1745
1746 /* Arrange for the PCRE regex library to use our store functions. Note that
1747 the normal calls are actually macros that add additional arguments for
1748 debugging purposes so we have to assign specially constructed functions here.
1749 The default is to use store in the stacking pool, but this is overridden in the
1750 regex_must_compile() function. */
1751
1752 pcre_malloc = function_store_get;
1753 pcre_free = function_dummy_free;
1754
1755 /* Ensure there is a big buffer for temporary use in several places. It is put
1756 in malloc store so that it can be freed for enlargement if necessary. */
1757
1758 big_buffer = store_malloc(big_buffer_size);
1759
1760 /* Set up the handler for the data request signal, and set the initial
1761 descriptive text. */
1762
1763 process_info = store_get(PROCESS_INFO_SIZE, TRUE);      /* tainted */
1764 set_process_info("initializing");
1765 os_restarting_signal(SIGUSR1, usr1_handler);
1766
1767 /* If running in a dockerized environment, the TERM signal is only
1768 delegated to the PID 1 if we request it by setting an signal handler */
1769 if (getpid() == 1) signal(SIGTERM, term_handler);
1770
1771 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1772 in the daemon code. For the rest of Exim's uses, we ignore it. */
1773
1774 signal(SIGHUP, SIG_IGN);
1775
1776 /* We don't want to die on pipe errors as the code is written to handle
1777 the write error instead. */
1778
1779 signal(SIGPIPE, SIG_IGN);
1780
1781 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1782 set to SIG_IGN. This causes subprocesses that complete before the parent
1783 process waits for them not to hang around, so when Exim calls wait(), nothing
1784 is there. The wait() code has been made robust against this, but let's ensure
1785 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1786 ending status. We use sigaction rather than plain signal() on those OS where
1787 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1788 problem on AIX with this.) */
1789
1790 #ifdef SA_NOCLDWAIT
1791   {
1792   struct sigaction act;
1793   act.sa_handler = SIG_DFL;
1794   sigemptyset(&(act.sa_mask));
1795   act.sa_flags = 0;
1796   sigaction(SIGCHLD, &act, NULL);
1797   }
1798 #else
1799 signal(SIGCHLD, SIG_DFL);
1800 #endif
1801
1802 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1803 SIGHUP. */
1804
1805 sighup_argv = argv;
1806
1807 /* Set up the version number. Set up the leading 'E' for the external form of
1808 message ids, set the pointer to the internal form, and initialize it to
1809 indicate no message being processed. */
1810
1811 version_init();
1812 message_id_option[0] = '-';
1813 message_id_external = message_id_option + 1;
1814 message_id_external[0] = 'E';
1815 message_id = message_id_external + 1;
1816 message_id[0] = 0;
1817
1818 /* Set the umask to zero so that any files Exim creates using open() are
1819 created with the modes that it specifies. NOTE: Files created with fopen() have
1820 a problem, which was not recognized till rather late (February 2006). With this
1821 umask, such files will be world writeable. (They are all content scanning files
1822 in the spool directory, which isn't world-accessible, so this is not a
1823 disaster, but it's untidy.) I don't want to change this overall setting,
1824 however, because it will interact badly with the open() calls. Instead, there's
1825 now a function called modefopen() that fiddles with the umask while calling
1826 fopen(). */
1827
1828 (void)umask(0);
1829
1830 /* Precompile the regular expression for matching a message id. Keep this in
1831 step with the code that generates ids in the accept.c module. We need to do
1832 this here, because the -M options check their arguments for syntactic validity
1833 using mac_ismsgid, which uses this. */
1834
1835 regex_ismsgid =
1836   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
1837
1838 /* Precompile the regular expression that is used for matching an SMTP error
1839 code, possibly extended, at the start of an error message. Note that the
1840 terminating whitespace character is included. */
1841
1842 regex_smtp_code =
1843   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
1844     FALSE, TRUE);
1845
1846 #ifdef WHITELIST_D_MACROS
1847 /* Precompile the regular expression used to filter the content of macros
1848 given to -D for permissibility. */
1849
1850 regex_whitelisted_macro =
1851   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
1852 #endif
1853
1854 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
1855
1856 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
1857 this seems to be a generally accepted convention, since one finds symbolic
1858 links called "mailq" in standard OS configurations. */
1859
1860 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
1861     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
1862   {
1863   list_queue = TRUE;
1864   receiving_message = FALSE;
1865   called_as = US"-mailq";
1866   }
1867
1868 /* If the program is called as "rmail" treat it as equivalent to
1869 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
1870 i.e. preventing a single dot on a line from terminating the message, and
1871 returning with zero return code, even in cases of error (provided an error
1872 message has been sent). */
1873
1874 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
1875     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
1876   {
1877   f.dot_ends = FALSE;
1878   called_as = US"-rmail";
1879   errors_sender_rc = EXIT_SUCCESS;
1880   }
1881
1882 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
1883 this is a smail convention. */
1884
1885 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
1886     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
1887   {
1888   smtp_input = smtp_batched_input = TRUE;
1889   called_as = US"-rsmtp";
1890   }
1891
1892 /* If the program is called as "runq" treat it as equivalent to "exim -q";
1893 this is a smail convention. */
1894
1895 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
1896     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
1897   {
1898   queue_interval = 0;
1899   receiving_message = FALSE;
1900   called_as = US"-runq";
1901   }
1902
1903 /* If the program is called as "newaliases" treat it as equivalent to
1904 "exim -bi"; this is a sendmail convention. */
1905
1906 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
1907     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
1908   {
1909   bi_option = TRUE;
1910   receiving_message = FALSE;
1911   called_as = US"-newaliases";
1912   }
1913
1914 /* Save the original effective uid for a couple of uses later. It should
1915 normally be root, but in some esoteric environments it may not be. */
1916
1917 original_euid = geteuid();
1918 original_egid = getegid();
1919
1920 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
1921 to be the same as the real ones. This makes a difference only if Exim is setuid
1922 (or setgid) to something other than root, which could be the case in some
1923 special configurations. */
1924
1925 real_uid = getuid();
1926 real_gid = getgid();
1927
1928 if (real_uid == root_uid)
1929   {
1930   if ((rv = setgid(real_gid)))
1931     exim_fail("exim: setgid(%ld) failed: %s\n",
1932         (long int)real_gid, strerror(errno));
1933   if ((rv = setuid(real_uid)))
1934     exim_fail("exim: setuid(%ld) failed: %s\n",
1935         (long int)real_uid, strerror(errno));
1936   }
1937
1938 /* If neither the original real uid nor the original euid was root, Exim is
1939 running in an unprivileged state. */
1940
1941 unprivileged = (real_uid != root_uid && original_euid != root_uid);
1942
1943 /* Scan the program's arguments. Some can be dealt with right away; others are
1944 simply recorded for checking and handling afterwards. Do a high-level switch
1945 on the second character (the one after '-'), to save some effort. */
1946
1947 for (i = 1; i < argc; i++)
1948   {
1949   BOOL badarg = FALSE;
1950   uschar *arg = argv[i];
1951   uschar *argrest;
1952   int switchchar;
1953
1954   /* An argument not starting with '-' is the start of a recipients list;
1955   break out of the options-scanning loop. */
1956
1957   if (arg[0] != '-')
1958     {
1959     recipients_arg = i;
1960     break;
1961     }
1962
1963   /* An option consisting of -- terminates the options */
1964
1965   if (Ustrcmp(arg, "--") == 0)
1966     {
1967     recipients_arg = i + 1;
1968     break;
1969     }
1970
1971   /* Handle flagged options */
1972
1973   switchchar = arg[1];
1974   argrest = arg+2;
1975
1976   /* Make all -ex options synonymous with -oex arguments, since that
1977   is assumed by various callers. Also make -qR options synonymous with -R
1978   options, as that seems to be required as well. Allow for -qqR too, and
1979   the same for -S options. */
1980
1981   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
1982       Ustrncmp(arg+1, "qR", 2) == 0 ||
1983       Ustrncmp(arg+1, "qS", 2) == 0)
1984     {
1985     switchchar = arg[2];
1986     argrest++;
1987     }
1988   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
1989     {
1990     switchchar = arg[3];
1991     argrest += 2;
1992     f.queue_2stage = TRUE;
1993     }
1994
1995   /* Make -r synonymous with -f, since it is a documented alias */
1996
1997   else if (arg[1] == 'r') switchchar = 'f';
1998
1999   /* Make -ov synonymous with -v */
2000
2001   else if (Ustrcmp(arg, "-ov") == 0)
2002     {
2003     switchchar = 'v';
2004     argrest++;
2005     }
2006
2007   /* deal with --option_aliases */
2008   else if (switchchar == '-')
2009     {
2010     if (Ustrcmp(argrest, "help") == 0)
2011       {
2012       usage_wanted = TRUE;
2013       break;
2014       }
2015     else if (Ustrcmp(argrest, "version") == 0)
2016       {
2017       switchchar = 'b';
2018       argrest = US"V";
2019       }
2020     }
2021
2022   /* High-level switch on active initial letter */
2023
2024   switch(switchchar)
2025     {
2026
2027     /* sendmail uses -Ac and -Am to control which .cf file is used;
2028     we ignore them. */
2029     case 'A':
2030     if (*argrest == '\0') { badarg = TRUE; break; }
2031     else
2032       {
2033       BOOL ignore = FALSE;
2034       switch (*argrest)
2035         {
2036         case 'c':
2037         case 'm':
2038           if (*(argrest + 1) == '\0')
2039             ignore = TRUE;
2040           break;
2041         }
2042       if (!ignore) { badarg = TRUE; break; }
2043       }
2044     break;
2045
2046     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2047     so has no need of it. */
2048
2049     case 'B':
2050     if (*argrest == 0) i++;       /* Skip over the type */
2051     break;
2052
2053
2054     case 'b':
2055     receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2056
2057     /* -bd:  Run in daemon mode, awaiting SMTP connections.
2058        -bdf: Ditto, but in the foreground.
2059     */
2060
2061     if (*argrest == 'd')
2062       {
2063       f.daemon_listen = TRUE;
2064       if (*(++argrest) == 'f') f.background_daemon = FALSE;
2065         else if (*argrest != 0) { badarg = TRUE; break; }
2066       }
2067
2068     /* -be:  Run in expansion test mode
2069        -bem: Ditto, but read a message from a file first
2070     */
2071
2072     else if (*argrest == 'e')
2073       {
2074       expansion_test = checking = TRUE;
2075       if (argrest[1] == 'm')
2076         {
2077         if (++i >= argc) { badarg = TRUE; break; }
2078         expansion_test_message = argv[i];
2079         argrest++;
2080         }
2081       if (argrest[1] != 0) { badarg = TRUE; break; }
2082       }
2083
2084     /* -bF:  Run system filter test */
2085
2086     else if (*argrest == 'F')
2087       {
2088       filter_test |= checking = FTEST_SYSTEM;
2089       if (*(++argrest) != 0) { badarg = TRUE; break; }
2090       if (++i < argc) filter_test_sfile = argv[i]; else
2091         exim_fail("exim: file name expected after %s\n", argv[i-1]);
2092       }
2093
2094     /* -bf:  Run user filter test
2095        -bfd: Set domain for filter testing
2096        -bfl: Set local part for filter testing
2097        -bfp: Set prefix for filter testing
2098        -bfs: Set suffix for filter testing
2099     */
2100
2101     else if (*argrest == 'f')
2102       {
2103       if (*(++argrest) == 0)
2104         {
2105         filter_test |= checking = FTEST_USER;
2106         if (++i < argc) filter_test_ufile = argv[i]; else
2107           exim_fail("exim: file name expected after %s\n", argv[i-1]);
2108         }
2109       else
2110         {
2111         if (++i >= argc)
2112           exim_fail("exim: string expected after %s\n", arg);
2113         if (Ustrcmp(argrest, "d") == 0) ftest_domain = argv[i];
2114         else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = argv[i];
2115         else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = argv[i];
2116         else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = argv[i];
2117         else { badarg = TRUE; break; }
2118         }
2119       }
2120
2121     /* -bh: Host checking - an IP address must follow. */
2122
2123     else if (Ustrcmp(argrest, "h") == 0 || Ustrcmp(argrest, "hc") == 0)
2124       {
2125       if (++i >= argc) { badarg = TRUE; break; }
2126       sender_host_address = argv[i];
2127       host_checking = checking = f.log_testing_mode = TRUE;
2128       f.host_checking_callout = argrest[1] == 'c';
2129       message_logs = FALSE;
2130       }
2131
2132     /* -bi: This option is used by sendmail to initialize *the* alias file,
2133     though it has the -oA option to specify a different file. Exim has no
2134     concept of *the* alias file, but since Sun's YP make script calls
2135     sendmail this way, some support must be provided. */
2136
2137     else if (Ustrcmp(argrest, "i") == 0) bi_option = TRUE;
2138
2139     /* -bI: provide information, of the type to follow after a colon.
2140     This is an Exim flag. */
2141
2142     else if (argrest[0] == 'I' && Ustrlen(argrest) >= 2 && argrest[1] == ':')
2143       {
2144       uschar *p = &argrest[2];
2145       info_flag = CMDINFO_HELP;
2146       if (Ustrlen(p))
2147         {
2148         if (strcmpic(p, CUS"sieve") == 0)
2149           {
2150           info_flag = CMDINFO_SIEVE;
2151           info_stdout = TRUE;
2152           }
2153         else if (strcmpic(p, CUS"dscp") == 0)
2154           {
2155           info_flag = CMDINFO_DSCP;
2156           info_stdout = TRUE;
2157           }
2158         else if (strcmpic(p, CUS"help") == 0)
2159           {
2160           info_stdout = TRUE;
2161           }
2162         }
2163       }
2164
2165     /* -bm: Accept and deliver message - the default option. Reinstate
2166     receiving_message, which got turned off for all -b options. */
2167
2168     else if (Ustrcmp(argrest, "m") == 0) receiving_message = TRUE;
2169
2170     /* -bmalware: test the filename given for malware */
2171
2172     else if (Ustrcmp(argrest, "malware") == 0)
2173       {
2174       if (++i >= argc) { badarg = TRUE; break; }
2175       checking = TRUE;
2176       malware_test_file = argv[i];
2177       }
2178
2179     /* -bnq: For locally originating messages, do not qualify unqualified
2180     addresses. In the envelope, this causes errors; in header lines they
2181     just get left. */
2182
2183     else if (Ustrcmp(argrest, "nq") == 0)
2184       {
2185       f.allow_unqualified_sender = FALSE;
2186       f.allow_unqualified_recipient = FALSE;
2187       }
2188
2189     /* -bpxx: List the contents of the mail queue, in various forms. If
2190     the option is -bpc, just a queue count is needed. Otherwise, if the
2191     first letter after p is r, then order is random. */
2192
2193     else if (*argrest == 'p')
2194       {
2195       if (*(++argrest) == 'c')
2196         {
2197         count_queue = TRUE;
2198         if (*(++argrest) != 0) badarg = TRUE;
2199         break;
2200         }
2201
2202       if (*argrest == 'r')
2203         {
2204         list_queue_option = 8;
2205         argrest++;
2206         }
2207       else list_queue_option = 0;
2208
2209       list_queue = TRUE;
2210
2211       /* -bp: List the contents of the mail queue, top-level only */
2212
2213       if (*argrest == 0) {}
2214
2215       /* -bpu: List the contents of the mail queue, top-level undelivered */
2216
2217       else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2218
2219       /* -bpa: List the contents of the mail queue, including all delivered */
2220
2221       else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2222
2223       /* Unknown after -bp[r] */
2224
2225       else
2226         {
2227         badarg = TRUE;
2228         break;
2229         }
2230       }
2231
2232
2233     /* -bP: List the configuration variables given as the address list.
2234     Force -v, so configuration errors get displayed. */
2235
2236     else if (Ustrcmp(argrest, "P") == 0)
2237       {
2238       /* -bP config: we need to setup here, because later,
2239        * when list_options is checked, the config is read already */
2240       if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2241         {
2242         list_config = TRUE;
2243         readconf_save_config(version_string);
2244         }
2245       else
2246         {
2247         list_options = TRUE;
2248         debug_selector |= D_v;
2249         debug_file = stderr;
2250         }
2251       }
2252
2253     /* -brt: Test retry configuration lookup */
2254
2255     else if (Ustrcmp(argrest, "rt") == 0)
2256       {
2257       checking = TRUE;
2258       test_retry_arg = i + 1;
2259       goto END_ARG;
2260       }
2261
2262     /* -brw: Test rewrite configuration */
2263
2264     else if (Ustrcmp(argrest, "rw") == 0)
2265       {
2266       checking = TRUE;
2267       test_rewrite_arg = i + 1;
2268       goto END_ARG;
2269       }
2270
2271     /* -bS: Read SMTP commands on standard input, but produce no replies -
2272     all errors are reported by sending messages. */
2273
2274     else if (Ustrcmp(argrest, "S") == 0)
2275       smtp_input = smtp_batched_input = receiving_message = TRUE;
2276
2277     /* -bs: Read SMTP commands on standard input and produce SMTP replies
2278     on standard output. */
2279
2280     else if (Ustrcmp(argrest, "s") == 0) smtp_input = receiving_message = TRUE;
2281
2282     /* -bt: address testing mode */
2283
2284     else if (Ustrcmp(argrest, "t") == 0)
2285       f.address_test_mode = checking = f.log_testing_mode = TRUE;
2286
2287     /* -bv: verify addresses */
2288
2289     else if (Ustrcmp(argrest, "v") == 0)
2290       verify_address_mode = checking = f.log_testing_mode = TRUE;
2291
2292     /* -bvs: verify sender addresses */
2293
2294     else if (Ustrcmp(argrest, "vs") == 0)
2295       {
2296       verify_address_mode = checking = f.log_testing_mode = TRUE;
2297       verify_as_sender = TRUE;
2298       }
2299
2300     /* -bV: Print version string and support details */
2301
2302     else if (Ustrcmp(argrest, "V") == 0)
2303       {
2304       printf("Exim version %s #%s built %s\n", version_string,
2305         version_cnumber, version_date);
2306       printf("%s\n", CS version_copyright);
2307       version_printed = TRUE;
2308       show_whats_supported(stdout);
2309       f.log_testing_mode = TRUE;
2310       }
2311
2312     /* -bw: inetd wait mode, accept a listening socket as stdin */
2313
2314     else if (*argrest == 'w')
2315       {
2316       f.inetd_wait_mode = TRUE;
2317       f.background_daemon = FALSE;
2318       f.daemon_listen = TRUE;
2319       if (*(++argrest) != '\0')
2320         if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2321           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2322       }
2323
2324     else badarg = TRUE;
2325     break;
2326
2327
2328     /* -C: change configuration file list; ignore if it isn't really
2329     a change! Enforce a prefix check if required. */
2330
2331     case 'C':
2332     if (*argrest == 0)
2333       {
2334       if(++i < argc) argrest = argv[i]; else
2335         { badarg = TRUE; break; }
2336       }
2337     if (Ustrcmp(config_main_filelist, argrest) != 0)
2338       {
2339       #ifdef ALT_CONFIG_PREFIX
2340       int sep = 0;
2341       int len = Ustrlen(ALT_CONFIG_PREFIX);
2342       const uschar *list = argrest;
2343       uschar *filename;
2344       while((filename = string_nextinlist(&list, &sep, big_buffer,
2345              big_buffer_size)) != NULL)
2346         {
2347         if ((Ustrlen(filename) < len ||
2348              Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0 ||
2349              Ustrstr(filename, "/../") != NULL) &&
2350              (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid))
2351           exim_fail("-C Permission denied\n");
2352         }
2353       #endif
2354       if (real_uid != root_uid)
2355         {
2356         #ifdef TRUSTED_CONFIG_LIST
2357
2358         if (real_uid != exim_uid
2359             #ifdef CONFIGURE_OWNER
2360             && real_uid != config_uid
2361             #endif
2362             )
2363           f.trusted_config = FALSE;
2364         else
2365           {
2366           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2367           if (trust_list)
2368             {
2369             struct stat statbuf;
2370
2371             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2372                 (statbuf.st_uid != root_uid        /* owner not root */
2373                  #ifdef CONFIGURE_OWNER
2374                  && statbuf.st_uid != config_uid   /* owner not the special one */
2375                  #endif
2376                    ) ||                            /* or */
2377                 (statbuf.st_gid != root_gid        /* group not root */
2378                  #ifdef CONFIGURE_GROUP
2379                  && statbuf.st_gid != config_gid   /* group not the special one */
2380                  #endif
2381                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2382                    ) ||                            /* or */
2383                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2384               {
2385               f.trusted_config = FALSE;
2386               fclose(trust_list);
2387               }
2388             else
2389               {
2390               /* Well, the trust list at least is up to scratch... */
2391               rmark reset_point = store_mark();
2392               uschar *trusted_configs[32];
2393               int nr_configs = 0;
2394               int i = 0;
2395
2396               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2397                 {
2398                 uschar *start = big_buffer, *nl;
2399                 while (*start && isspace(*start))
2400                 start++;
2401                 if (*start != '/')
2402                   continue;
2403                 nl = Ustrchr(start, '\n');
2404                 if (nl)
2405                   *nl = 0;
2406                 trusted_configs[nr_configs++] = string_copy(start);
2407                 if (nr_configs == 32)
2408                   break;
2409                 }
2410               fclose(trust_list);
2411
2412               if (nr_configs)
2413                 {
2414                 int sep = 0;
2415                 const uschar *list = argrest;
2416                 uschar *filename;
2417                 while (f.trusted_config && (filename = string_nextinlist(&list,
2418                         &sep, big_buffer, big_buffer_size)) != NULL)
2419                   {
2420                   for (i=0; i < nr_configs; i++)
2421                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2422                       break;
2423                   if (i == nr_configs)
2424                     {
2425                     f.trusted_config = FALSE;
2426                     break;
2427                     }
2428                   }
2429                 }
2430               else      /* No valid prefixes found in trust_list file. */
2431                 f.trusted_config = FALSE;
2432               store_reset(reset_point);
2433               }
2434             }
2435           else          /* Could not open trust_list file. */
2436             f.trusted_config = FALSE;
2437           }
2438       #else
2439         /* Not root; don't trust config */
2440         f.trusted_config = FALSE;
2441       #endif
2442         }
2443
2444       config_main_filelist = argrest;
2445       f.config_changed = TRUE;
2446       }
2447     break;
2448
2449
2450     /* -D: set up a macro definition */
2451
2452     case 'D':
2453 #ifdef DISABLE_D_OPTION
2454       exim_fail("exim: -D is not available in this Exim binary\n");
2455 #else
2456       {
2457       int ptr = 0;
2458       macro_item *m;
2459       uschar name[24];
2460       uschar *s = argrest;
2461
2462       opt_D_used = TRUE;
2463       while (isspace(*s)) s++;
2464
2465       if (*s < 'A' || *s > 'Z')
2466         exim_fail("exim: macro name set by -D must start with "
2467           "an upper case letter\n");
2468
2469       while (isalnum(*s) || *s == '_')
2470         {
2471         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2472         s++;
2473         }
2474       name[ptr] = 0;
2475       if (ptr == 0) { badarg = TRUE; break; }
2476       while (isspace(*s)) s++;
2477       if (*s != 0)
2478         {
2479         if (*s++ != '=') { badarg = TRUE; break; }
2480         while (isspace(*s)) s++;
2481         }
2482
2483       for (m = macros_user; m; m = m->next)
2484         if (Ustrcmp(m->name, name) == 0)
2485           exim_fail("exim: duplicated -D in command line\n");
2486
2487       m = macro_create(name, s, TRUE);
2488
2489       if (clmacro_count >= MAX_CLMACROS)
2490         exim_fail("exim: too many -D options on command line\n");
2491       clmacros[clmacro_count++] =
2492         string_sprintf("-D%s=%s", m->name, m->replacement);
2493       }
2494     #endif
2495     break;
2496
2497     /* -d: Set debug level (see also -v below) or set the drop_cr option.
2498     The latter is now a no-op, retained for compatibility only. If -dd is used,
2499     debugging subprocesses of the daemon is disabled. */
2500
2501     case 'd':
2502     if (Ustrcmp(argrest, "ropcr") == 0)
2503       {
2504       /* drop_cr = TRUE; */
2505       }
2506
2507     /* Use an intermediate variable so that we don't set debugging while
2508     decoding the debugging bits. */
2509
2510     else
2511       {
2512       unsigned int selector = D_default;
2513       debug_selector = 0;
2514       debug_file = NULL;
2515       if (*argrest == 'd')
2516         {
2517         f.debug_daemon = TRUE;
2518         argrest++;
2519         }
2520       if (*argrest != 0)
2521         decode_bits(&selector, 1, debug_notall, argrest,
2522           debug_options, debug_options_count, US"debug", 0);
2523       debug_selector = selector;
2524       }
2525     break;
2526
2527
2528     /* -E: This is a local error message. This option is not intended for
2529     external use at all, but is not restricted to trusted callers because it
2530     does no harm (just suppresses certain error messages) and if Exim is run
2531     not setuid root it won't always be trusted when it generates error
2532     messages using this option. If there is a message id following -E, point
2533     message_reference at it, for logging. */
2534
2535     case 'E':
2536     f.local_error_message = TRUE;
2537     if (mac_ismsgid(argrest)) message_reference = argrest;
2538     break;
2539
2540
2541     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2542     option, so it looks as if historically the -oex options are also callable
2543     without the leading -o. So we have to accept them. Before the switch,
2544     anything starting -oe has been converted to -e. Exim does not support all
2545     of the sendmail error options. */
2546
2547     case 'e':
2548     if (Ustrcmp(argrest, "e") == 0)
2549       {
2550       arg_error_handling = ERRORS_SENDER;
2551       errors_sender_rc = EXIT_SUCCESS;
2552       }
2553     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2554     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2555     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2556     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2557     else badarg = TRUE;
2558     break;
2559
2560
2561     /* -F: Set sender's full name, used instead of the gecos entry from
2562     the password file. Since users can usually alter their gecos entries,
2563     there's no security involved in using this instead. The data can follow
2564     the -F or be in the next argument. */
2565
2566     case 'F':
2567     if (*argrest == 0)
2568       {
2569       if(++i < argc) argrest = argv[i]; else
2570         { badarg = TRUE; break; }
2571       }
2572     originator_name = argrest;
2573     f.sender_name_forced = TRUE;
2574     break;
2575
2576
2577     /* -f: Set sender's address - this value is only actually used if Exim is
2578     run by a trusted user, or if untrusted_set_sender is set and matches the
2579     address, except that the null address can always be set by any user. The
2580     test for this happens later, when the value given here is ignored when not
2581     permitted. For an untrusted user, the actual sender is still put in Sender:
2582     if it doesn't match the From: header (unless no_local_from_check is set).
2583     The data can follow the -f or be in the next argument. The -r switch is an
2584     obsolete form of -f but since there appear to be programs out there that
2585     use anything that sendmail has ever supported, better accept it - the
2586     synonymizing is done before the switch above.
2587
2588     At this stage, we must allow domain literal addresses, because we don't
2589     know what the setting of allow_domain_literals is yet. Ditto for trailing
2590     dots and strip_trailing_dot. */
2591
2592     case 'f':
2593       {
2594       int dummy_start, dummy_end;
2595       uschar *errmess;
2596       if (*argrest == 0)
2597         {
2598         if (i+1 < argc) argrest = argv[++i]; else
2599           { badarg = TRUE; break; }
2600         }
2601       if (*argrest == 0)
2602         *(sender_address = store_get(1, FALSE)) = '\0';  /* Ensure writeable memory */
2603       else
2604         {
2605         uschar *temp = argrest + Ustrlen(argrest) - 1;
2606         while (temp >= argrest && isspace(*temp)) temp--;
2607         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2608         allow_domain_literals = TRUE;
2609         strip_trailing_dot = TRUE;
2610 #ifdef SUPPORT_I18N
2611         allow_utf8_domains = TRUE;
2612 #endif
2613         sender_address = parse_extract_address(argrest, &errmess,
2614           &dummy_start, &dummy_end, &sender_address_domain, TRUE);
2615         sender_address = string_copy_taint(sender_address, TRUE);
2616 #ifdef SUPPORT_I18N
2617         message_smtputf8 =  string_is_utf8(sender_address);
2618         allow_utf8_domains = FALSE;
2619 #endif
2620         allow_domain_literals = FALSE;
2621         strip_trailing_dot = FALSE;
2622         if (!sender_address)
2623           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2624         }
2625       f.sender_address_forced = TRUE;
2626       }
2627     break;
2628
2629     /* -G: sendmail invocation to specify that it's a gateway submission and
2630     sendmail may complain about problems instead of fixing them.
2631     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2632     not at this time complain about problems. */
2633
2634     case 'G':
2635     flag_G = TRUE;
2636     break;
2637
2638     /* -h: Set the hop count for an incoming message. Exim does not currently
2639     support this; it always computes it by counting the Received: headers.
2640     To put it in will require a change to the spool header file format. */
2641
2642     case 'h':
2643     if (*argrest == 0)
2644       {
2645       if(++i < argc) argrest = argv[i]; else
2646         { badarg = TRUE; break; }
2647       }
2648     if (!isdigit(*argrest)) badarg = TRUE;
2649     break;
2650
2651
2652     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2653     not to be documented for sendmail but mailx (at least) uses it) */
2654
2655     case 'i':
2656     if (*argrest == 0) f.dot_ends = FALSE; else badarg = TRUE;
2657     break;
2658
2659
2660     /* -L: set the identifier used for syslog; equivalent to setting
2661     syslog_processname in the config file, but needs to be an admin option. */
2662
2663     case 'L':
2664     if (*argrest == '\0')
2665       {
2666       if(++i < argc) argrest = argv[i]; else
2667         { badarg = TRUE; break; }
2668       }
2669     if ((sz = Ustrlen(argrest)) > 32)
2670       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2671     if (sz < 1)
2672       exim_fail("exim: the -L syslog name is too short\n");
2673     cmdline_syslog_name = argrest;
2674     break;
2675
2676     case 'M':
2677     receiving_message = FALSE;
2678
2679     /* -MC:  continue delivery of another message via an existing open
2680     file descriptor. This option is used for an internal call by the
2681     smtp transport when there is a pending message waiting to go to an
2682     address to which it has got a connection. Five subsequent arguments are
2683     required: transport name, host name, IP address, sequence number, and
2684     message_id. Transports may decline to create new processes if the sequence
2685     number gets too big. The channel is stdin. This (-MC) must be the last
2686     argument. There's a subsequent check that the real-uid is privileged.
2687
2688     If we are running in the test harness. delay for a bit, to let the process
2689     that set this one up complete. This makes for repeatability of the logging,
2690     etc. output. */
2691
2692     if (Ustrcmp(argrest, "C") == 0)
2693       {
2694       union sockaddr_46 interface_sock;
2695       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2696
2697       if (argc != i + 6)
2698         exim_fail("exim: too many or too few arguments after -MC\n");
2699
2700       if (msg_action_arg >= 0)
2701         exim_fail("exim: incompatible arguments\n");
2702
2703       continue_transport = argv[++i];
2704       continue_hostname = argv[++i];
2705       continue_host_address = argv[++i];
2706       continue_sequence = Uatoi(argv[++i]);
2707       msg_action = MSG_DELIVER;
2708       msg_action_arg = ++i;
2709       forced_delivery = TRUE;
2710       queue_run_pid = passed_qr_pid;
2711       queue_run_pipe = passed_qr_pipe;
2712
2713       if (!mac_ismsgid(argv[i]))
2714         exim_fail("exim: malformed message id %s after -MC option\n",
2715           argv[i]);
2716
2717       /* Set up $sending_ip_address and $sending_port, unless proxied */
2718
2719       if (!continue_proxy_cipher)
2720         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2721             &size) == 0)
2722           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2723             &sending_port);
2724         else
2725           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2726             strerror(errno));
2727
2728       testharness_pause_ms(500);
2729       break;
2730       }
2731
2732     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2733       {
2734       switch(argrest[1])
2735         {
2736     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2737     precedes -MC (see above). The flag indicates that the host to which
2738     Exim is connected has accepted an AUTH sequence. */
2739
2740         case 'A': f.smtp_authenticated = TRUE; break;
2741
2742     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2743        that exim is connected to supports the esmtp extension DSN */
2744
2745         case 'D': smtp_peer_options |= OPTION_DSN; break;
2746
2747     /* -MCG: set the queue name, to a non-default value */
2748
2749         case 'G': if (++i < argc) queue_name = string_copy(argv[i]);
2750                   else badarg = TRUE;
2751                   break;
2752
2753     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2754
2755         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2756
2757     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2758     it preceded -MC (see above) */
2759
2760         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2761
2762     /* -MCQ: pass on the pid of the queue-running process that started
2763     this chain of deliveries and the fd of its synchronizing pipe; this
2764     is useful only when it precedes -MC (see above) */
2765
2766         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
2767                   else badarg = TRUE;
2768                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
2769                   else badarg = TRUE;
2770                   break;
2771
2772     /* -MCS: set the smtp_use_size flag; this is useful only when it
2773     precedes -MC (see above) */
2774
2775         case 'S': smtp_peer_options |= OPTION_SIZE; break;
2776
2777 #ifndef DISABLE_TLS
2778     /* -MCt: similar to -MCT below but the connection is still open
2779     via a proxy process which handles the TLS context and coding.
2780     Require three arguments for the proxied local address and port,
2781     and the TLS cipher.  */
2782
2783         case 't': if (++i < argc) sending_ip_address = argv[i];
2784                   else badarg = TRUE;
2785                   if (++i < argc) sending_port = (int)(Uatol(argv[i]));
2786                   else badarg = TRUE;
2787                   if (++i < argc) continue_proxy_cipher = argv[i];
2788                   else badarg = TRUE;
2789                   /*FALLTHROUGH*/
2790
2791     /* -MCT: set the tls_offered flag; this is useful only when it
2792     precedes -MC (see above). The flag indicates that the host to which
2793     Exim is connected has offered TLS support. */
2794
2795         case 'T': smtp_peer_options |= OPTION_TLS; break;
2796 #endif
2797
2798         default:  badarg = TRUE; break;
2799         }
2800       break;
2801       }
2802
2803     /* -M[x]: various operations on the following list of message ids:
2804        -M    deliver the messages, ignoring next retry times and thawing
2805        -Mc   deliver the messages, checking next retry times, no thawing
2806        -Mf   freeze the messages
2807        -Mg   give up on the messages
2808        -Mt   thaw the messages
2809        -Mrm  remove the messages
2810     In the above cases, this must be the last option. There are also the
2811     following options which are followed by a single message id, and which
2812     act on that message. Some of them use the "recipient" addresses as well.
2813        -Mar  add recipient(s)
2814        -Mmad mark all recipients delivered
2815        -Mmd  mark recipients(s) delivered
2816        -Mes  edit sender
2817        -Mset load a message for use with -be
2818        -Mvb  show body
2819        -Mvc  show copy (of whole message, in RFC 2822 format)
2820        -Mvh  show header
2821        -Mvl  show log
2822     */
2823
2824     else if (*argrest == 0)
2825       {
2826       msg_action = MSG_DELIVER;
2827       forced_delivery = f.deliver_force_thaw = TRUE;
2828       }
2829     else if (Ustrcmp(argrest, "ar") == 0)
2830       {
2831       msg_action = MSG_ADD_RECIPIENT;
2832       one_msg_action = TRUE;
2833       }
2834     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
2835     else if (Ustrcmp(argrest, "es") == 0)
2836       {
2837       msg_action = MSG_EDIT_SENDER;
2838       one_msg_action = TRUE;
2839       }
2840     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
2841     else if (Ustrcmp(argrest, "g") == 0)
2842       {
2843       msg_action = MSG_DELIVER;
2844       deliver_give_up = TRUE;
2845       }
2846    else if (Ustrcmp(argrest, "G") == 0)
2847       {
2848       msg_action = MSG_SETQUEUE;
2849       queue_name_dest = argv[++i];
2850       }
2851     else if (Ustrcmp(argrest, "mad") == 0)
2852       {
2853       msg_action = MSG_MARK_ALL_DELIVERED;
2854       }
2855     else if (Ustrcmp(argrest, "md") == 0)
2856       {
2857       msg_action = MSG_MARK_DELIVERED;
2858       one_msg_action = TRUE;
2859       }
2860     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
2861     else if (Ustrcmp(argrest, "set") == 0)
2862       {
2863       msg_action = MSG_LOAD;
2864       one_msg_action = TRUE;
2865       }
2866     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
2867     else if (Ustrcmp(argrest, "vb") == 0)
2868       {
2869       msg_action = MSG_SHOW_BODY;
2870       one_msg_action = TRUE;
2871       }
2872     else if (Ustrcmp(argrest, "vc") == 0)
2873       {
2874       msg_action = MSG_SHOW_COPY;
2875       one_msg_action = TRUE;
2876       }
2877     else if (Ustrcmp(argrest, "vh") == 0)
2878       {
2879       msg_action = MSG_SHOW_HEADER;
2880       one_msg_action = TRUE;
2881       }
2882     else if (Ustrcmp(argrest, "vl") == 0)
2883       {
2884       msg_action = MSG_SHOW_LOG;
2885       one_msg_action = TRUE;
2886       }
2887     else { badarg = TRUE; break; }
2888
2889     /* All the -Mxx options require at least one message id. */
2890
2891     msg_action_arg = i + 1;
2892     if (msg_action_arg >= argc)
2893       exim_fail("exim: no message ids given after %s option\n", arg);
2894
2895     /* Some require only message ids to follow */
2896
2897     if (!one_msg_action)
2898       {
2899       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
2900         exim_fail("exim: malformed message id %s after %s option\n",
2901           argv[j], arg);
2902       goto END_ARG;   /* Remaining args are ids */
2903       }
2904
2905     /* Others require only one message id, possibly followed by addresses,
2906     which will be handled as normal arguments. */
2907
2908     else
2909       {
2910       if (!mac_ismsgid(argv[msg_action_arg]))
2911         exim_fail("exim: malformed message id %s after %s option\n",
2912           argv[msg_action_arg], arg);
2913       i++;
2914       }
2915     break;
2916
2917
2918     /* Some programs seem to call the -om option without the leading o;
2919     for sendmail it askes for "me too". Exim always does this. */
2920
2921     case 'm':
2922     if (*argrest != 0) badarg = TRUE;
2923     break;
2924
2925
2926     /* -N: don't do delivery - a debugging option that stops transports doing
2927     their thing. It implies debugging at the D_v level. */
2928
2929     case 'N':
2930     if (*argrest == 0)
2931       {
2932       f.dont_deliver = TRUE;
2933       debug_selector |= D_v;
2934       debug_file = stderr;
2935       }
2936     else badarg = TRUE;
2937     break;
2938
2939
2940     /* -n: This means "don't alias" in sendmail, apparently.
2941     For normal invocations, it has no effect.
2942     It may affect some other options. */
2943
2944     case 'n':
2945     flag_n = TRUE;
2946     break;
2947
2948     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
2949     option to the specified value. This form uses long names. We need to handle
2950     -O option=value and -Ooption=value. */
2951
2952     case 'O':
2953     if (*argrest == 0)
2954       {
2955       if (++i >= argc)
2956         exim_fail("exim: string expected after -O\n");
2957       }
2958     break;
2959
2960     case 'o':
2961
2962     /* -oA: Set an argument for the bi command (sendmail's "alternate alias
2963     file" option). */
2964
2965     if (*argrest == 'A')
2966       {
2967       alias_arg = argrest + 1;
2968       if (alias_arg[0] == 0)
2969         {
2970         if (i+1 < argc) alias_arg = argv[++i]; else
2971           exim_fail("exim: string expected after -oA\n");
2972         }
2973       }
2974
2975     /* -oB: Set a connection message max value for remote deliveries */
2976
2977     else if (*argrest == 'B')
2978       {
2979       uschar *p = argrest + 1;
2980       if (p[0] == 0)
2981         {
2982         if (i+1 < argc && isdigit((argv[i+1][0]))) p = argv[++i]; else
2983           {
2984           connection_max_messages = 1;
2985           p = NULL;
2986           }
2987         }
2988
2989       if (p != NULL)
2990         {
2991         if (!isdigit(*p))
2992           exim_fail("exim: number expected after -oB\n");
2993         connection_max_messages = Uatoi(p);
2994         }
2995       }
2996
2997     /* -odb: background delivery */
2998
2999     else if (Ustrcmp(argrest, "db") == 0)
3000       {
3001       f.synchronous_delivery = FALSE;
3002       arg_queue_only = FALSE;
3003       queue_only_set = TRUE;
3004       }
3005
3006     /* -odf: foreground delivery (smail-compatible option); same effect as
3007        -odi: interactive (synchronous) delivery (sendmail-compatible option)
3008     */
3009
3010     else if (Ustrcmp(argrest, "df") == 0 || Ustrcmp(argrest, "di") == 0)
3011       {
3012       f.synchronous_delivery = TRUE;
3013       arg_queue_only = FALSE;
3014       queue_only_set = TRUE;
3015       }
3016
3017     /* -odq: queue only */
3018
3019     else if (Ustrcmp(argrest, "dq") == 0)
3020       {
3021       f.synchronous_delivery = FALSE;
3022       arg_queue_only = TRUE;
3023       queue_only_set = TRUE;
3024       }
3025
3026     /* -odqs: queue SMTP only - do local deliveries and remote routing,
3027     but no remote delivery */
3028
3029     else if (Ustrcmp(argrest, "dqs") == 0)
3030       {
3031       f.queue_smtp = TRUE;
3032       arg_queue_only = FALSE;
3033       queue_only_set = TRUE;
3034       }
3035
3036     /* -oex: Sendmail error flags. As these are also accepted without the
3037     leading -o prefix, for compatibility with vacation and other callers,
3038     they are handled with -e above. */
3039
3040     /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3041        -oitrue: Another sendmail syntax for the same */
3042
3043     else if (Ustrcmp(argrest, "i") == 0 ||
3044              Ustrcmp(argrest, "itrue") == 0)
3045       f.dot_ends = FALSE;
3046
3047     /* -oM*: Set various characteristics for an incoming message; actually
3048     acted on for trusted callers only. */
3049
3050     else if (*argrest == 'M')
3051       {
3052       if (i+1 >= argc)
3053         exim_fail("exim: data expected after -o%s\n", argrest);
3054
3055       /* -oMa: Set sender host address */
3056
3057       if (Ustrcmp(argrest, "Ma") == 0) sender_host_address = argv[++i];
3058
3059       /* -oMaa: Set authenticator name */
3060
3061       else if (Ustrcmp(argrest, "Maa") == 0)
3062         sender_host_authenticated = argv[++i];
3063
3064       /* -oMas: setting authenticated sender */
3065
3066       else if (Ustrcmp(argrest, "Mas") == 0)
3067         authenticated_sender = string_copy_taint(argv[++i], TRUE);
3068
3069       /* -oMai: setting authenticated id */
3070
3071       else if (Ustrcmp(argrest, "Mai") == 0)
3072         authenticated_id = string_copy_taint(argv[++i], TRUE);
3073
3074       /* -oMi: Set incoming interface address */
3075
3076       else if (Ustrcmp(argrest, "Mi") == 0) interface_address = argv[++i];
3077
3078       /* -oMm: Message reference */
3079
3080       else if (Ustrcmp(argrest, "Mm") == 0)
3081         {
3082         if (!mac_ismsgid(argv[i+1]))
3083             exim_fail("-oMm must be a valid message ID\n");
3084         if (!f.trusted_config)
3085             exim_fail("-oMm must be called by a trusted user/config\n");
3086           message_reference = argv[++i];
3087         }
3088
3089       /* -oMr: Received protocol */
3090
3091       else if (Ustrcmp(argrest, "Mr") == 0)
3092
3093         if (received_protocol)
3094           exim_fail("received_protocol is set already\n");
3095         else
3096           received_protocol = argv[++i];
3097
3098       /* -oMs: Set sender host name */
3099
3100       else if (Ustrcmp(argrest, "Ms") == 0)
3101         sender_host_name = string_copy_taint(argv[++i], TRUE);
3102
3103       /* -oMt: Set sender ident */
3104
3105       else if (Ustrcmp(argrest, "Mt") == 0)
3106         {
3107         sender_ident_set = TRUE;
3108         sender_ident = argv[++i];
3109         }
3110
3111       /* Else a bad argument */
3112
3113       else
3114         {
3115         badarg = TRUE;
3116         break;
3117         }
3118       }
3119
3120     /* -om: Me-too flag for aliases. Exim always does this. Some programs
3121     seem to call this as -m (undocumented), so that is also accepted (see
3122     above). */
3123
3124     else if (Ustrcmp(argrest, "m") == 0) {}
3125
3126     /* -oo: An ancient flag for old-style addresses which still seems to
3127     crop up in some calls (see in SCO). */
3128
3129     else if (Ustrcmp(argrest, "o") == 0) {}
3130
3131     /* -oP <name>: set pid file path for daemon
3132        -oPX:       delete pid file of daemon */
3133
3134     else if (Ustrcmp(argrest, "P") == 0)
3135       override_pid_file_path = argv[++i];
3136
3137     else if (Ustrcmp(argrest, "PX") == 0)
3138       delete_pid_file();
3139
3140     /* -or <n>: set timeout for non-SMTP acceptance
3141        -os <n>: set timeout for SMTP acceptance */
3142
3143     else if (*argrest == 'r' || *argrest == 's')
3144       {
3145       int *tp = (*argrest == 'r')?
3146         &arg_receive_timeout : &arg_smtp_receive_timeout;
3147       if (argrest[1] == 0)
3148         {
3149         if (i+1 < argc) *tp= readconf_readtime(argv[++i], 0, FALSE);
3150         }
3151       else *tp = readconf_readtime(argrest + 1, 0, FALSE);
3152       if (*tp < 0)
3153         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3154       }
3155
3156     /* -oX <list>: Override local_interfaces and/or default daemon ports */
3157
3158     else if (Ustrcmp(argrest, "X") == 0)
3159       override_local_interfaces = argv[++i];
3160
3161     /* Unknown -o argument */
3162
3163     else badarg = TRUE;
3164     break;
3165
3166
3167     /* -ps: force Perl startup; -pd force delayed Perl startup */
3168
3169     case 'p':
3170     #ifdef EXIM_PERL
3171     if (*argrest == 's' && argrest[1] == 0)
3172       {
3173       perl_start_option = 1;
3174       break;
3175       }
3176     if (*argrest == 'd' && argrest[1] == 0)
3177       {
3178       perl_start_option = -1;
3179       break;
3180       }
3181     #endif
3182
3183     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3184     which sets the host protocol and host name */
3185
3186     if (*argrest == 0)
3187       if (i+1 < argc)
3188         argrest = argv[++i];
3189       else
3190         { badarg = TRUE; break; }
3191
3192     if (*argrest != 0)
3193       {
3194       uschar *hn;
3195
3196       if (received_protocol)
3197         exim_fail("received_protocol is set already\n");
3198
3199       hn = Ustrchr(argrest, ':');
3200       if (hn == NULL)
3201         received_protocol = argrest;
3202       else
3203         {
3204         int old_pool = store_pool;
3205         store_pool = POOL_PERM;
3206         received_protocol = string_copyn(argrest, hn - argrest);
3207         store_pool = old_pool;
3208         sender_host_name = hn + 1;
3209         }
3210       }
3211     break;
3212
3213
3214     case 'q':
3215     receiving_message = FALSE;
3216     if (queue_interval >= 0)
3217       exim_fail("exim: -q specified more than once\n");
3218
3219     /* -qq...: Do queue runs in a 2-stage manner */
3220
3221     if (*argrest == 'q')
3222       {
3223       f.queue_2stage = TRUE;
3224       argrest++;
3225       }
3226
3227     /* -qi...: Do only first (initial) deliveries */
3228
3229     if (*argrest == 'i')
3230       {
3231       f.queue_run_first_delivery = TRUE;
3232       argrest++;
3233       }
3234
3235     /* -qf...: Run the queue, forcing deliveries
3236        -qff..: Ditto, forcing thawing as well */
3237
3238     if (*argrest == 'f')
3239       {
3240       f.queue_run_force = TRUE;
3241       if (*++argrest == 'f')
3242         {
3243         f.deliver_force_thaw = TRUE;
3244         argrest++;
3245         }
3246       }
3247
3248     /* -q[f][f]l...: Run the queue only on local deliveries */
3249
3250     if (*argrest == 'l')
3251       {
3252       f.queue_run_local = TRUE;
3253       argrest++;
3254       }
3255
3256     /* -q[f][f][l][G<name>]... Work on the named queue */
3257
3258     if (*argrest == 'G')
3259       {
3260       int i;
3261       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3262       queue_name = string_copyn(argrest, i);
3263       argrest += i;
3264       if (*argrest == '/') argrest++;
3265       }
3266
3267     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3268     only, optionally named, optionally starting from a given message id. */
3269
3270     if (!(list_queue || count_queue))
3271       if (*argrest == 0
3272          && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3273         {
3274         queue_interval = 0;
3275         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3276           start_queue_run_id = argv[++i];
3277         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3278           stop_queue_run_id = argv[++i];
3279         }
3280
3281     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3282     forced, optionally local only, optionally named. */
3283
3284       else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3285                                                   0, FALSE)) <= 0)
3286         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3287     break;
3288
3289
3290     case 'R':   /* Synonymous with -qR... */
3291     receiving_message = FALSE;
3292
3293     /* -Rf:   As -R (below) but force all deliveries,
3294        -Rff:  Ditto, but also thaw all frozen messages,
3295        -Rr:   String is regex
3296        -Rrf:  Regex and force
3297        -Rrff: Regex and force and thaw
3298
3299     in all cases provided there are no further characters in this
3300     argument. */
3301
3302     if (*argrest != 0)
3303       for (int i = 0; i < nelem(rsopts); i++)
3304         if (Ustrcmp(argrest, rsopts[i]) == 0)
3305           {
3306           if (i != 2) f.queue_run_force = TRUE;
3307           if (i >= 2) f.deliver_selectstring_regex = TRUE;
3308           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3309           argrest += Ustrlen(rsopts[i]);
3310           }
3311
3312     /* -R: Set string to match in addresses for forced queue run to
3313     pick out particular messages. */
3314
3315     if (*argrest)
3316       deliver_selectstring = argrest;
3317     else if (i+1 < argc)
3318       deliver_selectstring = argv[++i];
3319     else
3320       exim_fail("exim: string expected after -R\n");
3321     break;
3322
3323
3324     /* -r: an obsolete synonym for -f (see above) */
3325
3326
3327     /* -S: Like -R but works on sender. */
3328
3329     case 'S':   /* Synonymous with -qS... */
3330     receiving_message = FALSE;
3331
3332     /* -Sf:   As -S (below) but force all deliveries,
3333        -Sff:  Ditto, but also thaw all frozen messages,
3334        -Sr:   String is regex
3335        -Srf:  Regex and force
3336        -Srff: Regex and force and thaw
3337
3338     in all cases provided there are no further characters in this
3339     argument. */
3340
3341     if (*argrest)
3342       for (int i = 0; i < nelem(rsopts); i++)
3343         if (Ustrcmp(argrest, rsopts[i]) == 0)
3344           {
3345           if (i != 2) f.queue_run_force = TRUE;
3346           if (i >= 2) f.deliver_selectstring_sender_regex = TRUE;
3347           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3348           argrest += Ustrlen(rsopts[i]);
3349           }
3350
3351     /* -S: Set string to match in addresses for forced queue run to
3352     pick out particular messages. */
3353
3354     if (*argrest)
3355       deliver_selectstring_sender = argrest;
3356     else if (i+1 < argc)
3357       deliver_selectstring_sender = argv[++i];
3358     else
3359       exim_fail("exim: string expected after -S\n");
3360     break;
3361
3362     /* -Tqt is an option that is exclusively for use by the testing suite.
3363     It is not recognized in other circumstances. It allows for the setting up
3364     of explicit "queue times" so that various warning/retry things can be
3365     tested. Otherwise variability of clock ticks etc. cause problems. */
3366
3367     case 'T':
3368     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3369       fudged_queue_times = argv[++i];
3370     else badarg = TRUE;
3371     break;
3372
3373
3374     /* -t: Set flag to extract recipients from body of message. */
3375
3376     case 't':
3377     if (*argrest == 0) extract_recipients = TRUE;
3378
3379     /* -ti: Set flag to extract recipients from body of message, and also
3380     specify that dot does not end the message. */
3381
3382     else if (Ustrcmp(argrest, "i") == 0)
3383       {
3384       extract_recipients = TRUE;
3385       f.dot_ends = FALSE;
3386       }
3387
3388     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3389
3390     #ifndef DISABLE_TLS
3391     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3392     #endif
3393
3394     else badarg = TRUE;
3395     break;
3396
3397
3398     /* -U: This means "initial user submission" in sendmail, apparently. The
3399     doc claims that in future sendmail may refuse syntactically invalid
3400     messages instead of fixing them. For the moment, we just ignore it. */
3401
3402     case 'U':
3403     break;
3404
3405
3406     /* -v: verify things - this is a very low-level debugging */
3407
3408     case 'v':
3409     if (*argrest == 0)
3410       {
3411       debug_selector |= D_v;
3412       debug_file = stderr;
3413       }
3414     else badarg = TRUE;
3415     break;
3416
3417
3418     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3419
3420       The -x flag tells the sendmail command that mail from a local
3421       mail program has National Language Support (NLS) extended characters
3422       in the body of the mail item. The sendmail command can send mail with
3423       extended NLS characters across networks that normally corrupts these
3424       8-bit characters.
3425
3426     As Exim is 8-bit clean, it just ignores this flag. */
3427
3428     case 'x':
3429     if (*argrest != 0) badarg = TRUE;
3430     break;
3431
3432     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3433     logs to that file.  We swallow the parameter and otherwise ignore it. */
3434
3435     case 'X':
3436     if (*argrest == '\0')
3437       if (++i >= argc)
3438         exim_fail("exim: string expected after -X\n");
3439     break;
3440
3441     case 'z':
3442     if (*argrest == '\0')
3443       if (++i < argc)
3444         log_oneline = argv[i];
3445       else
3446         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3447     break;
3448
3449     /* All other initial characters are errors */
3450
3451     default:
3452     badarg = TRUE;
3453     break;
3454     }         /* End of high-level switch statement */
3455
3456   /* Failed to recognize the option, or syntax error */
3457
3458   if (badarg)
3459     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3460       "option %s\n", arg);
3461   }
3462
3463
3464 /* If -R or -S have been specified without -q, assume a single queue run. */
3465
3466 if (  (deliver_selectstring || deliver_selectstring_sender)
3467    && queue_interval < 0)
3468     queue_interval = 0;
3469
3470
3471 END_ARG:
3472 /* If usage_wanted is set we call the usage function - which never returns */
3473 if (usage_wanted) exim_usage(called_as);
3474
3475 /* Arguments have been processed. Check for incompatibilities. */
3476 if ((
3477     (smtp_input || extract_recipients || recipients_arg < argc) &&
3478     (f.daemon_listen || queue_interval >= 0 || bi_option ||
3479       test_retry_arg >= 0 || test_rewrite_arg >= 0 ||
3480       filter_test != FTEST_NONE || (msg_action_arg > 0 && !one_msg_action))
3481     ) ||
3482     (
3483     msg_action_arg > 0 &&
3484     (f.daemon_listen || queue_interval > 0 || list_options ||
3485       (checking && msg_action != MSG_LOAD) ||
3486       bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0)
3487     ) ||
3488     (
3489     (f.daemon_listen || queue_interval > 0) &&
3490     (sender_address != NULL || list_options || list_queue || checking ||
3491       bi_option)
3492     ) ||
3493     (
3494     f.daemon_listen && queue_interval == 0
3495     ) ||
3496     (
3497     f.inetd_wait_mode && queue_interval >= 0
3498     ) ||
3499     (
3500     list_options &&
3501     (checking || smtp_input || extract_recipients ||
3502       filter_test != FTEST_NONE || bi_option)
3503     ) ||
3504     (
3505     verify_address_mode &&
3506     (f.address_test_mode || smtp_input || extract_recipients ||
3507       filter_test != FTEST_NONE || bi_option)
3508     ) ||
3509     (
3510     f.address_test_mode && (smtp_input || extract_recipients ||
3511       filter_test != FTEST_NONE || bi_option)
3512     ) ||
3513     (
3514     smtp_input && (sender_address != NULL || filter_test != FTEST_NONE ||
3515       extract_recipients)
3516     ) ||
3517     (
3518     deliver_selectstring != NULL && queue_interval < 0
3519     ) ||
3520     (
3521     msg_action == MSG_LOAD &&
3522       (!expansion_test || expansion_test_message != NULL)
3523     )
3524    )
3525   exim_fail("exim: incompatible command-line options or arguments\n");
3526
3527 /* If debugging is set up, set the file and the file descriptor to pass on to
3528 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3529 to run in the foreground. */
3530
3531 if (debug_selector != 0)
3532   {
3533   debug_file = stderr;
3534   debug_fd = fileno(debug_file);
3535   f.background_daemon = FALSE;
3536   testharness_pause_ms(100);   /* lets caller finish */
3537   if (debug_selector != D_v)    /* -v only doesn't show this */
3538     {
3539     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3540       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3541       debug_selector);
3542     if (!version_printed)
3543       show_whats_supported(stderr);
3544     }
3545   }
3546
3547 /* When started with root privilege, ensure that the limits on the number of
3548 open files and the number of processes (where that is accessible) are
3549 sufficiently large, or are unset, in case Exim has been called from an
3550 environment where the limits are screwed down. Not all OS have the ability to
3551 change some of these limits. */
3552
3553 if (unprivileged)
3554   {
3555   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3556   }
3557 else
3558   {
3559   struct rlimit rlp;
3560
3561   #ifdef RLIMIT_NOFILE
3562   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3563     {
3564     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3565       strerror(errno));
3566     rlp.rlim_cur = rlp.rlim_max = 0;
3567     }
3568
3569   /* I originally chose 1000 as a nice big number that was unlikely to
3570   be exceeded. It turns out that some older OS have a fixed upper limit of
3571   256. */
3572
3573   if (rlp.rlim_cur < 1000)
3574     {
3575     rlp.rlim_cur = rlp.rlim_max = 1000;
3576     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3577       {
3578       rlp.rlim_cur = rlp.rlim_max = 256;
3579       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3580         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3581           strerror(errno));
3582       }
3583     }
3584   #endif
3585
3586   #ifdef RLIMIT_NPROC
3587   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3588     {
3589     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3590       strerror(errno));
3591     rlp.rlim_cur = rlp.rlim_max = 0;
3592     }
3593
3594   #ifdef RLIM_INFINITY
3595   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3596     {
3597     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3598   #else
3599   if (rlp.rlim_cur < 1000)
3600     {
3601     rlp.rlim_cur = rlp.rlim_max = 1000;
3602   #endif
3603     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3604       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3605         strerror(errno));
3606     }
3607   #endif
3608   }
3609
3610 /* Exim is normally entered as root (but some special configurations are
3611 possible that don't do this). However, it always spins off sub-processes that
3612 set their uid and gid as required for local delivery. We don't want to pass on
3613 any extra groups that root may belong to, so we want to get rid of them all at
3614 this point.
3615
3616 We need to obey setgroups() at this stage, before possibly giving up root
3617 privilege for a changed configuration file, but later on we might need to
3618 check on the additional groups for the admin user privilege - can't do that
3619 till after reading the config, which might specify the exim gid. Therefore,
3620 save the group list here first. */
3621
3622 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3623   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3624
3625 /* There is a fundamental difference in some BSD systems in the matter of
3626 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3627 known not to be different. On the "different" systems there is a single group
3628 list, and the first entry in it is the current group. On all other versions of
3629 Unix there is a supplementary group list, which is in *addition* to the current
3630 group. Consequently, to get rid of all extraneous groups on a "standard" system
3631 you pass over 0 groups to setgroups(), while on a "different" system you pass
3632 over a single group - the current group, which is always the first group in the
3633 list. Calling setgroups() with zero groups on a "different" system results in
3634 an error return. The following code should cope with both types of system.
3635
3636  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
3637  the "setgroups() with zero groups" - and changes the egid.
3638  Thanks to that we had to stash the original_egid above, for use below
3639  in the call to exim_setugid().
3640
3641 However, if this process isn't running as root, setgroups() can't be used
3642 since you have to be root to run it, even if throwing away groups.
3643 Except, sigh, for Hurd - where you can.
3644 Not being root here happens only in some unusual configurations. */
3645
3646 if (  !unprivileged
3647 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
3648    && setgroups(0, NULL) != 0
3649 #endif
3650    && setgroups(1, group_list) != 0)
3651   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
3652
3653 /* If the configuration file name has been altered by an argument on the
3654 command line (either a new file name or a macro definition) and the caller is
3655 not root, or if this is a filter testing run, remove any setuid privilege the
3656 program has and run as the underlying user.
3657
3658 The exim user is locked out of this, which severely restricts the use of -C
3659 for some purposes.
3660
3661 Otherwise, set the real ids to the effective values (should be root unless run
3662 from inetd, which it can either be root or the exim uid, if one is configured).
3663
3664 There is a private mechanism for bypassing some of this, in order to make it
3665 possible to test lots of configurations automatically, without having either to
3666 recompile each time, or to patch in an actual configuration file name and other
3667 values (such as the path name). If running in the test harness, pretend that
3668 configuration file changes and macro definitions haven't happened. */
3669
3670 if ((                                            /* EITHER */
3671     (!f.trusted_config ||                          /* Config changed, or */
3672      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
3673     real_uid != root_uid &&                      /* Not root, and */
3674     !f.running_in_test_harness                     /* Not fudged */
3675     ) ||                                         /*   OR   */
3676     expansion_test                               /* expansion testing */
3677     ||                                           /*   OR   */
3678     filter_test != FTEST_NONE)                   /* Filter testing */
3679   {
3680   setgroups(group_count, group_list);
3681   exim_setugid(real_uid, real_gid, FALSE,
3682     US"-C, -D, -be or -bf forces real uid");
3683   removed_privilege = TRUE;
3684
3685   /* In the normal case when Exim is called like this, stderr is available
3686   and should be used for any logging information because attempts to write
3687   to the log will usually fail. To arrange this, we unset really_exim. However,
3688   if no stderr is available there is no point - we might as well have a go
3689   at the log (if it fails, syslog will be written).
3690
3691   Note that if the invoker is Exim, the logs remain available. Messing with
3692   this causes unlogged successful deliveries.  */
3693
3694   if (log_stderr && real_uid != exim_uid)
3695     f.really_exim = FALSE;
3696   }
3697
3698 /* Privilege is to be retained for the moment. It may be dropped later,
3699 depending on the job that this Exim process has been asked to do. For now, set
3700 the real uid to the effective so that subsequent re-execs of Exim are done by a
3701 privileged user. */
3702
3703 else
3704   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
3705
3706 /* If testing a filter, open the file(s) now, before wasting time doing other
3707 setups and reading the message. */
3708
3709 if (filter_test & FTEST_SYSTEM)
3710   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
3711     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
3712       strerror(errno));
3713
3714 if (filter_test & FTEST_USER)
3715   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
3716     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
3717       strerror(errno));
3718
3719 /* Initialise lookup_list
3720 If debugging, already called above via version reporting.
3721 In either case, we initialise the list of available lookups while running
3722 as root.  All dynamically modules are loaded from a directory which is
3723 hard-coded into the binary and is code which, if not a module, would be
3724 part of Exim already.  Ability to modify the content of the directory
3725 is equivalent to the ability to modify a setuid binary!
3726
3727 This needs to happen before we read the main configuration. */
3728 init_lookup_list();
3729
3730 #ifdef SUPPORT_I18N
3731 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
3732 #endif
3733
3734 /* Read the main runtime configuration data; this gives up if there
3735 is a failure. It leaves the configuration file open so that the subsequent
3736 configuration data for delivery can be read if needed.
3737
3738 NOTE: immediately after opening the configuration file we change the working
3739 directory to "/"! Later we change to $spool_directory. We do it there, because
3740 during readconf_main() some expansion takes place already. */
3741
3742 /* Store the initial cwd before we change directories.  Can be NULL if the
3743 dir has already been unlinked. */
3744 initial_cwd = os_getcwd(NULL, 0);
3745
3746 /* checking:
3747     -be[m] expansion test        -
3748     -b[fF] filter test           new
3749     -bh[c] host test             -
3750     -bmalware malware_test_file  new
3751     -brt   retry test            new
3752     -brw   rewrite test          new
3753     -bt    address test          -
3754     -bv[s] address verify        -
3755    list_options:
3756     -bP <option> (except -bP config, which sets list_config)
3757
3758 If any of these options is set, we suppress warnings about configuration
3759 issues (currently about tls_advertise_hosts and keep_environment not being
3760 defined) */
3761
3762   {
3763 #ifdef MEASURE_TIMING
3764   struct timeval t0, diff;
3765   (void)gettimeofday(&t0, NULL);
3766 #endif
3767
3768   readconf_main(checking || list_options);
3769
3770 #ifdef MEASURE_TIMING
3771   report_time_since(&t0, US"readconf_main (delta)");
3772 #endif
3773   }
3774
3775
3776 /* Now in directory "/" */
3777
3778 if (cleanup_environment() == FALSE)
3779   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
3780
3781
3782 /* If an action on specific messages is requested, or if a daemon or queue
3783 runner is being started, we need to know if Exim was called by an admin user.
3784 This is the case if the real user is root or exim, or if the real group is
3785 exim, or if one of the supplementary groups is exim or a group listed in
3786 admin_groups. We don't fail all message actions immediately if not admin_user,
3787 since some actions can be performed by non-admin users. Instead, set admin_user
3788 for later interrogation. */
3789
3790 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
3791   f.admin_user = TRUE;
3792 else
3793   for (int i = 0; i < group_count && !f.admin_user; i++)
3794     if (group_list[i] == exim_gid)
3795       f.admin_user = TRUE;
3796     else if (admin_groups)
3797       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
3798         if (admin_groups[j] == group_list[i])
3799           f.admin_user = TRUE;
3800
3801 /* Another group of privileged users are the trusted users. These are root,
3802 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
3803 are permitted to specify sender_addresses with -f on the command line, and
3804 other message parameters as well. */
3805
3806 if (real_uid == root_uid || real_uid == exim_uid)
3807   f.trusted_caller = TRUE;
3808 else
3809   {
3810   if (trusted_users)
3811     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
3812       if (trusted_users[i] == real_uid)
3813         f.trusted_caller = TRUE;
3814
3815   if (trusted_groups)
3816     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
3817       if (trusted_groups[i] == real_gid)
3818         f.trusted_caller = TRUE;
3819       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
3820         if (trusted_groups[i] == group_list[j])
3821           f.trusted_caller = TRUE;
3822   }
3823
3824 /* At this point, we know if the user is privileged and some command-line
3825 options become possibly impermissible, depending upon the configuration file. */
3826
3827 if (checking && commandline_checks_require_admin && !f.admin_user)
3828   exim_fail("exim: those command-line flags are set to require admin\n");
3829
3830 /* Handle the decoding of logging options. */
3831
3832 decode_bits(log_selector, log_selector_size, log_notall,
3833   log_selector_string, log_options, log_options_count, US"log", 0);
3834
3835 DEBUG(D_any)
3836   {
3837   debug_printf("configuration file is %s\n", config_main_filename);
3838   debug_printf("log selectors =");
3839   for (int i = 0; i < log_selector_size; i++)
3840     debug_printf(" %08x", log_selector[i]);
3841   debug_printf("\n");
3842   }
3843
3844 /* If domain literals are not allowed, check the sender address that was
3845 supplied with -f. Ditto for a stripped trailing dot. */
3846
3847 if (sender_address)
3848   {
3849   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
3850     exim_fail("exim: bad -f address \"%s\": domain literals not "
3851       "allowed\n", sender_address);
3852   if (f_end_dot && !strip_trailing_dot)
3853     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
3854       "(trailing dot not allowed)\n", sender_address);
3855   }
3856
3857 /* See if an admin user overrode our logging. */
3858
3859 if (cmdline_syslog_name)
3860   if (f.admin_user)
3861     {
3862     syslog_processname = cmdline_syslog_name;
3863     log_file_path = string_copy(CUS"syslog");
3864     }
3865   else
3866     /* not a panic, non-privileged users should not be able to spam paniclog */
3867     exim_fail(
3868         "exim: you lack sufficient privilege to specify syslog process name\n");
3869
3870 /* Paranoia check of maximum lengths of certain strings. There is a check
3871 on the length of the log file path in log.c, which will come into effect
3872 if there are any calls to write the log earlier than this. However, if we
3873 get this far but the string is very long, it is better to stop now than to
3874 carry on and (e.g.) receive a message and then have to collapse. The call to
3875 log_write() from here will cause the ultimate panic collapse if the complete
3876 file name exceeds the buffer length. */
3877
3878 if (Ustrlen(log_file_path) > 200)
3879   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3880     "log_file_path is longer than 200 chars: aborting");
3881
3882 if (Ustrlen(pid_file_path) > 200)
3883   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3884     "pid_file_path is longer than 200 chars: aborting");
3885
3886 if (Ustrlen(spool_directory) > 200)
3887   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3888     "spool_directory is longer than 200 chars: aborting");
3889
3890 /* Length check on the process name given to syslog for its TAG field,
3891 which is only permitted to be 32 characters or less. See RFC 3164. */
3892
3893 if (Ustrlen(syslog_processname) > 32)
3894   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3895     "syslog_processname is longer than 32 chars: aborting");
3896
3897 if (log_oneline)
3898   if (f.admin_user)
3899     {
3900     log_write(0, LOG_MAIN, "%s", log_oneline);
3901     return EXIT_SUCCESS;
3902     }
3903   else
3904     return EXIT_FAILURE;
3905
3906 /* In some operating systems, the environment variable TMPDIR controls where
3907 temporary files are created; Exim doesn't use these (apart from when delivering
3908 to MBX mailboxes), but called libraries such as DBM libraries may require them.
3909 If TMPDIR is found in the environment, reset it to the value defined in the
3910 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
3911 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
3912 EXIM_TMPDIR by the build scripts.
3913 */
3914
3915 #ifdef EXIM_TMPDIR
3916   if (environ) for (uschar ** p = USS environ; *p; p++)
3917     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
3918       {
3919       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
3920       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
3921       *p = newp;
3922       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
3923       }
3924 #endif
3925
3926 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
3927 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
3928 we may need to get rid of a bogus timezone setting. This can arise when Exim is
3929 called by a user who has set the TZ variable. This then affects the timestamps
3930 in log files and in Received: headers, and any created Date: header lines. The
3931 required timezone is settable in the configuration file, so nothing can be done
3932 about this earlier - but hopefully nothing will normally be logged earlier than
3933 this. We have to make a new environment if TZ is wrong, but don't bother if
3934 timestamps_utc is set, because then all times are in UTC anyway. */
3935
3936 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
3937   f.timestamps_utc = TRUE;
3938 else
3939   {
3940   uschar *envtz = US getenv("TZ");
3941   if (envtz
3942       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
3943       : timezone_string != NULL
3944      )
3945     {
3946     uschar **p = USS environ;
3947     uschar **new;
3948     uschar **newp;
3949     int count = 0;
3950     if (environ) while (*p++) count++;
3951     if (!envtz) count++;
3952     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
3953     if (environ) for (p = USS environ; *p; p++)
3954       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
3955     if (timezone_string)
3956       {
3957       *newp = store_malloc(Ustrlen(timezone_string) + 4);
3958       sprintf(CS *newp++, "TZ=%s", timezone_string);
3959       }
3960     *newp = NULL;
3961     environ = CSS new;
3962     tzset();
3963     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
3964       tod_stamp(tod_log));
3965     }
3966   }
3967
3968 /* Handle the case when we have removed the setuid privilege because of -C or
3969 -D. This means that the caller of Exim was not root.
3970
3971 There is a problem if we were running as the Exim user. The sysadmin may
3972 expect this case to retain privilege because "the binary was called by the
3973 Exim user", but it hasn't, because either the -D option set macros, or the
3974 -C option set a non-trusted configuration file. There are two possibilities:
3975
3976   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
3977       to do message deliveries. Thus, the fact that it is running as a
3978       non-privileged user is plausible, and might be wanted in some special
3979       configurations. However, really_exim will have been set false when
3980       privilege was dropped, to stop Exim trying to write to its normal log
3981       files. Therefore, re-enable normal log processing, assuming the sysadmin
3982       has set up the log directory correctly.
3983
3984   (2) If deliver_drop_privilege is not set, the configuration won't work as
3985       apparently intended, and so we log a panic message. In order to retain
3986       root for -C or -D, the caller must either be root or be invoking a
3987       trusted configuration file (when deliver_drop_privilege is false). */
3988
3989 if (  removed_privilege
3990    && (!f.trusted_config || opt_D_used)
3991    && real_uid == exim_uid)
3992   if (deliver_drop_privilege)
3993     f.really_exim = TRUE; /* let logging work normally */
3994   else
3995     log_write(0, LOG_MAIN|LOG_PANIC,
3996       "exim user lost privilege for using %s option",
3997       f.trusted_config? "-D" : "-C");
3998
3999 /* Start up Perl interpreter if Perl support is configured and there is a
4000 perl_startup option, and the configuration or the command line specifies
4001 initializing starting. Note that the global variables are actually called
4002 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4003
4004 #ifdef EXIM_PERL
4005 if (perl_start_option != 0)
4006   opt_perl_at_start = (perl_start_option > 0);
4007 if (opt_perl_at_start && opt_perl_startup != NULL)
4008   {
4009   uschar *errstr;
4010   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4011   if ((errstr = init_perl(opt_perl_startup)))
4012     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4013   opt_perl_started = TRUE;
4014   }
4015 #endif /* EXIM_PERL */
4016
4017 /* Log the arguments of the call if the configuration file said so. This is
4018 a debugging feature for finding out what arguments certain MUAs actually use.
4019 Don't attempt it if logging is disabled, or if listing variables or if
4020 verifying/testing addresses or expansions. */
4021
4022 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4023    && f.really_exim && !list_options && !checking)
4024   {
4025   uschar *p = big_buffer;
4026   Ustrcpy(p, US"cwd= (failed)");
4027
4028   if (!initial_cwd)
4029     p += 13;
4030   else
4031     {
4032     Ustrncpy(p + 4, initial_cwd, big_buffer_size-5);
4033     p += 4 + Ustrlen(initial_cwd);
4034     /* in case p is near the end and we don't provide enough space for
4035      * string_format to be willing to write. */
4036     *p = '\0';
4037     }
4038
4039   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4040   while (*p) p++;
4041   for (int i = 0; i < argc; i++)
4042     {
4043     int len = Ustrlen(argv[i]);
4044     const uschar *printing;
4045     uschar *quote;
4046     if (p + len + 8 >= big_buffer + big_buffer_size)
4047       {
4048       Ustrcpy(p, US" ...");
4049       log_write(0, LOG_MAIN, "%s", big_buffer);
4050       Ustrcpy(big_buffer, US"...");
4051       p = big_buffer + 3;
4052       }
4053     printing = string_printing(argv[i]);
4054     if (printing[0] == 0) quote = US"\""; else
4055       {
4056       const uschar *pp = printing;
4057       quote = US"";
4058       while (*pp != 0) if (isspace(*pp++)) { quote = US"\""; break; }
4059       }
4060     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4061       (p - big_buffer) - 4), printing, quote);
4062     }
4063
4064   if (LOGGING(arguments))
4065     log_write(0, LOG_MAIN, "%s", big_buffer);
4066   else
4067     debug_printf("%s\n", big_buffer);
4068   }
4069
4070 /* Set the working directory to be the top-level spool directory. We don't rely
4071 on this in the code, which always uses fully qualified names, but it's useful
4072 for core dumps etc. Don't complain if it fails - the spool directory might not
4073 be generally accessible and calls with the -C option (and others) have lost
4074 privilege by now. Before the chdir, we try to ensure that the directory exists.
4075 */
4076
4077 if (Uchdir(spool_directory) != 0)
4078   {
4079   int dummy;
4080   (void)directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4081   dummy = /* quieten compiler */ Uchdir(spool_directory);
4082   dummy = dummy;        /* yet more compiler quietening, sigh */
4083   }
4084
4085 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4086 alias file. Exim doesn't have such a concept, but this call is screwed into
4087 Sun's YP makefiles. Handle this by calling a configured script, as the real
4088 user who called Exim. The -oA option can be used to pass an argument to the
4089 script. */
4090
4091 if (bi_option)
4092   {
4093   (void)fclose(config_file);
4094   if (bi_command != NULL)
4095     {
4096     int i = 0;
4097     uschar *argv[3];
4098     argv[i++] = bi_command;
4099     if (alias_arg != NULL) argv[i++] = alias_arg;
4100     argv[i++] = NULL;
4101
4102     setgroups(group_count, group_list);
4103     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4104
4105     DEBUG(D_exec) debug_printf("exec %.256s %.256s\n", argv[0],
4106       (argv[1] == NULL)? US"" : argv[1]);
4107
4108     execv(CS argv[0], (char *const *)argv);
4109     exim_fail("exim: exec failed: %s\n", strerror(errno));
4110     }
4111   else
4112     {
4113     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4114     exit(EXIT_SUCCESS);
4115     }
4116   }
4117
4118 /* We moved the admin/trusted check to be immediately after reading the
4119 configuration file.  We leave these prints here to ensure that syslog setup,
4120 logfile setup, and so on has already happened. */
4121
4122 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4123 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4124
4125 /* Only an admin user may start the daemon or force a queue run in the default
4126 configuration, but the queue run restriction can be relaxed. Only an admin
4127 user may request that a message be returned to its sender forthwith. Only an
4128 admin user may specify a debug level greater than D_v (because it might show
4129 passwords, etc. in lookup queries). Only an admin user may request a queue
4130 count. Only an admin user can use the test interface to scan for email
4131 (because Exim will be in the spool dir and able to look at mails). */
4132
4133 if (!f.admin_user)
4134   {
4135   BOOL debugset = (debug_selector & ~D_v) != 0;
4136   if (  deliver_give_up || f.daemon_listen || malware_test_file
4137      || count_queue && queue_list_requires_admin
4138      || list_queue && queue_list_requires_admin
4139      || queue_interval >= 0 && prod_requires_admin
4140      || queue_name_dest && prod_requires_admin
4141      || debugset && !f.running_in_test_harness
4142      )
4143     exim_fail("exim:%s permission denied\n", debugset? " debugging" : "");
4144   }
4145
4146 /* If the real user is not root or the exim uid, the argument for passing
4147 in an open TCP/IP connection for another message is not permitted, nor is
4148 running with the -N option for any delivery action, unless this call to exim is
4149 one that supplied an input message, or we are using a patched exim for
4150 regression testing. */
4151
4152 if (real_uid != root_uid && real_uid != exim_uid &&
4153      (continue_hostname != NULL ||
4154        (f.dont_deliver &&
4155          (queue_interval >= 0 || f.daemon_listen || msg_action_arg > 0)
4156        )) && !f.running_in_test_harness)
4157   exim_fail("exim: Permission denied\n");
4158
4159 /* If the caller is not trusted, certain arguments are ignored when running for
4160 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4161 Note that authority for performing certain actions on messages is tested in the
4162 queue_action() function. */
4163
4164 if (!f.trusted_caller && !checking)
4165   {
4166   sender_host_name = sender_host_address = interface_address =
4167     sender_ident = received_protocol = NULL;
4168   sender_host_port = interface_port = 0;
4169   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4170   }
4171
4172 /* If a sender host address is set, extract the optional port number off the
4173 end of it and check its syntax. Do the same thing for the interface address.
4174 Exim exits if the syntax is bad. */
4175
4176 else
4177   {
4178   if (sender_host_address != NULL)
4179     sender_host_port = check_port(sender_host_address);
4180   if (interface_address != NULL)
4181     interface_port = check_port(interface_address);
4182   }
4183
4184 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4185 if (flag_G)
4186   {
4187   if (f.trusted_caller)
4188     {
4189     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4190     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4191     }
4192   else
4193     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4194   }
4195
4196 /* If an SMTP message is being received check to see if the standard input is a
4197 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4198 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4199 barf. */
4200
4201 if (smtp_input)
4202   {
4203   union sockaddr_46 inetd_sock;
4204   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4205   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4206     {
4207     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4208     if (family == AF_INET || family == AF_INET6)
4209       {
4210       union sockaddr_46 interface_sock;
4211       size = sizeof(interface_sock);
4212
4213       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4214         interface_address = host_ntoa(-1, &interface_sock, NULL,
4215           &interface_port);
4216
4217       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4218
4219       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4220         {
4221         f.is_inetd = TRUE;
4222         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4223           NULL, &sender_host_port);
4224         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4225           "inetd is not supported when mua_wrapper is set");
4226         }
4227       else
4228         exim_fail(
4229           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4230       }
4231     }
4232   }
4233
4234 /* If the load average is going to be needed while receiving a message, get it
4235 now for those OS that require the first call to os_getloadavg() to be done as
4236 root. There will be further calls later for each message received. */
4237
4238 #ifdef LOAD_AVG_NEEDS_ROOT
4239 if (  receiving_message
4240    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4241   load_average = OS_GETLOADAVG();
4242 #endif
4243
4244 /* The queue_only configuration option can be overridden by -odx on the command
4245 line, except that if queue_only_override is false, queue_only cannot be unset
4246 from the command line. */
4247
4248 if (queue_only_set && (queue_only_override || arg_queue_only))
4249   queue_only = arg_queue_only;
4250
4251 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4252 -or and -os. */
4253
4254 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4255 if (arg_smtp_receive_timeout >= 0)
4256   smtp_receive_timeout = arg_smtp_receive_timeout;
4257
4258 /* If Exim was started with root privilege, unless we have already removed the
4259 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4260 except when starting the daemon or doing some kind of delivery or address
4261 testing (-bt). These are the only cases when root need to be retained. We run
4262 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4263 retained only for starting the daemon. We always do the initgroups() in this
4264 situation (controlled by the TRUE below), in order to be as close as possible
4265 to the state Exim usually runs in. */
4266
4267 if (!unprivileged &&                      /* originally had root AND */
4268     !removed_privilege &&                 /* still got root AND      */
4269     !f.daemon_listen &&                     /* not starting the daemon */
4270     queue_interval <= 0 &&                /* (either kind of daemon) */
4271       (                                   /*    AND EITHER           */
4272       deliver_drop_privilege ||           /* requested unprivileged  */
4273         (                                 /*       OR                */
4274         queue_interval < 0 &&             /* not running the queue   */
4275         (msg_action_arg < 0 ||            /*       and               */
4276           msg_action != MSG_DELIVER) &&   /* not delivering and      */
4277         (!checking || !f.address_test_mode) /* not address checking    */
4278    )  ) )
4279   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4280
4281 /* When we are retaining a privileged uid, we still change to the exim gid. */
4282
4283 else
4284   {
4285   int rv;
4286   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4287   rv = setgid(exim_gid);
4288   /* Impact of failure is that some stuff might end up with an incorrect group.
4289   We track this for failures from root, since any attempt to change privilege
4290   by root should succeed and failures should be examined.  For non-root,
4291   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4292   no need to complain then. */
4293   if (rv == -1)
4294     if (!(unprivileged || removed_privilege))
4295       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4296     else
4297       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4298           (long int)exim_gid, strerror(errno));
4299   }
4300
4301 /* Handle a request to scan a file for malware */
4302 if (malware_test_file)
4303   {
4304 #ifdef WITH_CONTENT_SCAN
4305   int result;
4306   set_process_info("scanning file for malware");
4307   result = malware_in_file(malware_test_file);
4308   if (result == FAIL)
4309     {
4310     printf("No malware found.\n");
4311     exit(EXIT_SUCCESS);
4312     }
4313   if (result != OK)
4314     {
4315     printf("Malware lookup returned non-okay/fail: %d\n", result);
4316     exit(EXIT_FAILURE);
4317     }
4318   if (malware_name)
4319     printf("Malware found: %s\n", malware_name);
4320   else
4321     printf("Malware scan detected malware of unknown name.\n");
4322 #else
4323   printf("Malware scanning not enabled at compile time.\n");
4324 #endif
4325   exit(EXIT_FAILURE);
4326   }
4327
4328 /* Handle a request to list the delivery queue */
4329
4330 if (list_queue)
4331   {
4332   set_process_info("listing the queue");
4333   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4334   exit(EXIT_SUCCESS);
4335   }
4336
4337 /* Handle a request to count the delivery queue */
4338
4339 if (count_queue)
4340   {
4341   set_process_info("counting the queue");
4342   queue_count();
4343   exit(EXIT_SUCCESS);
4344   }
4345
4346 /* Handle actions on specific messages, except for the force delivery and
4347 message load actions, which are done below. Some actions take a whole list of
4348 message ids, which are known to continue up to the end of the arguments. Others
4349 take a single message id and then operate on the recipients list. */
4350
4351 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4352   {
4353   int yield = EXIT_SUCCESS;
4354   set_process_info("acting on specified messages");
4355
4356   /* ACL definitions may be needed when removing a message (-Mrm) because
4357   event_action gets expanded */
4358
4359   if (msg_action == MSG_REMOVE)
4360     readconf_rest();
4361
4362   if (!one_msg_action)
4363     {
4364     for (i = msg_action_arg; i < argc; i++)
4365       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4366         yield = EXIT_FAILURE;
4367     switch (msg_action)
4368       {
4369       case MSG_REMOVE: MSG_DELETE: case MSG_FREEZE: case MSG_THAW: break;
4370       default: printf("\n"); break;
4371       }
4372     }
4373
4374   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4375     recipients_arg)) yield = EXIT_FAILURE;
4376   exit(yield);
4377   }
4378
4379 /* We used to set up here to skip reading the ACL section, on
4380  (msg_action_arg > 0 || (queue_interval == 0 && !f.daemon_listen)
4381 Now, since the intro of the ${acl } expansion, ACL definitions may be
4382 needed in transports so we lost the optimisation. */
4383
4384   {
4385 #ifdef MEASURE_TIMING
4386   struct timeval t0, diff;
4387   (void)gettimeofday(&t0, NULL);
4388 #endif
4389
4390   readconf_rest();
4391
4392 #ifdef MEASURE_TIMING
4393   report_time_since(&t0, US"readconf_rest (delta)");
4394 #endif
4395   }
4396
4397 /* Handle the -brt option. This is for checking out retry configurations.
4398 The next three arguments are a domain name or a complete address, and
4399 optionally two error numbers. All it does is to call the function that
4400 scans the retry configuration data. */
4401
4402 if (test_retry_arg >= 0)
4403   {
4404   retry_config *yield;
4405   int basic_errno = 0;
4406   int more_errno = 0;
4407   uschar *s1, *s2;
4408
4409   if (test_retry_arg >= argc)
4410     {
4411     printf("-brt needs a domain or address argument\n");
4412     exim_exit(EXIT_FAILURE, US"main");
4413     }
4414   s1 = argv[test_retry_arg++];
4415   s2 = NULL;
4416
4417   /* If the first argument contains no @ and no . it might be a local user
4418   or it might be a single-component name. Treat as a domain. */
4419
4420   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4421     {
4422     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4423       "being \ntreated as a one-component domain, not as a local part.\n\n",
4424       s1);
4425     }
4426
4427   /* There may be an optional second domain arg. */
4428
4429   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4430     s2 = argv[test_retry_arg++];
4431
4432   /* The final arg is an error name */
4433
4434   if (test_retry_arg < argc)
4435     {
4436     uschar *ss = argv[test_retry_arg];
4437     uschar *error =
4438       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4439     if (error != NULL)
4440       {
4441       printf("%s\n", CS error);
4442       return EXIT_FAILURE;
4443       }
4444
4445     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4446     code > 100 as an error is for matching codes to the decade. Turn them into
4447     a real error code, off the decade. */
4448
4449     if (basic_errno == ERRNO_MAIL4XX ||
4450         basic_errno == ERRNO_RCPT4XX ||
4451         basic_errno == ERRNO_DATA4XX)
4452       {
4453       int code = (more_errno >> 8) & 255;
4454       if (code == 255)
4455         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4456       else if (code > 100)
4457         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4458       }
4459     }
4460
4461   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4462     printf("No retry information found\n");
4463   else
4464     {
4465     more_errno = yield->more_errno;
4466     printf("Retry rule: %s  ", yield->pattern);
4467
4468     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4469       {
4470       printf("quota%s%s  ",
4471         (more_errno > 0)? "_" : "",
4472         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4473       }
4474     else if (yield->basic_errno == ECONNREFUSED)
4475       {
4476       printf("refused%s%s  ",
4477         (more_errno > 0)? "_" : "",
4478         (more_errno == 'M')? "MX" :
4479         (more_errno == 'A')? "A" : "");
4480       }
4481     else if (yield->basic_errno == ETIMEDOUT)
4482       {
4483       printf("timeout");
4484       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4485       more_errno &= 255;
4486       if (more_errno != 0) printf("_%s",
4487         (more_errno == 'M')? "MX" : "A");
4488       printf("  ");
4489       }
4490     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4491       printf("auth_failed  ");
4492     else printf("*  ");
4493
4494     for (retry_rule * r = yield->rules; r; r = r->next)
4495       {
4496       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4497       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4498       if (r->rule == 'G')
4499         {
4500         int x = r->p2;
4501         int f = x % 1000;
4502         int d = 100;
4503         printf(",%d.", x/1000);
4504         do
4505           {
4506           printf("%d", f/d);
4507           f %= d;
4508           d /= 10;
4509           }
4510         while (f != 0);
4511         }
4512       printf("; ");
4513       }
4514
4515     printf("\n");
4516     }
4517   exim_exit(EXIT_SUCCESS, US"main");
4518   }
4519
4520 /* Handle a request to list one or more configuration options */
4521 /* If -n was set, we suppress some information */
4522
4523 if (list_options)
4524   {
4525   BOOL fail = FALSE;
4526   set_process_info("listing variables");
4527   if (recipients_arg >= argc)
4528     fail = !readconf_print(US"all", NULL, flag_n);
4529   else for (i = recipients_arg; i < argc; i++)
4530     {
4531     if (i < argc - 1 &&
4532         (Ustrcmp(argv[i], "router") == 0 ||
4533          Ustrcmp(argv[i], "transport") == 0 ||
4534          Ustrcmp(argv[i], "authenticator") == 0 ||
4535          Ustrcmp(argv[i], "macro") == 0 ||
4536          Ustrcmp(argv[i], "environment") == 0))
4537       {
4538       fail |= !readconf_print(argv[i+1], argv[i], flag_n);
4539       i++;
4540       }
4541     else
4542       fail = !readconf_print(argv[i], NULL, flag_n);
4543     }
4544   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS, US"main");
4545   }
4546
4547 if (list_config)
4548   {
4549   set_process_info("listing config");
4550   exim_exit(readconf_print(US"config", NULL, flag_n)
4551                 ? EXIT_SUCCESS : EXIT_FAILURE, US"main");
4552   }
4553
4554
4555 /* Initialise subsystems as required. */
4556
4557 tcp_init();
4558
4559 /* Handle a request to deliver one or more messages that are already on the
4560 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4561 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4562
4563 Delivery of specific messages is typically used for a small number when
4564 prodding by hand (when the option forced_delivery will be set) or when
4565 re-execing to regain root privilege. Each message delivery must happen in a
4566 separate process, so we fork a process for each one, and run them sequentially
4567 so that debugging output doesn't get intertwined, and to avoid spawning too
4568 many processes if a long list is given. However, don't fork for the last one;
4569 this saves a process in the common case when Exim is called to deliver just one
4570 message. */
4571
4572 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4573   {
4574   if (prod_requires_admin && !f.admin_user)
4575     {
4576     fprintf(stderr, "exim: Permission denied\n");
4577     exim_exit(EXIT_FAILURE, US"main");
4578     }
4579   set_process_info("delivering specified messages");
4580   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4581   for (i = msg_action_arg; i < argc; i++)
4582     {
4583     int status;
4584     pid_t pid;
4585     if (i == argc - 1)
4586       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4587     else if ((pid = fork()) == 0)
4588       {
4589       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4590       exim_underbar_exit(EXIT_SUCCESS);
4591       }
4592     else if (pid < 0)
4593       {
4594       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4595         strerror(errno));
4596       exim_exit(EXIT_FAILURE, US"main");
4597       }
4598     else wait(&status);
4599     }
4600   exim_exit(EXIT_SUCCESS, US"main");
4601   }
4602
4603
4604 /* If only a single queue run is requested, without SMTP listening, we can just
4605 turn into a queue runner, with an optional starting message id. */
4606
4607 if (queue_interval == 0 && !f.daemon_listen)
4608   {
4609   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4610     (start_queue_run_id == NULL)? US"" : US" starting at ",
4611     (start_queue_run_id == NULL)? US"" : start_queue_run_id,
4612     (stop_queue_run_id == NULL)?  US"" : US" stopping at ",
4613     (stop_queue_run_id == NULL)?  US"" : stop_queue_run_id);
4614   if (*queue_name)
4615     set_process_info("running the '%s' queue (single queue run)", queue_name);
4616   else
4617     set_process_info("running the queue (single queue run)");
4618   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4619   exim_exit(EXIT_SUCCESS, US"main");
4620   }
4621
4622
4623 /* Find the login name of the real user running this process. This is always
4624 needed when receiving a message, because it is written into the spool file. It
4625 may also be used to construct a from: or a sender: header, and in this case we
4626 need the user's full name as well, so save a copy of it, checked for RFC822
4627 syntax and munged if necessary, if it hasn't previously been set by the -F
4628 argument. We may try to get the passwd entry more than once, in case NIS or
4629 other delays are in evidence. Save the home directory for use in filter testing
4630 (only). */
4631
4632 for (i = 0;;)
4633   {
4634   if ((pw = getpwuid(real_uid)) != NULL)
4635     {
4636     originator_login = string_copy(US pw->pw_name);
4637     originator_home = string_copy(US pw->pw_dir);
4638
4639     /* If user name has not been set by -F, set it from the passwd entry
4640     unless -f has been used to set the sender address by a trusted user. */
4641
4642     if (!originator_name)
4643       {
4644       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
4645         {
4646         uschar *name = US pw->pw_gecos;
4647         uschar *amp = Ustrchr(name, '&');
4648         uschar buffer[256];
4649
4650         /* Most Unix specify that a '&' character in the gecos field is
4651         replaced by a copy of the login name, and some even specify that
4652         the first character should be upper cased, so that's what we do. */
4653
4654         if (amp)
4655           {
4656           int loffset;
4657           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
4658             (int)(amp - name), name, &loffset, originator_login, amp + 1);
4659           buffer[loffset] = toupper(buffer[loffset]);
4660           name = buffer;
4661           }
4662
4663         /* If a pattern for matching the gecos field was supplied, apply
4664         it and then expand the name string. */
4665
4666         if (gecos_pattern && gecos_name)
4667           {
4668           const pcre *re;
4669           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
4670
4671           if (regex_match_and_setup(re, name, 0, -1))
4672             {
4673             uschar *new_name = expand_string(gecos_name);
4674             expand_nmax = -1;
4675             if (new_name)
4676               {
4677               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
4678                 "gecos field \"%s\"\n", new_name, name);
4679               name = new_name;
4680               }
4681             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
4682               "\"%s\": %s\n", gecos_name, expand_string_message);
4683             }
4684           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
4685             "gecos field \"%s\"\n", gecos_pattern, name);
4686           store_free((void *)re);
4687           }
4688         originator_name = string_copy(name);
4689         }
4690
4691       /* A trusted caller has used -f but not -F */
4692
4693       else originator_name = US"";
4694       }
4695
4696     /* Break the retry loop */
4697
4698     break;
4699     }
4700
4701   if (++i > finduser_retries) break;
4702   sleep(1);
4703   }
4704
4705 /* If we cannot get a user login, log the incident and give up, unless the
4706 configuration specifies something to use. When running in the test harness,
4707 any setting of unknown_login overrides the actual name. */
4708
4709 if (originator_login == NULL || f.running_in_test_harness)
4710   {
4711   if (unknown_login != NULL)
4712     {
4713     originator_login = expand_string(unknown_login);
4714     if (originator_name == NULL && unknown_username != NULL)
4715       originator_name = expand_string(unknown_username);
4716     if (originator_name == NULL) originator_name = US"";
4717     }
4718   if (originator_login == NULL)
4719     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
4720       (int)real_uid);
4721   }
4722
4723 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
4724 RFC822 address.*/
4725
4726 originator_name = string_copy(parse_fix_phrase(originator_name,
4727   Ustrlen(originator_name), big_buffer, big_buffer_size));
4728
4729 /* If a message is created by this call of Exim, the uid/gid of its originator
4730 are those of the caller. These values are overridden if an existing message is
4731 read in from the spool. */
4732
4733 originator_uid = real_uid;
4734 originator_gid = real_gid;
4735
4736 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
4737   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
4738
4739 /* Run in daemon and/or queue-running mode. The function daemon_go() never
4740 returns. We leave this till here so that the originator_ fields are available
4741 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
4742 mode. */
4743
4744 if (f.daemon_listen || f.inetd_wait_mode || queue_interval > 0)
4745   {
4746   if (mua_wrapper)
4747     {
4748     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
4749     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
4750       "mua_wrapper is set");
4751     }
4752
4753 # ifndef DISABLE_TLS
4754   /* This also checks that the library linkage is working and we can call
4755   routines in it, so call even if tls_require_ciphers is unset */
4756     {
4757 # ifdef MEASURE_TIMING
4758     struct timeval t0, diff;
4759     (void)gettimeofday(&t0, NULL);
4760 # endif
4761     if (!tls_dropprivs_validate_require_cipher(FALSE))
4762       exit(1);
4763 # ifdef MEASURE_TIMING
4764     report_time_since(&t0, US"validate_ciphers (delta)");
4765 # endif
4766     }
4767 #endif
4768
4769   daemon_go();
4770   }
4771
4772 /* If the sender ident has not been set (by a trusted caller) set it to
4773 the caller. This will get overwritten below for an inetd call. If a trusted
4774 caller has set it empty, unset it. */
4775
4776 if (!sender_ident) sender_ident = originator_login;
4777 else if (!*sender_ident) sender_ident = NULL;
4778
4779 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
4780 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
4781 originator_* variables set. */
4782
4783 if (test_rewrite_arg >= 0)
4784   {
4785   f.really_exim = FALSE;
4786   if (test_rewrite_arg >= argc)
4787     {
4788     printf("-brw needs an address argument\n");
4789     exim_exit(EXIT_FAILURE, US"main");
4790     }
4791   rewrite_test(argv[test_rewrite_arg]);
4792   exim_exit(EXIT_SUCCESS, US"main");
4793   }
4794
4795 /* A locally-supplied message is considered to be coming from a local user
4796 unless a trusted caller supplies a sender address with -f, or is passing in the
4797 message via SMTP (inetd invocation or otherwise). */
4798
4799 if (  !sender_address && !smtp_input
4800    || !f.trusted_caller && filter_test == FTEST_NONE)
4801   {
4802   f.sender_local = TRUE;
4803
4804   /* A trusted caller can supply authenticated_sender and authenticated_id
4805   via -oMas and -oMai and if so, they will already be set. Otherwise, force
4806   defaults except when host checking. */
4807
4808   if (!authenticated_sender && !host_checking)
4809     authenticated_sender = string_sprintf("%s@%s", originator_login,
4810       qualify_domain_sender);
4811   if (!authenticated_id && !host_checking)
4812     authenticated_id = originator_login;
4813   }
4814
4815 /* Trusted callers are always permitted to specify the sender address.
4816 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
4817 is specified is the empty address. However, if a trusted caller does not
4818 specify a sender address for SMTP input, we leave sender_address unset. This
4819 causes the MAIL commands to be honoured. */
4820
4821 if (  !smtp_input && !sender_address
4822    || !receive_check_set_sender(sender_address))
4823   {
4824   /* Either the caller is not permitted to set a general sender, or this is
4825   non-SMTP input and the trusted caller has not set a sender. If there is no
4826   sender, or if a sender other than <> is set, override with the originator's
4827   login (which will get qualified below), except when checking things. */
4828
4829   if (sender_address == NULL             /* No sender_address set */
4830        ||                                /*         OR            */
4831        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
4832        !checking))                       /* Not running tests, including filter tests */
4833     {
4834     sender_address = originator_login;
4835     f.sender_address_forced = FALSE;
4836     sender_address_domain = 0;
4837     }
4838   }
4839
4840 /* Remember whether an untrusted caller set the sender address */
4841
4842 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
4843
4844 /* Ensure that the sender address is fully qualified unless it is the empty
4845 address, which indicates an error message, or doesn't exist (root caller, smtp
4846 interface, no -f argument). */
4847
4848 if (sender_address && *sender_address && sender_address_domain == 0)
4849   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
4850     qualify_domain_sender);
4851
4852 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
4853
4854 /* Handle a request to verify a list of addresses, or test them for delivery.
4855 This must follow the setting of the sender address, since routers can be
4856 predicated upon the sender. If no arguments are given, read addresses from
4857 stdin. Set debug_level to at least D_v to get full output for address testing.
4858 */
4859
4860 if (verify_address_mode || f.address_test_mode)
4861   {
4862   int exit_value = 0;
4863   int flags = vopt_qualify;
4864
4865   if (verify_address_mode)
4866     {
4867     if (!verify_as_sender) flags |= vopt_is_recipient;
4868     DEBUG(D_verify) debug_print_ids(US"Verifying:");
4869     }
4870
4871   else
4872     {
4873     flags |= vopt_is_recipient;
4874     debug_selector |= D_v;
4875     debug_file = stderr;
4876     debug_fd = fileno(debug_file);
4877     DEBUG(D_verify) debug_print_ids(US"Address testing:");
4878     }
4879
4880   if (recipients_arg < argc)
4881     {
4882     while (recipients_arg < argc)
4883       {
4884       /* Supplied addresses are tainted since they come from a user */
4885       uschar * s = string_copy_taint(argv[recipients_arg++], TRUE);
4886       while (*s)
4887         {
4888         BOOL finished = FALSE;
4889         uschar *ss = parse_find_address_end(s, FALSE);
4890         if (*ss == ',') *ss = 0; else finished = TRUE;
4891         test_address(s, flags, &exit_value);
4892         s = ss;
4893         if (!finished)
4894           while (*++s == ',' || isspace(*s)) ;
4895         }
4896       }
4897     }
4898
4899   else for (;;)
4900     {
4901     uschar * s = get_stdinput(NULL, NULL);
4902     if (!s) break;
4903     test_address(string_copy_taint(s, TRUE), flags, &exit_value);
4904     }
4905
4906   route_tidyup();
4907   exim_exit(exit_value, US"main");
4908   }
4909
4910 /* Handle expansion checking. Either expand items on the command line, or read
4911 from stdin if there aren't any. If -Mset was specified, load the message so
4912 that its variables can be used, but restrict this facility to admin users.
4913 Otherwise, if -bem was used, read a message from stdin. */
4914
4915 if (expansion_test)
4916   {
4917   dns_init(FALSE, FALSE, FALSE);
4918   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
4919     {
4920     uschar spoolname[256];  /* Not big_buffer; used in spool_read_header() */
4921     if (!f.admin_user)
4922       exim_fail("exim: permission denied\n");
4923     message_id = argv[msg_action_arg];
4924     (void)string_format(spoolname, sizeof(spoolname), "%s-H", message_id);
4925     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
4926       printf ("Failed to load message datafile %s\n", message_id);
4927     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
4928       printf ("Failed to load message %s\n", message_id);
4929     }
4930
4931   /* Read a test message from a file. We fudge it up to be on stdin, saving
4932   stdin itself for later reading of expansion strings. */
4933
4934   else if (expansion_test_message)
4935     {
4936     int save_stdin = dup(0);
4937     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
4938     if (fd < 0)
4939       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
4940         strerror(errno));
4941     (void) dup2(fd, 0);
4942     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
4943     message_ended = END_NOTENDED;
4944     read_message_body(receive_msg(extract_recipients));
4945     message_linecount += body_linecount;
4946     (void)dup2(save_stdin, 0);
4947     (void)close(save_stdin);
4948     clearerr(stdin);               /* Required by Darwin */
4949     }
4950
4951   /* Only admin users may see config-file macros this way */
4952
4953   if (!f.admin_user) macros_user = macros = mlast = NULL;
4954
4955   /* Allow $recipients for this testing */
4956
4957   f.enable_dollar_recipients = TRUE;
4958
4959   /* Expand command line items */
4960
4961   if (recipients_arg < argc)
4962     while (recipients_arg < argc)
4963       expansion_test_line(argv[recipients_arg++]);
4964
4965   /* Read stdin */
4966
4967   else
4968     {
4969     char *(*fn_readline)(const char *) = NULL;
4970     void (*fn_addhist)(const char *) = NULL;
4971     uschar * s;
4972
4973 #ifdef USE_READLINE
4974     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
4975 #endif
4976
4977     while (s = get_stdinput(fn_readline, fn_addhist))
4978       expansion_test_line(s);
4979
4980 #ifdef USE_READLINE
4981     if (dlhandle) dlclose(dlhandle);
4982 #endif
4983     }
4984
4985   /* The data file will be open after -Mset */
4986
4987   if (deliver_datafile >= 0)
4988     {
4989     (void)close(deliver_datafile);
4990     deliver_datafile = -1;
4991     }
4992
4993   exim_exit(EXIT_SUCCESS, US"main: expansion test");
4994   }
4995
4996
4997 /* The active host name is normally the primary host name, but it can be varied
4998 for hosts that want to play several parts at once. We need to ensure that it is
4999 set for host checking, and for receiving messages. */
5000
5001 smtp_active_hostname = primary_hostname;
5002 if (raw_active_hostname != NULL)
5003   {
5004   uschar *nah = expand_string(raw_active_hostname);
5005   if (nah == NULL)
5006     {
5007     if (!f.expand_string_forcedfail)
5008       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5009         "(smtp_active_hostname): %s", raw_active_hostname,
5010         expand_string_message);
5011     }
5012   else if (nah[0] != 0) smtp_active_hostname = nah;
5013   }
5014
5015 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5016 given IP address so that the blocking and relay configuration can be tested.
5017 Unless a sender_ident was set by -oMt, we discard it (the default is the
5018 caller's login name). An RFC 1413 call is made only if we are running in the
5019 test harness and an incoming interface and both ports are specified, because
5020 there is no TCP/IP call to find the ident for. */
5021
5022 if (host_checking)
5023   {
5024   int x[4];
5025   int size;
5026
5027   if (!sender_ident_set)
5028     {
5029     sender_ident = NULL;
5030     if (f.running_in_test_harness && sender_host_port != 0 &&
5031         interface_address != NULL && interface_port != 0)
5032       verify_get_ident(1413);
5033     }
5034
5035   /* In case the given address is a non-canonical IPv6 address, canonicalize
5036   it. The code works for both IPv4 and IPv6, as it happens. */
5037
5038   size = host_aton(sender_host_address, x);
5039   sender_host_address = store_get(48, FALSE);  /* large enough for full IPv6 */
5040   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5041
5042   /* Now set up for testing */
5043
5044   host_build_sender_fullhost();
5045   smtp_input = TRUE;
5046   smtp_in = stdin;
5047   smtp_out = stdout;
5048   f.sender_local = FALSE;
5049   f.sender_host_notsocket = TRUE;
5050   debug_file = stderr;
5051   debug_fd = fileno(debug_file);
5052   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5053     "**** but without any ident (RFC 1413) callback.\n"
5054     "**** This is not for real!\n\n",
5055       sender_host_address);
5056
5057   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5058   if (verify_check_host(&hosts_connection_nolog) == OK)
5059     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5060   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5061
5062   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5063   because a log line has already been written for all its failure exists
5064   (usually "connection refused: <reason>") and writing another one is
5065   unnecessary clutter. */
5066
5067   if (smtp_start_session())
5068     {
5069     for (; (reset_point = store_mark()); store_reset(reset_point))
5070       {
5071       if (smtp_setup_msg() <= 0) break;
5072       if (!receive_msg(FALSE)) break;
5073
5074       return_path = sender_address = NULL;
5075       dnslist_domain = dnslist_matched = NULL;
5076 #ifndef DISABLE_DKIM
5077       dkim_cur_signer = NULL;
5078 #endif
5079       acl_var_m = NULL;
5080       deliver_localpart_orig = NULL;
5081       deliver_domain_orig = NULL;
5082       callout_address = sending_ip_address = NULL;
5083       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5084       }
5085     smtp_log_no_mail();
5086     }
5087   exim_exit(EXIT_SUCCESS, US"main");
5088   }
5089
5090
5091 /* Arrange for message reception if recipients or SMTP were specified;
5092 otherwise complain unless a version print (-bV) happened or this is a filter
5093 verification test or info dump.
5094 In the former case, show the configuration file name. */
5095
5096 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5097   {
5098   if (version_printed)
5099     {
5100     if (Ustrchr(config_main_filelist, ':'))
5101       printf("Configuration file search path is %s\n", config_main_filelist);
5102     printf("Configuration file is %s\n", config_main_filename);
5103     return EXIT_SUCCESS;
5104     }
5105
5106   if (info_flag != CMDINFO_NONE)
5107     {
5108     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5109     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5110     }
5111
5112   if (filter_test == FTEST_NONE)
5113     exim_usage(called_as);
5114   }
5115
5116
5117 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5118 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5119 that we are not called from inetd, because that is rejected above. The
5120 following configuration settings are forced here:
5121
5122   (1) Synchronous delivery (-odi)
5123   (2) Errors to stderr (-oep == -oeq)
5124   (3) No parallel remote delivery
5125   (4) Unprivileged delivery
5126
5127 We don't force overall queueing options because there are several of them;
5128 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5129 to override any SMTP queueing. */
5130
5131 if (mua_wrapper)
5132   {
5133   f.synchronous_delivery = TRUE;
5134   arg_error_handling = ERRORS_STDERR;
5135   remote_max_parallel = 1;
5136   deliver_drop_privilege = TRUE;
5137   f.queue_smtp = FALSE;
5138   queue_smtp_domains = NULL;
5139 #ifdef SUPPORT_I18N
5140   message_utf8_downconvert = -1;        /* convert-if-needed */
5141 #endif
5142   }
5143
5144
5145 /* Prepare to accept one or more new messages on the standard input. When a
5146 message has been read, its id is returned in message_id[]. If doing immediate
5147 delivery, we fork a delivery process for each received message, except for the
5148 last one, where we can save a process switch.
5149
5150 It is only in non-smtp mode that error_handling is allowed to be changed from
5151 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5152 sendmail error modes other than -oem ever actually used? Later: yes.) */
5153
5154 if (!smtp_input) error_handling = arg_error_handling;
5155
5156 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5157 logging being sent down the socket and make an identd call to get the
5158 sender_ident. */
5159
5160 else if (f.is_inetd)
5161   {
5162   (void)fclose(stderr);
5163   exim_nullstd();                       /* Re-open to /dev/null */
5164   verify_get_ident(IDENT_PORT);
5165   host_build_sender_fullhost();
5166   set_process_info("handling incoming connection from %s via inetd",
5167     sender_fullhost);
5168   }
5169
5170 /* If the sender host address has been set, build sender_fullhost if it hasn't
5171 already been done (which it will have been for inetd). This caters for the
5172 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5173 so that the test for IP options is skipped for -bs input. */
5174
5175 if (sender_host_address && !sender_fullhost)
5176   {
5177   host_build_sender_fullhost();
5178   set_process_info("handling incoming connection from %s via -oMa",
5179     sender_fullhost);
5180   f.sender_host_notsocket = TRUE;
5181   }
5182
5183 /* Otherwise, set the sender host as unknown except for inetd calls. This
5184 prevents host checking in the case of -bs not from inetd and also for -bS. */
5185
5186 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5187
5188 /* If stdout does not exist, then dup stdin to stdout. This can happen
5189 if exim is started from inetd. In this case fd 0 will be set to the socket,
5190 but fd 1 will not be set. This also happens for passed SMTP channels. */
5191
5192 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5193
5194 /* Set up the incoming protocol name and the state of the program. Root is
5195 allowed to force received protocol via the -oMr option above. If we have come
5196 via inetd, the process info has already been set up. We don't set
5197 received_protocol here for smtp input, as it varies according to
5198 batch/HELO/EHLO/AUTH/TLS. */
5199
5200 if (smtp_input)
5201   {
5202   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5203     smtp_batched_input? "batched " : "",
5204     (sender_address!= NULL)? sender_address : originator_login);
5205   }
5206 else
5207   {
5208   int old_pool = store_pool;
5209   store_pool = POOL_PERM;
5210   if (!received_protocol)
5211     received_protocol = string_sprintf("local%s", called_as);
5212   store_pool = old_pool;
5213   set_process_info("accepting a local non-SMTP message from <%s>",
5214     sender_address);
5215   }
5216
5217 /* Initialize the session_local_queue-only flag (this will be ignored if
5218 mua_wrapper is set) */
5219
5220 queue_check_only();
5221 session_local_queue_only = queue_only;
5222
5223 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5224 the spool if so configured. On failure, we must not attempt to send an error
5225 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5226 error code is given.) */
5227
5228 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5229   exim_fail("exim: insufficient disk space\n");
5230
5231 /* If this is smtp input of any kind, real or batched, handle the start of the
5232 SMTP session.
5233
5234 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5235 because a log line has already been written for all its failure exists
5236 (usually "connection refused: <reason>") and writing another one is
5237 unnecessary clutter. */
5238
5239 if (smtp_input)
5240   {
5241   smtp_in = stdin;
5242   smtp_out = stdout;
5243   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5244   if (verify_check_host(&hosts_connection_nolog) == OK)
5245     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5246   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5247   if (!smtp_start_session())
5248     {
5249     mac_smtp_fflush();
5250     exim_exit(EXIT_SUCCESS, US"smtp_start toplevel");
5251     }
5252   }
5253
5254 /* Otherwise, set up the input size limit here. */
5255
5256 else
5257   {
5258   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5259   if (expand_string_message)
5260     if (thismessage_size_limit == -1)
5261       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5262         "message_size_limit: %s", expand_string_message);
5263     else
5264       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5265         "message_size_limit: %s", expand_string_message);
5266   }
5267
5268 /* Loop for several messages when reading SMTP input. If we fork any child
5269 processes, we don't want to wait for them unless synchronous delivery is
5270 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5271 same as SIG_DFL, despite the fact that documentation often lists the default as
5272 "ignore". This is a confusing area. This is what I know:
5273
5274 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5275 processes that complete simply to go away without ever becoming defunct. You
5276 can't then wait for them - but we don't want to wait for them in the
5277 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5278 happen for all OS (e.g. *BSD is different).
5279
5280 But that's not the end of the story. Some (many? all?) systems have the
5281 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5282 has by default, so it seems that the difference is merely one of default
5283 (compare restarting vs non-restarting signals).
5284
5285 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5286 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5287 of the loop below. Paranoia rules.
5288
5289 February 2003: That's *still* not the end of the story. There are now versions
5290 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5291 process then calls waitpid(), a grumble is written to the system log, because
5292 this is logically inconsistent. In other words, it doesn't like the paranoia.
5293 As a consequence of this, the waitpid() below is now excluded if we are sure
5294 that SIG_IGN works. */
5295
5296 if (!f.synchronous_delivery)
5297   {
5298   #ifdef SA_NOCLDWAIT
5299   struct sigaction act;
5300   act.sa_handler = SIG_IGN;
5301   sigemptyset(&(act.sa_mask));
5302   act.sa_flags = SA_NOCLDWAIT;
5303   sigaction(SIGCHLD, &act, NULL);
5304   #else
5305   signal(SIGCHLD, SIG_IGN);
5306   #endif
5307   }
5308
5309 /* Save the current store pool point, for resetting at the start of
5310 each message, and save the real sender address, if any. */
5311
5312 real_sender_address = sender_address;
5313
5314 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5315 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5316 collapsed). */
5317
5318 while (more)
5319   {
5320   reset_point = store_mark();
5321   message_id[0] = 0;
5322
5323   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5324   input and build the recipients list, before calling receive_msg() to read the
5325   message proper. Whatever sender address is given in the SMTP transaction is
5326   often ignored for local senders - we use the actual sender, which is normally
5327   either the underlying user running this process or a -f argument provided by
5328   a trusted caller. It is saved in real_sender_address. The test for whether to
5329   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5330
5331   if (smtp_input)
5332     {
5333     int rc;
5334     if ((rc = smtp_setup_msg()) > 0)
5335       {
5336       if (real_sender_address != NULL &&
5337           !receive_check_set_sender(sender_address))
5338         {
5339         sender_address = raw_sender = real_sender_address;
5340         sender_address_unrewritten = NULL;
5341         }
5342
5343       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5344       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5345       the very end. The result of the ACL is ignored (as for other non-SMTP
5346       messages). It is run for its potential side effects. */
5347
5348       if (smtp_batched_input && acl_not_smtp_start != NULL)
5349         {
5350         uschar *user_msg, *log_msg;
5351         f.enable_dollar_recipients = TRUE;
5352         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5353           &user_msg, &log_msg);
5354         f.enable_dollar_recipients = FALSE;
5355         }
5356
5357       /* Now get the data for the message */
5358
5359       more = receive_msg(extract_recipients);
5360       if (message_id[0] == 0)
5361         {
5362         cancel_cutthrough_connection(TRUE, US"receive dropped");
5363         if (more) goto moreloop;
5364         smtp_log_no_mail();               /* Log no mail if configured */
5365         exim_exit(EXIT_FAILURE, US"receive toplevel");
5366         }
5367       }
5368     else
5369       {
5370       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5371       smtp_log_no_mail();               /* Log no mail if configured */
5372       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS, US"msg setup toplevel");
5373       }
5374     }
5375
5376   /* In the non-SMTP case, we have all the information from the command
5377   line, but must process it in case it is in the more general RFC822
5378   format, and in any case, to detect syntax errors. Also, it appears that
5379   the use of comma-separated lists as single arguments is common, so we
5380   had better support them. */
5381
5382   else
5383     {
5384     int rcount = 0;
5385     int count = argc - recipients_arg;
5386     uschar **list = argv + recipients_arg;
5387
5388     /* These options cannot be changed dynamically for non-SMTP messages */
5389
5390     f.active_local_sender_retain = local_sender_retain;
5391     f.active_local_from_check = local_from_check;
5392
5393     /* Save before any rewriting */
5394
5395     raw_sender = string_copy(sender_address);
5396
5397     /* Loop for each argument (supplied by user hence tainted) */
5398
5399     for (int i = 0; i < count; i++)
5400       {
5401       int start, end, domain;
5402       uschar * errmess;
5403       uschar * s = string_copy_taint(list[i], TRUE);
5404
5405       /* Loop for each comma-separated address */
5406
5407       while (*s != 0)
5408         {
5409         BOOL finished = FALSE;
5410         uschar *recipient;
5411         uschar *ss = parse_find_address_end(s, FALSE);
5412
5413         if (*ss == ',') *ss = 0; else finished = TRUE;
5414
5415         /* Check max recipients - if -t was used, these aren't recipients */
5416
5417         if (recipients_max > 0 && ++rcount > recipients_max &&
5418             !extract_recipients)
5419           if (error_handling == ERRORS_STDERR)
5420             {
5421             fprintf(stderr, "exim: too many recipients\n");
5422             exim_exit(EXIT_FAILURE, US"main");
5423             }
5424           else
5425             return
5426               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5427                 errors_sender_rc : EXIT_FAILURE;
5428
5429 #ifdef SUPPORT_I18N
5430         {
5431         BOOL b = allow_utf8_domains;
5432         allow_utf8_domains = TRUE;
5433 #endif
5434         recipient =
5435           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5436
5437 #ifdef SUPPORT_I18N
5438         if (string_is_utf8(recipient))
5439           message_smtputf8 = TRUE;
5440         else
5441           allow_utf8_domains = b;
5442         }
5443 #endif
5444         if (domain == 0 && !f.allow_unqualified_recipient)
5445           {
5446           recipient = NULL;
5447           errmess = US"unqualified recipient address not allowed";
5448           }
5449
5450         if (recipient == NULL)
5451           {
5452           if (error_handling == ERRORS_STDERR)
5453             {
5454             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5455               string_printing(list[i]), errmess);
5456             exim_exit(EXIT_FAILURE, US"main");
5457             }
5458           else
5459             {
5460             error_block eblock;
5461             eblock.next = NULL;
5462             eblock.text1 = string_printing(list[i]);
5463             eblock.text2 = errmess;
5464             return
5465               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5466                 errors_sender_rc : EXIT_FAILURE;
5467             }
5468           }
5469
5470         receive_add_recipient(string_copy_taint(recipient, TRUE), -1);
5471         s = ss;
5472         if (!finished)
5473           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5474         }
5475       }
5476
5477     /* Show the recipients when debugging */
5478
5479     DEBUG(D_receive)
5480       {
5481       if (sender_address != NULL) debug_printf("Sender: %s\n", sender_address);
5482       if (recipients_list != NULL)
5483         {
5484         debug_printf("Recipients:\n");
5485         for (int i = 0; i < recipients_count; i++)
5486           debug_printf("  %s\n", recipients_list[i].address);
5487         }
5488       }
5489
5490     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5491     ignored; rejecting here would just add complication, and it can just as
5492     well be done later. Allow $recipients to be visible in the ACL. */
5493
5494     if (acl_not_smtp_start)
5495       {
5496       uschar *user_msg, *log_msg;
5497       f.enable_dollar_recipients = TRUE;
5498       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5499         &user_msg, &log_msg);
5500       f.enable_dollar_recipients = FALSE;
5501       }
5502
5503     /* Pause for a while waiting for input.  If none received in that time,
5504     close the logfile, if we had one open; then if we wait for a long-running
5505     datasource (months, in one use-case) log rotation will not leave us holding
5506     the file copy. */
5507
5508     if (!receive_timeout)
5509       {
5510       struct timeval t = { .tv_sec = 30*60, .tv_usec = 0 };     /* 30 minutes */
5511       fd_set r;
5512
5513       FD_ZERO(&r); FD_SET(0, &r);
5514       if (select(1, &r, NULL, NULL, &t) == 0) mainlog_close();
5515       }
5516
5517     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5518     will just read the headers for the message, and not write anything onto the
5519     spool. */
5520
5521     message_ended = END_NOTENDED;
5522     more = receive_msg(extract_recipients);
5523
5524     /* more is always FALSE here (not SMTP message) when reading a message
5525     for real; when reading the headers of a message for filter testing,
5526     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5527
5528     if (message_id[0] == 0) exim_exit(EXIT_FAILURE, US"main");
5529     }  /* Non-SMTP message reception */
5530
5531   /* If this is a filter testing run, there are headers in store, but
5532   no message on the spool. Run the filtering code in testing mode, setting
5533   the domain to the qualify domain and the local part to the current user,
5534   unless they have been set by options. The prefix and suffix are left unset
5535   unless specified. The the return path is set to to the sender unless it has
5536   already been set from a return-path header in the message. */
5537
5538   if (filter_test != FTEST_NONE)
5539     {
5540     deliver_domain = (ftest_domain != NULL)?
5541       ftest_domain : qualify_domain_recipient;
5542     deliver_domain_orig = deliver_domain;
5543     deliver_localpart = (ftest_localpart != NULL)?
5544       ftest_localpart : originator_login;
5545     deliver_localpart_orig = deliver_localpart;
5546     deliver_localpart_prefix = ftest_prefix;
5547     deliver_localpart_suffix = ftest_suffix;
5548     deliver_home = originator_home;
5549
5550     if (return_path == NULL)
5551       {
5552       printf("Return-path copied from sender\n");
5553       return_path = string_copy(sender_address);
5554       }
5555     else
5556       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5557     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5558
5559     receive_add_recipient(
5560       string_sprintf("%s%s%s@%s",
5561         (ftest_prefix == NULL)? US"" : ftest_prefix,
5562         deliver_localpart,
5563         (ftest_suffix == NULL)? US"" : ftest_suffix,
5564         deliver_domain), -1);
5565
5566     printf("Recipient   = %s\n", recipients_list[0].address);
5567     if (ftest_prefix != NULL) printf("Prefix    = %s\n", ftest_prefix);
5568     if (ftest_suffix != NULL) printf("Suffix    = %s\n", ftest_suffix);
5569
5570     if (chdir("/"))   /* Get away from wherever the user is running this from */
5571       {
5572       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5573       exim_exit(EXIT_FAILURE, US"main");
5574       }
5575
5576     /* Now we run either a system filter test, or a user filter test, or both.
5577     In the latter case, headers added by the system filter will persist and be
5578     available to the user filter. We need to copy the filter variables
5579     explicitly. */
5580
5581     if ((filter_test & FTEST_SYSTEM) != 0)
5582       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5583         exim_exit(EXIT_FAILURE, US"main");
5584
5585     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5586
5587     if ((filter_test & FTEST_USER) != 0)
5588       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5589         exim_exit(EXIT_FAILURE, US"main");
5590
5591     exim_exit(EXIT_SUCCESS, US"main");
5592     }
5593
5594   /* Else act on the result of message reception. We should not get here unless
5595   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5596   will be TRUE. If it is not, check on the number of messages received in this
5597   connection. */
5598
5599   if (!session_local_queue_only &&
5600       smtp_accept_queue_per_connection > 0 &&
5601       receive_messagecount > smtp_accept_queue_per_connection)
5602     {
5603     session_local_queue_only = TRUE;
5604     queue_only_reason = 2;
5605     }
5606
5607   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5608   and queue_only_load is set, check that the load average is below it. If it is
5609   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5610   default), we put the whole session into queue_only mode. It then remains this
5611   way for any subsequent messages on the same SMTP connection. This is a
5612   deliberate choice; even though the load average may fall, it doesn't seem
5613   right to deliver later messages on the same call when not delivering earlier
5614   ones. However, there are odd cases where this is not wanted, so this can be
5615   changed by setting queue_only_load_latch false. */
5616
5617   local_queue_only = session_local_queue_only;
5618   if (!local_queue_only && queue_only_load >= 0)
5619     {
5620     local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load;
5621     if (local_queue_only)
5622       {
5623       queue_only_reason = 3;
5624       if (queue_only_load_latch) session_local_queue_only = TRUE;
5625       }
5626     }
5627
5628   /* If running as an MUA wrapper, all queueing options and freezing options
5629   are ignored. */
5630
5631   if (mua_wrapper)
5632     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
5633
5634   /* Log the queueing here, when it will get a message id attached, but
5635   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
5636   connections). */
5637
5638   if (local_queue_only)
5639     {
5640     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5641     switch(queue_only_reason)
5642       {
5643       case 2:
5644         log_write(L_delay_delivery,
5645                 LOG_MAIN, "no immediate delivery: more than %d messages "
5646           "received in one connection", smtp_accept_queue_per_connection);
5647         break;
5648
5649       case 3:
5650         log_write(L_delay_delivery,
5651                 LOG_MAIN, "no immediate delivery: load average %.2f",
5652                 (double)load_average/1000.0);
5653       break;
5654       }
5655     }
5656
5657   else if (f.queue_only_policy || f.deliver_freeze)
5658     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5659
5660   /* Else do the delivery unless the ACL or local_scan() called for queue only
5661   or froze the message. Always deliver in a separate process. A fork failure is
5662   not a disaster, as the delivery will eventually happen on a subsequent queue
5663   run. The search cache must be tidied before the fork, as the parent will
5664   do it before exiting. The child will trigger a lookup failure and
5665   thereby defer the delivery if it tries to use (for example) a cached ldap
5666   connection that the parent has called unbind on. */
5667
5668   else
5669     {
5670     pid_t pid;
5671     search_tidyup();
5672
5673     if ((pid = fork()) == 0)
5674       {
5675       int rc;
5676       close_unwanted();      /* Close unwanted file descriptors and TLS */
5677       exim_nullstd();        /* Ensure std{in,out,err} exist */
5678
5679       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
5680       mode, deliver_drop_privilege is forced TRUE). */
5681
5682       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
5683         {
5684         delivery_re_exec(CEE_EXEC_EXIT);
5685         /* Control does not return here. */
5686         }
5687
5688       /* No need to re-exec */
5689
5690       rc = deliver_message(message_id, FALSE, FALSE);
5691       search_tidyup();
5692       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
5693         ? EXIT_SUCCESS : EXIT_FAILURE);
5694       }
5695
5696     if (pid < 0)
5697       {
5698       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
5699       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
5700         "process: %s", strerror(errno));
5701       }
5702     else
5703       {
5704       release_cutthrough_connection(US"msg passed for delivery");
5705
5706       /* In the parent, wait if synchronous delivery is required. This will
5707       always be the case in MUA wrapper mode. */
5708
5709       if (f.synchronous_delivery)
5710         {
5711         int status;
5712         while (wait(&status) != pid);
5713         if ((status & 0x00ff) != 0)
5714           log_write(0, LOG_MAIN|LOG_PANIC,
5715             "process %d crashed with signal %d while delivering %s",
5716             (int)pid, status & 0x00ff, message_id);
5717         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE, US"main");
5718         }
5719       }
5720     }
5721
5722   /* The loop will repeat if more is TRUE. If we do not know know that the OS
5723   automatically reaps children (see comments above the loop), clear away any
5724   finished subprocesses here, in case there are lots of messages coming in
5725   from the same source. */
5726
5727   #ifndef SIG_IGN_WORKS
5728   while (waitpid(-1, NULL, WNOHANG) > 0);
5729   #endif
5730
5731 moreloop:
5732   return_path = sender_address = NULL;
5733   authenticated_sender = NULL;
5734   deliver_localpart_orig = NULL;
5735   deliver_domain_orig = NULL;
5736   deliver_host = deliver_host_address = NULL;
5737   dnslist_domain = dnslist_matched = NULL;
5738 #ifdef WITH_CONTENT_SCAN
5739   malware_name = NULL;
5740 #endif
5741   callout_address = NULL;
5742   sending_ip_address = NULL;
5743   acl_var_m = NULL;
5744   for(int i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
5745
5746   store_reset(reset_point);
5747   }
5748
5749 exim_exit(EXIT_SUCCESS, US"main");   /* Never returns */
5750 return 0;                  /* To stop compiler warning */
5751 }
5752
5753
5754 /* End of exim.c */