Overlapped twophase-queue-run and delivery. Experimental.
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8
9 /* The main function: entry point, initialization, and high-level control.
10 Also a few functions that don't naturally fit elsewhere. */
11
12
13 #include "exim.h"
14
15 #if defined(__GLIBC__) && !defined(__UCLIBC__)
16 # include <gnu/libc-version.h>
17 #endif
18
19 #ifdef USE_GNUTLS
20 # include <gnutls/gnutls.h>
21 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
22 #  define DISABLE_OCSP
23 # endif
24 #endif
25
26 #ifndef _TIME_H
27 # include <time.h>
28 #endif
29
30 extern void init_lookup_list(void);
31
32
33
34 /*************************************************
35 *      Function interface to store functions     *
36 *************************************************/
37
38 /* We need some real functions to pass to the PCRE regular expression library
39 for store allocation via Exim's store manager. The normal calls are actually
40 macros that pass over location information to make tracing easier. These
41 functions just interface to the standard macro calls. A good compiler will
42 optimize out the tail recursion and so not make them too expensive. There
43 are two sets of functions; one for use when we want to retain the compiled
44 regular expression for a long time; the other for short-term use. */
45
46 static void *
47 function_store_get(size_t size)
48 {
49 /* For now, regard all RE results as potentially tainted.  We might need
50 more intelligence on this point. */
51 return store_get((int)size, TRUE);
52 }
53
54 static void
55 function_dummy_free(void *block) { block = block; }
56
57 static void *
58 function_store_malloc(size_t size)
59 {
60 return store_malloc((int)size);
61 }
62
63 static void
64 function_store_free(void *block)
65 {
66 store_free(block);
67 }
68
69
70
71
72 /*************************************************
73 *         Enums for cmdline interface            *
74 *************************************************/
75
76 enum commandline_info { CMDINFO_NONE=0,
77   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
78
79
80
81
82 /*************************************************
83 *  Compile regular expression and panic on fail  *
84 *************************************************/
85
86 /* This function is called when failure to compile a regular expression leads
87 to a panic exit. In other cases, pcre_compile() is called directly. In many
88 cases where this function is used, the results of the compilation are to be
89 placed in long-lived store, so we temporarily reset the store management
90 functions that PCRE uses if the use_malloc flag is set.
91
92 Argument:
93   pattern     the pattern to compile
94   caseless    TRUE if caseless matching is required
95   use_malloc  TRUE if compile into malloc store
96
97 Returns:      pointer to the compiled pattern
98 */
99
100 const pcre *
101 regex_must_compile(const uschar *pattern, BOOL caseless, BOOL use_malloc)
102 {
103 int offset;
104 int options = PCRE_COPT;
105 const pcre *yield;
106 const uschar *error;
107 if (use_malloc)
108   {
109   pcre_malloc = function_store_malloc;
110   pcre_free = function_store_free;
111   }
112 if (caseless) options |= PCRE_CASELESS;
113 yield = pcre_compile(CCS pattern, options, CCSS &error, &offset, NULL);
114 pcre_malloc = function_store_get;
115 pcre_free = function_dummy_free;
116 if (yield == NULL)
117   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
118     "%s at offset %d while compiling %s", error, offset, pattern);
119 return yield;
120 }
121
122
123
124
125 /*************************************************
126 *   Execute regular expression and set strings   *
127 *************************************************/
128
129 /* This function runs a regular expression match, and sets up the pointers to
130 the matched substrings.
131
132 Arguments:
133   re          the compiled expression
134   subject     the subject string
135   options     additional PCRE options
136   setup       if < 0 do full setup
137               if >= 0 setup from setup+1 onwards,
138                 excluding the full matched string
139
140 Returns:      TRUE or FALSE
141 */
142
143 BOOL
144 regex_match_and_setup(const pcre *re, const uschar *subject, int options, int setup)
145 {
146 int ovector[3*(EXPAND_MAXN+1)];
147 uschar * s = string_copy(subject);      /* de-constifying */
148 int n = pcre_exec(re, NULL, CS s, Ustrlen(s), 0,
149   PCRE_EOPT | options, ovector, nelem(ovector));
150 BOOL yield = n >= 0;
151 if (n == 0) n = EXPAND_MAXN + 1;
152 if (yield)
153   {
154   expand_nmax = setup < 0 ? 0 : setup + 1;
155   for (int nn = setup < 0 ? 0 : 2; nn < n*2; nn += 2)
156     {
157     expand_nstring[expand_nmax] = s + ovector[nn];
158     expand_nlength[expand_nmax++] = ovector[nn+1] - ovector[nn];
159     }
160   expand_nmax--;
161   }
162 return yield;
163 }
164
165
166
167
168 /*************************************************
169 *            Set up processing details           *
170 *************************************************/
171
172 /* Save a text string for dumping when SIGUSR1 is received.
173 Do checks for overruns.
174
175 Arguments: format and arguments, as for printf()
176 Returns:   nothing
177 */
178
179 void
180 set_process_info(const char *format, ...)
181 {
182 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
183 gstring * g;
184 int len;
185 va_list ap;
186
187 g = string_fmt_append(&gs, "%5d ", (int)getpid());
188 len = g->ptr;
189 va_start(ap, format);
190 if (!string_vformat(g, 0, format, ap))
191   {
192   gs.ptr = len;
193   g = string_cat(&gs, US"**** string overflowed buffer ****");
194   }
195 g = string_catn(g, US"\n", 1);
196 string_from_gstring(g);
197 process_info_len = g->ptr;
198 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
199 va_end(ap);
200 }
201
202 /***********************************************
203 *            Handler for SIGTERM               *
204 ***********************************************/
205
206 static void
207 term_handler(int sig)
208 {
209 exit(1);
210 }
211
212
213 /*************************************************
214 *             Handler for SIGUSR1                *
215 *************************************************/
216
217 /* SIGUSR1 causes any exim process to write to the process log details of
218 what it is currently doing. It will only be used if the OS is capable of
219 setting up a handler that causes automatic restarting of any system call
220 that is in progress at the time.
221
222 This function takes care to be signal-safe.
223
224 Argument: the signal number (SIGUSR1)
225 Returns:  nothing
226 */
227
228 static void
229 usr1_handler(int sig)
230 {
231 int fd;
232
233 os_restarting_signal(sig, usr1_handler);
234
235 if ((fd = Uopen(process_log_path, O_APPEND|O_WRONLY, LOG_MODE)) < 0)
236   {
237   /* If we are already running as the Exim user, try to create it in the
238   current process (assuming spool_directory exists). Otherwise, if we are
239   root, do the creation in an exim:exim subprocess. */
240
241   int euid = geteuid();
242   if (euid == exim_uid)
243     fd = Uopen(process_log_path, O_CREAT|O_APPEND|O_WRONLY, LOG_MODE);
244   else if (euid == root_uid)
245     fd = log_create_as_exim(process_log_path);
246   }
247
248 /* If we are neither exim nor root, or if we failed to create the log file,
249 give up. There is not much useful we can do with errors, since we don't want
250 to disrupt whatever is going on outside the signal handler. */
251
252 if (fd < 0) return;
253
254 (void)write(fd, process_info, process_info_len);
255 (void)close(fd);
256 }
257
258
259
260 /*************************************************
261 *             Timeout handler                    *
262 *************************************************/
263
264 /* This handler is enabled most of the time that Exim is running. The handler
265 doesn't actually get used unless alarm() has been called to set a timer, to
266 place a time limit on a system call of some kind. When the handler is run, it
267 re-enables itself.
268
269 There are some other SIGALRM handlers that are used in special cases when more
270 than just a flag setting is required; for example, when reading a message's
271 input. These are normally set up in the code module that uses them, and the
272 SIGALRM handler is reset to this one afterwards.
273
274 Argument: the signal value (SIGALRM)
275 Returns:  nothing
276 */
277
278 void
279 sigalrm_handler(int sig)
280 {
281 sig = sig;      /* Keep picky compilers happy */
282 sigalrm_seen = TRUE;
283 os_non_restarting_signal(SIGALRM, sigalrm_handler);
284 }
285
286
287
288 /*************************************************
289 *      Sleep for a fractional time interval      *
290 *************************************************/
291
292 /* This function is called by millisleep() and exim_wait_tick() to wait for a
293 period of time that may include a fraction of a second. The coding is somewhat
294 tedious. We do not expect setitimer() ever to fail, but if it does, the process
295 will wait for ever, so we panic in this instance. (There was a case of this
296 when a bug in a function that calls milliwait() caused it to pass invalid data.
297 That's when I added the check. :-)
298
299 We assume it to be not worth sleeping for under 50us; this value will
300 require revisiting as hardware advances.  This avoids the issue of
301 a zero-valued timer setting meaning "never fire".
302
303 Argument:  an itimerval structure containing the interval
304 Returns:   nothing
305 */
306
307 static void
308 milliwait(struct itimerval *itval)
309 {
310 sigset_t sigmask;
311 sigset_t old_sigmask;
312
313 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
314   return;
315 (void)sigemptyset(&sigmask);                           /* Empty mask */
316 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
317 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
318 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
319   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
320     "setitimer() failed: %s", strerror(errno));
321 (void)sigfillset(&sigmask);                            /* All signals */
322 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
323 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
324 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
325 }
326
327
328
329
330 /*************************************************
331 *         Millisecond sleep function             *
332 *************************************************/
333
334 /* The basic sleep() function has a granularity of 1 second, which is too rough
335 in some cases - for example, when using an increasing delay to slow down
336 spammers.
337
338 Argument:    number of millseconds
339 Returns:     nothing
340 */
341
342 void
343 millisleep(int msec)
344 {
345 struct itimerval itval;
346 itval.it_interval.tv_sec = 0;
347 itval.it_interval.tv_usec = 0;
348 itval.it_value.tv_sec = msec/1000;
349 itval.it_value.tv_usec = (msec % 1000) * 1000;
350 milliwait(&itval);
351 }
352
353
354
355 /*************************************************
356 *         Compare microsecond times              *
357 *************************************************/
358
359 /*
360 Arguments:
361   tv1         the first time
362   tv2         the second time
363
364 Returns:      -1, 0, or +1
365 */
366
367 static int
368 exim_tvcmp(struct timeval *t1, struct timeval *t2)
369 {
370 if (t1->tv_sec > t2->tv_sec) return +1;
371 if (t1->tv_sec < t2->tv_sec) return -1;
372 if (t1->tv_usec > t2->tv_usec) return +1;
373 if (t1->tv_usec < t2->tv_usec) return -1;
374 return 0;
375 }
376
377
378
379
380 /*************************************************
381 *          Clock tick wait function              *
382 *************************************************/
383
384 #ifdef _POSIX_MONOTONIC_CLOCK
385 /* Amount CLOCK_MONOTONIC is behind realtime, at startup. */
386 static struct timespec offset_ts;
387
388 static void
389 exim_clock_init(void)
390 {
391 struct timeval tv;
392 if (clock_gettime(CLOCK_MONOTONIC, &offset_ts) != 0) return;
393 (void)gettimeofday(&tv, NULL);
394 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
395 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
396 if (offset_ts.tv_nsec >= 0) return;
397 offset_ts.tv_sec--;
398 offset_ts.tv_nsec += 1000*1000*1000;
399 }
400 #endif
401
402
403 /* Exim uses a time + a pid to generate a unique identifier in two places: its
404 message IDs, and in file names for maildir deliveries. Because some OS now
405 re-use pids within the same second, sub-second times are now being used.
406 However, for absolute certainty, we must ensure the clock has ticked before
407 allowing the relevant process to complete. At the time of implementation of
408 this code (February 2003), the speed of processors is such that the clock will
409 invariably have ticked already by the time a process has done its job. This
410 function prepares for the time when things are faster - and it also copes with
411 clocks that go backwards.
412
413 Arguments:
414   tgt_tv       A timeval which was used to create uniqueness; its usec field
415                  has been rounded down to the value of the resolution.
416                  We want to be sure the current time is greater than this.
417   resolution   The resolution that was used to divide the microseconds
418                  (1 for maildir, larger for message ids)
419
420 Returns:       nothing
421 */
422
423 void
424 exim_wait_tick(struct timeval * tgt_tv, int resolution)
425 {
426 struct timeval now_tv;
427 long int now_true_usec;
428
429 #ifdef _POSIX_MONOTONIC_CLOCK
430 struct timespec now_ts;
431
432 if (clock_gettime(CLOCK_MONOTONIC, &now_ts) == 0)
433   {
434   now_ts.tv_sec += offset_ts.tv_sec;
435   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
436     {
437     now_ts.tv_sec++;
438     now_ts.tv_nsec -= 1000*1000*1000;
439     }
440   now_tv.tv_sec = now_ts.tv_sec;
441   now_true_usec = (now_ts.tv_nsec / (resolution * 1000)) * resolution;
442   now_tv.tv_usec = now_true_usec;
443   }
444 else
445 #endif
446   {
447   (void)gettimeofday(&now_tv, NULL);
448   now_true_usec = now_tv.tv_usec;
449   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
450   }
451
452 while (exim_tvcmp(&now_tv, tgt_tv) <= 0)
453   {
454   struct itimerval itval;
455   itval.it_interval.tv_sec = 0;
456   itval.it_interval.tv_usec = 0;
457   itval.it_value.tv_sec = tgt_tv->tv_sec - now_tv.tv_sec;
458   itval.it_value.tv_usec = tgt_tv->tv_usec + resolution - now_true_usec;
459
460   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
461   negative value for the microseconds is possible only in the case when "now"
462   is more than a second less than "tgt". That means that itval.it_value.tv_sec
463   is greater than zero. The following correction is therefore safe. */
464
465   if (itval.it_value.tv_usec < 0)
466     {
467     itval.it_value.tv_usec += 1000000;
468     itval.it_value.tv_sec -= 1;
469     }
470
471   DEBUG(D_transport|D_receive)
472     {
473     if (!f.running_in_test_harness)
474       {
475       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
476         tgt_tv->tv_sec, (long) tgt_tv->tv_usec,
477         now_tv.tv_sec, (long) now_tv.tv_usec);
478       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
479         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
480       }
481     }
482
483   milliwait(&itval);
484
485   /* Be prapared to go around if the kernel does not implement subtick
486   granularity (GNU Hurd) */
487
488   (void)gettimeofday(&now_tv, NULL);
489   now_true_usec = now_tv.tv_usec;
490   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
491   }
492 }
493
494
495
496
497 /*************************************************
498 *   Call fopen() with umask 777 and adjust mode  *
499 *************************************************/
500
501 /* Exim runs with umask(0) so that files created with open() have the mode that
502 is specified in the open() call. However, there are some files, typically in
503 the spool directory, that are created with fopen(). They end up world-writeable
504 if no precautions are taken. Although the spool directory is not accessible to
505 the world, this is an untidiness. So this is a wrapper function for fopen()
506 that sorts out the mode of the created file.
507
508 Arguments:
509    filename       the file name
510    options        the fopen() options
511    mode           the required mode
512
513 Returns:          the fopened FILE or NULL
514 */
515
516 FILE *
517 modefopen(const uschar *filename, const char *options, mode_t mode)
518 {
519 mode_t saved_umask = umask(0777);
520 FILE *f = Ufopen(filename, options);
521 (void)umask(saved_umask);
522 if (f != NULL) (void)fchmod(fileno(f), mode);
523 return f;
524 }
525
526
527 /*************************************************
528 *   Ensure stdin, stdout, and stderr exist       *
529 *************************************************/
530
531 /* Some operating systems grumble if an exec() happens without a standard
532 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
533 file will be opened and will use these fd values, and then some other bit of
534 code will assume, for example, that it can write error messages to stderr.
535 This function ensures that fds 0, 1, and 2 are open if they do not already
536 exist, by connecting them to /dev/null.
537
538 This function is also used to ensure that std{in,out,err} exist at all times,
539 so that if any library that Exim calls tries to use them, it doesn't crash.
540
541 Arguments:  None
542 Returns:    Nothing
543 */
544
545 void
546 exim_nullstd(void)
547 {
548 int devnull = -1;
549 struct stat statbuf;
550 for (int i = 0; i <= 2; i++)
551   {
552   if (fstat(i, &statbuf) < 0 && errno == EBADF)
553     {
554     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
555     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
556       string_open_failed(errno, "/dev/null", NULL));
557     if (devnull != i) (void)dup2(devnull, i);
558     }
559   }
560 if (devnull > 2) (void)close(devnull);
561 }
562
563
564
565
566 /*************************************************
567 *   Close unwanted file descriptors for delivery *
568 *************************************************/
569
570 /* This function is called from a new process that has been forked to deliver
571 an incoming message, either directly, or using exec.
572
573 We want any smtp input streams to be closed in this new process. However, it
574 has been observed that using fclose() here causes trouble. When reading in -bS
575 input, duplicate copies of messages have been seen. The files will be sharing a
576 file pointer with the parent process, and it seems that fclose() (at least on
577 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
578 least sometimes. Hence we go for closing the underlying file descriptors.
579
580 If TLS is active, we want to shut down the TLS library, but without molesting
581 the parent's SSL connection.
582
583 For delivery of a non-SMTP message, we want to close stdin and stdout (and
584 stderr unless debugging) because the calling process might have set them up as
585 pipes and be waiting for them to close before it waits for the submission
586 process to terminate. If they aren't closed, they hold up the calling process
587 until the initial delivery process finishes, which is not what we want.
588
589 Exception: We do want it for synchronous delivery!
590
591 And notwithstanding all the above, if D_resolver is set, implying resolver
592 debugging, leave stdout open, because that's where the resolver writes its
593 debugging output.
594
595 When we close stderr (which implies we've also closed stdout), we also get rid
596 of any controlling terminal.
597
598 Arguments:   None
599 Returns:     Nothing
600 */
601
602 static void
603 close_unwanted(void)
604 {
605 if (smtp_input)
606   {
607 #ifndef DISABLE_TLS
608   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
609 #endif
610   (void)close(fileno(smtp_in));
611   (void)close(fileno(smtp_out));
612   smtp_in = NULL;
613   }
614 else
615   {
616   (void)close(0);                                          /* stdin */
617   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
618   if (debug_selector == 0)                                 /* stderr */
619     {
620     if (!f.synchronous_delivery)
621       {
622       (void)close(2);
623       log_stderr = NULL;
624       }
625     (void)setsid();
626     }
627   }
628 }
629
630
631
632
633 /*************************************************
634 *          Set uid and gid                       *
635 *************************************************/
636
637 /* This function sets a new uid and gid permanently, optionally calling
638 initgroups() to set auxiliary groups. There are some special cases when running
639 Exim in unprivileged modes. In these situations the effective uid will not be
640 root; if we already have the right effective uid/gid, and don't need to
641 initialize any groups, leave things as they are.
642
643 Arguments:
644   uid        the uid
645   gid        the gid
646   igflag     TRUE if initgroups() wanted
647   msg        text to use in debugging output and failure log
648
649 Returns:     nothing; bombs out on failure
650 */
651
652 void
653 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, uschar *msg)
654 {
655 uid_t euid = geteuid();
656 gid_t egid = getegid();
657
658 if (euid == root_uid || euid != uid || egid != gid || igflag)
659   {
660   /* At least one OS returns +1 for initgroups failure, so just check for
661   non-zero. */
662
663   if (igflag)
664     {
665     struct passwd *pw = getpwuid(uid);
666     if (!pw)
667       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
668         "no passwd entry for uid=%ld", (long int)uid);
669
670     if (initgroups(pw->pw_name, gid) != 0)
671       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
672         (long int)uid, strerror(errno));
673     }
674
675   if (setgid(gid) < 0 || setuid(uid) < 0)
676     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
677       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
678   }
679
680 /* Debugging output included uid/gid and all groups */
681
682 DEBUG(D_uid)
683   {
684   int group_count, save_errno;
685   gid_t group_list[EXIM_GROUPLIST_SIZE];
686   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
687     (long int)geteuid(), (long int)getegid(), (long int)getpid());
688   group_count = getgroups(nelem(group_list), group_list);
689   save_errno = errno;
690   debug_printf("  auxiliary group list:");
691   if (group_count > 0)
692     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
693   else if (group_count < 0)
694     debug_printf(" <error: %s>", strerror(save_errno));
695   else debug_printf(" <none>");
696   debug_printf("\n");
697   }
698 }
699
700
701
702
703 /*************************************************
704 *               Exit point                       *
705 *************************************************/
706
707 /* Exim exits via this function so that it always clears up any open
708 databases.
709
710 Arguments:
711   rc         return code
712
713 Returns:     does not return
714 */
715
716 void
717 exim_exit(int rc, const uschar * process)
718 {
719 search_tidyup();
720 store_exit();
721 DEBUG(D_any)
722   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d %s%s%sterminating with rc=%d "
723     ">>>>>>>>>>>>>>>>\n", (int)getpid(),
724     process ? "(" : "", process, process ? ") " : "", rc);
725 exit(rc);
726 }
727
728
729 void
730 exim_underbar_exit(int rc)
731 {
732 store_exit();
733 _exit(rc);
734 }
735
736
737
738 /* Print error string, then die */
739 static void
740 exim_fail(const char * fmt, ...)
741 {
742 va_list ap;
743 va_start(ap, fmt);
744 vfprintf(stderr, fmt, ap);
745 exit(EXIT_FAILURE);
746 }
747
748 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
749 of chown()/fchown().  See src/functions.h for more explanation */
750 int
751 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
752 {
753 int saved_errno = errno;  /* from the preceeding chown call */
754 #if 1
755 log_write(0, LOG_MAIN|LOG_PANIC,
756   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
757   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
758   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
759 #else
760 /* I leave this here, commented, in case the "bug"(?) comes up again.
761    It is not an Exim bug, but we can provide a workaround.
762    See Bug 2391
763    HS 2019-04-18 */
764
765 struct stat buf;
766
767 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
768 {
769   if (buf.st_uid == owner && buf.st_gid == group) return 0;
770   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
771 }
772 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
773
774 #endif
775 errno = saved_errno;
776 return -1;
777 }
778
779
780 /*************************************************
781 *         Extract port from host address         *
782 *************************************************/
783
784 /* Called to extract the port from the values given to -oMa and -oMi.
785 It also checks the syntax of the address, and terminates it before the
786 port data when a port is extracted.
787
788 Argument:
789   address   the address, with possible port on the end
790
791 Returns:    the port, or zero if there isn't one
792             bombs out on a syntax error
793 */
794
795 static int
796 check_port(uschar *address)
797 {
798 int port = host_address_extract_port(address);
799 if (string_is_ip_address(address, NULL) == 0)
800   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
801 return port;
802 }
803
804
805
806 /*************************************************
807 *              Test/verify an address            *
808 *************************************************/
809
810 /* This function is called by the -bv and -bt code. It extracts a working
811 address from a full RFC 822 address. This isn't really necessary per se, but it
812 has the effect of collapsing source routes.
813
814 Arguments:
815   s            the address string
816   flags        flag bits for verify_address()
817   exit_value   to be set for failures
818
819 Returns:       nothing
820 */
821
822 static void
823 test_address(uschar *s, int flags, int *exit_value)
824 {
825 int start, end, domain;
826 uschar *parse_error = NULL;
827 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
828   FALSE);
829 if (address == NULL)
830   {
831   fprintf(stdout, "syntax error: %s\n", parse_error);
832   *exit_value = 2;
833   }
834 else
835   {
836   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
837     -1, -1, NULL, NULL, NULL);
838   if (rc == FAIL) *exit_value = 2;
839     else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
840   }
841 }
842
843
844
845 /*************************************************
846 *          Show supported features               *
847 *************************************************/
848
849 static void
850 show_db_version(FILE * f)
851 {
852 #ifdef DB_VERSION_STRING
853 DEBUG(D_any)
854   {
855   fprintf(f, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
856   fprintf(f, "                      Runtime: %s\n",
857     db_version(NULL, NULL, NULL));
858   }
859 else
860   fprintf(f, "Berkeley DB: %s\n", DB_VERSION_STRING);
861
862 #elif defined(BTREEVERSION) && defined(HASHVERSION)
863   #ifdef USE_DB
864   fprintf(f, "Probably Berkeley DB version 1.8x (native mode)\n");
865   #else
866   fprintf(f, "Probably Berkeley DB version 1.8x (compatibility mode)\n");
867   #endif
868
869 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
870 fprintf(f, "Probably ndbm\n");
871 #elif defined(USE_TDB)
872 fprintf(f, "Using tdb\n");
873 #else
874   #ifdef USE_GDBM
875   fprintf(f, "Probably GDBM (native mode)\n");
876   #else
877   fprintf(f, "Probably GDBM (compatibility mode)\n");
878   #endif
879 #endif
880 }
881
882
883 /* This function is called for -bV/--version and for -d to output the optional
884 features of the current Exim binary.
885
886 Arguments:  a FILE for printing
887 Returns:    nothing
888 */
889
890 static void
891 show_whats_supported(FILE * fp)
892 {
893 DEBUG(D_any) {} else show_db_version(fp);
894
895 fprintf(fp, "Support for:");
896 #ifdef SUPPORT_CRYPTEQ
897   fprintf(fp, " crypteq");
898 #endif
899 #if HAVE_ICONV
900   fprintf(fp, " iconv()");
901 #endif
902 #if HAVE_IPV6
903   fprintf(fp, " IPv6");
904 #endif
905 #ifdef HAVE_SETCLASSRESOURCES
906   fprintf(fp, " use_setclassresources");
907 #endif
908 #ifdef SUPPORT_PAM
909   fprintf(fp, " PAM");
910 #endif
911 #ifdef EXIM_PERL
912   fprintf(fp, " Perl");
913 #endif
914 #ifdef EXPAND_DLFUNC
915   fprintf(fp, " Expand_dlfunc");
916 #endif
917 #ifdef USE_TCP_WRAPPERS
918   fprintf(fp, " TCPwrappers");
919 #endif
920 #ifdef USE_GNUTLS
921   fprintf(fp, " GnuTLS");
922 #endif
923 #ifdef USE_OPENSSL
924   fprintf(fp, " OpenSSL");
925 #endif
926 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
927   fprintf(fp, " translate_ip_address");
928 #endif
929 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
930   fprintf(fp, " move_frozen_messages");
931 #endif
932 #ifdef WITH_CONTENT_SCAN
933   fprintf(fp, " Content_Scanning");
934 #endif
935 #ifdef SUPPORT_DANE
936   fprintf(fp, " DANE");
937 #endif
938 #ifndef DISABLE_DKIM
939   fprintf(fp, " DKIM");
940 #endif
941 #ifndef DISABLE_DNSSEC
942   fprintf(fp, " DNSSEC");
943 #endif
944 #ifndef DISABLE_EVENT
945   fprintf(fp, " Event");
946 #endif
947 #ifdef SUPPORT_I18N
948   fprintf(fp, " I18N");
949 #endif
950 #ifndef DISABLE_OCSP
951   fprintf(fp, " OCSP");
952 #endif
953 #ifndef DISABLE_PIPE_CONNECT
954   fprintf(fp, " PIPE_CONNECT");
955 #endif
956 #ifndef DISABLE_PRDR
957   fprintf(fp, " PRDR");
958 #endif
959 #ifdef SUPPORT_PROXY
960   fprintf(fp, " PROXY");
961 #endif
962 #ifdef SUPPORT_SOCKS
963   fprintf(fp, " SOCKS");
964 #endif
965 #ifdef SUPPORT_SPF
966   fprintf(fp, " SPF");
967 #endif
968 #ifdef SUPPORT_DMARC
969   fprintf(fp, " DMARC");
970 #endif
971 #ifdef TCP_FASTOPEN
972   tcp_init();
973   if (f.tcp_fastopen_ok) fprintf(fp, " TCP_Fast_Open");
974 #endif
975 #ifdef EXPERIMENTAL_ARC
976   fprintf(fp, " Experimental_ARC");
977 #endif
978 #ifdef EXPERIMENTAL_BRIGHTMAIL
979   fprintf(fp, " Experimental_Brightmail");
980 #endif
981 #ifdef EXPERIMENTAL_DCC
982   fprintf(fp, " Experimental_DCC");
983 #endif
984 #ifdef EXPERIMENTAL_DSN_INFO
985   fprintf(fp, " Experimental_DSN_info");
986 #endif
987 #ifdef EXPERIMENTAL_LMDB
988   fprintf(fp, " Experimental_LMDB");
989 #endif
990 #ifdef EXPERIMENTAL_QUEUE_RAMP
991   fprintf(fp, " Experimental_Queue_Ramp");
992 #endif
993 #ifdef EXPERIMENTAL_QUEUEFILE
994   fprintf(fp, " Experimental_QUEUEFILE");
995 #endif
996 #if defined(EXPERIMENTAL_SRS) || defined(EXPERIMENTAL_SRS_NATIVE)
997   fprintf(fp, " Experimental_SRS");
998 #endif
999 #ifdef EXPERIMENTAL_TLS_RESUME
1000   fprintf(fp, " Experimental_TLS_resume");
1001 #endif
1002 fprintf(fp, "\n");
1003
1004 fprintf(fp, "Lookups (built-in):");
1005 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1006   fprintf(fp, " lsearch wildlsearch nwildlsearch iplsearch");
1007 #endif
1008 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1009   fprintf(fp, " cdb");
1010 #endif
1011 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1012   fprintf(fp, " dbm dbmjz dbmnz");
1013 #endif
1014 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1015   fprintf(fp, " dnsdb");
1016 #endif
1017 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1018   fprintf(fp, " dsearch");
1019 #endif
1020 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1021   fprintf(fp, " ibase");
1022 #endif
1023 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1024   fprintf(fp, " json");
1025 #endif
1026 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1027   fprintf(fp, " ldap ldapdn ldapm");
1028 #endif
1029 #ifdef EXPERIMENTAL_LMDB
1030   fprintf(fp, " lmdb");
1031 #endif
1032 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1033   fprintf(fp, " mysql");
1034 #endif
1035 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1036   fprintf(fp, " nis nis0");
1037 #endif
1038 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1039   fprintf(fp, " nisplus");
1040 #endif
1041 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1042   fprintf(fp, " oracle");
1043 #endif
1044 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1045   fprintf(fp, " passwd");
1046 #endif
1047 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1048   fprintf(fp, " pgsql");
1049 #endif
1050 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1051   fprintf(fp, " redis");
1052 #endif
1053 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1054   fprintf(fp, " sqlite");
1055 #endif
1056 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1057   fprintf(fp, " testdb");
1058 #endif
1059 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1060   fprintf(fp, " whoson");
1061 #endif
1062 fprintf(fp, "\n");
1063
1064 auth_show_supported(fp);
1065 route_show_supported(fp);
1066 transport_show_supported(fp);
1067
1068 #ifdef WITH_CONTENT_SCAN
1069 malware_show_supported(fp);
1070 #endif
1071
1072 if (fixed_never_users[0] > 0)
1073   {
1074   int i;
1075   fprintf(fp, "Fixed never_users: ");
1076   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1077     fprintf(fp, "%d:", (unsigned int)fixed_never_users[i]);
1078   fprintf(fp, "%d\n", (unsigned int)fixed_never_users[i]);
1079   }
1080
1081 fprintf(fp, "Configure owner: %d:%d\n", config_uid, config_gid);
1082
1083 fprintf(fp, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1084
1085 /* Everything else is details which are only worth reporting when debugging.
1086 Perhaps the tls_version_report should move into this too. */
1087 DEBUG(D_any) do {
1088
1089 /* clang defines __GNUC__ (at least, for me) so test for it first */
1090 #if defined(__clang__)
1091   fprintf(fp, "Compiler: CLang [%s]\n", __clang_version__);
1092 #elif defined(__GNUC__)
1093   fprintf(fp, "Compiler: GCC [%s]\n",
1094 # ifdef __VERSION__
1095       __VERSION__
1096 # else
1097       "? unknown version ?"
1098 # endif
1099       );
1100 #else
1101   fprintf(fp, "Compiler: <unknown>\n");
1102 #endif
1103
1104 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1105   fprintf(fp, "Library version: Glibc: Compile: %d.%d\n",
1106                 __GLIBC__, __GLIBC_MINOR__);
1107   if (__GLIBC_PREREQ(2, 1))
1108     fprintf(fp, "                        Runtime: %s\n",
1109                 gnu_get_libc_version());
1110 #endif
1111
1112 show_db_version(fp);
1113
1114 #ifndef DISABLE_TLS
1115   tls_version_report(fp);
1116 #endif
1117 #ifdef SUPPORT_I18N
1118   utf8_version_report(fp);
1119 #endif
1120 #ifdef SUPPORT_SPF
1121   spf_lib_version_report(fp);
1122 #endif
1123
1124   for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1125     if (authi->version_report)
1126       (*authi->version_report)(fp);
1127
1128   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1129   characters; unless it's an ancient version of PCRE in which case it
1130   is not defined. */
1131 #ifndef PCRE_PRERELEASE
1132 # define PCRE_PRERELEASE
1133 #endif
1134 #define QUOTE(X) #X
1135 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1136   fprintf(fp, "Library version: PCRE: Compile: %d.%d%s\n"
1137              "                       Runtime: %s\n",
1138           PCRE_MAJOR, PCRE_MINOR,
1139           EXPAND_AND_QUOTE(PCRE_PRERELEASE) "",
1140           pcre_version());
1141 #undef QUOTE
1142 #undef EXPAND_AND_QUOTE
1143
1144   init_lookup_list();
1145   for (int i = 0; i < lookup_list_count; i++)
1146     if (lookup_list[i]->version_report)
1147       lookup_list[i]->version_report(fp);
1148
1149 #ifdef WHITELIST_D_MACROS
1150   fprintf(fp, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1151 #else
1152   fprintf(fp, "WHITELIST_D_MACROS unset\n");
1153 #endif
1154 #ifdef TRUSTED_CONFIG_LIST
1155   fprintf(fp, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1156 #else
1157   fprintf(fp, "TRUSTED_CONFIG_LIST unset\n");
1158 #endif
1159
1160 } while (0);
1161 }
1162
1163
1164 /*************************************************
1165 *     Show auxiliary information about Exim      *
1166 *************************************************/
1167
1168 static void
1169 show_exim_information(enum commandline_info request, FILE *stream)
1170 {
1171 switch(request)
1172   {
1173   case CMDINFO_NONE:
1174     fprintf(stream, "Oops, something went wrong.\n");
1175     return;
1176   case CMDINFO_HELP:
1177     fprintf(stream,
1178 "The -bI: flag takes a string indicating which information to provide.\n"
1179 "If the string is not recognised, you'll get this help (on stderr).\n"
1180 "\n"
1181 "  exim -bI:help    this information\n"
1182 "  exim -bI:dscp    list of known dscp value keywords\n"
1183 "  exim -bI:sieve   list of supported sieve extensions\n"
1184 );
1185     return;
1186   case CMDINFO_SIEVE:
1187     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1188       fprintf(stream, "%s\n", *pp);
1189     return;
1190   case CMDINFO_DSCP:
1191     dscp_list_to_stream(stream);
1192     return;
1193   }
1194 }
1195
1196
1197 /*************************************************
1198 *               Quote a local part               *
1199 *************************************************/
1200
1201 /* This function is used when a sender address or a From: or Sender: header
1202 line is being created from the caller's login, or from an authenticated_id. It
1203 applies appropriate quoting rules for a local part.
1204
1205 Argument:    the local part
1206 Returns:     the local part, quoted if necessary
1207 */
1208
1209 uschar *
1210 local_part_quote(uschar *lpart)
1211 {
1212 BOOL needs_quote = FALSE;
1213 gstring * g;
1214
1215 for (uschar * t = lpart; !needs_quote && *t != 0; t++)
1216   {
1217   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1218     (*t != '.' || t == lpart || t[1] == 0);
1219   }
1220
1221 if (!needs_quote) return lpart;
1222
1223 g = string_catn(NULL, US"\"", 1);
1224
1225 for (;;)
1226   {
1227   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1228   if (nq == NULL)
1229     {
1230     g = string_cat(g, lpart);
1231     break;
1232     }
1233   g = string_catn(g, lpart, nq - lpart);
1234   g = string_catn(g, US"\\", 1);
1235   g = string_catn(g, nq, 1);
1236   lpart = nq + 1;
1237   }
1238
1239 g = string_catn(g, US"\"", 1);
1240 return string_from_gstring(g);
1241 }
1242
1243
1244
1245 #ifdef USE_READLINE
1246 /*************************************************
1247 *         Load readline() functions              *
1248 *************************************************/
1249
1250 /* This function is called from testing executions that read data from stdin,
1251 but only when running as the calling user. Currently, only -be does this. The
1252 function loads the readline() function library and passes back the functions.
1253 On some systems, it needs the curses library, so load that too, but try without
1254 it if loading fails. All this functionality has to be requested at build time.
1255
1256 Arguments:
1257   fn_readline_ptr   pointer to where to put the readline pointer
1258   fn_addhist_ptr    pointer to where to put the addhistory function
1259
1260 Returns:            the dlopen handle or NULL on failure
1261 */
1262
1263 static void *
1264 set_readline(char * (**fn_readline_ptr)(const char *),
1265              void   (**fn_addhist_ptr)(const char *))
1266 {
1267 void *dlhandle;
1268 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1269
1270 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1271 if (dlhandle_curses) dlclose(dlhandle_curses);
1272
1273 if (dlhandle)
1274   {
1275   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1276    *   char * readline (const char *prompt);
1277    *   void add_history (const char *string);
1278    */
1279   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1280   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1281   }
1282 else
1283   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1284
1285 return dlhandle;
1286 }
1287 #endif
1288
1289
1290
1291 /*************************************************
1292 *    Get a line from stdin for testing things    *
1293 *************************************************/
1294
1295 /* This function is called when running tests that can take a number of lines
1296 of input (for example, -be and -bt). It handles continuations and trailing
1297 spaces. And prompting and a blank line output on eof. If readline() is in use,
1298 the arguments are non-NULL and provide the relevant functions.
1299
1300 Arguments:
1301   fn_readline   readline function or NULL
1302   fn_addhist    addhist function or NULL
1303
1304 Returns:        pointer to dynamic memory, or NULL at end of file
1305 */
1306
1307 static uschar *
1308 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1309 {
1310 gstring * g = NULL;
1311
1312 if (!fn_readline) { printf("> "); fflush(stdout); }
1313
1314 for (int i = 0;; i++)
1315   {
1316   uschar buffer[1024];
1317   uschar *p, *ss;
1318
1319   #ifdef USE_READLINE
1320   char *readline_line = NULL;
1321   if (fn_readline)
1322     {
1323     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1324     if (*readline_line != 0 && fn_addhist) fn_addhist(readline_line);
1325     p = US readline_line;
1326     }
1327   else
1328   #endif
1329
1330   /* readline() not in use */
1331
1332     {
1333     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;
1334     p = buffer;
1335     }
1336
1337   /* Handle the line */
1338
1339   ss = p + (int)Ustrlen(p);
1340   while (ss > p && isspace(ss[-1])) ss--;
1341
1342   if (i > 0)
1343     while (p < ss && isspace(*p)) p++;   /* leading space after cont */
1344
1345   g = string_catn(g, p, ss - p);
1346
1347   #ifdef USE_READLINE
1348   if (fn_readline) free(readline_line);
1349   #endif
1350
1351   /* g can only be NULL if ss==p */
1352   if (ss == p || g->s[g->ptr-1] != '\\')
1353     break;
1354
1355   --g->ptr;
1356   (void) string_from_gstring(g);
1357   }
1358
1359 if (!g) printf("\n");
1360 return string_from_gstring(g);
1361 }
1362
1363
1364
1365 /*************************************************
1366 *    Output usage information for the program    *
1367 *************************************************/
1368
1369 /* This function is called when there are no recipients
1370    or a specific --help argument was added.
1371
1372 Arguments:
1373   progname      information on what name we were called by
1374
1375 Returns:        DOES NOT RETURN
1376 */
1377
1378 static void
1379 exim_usage(uschar *progname)
1380 {
1381
1382 /* Handle specific program invocation variants */
1383 if (Ustrcmp(progname, US"-mailq") == 0)
1384   exim_fail(
1385     "mailq - list the contents of the mail queue\n\n"
1386     "For a list of options, see the Exim documentation.\n");
1387
1388 /* Generic usage - we output this whatever happens */
1389 exim_fail(
1390   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1391   "not directly from a shell command line. Options and/or arguments control\n"
1392   "what it does when called. For a list of options, see the Exim documentation.\n");
1393 }
1394
1395
1396
1397 /*************************************************
1398 *    Validate that the macros given are okay     *
1399 *************************************************/
1400
1401 /* Typically, Exim will drop privileges if macros are supplied.  In some
1402 cases, we want to not do so.
1403
1404 Arguments:    opt_D_used - true if the commandline had a "-D" option
1405 Returns:      true if trusted, false otherwise
1406 */
1407
1408 static BOOL
1409 macros_trusted(BOOL opt_D_used)
1410 {
1411 #ifdef WHITELIST_D_MACROS
1412 uschar *whitelisted, *end, *p, **whites;
1413 int white_count, i, n;
1414 size_t len;
1415 BOOL prev_char_item, found;
1416 #endif
1417
1418 if (!opt_D_used)
1419   return TRUE;
1420 #ifndef WHITELIST_D_MACROS
1421 return FALSE;
1422 #else
1423
1424 /* We only trust -D overrides for some invoking users:
1425 root, the exim run-time user, the optional config owner user.
1426 I don't know why config-owner would be needed, but since they can own the
1427 config files anyway, there's no security risk to letting them override -D. */
1428 if ( ! ((real_uid == root_uid)
1429      || (real_uid == exim_uid)
1430 #ifdef CONFIGURE_OWNER
1431      || (real_uid == config_uid)
1432 #endif
1433    ))
1434   {
1435   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1436   return FALSE;
1437   }
1438
1439 /* Get a list of macros which are whitelisted */
1440 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1441 prev_char_item = FALSE;
1442 white_count = 0;
1443 for (p = whitelisted; *p != '\0'; ++p)
1444   {
1445   if (*p == ':' || isspace(*p))
1446     {
1447     *p = '\0';
1448     if (prev_char_item)
1449       ++white_count;
1450     prev_char_item = FALSE;
1451     continue;
1452     }
1453   if (!prev_char_item)
1454     prev_char_item = TRUE;
1455   }
1456 end = p;
1457 if (prev_char_item)
1458   ++white_count;
1459 if (!white_count)
1460   return FALSE;
1461 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1462 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1463   {
1464   if (*p != '\0')
1465     {
1466     whites[i++] = p;
1467     if (i == white_count)
1468       break;
1469     while (*p != '\0' && p < end)
1470       ++p;
1471     }
1472   }
1473 whites[i] = NULL;
1474
1475 /* The list of commandline macros should be very short.
1476 Accept the N*M complexity. */
1477 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1478   {
1479   found = FALSE;
1480   for (uschar ** w = whites; *w; ++w)
1481     if (Ustrcmp(*w, m->name) == 0)
1482       {
1483       found = TRUE;
1484       break;
1485       }
1486   if (!found)
1487     return FALSE;
1488   if (!m->replacement)
1489     continue;
1490   if ((len = m->replen) == 0)
1491     continue;
1492   n = pcre_exec(regex_whitelisted_macro, NULL, CS m->replacement, len,
1493    0, PCRE_EOPT, NULL, 0);
1494   if (n < 0)
1495     {
1496     if (n != PCRE_ERROR_NOMATCH)
1497       debug_printf("macros_trusted checking %s returned %d\n", m->name, n);
1498     return FALSE;
1499     }
1500   }
1501 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1502 return TRUE;
1503 #endif
1504 }
1505
1506
1507 /*************************************************
1508 *          Expansion testing                     *
1509 *************************************************/
1510
1511 /* Expand and print one item, doing macro-processing.
1512
1513 Arguments:
1514   item          line for expansion
1515 */
1516
1517 static void
1518 expansion_test_line(uschar * line)
1519 {
1520 int len;
1521 BOOL dummy_macexp;
1522
1523 Ustrncpy(big_buffer, line, big_buffer_size);
1524 big_buffer[big_buffer_size-1] = '\0';
1525 len = Ustrlen(big_buffer);
1526
1527 (void) macros_expand(0, &len, &dummy_macexp);
1528
1529 if (isupper(big_buffer[0]))
1530   {
1531   if (macro_read_assignment(big_buffer))
1532     printf("Defined macro '%s'\n", mlast->name);
1533   }
1534 else
1535   if ((line = expand_string(big_buffer))) printf("%s\n", CS line);
1536   else printf("Failed: %s\n", expand_string_message);
1537 }
1538
1539
1540
1541 /*************************************************
1542 *          Entry point and high-level code       *
1543 *************************************************/
1544
1545 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1546 the appropriate action. All the necessary functions are present in the one
1547 binary. I originally thought one should split it up, but it turns out that so
1548 much of the apparatus is needed in each chunk that one might as well just have
1549 it all available all the time, which then makes the coding easier as well.
1550
1551 Arguments:
1552   argc      count of entries in argv
1553   argv      argument strings, with argv[0] being the program name
1554
1555 Returns:    EXIT_SUCCESS if terminated successfully
1556             EXIT_FAILURE otherwise, except when a message has been sent
1557               to the sender, and -oee was given
1558 */
1559
1560 int
1561 main(int argc, char **cargv)
1562 {
1563 uschar **argv = USS cargv;
1564 int  arg_receive_timeout = -1;
1565 int  arg_smtp_receive_timeout = -1;
1566 int  arg_error_handling = error_handling;
1567 int  filter_sfd = -1;
1568 int  filter_ufd = -1;
1569 int  group_count;
1570 int  i, rv;
1571 int  list_queue_option = 0;
1572 int  msg_action = 0;
1573 int  msg_action_arg = -1;
1574 int  namelen = (argv[0] == NULL)? 0 : Ustrlen(argv[0]);
1575 int  queue_only_reason = 0;
1576 #ifdef EXIM_PERL
1577 int  perl_start_option = 0;
1578 #endif
1579 int  recipients_arg = argc;
1580 int  sender_address_domain = 0;
1581 int  test_retry_arg = -1;
1582 int  test_rewrite_arg = -1;
1583 gid_t original_egid;
1584 BOOL arg_queue_only = FALSE;
1585 BOOL bi_option = FALSE;
1586 BOOL checking = FALSE;
1587 BOOL count_queue = FALSE;
1588 BOOL expansion_test = FALSE;
1589 BOOL extract_recipients = FALSE;
1590 BOOL flag_G = FALSE;
1591 BOOL flag_n = FALSE;
1592 BOOL forced_delivery = FALSE;
1593 BOOL f_end_dot = FALSE;
1594 BOOL deliver_give_up = FALSE;
1595 BOOL list_queue = FALSE;
1596 BOOL list_options = FALSE;
1597 BOOL list_config = FALSE;
1598 BOOL local_queue_only;
1599 BOOL more = TRUE;
1600 BOOL one_msg_action = FALSE;
1601 BOOL opt_D_used = FALSE;
1602 BOOL queue_only_set = FALSE;
1603 BOOL receiving_message = TRUE;
1604 BOOL sender_ident_set = FALSE;
1605 BOOL session_local_queue_only;
1606 BOOL unprivileged;
1607 BOOL removed_privilege = FALSE;
1608 BOOL usage_wanted = FALSE;
1609 BOOL verify_address_mode = FALSE;
1610 BOOL verify_as_sender = FALSE;
1611 BOOL version_printed = FALSE;
1612 uschar *alias_arg = NULL;
1613 uschar *called_as = US"";
1614 uschar *cmdline_syslog_name = NULL;
1615 uschar *start_queue_run_id = NULL;
1616 uschar *stop_queue_run_id = NULL;
1617 uschar *expansion_test_message = NULL;
1618 uschar *ftest_domain = NULL;
1619 uschar *ftest_localpart = NULL;
1620 uschar *ftest_prefix = NULL;
1621 uschar *ftest_suffix = NULL;
1622 uschar *log_oneline = NULL;
1623 uschar *malware_test_file = NULL;
1624 uschar *real_sender_address;
1625 uschar *originator_home = US"/";
1626 size_t sz;
1627 rmark reset_point;
1628
1629 struct passwd *pw;
1630 struct stat statbuf;
1631 pid_t passed_qr_pid = (pid_t)0;
1632 int passed_qr_pipe = -1;
1633 gid_t group_list[EXIM_GROUPLIST_SIZE];
1634
1635 /* For the -bI: flag */
1636 enum commandline_info info_flag = CMDINFO_NONE;
1637 BOOL info_stdout = FALSE;
1638
1639 /* Possible options for -R and -S */
1640
1641 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1642
1643 /* Need to define this in case we need to change the environment in order
1644 to get rid of a bogus time zone. We have to make it char rather than uschar
1645 because some OS define it in /usr/include/unistd.h. */
1646
1647 extern char **environ;
1648
1649 #ifdef MEASURE_TIMING
1650 (void)gettimeofday(&timestamp_startup, NULL);
1651 #endif
1652
1653 /* If the Exim user and/or group and/or the configuration file owner/group were
1654 defined by ref:name at build time, we must now find the actual uid/gid values.
1655 This is a feature to make the lives of binary distributors easier. */
1656
1657 #ifdef EXIM_USERNAME
1658 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1659   {
1660   if (exim_uid == 0)
1661     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1662
1663   /* If ref:name uses a number as the name, route_finduser() returns
1664   TRUE with exim_uid set and pw coerced to NULL. */
1665   if (pw)
1666     exim_gid = pw->pw_gid;
1667 #ifndef EXIM_GROUPNAME
1668   else
1669     exim_fail(
1670         "exim: ref:name should specify a usercode, not a group.\n"
1671         "exim: can't let you get away with it unless you also specify a group.\n");
1672 #endif
1673   }
1674 else
1675   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1676 #endif
1677
1678 #ifdef EXIM_GROUPNAME
1679 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1680   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1681 #endif
1682
1683 #ifdef CONFIGURE_OWNERNAME
1684 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1685   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1686     CONFIGURE_OWNERNAME);
1687 #endif
1688
1689 /* We default the system_filter_user to be the Exim run-time user, as a
1690 sane non-root value. */
1691 system_filter_uid = exim_uid;
1692
1693 #ifdef CONFIGURE_GROUPNAME
1694 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1695   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1696     CONFIGURE_GROUPNAME);
1697 #endif
1698
1699 /* In the Cygwin environment, some initialization used to need doing.
1700 It was fudged in by means of this macro; now no longer but we'll leave
1701 it in case of others. */
1702
1703 #ifdef OS_INIT
1704 OS_INIT
1705 #endif
1706
1707 /* Check a field which is patched when we are running Exim within its
1708 testing harness; do a fast initial check, and then the whole thing. */
1709
1710 f.running_in_test_harness =
1711   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1712 if (f.running_in_test_harness)
1713   debug_store = TRUE;
1714
1715 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1716 at the start of a program; however, it seems that some environments do not
1717 follow this. A "strange" locale can affect the formatting of timestamps, so we
1718 make quite sure. */
1719
1720 setlocale(LC_ALL, "C");
1721
1722 /* Get the offset between CLOCK_MONOTONIC and wallclock */
1723
1724 #ifdef _POSIX_MONOTONIC_CLOCK
1725 exim_clock_init();
1726 #endif
1727
1728 /* Set up the default handler for timing using alarm(). */
1729
1730 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1731
1732 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1733 because store_malloc writes a log entry on failure. */
1734
1735 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1736   exim_fail("exim: failed to get store for log buffer\n");
1737
1738 /* Initialize the default log options. */
1739
1740 bits_set(log_selector, log_selector_size, log_default);
1741
1742 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1743 NULL when the daemon is run and the file is closed. We have to use this
1744 indirection, because some systems don't allow writing to the variable "stderr".
1745 */
1746
1747 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1748
1749 /* Arrange for the PCRE regex library to use our store functions. Note that
1750 the normal calls are actually macros that add additional arguments for
1751 debugging purposes so we have to assign specially constructed functions here.
1752 The default is to use store in the stacking pool, but this is overridden in the
1753 regex_must_compile() function. */
1754
1755 pcre_malloc = function_store_get;
1756 pcre_free = function_dummy_free;
1757
1758 /* Ensure there is a big buffer for temporary use in several places. It is put
1759 in malloc store so that it can be freed for enlargement if necessary. */
1760
1761 big_buffer = store_malloc(big_buffer_size);
1762
1763 /* Set up the handler for the data request signal, and set the initial
1764 descriptive text. */
1765
1766 process_info = store_get(PROCESS_INFO_SIZE, TRUE);      /* tainted */
1767 set_process_info("initializing");
1768 os_restarting_signal(SIGUSR1, usr1_handler);
1769
1770 /* If running in a dockerized environment, the TERM signal is only
1771 delegated to the PID 1 if we request it by setting an signal handler */
1772 if (getpid() == 1) signal(SIGTERM, term_handler);
1773
1774 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1775 in the daemon code. For the rest of Exim's uses, we ignore it. */
1776
1777 signal(SIGHUP, SIG_IGN);
1778
1779 /* We don't want to die on pipe errors as the code is written to handle
1780 the write error instead. */
1781
1782 signal(SIGPIPE, SIG_IGN);
1783
1784 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1785 set to SIG_IGN. This causes subprocesses that complete before the parent
1786 process waits for them not to hang around, so when Exim calls wait(), nothing
1787 is there. The wait() code has been made robust against this, but let's ensure
1788 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1789 ending status. We use sigaction rather than plain signal() on those OS where
1790 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1791 problem on AIX with this.) */
1792
1793 #ifdef SA_NOCLDWAIT
1794   {
1795   struct sigaction act;
1796   act.sa_handler = SIG_DFL;
1797   sigemptyset(&(act.sa_mask));
1798   act.sa_flags = 0;
1799   sigaction(SIGCHLD, &act, NULL);
1800   }
1801 #else
1802 signal(SIGCHLD, SIG_DFL);
1803 #endif
1804
1805 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1806 SIGHUP. */
1807
1808 sighup_argv = argv;
1809
1810 /* Set up the version number. Set up the leading 'E' for the external form of
1811 message ids, set the pointer to the internal form, and initialize it to
1812 indicate no message being processed. */
1813
1814 version_init();
1815 message_id_option[0] = '-';
1816 message_id_external = message_id_option + 1;
1817 message_id_external[0] = 'E';
1818 message_id = message_id_external + 1;
1819 message_id[0] = 0;
1820
1821 /* Set the umask to zero so that any files Exim creates using open() are
1822 created with the modes that it specifies. NOTE: Files created with fopen() have
1823 a problem, which was not recognized till rather late (February 2006). With this
1824 umask, such files will be world writeable. (They are all content scanning files
1825 in the spool directory, which isn't world-accessible, so this is not a
1826 disaster, but it's untidy.) I don't want to change this overall setting,
1827 however, because it will interact badly with the open() calls. Instead, there's
1828 now a function called modefopen() that fiddles with the umask while calling
1829 fopen(). */
1830
1831 (void)umask(0);
1832
1833 /* Precompile the regular expression for matching a message id. Keep this in
1834 step with the code that generates ids in the accept.c module. We need to do
1835 this here, because the -M options check their arguments for syntactic validity
1836 using mac_ismsgid, which uses this. */
1837
1838 regex_ismsgid =
1839   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
1840
1841 /* Precompile the regular expression that is used for matching an SMTP error
1842 code, possibly extended, at the start of an error message. Note that the
1843 terminating whitespace character is included. */
1844
1845 regex_smtp_code =
1846   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
1847     FALSE, TRUE);
1848
1849 #ifdef WHITELIST_D_MACROS
1850 /* Precompile the regular expression used to filter the content of macros
1851 given to -D for permissibility. */
1852
1853 regex_whitelisted_macro =
1854   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
1855 #endif
1856
1857 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
1858
1859 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
1860 this seems to be a generally accepted convention, since one finds symbolic
1861 links called "mailq" in standard OS configurations. */
1862
1863 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
1864     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
1865   {
1866   list_queue = TRUE;
1867   receiving_message = FALSE;
1868   called_as = US"-mailq";
1869   }
1870
1871 /* If the program is called as "rmail" treat it as equivalent to
1872 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
1873 i.e. preventing a single dot on a line from terminating the message, and
1874 returning with zero return code, even in cases of error (provided an error
1875 message has been sent). */
1876
1877 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
1878     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
1879   {
1880   f.dot_ends = FALSE;
1881   called_as = US"-rmail";
1882   errors_sender_rc = EXIT_SUCCESS;
1883   }
1884
1885 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
1886 this is a smail convention. */
1887
1888 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
1889     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
1890   {
1891   smtp_input = smtp_batched_input = TRUE;
1892   called_as = US"-rsmtp";
1893   }
1894
1895 /* If the program is called as "runq" treat it as equivalent to "exim -q";
1896 this is a smail convention. */
1897
1898 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
1899     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
1900   {
1901   queue_interval = 0;
1902   receiving_message = FALSE;
1903   called_as = US"-runq";
1904   }
1905
1906 /* If the program is called as "newaliases" treat it as equivalent to
1907 "exim -bi"; this is a sendmail convention. */
1908
1909 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
1910     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
1911   {
1912   bi_option = TRUE;
1913   receiving_message = FALSE;
1914   called_as = US"-newaliases";
1915   }
1916
1917 /* Save the original effective uid for a couple of uses later. It should
1918 normally be root, but in some esoteric environments it may not be. */
1919
1920 original_euid = geteuid();
1921 original_egid = getegid();
1922
1923 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
1924 to be the same as the real ones. This makes a difference only if Exim is setuid
1925 (or setgid) to something other than root, which could be the case in some
1926 special configurations. */
1927
1928 real_uid = getuid();
1929 real_gid = getgid();
1930
1931 if (real_uid == root_uid)
1932   {
1933   if ((rv = setgid(real_gid)))
1934     exim_fail("exim: setgid(%ld) failed: %s\n",
1935         (long int)real_gid, strerror(errno));
1936   if ((rv = setuid(real_uid)))
1937     exim_fail("exim: setuid(%ld) failed: %s\n",
1938         (long int)real_uid, strerror(errno));
1939   }
1940
1941 /* If neither the original real uid nor the original euid was root, Exim is
1942 running in an unprivileged state. */
1943
1944 unprivileged = (real_uid != root_uid && original_euid != root_uid);
1945
1946 /* Scan the program's arguments. Some can be dealt with right away; others are
1947 simply recorded for checking and handling afterwards. Do a high-level switch
1948 on the second character (the one after '-'), to save some effort. */
1949
1950 for (i = 1; i < argc; i++)
1951   {
1952   BOOL badarg = FALSE;
1953   uschar *arg = argv[i];
1954   uschar *argrest;
1955   int switchchar;
1956
1957   /* An argument not starting with '-' is the start of a recipients list;
1958   break out of the options-scanning loop. */
1959
1960   if (arg[0] != '-')
1961     {
1962     recipients_arg = i;
1963     break;
1964     }
1965
1966   /* An option consisting of -- terminates the options */
1967
1968   if (Ustrcmp(arg, "--") == 0)
1969     {
1970     recipients_arg = i + 1;
1971     break;
1972     }
1973
1974   /* Handle flagged options */
1975
1976   switchchar = arg[1];
1977   argrest = arg+2;
1978
1979   /* Make all -ex options synonymous with -oex arguments, since that
1980   is assumed by various callers. Also make -qR options synonymous with -R
1981   options, as that seems to be required as well. Allow for -qqR too, and
1982   the same for -S options. */
1983
1984   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
1985       Ustrncmp(arg+1, "qR", 2) == 0 ||
1986       Ustrncmp(arg+1, "qS", 2) == 0)
1987     {
1988     switchchar = arg[2];
1989     argrest++;
1990     }
1991   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
1992     {
1993     switchchar = arg[3];
1994     argrest += 2;
1995     f.queue_2stage = TRUE;
1996     }
1997
1998   /* Make -r synonymous with -f, since it is a documented alias */
1999
2000   else if (arg[1] == 'r') switchchar = 'f';
2001
2002   /* Make -ov synonymous with -v */
2003
2004   else if (Ustrcmp(arg, "-ov") == 0)
2005     {
2006     switchchar = 'v';
2007     argrest++;
2008     }
2009
2010   /* deal with --option_aliases */
2011   else if (switchchar == '-')
2012     {
2013     if (Ustrcmp(argrest, "help") == 0)
2014       {
2015       usage_wanted = TRUE;
2016       break;
2017       }
2018     else if (Ustrcmp(argrest, "version") == 0)
2019       {
2020       switchchar = 'b';
2021       argrest = US"V";
2022       }
2023     }
2024
2025   /* High-level switch on active initial letter */
2026
2027   switch(switchchar)
2028     {
2029
2030     /* sendmail uses -Ac and -Am to control which .cf file is used;
2031     we ignore them. */
2032     case 'A':
2033     if (*argrest == '\0') { badarg = TRUE; break; }
2034     else
2035       {
2036       BOOL ignore = FALSE;
2037       switch (*argrest)
2038         {
2039         case 'c':
2040         case 'm':
2041           if (*(argrest + 1) == '\0')
2042             ignore = TRUE;
2043           break;
2044         }
2045       if (!ignore) badarg = TRUE;
2046       }
2047     break;
2048
2049     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2050     so has no need of it. */
2051
2052     case 'B':
2053     if (!*argrest) i++;       /* Skip over the type */
2054     break;
2055
2056
2057     case 'b':
2058       {
2059       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2060
2061       switch (*argrest++)
2062         {
2063         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2064            -bdf: Ditto, but in the foreground.
2065         */
2066         case 'd':
2067           f.daemon_listen = TRUE;
2068           if (*argrest == 'f') f.background_daemon = FALSE;
2069           else if (*argrest) badarg = TRUE;
2070           break;
2071
2072         /* -be:  Run in expansion test mode
2073            -bem: Ditto, but read a message from a file first
2074         */
2075         case 'e':
2076           expansion_test = checking = TRUE;
2077           if (*argrest == 'm')
2078             {
2079             if (++i >= argc) { badarg = TRUE; break; }
2080             expansion_test_message = argv[i];
2081             argrest++;
2082             }
2083           if (*argrest) badarg = TRUE;
2084           break;
2085
2086         /* -bF:  Run system filter test */
2087         case 'F':
2088           filter_test |= checking = FTEST_SYSTEM;
2089           if (*argrest) { badarg = TRUE; break; }
2090           if (++i < argc) filter_test_sfile = argv[i]; else
2091             exim_fail("exim: file name expected after %s\n", argv[i-1]);
2092           break;
2093
2094         /* -bf:  Run user filter test
2095            -bfd: Set domain for filter testing
2096            -bfl: Set local part for filter testing
2097            -bfp: Set prefix for filter testing
2098            -bfs: Set suffix for filter testing
2099         */
2100         case 'f':
2101           if (!*argrest)
2102             {
2103             filter_test |= checking = FTEST_USER;
2104             if (++i < argc) filter_test_ufile = argv[i];
2105             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2106             }
2107           else
2108             {
2109             if (++i >= argc)
2110               exim_fail("exim: string expected after %s\n", arg);
2111             if (Ustrcmp(argrest, "d") == 0) ftest_domain = argv[i];
2112             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = argv[i];
2113             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = argv[i];
2114             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = argv[i];
2115             else badarg = TRUE;
2116             }
2117           break;
2118
2119         /* -bh: Host checking - an IP address must follow. */
2120         case 'h':
2121           if (!*argrest || Ustrcmp(argrest, "c") == 0)
2122             {
2123             if (++i >= argc) { badarg = TRUE; break; }
2124             sender_host_address = argv[i];
2125             host_checking = checking = f.log_testing_mode = TRUE;
2126             f.host_checking_callout = *argrest == 'c';
2127             message_logs = FALSE;
2128             }
2129           else badarg = TRUE;
2130           break;
2131
2132         /* -bi: This option is used by sendmail to initialize *the* alias file,
2133         though it has the -oA option to specify a different file. Exim has no
2134         concept of *the* alias file, but since Sun's YP make script calls
2135         sendmail this way, some support must be provided. */
2136         case 'i':
2137           if (!*++argrest) bi_option = TRUE;
2138           else badarg = TRUE;
2139           break;
2140
2141         /* -bI: provide information, of the type to follow after a colon.
2142         This is an Exim flag. */
2143         case 'I':
2144           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2145             {
2146             uschar *p = argrest+1;
2147             info_flag = CMDINFO_HELP;
2148             if (Ustrlen(p))
2149               if (strcmpic(p, CUS"sieve") == 0)
2150                 {
2151                 info_flag = CMDINFO_SIEVE;
2152                 info_stdout = TRUE;
2153                 }
2154               else if (strcmpic(p, CUS"dscp") == 0)
2155                 {
2156                 info_flag = CMDINFO_DSCP;
2157                 info_stdout = TRUE;
2158                 }
2159               else if (strcmpic(p, CUS"help") == 0)
2160                 info_stdout = TRUE;
2161             }
2162           else badarg = TRUE;
2163           break;
2164
2165         /* -bm: Accept and deliver message - the default option. Reinstate
2166         receiving_message, which got turned off for all -b options.
2167            -bmalware: test the filename given for malware */
2168         case 'm':
2169           if (!*argrest) receiving_message = TRUE;
2170           else if (Ustrcmp(argrest, "alware") == 0)
2171             {
2172             if (++i >= argc) { badarg = TRUE; break; }
2173             checking = TRUE;
2174             malware_test_file = argv[i];
2175             }
2176           else badarg = TRUE;
2177           break;
2178
2179         /* -bnq: For locally originating messages, do not qualify unqualified
2180         addresses. In the envelope, this causes errors; in header lines they
2181         just get left. */
2182         case 'n':
2183           if (Ustrcmp(argrest, "q") == 0)
2184             {
2185             f.allow_unqualified_sender = FALSE;
2186             f.allow_unqualified_recipient = FALSE;
2187             }
2188           else badarg = TRUE;
2189           break;
2190
2191         /* -bpxx: List the contents of the mail queue, in various forms. If
2192         the option is -bpc, just a queue count is needed. Otherwise, if the
2193         first letter after p is r, then order is random. */
2194         case 'p':
2195           if (*argrest == 'c')
2196             {
2197             count_queue = TRUE;
2198             if (*++argrest) badarg = TRUE;
2199             break;
2200             }
2201
2202           if (*argrest == 'r')
2203             {
2204             list_queue_option = 8;
2205             argrest++;
2206             }
2207           else list_queue_option = 0;
2208
2209           list_queue = TRUE;
2210
2211           /* -bp: List the contents of the mail queue, top-level only */
2212
2213           if (!*argrest) {}
2214
2215           /* -bpu: List the contents of the mail queue, top-level undelivered */
2216
2217           else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2218
2219           /* -bpa: List the contents of the mail queue, including all delivered */
2220
2221           else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2222
2223           /* Unknown after -bp[r] */
2224
2225           else badarg = TRUE;
2226           break;
2227
2228
2229         /* -bP: List the configuration variables given as the address list.
2230         Force -v, so configuration errors get displayed. */
2231         case 'P':
2232
2233           /* -bP config: we need to setup here, because later,
2234            * when list_options is checked, the config is read already */
2235           if (*argrest)
2236             badarg = TRUE;
2237           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2238             {
2239             list_config = TRUE;
2240             readconf_save_config(version_string);
2241             }
2242           else
2243             {
2244             list_options = TRUE;
2245             debug_selector |= D_v;
2246             debug_file = stderr;
2247             }
2248           break;
2249
2250         /* -brt: Test retry configuration lookup */
2251         case 'r':
2252           if (Ustrcmp(argrest, "t") == 0)
2253             {
2254             checking = TRUE;
2255             test_retry_arg = i + 1;
2256             goto END_ARG;
2257             }
2258
2259           /* -brw: Test rewrite configuration */
2260
2261           else if (Ustrcmp(argrest, "w") == 0)
2262             {
2263             checking = TRUE;
2264             test_rewrite_arg = i + 1;
2265             goto END_ARG;
2266             }
2267           else badarg = TRUE;
2268           break;
2269
2270         /* -bS: Read SMTP commands on standard input, but produce no replies -
2271         all errors are reported by sending messages. */
2272         case 'S':
2273           if (!*argrest)
2274             smtp_input = smtp_batched_input = receiving_message = TRUE;
2275           else badarg = TRUE;
2276           break;
2277
2278         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2279         on standard output. */
2280         case 's':
2281           if (!*argrest) smtp_input = receiving_message = TRUE;
2282           else badarg = TRUE;
2283           break;
2284
2285         /* -bt: address testing mode */
2286         case 't':
2287           if (!*argrest)
2288             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2289           else badarg = TRUE;
2290           break;
2291
2292         /* -bv: verify addresses */
2293         case 'v':
2294           if (!*argrest)
2295             verify_address_mode = checking = f.log_testing_mode = TRUE;
2296
2297         /* -bvs: verify sender addresses */
2298
2299           else if (Ustrcmp(argrest, "s") == 0)
2300             {
2301             verify_address_mode = checking = f.log_testing_mode = TRUE;
2302             verify_as_sender = TRUE;
2303             }
2304           else badarg = TRUE;
2305           break;
2306
2307         /* -bV: Print version string and support details */
2308         case 'V':
2309           if (!*argrest)
2310             {
2311             printf("Exim version %s #%s built %s\n", version_string,
2312               version_cnumber, version_date);
2313             printf("%s\n", CS version_copyright);
2314             version_printed = TRUE;
2315             show_whats_supported(stdout);
2316             f.log_testing_mode = TRUE;
2317             }
2318           else badarg = TRUE;
2319           break;
2320
2321         /* -bw: inetd wait mode, accept a listening socket as stdin */
2322         case 'w':
2323           f.inetd_wait_mode = TRUE;
2324           f.background_daemon = FALSE;
2325           f.daemon_listen = TRUE;
2326           if (*argrest)
2327             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2328               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2329           break;
2330
2331         default:
2332           badarg = TRUE;
2333           break;
2334         }
2335       break;
2336       }
2337
2338
2339     /* -C: change configuration file list; ignore if it isn't really
2340     a change! Enforce a prefix check if required. */
2341
2342     case 'C':
2343     if (*argrest == 0)
2344       {
2345       if(++i < argc) argrest = argv[i]; else
2346         { badarg = TRUE; break; }
2347       }
2348     if (Ustrcmp(config_main_filelist, argrest) != 0)
2349       {
2350       #ifdef ALT_CONFIG_PREFIX
2351       int sep = 0;
2352       int len = Ustrlen(ALT_CONFIG_PREFIX);
2353       const uschar *list = argrest;
2354       uschar *filename;
2355       while((filename = string_nextinlist(&list, &sep, big_buffer,
2356              big_buffer_size)) != NULL)
2357         {
2358         if ((Ustrlen(filename) < len ||
2359              Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0 ||
2360              Ustrstr(filename, "/../") != NULL) &&
2361              (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid))
2362           exim_fail("-C Permission denied\n");
2363         }
2364       #endif
2365       if (real_uid != root_uid)
2366         {
2367         #ifdef TRUSTED_CONFIG_LIST
2368
2369         if (real_uid != exim_uid
2370             #ifdef CONFIGURE_OWNER
2371             && real_uid != config_uid
2372             #endif
2373             )
2374           f.trusted_config = FALSE;
2375         else
2376           {
2377           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2378           if (trust_list)
2379             {
2380             struct stat statbuf;
2381
2382             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2383                 (statbuf.st_uid != root_uid        /* owner not root */
2384                  #ifdef CONFIGURE_OWNER
2385                  && statbuf.st_uid != config_uid   /* owner not the special one */
2386                  #endif
2387                    ) ||                            /* or */
2388                 (statbuf.st_gid != root_gid        /* group not root */
2389                  #ifdef CONFIGURE_GROUP
2390                  && statbuf.st_gid != config_gid   /* group not the special one */
2391                  #endif
2392                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2393                    ) ||                            /* or */
2394                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2395               {
2396               f.trusted_config = FALSE;
2397               fclose(trust_list);
2398               }
2399             else
2400               {
2401               /* Well, the trust list at least is up to scratch... */
2402               rmark reset_point = store_mark();
2403               uschar *trusted_configs[32];
2404               int nr_configs = 0;
2405               int i = 0;
2406
2407               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2408                 {
2409                 uschar *start = big_buffer, *nl;
2410                 while (*start && isspace(*start))
2411                 start++;
2412                 if (*start != '/')
2413                   continue;
2414                 nl = Ustrchr(start, '\n');
2415                 if (nl)
2416                   *nl = 0;
2417                 trusted_configs[nr_configs++] = string_copy(start);
2418                 if (nr_configs == 32)
2419                   break;
2420                 }
2421               fclose(trust_list);
2422
2423               if (nr_configs)
2424                 {
2425                 int sep = 0;
2426                 const uschar *list = argrest;
2427                 uschar *filename;
2428                 while (f.trusted_config && (filename = string_nextinlist(&list,
2429                         &sep, big_buffer, big_buffer_size)) != NULL)
2430                   {
2431                   for (i=0; i < nr_configs; i++)
2432                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2433                       break;
2434                   if (i == nr_configs)
2435                     {
2436                     f.trusted_config = FALSE;
2437                     break;
2438                     }
2439                   }
2440                 }
2441               else      /* No valid prefixes found in trust_list file. */
2442                 f.trusted_config = FALSE;
2443               store_reset(reset_point);
2444               }
2445             }
2446           else          /* Could not open trust_list file. */
2447             f.trusted_config = FALSE;
2448           }
2449       #else
2450         /* Not root; don't trust config */
2451         f.trusted_config = FALSE;
2452       #endif
2453         }
2454
2455       config_main_filelist = argrest;
2456       f.config_changed = TRUE;
2457       }
2458     break;
2459
2460
2461     /* -D: set up a macro definition */
2462
2463     case 'D':
2464 #ifdef DISABLE_D_OPTION
2465       exim_fail("exim: -D is not available in this Exim binary\n");
2466 #else
2467       {
2468       int ptr = 0;
2469       macro_item *m;
2470       uschar name[24];
2471       uschar *s = argrest;
2472
2473       opt_D_used = TRUE;
2474       while (isspace(*s)) s++;
2475
2476       if (*s < 'A' || *s > 'Z')
2477         exim_fail("exim: macro name set by -D must start with "
2478           "an upper case letter\n");
2479
2480       while (isalnum(*s) || *s == '_')
2481         {
2482         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2483         s++;
2484         }
2485       name[ptr] = 0;
2486       if (ptr == 0) { badarg = TRUE; break; }
2487       while (isspace(*s)) s++;
2488       if (*s != 0)
2489         {
2490         if (*s++ != '=') { badarg = TRUE; break; }
2491         while (isspace(*s)) s++;
2492         }
2493
2494       for (m = macros_user; m; m = m->next)
2495         if (Ustrcmp(m->name, name) == 0)
2496           exim_fail("exim: duplicated -D in command line\n");
2497
2498       m = macro_create(name, s, TRUE);
2499
2500       if (clmacro_count >= MAX_CLMACROS)
2501         exim_fail("exim: too many -D options on command line\n");
2502       clmacros[clmacro_count++] =
2503         string_sprintf("-D%s=%s", m->name, m->replacement);
2504       }
2505     #endif
2506     break;
2507
2508     /* -d: Set debug level (see also -v below) or set the drop_cr option.
2509     The latter is now a no-op, retained for compatibility only. If -dd is used,
2510     debugging subprocesses of the daemon is disabled. */
2511
2512     case 'd':
2513     if (Ustrcmp(argrest, "ropcr") == 0)
2514       {
2515       /* drop_cr = TRUE; */
2516       }
2517
2518     /* Use an intermediate variable so that we don't set debugging while
2519     decoding the debugging bits. */
2520
2521     else
2522       {
2523       unsigned int selector = D_default;
2524       debug_selector = 0;
2525       debug_file = NULL;
2526       if (*argrest == 'd')
2527         {
2528         f.debug_daemon = TRUE;
2529         argrest++;
2530         }
2531       if (*argrest != 0)
2532         decode_bits(&selector, 1, debug_notall, argrest,
2533           debug_options, debug_options_count, US"debug", 0);
2534       debug_selector = selector;
2535       }
2536     break;
2537
2538
2539     /* -E: This is a local error message. This option is not intended for
2540     external use at all, but is not restricted to trusted callers because it
2541     does no harm (just suppresses certain error messages) and if Exim is run
2542     not setuid root it won't always be trusted when it generates error
2543     messages using this option. If there is a message id following -E, point
2544     message_reference at it, for logging. */
2545
2546     case 'E':
2547     f.local_error_message = TRUE;
2548     if (mac_ismsgid(argrest)) message_reference = argrest;
2549     break;
2550
2551
2552     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2553     option, so it looks as if historically the -oex options are also callable
2554     without the leading -o. So we have to accept them. Before the switch,
2555     anything starting -oe has been converted to -e. Exim does not support all
2556     of the sendmail error options. */
2557
2558     case 'e':
2559     if (Ustrcmp(argrest, "e") == 0)
2560       {
2561       arg_error_handling = ERRORS_SENDER;
2562       errors_sender_rc = EXIT_SUCCESS;
2563       }
2564     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2565     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2566     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2567     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2568     else badarg = TRUE;
2569     break;
2570
2571
2572     /* -F: Set sender's full name, used instead of the gecos entry from
2573     the password file. Since users can usually alter their gecos entries,
2574     there's no security involved in using this instead. The data can follow
2575     the -F or be in the next argument. */
2576
2577     case 'F':
2578     if (*argrest == 0)
2579       {
2580       if(++i < argc) argrest = argv[i]; else
2581         { badarg = TRUE; break; }
2582       }
2583     originator_name = argrest;
2584     f.sender_name_forced = TRUE;
2585     break;
2586
2587
2588     /* -f: Set sender's address - this value is only actually used if Exim is
2589     run by a trusted user, or if untrusted_set_sender is set and matches the
2590     address, except that the null address can always be set by any user. The
2591     test for this happens later, when the value given here is ignored when not
2592     permitted. For an untrusted user, the actual sender is still put in Sender:
2593     if it doesn't match the From: header (unless no_local_from_check is set).
2594     The data can follow the -f or be in the next argument. The -r switch is an
2595     obsolete form of -f but since there appear to be programs out there that
2596     use anything that sendmail has ever supported, better accept it - the
2597     synonymizing is done before the switch above.
2598
2599     At this stage, we must allow domain literal addresses, because we don't
2600     know what the setting of allow_domain_literals is yet. Ditto for trailing
2601     dots and strip_trailing_dot. */
2602
2603     case 'f':
2604       {
2605       int dummy_start, dummy_end;
2606       uschar *errmess;
2607       if (*argrest == 0)
2608         {
2609         if (i+1 < argc) argrest = argv[++i]; else
2610           { badarg = TRUE; break; }
2611         }
2612       if (*argrest == 0)
2613         *(sender_address = store_get(1, FALSE)) = '\0';  /* Ensure writeable memory */
2614       else
2615         {
2616         uschar *temp = argrest + Ustrlen(argrest) - 1;
2617         while (temp >= argrest && isspace(*temp)) temp--;
2618         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2619         allow_domain_literals = TRUE;
2620         strip_trailing_dot = TRUE;
2621 #ifdef SUPPORT_I18N
2622         allow_utf8_domains = TRUE;
2623 #endif
2624         sender_address = parse_extract_address(argrest, &errmess,
2625           &dummy_start, &dummy_end, &sender_address_domain, TRUE);
2626         sender_address = string_copy_taint(sender_address, TRUE);
2627 #ifdef SUPPORT_I18N
2628         message_smtputf8 =  string_is_utf8(sender_address);
2629         allow_utf8_domains = FALSE;
2630 #endif
2631         allow_domain_literals = FALSE;
2632         strip_trailing_dot = FALSE;
2633         if (!sender_address)
2634           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2635         }
2636       f.sender_address_forced = TRUE;
2637       }
2638     break;
2639
2640     /* -G: sendmail invocation to specify that it's a gateway submission and
2641     sendmail may complain about problems instead of fixing them.
2642     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2643     not at this time complain about problems. */
2644
2645     case 'G':
2646     flag_G = TRUE;
2647     break;
2648
2649     /* -h: Set the hop count for an incoming message. Exim does not currently
2650     support this; it always computes it by counting the Received: headers.
2651     To put it in will require a change to the spool header file format. */
2652
2653     case 'h':
2654     if (*argrest == 0)
2655       {
2656       if(++i < argc) argrest = argv[i]; else
2657         { badarg = TRUE; break; }
2658       }
2659     if (!isdigit(*argrest)) badarg = TRUE;
2660     break;
2661
2662
2663     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2664     not to be documented for sendmail but mailx (at least) uses it) */
2665
2666     case 'i':
2667     if (*argrest == 0) f.dot_ends = FALSE; else badarg = TRUE;
2668     break;
2669
2670
2671     /* -L: set the identifier used for syslog; equivalent to setting
2672     syslog_processname in the config file, but needs to be an admin option. */
2673
2674     case 'L':
2675     if (*argrest == '\0')
2676       {
2677       if(++i < argc) argrest = argv[i]; else
2678         { badarg = TRUE; break; }
2679       }
2680     if ((sz = Ustrlen(argrest)) > 32)
2681       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2682     if (sz < 1)
2683       exim_fail("exim: the -L syslog name is too short\n");
2684     cmdline_syslog_name = argrest;
2685     break;
2686
2687     case 'M':
2688     receiving_message = FALSE;
2689
2690     /* -MC:  continue delivery of another message via an existing open
2691     file descriptor. This option is used for an internal call by the
2692     smtp transport when there is a pending message waiting to go to an
2693     address to which it has got a connection. Five subsequent arguments are
2694     required: transport name, host name, IP address, sequence number, and
2695     message_id. Transports may decline to create new processes if the sequence
2696     number gets too big. The channel is stdin. This (-MC) must be the last
2697     argument. There's a subsequent check that the real-uid is privileged.
2698
2699     If we are running in the test harness. delay for a bit, to let the process
2700     that set this one up complete. This makes for repeatability of the logging,
2701     etc. output. */
2702
2703     if (Ustrcmp(argrest, "C") == 0)
2704       {
2705       union sockaddr_46 interface_sock;
2706       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2707
2708       if (argc != i + 6)
2709         exim_fail("exim: too many or too few arguments after -MC\n");
2710
2711       if (msg_action_arg >= 0)
2712         exim_fail("exim: incompatible arguments\n");
2713
2714       continue_transport = argv[++i];
2715       continue_hostname = argv[++i];
2716       continue_host_address = argv[++i];
2717       continue_sequence = Uatoi(argv[++i]);
2718       msg_action = MSG_DELIVER;
2719       msg_action_arg = ++i;
2720       forced_delivery = TRUE;
2721       queue_run_pid = passed_qr_pid;
2722       queue_run_pipe = passed_qr_pipe;
2723
2724       if (!mac_ismsgid(argv[i]))
2725         exim_fail("exim: malformed message id %s after -MC option\n",
2726           argv[i]);
2727
2728       /* Set up $sending_ip_address and $sending_port, unless proxied */
2729
2730       if (!continue_proxy_cipher)
2731         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2732             &size) == 0)
2733           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2734             &sending_port);
2735         else
2736           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2737             strerror(errno));
2738
2739       testharness_pause_ms(500);
2740       break;
2741       }
2742
2743     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2744       {
2745       switch(argrest[1])
2746         {
2747     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2748     precedes -MC (see above). The flag indicates that the host to which
2749     Exim is connected has accepted an AUTH sequence. */
2750
2751         case 'A': f.smtp_authenticated = TRUE; break;
2752
2753     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2754        that exim is connected to supports the esmtp extension DSN */
2755
2756         case 'D': smtp_peer_options |= OPTION_DSN; break;
2757
2758     /* -MCG: set the queue name, to a non-default value */
2759
2760         case 'G': if (++i < argc) queue_name = string_copy(argv[i]);
2761                   else badarg = TRUE;
2762                   break;
2763
2764     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2765
2766         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2767
2768     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2769     it preceded -MC (see above) */
2770
2771         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2772
2773     /* -MCQ: pass on the pid of the queue-running process that started
2774     this chain of deliveries and the fd of its synchronizing pipe; this
2775     is useful only when it precedes -MC (see above) */
2776
2777         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
2778                   else badarg = TRUE;
2779                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
2780                   else badarg = TRUE;
2781                   break;
2782
2783     /* -MCS: set the smtp_use_size flag; this is useful only when it
2784     precedes -MC (see above) */
2785
2786         case 'S': smtp_peer_options |= OPTION_SIZE; break;
2787
2788 #ifndef DISABLE_TLS
2789     /* -MCt: similar to -MCT below but the connection is still open
2790     via a proxy process which handles the TLS context and coding.
2791     Require three arguments for the proxied local address and port,
2792     and the TLS cipher.  */
2793
2794         case 't': if (++i < argc) sending_ip_address = argv[i];
2795                   else badarg = TRUE;
2796                   if (++i < argc) sending_port = (int)(Uatol(argv[i]));
2797                   else badarg = TRUE;
2798                   if (++i < argc) continue_proxy_cipher = argv[i];
2799                   else badarg = TRUE;
2800                   /*FALLTHROUGH*/
2801
2802     /* -MCT: set the tls_offered flag; this is useful only when it
2803     precedes -MC (see above). The flag indicates that the host to which
2804     Exim is connected has offered TLS support. */
2805
2806         case 'T': smtp_peer_options |= OPTION_TLS; break;
2807 #endif
2808
2809         default:  badarg = TRUE; break;
2810         }
2811       break;
2812       }
2813
2814     /* -M[x]: various operations on the following list of message ids:
2815        -M    deliver the messages, ignoring next retry times and thawing
2816        -Mc   deliver the messages, checking next retry times, no thawing
2817        -Mf   freeze the messages
2818        -Mg   give up on the messages
2819        -Mt   thaw the messages
2820        -Mrm  remove the messages
2821     In the above cases, this must be the last option. There are also the
2822     following options which are followed by a single message id, and which
2823     act on that message. Some of them use the "recipient" addresses as well.
2824        -Mar  add recipient(s)
2825        -Mmad mark all recipients delivered
2826        -Mmd  mark recipients(s) delivered
2827        -Mes  edit sender
2828        -Mset load a message for use with -be
2829        -Mvb  show body
2830        -Mvc  show copy (of whole message, in RFC 2822 format)
2831        -Mvh  show header
2832        -Mvl  show log
2833     */
2834
2835     else if (*argrest == 0)
2836       {
2837       msg_action = MSG_DELIVER;
2838       forced_delivery = f.deliver_force_thaw = TRUE;
2839       }
2840     else if (Ustrcmp(argrest, "ar") == 0)
2841       {
2842       msg_action = MSG_ADD_RECIPIENT;
2843       one_msg_action = TRUE;
2844       }
2845     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
2846     else if (Ustrcmp(argrest, "es") == 0)
2847       {
2848       msg_action = MSG_EDIT_SENDER;
2849       one_msg_action = TRUE;
2850       }
2851     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
2852     else if (Ustrcmp(argrest, "g") == 0)
2853       {
2854       msg_action = MSG_DELIVER;
2855       deliver_give_up = TRUE;
2856       }
2857    else if (Ustrcmp(argrest, "G") == 0)
2858       {
2859       msg_action = MSG_SETQUEUE;
2860       queue_name_dest = argv[++i];
2861       }
2862     else if (Ustrcmp(argrest, "mad") == 0)
2863       {
2864       msg_action = MSG_MARK_ALL_DELIVERED;
2865       }
2866     else if (Ustrcmp(argrest, "md") == 0)
2867       {
2868       msg_action = MSG_MARK_DELIVERED;
2869       one_msg_action = TRUE;
2870       }
2871     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
2872     else if (Ustrcmp(argrest, "set") == 0)
2873       {
2874       msg_action = MSG_LOAD;
2875       one_msg_action = TRUE;
2876       }
2877     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
2878     else if (Ustrcmp(argrest, "vb") == 0)
2879       {
2880       msg_action = MSG_SHOW_BODY;
2881       one_msg_action = TRUE;
2882       }
2883     else if (Ustrcmp(argrest, "vc") == 0)
2884       {
2885       msg_action = MSG_SHOW_COPY;
2886       one_msg_action = TRUE;
2887       }
2888     else if (Ustrcmp(argrest, "vh") == 0)
2889       {
2890       msg_action = MSG_SHOW_HEADER;
2891       one_msg_action = TRUE;
2892       }
2893     else if (Ustrcmp(argrest, "vl") == 0)
2894       {
2895       msg_action = MSG_SHOW_LOG;
2896       one_msg_action = TRUE;
2897       }
2898     else { badarg = TRUE; break; }
2899
2900     /* All the -Mxx options require at least one message id. */
2901
2902     msg_action_arg = i + 1;
2903     if (msg_action_arg >= argc)
2904       exim_fail("exim: no message ids given after %s option\n", arg);
2905
2906     /* Some require only message ids to follow */
2907
2908     if (!one_msg_action)
2909       {
2910       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
2911         exim_fail("exim: malformed message id %s after %s option\n",
2912           argv[j], arg);
2913       goto END_ARG;   /* Remaining args are ids */
2914       }
2915
2916     /* Others require only one message id, possibly followed by addresses,
2917     which will be handled as normal arguments. */
2918
2919     else
2920       {
2921       if (!mac_ismsgid(argv[msg_action_arg]))
2922         exim_fail("exim: malformed message id %s after %s option\n",
2923           argv[msg_action_arg], arg);
2924       i++;
2925       }
2926     break;
2927
2928
2929     /* Some programs seem to call the -om option without the leading o;
2930     for sendmail it askes for "me too". Exim always does this. */
2931
2932     case 'm':
2933     if (*argrest != 0) badarg = TRUE;
2934     break;
2935
2936
2937     /* -N: don't do delivery - a debugging option that stops transports doing
2938     their thing. It implies debugging at the D_v level. */
2939
2940     case 'N':
2941     if (*argrest == 0)
2942       {
2943       f.dont_deliver = TRUE;
2944       debug_selector |= D_v;
2945       debug_file = stderr;
2946       }
2947     else badarg = TRUE;
2948     break;
2949
2950
2951     /* -n: This means "don't alias" in sendmail, apparently.
2952     For normal invocations, it has no effect.
2953     It may affect some other options. */
2954
2955     case 'n':
2956     flag_n = TRUE;
2957     break;
2958
2959     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
2960     option to the specified value. This form uses long names. We need to handle
2961     -O option=value and -Ooption=value. */
2962
2963     case 'O':
2964     if (*argrest == 0)
2965       if (++i >= argc)
2966         exim_fail("exim: string expected after -O\n");
2967     break;
2968
2969     case 'o':
2970     switch (*argrest++)
2971       {
2972       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
2973       file" option). */
2974       case 'A':
2975         if (!*(alias_arg = argrest))
2976           if (i+1 < argc) alias_arg = argv[++i];
2977           else exim_fail("exim: string expected after -oA\n");
2978         break;
2979
2980       /* -oB: Set a connection message max value for remote deliveries */
2981       case 'B':
2982         {
2983         uschar * p = argrest;
2984         if (!*p)
2985           if (i+1 < argc && isdigit((argv[i+1][0])))
2986             p = argv[++i];
2987           else
2988             {
2989             connection_max_messages = 1;
2990             p = NULL;
2991             }
2992
2993         if (p)
2994           {
2995           if (!isdigit(*p))
2996             exim_fail("exim: number expected after -oB\n");
2997           connection_max_messages = Uatoi(p);
2998           }
2999         }
3000         break;
3001
3002       /* -odb: background delivery */
3003
3004       case 'd':
3005         if (Ustrcmp(argrest, "b") == 0)
3006           {
3007           f.synchronous_delivery = FALSE;
3008           arg_queue_only = FALSE;
3009           queue_only_set = TRUE;
3010           }
3011
3012       /* -odd: testsuite-only: add no inter-process delays */
3013
3014         else if (Ustrcmp(argrest, "d") == 0)
3015           f.testsuite_delays = FALSE;
3016
3017       /* -odf: foreground delivery (smail-compatible option); same effect as
3018          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3019       */
3020
3021         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3022           {
3023           f.synchronous_delivery = TRUE;
3024           arg_queue_only = FALSE;
3025           queue_only_set = TRUE;
3026           }
3027
3028       /* -odq: queue only */
3029
3030         else if (Ustrcmp(argrest, "q") == 0)
3031           {
3032           f.synchronous_delivery = FALSE;
3033           arg_queue_only = TRUE;
3034           queue_only_set = TRUE;
3035           }
3036
3037       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3038       but no remote delivery */
3039
3040         else if (Ustrcmp(argrest, "qs") == 0)
3041           {
3042           f.queue_smtp = TRUE;
3043           arg_queue_only = FALSE;
3044           queue_only_set = TRUE;
3045           }
3046         else badarg = TRUE;
3047         break;
3048
3049       /* -oex: Sendmail error flags. As these are also accepted without the
3050       leading -o prefix, for compatibility with vacation and other callers,
3051       they are handled with -e above. */
3052
3053       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3054          -oitrue: Another sendmail syntax for the same */
3055
3056       case 'i':
3057         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3058           f.dot_ends = FALSE;
3059         else badarg = TRUE;
3060         break;
3061
3062     /* -oM*: Set various characteristics for an incoming message; actually
3063     acted on for trusted callers only. */
3064
3065       case 'M':
3066         {
3067         if (i+1 >= argc)
3068           exim_fail("exim: data expected after -oM%s\n", argrest);
3069
3070         /* -oMa: Set sender host address */
3071
3072         if (Ustrcmp(argrest, "a") == 0) sender_host_address = argv[++i];
3073
3074         /* -oMaa: Set authenticator name */
3075
3076         else if (Ustrcmp(argrest, "aa") == 0)
3077           sender_host_authenticated = argv[++i];
3078
3079         /* -oMas: setting authenticated sender */
3080
3081         else if (Ustrcmp(argrest, "as") == 0)
3082           authenticated_sender = string_copy_taint(argv[++i], TRUE);
3083
3084         /* -oMai: setting authenticated id */
3085
3086         else if (Ustrcmp(argrest, "ai") == 0)
3087           authenticated_id = string_copy_taint(argv[++i], TRUE);
3088
3089         /* -oMi: Set incoming interface address */
3090
3091         else if (Ustrcmp(argrest, "i") == 0) interface_address = argv[++i];
3092
3093         /* -oMm: Message reference */
3094
3095         else if (Ustrcmp(argrest, "m") == 0)
3096           {
3097           if (!mac_ismsgid(argv[i+1]))
3098               exim_fail("-oMm must be a valid message ID\n");
3099           if (!f.trusted_config)
3100               exim_fail("-oMm must be called by a trusted user/config\n");
3101             message_reference = argv[++i];
3102           }
3103
3104         /* -oMr: Received protocol */
3105
3106         else if (Ustrcmp(argrest, "r") == 0)
3107
3108           if (received_protocol)
3109             exim_fail("received_protocol is set already\n");
3110           else
3111             received_protocol = argv[++i];
3112
3113         /* -oMs: Set sender host name */
3114
3115         else if (Ustrcmp(argrest, "s") == 0)
3116           sender_host_name = string_copy_taint(argv[++i], TRUE);
3117
3118         /* -oMt: Set sender ident */
3119
3120         else if (Ustrcmp(argrest, "t") == 0)
3121           {
3122           sender_ident_set = TRUE;
3123           sender_ident = argv[++i];
3124           }
3125
3126         /* Else a bad argument */
3127
3128         else
3129           badarg = TRUE;
3130         }
3131         break;
3132
3133       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3134       seem to call this as -m (undocumented), so that is also accepted (see
3135       above). */
3136       /* -oo: An ancient flag for old-style addresses which still seems to
3137       crop up in some calls (see in SCO). */
3138
3139       case 'm':
3140       case 'o':
3141         if (!*argrest) {}
3142         else badarg = TRUE;
3143         break;
3144
3145       /* -oP <name>: set pid file path for daemon
3146          -oPX:       delete pid file of daemon */
3147
3148       case 'P':
3149         if (!*argrest) override_pid_file_path = argv[++i];
3150         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3151         else badarg = TRUE;
3152         break;
3153
3154
3155       /* -or <n>: set timeout for non-SMTP acceptance
3156          -os <n>: set timeout for SMTP acceptance */
3157
3158       case 'r':
3159       case 's':
3160         if (!*argrest)
3161           {
3162           int *tp = (*argrest == 'r')?
3163             &arg_receive_timeout : &arg_smtp_receive_timeout;
3164           if (argrest[1] == 0)
3165             {
3166             if (i+1 < argc) *tp= readconf_readtime(argv[++i], 0, FALSE);
3167             }
3168           else *tp = readconf_readtime(argrest + 1, 0, FALSE);
3169           if (*tp < 0)
3170             exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3171           }
3172         else badarg = TRUE;
3173         break;
3174
3175       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3176
3177       case 'X':
3178         if (!*argrest)
3179           override_local_interfaces = argv[++i];
3180         else badarg = TRUE;
3181         break;
3182
3183       /* Unknown -o argument */
3184
3185       default:
3186         badarg = TRUE;
3187       }
3188     break;
3189
3190
3191     /* -ps: force Perl startup; -pd force delayed Perl startup */
3192
3193     case 'p':
3194     #ifdef EXIM_PERL
3195     if (*argrest == 's' && argrest[1] == 0)
3196       {
3197       perl_start_option = 1;
3198       break;
3199       }
3200     if (*argrest == 'd' && argrest[1] == 0)
3201       {
3202       perl_start_option = -1;
3203       break;
3204       }
3205     #endif
3206
3207     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3208     which sets the host protocol and host name */
3209
3210     if (*argrest == 0)
3211       if (i+1 < argc)
3212         argrest = argv[++i];
3213       else
3214         { badarg = TRUE; break; }
3215
3216     if (*argrest != 0)
3217       {
3218       uschar *hn;
3219
3220       if (received_protocol)
3221         exim_fail("received_protocol is set already\n");
3222
3223       hn = Ustrchr(argrest, ':');
3224       if (hn == NULL)
3225         received_protocol = argrest;
3226       else
3227         {
3228         int old_pool = store_pool;
3229         store_pool = POOL_PERM;
3230         received_protocol = string_copyn(argrest, hn - argrest);
3231         store_pool = old_pool;
3232         sender_host_name = hn + 1;
3233         }
3234       }
3235     break;
3236
3237
3238     case 'q':
3239     receiving_message = FALSE;
3240     if (queue_interval >= 0)
3241       exim_fail("exim: -q specified more than once\n");
3242
3243     /* -qq...: Do queue runs in a 2-stage manner */
3244
3245     if (*argrest == 'q')
3246       {
3247       f.queue_2stage = TRUE;
3248       argrest++;
3249       }
3250
3251     /* -qi...: Do only first (initial) deliveries */
3252
3253     if (*argrest == 'i')
3254       {
3255       f.queue_run_first_delivery = TRUE;
3256       argrest++;
3257       }
3258
3259     /* -qf...: Run the queue, forcing deliveries
3260        -qff..: Ditto, forcing thawing as well */
3261
3262     if (*argrest == 'f')
3263       {
3264       f.queue_run_force = TRUE;
3265       if (*++argrest == 'f')
3266         {
3267         f.deliver_force_thaw = TRUE;
3268         argrest++;
3269         }
3270       }
3271
3272     /* -q[f][f]l...: Run the queue only on local deliveries */
3273
3274     if (*argrest == 'l')
3275       {
3276       f.queue_run_local = TRUE;
3277       argrest++;
3278       }
3279
3280     /* -q[f][f][l][G<name>]... Work on the named queue */
3281
3282     if (*argrest == 'G')
3283       {
3284       int i;
3285       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3286       queue_name = string_copyn(argrest, i);
3287       argrest += i;
3288       if (*argrest == '/') argrest++;
3289       }
3290
3291     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3292     only, optionally named, optionally starting from a given message id. */
3293
3294     if (!(list_queue || count_queue))
3295       if (*argrest == 0
3296          && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3297         {
3298         queue_interval = 0;
3299         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3300           start_queue_run_id = argv[++i];
3301         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3302           stop_queue_run_id = argv[++i];
3303         }
3304
3305     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3306     forced, optionally local only, optionally named. */
3307
3308       else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3309                                                   0, FALSE)) <= 0)
3310         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3311     break;
3312
3313
3314     case 'R':   /* Synonymous with -qR... */
3315     receiving_message = FALSE;
3316
3317     /* -Rf:   As -R (below) but force all deliveries,
3318        -Rff:  Ditto, but also thaw all frozen messages,
3319        -Rr:   String is regex
3320        -Rrf:  Regex and force
3321        -Rrff: Regex and force and thaw
3322
3323     in all cases provided there are no further characters in this
3324     argument. */
3325
3326     if (*argrest != 0)
3327       for (int i = 0; i < nelem(rsopts); i++)
3328         if (Ustrcmp(argrest, rsopts[i]) == 0)
3329           {
3330           if (i != 2) f.queue_run_force = TRUE;
3331           if (i >= 2) f.deliver_selectstring_regex = TRUE;
3332           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3333           argrest += Ustrlen(rsopts[i]);
3334           }
3335
3336     /* -R: Set string to match in addresses for forced queue run to
3337     pick out particular messages. */
3338
3339     if (*argrest)
3340       deliver_selectstring = argrest;
3341     else if (i+1 < argc)
3342       deliver_selectstring = argv[++i];
3343     else
3344       exim_fail("exim: string expected after -R\n");
3345     break;
3346
3347
3348     /* -r: an obsolete synonym for -f (see above) */
3349
3350
3351     /* -S: Like -R but works on sender. */
3352
3353     case 'S':   /* Synonymous with -qS... */
3354     receiving_message = FALSE;
3355
3356     /* -Sf:   As -S (below) but force all deliveries,
3357        -Sff:  Ditto, but also thaw all frozen messages,
3358        -Sr:   String is regex
3359        -Srf:  Regex and force
3360        -Srff: Regex and force and thaw
3361
3362     in all cases provided there are no further characters in this
3363     argument. */
3364
3365     if (*argrest)
3366       for (int i = 0; i < nelem(rsopts); i++)
3367         if (Ustrcmp(argrest, rsopts[i]) == 0)
3368           {
3369           if (i != 2) f.queue_run_force = TRUE;
3370           if (i >= 2) f.deliver_selectstring_sender_regex = TRUE;
3371           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3372           argrest += Ustrlen(rsopts[i]);
3373           }
3374
3375     /* -S: Set string to match in addresses for forced queue run to
3376     pick out particular messages. */
3377
3378     if (*argrest)
3379       deliver_selectstring_sender = argrest;
3380     else if (i+1 < argc)
3381       deliver_selectstring_sender = argv[++i];
3382     else
3383       exim_fail("exim: string expected after -S\n");
3384     break;
3385
3386     /* -Tqt is an option that is exclusively for use by the testing suite.
3387     It is not recognized in other circumstances. It allows for the setting up
3388     of explicit "queue times" so that various warning/retry things can be
3389     tested. Otherwise variability of clock ticks etc. cause problems. */
3390
3391     case 'T':
3392     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3393       fudged_queue_times = argv[++i];
3394     else badarg = TRUE;
3395     break;
3396
3397
3398     /* -t: Set flag to extract recipients from body of message. */
3399
3400     case 't':
3401     if (*argrest == 0) extract_recipients = TRUE;
3402
3403     /* -ti: Set flag to extract recipients from body of message, and also
3404     specify that dot does not end the message. */
3405
3406     else if (Ustrcmp(argrest, "i") == 0)
3407       {
3408       extract_recipients = TRUE;
3409       f.dot_ends = FALSE;
3410       }
3411
3412     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3413
3414     #ifndef DISABLE_TLS
3415     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3416     #endif
3417
3418     else badarg = TRUE;
3419     break;
3420
3421
3422     /* -U: This means "initial user submission" in sendmail, apparently. The
3423     doc claims that in future sendmail may refuse syntactically invalid
3424     messages instead of fixing them. For the moment, we just ignore it. */
3425
3426     case 'U':
3427     break;
3428
3429
3430     /* -v: verify things - this is a very low-level debugging */
3431
3432     case 'v':
3433     if (*argrest == 0)
3434       {
3435       debug_selector |= D_v;
3436       debug_file = stderr;
3437       }
3438     else badarg = TRUE;
3439     break;
3440
3441
3442     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3443
3444       The -x flag tells the sendmail command that mail from a local
3445       mail program has National Language Support (NLS) extended characters
3446       in the body of the mail item. The sendmail command can send mail with
3447       extended NLS characters across networks that normally corrupts these
3448       8-bit characters.
3449
3450     As Exim is 8-bit clean, it just ignores this flag. */
3451
3452     case 'x':
3453     if (*argrest != 0) badarg = TRUE;
3454     break;
3455
3456     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3457     logs to that file.  We swallow the parameter and otherwise ignore it. */
3458
3459     case 'X':
3460     if (*argrest == '\0')
3461       if (++i >= argc)
3462         exim_fail("exim: string expected after -X\n");
3463     break;
3464
3465     case 'z':
3466     if (*argrest == '\0')
3467       if (++i < argc)
3468         log_oneline = argv[i];
3469       else
3470         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3471     break;
3472
3473     /* All other initial characters are errors */
3474
3475     default:
3476     badarg = TRUE;
3477     break;
3478     }         /* End of high-level switch statement */
3479
3480   /* Failed to recognize the option, or syntax error */
3481
3482   if (badarg)
3483     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3484       "option %s\n", arg);
3485   }
3486
3487
3488 /* If -R or -S have been specified without -q, assume a single queue run. */
3489
3490 if (  (deliver_selectstring || deliver_selectstring_sender)
3491    && queue_interval < 0)
3492     queue_interval = 0;
3493
3494
3495 END_ARG:
3496 /* If usage_wanted is set we call the usage function - which never returns */
3497 if (usage_wanted) exim_usage(called_as);
3498
3499 /* Arguments have been processed. Check for incompatibilities. */
3500 if ((
3501     (smtp_input || extract_recipients || recipients_arg < argc) &&
3502     (f.daemon_listen || queue_interval >= 0 || bi_option ||
3503       test_retry_arg >= 0 || test_rewrite_arg >= 0 ||
3504       filter_test != FTEST_NONE || (msg_action_arg > 0 && !one_msg_action))
3505     ) ||
3506     (
3507     msg_action_arg > 0 &&
3508     (f.daemon_listen || queue_interval > 0 || list_options ||
3509       (checking && msg_action != MSG_LOAD) ||
3510       bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0)
3511     ) ||
3512     (
3513     (f.daemon_listen || queue_interval > 0) &&
3514     (sender_address != NULL || list_options || list_queue || checking ||
3515       bi_option)
3516     ) ||
3517     (
3518     f.daemon_listen && queue_interval == 0
3519     ) ||
3520     (
3521     f.inetd_wait_mode && queue_interval >= 0
3522     ) ||
3523     (
3524     list_options &&
3525     (checking || smtp_input || extract_recipients ||
3526       filter_test != FTEST_NONE || bi_option)
3527     ) ||
3528     (
3529     verify_address_mode &&
3530     (f.address_test_mode || smtp_input || extract_recipients ||
3531       filter_test != FTEST_NONE || bi_option)
3532     ) ||
3533     (
3534     f.address_test_mode && (smtp_input || extract_recipients ||
3535       filter_test != FTEST_NONE || bi_option)
3536     ) ||
3537     (
3538     smtp_input && (sender_address != NULL || filter_test != FTEST_NONE ||
3539       extract_recipients)
3540     ) ||
3541     (
3542     deliver_selectstring != NULL && queue_interval < 0
3543     ) ||
3544     (
3545     msg_action == MSG_LOAD &&
3546       (!expansion_test || expansion_test_message != NULL)
3547     )
3548    )
3549   exim_fail("exim: incompatible command-line options or arguments\n");
3550
3551 /* If debugging is set up, set the file and the file descriptor to pass on to
3552 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3553 to run in the foreground. */
3554
3555 if (debug_selector != 0)
3556   {
3557   debug_file = stderr;
3558   debug_fd = fileno(debug_file);
3559   f.background_daemon = FALSE;
3560   testharness_pause_ms(100);   /* lets caller finish */
3561   if (debug_selector != D_v)    /* -v only doesn't show this */
3562     {
3563     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3564       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3565       debug_selector);
3566     if (!version_printed)
3567       show_whats_supported(stderr);
3568     }
3569   }
3570
3571 /* When started with root privilege, ensure that the limits on the number of
3572 open files and the number of processes (where that is accessible) are
3573 sufficiently large, or are unset, in case Exim has been called from an
3574 environment where the limits are screwed down. Not all OS have the ability to
3575 change some of these limits. */
3576
3577 if (unprivileged)
3578   {
3579   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3580   }
3581 else
3582   {
3583   struct rlimit rlp;
3584
3585   #ifdef RLIMIT_NOFILE
3586   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3587     {
3588     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3589       strerror(errno));
3590     rlp.rlim_cur = rlp.rlim_max = 0;
3591     }
3592
3593   /* I originally chose 1000 as a nice big number that was unlikely to
3594   be exceeded. It turns out that some older OS have a fixed upper limit of
3595   256. */
3596
3597   if (rlp.rlim_cur < 1000)
3598     {
3599     rlp.rlim_cur = rlp.rlim_max = 1000;
3600     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3601       {
3602       rlp.rlim_cur = rlp.rlim_max = 256;
3603       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3604         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3605           strerror(errno));
3606       }
3607     }
3608   #endif
3609
3610   #ifdef RLIMIT_NPROC
3611   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3612     {
3613     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3614       strerror(errno));
3615     rlp.rlim_cur = rlp.rlim_max = 0;
3616     }
3617
3618   #ifdef RLIM_INFINITY
3619   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3620     {
3621     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3622   #else
3623   if (rlp.rlim_cur < 1000)
3624     {
3625     rlp.rlim_cur = rlp.rlim_max = 1000;
3626   #endif
3627     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3628       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3629         strerror(errno));
3630     }
3631   #endif
3632   }
3633
3634 /* Exim is normally entered as root (but some special configurations are
3635 possible that don't do this). However, it always spins off sub-processes that
3636 set their uid and gid as required for local delivery. We don't want to pass on
3637 any extra groups that root may belong to, so we want to get rid of them all at
3638 this point.
3639
3640 We need to obey setgroups() at this stage, before possibly giving up root
3641 privilege for a changed configuration file, but later on we might need to
3642 check on the additional groups for the admin user privilege - can't do that
3643 till after reading the config, which might specify the exim gid. Therefore,
3644 save the group list here first. */
3645
3646 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3647   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3648
3649 /* There is a fundamental difference in some BSD systems in the matter of
3650 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3651 known not to be different. On the "different" systems there is a single group
3652 list, and the first entry in it is the current group. On all other versions of
3653 Unix there is a supplementary group list, which is in *addition* to the current
3654 group. Consequently, to get rid of all extraneous groups on a "standard" system
3655 you pass over 0 groups to setgroups(), while on a "different" system you pass
3656 over a single group - the current group, which is always the first group in the
3657 list. Calling setgroups() with zero groups on a "different" system results in
3658 an error return. The following code should cope with both types of system.
3659
3660  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
3661  the "setgroups() with zero groups" - and changes the egid.
3662  Thanks to that we had to stash the original_egid above, for use below
3663  in the call to exim_setugid().
3664
3665 However, if this process isn't running as root, setgroups() can't be used
3666 since you have to be root to run it, even if throwing away groups.
3667 Except, sigh, for Hurd - where you can.
3668 Not being root here happens only in some unusual configurations. */
3669
3670 if (  !unprivileged
3671 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
3672    && setgroups(0, NULL) != 0
3673 #endif
3674    && setgroups(1, group_list) != 0)
3675   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
3676
3677 /* If the configuration file name has been altered by an argument on the
3678 command line (either a new file name or a macro definition) and the caller is
3679 not root, or if this is a filter testing run, remove any setuid privilege the
3680 program has and run as the underlying user.
3681
3682 The exim user is locked out of this, which severely restricts the use of -C
3683 for some purposes.
3684
3685 Otherwise, set the real ids to the effective values (should be root unless run
3686 from inetd, which it can either be root or the exim uid, if one is configured).
3687
3688 There is a private mechanism for bypassing some of this, in order to make it
3689 possible to test lots of configurations automatically, without having either to
3690 recompile each time, or to patch in an actual configuration file name and other
3691 values (such as the path name). If running in the test harness, pretend that
3692 configuration file changes and macro definitions haven't happened. */
3693
3694 if ((                                            /* EITHER */
3695     (!f.trusted_config ||                          /* Config changed, or */
3696      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
3697     real_uid != root_uid &&                      /* Not root, and */
3698     !f.running_in_test_harness                     /* Not fudged */
3699     ) ||                                         /*   OR   */
3700     expansion_test                               /* expansion testing */
3701     ||                                           /*   OR   */
3702     filter_test != FTEST_NONE)                   /* Filter testing */
3703   {
3704   setgroups(group_count, group_list);
3705   exim_setugid(real_uid, real_gid, FALSE,
3706     US"-C, -D, -be or -bf forces real uid");
3707   removed_privilege = TRUE;
3708
3709   /* In the normal case when Exim is called like this, stderr is available
3710   and should be used for any logging information because attempts to write
3711   to the log will usually fail. To arrange this, we unset really_exim. However,
3712   if no stderr is available there is no point - we might as well have a go
3713   at the log (if it fails, syslog will be written).
3714
3715   Note that if the invoker is Exim, the logs remain available. Messing with
3716   this causes unlogged successful deliveries.  */
3717
3718   if (log_stderr && real_uid != exim_uid)
3719     f.really_exim = FALSE;
3720   }
3721
3722 /* Privilege is to be retained for the moment. It may be dropped later,
3723 depending on the job that this Exim process has been asked to do. For now, set
3724 the real uid to the effective so that subsequent re-execs of Exim are done by a
3725 privileged user. */
3726
3727 else
3728   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
3729
3730 /* If testing a filter, open the file(s) now, before wasting time doing other
3731 setups and reading the message. */
3732
3733 if (filter_test & FTEST_SYSTEM)
3734   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
3735     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
3736       strerror(errno));
3737
3738 if (filter_test & FTEST_USER)
3739   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
3740     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
3741       strerror(errno));
3742
3743 /* Initialise lookup_list
3744 If debugging, already called above via version reporting.
3745 In either case, we initialise the list of available lookups while running
3746 as root.  All dynamically modules are loaded from a directory which is
3747 hard-coded into the binary and is code which, if not a module, would be
3748 part of Exim already.  Ability to modify the content of the directory
3749 is equivalent to the ability to modify a setuid binary!
3750
3751 This needs to happen before we read the main configuration. */
3752 init_lookup_list();
3753
3754 #ifdef SUPPORT_I18N
3755 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
3756 #endif
3757
3758 /* Read the main runtime configuration data; this gives up if there
3759 is a failure. It leaves the configuration file open so that the subsequent
3760 configuration data for delivery can be read if needed.
3761
3762 NOTE: immediately after opening the configuration file we change the working
3763 directory to "/"! Later we change to $spool_directory. We do it there, because
3764 during readconf_main() some expansion takes place already. */
3765
3766 /* Store the initial cwd before we change directories.  Can be NULL if the
3767 dir has already been unlinked. */
3768 initial_cwd = os_getcwd(NULL, 0);
3769
3770 /* checking:
3771     -be[m] expansion test        -
3772     -b[fF] filter test           new
3773     -bh[c] host test             -
3774     -bmalware malware_test_file  new
3775     -brt   retry test            new
3776     -brw   rewrite test          new
3777     -bt    address test          -
3778     -bv[s] address verify        -
3779    list_options:
3780     -bP <option> (except -bP config, which sets list_config)
3781
3782 If any of these options is set, we suppress warnings about configuration
3783 issues (currently about tls_advertise_hosts and keep_environment not being
3784 defined) */
3785
3786   {
3787 #ifdef MEASURE_TIMING
3788   struct timeval t0, diff;
3789   (void)gettimeofday(&t0, NULL);
3790 #endif
3791
3792   readconf_main(checking || list_options);
3793
3794 #ifdef MEASURE_TIMING
3795   report_time_since(&t0, US"readconf_main (delta)");
3796 #endif
3797   }
3798
3799
3800 /* Now in directory "/" */
3801
3802 if (cleanup_environment() == FALSE)
3803   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
3804
3805
3806 /* If an action on specific messages is requested, or if a daemon or queue
3807 runner is being started, we need to know if Exim was called by an admin user.
3808 This is the case if the real user is root or exim, or if the real group is
3809 exim, or if one of the supplementary groups is exim or a group listed in
3810 admin_groups. We don't fail all message actions immediately if not admin_user,
3811 since some actions can be performed by non-admin users. Instead, set admin_user
3812 for later interrogation. */
3813
3814 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
3815   f.admin_user = TRUE;
3816 else
3817   for (int i = 0; i < group_count && !f.admin_user; i++)
3818     if (group_list[i] == exim_gid)
3819       f.admin_user = TRUE;
3820     else if (admin_groups)
3821       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
3822         if (admin_groups[j] == group_list[i])
3823           f.admin_user = TRUE;
3824
3825 /* Another group of privileged users are the trusted users. These are root,
3826 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
3827 are permitted to specify sender_addresses with -f on the command line, and
3828 other message parameters as well. */
3829
3830 if (real_uid == root_uid || real_uid == exim_uid)
3831   f.trusted_caller = TRUE;
3832 else
3833   {
3834   if (trusted_users)
3835     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
3836       if (trusted_users[i] == real_uid)
3837         f.trusted_caller = TRUE;
3838
3839   if (trusted_groups)
3840     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
3841       if (trusted_groups[i] == real_gid)
3842         f.trusted_caller = TRUE;
3843       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
3844         if (trusted_groups[i] == group_list[j])
3845           f.trusted_caller = TRUE;
3846   }
3847
3848 /* At this point, we know if the user is privileged and some command-line
3849 options become possibly impermissible, depending upon the configuration file. */
3850
3851 if (checking && commandline_checks_require_admin && !f.admin_user)
3852   exim_fail("exim: those command-line flags are set to require admin\n");
3853
3854 /* Handle the decoding of logging options. */
3855
3856 decode_bits(log_selector, log_selector_size, log_notall,
3857   log_selector_string, log_options, log_options_count, US"log", 0);
3858
3859 DEBUG(D_any)
3860   {
3861   debug_printf("configuration file is %s\n", config_main_filename);
3862   debug_printf("log selectors =");
3863   for (int i = 0; i < log_selector_size; i++)
3864     debug_printf(" %08x", log_selector[i]);
3865   debug_printf("\n");
3866   }
3867
3868 /* If domain literals are not allowed, check the sender address that was
3869 supplied with -f. Ditto for a stripped trailing dot. */
3870
3871 if (sender_address)
3872   {
3873   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
3874     exim_fail("exim: bad -f address \"%s\": domain literals not "
3875       "allowed\n", sender_address);
3876   if (f_end_dot && !strip_trailing_dot)
3877     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
3878       "(trailing dot not allowed)\n", sender_address);
3879   }
3880
3881 /* See if an admin user overrode our logging. */
3882
3883 if (cmdline_syslog_name)
3884   if (f.admin_user)
3885     {
3886     syslog_processname = cmdline_syslog_name;
3887     log_file_path = string_copy(CUS"syslog");
3888     }
3889   else
3890     /* not a panic, non-privileged users should not be able to spam paniclog */
3891     exim_fail(
3892         "exim: you lack sufficient privilege to specify syslog process name\n");
3893
3894 /* Paranoia check of maximum lengths of certain strings. There is a check
3895 on the length of the log file path in log.c, which will come into effect
3896 if there are any calls to write the log earlier than this. However, if we
3897 get this far but the string is very long, it is better to stop now than to
3898 carry on and (e.g.) receive a message and then have to collapse. The call to
3899 log_write() from here will cause the ultimate panic collapse if the complete
3900 file name exceeds the buffer length. */
3901
3902 if (Ustrlen(log_file_path) > 200)
3903   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3904     "log_file_path is longer than 200 chars: aborting");
3905
3906 if (Ustrlen(pid_file_path) > 200)
3907   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3908     "pid_file_path is longer than 200 chars: aborting");
3909
3910 if (Ustrlen(spool_directory) > 200)
3911   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3912     "spool_directory is longer than 200 chars: aborting");
3913
3914 /* Length check on the process name given to syslog for its TAG field,
3915 which is only permitted to be 32 characters or less. See RFC 3164. */
3916
3917 if (Ustrlen(syslog_processname) > 32)
3918   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3919     "syslog_processname is longer than 32 chars: aborting");
3920
3921 if (log_oneline)
3922   if (f.admin_user)
3923     {
3924     log_write(0, LOG_MAIN, "%s", log_oneline);
3925     return EXIT_SUCCESS;
3926     }
3927   else
3928     return EXIT_FAILURE;
3929
3930 /* In some operating systems, the environment variable TMPDIR controls where
3931 temporary files are created; Exim doesn't use these (apart from when delivering
3932 to MBX mailboxes), but called libraries such as DBM libraries may require them.
3933 If TMPDIR is found in the environment, reset it to the value defined in the
3934 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
3935 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
3936 EXIM_TMPDIR by the build scripts.
3937 */
3938
3939 #ifdef EXIM_TMPDIR
3940   if (environ) for (uschar ** p = USS environ; *p; p++)
3941     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
3942       {
3943       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
3944       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
3945       *p = newp;
3946       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
3947       }
3948 #endif
3949
3950 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
3951 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
3952 we may need to get rid of a bogus timezone setting. This can arise when Exim is
3953 called by a user who has set the TZ variable. This then affects the timestamps
3954 in log files and in Received: headers, and any created Date: header lines. The
3955 required timezone is settable in the configuration file, so nothing can be done
3956 about this earlier - but hopefully nothing will normally be logged earlier than
3957 this. We have to make a new environment if TZ is wrong, but don't bother if
3958 timestamps_utc is set, because then all times are in UTC anyway. */
3959
3960 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
3961   f.timestamps_utc = TRUE;
3962 else
3963   {
3964   uschar *envtz = US getenv("TZ");
3965   if (envtz
3966       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
3967       : timezone_string != NULL
3968      )
3969     {
3970     uschar **p = USS environ;
3971     uschar **new;
3972     uschar **newp;
3973     int count = 0;
3974     if (environ) while (*p++) count++;
3975     if (!envtz) count++;
3976     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
3977     if (environ) for (p = USS environ; *p; p++)
3978       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
3979     if (timezone_string)
3980       {
3981       *newp = store_malloc(Ustrlen(timezone_string) + 4);
3982       sprintf(CS *newp++, "TZ=%s", timezone_string);
3983       }
3984     *newp = NULL;
3985     environ = CSS new;
3986     tzset();
3987     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
3988       tod_stamp(tod_log));
3989     }
3990   }
3991
3992 /* Handle the case when we have removed the setuid privilege because of -C or
3993 -D. This means that the caller of Exim was not root.
3994
3995 There is a problem if we were running as the Exim user. The sysadmin may
3996 expect this case to retain privilege because "the binary was called by the
3997 Exim user", but it hasn't, because either the -D option set macros, or the
3998 -C option set a non-trusted configuration file. There are two possibilities:
3999
4000   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4001       to do message deliveries. Thus, the fact that it is running as a
4002       non-privileged user is plausible, and might be wanted in some special
4003       configurations. However, really_exim will have been set false when
4004       privilege was dropped, to stop Exim trying to write to its normal log
4005       files. Therefore, re-enable normal log processing, assuming the sysadmin
4006       has set up the log directory correctly.
4007
4008   (2) If deliver_drop_privilege is not set, the configuration won't work as
4009       apparently intended, and so we log a panic message. In order to retain
4010       root for -C or -D, the caller must either be root or be invoking a
4011       trusted configuration file (when deliver_drop_privilege is false). */
4012
4013 if (  removed_privilege
4014    && (!f.trusted_config || opt_D_used)
4015    && real_uid == exim_uid)
4016   if (deliver_drop_privilege)
4017     f.really_exim = TRUE; /* let logging work normally */
4018   else
4019     log_write(0, LOG_MAIN|LOG_PANIC,
4020       "exim user lost privilege for using %s option",
4021       f.trusted_config? "-D" : "-C");
4022
4023 /* Start up Perl interpreter if Perl support is configured and there is a
4024 perl_startup option, and the configuration or the command line specifies
4025 initializing starting. Note that the global variables are actually called
4026 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4027
4028 #ifdef EXIM_PERL
4029 if (perl_start_option != 0)
4030   opt_perl_at_start = (perl_start_option > 0);
4031 if (opt_perl_at_start && opt_perl_startup != NULL)
4032   {
4033   uschar *errstr;
4034   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4035   if ((errstr = init_perl(opt_perl_startup)))
4036     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4037   opt_perl_started = TRUE;
4038   }
4039 #endif /* EXIM_PERL */
4040
4041 /* Log the arguments of the call if the configuration file said so. This is
4042 a debugging feature for finding out what arguments certain MUAs actually use.
4043 Don't attempt it if logging is disabled, or if listing variables or if
4044 verifying/testing addresses or expansions. */
4045
4046 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4047    && f.really_exim && !list_options && !checking)
4048   {
4049   uschar *p = big_buffer;
4050   Ustrcpy(p, US"cwd= (failed)");
4051
4052   if (!initial_cwd)
4053     p += 13;
4054   else
4055     {
4056     Ustrncpy(p + 4, initial_cwd, big_buffer_size-5);
4057     p += 4 + Ustrlen(initial_cwd);
4058     /* in case p is near the end and we don't provide enough space for
4059      * string_format to be willing to write. */
4060     *p = '\0';
4061     }
4062
4063   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4064   while (*p) p++;
4065   for (int i = 0; i < argc; i++)
4066     {
4067     int len = Ustrlen(argv[i]);
4068     const uschar *printing;
4069     uschar *quote;
4070     if (p + len + 8 >= big_buffer + big_buffer_size)
4071       {
4072       Ustrcpy(p, US" ...");
4073       log_write(0, LOG_MAIN, "%s", big_buffer);
4074       Ustrcpy(big_buffer, US"...");
4075       p = big_buffer + 3;
4076       }
4077     printing = string_printing(argv[i]);
4078     if (printing[0] == 0) quote = US"\""; else
4079       {
4080       const uschar *pp = printing;
4081       quote = US"";
4082       while (*pp != 0) if (isspace(*pp++)) { quote = US"\""; break; }
4083       }
4084     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4085       (p - big_buffer) - 4), printing, quote);
4086     }
4087
4088   if (LOGGING(arguments))
4089     log_write(0, LOG_MAIN, "%s", big_buffer);
4090   else
4091     debug_printf("%s\n", big_buffer);
4092   }
4093
4094 /* Set the working directory to be the top-level spool directory. We don't rely
4095 on this in the code, which always uses fully qualified names, but it's useful
4096 for core dumps etc. Don't complain if it fails - the spool directory might not
4097 be generally accessible and calls with the -C option (and others) have lost
4098 privilege by now. Before the chdir, we try to ensure that the directory exists.
4099 */
4100
4101 if (Uchdir(spool_directory) != 0)
4102   {
4103   int dummy;
4104   (void)directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4105   dummy = /* quieten compiler */ Uchdir(spool_directory);
4106   dummy = dummy;        /* yet more compiler quietening, sigh */
4107   }
4108
4109 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4110 alias file. Exim doesn't have such a concept, but this call is screwed into
4111 Sun's YP makefiles. Handle this by calling a configured script, as the real
4112 user who called Exim. The -oA option can be used to pass an argument to the
4113 script. */
4114
4115 if (bi_option)
4116   {
4117   (void)fclose(config_file);
4118   if (bi_command != NULL)
4119     {
4120     int i = 0;
4121     uschar *argv[3];
4122     argv[i++] = bi_command;
4123     if (alias_arg != NULL) argv[i++] = alias_arg;
4124     argv[i++] = NULL;
4125
4126     setgroups(group_count, group_list);
4127     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4128
4129     DEBUG(D_exec) debug_printf("exec %.256s %.256s\n", argv[0],
4130       (argv[1] == NULL)? US"" : argv[1]);
4131
4132     execv(CS argv[0], (char *const *)argv);
4133     exim_fail("exim: exec failed: %s\n", strerror(errno));
4134     }
4135   else
4136     {
4137     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4138     exit(EXIT_SUCCESS);
4139     }
4140   }
4141
4142 /* We moved the admin/trusted check to be immediately after reading the
4143 configuration file.  We leave these prints here to ensure that syslog setup,
4144 logfile setup, and so on has already happened. */
4145
4146 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4147 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4148
4149 /* Only an admin user may start the daemon or force a queue run in the default
4150 configuration, but the queue run restriction can be relaxed. Only an admin
4151 user may request that a message be returned to its sender forthwith. Only an
4152 admin user may specify a debug level greater than D_v (because it might show
4153 passwords, etc. in lookup queries). Only an admin user may request a queue
4154 count. Only an admin user can use the test interface to scan for email
4155 (because Exim will be in the spool dir and able to look at mails). */
4156
4157 if (!f.admin_user)
4158   {
4159   BOOL debugset = (debug_selector & ~D_v) != 0;
4160   if (  deliver_give_up || f.daemon_listen || malware_test_file
4161      || count_queue && queue_list_requires_admin
4162      || list_queue && queue_list_requires_admin
4163      || queue_interval >= 0 && prod_requires_admin
4164      || queue_name_dest && prod_requires_admin
4165      || debugset && !f.running_in_test_harness
4166      )
4167     exim_fail("exim:%s permission denied\n", debugset? " debugging" : "");
4168   }
4169
4170 /* If the real user is not root or the exim uid, the argument for passing
4171 in an open TCP/IP connection for another message is not permitted, nor is
4172 running with the -N option for any delivery action, unless this call to exim is
4173 one that supplied an input message, or we are using a patched exim for
4174 regression testing. */
4175
4176 if (real_uid != root_uid && real_uid != exim_uid &&
4177      (continue_hostname != NULL ||
4178        (f.dont_deliver &&
4179          (queue_interval >= 0 || f.daemon_listen || msg_action_arg > 0)
4180        )) && !f.running_in_test_harness)
4181   exim_fail("exim: Permission denied\n");
4182
4183 /* If the caller is not trusted, certain arguments are ignored when running for
4184 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4185 Note that authority for performing certain actions on messages is tested in the
4186 queue_action() function. */
4187
4188 if (!f.trusted_caller && !checking)
4189   {
4190   sender_host_name = sender_host_address = interface_address =
4191     sender_ident = received_protocol = NULL;
4192   sender_host_port = interface_port = 0;
4193   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4194   }
4195
4196 /* If a sender host address is set, extract the optional port number off the
4197 end of it and check its syntax. Do the same thing for the interface address.
4198 Exim exits if the syntax is bad. */
4199
4200 else
4201   {
4202   if (sender_host_address != NULL)
4203     sender_host_port = check_port(sender_host_address);
4204   if (interface_address != NULL)
4205     interface_port = check_port(interface_address);
4206   }
4207
4208 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4209 if (flag_G)
4210   {
4211   if (f.trusted_caller)
4212     {
4213     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4214     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4215     }
4216   else
4217     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4218   }
4219
4220 /* If an SMTP message is being received check to see if the standard input is a
4221 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4222 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4223 barf. */
4224
4225 if (smtp_input)
4226   {
4227   union sockaddr_46 inetd_sock;
4228   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4229   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4230     {
4231     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4232     if (family == AF_INET || family == AF_INET6)
4233       {
4234       union sockaddr_46 interface_sock;
4235       size = sizeof(interface_sock);
4236
4237       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4238         interface_address = host_ntoa(-1, &interface_sock, NULL,
4239           &interface_port);
4240
4241       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4242
4243       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4244         {
4245         f.is_inetd = TRUE;
4246         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4247           NULL, &sender_host_port);
4248         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4249           "inetd is not supported when mua_wrapper is set");
4250         }
4251       else
4252         exim_fail(
4253           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4254       }
4255     }
4256   }
4257
4258 /* If the load average is going to be needed while receiving a message, get it
4259 now for those OS that require the first call to os_getloadavg() to be done as
4260 root. There will be further calls later for each message received. */
4261
4262 #ifdef LOAD_AVG_NEEDS_ROOT
4263 if (  receiving_message
4264    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4265   load_average = OS_GETLOADAVG();
4266 #endif
4267
4268 /* The queue_only configuration option can be overridden by -odx on the command
4269 line, except that if queue_only_override is false, queue_only cannot be unset
4270 from the command line. */
4271
4272 if (queue_only_set && (queue_only_override || arg_queue_only))
4273   queue_only = arg_queue_only;
4274
4275 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4276 -or and -os. */
4277
4278 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4279 if (arg_smtp_receive_timeout >= 0)
4280   smtp_receive_timeout = arg_smtp_receive_timeout;
4281
4282 /* If Exim was started with root privilege, unless we have already removed the
4283 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4284 except when starting the daemon or doing some kind of delivery or address
4285 testing (-bt). These are the only cases when root need to be retained. We run
4286 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4287 retained only for starting the daemon. We always do the initgroups() in this
4288 situation (controlled by the TRUE below), in order to be as close as possible
4289 to the state Exim usually runs in. */
4290
4291 if (!unprivileged &&                      /* originally had root AND */
4292     !removed_privilege &&                 /* still got root AND      */
4293     !f.daemon_listen &&                     /* not starting the daemon */
4294     queue_interval <= 0 &&                /* (either kind of daemon) */
4295       (                                   /*    AND EITHER           */
4296       deliver_drop_privilege ||           /* requested unprivileged  */
4297         (                                 /*       OR                */
4298         queue_interval < 0 &&             /* not running the queue   */
4299         (msg_action_arg < 0 ||            /*       and               */
4300           msg_action != MSG_DELIVER) &&   /* not delivering and      */
4301         (!checking || !f.address_test_mode) /* not address checking    */
4302    )  ) )
4303   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4304
4305 /* When we are retaining a privileged uid, we still change to the exim gid. */
4306
4307 else
4308   {
4309   int rv;
4310   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4311   rv = setgid(exim_gid);
4312   /* Impact of failure is that some stuff might end up with an incorrect group.
4313   We track this for failures from root, since any attempt to change privilege
4314   by root should succeed and failures should be examined.  For non-root,
4315   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4316   no need to complain then. */
4317   if (rv == -1)
4318     if (!(unprivileged || removed_privilege))
4319       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4320     else
4321       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4322           (long int)exim_gid, strerror(errno));
4323   }
4324
4325 /* Handle a request to scan a file for malware */
4326 if (malware_test_file)
4327   {
4328 #ifdef WITH_CONTENT_SCAN
4329   int result;
4330   set_process_info("scanning file for malware");
4331   result = malware_in_file(malware_test_file);
4332   if (result == FAIL)
4333     {
4334     printf("No malware found.\n");
4335     exit(EXIT_SUCCESS);
4336     }
4337   if (result != OK)
4338     {
4339     printf("Malware lookup returned non-okay/fail: %d\n", result);
4340     exit(EXIT_FAILURE);
4341     }
4342   if (malware_name)
4343     printf("Malware found: %s\n", malware_name);
4344   else
4345     printf("Malware scan detected malware of unknown name.\n");
4346 #else
4347   printf("Malware scanning not enabled at compile time.\n");
4348 #endif
4349   exit(EXIT_FAILURE);
4350   }
4351
4352 /* Handle a request to list the delivery queue */
4353
4354 if (list_queue)
4355   {
4356   set_process_info("listing the queue");
4357   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4358   exit(EXIT_SUCCESS);
4359   }
4360
4361 /* Handle a request to count the delivery queue */
4362
4363 if (count_queue)
4364   {
4365   set_process_info("counting the queue");
4366   queue_count();
4367   exit(EXIT_SUCCESS);
4368   }
4369
4370 /* Handle actions on specific messages, except for the force delivery and
4371 message load actions, which are done below. Some actions take a whole list of
4372 message ids, which are known to continue up to the end of the arguments. Others
4373 take a single message id and then operate on the recipients list. */
4374
4375 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4376   {
4377   int yield = EXIT_SUCCESS;
4378   set_process_info("acting on specified messages");
4379
4380   /* ACL definitions may be needed when removing a message (-Mrm) because
4381   event_action gets expanded */
4382
4383   if (msg_action == MSG_REMOVE)
4384     readconf_rest();
4385
4386   if (!one_msg_action)
4387     {
4388     for (i = msg_action_arg; i < argc; i++)
4389       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4390         yield = EXIT_FAILURE;
4391     switch (msg_action)
4392       {
4393       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4394       default: printf("\n"); break;
4395       }
4396     }
4397
4398   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4399     recipients_arg)) yield = EXIT_FAILURE;
4400   exit(yield);
4401   }
4402
4403 /* We used to set up here to skip reading the ACL section, on
4404  (msg_action_arg > 0 || (queue_interval == 0 && !f.daemon_listen)
4405 Now, since the intro of the ${acl } expansion, ACL definitions may be
4406 needed in transports so we lost the optimisation. */
4407
4408   {
4409 #ifdef MEASURE_TIMING
4410   struct timeval t0, diff;
4411   (void)gettimeofday(&t0, NULL);
4412 #endif
4413
4414   readconf_rest();
4415
4416 #ifdef MEASURE_TIMING
4417   report_time_since(&t0, US"readconf_rest (delta)");
4418 #endif
4419   }
4420
4421 /* Handle the -brt option. This is for checking out retry configurations.
4422 The next three arguments are a domain name or a complete address, and
4423 optionally two error numbers. All it does is to call the function that
4424 scans the retry configuration data. */
4425
4426 if (test_retry_arg >= 0)
4427   {
4428   retry_config *yield;
4429   int basic_errno = 0;
4430   int more_errno = 0;
4431   uschar *s1, *s2;
4432
4433   if (test_retry_arg >= argc)
4434     {
4435     printf("-brt needs a domain or address argument\n");
4436     exim_exit(EXIT_FAILURE, US"main");
4437     }
4438   s1 = argv[test_retry_arg++];
4439   s2 = NULL;
4440
4441   /* If the first argument contains no @ and no . it might be a local user
4442   or it might be a single-component name. Treat as a domain. */
4443
4444   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4445     {
4446     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4447       "being \ntreated as a one-component domain, not as a local part.\n\n",
4448       s1);
4449     }
4450
4451   /* There may be an optional second domain arg. */
4452
4453   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4454     s2 = argv[test_retry_arg++];
4455
4456   /* The final arg is an error name */
4457
4458   if (test_retry_arg < argc)
4459     {
4460     uschar *ss = argv[test_retry_arg];
4461     uschar *error =
4462       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4463     if (error != NULL)
4464       {
4465       printf("%s\n", CS error);
4466       return EXIT_FAILURE;
4467       }
4468
4469     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4470     code > 100 as an error is for matching codes to the decade. Turn them into
4471     a real error code, off the decade. */
4472
4473     if (basic_errno == ERRNO_MAIL4XX ||
4474         basic_errno == ERRNO_RCPT4XX ||
4475         basic_errno == ERRNO_DATA4XX)
4476       {
4477       int code = (more_errno >> 8) & 255;
4478       if (code == 255)
4479         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4480       else if (code > 100)
4481         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4482       }
4483     }
4484
4485   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4486     printf("No retry information found\n");
4487   else
4488     {
4489     more_errno = yield->more_errno;
4490     printf("Retry rule: %s  ", yield->pattern);
4491
4492     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4493       {
4494       printf("quota%s%s  ",
4495         (more_errno > 0)? "_" : "",
4496         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4497       }
4498     else if (yield->basic_errno == ECONNREFUSED)
4499       {
4500       printf("refused%s%s  ",
4501         (more_errno > 0)? "_" : "",
4502         (more_errno == 'M')? "MX" :
4503         (more_errno == 'A')? "A" : "");
4504       }
4505     else if (yield->basic_errno == ETIMEDOUT)
4506       {
4507       printf("timeout");
4508       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4509       more_errno &= 255;
4510       if (more_errno != 0) printf("_%s",
4511         (more_errno == 'M')? "MX" : "A");
4512       printf("  ");
4513       }
4514     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4515       printf("auth_failed  ");
4516     else printf("*  ");
4517
4518     for (retry_rule * r = yield->rules; r; r = r->next)
4519       {
4520       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4521       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4522       if (r->rule == 'G')
4523         {
4524         int x = r->p2;
4525         int f = x % 1000;
4526         int d = 100;
4527         printf(",%d.", x/1000);
4528         do
4529           {
4530           printf("%d", f/d);
4531           f %= d;
4532           d /= 10;
4533           }
4534         while (f != 0);
4535         }
4536       printf("; ");
4537       }
4538
4539     printf("\n");
4540     }
4541   exim_exit(EXIT_SUCCESS, US"main");
4542   }
4543
4544 /* Handle a request to list one or more configuration options */
4545 /* If -n was set, we suppress some information */
4546
4547 if (list_options)
4548   {
4549   BOOL fail = FALSE;
4550   set_process_info("listing variables");
4551   if (recipients_arg >= argc)
4552     fail = !readconf_print(US"all", NULL, flag_n);
4553   else for (i = recipients_arg; i < argc; i++)
4554     {
4555     if (i < argc - 1 &&
4556         (Ustrcmp(argv[i], "router") == 0 ||
4557          Ustrcmp(argv[i], "transport") == 0 ||
4558          Ustrcmp(argv[i], "authenticator") == 0 ||
4559          Ustrcmp(argv[i], "macro") == 0 ||
4560          Ustrcmp(argv[i], "environment") == 0))
4561       {
4562       fail |= !readconf_print(argv[i+1], argv[i], flag_n);
4563       i++;
4564       }
4565     else
4566       fail = !readconf_print(argv[i], NULL, flag_n);
4567     }
4568   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS, US"main");
4569   }
4570
4571 if (list_config)
4572   {
4573   set_process_info("listing config");
4574   exim_exit(readconf_print(US"config", NULL, flag_n)
4575                 ? EXIT_SUCCESS : EXIT_FAILURE, US"main");
4576   }
4577
4578
4579 /* Initialise subsystems as required. */
4580
4581 tcp_init();
4582
4583 /* Handle a request to deliver one or more messages that are already on the
4584 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4585 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4586
4587 Delivery of specific messages is typically used for a small number when
4588 prodding by hand (when the option forced_delivery will be set) or when
4589 re-execing to regain root privilege. Each message delivery must happen in a
4590 separate process, so we fork a process for each one, and run them sequentially
4591 so that debugging output doesn't get intertwined, and to avoid spawning too
4592 many processes if a long list is given. However, don't fork for the last one;
4593 this saves a process in the common case when Exim is called to deliver just one
4594 message. */
4595
4596 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4597   {
4598   if (prod_requires_admin && !f.admin_user)
4599     {
4600     fprintf(stderr, "exim: Permission denied\n");
4601     exim_exit(EXIT_FAILURE, US"main");
4602     }
4603   set_process_info("delivering specified messages");
4604   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4605   for (i = msg_action_arg; i < argc; i++)
4606     {
4607     int status;
4608     pid_t pid;
4609     if (i == argc - 1)
4610       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4611     else if ((pid = fork()) == 0)
4612       {
4613       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4614       exim_underbar_exit(EXIT_SUCCESS);
4615       }
4616     else if (pid < 0)
4617       {
4618       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4619         strerror(errno));
4620       exim_exit(EXIT_FAILURE, US"main");
4621       }
4622     else wait(&status);
4623     }
4624   exim_exit(EXIT_SUCCESS, US"main");
4625   }
4626
4627
4628 /* If only a single queue run is requested, without SMTP listening, we can just
4629 turn into a queue runner, with an optional starting message id. */
4630
4631 if (queue_interval == 0 && !f.daemon_listen)
4632   {
4633   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4634     (start_queue_run_id == NULL)? US"" : US" starting at ",
4635     (start_queue_run_id == NULL)? US"" : start_queue_run_id,
4636     (stop_queue_run_id == NULL)?  US"" : US" stopping at ",
4637     (stop_queue_run_id == NULL)?  US"" : stop_queue_run_id);
4638   if (*queue_name)
4639     set_process_info("running the '%s' queue (single queue run)", queue_name);
4640   else
4641     set_process_info("running the queue (single queue run)");
4642   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4643   exim_exit(EXIT_SUCCESS, US"main");
4644   }
4645
4646
4647 /* Find the login name of the real user running this process. This is always
4648 needed when receiving a message, because it is written into the spool file. It
4649 may also be used to construct a from: or a sender: header, and in this case we
4650 need the user's full name as well, so save a copy of it, checked for RFC822
4651 syntax and munged if necessary, if it hasn't previously been set by the -F
4652 argument. We may try to get the passwd entry more than once, in case NIS or
4653 other delays are in evidence. Save the home directory for use in filter testing
4654 (only). */
4655
4656 for (i = 0;;)
4657   {
4658   if ((pw = getpwuid(real_uid)) != NULL)
4659     {
4660     originator_login = string_copy(US pw->pw_name);
4661     originator_home = string_copy(US pw->pw_dir);
4662
4663     /* If user name has not been set by -F, set it from the passwd entry
4664     unless -f has been used to set the sender address by a trusted user. */
4665
4666     if (!originator_name)
4667       {
4668       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
4669         {
4670         uschar *name = US pw->pw_gecos;
4671         uschar *amp = Ustrchr(name, '&');
4672         uschar buffer[256];
4673
4674         /* Most Unix specify that a '&' character in the gecos field is
4675         replaced by a copy of the login name, and some even specify that
4676         the first character should be upper cased, so that's what we do. */
4677
4678         if (amp)
4679           {
4680           int loffset;
4681           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
4682             (int)(amp - name), name, &loffset, originator_login, amp + 1);
4683           buffer[loffset] = toupper(buffer[loffset]);
4684           name = buffer;
4685           }
4686
4687         /* If a pattern for matching the gecos field was supplied, apply
4688         it and then expand the name string. */
4689
4690         if (gecos_pattern && gecos_name)
4691           {
4692           const pcre *re;
4693           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
4694
4695           if (regex_match_and_setup(re, name, 0, -1))
4696             {
4697             uschar *new_name = expand_string(gecos_name);
4698             expand_nmax = -1;
4699             if (new_name)
4700               {
4701               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
4702                 "gecos field \"%s\"\n", new_name, name);
4703               name = new_name;
4704               }
4705             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
4706               "\"%s\": %s\n", gecos_name, expand_string_message);
4707             }
4708           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
4709             "gecos field \"%s\"\n", gecos_pattern, name);
4710           store_free((void *)re);
4711           }
4712         originator_name = string_copy(name);
4713         }
4714
4715       /* A trusted caller has used -f but not -F */
4716
4717       else originator_name = US"";
4718       }
4719
4720     /* Break the retry loop */
4721
4722     break;
4723     }
4724
4725   if (++i > finduser_retries) break;
4726   sleep(1);
4727   }
4728
4729 /* If we cannot get a user login, log the incident and give up, unless the
4730 configuration specifies something to use. When running in the test harness,
4731 any setting of unknown_login overrides the actual name. */
4732
4733 if (originator_login == NULL || f.running_in_test_harness)
4734   {
4735   if (unknown_login != NULL)
4736     {
4737     originator_login = expand_string(unknown_login);
4738     if (originator_name == NULL && unknown_username != NULL)
4739       originator_name = expand_string(unknown_username);
4740     if (originator_name == NULL) originator_name = US"";
4741     }
4742   if (originator_login == NULL)
4743     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
4744       (int)real_uid);
4745   }
4746
4747 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
4748 RFC822 address.*/
4749
4750 originator_name = string_copy(parse_fix_phrase(originator_name,
4751   Ustrlen(originator_name), big_buffer, big_buffer_size));
4752
4753 /* If a message is created by this call of Exim, the uid/gid of its originator
4754 are those of the caller. These values are overridden if an existing message is
4755 read in from the spool. */
4756
4757 originator_uid = real_uid;
4758 originator_gid = real_gid;
4759
4760 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
4761   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
4762
4763 /* Run in daemon and/or queue-running mode. The function daemon_go() never
4764 returns. We leave this till here so that the originator_ fields are available
4765 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
4766 mode. */
4767
4768 if (f.daemon_listen || f.inetd_wait_mode || queue_interval > 0)
4769   {
4770   if (mua_wrapper)
4771     {
4772     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
4773     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
4774       "mua_wrapper is set");
4775     }
4776
4777 # ifndef DISABLE_TLS
4778   /* This also checks that the library linkage is working and we can call
4779   routines in it, so call even if tls_require_ciphers is unset */
4780     {
4781 # ifdef MEASURE_TIMING
4782     struct timeval t0, diff;
4783     (void)gettimeofday(&t0, NULL);
4784 # endif
4785     if (!tls_dropprivs_validate_require_cipher(FALSE))
4786       exit(1);
4787 # ifdef MEASURE_TIMING
4788     report_time_since(&t0, US"validate_ciphers (delta)");
4789 # endif
4790     }
4791 #endif
4792
4793   daemon_go();
4794   }
4795
4796 /* If the sender ident has not been set (by a trusted caller) set it to
4797 the caller. This will get overwritten below for an inetd call. If a trusted
4798 caller has set it empty, unset it. */
4799
4800 if (!sender_ident) sender_ident = originator_login;
4801 else if (!*sender_ident) sender_ident = NULL;
4802
4803 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
4804 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
4805 originator_* variables set. */
4806
4807 if (test_rewrite_arg >= 0)
4808   {
4809   f.really_exim = FALSE;
4810   if (test_rewrite_arg >= argc)
4811     {
4812     printf("-brw needs an address argument\n");
4813     exim_exit(EXIT_FAILURE, US"main");
4814     }
4815   rewrite_test(argv[test_rewrite_arg]);
4816   exim_exit(EXIT_SUCCESS, US"main");
4817   }
4818
4819 /* A locally-supplied message is considered to be coming from a local user
4820 unless a trusted caller supplies a sender address with -f, or is passing in the
4821 message via SMTP (inetd invocation or otherwise). */
4822
4823 if (  !sender_address && !smtp_input
4824    || !f.trusted_caller && filter_test == FTEST_NONE)
4825   {
4826   f.sender_local = TRUE;
4827
4828   /* A trusted caller can supply authenticated_sender and authenticated_id
4829   via -oMas and -oMai and if so, they will already be set. Otherwise, force
4830   defaults except when host checking. */
4831
4832   if (!authenticated_sender && !host_checking)
4833     authenticated_sender = string_sprintf("%s@%s", originator_login,
4834       qualify_domain_sender);
4835   if (!authenticated_id && !host_checking)
4836     authenticated_id = originator_login;
4837   }
4838
4839 /* Trusted callers are always permitted to specify the sender address.
4840 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
4841 is specified is the empty address. However, if a trusted caller does not
4842 specify a sender address for SMTP input, we leave sender_address unset. This
4843 causes the MAIL commands to be honoured. */
4844
4845 if (  !smtp_input && !sender_address
4846    || !receive_check_set_sender(sender_address))
4847   {
4848   /* Either the caller is not permitted to set a general sender, or this is
4849   non-SMTP input and the trusted caller has not set a sender. If there is no
4850   sender, or if a sender other than <> is set, override with the originator's
4851   login (which will get qualified below), except when checking things. */
4852
4853   if (sender_address == NULL             /* No sender_address set */
4854        ||                                /*         OR            */
4855        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
4856        !checking))                       /* Not running tests, including filter tests */
4857     {
4858     sender_address = originator_login;
4859     f.sender_address_forced = FALSE;
4860     sender_address_domain = 0;
4861     }
4862   }
4863
4864 /* Remember whether an untrusted caller set the sender address */
4865
4866 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
4867
4868 /* Ensure that the sender address is fully qualified unless it is the empty
4869 address, which indicates an error message, or doesn't exist (root caller, smtp
4870 interface, no -f argument). */
4871
4872 if (sender_address && *sender_address && sender_address_domain == 0)
4873   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
4874     qualify_domain_sender);
4875
4876 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
4877
4878 /* Handle a request to verify a list of addresses, or test them for delivery.
4879 This must follow the setting of the sender address, since routers can be
4880 predicated upon the sender. If no arguments are given, read addresses from
4881 stdin. Set debug_level to at least D_v to get full output for address testing.
4882 */
4883
4884 if (verify_address_mode || f.address_test_mode)
4885   {
4886   int exit_value = 0;
4887   int flags = vopt_qualify;
4888
4889   if (verify_address_mode)
4890     {
4891     if (!verify_as_sender) flags |= vopt_is_recipient;
4892     DEBUG(D_verify) debug_print_ids(US"Verifying:");
4893     }
4894
4895   else
4896     {
4897     flags |= vopt_is_recipient;
4898     debug_selector |= D_v;
4899     debug_file = stderr;
4900     debug_fd = fileno(debug_file);
4901     DEBUG(D_verify) debug_print_ids(US"Address testing:");
4902     }
4903
4904   if (recipients_arg < argc)
4905     {
4906     while (recipients_arg < argc)
4907       {
4908       /* Supplied addresses are tainted since they come from a user */
4909       uschar * s = string_copy_taint(argv[recipients_arg++], TRUE);
4910       while (*s)
4911         {
4912         BOOL finished = FALSE;
4913         uschar *ss = parse_find_address_end(s, FALSE);
4914         if (*ss == ',') *ss = 0; else finished = TRUE;
4915         test_address(s, flags, &exit_value);
4916         s = ss;
4917         if (!finished)
4918           while (*++s == ',' || isspace(*s)) ;
4919         }
4920       }
4921     }
4922
4923   else for (;;)
4924     {
4925     uschar * s = get_stdinput(NULL, NULL);
4926     if (!s) break;
4927     test_address(string_copy_taint(s, TRUE), flags, &exit_value);
4928     }
4929
4930   route_tidyup();
4931   exim_exit(exit_value, US"main");
4932   }
4933
4934 /* Handle expansion checking. Either expand items on the command line, or read
4935 from stdin if there aren't any. If -Mset was specified, load the message so
4936 that its variables can be used, but restrict this facility to admin users.
4937 Otherwise, if -bem was used, read a message from stdin. */
4938
4939 if (expansion_test)
4940   {
4941   dns_init(FALSE, FALSE, FALSE);
4942   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
4943     {
4944     uschar spoolname[256];  /* Not big_buffer; used in spool_read_header() */
4945     if (!f.admin_user)
4946       exim_fail("exim: permission denied\n");
4947     message_id = argv[msg_action_arg];
4948     (void)string_format(spoolname, sizeof(spoolname), "%s-H", message_id);
4949     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
4950       printf ("Failed to load message datafile %s\n", message_id);
4951     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
4952       printf ("Failed to load message %s\n", message_id);
4953     }
4954
4955   /* Read a test message from a file. We fudge it up to be on stdin, saving
4956   stdin itself for later reading of expansion strings. */
4957
4958   else if (expansion_test_message)
4959     {
4960     int save_stdin = dup(0);
4961     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
4962     if (fd < 0)
4963       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
4964         strerror(errno));
4965     (void) dup2(fd, 0);
4966     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
4967     message_ended = END_NOTENDED;
4968     read_message_body(receive_msg(extract_recipients));
4969     message_linecount += body_linecount;
4970     (void)dup2(save_stdin, 0);
4971     (void)close(save_stdin);
4972     clearerr(stdin);               /* Required by Darwin */
4973     }
4974
4975   /* Only admin users may see config-file macros this way */
4976
4977   if (!f.admin_user) macros_user = macros = mlast = NULL;
4978
4979   /* Allow $recipients for this testing */
4980
4981   f.enable_dollar_recipients = TRUE;
4982
4983   /* Expand command line items */
4984
4985   if (recipients_arg < argc)
4986     while (recipients_arg < argc)
4987       expansion_test_line(argv[recipients_arg++]);
4988
4989   /* Read stdin */
4990
4991   else
4992     {
4993     char *(*fn_readline)(const char *) = NULL;
4994     void (*fn_addhist)(const char *) = NULL;
4995     uschar * s;
4996
4997 #ifdef USE_READLINE
4998     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
4999 #endif
5000
5001     while (s = get_stdinput(fn_readline, fn_addhist))
5002       expansion_test_line(s);
5003
5004 #ifdef USE_READLINE
5005     if (dlhandle) dlclose(dlhandle);
5006 #endif
5007     }
5008
5009   /* The data file will be open after -Mset */
5010
5011   if (deliver_datafile >= 0)
5012     {
5013     (void)close(deliver_datafile);
5014     deliver_datafile = -1;
5015     }
5016
5017   exim_exit(EXIT_SUCCESS, US"main: expansion test");
5018   }
5019
5020
5021 /* The active host name is normally the primary host name, but it can be varied
5022 for hosts that want to play several parts at once. We need to ensure that it is
5023 set for host checking, and for receiving messages. */
5024
5025 smtp_active_hostname = primary_hostname;
5026 if (raw_active_hostname != NULL)
5027   {
5028   uschar *nah = expand_string(raw_active_hostname);
5029   if (nah == NULL)
5030     {
5031     if (!f.expand_string_forcedfail)
5032       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5033         "(smtp_active_hostname): %s", raw_active_hostname,
5034         expand_string_message);
5035     }
5036   else if (nah[0] != 0) smtp_active_hostname = nah;
5037   }
5038
5039 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5040 given IP address so that the blocking and relay configuration can be tested.
5041 Unless a sender_ident was set by -oMt, we discard it (the default is the
5042 caller's login name). An RFC 1413 call is made only if we are running in the
5043 test harness and an incoming interface and both ports are specified, because
5044 there is no TCP/IP call to find the ident for. */
5045
5046 if (host_checking)
5047   {
5048   int x[4];
5049   int size;
5050
5051   if (!sender_ident_set)
5052     {
5053     sender_ident = NULL;
5054     if (f.running_in_test_harness && sender_host_port
5055        && interface_address && interface_port)
5056       verify_get_ident(1223);           /* note hardwired port number */
5057     }
5058
5059   /* In case the given address is a non-canonical IPv6 address, canonicalize
5060   it. The code works for both IPv4 and IPv6, as it happens. */
5061
5062   size = host_aton(sender_host_address, x);
5063   sender_host_address = store_get(48, FALSE);  /* large enough for full IPv6 */
5064   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5065
5066   /* Now set up for testing */
5067
5068   host_build_sender_fullhost();
5069   smtp_input = TRUE;
5070   smtp_in = stdin;
5071   smtp_out = stdout;
5072   f.sender_local = FALSE;
5073   f.sender_host_notsocket = TRUE;
5074   debug_file = stderr;
5075   debug_fd = fileno(debug_file);
5076   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5077     "**** but without any ident (RFC 1413) callback.\n"
5078     "**** This is not for real!\n\n",
5079       sender_host_address);
5080
5081   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5082   if (verify_check_host(&hosts_connection_nolog) == OK)
5083     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5084   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5085
5086   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5087   because a log line has already been written for all its failure exists
5088   (usually "connection refused: <reason>") and writing another one is
5089   unnecessary clutter. */
5090
5091   if (smtp_start_session())
5092     {
5093     for (; (reset_point = store_mark()); store_reset(reset_point))
5094       {
5095       if (smtp_setup_msg() <= 0) break;
5096       if (!receive_msg(FALSE)) break;
5097
5098       return_path = sender_address = NULL;
5099       dnslist_domain = dnslist_matched = NULL;
5100 #ifndef DISABLE_DKIM
5101       dkim_cur_signer = NULL;
5102 #endif
5103       acl_var_m = NULL;
5104       deliver_localpart_orig = NULL;
5105       deliver_domain_orig = NULL;
5106       callout_address = sending_ip_address = NULL;
5107       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5108       }
5109     smtp_log_no_mail();
5110     }
5111   exim_exit(EXIT_SUCCESS, US"main");
5112   }
5113
5114
5115 /* Arrange for message reception if recipients or SMTP were specified;
5116 otherwise complain unless a version print (-bV) happened or this is a filter
5117 verification test or info dump.
5118 In the former case, show the configuration file name. */
5119
5120 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5121   {
5122   if (version_printed)
5123     {
5124     if (Ustrchr(config_main_filelist, ':'))
5125       printf("Configuration file search path is %s\n", config_main_filelist);
5126     printf("Configuration file is %s\n", config_main_filename);
5127     return EXIT_SUCCESS;
5128     }
5129
5130   if (info_flag != CMDINFO_NONE)
5131     {
5132     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5133     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5134     }
5135
5136   if (filter_test == FTEST_NONE)
5137     exim_usage(called_as);
5138   }
5139
5140
5141 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5142 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5143 that we are not called from inetd, because that is rejected above. The
5144 following configuration settings are forced here:
5145
5146   (1) Synchronous delivery (-odi)
5147   (2) Errors to stderr (-oep == -oeq)
5148   (3) No parallel remote delivery
5149   (4) Unprivileged delivery
5150
5151 We don't force overall queueing options because there are several of them;
5152 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5153 to override any SMTP queueing. */
5154
5155 if (mua_wrapper)
5156   {
5157   f.synchronous_delivery = TRUE;
5158   arg_error_handling = ERRORS_STDERR;
5159   remote_max_parallel = 1;
5160   deliver_drop_privilege = TRUE;
5161   f.queue_smtp = FALSE;
5162   queue_smtp_domains = NULL;
5163 #ifdef SUPPORT_I18N
5164   message_utf8_downconvert = -1;        /* convert-if-needed */
5165 #endif
5166   }
5167
5168
5169 /* Prepare to accept one or more new messages on the standard input. When a
5170 message has been read, its id is returned in message_id[]. If doing immediate
5171 delivery, we fork a delivery process for each received message, except for the
5172 last one, where we can save a process switch.
5173
5174 It is only in non-smtp mode that error_handling is allowed to be changed from
5175 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5176 sendmail error modes other than -oem ever actually used? Later: yes.) */
5177
5178 if (!smtp_input) error_handling = arg_error_handling;
5179
5180 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5181 logging being sent down the socket and make an identd call to get the
5182 sender_ident. */
5183
5184 else if (f.is_inetd)
5185   {
5186   (void)fclose(stderr);
5187   exim_nullstd();                       /* Re-open to /dev/null */
5188   verify_get_ident(IDENT_PORT);
5189   host_build_sender_fullhost();
5190   set_process_info("handling incoming connection from %s via inetd",
5191     sender_fullhost);
5192   }
5193
5194 /* If the sender host address has been set, build sender_fullhost if it hasn't
5195 already been done (which it will have been for inetd). This caters for the
5196 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5197 so that the test for IP options is skipped for -bs input. */
5198
5199 if (sender_host_address && !sender_fullhost)
5200   {
5201   host_build_sender_fullhost();
5202   set_process_info("handling incoming connection from %s via -oMa",
5203     sender_fullhost);
5204   f.sender_host_notsocket = TRUE;
5205   }
5206
5207 /* Otherwise, set the sender host as unknown except for inetd calls. This
5208 prevents host checking in the case of -bs not from inetd and also for -bS. */
5209
5210 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5211
5212 /* If stdout does not exist, then dup stdin to stdout. This can happen
5213 if exim is started from inetd. In this case fd 0 will be set to the socket,
5214 but fd 1 will not be set. This also happens for passed SMTP channels. */
5215
5216 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5217
5218 /* Set up the incoming protocol name and the state of the program. Root is
5219 allowed to force received protocol via the -oMr option above. If we have come
5220 via inetd, the process info has already been set up. We don't set
5221 received_protocol here for smtp input, as it varies according to
5222 batch/HELO/EHLO/AUTH/TLS. */
5223
5224 if (smtp_input)
5225   {
5226   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5227     smtp_batched_input? "batched " : "",
5228     (sender_address!= NULL)? sender_address : originator_login);
5229   }
5230 else
5231   {
5232   int old_pool = store_pool;
5233   store_pool = POOL_PERM;
5234   if (!received_protocol)
5235     received_protocol = string_sprintf("local%s", called_as);
5236   store_pool = old_pool;
5237   set_process_info("accepting a local non-SMTP message from <%s>",
5238     sender_address);
5239   }
5240
5241 /* Initialize the session_local_queue-only flag (this will be ignored if
5242 mua_wrapper is set) */
5243
5244 queue_check_only();
5245 session_local_queue_only = queue_only;
5246
5247 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5248 the spool if so configured. On failure, we must not attempt to send an error
5249 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5250 error code is given.) */
5251
5252 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5253   exim_fail("exim: insufficient disk space\n");
5254
5255 /* If this is smtp input of any kind, real or batched, handle the start of the
5256 SMTP session.
5257
5258 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5259 because a log line has already been written for all its failure exists
5260 (usually "connection refused: <reason>") and writing another one is
5261 unnecessary clutter. */
5262
5263 if (smtp_input)
5264   {
5265   smtp_in = stdin;
5266   smtp_out = stdout;
5267   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5268   if (verify_check_host(&hosts_connection_nolog) == OK)
5269     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5270   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5271   if (!smtp_start_session())
5272     {
5273     mac_smtp_fflush();
5274     exim_exit(EXIT_SUCCESS, US"smtp_start toplevel");
5275     }
5276   }
5277
5278 /* Otherwise, set up the input size limit here. */
5279
5280 else
5281   {
5282   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5283   if (expand_string_message)
5284     if (thismessage_size_limit == -1)
5285       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5286         "message_size_limit: %s", expand_string_message);
5287     else
5288       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5289         "message_size_limit: %s", expand_string_message);
5290   }
5291
5292 /* Loop for several messages when reading SMTP input. If we fork any child
5293 processes, we don't want to wait for them unless synchronous delivery is
5294 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5295 same as SIG_DFL, despite the fact that documentation often lists the default as
5296 "ignore". This is a confusing area. This is what I know:
5297
5298 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5299 processes that complete simply to go away without ever becoming defunct. You
5300 can't then wait for them - but we don't want to wait for them in the
5301 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5302 happen for all OS (e.g. *BSD is different).
5303
5304 But that's not the end of the story. Some (many? all?) systems have the
5305 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5306 has by default, so it seems that the difference is merely one of default
5307 (compare restarting vs non-restarting signals).
5308
5309 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5310 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5311 of the loop below. Paranoia rules.
5312
5313 February 2003: That's *still* not the end of the story. There are now versions
5314 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5315 process then calls waitpid(), a grumble is written to the system log, because
5316 this is logically inconsistent. In other words, it doesn't like the paranoia.
5317 As a consequence of this, the waitpid() below is now excluded if we are sure
5318 that SIG_IGN works. */
5319
5320 if (!f.synchronous_delivery)
5321   {
5322   #ifdef SA_NOCLDWAIT
5323   struct sigaction act;
5324   act.sa_handler = SIG_IGN;
5325   sigemptyset(&(act.sa_mask));
5326   act.sa_flags = SA_NOCLDWAIT;
5327   sigaction(SIGCHLD, &act, NULL);
5328   #else
5329   signal(SIGCHLD, SIG_IGN);
5330   #endif
5331   }
5332
5333 /* Save the current store pool point, for resetting at the start of
5334 each message, and save the real sender address, if any. */
5335
5336 real_sender_address = sender_address;
5337
5338 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5339 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5340 collapsed). */
5341
5342 while (more)
5343   {
5344   reset_point = store_mark();
5345   message_id[0] = 0;
5346
5347   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5348   input and build the recipients list, before calling receive_msg() to read the
5349   message proper. Whatever sender address is given in the SMTP transaction is
5350   often ignored for local senders - we use the actual sender, which is normally
5351   either the underlying user running this process or a -f argument provided by
5352   a trusted caller. It is saved in real_sender_address. The test for whether to
5353   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5354
5355   if (smtp_input)
5356     {
5357     int rc;
5358     if ((rc = smtp_setup_msg()) > 0)
5359       {
5360       if (real_sender_address != NULL &&
5361           !receive_check_set_sender(sender_address))
5362         {
5363         sender_address = raw_sender = real_sender_address;
5364         sender_address_unrewritten = NULL;
5365         }
5366
5367       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5368       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5369       the very end. The result of the ACL is ignored (as for other non-SMTP
5370       messages). It is run for its potential side effects. */
5371
5372       if (smtp_batched_input && acl_not_smtp_start != NULL)
5373         {
5374         uschar *user_msg, *log_msg;
5375         f.enable_dollar_recipients = TRUE;
5376         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5377           &user_msg, &log_msg);
5378         f.enable_dollar_recipients = FALSE;
5379         }
5380
5381       /* Now get the data for the message */
5382
5383       more = receive_msg(extract_recipients);
5384       if (message_id[0] == 0)
5385         {
5386         cancel_cutthrough_connection(TRUE, US"receive dropped");
5387         if (more) goto moreloop;
5388         smtp_log_no_mail();               /* Log no mail if configured */
5389         exim_exit(EXIT_FAILURE, US"receive toplevel");
5390         }
5391       }
5392     else
5393       {
5394       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5395       smtp_log_no_mail();               /* Log no mail if configured */
5396       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS, US"msg setup toplevel");
5397       }
5398     }
5399
5400   /* In the non-SMTP case, we have all the information from the command
5401   line, but must process it in case it is in the more general RFC822
5402   format, and in any case, to detect syntax errors. Also, it appears that
5403   the use of comma-separated lists as single arguments is common, so we
5404   had better support them. */
5405
5406   else
5407     {
5408     int rcount = 0;
5409     int count = argc - recipients_arg;
5410     uschar **list = argv + recipients_arg;
5411
5412     /* These options cannot be changed dynamically for non-SMTP messages */
5413
5414     f.active_local_sender_retain = local_sender_retain;
5415     f.active_local_from_check = local_from_check;
5416
5417     /* Save before any rewriting */
5418
5419     raw_sender = string_copy(sender_address);
5420
5421     /* Loop for each argument (supplied by user hence tainted) */
5422
5423     for (int i = 0; i < count; i++)
5424       {
5425       int start, end, domain;
5426       uschar * errmess;
5427       uschar * s = string_copy_taint(list[i], TRUE);
5428
5429       /* Loop for each comma-separated address */
5430
5431       while (*s != 0)
5432         {
5433         BOOL finished = FALSE;
5434         uschar *recipient;
5435         uschar *ss = parse_find_address_end(s, FALSE);
5436
5437         if (*ss == ',') *ss = 0; else finished = TRUE;
5438
5439         /* Check max recipients - if -t was used, these aren't recipients */
5440
5441         if (recipients_max > 0 && ++rcount > recipients_max &&
5442             !extract_recipients)
5443           if (error_handling == ERRORS_STDERR)
5444             {
5445             fprintf(stderr, "exim: too many recipients\n");
5446             exim_exit(EXIT_FAILURE, US"main");
5447             }
5448           else
5449             return
5450               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5451                 errors_sender_rc : EXIT_FAILURE;
5452
5453 #ifdef SUPPORT_I18N
5454         {
5455         BOOL b = allow_utf8_domains;
5456         allow_utf8_domains = TRUE;
5457 #endif
5458         recipient =
5459           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5460
5461 #ifdef SUPPORT_I18N
5462         if (string_is_utf8(recipient))
5463           message_smtputf8 = TRUE;
5464         else
5465           allow_utf8_domains = b;
5466         }
5467 #endif
5468         if (domain == 0 && !f.allow_unqualified_recipient)
5469           {
5470           recipient = NULL;
5471           errmess = US"unqualified recipient address not allowed";
5472           }
5473
5474         if (recipient == NULL)
5475           {
5476           if (error_handling == ERRORS_STDERR)
5477             {
5478             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5479               string_printing(list[i]), errmess);
5480             exim_exit(EXIT_FAILURE, US"main");
5481             }
5482           else
5483             {
5484             error_block eblock;
5485             eblock.next = NULL;
5486             eblock.text1 = string_printing(list[i]);
5487             eblock.text2 = errmess;
5488             return
5489               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5490                 errors_sender_rc : EXIT_FAILURE;
5491             }
5492           }
5493
5494         receive_add_recipient(string_copy_taint(recipient, TRUE), -1);
5495         s = ss;
5496         if (!finished)
5497           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5498         }
5499       }
5500
5501     /* Show the recipients when debugging */
5502
5503     DEBUG(D_receive)
5504       {
5505       if (sender_address != NULL) debug_printf("Sender: %s\n", sender_address);
5506       if (recipients_list != NULL)
5507         {
5508         debug_printf("Recipients:\n");
5509         for (int i = 0; i < recipients_count; i++)
5510           debug_printf("  %s\n", recipients_list[i].address);
5511         }
5512       }
5513
5514     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5515     ignored; rejecting here would just add complication, and it can just as
5516     well be done later. Allow $recipients to be visible in the ACL. */
5517
5518     if (acl_not_smtp_start)
5519       {
5520       uschar *user_msg, *log_msg;
5521       f.enable_dollar_recipients = TRUE;
5522       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5523         &user_msg, &log_msg);
5524       f.enable_dollar_recipients = FALSE;
5525       }
5526
5527     /* Pause for a while waiting for input.  If none received in that time,
5528     close the logfile, if we had one open; then if we wait for a long-running
5529     datasource (months, in one use-case) log rotation will not leave us holding
5530     the file copy. */
5531
5532     if (!receive_timeout)
5533       {
5534       struct timeval t = { .tv_sec = 30*60, .tv_usec = 0 };     /* 30 minutes */
5535       fd_set r;
5536
5537       FD_ZERO(&r); FD_SET(0, &r);
5538       if (select(1, &r, NULL, NULL, &t) == 0) mainlog_close();
5539       }
5540
5541     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5542     will just read the headers for the message, and not write anything onto the
5543     spool. */
5544
5545     message_ended = END_NOTENDED;
5546     more = receive_msg(extract_recipients);
5547
5548     /* more is always FALSE here (not SMTP message) when reading a message
5549     for real; when reading the headers of a message for filter testing,
5550     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5551
5552     if (message_id[0] == 0) exim_exit(EXIT_FAILURE, US"main");
5553     }  /* Non-SMTP message reception */
5554
5555   /* If this is a filter testing run, there are headers in store, but
5556   no message on the spool. Run the filtering code in testing mode, setting
5557   the domain to the qualify domain and the local part to the current user,
5558   unless they have been set by options. The prefix and suffix are left unset
5559   unless specified. The the return path is set to to the sender unless it has
5560   already been set from a return-path header in the message. */
5561
5562   if (filter_test != FTEST_NONE)
5563     {
5564     deliver_domain = (ftest_domain != NULL)?
5565       ftest_domain : qualify_domain_recipient;
5566     deliver_domain_orig = deliver_domain;
5567     deliver_localpart = (ftest_localpart != NULL)?
5568       ftest_localpart : originator_login;
5569     deliver_localpart_orig = deliver_localpart;
5570     deliver_localpart_prefix = ftest_prefix;
5571     deliver_localpart_suffix = ftest_suffix;
5572     deliver_home = originator_home;
5573
5574     if (return_path == NULL)
5575       {
5576       printf("Return-path copied from sender\n");
5577       return_path = string_copy(sender_address);
5578       }
5579     else
5580       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5581     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5582
5583     receive_add_recipient(
5584       string_sprintf("%s%s%s@%s",
5585         (ftest_prefix == NULL)? US"" : ftest_prefix,
5586         deliver_localpart,
5587         (ftest_suffix == NULL)? US"" : ftest_suffix,
5588         deliver_domain), -1);
5589
5590     printf("Recipient   = %s\n", recipients_list[0].address);
5591     if (ftest_prefix != NULL) printf("Prefix    = %s\n", ftest_prefix);
5592     if (ftest_suffix != NULL) printf("Suffix    = %s\n", ftest_suffix);
5593
5594     if (chdir("/"))   /* Get away from wherever the user is running this from */
5595       {
5596       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5597       exim_exit(EXIT_FAILURE, US"main");
5598       }
5599
5600     /* Now we run either a system filter test, or a user filter test, or both.
5601     In the latter case, headers added by the system filter will persist and be
5602     available to the user filter. We need to copy the filter variables
5603     explicitly. */
5604
5605     if ((filter_test & FTEST_SYSTEM) != 0)
5606       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5607         exim_exit(EXIT_FAILURE, US"main");
5608
5609     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5610
5611     if ((filter_test & FTEST_USER) != 0)
5612       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5613         exim_exit(EXIT_FAILURE, US"main");
5614
5615     exim_exit(EXIT_SUCCESS, US"main");
5616     }
5617
5618   /* Else act on the result of message reception. We should not get here unless
5619   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5620   will be TRUE. If it is not, check on the number of messages received in this
5621   connection. */
5622
5623   if (!session_local_queue_only &&
5624       smtp_accept_queue_per_connection > 0 &&
5625       receive_messagecount > smtp_accept_queue_per_connection)
5626     {
5627     session_local_queue_only = TRUE;
5628     queue_only_reason = 2;
5629     }
5630
5631   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5632   and queue_only_load is set, check that the load average is below it. If it is
5633   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5634   default), we put the whole session into queue_only mode. It then remains this
5635   way for any subsequent messages on the same SMTP connection. This is a
5636   deliberate choice; even though the load average may fall, it doesn't seem
5637   right to deliver later messages on the same call when not delivering earlier
5638   ones. However, there are odd cases where this is not wanted, so this can be
5639   changed by setting queue_only_load_latch false. */
5640
5641   local_queue_only = session_local_queue_only;
5642   if (!local_queue_only && queue_only_load >= 0)
5643     {
5644     local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load;
5645     if (local_queue_only)
5646       {
5647       queue_only_reason = 3;
5648       if (queue_only_load_latch) session_local_queue_only = TRUE;
5649       }
5650     }
5651
5652   /* If running as an MUA wrapper, all queueing options and freezing options
5653   are ignored. */
5654
5655   if (mua_wrapper)
5656     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
5657
5658   /* Log the queueing here, when it will get a message id attached, but
5659   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
5660   connections). */
5661
5662   if (local_queue_only)
5663     {
5664     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5665     switch(queue_only_reason)
5666       {
5667       case 2:
5668         log_write(L_delay_delivery,
5669                 LOG_MAIN, "no immediate delivery: more than %d messages "
5670           "received in one connection", smtp_accept_queue_per_connection);
5671         break;
5672
5673       case 3:
5674         log_write(L_delay_delivery,
5675                 LOG_MAIN, "no immediate delivery: load average %.2f",
5676                 (double)load_average/1000.0);
5677       break;
5678       }
5679     }
5680
5681   else if (f.queue_only_policy || f.deliver_freeze)
5682     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5683
5684   /* Else do the delivery unless the ACL or local_scan() called for queue only
5685   or froze the message. Always deliver in a separate process. A fork failure is
5686   not a disaster, as the delivery will eventually happen on a subsequent queue
5687   run. The search cache must be tidied before the fork, as the parent will
5688   do it before exiting. The child will trigger a lookup failure and
5689   thereby defer the delivery if it tries to use (for example) a cached ldap
5690   connection that the parent has called unbind on. */
5691
5692   else
5693     {
5694     pid_t pid;
5695     search_tidyup();
5696
5697     if ((pid = fork()) == 0)
5698       {
5699       int rc;
5700       close_unwanted();      /* Close unwanted file descriptors and TLS */
5701       exim_nullstd();        /* Ensure std{in,out,err} exist */
5702
5703       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
5704       mode, deliver_drop_privilege is forced TRUE). */
5705
5706       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
5707         {
5708         delivery_re_exec(CEE_EXEC_EXIT);
5709         /* Control does not return here. */
5710         }
5711
5712       /* No need to re-exec */
5713
5714       rc = deliver_message(message_id, FALSE, FALSE);
5715       search_tidyup();
5716       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
5717         ? EXIT_SUCCESS : EXIT_FAILURE);
5718       }
5719
5720     if (pid < 0)
5721       {
5722       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
5723       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
5724         "process: %s", strerror(errno));
5725       }
5726     else
5727       {
5728       release_cutthrough_connection(US"msg passed for delivery");
5729
5730       /* In the parent, wait if synchronous delivery is required. This will
5731       always be the case in MUA wrapper mode. */
5732
5733       if (f.synchronous_delivery)
5734         {
5735         int status;
5736         while (wait(&status) != pid);
5737         if ((status & 0x00ff) != 0)
5738           log_write(0, LOG_MAIN|LOG_PANIC,
5739             "process %d crashed with signal %d while delivering %s",
5740             (int)pid, status & 0x00ff, message_id);
5741         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE, US"main");
5742         }
5743       }
5744     }
5745
5746   /* The loop will repeat if more is TRUE. If we do not know know that the OS
5747   automatically reaps children (see comments above the loop), clear away any
5748   finished subprocesses here, in case there are lots of messages coming in
5749   from the same source. */
5750
5751   #ifndef SIG_IGN_WORKS
5752   while (waitpid(-1, NULL, WNOHANG) > 0);
5753   #endif
5754
5755 moreloop:
5756   return_path = sender_address = NULL;
5757   authenticated_sender = NULL;
5758   deliver_localpart_orig = NULL;
5759   deliver_domain_orig = NULL;
5760   deliver_host = deliver_host_address = NULL;
5761   dnslist_domain = dnslist_matched = NULL;
5762 #ifdef WITH_CONTENT_SCAN
5763   malware_name = NULL;
5764 #endif
5765   callout_address = NULL;
5766   sending_ip_address = NULL;
5767   acl_var_m = NULL;
5768   for(int i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
5769
5770   store_reset(reset_point);
5771   }
5772
5773 exim_exit(EXIT_SUCCESS, US"main");   /* Never returns */
5774 return 0;                  /* To stop compiler warning */
5775 }
5776
5777
5778 /* End of exim.c */