tidying
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8
9 /* The main function: entry point, initialization, and high-level control.
10 Also a few functions that don't naturally fit elsewhere. */
11
12
13 #include "exim.h"
14
15 #if defined(__GLIBC__) && !defined(__UCLIBC__)
16 # include <gnu/libc-version.h>
17 #endif
18
19 #ifdef USE_GNUTLS
20 # include <gnutls/gnutls.h>
21 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
22 #  define DISABLE_OCSP
23 # endif
24 #endif
25
26 #ifndef _TIME_H
27 # include <time.h>
28 #endif
29
30 extern void init_lookup_list(void);
31
32
33
34 /*************************************************
35 *      Function interface to store functions     *
36 *************************************************/
37
38 /* We need some real functions to pass to the PCRE regular expression library
39 for store allocation via Exim's store manager. The normal calls are actually
40 macros that pass over location information to make tracing easier. These
41 functions just interface to the standard macro calls. A good compiler will
42 optimize out the tail recursion and so not make them too expensive. There
43 are two sets of functions; one for use when we want to retain the compiled
44 regular expression for a long time; the other for short-term use. */
45
46 static void *
47 function_store_get(size_t size)
48 {
49 /* For now, regard all RE results as potentially tainted.  We might need
50 more intelligence on this point. */
51 return store_get((int)size, TRUE);
52 }
53
54 static void
55 function_dummy_free(void *block) { block = block; }
56
57 static void *
58 function_store_malloc(size_t size)
59 {
60 return store_malloc((int)size);
61 }
62
63 static void
64 function_store_free(void *block)
65 {
66 store_free(block);
67 }
68
69
70
71
72 /*************************************************
73 *         Enums for cmdline interface            *
74 *************************************************/
75
76 enum commandline_info { CMDINFO_NONE=0,
77   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
78
79
80
81
82 /*************************************************
83 *  Compile regular expression and panic on fail  *
84 *************************************************/
85
86 /* This function is called when failure to compile a regular expression leads
87 to a panic exit. In other cases, pcre_compile() is called directly. In many
88 cases where this function is used, the results of the compilation are to be
89 placed in long-lived store, so we temporarily reset the store management
90 functions that PCRE uses if the use_malloc flag is set.
91
92 Argument:
93   pattern     the pattern to compile
94   caseless    TRUE if caseless matching is required
95   use_malloc  TRUE if compile into malloc store
96
97 Returns:      pointer to the compiled pattern
98 */
99
100 const pcre *
101 regex_must_compile(const uschar *pattern, BOOL caseless, BOOL use_malloc)
102 {
103 int offset;
104 int options = PCRE_COPT;
105 const pcre *yield;
106 const uschar *error;
107 if (use_malloc)
108   {
109   pcre_malloc = function_store_malloc;
110   pcre_free = function_store_free;
111   }
112 if (caseless) options |= PCRE_CASELESS;
113 yield = pcre_compile(CCS pattern, options, CCSS &error, &offset, NULL);
114 pcre_malloc = function_store_get;
115 pcre_free = function_dummy_free;
116 if (yield == NULL)
117   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
118     "%s at offset %d while compiling %s", error, offset, pattern);
119 return yield;
120 }
121
122
123
124
125 /*************************************************
126 *   Execute regular expression and set strings   *
127 *************************************************/
128
129 /* This function runs a regular expression match, and sets up the pointers to
130 the matched substrings.
131
132 Arguments:
133   re          the compiled expression
134   subject     the subject string
135   options     additional PCRE options
136   setup       if < 0 do full setup
137               if >= 0 setup from setup+1 onwards,
138                 excluding the full matched string
139
140 Returns:      TRUE or FALSE
141 */
142
143 BOOL
144 regex_match_and_setup(const pcre *re, const uschar *subject, int options, int setup)
145 {
146 int ovector[3*(EXPAND_MAXN+1)];
147 uschar * s = string_copy(subject);      /* de-constifying */
148 int n = pcre_exec(re, NULL, CS s, Ustrlen(s), 0,
149   PCRE_EOPT | options, ovector, nelem(ovector));
150 BOOL yield = n >= 0;
151 if (n == 0) n = EXPAND_MAXN + 1;
152 if (yield)
153   {
154   expand_nmax = setup < 0 ? 0 : setup + 1;
155   for (int nn = setup < 0 ? 0 : 2; nn < n*2; nn += 2)
156     {
157     expand_nstring[expand_nmax] = s + ovector[nn];
158     expand_nlength[expand_nmax++] = ovector[nn+1] - ovector[nn];
159     }
160   expand_nmax--;
161   }
162 return yield;
163 }
164
165
166
167
168 /*************************************************
169 *            Set up processing details           *
170 *************************************************/
171
172 /* Save a text string for dumping when SIGUSR1 is received.
173 Do checks for overruns.
174
175 Arguments: format and arguments, as for printf()
176 Returns:   nothing
177 */
178
179 void
180 set_process_info(const char *format, ...)
181 {
182 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
183 gstring * g;
184 int len;
185 va_list ap;
186
187 g = string_fmt_append(&gs, "%5d ", (int)getpid());
188 len = g->ptr;
189 va_start(ap, format);
190 if (!string_vformat(g, 0, format, ap))
191   {
192   gs.ptr = len;
193   g = string_cat(&gs, US"**** string overflowed buffer ****");
194   }
195 g = string_catn(g, US"\n", 1);
196 string_from_gstring(g);
197 process_info_len = g->ptr;
198 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
199 va_end(ap);
200 }
201
202 /***********************************************
203 *            Handler for SIGTERM               *
204 ***********************************************/
205
206 static void
207 term_handler(int sig)
208 {
209 exit(1);
210 }
211
212
213 /*************************************************
214 *             Handler for SIGUSR1                *
215 *************************************************/
216
217 /* SIGUSR1 causes any exim process to write to the process log details of
218 what it is currently doing. It will only be used if the OS is capable of
219 setting up a handler that causes automatic restarting of any system call
220 that is in progress at the time.
221
222 This function takes care to be signal-safe.
223
224 Argument: the signal number (SIGUSR1)
225 Returns:  nothing
226 */
227
228 static void
229 usr1_handler(int sig)
230 {
231 int fd;
232
233 os_restarting_signal(sig, usr1_handler);
234
235 if ((fd = Uopen(process_log_path, O_APPEND|O_WRONLY, LOG_MODE)) < 0)
236   {
237   /* If we are already running as the Exim user, try to create it in the
238   current process (assuming spool_directory exists). Otherwise, if we are
239   root, do the creation in an exim:exim subprocess. */
240
241   int euid = geteuid();
242   if (euid == exim_uid)
243     fd = Uopen(process_log_path, O_CREAT|O_APPEND|O_WRONLY, LOG_MODE);
244   else if (euid == root_uid)
245     fd = log_create_as_exim(process_log_path);
246   }
247
248 /* If we are neither exim nor root, or if we failed to create the log file,
249 give up. There is not much useful we can do with errors, since we don't want
250 to disrupt whatever is going on outside the signal handler. */
251
252 if (fd < 0) return;
253
254 (void)write(fd, process_info, process_info_len);
255 (void)close(fd);
256 }
257
258
259
260 /*************************************************
261 *             Timeout handler                    *
262 *************************************************/
263
264 /* This handler is enabled most of the time that Exim is running. The handler
265 doesn't actually get used unless alarm() has been called to set a timer, to
266 place a time limit on a system call of some kind. When the handler is run, it
267 re-enables itself.
268
269 There are some other SIGALRM handlers that are used in special cases when more
270 than just a flag setting is required; for example, when reading a message's
271 input. These are normally set up in the code module that uses them, and the
272 SIGALRM handler is reset to this one afterwards.
273
274 Argument: the signal value (SIGALRM)
275 Returns:  nothing
276 */
277
278 void
279 sigalrm_handler(int sig)
280 {
281 sig = sig;      /* Keep picky compilers happy */
282 sigalrm_seen = TRUE;
283 os_non_restarting_signal(SIGALRM, sigalrm_handler);
284 }
285
286
287
288 /*************************************************
289 *      Sleep for a fractional time interval      *
290 *************************************************/
291
292 /* This function is called by millisleep() and exim_wait_tick() to wait for a
293 period of time that may include a fraction of a second. The coding is somewhat
294 tedious. We do not expect setitimer() ever to fail, but if it does, the process
295 will wait for ever, so we panic in this instance. (There was a case of this
296 when a bug in a function that calls milliwait() caused it to pass invalid data.
297 That's when I added the check. :-)
298
299 We assume it to be not worth sleeping for under 50us; this value will
300 require revisiting as hardware advances.  This avoids the issue of
301 a zero-valued timer setting meaning "never fire".
302
303 Argument:  an itimerval structure containing the interval
304 Returns:   nothing
305 */
306
307 static void
308 milliwait(struct itimerval *itval)
309 {
310 sigset_t sigmask;
311 sigset_t old_sigmask;
312
313 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
314   return;
315 (void)sigemptyset(&sigmask);                           /* Empty mask */
316 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
317 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
318 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
319   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
320     "setitimer() failed: %s", strerror(errno));
321 (void)sigfillset(&sigmask);                            /* All signals */
322 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
323 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
324 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
325 }
326
327
328
329
330 /*************************************************
331 *         Millisecond sleep function             *
332 *************************************************/
333
334 /* The basic sleep() function has a granularity of 1 second, which is too rough
335 in some cases - for example, when using an increasing delay to slow down
336 spammers.
337
338 Argument:    number of millseconds
339 Returns:     nothing
340 */
341
342 void
343 millisleep(int msec)
344 {
345 struct itimerval itval = {.it_interval = {.tv_sec = 0, .tv_usec = 0},
346                           .it_value = {.tv_sec = msec/1000,
347                                        .tv_usec = (msec % 1000) * 1000}};
348 milliwait(&itval);
349 }
350
351
352
353 /*************************************************
354 *         Compare microsecond times              *
355 *************************************************/
356
357 /*
358 Arguments:
359   tv1         the first time
360   tv2         the second time
361
362 Returns:      -1, 0, or +1
363 */
364
365 static int
366 exim_tvcmp(struct timeval *t1, struct timeval *t2)
367 {
368 if (t1->tv_sec > t2->tv_sec) return +1;
369 if (t1->tv_sec < t2->tv_sec) return -1;
370 if (t1->tv_usec > t2->tv_usec) return +1;
371 if (t1->tv_usec < t2->tv_usec) return -1;
372 return 0;
373 }
374
375
376
377
378 /*************************************************
379 *          Clock tick wait function              *
380 *************************************************/
381
382 #ifdef _POSIX_MONOTONIC_CLOCK
383 /* Amount CLOCK_MONOTONIC is behind realtime, at startup. */
384 static struct timespec offset_ts;
385
386 static void
387 exim_clock_init(void)
388 {
389 struct timeval tv;
390 if (clock_gettime(CLOCK_MONOTONIC, &offset_ts) != 0) return;
391 (void)gettimeofday(&tv, NULL);
392 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
393 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
394 if (offset_ts.tv_nsec >= 0) return;
395 offset_ts.tv_sec--;
396 offset_ts.tv_nsec += 1000*1000*1000;
397 }
398 #endif
399
400
401 /* Exim uses a time + a pid to generate a unique identifier in two places: its
402 message IDs, and in file names for maildir deliveries. Because some OS now
403 re-use pids within the same second, sub-second times are now being used.
404 However, for absolute certainty, we must ensure the clock has ticked before
405 allowing the relevant process to complete. At the time of implementation of
406 this code (February 2003), the speed of processors is such that the clock will
407 invariably have ticked already by the time a process has done its job. This
408 function prepares for the time when things are faster - and it also copes with
409 clocks that go backwards.
410
411 Arguments:
412   tgt_tv       A timeval which was used to create uniqueness; its usec field
413                  has been rounded down to the value of the resolution.
414                  We want to be sure the current time is greater than this.
415   resolution   The resolution that was used to divide the microseconds
416                  (1 for maildir, larger for message ids)
417
418 Returns:       nothing
419 */
420
421 void
422 exim_wait_tick(struct timeval * tgt_tv, int resolution)
423 {
424 struct timeval now_tv;
425 long int now_true_usec;
426
427 #ifdef _POSIX_MONOTONIC_CLOCK
428 struct timespec now_ts;
429
430 if (clock_gettime(CLOCK_MONOTONIC, &now_ts) == 0)
431   {
432   now_ts.tv_sec += offset_ts.tv_sec;
433   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
434     {
435     now_ts.tv_sec++;
436     now_ts.tv_nsec -= 1000*1000*1000;
437     }
438   now_tv.tv_sec = now_ts.tv_sec;
439   now_true_usec = (now_ts.tv_nsec / (resolution * 1000)) * resolution;
440   now_tv.tv_usec = now_true_usec;
441   }
442 else
443 #endif
444   {
445   (void)gettimeofday(&now_tv, NULL);
446   now_true_usec = now_tv.tv_usec;
447   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
448   }
449
450 while (exim_tvcmp(&now_tv, tgt_tv) <= 0)
451   {
452   struct itimerval itval;
453   itval.it_interval.tv_sec = 0;
454   itval.it_interval.tv_usec = 0;
455   itval.it_value.tv_sec = tgt_tv->tv_sec - now_tv.tv_sec;
456   itval.it_value.tv_usec = tgt_tv->tv_usec + resolution - now_true_usec;
457
458   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
459   negative value for the microseconds is possible only in the case when "now"
460   is more than a second less than "tgt". That means that itval.it_value.tv_sec
461   is greater than zero. The following correction is therefore safe. */
462
463   if (itval.it_value.tv_usec < 0)
464     {
465     itval.it_value.tv_usec += 1000000;
466     itval.it_value.tv_sec -= 1;
467     }
468
469   DEBUG(D_transport|D_receive)
470     {
471     if (!f.running_in_test_harness)
472       {
473       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
474         tgt_tv->tv_sec, (long) tgt_tv->tv_usec,
475         now_tv.tv_sec, (long) now_tv.tv_usec);
476       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
477         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
478       }
479     }
480
481   milliwait(&itval);
482
483   /* Be prapared to go around if the kernel does not implement subtick
484   granularity (GNU Hurd) */
485
486   (void)gettimeofday(&now_tv, NULL);
487   now_true_usec = now_tv.tv_usec;
488   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
489   }
490 }
491
492
493
494
495 /*************************************************
496 *   Call fopen() with umask 777 and adjust mode  *
497 *************************************************/
498
499 /* Exim runs with umask(0) so that files created with open() have the mode that
500 is specified in the open() call. However, there are some files, typically in
501 the spool directory, that are created with fopen(). They end up world-writeable
502 if no precautions are taken. Although the spool directory is not accessible to
503 the world, this is an untidiness. So this is a wrapper function for fopen()
504 that sorts out the mode of the created file.
505
506 Arguments:
507    filename       the file name
508    options        the fopen() options
509    mode           the required mode
510
511 Returns:          the fopened FILE or NULL
512 */
513
514 FILE *
515 modefopen(const uschar *filename, const char *options, mode_t mode)
516 {
517 mode_t saved_umask = umask(0777);
518 FILE *f = Ufopen(filename, options);
519 (void)umask(saved_umask);
520 if (f != NULL) (void)fchmod(fileno(f), mode);
521 return f;
522 }
523
524
525 /*************************************************
526 *   Ensure stdin, stdout, and stderr exist       *
527 *************************************************/
528
529 /* Some operating systems grumble if an exec() happens without a standard
530 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
531 file will be opened and will use these fd values, and then some other bit of
532 code will assume, for example, that it can write error messages to stderr.
533 This function ensures that fds 0, 1, and 2 are open if they do not already
534 exist, by connecting them to /dev/null.
535
536 This function is also used to ensure that std{in,out,err} exist at all times,
537 so that if any library that Exim calls tries to use them, it doesn't crash.
538
539 Arguments:  None
540 Returns:    Nothing
541 */
542
543 void
544 exim_nullstd(void)
545 {
546 int devnull = -1;
547 struct stat statbuf;
548 for (int i = 0; i <= 2; i++)
549   {
550   if (fstat(i, &statbuf) < 0 && errno == EBADF)
551     {
552     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
553     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
554       string_open_failed(errno, "/dev/null", NULL));
555     if (devnull != i) (void)dup2(devnull, i);
556     }
557   }
558 if (devnull > 2) (void)close(devnull);
559 }
560
561
562
563
564 /*************************************************
565 *   Close unwanted file descriptors for delivery *
566 *************************************************/
567
568 /* This function is called from a new process that has been forked to deliver
569 an incoming message, either directly, or using exec.
570
571 We want any smtp input streams to be closed in this new process. However, it
572 has been observed that using fclose() here causes trouble. When reading in -bS
573 input, duplicate copies of messages have been seen. The files will be sharing a
574 file pointer with the parent process, and it seems that fclose() (at least on
575 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
576 least sometimes. Hence we go for closing the underlying file descriptors.
577
578 If TLS is active, we want to shut down the TLS library, but without molesting
579 the parent's SSL connection.
580
581 For delivery of a non-SMTP message, we want to close stdin and stdout (and
582 stderr unless debugging) because the calling process might have set them up as
583 pipes and be waiting for them to close before it waits for the submission
584 process to terminate. If they aren't closed, they hold up the calling process
585 until the initial delivery process finishes, which is not what we want.
586
587 Exception: We do want it for synchronous delivery!
588
589 And notwithstanding all the above, if D_resolver is set, implying resolver
590 debugging, leave stdout open, because that's where the resolver writes its
591 debugging output.
592
593 When we close stderr (which implies we've also closed stdout), we also get rid
594 of any controlling terminal.
595
596 Arguments:   None
597 Returns:     Nothing
598 */
599
600 static void
601 close_unwanted(void)
602 {
603 if (smtp_input)
604   {
605 #ifndef DISABLE_TLS
606   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
607 #endif
608   (void)close(fileno(smtp_in));
609   (void)close(fileno(smtp_out));
610   smtp_in = NULL;
611   }
612 else
613   {
614   (void)close(0);                                          /* stdin */
615   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
616   if (debug_selector == 0)                                 /* stderr */
617     {
618     if (!f.synchronous_delivery)
619       {
620       (void)close(2);
621       log_stderr = NULL;
622       }
623     (void)setsid();
624     }
625   }
626 }
627
628
629
630
631 /*************************************************
632 *          Set uid and gid                       *
633 *************************************************/
634
635 /* This function sets a new uid and gid permanently, optionally calling
636 initgroups() to set auxiliary groups. There are some special cases when running
637 Exim in unprivileged modes. In these situations the effective uid will not be
638 root; if we already have the right effective uid/gid, and don't need to
639 initialize any groups, leave things as they are.
640
641 Arguments:
642   uid        the uid
643   gid        the gid
644   igflag     TRUE if initgroups() wanted
645   msg        text to use in debugging output and failure log
646
647 Returns:     nothing; bombs out on failure
648 */
649
650 void
651 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, uschar *msg)
652 {
653 uid_t euid = geteuid();
654 gid_t egid = getegid();
655
656 if (euid == root_uid || euid != uid || egid != gid || igflag)
657   {
658   /* At least one OS returns +1 for initgroups failure, so just check for
659   non-zero. */
660
661   if (igflag)
662     {
663     struct passwd *pw = getpwuid(uid);
664     if (!pw)
665       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
666         "no passwd entry for uid=%ld", (long int)uid);
667
668     if (initgroups(pw->pw_name, gid) != 0)
669       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
670         (long int)uid, strerror(errno));
671     }
672
673   if (setgid(gid) < 0 || setuid(uid) < 0)
674     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
675       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
676   }
677
678 /* Debugging output included uid/gid and all groups */
679
680 DEBUG(D_uid)
681   {
682   int group_count, save_errno;
683   gid_t group_list[EXIM_GROUPLIST_SIZE];
684   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
685     (long int)geteuid(), (long int)getegid(), (long int)getpid());
686   group_count = getgroups(nelem(group_list), group_list);
687   save_errno = errno;
688   debug_printf("  auxiliary group list:");
689   if (group_count > 0)
690     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
691   else if (group_count < 0)
692     debug_printf(" <error: %s>", strerror(save_errno));
693   else debug_printf(" <none>");
694   debug_printf("\n");
695   }
696 }
697
698
699
700
701 /*************************************************
702 *               Exit point                       *
703 *************************************************/
704
705 /* Exim exits via this function so that it always clears up any open
706 databases.
707
708 Arguments:
709   rc         return code
710
711 Returns:     does not return
712 */
713
714 void
715 exim_exit(int rc, const uschar * process)
716 {
717 search_tidyup();
718 store_exit();
719 DEBUG(D_any)
720   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d %s%s%sterminating with rc=%d "
721     ">>>>>>>>>>>>>>>>\n", (int)getpid(),
722     process ? "(" : "", process, process ? ") " : "", rc);
723 exit(rc);
724 }
725
726
727 void
728 exim_underbar_exit(int rc, const uschar * process)
729 {
730 store_exit();
731 DEBUG(D_any)
732   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d %s%s%sterminating with rc=%d "
733     ">>>>>>>>>>>>>>>>\n", (int)getpid(),
734     process ? "(" : "", process, process ? ") " : "", rc);
735 _exit(rc);
736 }
737
738
739
740 /* Print error string, then die */
741 static void
742 exim_fail(const char * fmt, ...)
743 {
744 va_list ap;
745 va_start(ap, fmt);
746 vfprintf(stderr, fmt, ap);
747 exit(EXIT_FAILURE);
748 }
749
750 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
751 of chown()/fchown().  See src/functions.h for more explanation */
752 int
753 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
754 {
755 int saved_errno = errno;  /* from the preceeding chown call */
756 #if 1
757 log_write(0, LOG_MAIN|LOG_PANIC,
758   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
759   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
760   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
761 #else
762 /* I leave this here, commented, in case the "bug"(?) comes up again.
763    It is not an Exim bug, but we can provide a workaround.
764    See Bug 2391
765    HS 2019-04-18 */
766
767 struct stat buf;
768
769 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
770 {
771   if (buf.st_uid == owner && buf.st_gid == group) return 0;
772   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
773 }
774 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
775
776 #endif
777 errno = saved_errno;
778 return -1;
779 }
780
781
782 /*************************************************
783 *         Extract port from host address         *
784 *************************************************/
785
786 /* Called to extract the port from the values given to -oMa and -oMi.
787 It also checks the syntax of the address, and terminates it before the
788 port data when a port is extracted.
789
790 Argument:
791   address   the address, with possible port on the end
792
793 Returns:    the port, or zero if there isn't one
794             bombs out on a syntax error
795 */
796
797 static int
798 check_port(uschar *address)
799 {
800 int port = host_address_extract_port(address);
801 if (string_is_ip_address(address, NULL) == 0)
802   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
803 return port;
804 }
805
806
807
808 /*************************************************
809 *              Test/verify an address            *
810 *************************************************/
811
812 /* This function is called by the -bv and -bt code. It extracts a working
813 address from a full RFC 822 address. This isn't really necessary per se, but it
814 has the effect of collapsing source routes.
815
816 Arguments:
817   s            the address string
818   flags        flag bits for verify_address()
819   exit_value   to be set for failures
820
821 Returns:       nothing
822 */
823
824 static void
825 test_address(uschar *s, int flags, int *exit_value)
826 {
827 int start, end, domain;
828 uschar *parse_error = NULL;
829 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
830   FALSE);
831 if (address == NULL)
832   {
833   fprintf(stdout, "syntax error: %s\n", parse_error);
834   *exit_value = 2;
835   }
836 else
837   {
838   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
839     -1, -1, NULL, NULL, NULL);
840   if (rc == FAIL) *exit_value = 2;
841     else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
842   }
843 }
844
845
846
847 /*************************************************
848 *          Show supported features               *
849 *************************************************/
850
851 static void
852 show_db_version(FILE * f)
853 {
854 #ifdef DB_VERSION_STRING
855 DEBUG(D_any)
856   {
857   fprintf(f, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
858   fprintf(f, "                      Runtime: %s\n",
859     db_version(NULL, NULL, NULL));
860   }
861 else
862   fprintf(f, "Berkeley DB: %s\n", DB_VERSION_STRING);
863
864 #elif defined(BTREEVERSION) && defined(HASHVERSION)
865   #ifdef USE_DB
866   fprintf(f, "Probably Berkeley DB version 1.8x (native mode)\n");
867   #else
868   fprintf(f, "Probably Berkeley DB version 1.8x (compatibility mode)\n");
869   #endif
870
871 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
872 fprintf(f, "Probably ndbm\n");
873 #elif defined(USE_TDB)
874 fprintf(f, "Using tdb\n");
875 #else
876   #ifdef USE_GDBM
877   fprintf(f, "Probably GDBM (native mode)\n");
878   #else
879   fprintf(f, "Probably GDBM (compatibility mode)\n");
880   #endif
881 #endif
882 }
883
884
885 /* This function is called for -bV/--version and for -d to output the optional
886 features of the current Exim binary.
887
888 Arguments:  a FILE for printing
889 Returns:    nothing
890 */
891
892 static void
893 show_whats_supported(FILE * fp)
894 {
895 DEBUG(D_any) {} else show_db_version(fp);
896
897 fprintf(fp, "Support for:");
898 #ifdef SUPPORT_CRYPTEQ
899   fprintf(fp, " crypteq");
900 #endif
901 #if HAVE_ICONV
902   fprintf(fp, " iconv()");
903 #endif
904 #if HAVE_IPV6
905   fprintf(fp, " IPv6");
906 #endif
907 #ifdef HAVE_SETCLASSRESOURCES
908   fprintf(fp, " use_setclassresources");
909 #endif
910 #ifdef SUPPORT_PAM
911   fprintf(fp, " PAM");
912 #endif
913 #ifdef EXIM_PERL
914   fprintf(fp, " Perl");
915 #endif
916 #ifdef EXPAND_DLFUNC
917   fprintf(fp, " Expand_dlfunc");
918 #endif
919 #ifdef USE_TCP_WRAPPERS
920   fprintf(fp, " TCPwrappers");
921 #endif
922 #ifdef USE_GNUTLS
923   fprintf(fp, " GnuTLS");
924 #endif
925 #ifdef USE_OPENSSL
926   fprintf(fp, " OpenSSL");
927 #endif
928 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
929   fprintf(fp, " translate_ip_address");
930 #endif
931 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
932   fprintf(fp, " move_frozen_messages");
933 #endif
934 #ifdef WITH_CONTENT_SCAN
935   fprintf(fp, " Content_Scanning");
936 #endif
937 #ifdef SUPPORT_DANE
938   fprintf(fp, " DANE");
939 #endif
940 #ifndef DISABLE_DKIM
941   fprintf(fp, " DKIM");
942 #endif
943 #ifndef DISABLE_DNSSEC
944   fprintf(fp, " DNSSEC");
945 #endif
946 #ifndef DISABLE_EVENT
947   fprintf(fp, " Event");
948 #endif
949 #ifdef SUPPORT_I18N
950   fprintf(fp, " I18N");
951 #endif
952 #ifndef DISABLE_OCSP
953   fprintf(fp, " OCSP");
954 #endif
955 #ifndef DISABLE_PIPE_CONNECT
956   fprintf(fp, " PIPE_CONNECT");
957 #endif
958 #ifndef DISABLE_PRDR
959   fprintf(fp, " PRDR");
960 #endif
961 #ifdef SUPPORT_PROXY
962   fprintf(fp, " PROXY");
963 #endif
964 #ifdef SUPPORT_SOCKS
965   fprintf(fp, " SOCKS");
966 #endif
967 #ifdef SUPPORT_SPF
968   fprintf(fp, " SPF");
969 #endif
970 #ifdef SUPPORT_DMARC
971   fprintf(fp, " DMARC");
972 #endif
973 #ifdef TCP_FASTOPEN
974   tcp_init();
975   if (f.tcp_fastopen_ok) fprintf(fp, " TCP_Fast_Open");
976 #endif
977 #ifdef EXPERIMENTAL_ARC
978   fprintf(fp, " Experimental_ARC");
979 #endif
980 #ifdef EXPERIMENTAL_BRIGHTMAIL
981   fprintf(fp, " Experimental_Brightmail");
982 #endif
983 #ifdef EXPERIMENTAL_DCC
984   fprintf(fp, " Experimental_DCC");
985 #endif
986 #ifdef EXPERIMENTAL_DSN_INFO
987   fprintf(fp, " Experimental_DSN_info");
988 #endif
989 #ifdef EXPERIMENTAL_LMDB
990   fprintf(fp, " Experimental_LMDB");
991 #endif
992 #ifdef EXPERIMENTAL_QUEUE_RAMP
993   fprintf(fp, " Experimental_Queue_Ramp");
994 #endif
995 #ifdef EXPERIMENTAL_QUEUEFILE
996   fprintf(fp, " Experimental_QUEUEFILE");
997 #endif
998 #if defined(EXPERIMENTAL_SRS) || defined(EXPERIMENTAL_SRS_NATIVE)
999   fprintf(fp, " Experimental_SRS");
1000 #endif
1001 #ifdef EXPERIMENTAL_TLS_RESUME
1002   fprintf(fp, " Experimental_TLS_resume");
1003 #endif
1004 fprintf(fp, "\n");
1005
1006 fprintf(fp, "Lookups (built-in):");
1007 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1008   fprintf(fp, " lsearch wildlsearch nwildlsearch iplsearch");
1009 #endif
1010 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1011   fprintf(fp, " cdb");
1012 #endif
1013 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1014   fprintf(fp, " dbm dbmjz dbmnz");
1015 #endif
1016 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1017   fprintf(fp, " dnsdb");
1018 #endif
1019 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1020   fprintf(fp, " dsearch");
1021 #endif
1022 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1023   fprintf(fp, " ibase");
1024 #endif
1025 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1026   fprintf(fp, " json");
1027 #endif
1028 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1029   fprintf(fp, " ldap ldapdn ldapm");
1030 #endif
1031 #ifdef EXPERIMENTAL_LMDB
1032   fprintf(fp, " lmdb");
1033 #endif
1034 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1035   fprintf(fp, " mysql");
1036 #endif
1037 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1038   fprintf(fp, " nis nis0");
1039 #endif
1040 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1041   fprintf(fp, " nisplus");
1042 #endif
1043 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1044   fprintf(fp, " oracle");
1045 #endif
1046 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1047   fprintf(fp, " passwd");
1048 #endif
1049 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1050   fprintf(fp, " pgsql");
1051 #endif
1052 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1053   fprintf(fp, " redis");
1054 #endif
1055 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1056   fprintf(fp, " sqlite");
1057 #endif
1058 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1059   fprintf(fp, " testdb");
1060 #endif
1061 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1062   fprintf(fp, " whoson");
1063 #endif
1064 fprintf(fp, "\n");
1065
1066 auth_show_supported(fp);
1067 route_show_supported(fp);
1068 transport_show_supported(fp);
1069
1070 #ifdef WITH_CONTENT_SCAN
1071 malware_show_supported(fp);
1072 #endif
1073
1074 if (fixed_never_users[0] > 0)
1075   {
1076   int i;
1077   fprintf(fp, "Fixed never_users: ");
1078   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1079     fprintf(fp, "%d:", (unsigned int)fixed_never_users[i]);
1080   fprintf(fp, "%d\n", (unsigned int)fixed_never_users[i]);
1081   }
1082
1083 fprintf(fp, "Configure owner: %d:%d\n", config_uid, config_gid);
1084
1085 fprintf(fp, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1086
1087 /* Everything else is details which are only worth reporting when debugging.
1088 Perhaps the tls_version_report should move into this too. */
1089 DEBUG(D_any) do {
1090
1091 /* clang defines __GNUC__ (at least, for me) so test for it first */
1092 #if defined(__clang__)
1093   fprintf(fp, "Compiler: CLang [%s]\n", __clang_version__);
1094 #elif defined(__GNUC__)
1095   fprintf(fp, "Compiler: GCC [%s]\n",
1096 # ifdef __VERSION__
1097       __VERSION__
1098 # else
1099       "? unknown version ?"
1100 # endif
1101       );
1102 #else
1103   fprintf(fp, "Compiler: <unknown>\n");
1104 #endif
1105
1106 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1107   fprintf(fp, "Library version: Glibc: Compile: %d.%d\n",
1108                 __GLIBC__, __GLIBC_MINOR__);
1109   if (__GLIBC_PREREQ(2, 1))
1110     fprintf(fp, "                        Runtime: %s\n",
1111                 gnu_get_libc_version());
1112 #endif
1113
1114 show_db_version(fp);
1115
1116 #ifndef DISABLE_TLS
1117   tls_version_report(fp);
1118 #endif
1119 #ifdef SUPPORT_I18N
1120   utf8_version_report(fp);
1121 #endif
1122 #ifdef SUPPORT_SPF
1123   spf_lib_version_report(fp);
1124 #endif
1125
1126   for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1127     if (authi->version_report)
1128       (*authi->version_report)(fp);
1129
1130   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1131   characters; unless it's an ancient version of PCRE in which case it
1132   is not defined. */
1133 #ifndef PCRE_PRERELEASE
1134 # define PCRE_PRERELEASE
1135 #endif
1136 #define QUOTE(X) #X
1137 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1138   fprintf(fp, "Library version: PCRE: Compile: %d.%d%s\n"
1139              "                       Runtime: %s\n",
1140           PCRE_MAJOR, PCRE_MINOR,
1141           EXPAND_AND_QUOTE(PCRE_PRERELEASE) "",
1142           pcre_version());
1143 #undef QUOTE
1144 #undef EXPAND_AND_QUOTE
1145
1146   init_lookup_list();
1147   for (int i = 0; i < lookup_list_count; i++)
1148     if (lookup_list[i]->version_report)
1149       lookup_list[i]->version_report(fp);
1150
1151 #ifdef WHITELIST_D_MACROS
1152   fprintf(fp, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1153 #else
1154   fprintf(fp, "WHITELIST_D_MACROS unset\n");
1155 #endif
1156 #ifdef TRUSTED_CONFIG_LIST
1157   fprintf(fp, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1158 #else
1159   fprintf(fp, "TRUSTED_CONFIG_LIST unset\n");
1160 #endif
1161
1162 } while (0);
1163 }
1164
1165
1166 /*************************************************
1167 *     Show auxiliary information about Exim      *
1168 *************************************************/
1169
1170 static void
1171 show_exim_information(enum commandline_info request, FILE *stream)
1172 {
1173 switch(request)
1174   {
1175   case CMDINFO_NONE:
1176     fprintf(stream, "Oops, something went wrong.\n");
1177     return;
1178   case CMDINFO_HELP:
1179     fprintf(stream,
1180 "The -bI: flag takes a string indicating which information to provide.\n"
1181 "If the string is not recognised, you'll get this help (on stderr).\n"
1182 "\n"
1183 "  exim -bI:help    this information\n"
1184 "  exim -bI:dscp    list of known dscp value keywords\n"
1185 "  exim -bI:sieve   list of supported sieve extensions\n"
1186 );
1187     return;
1188   case CMDINFO_SIEVE:
1189     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1190       fprintf(stream, "%s\n", *pp);
1191     return;
1192   case CMDINFO_DSCP:
1193     dscp_list_to_stream(stream);
1194     return;
1195   }
1196 }
1197
1198
1199 /*************************************************
1200 *               Quote a local part               *
1201 *************************************************/
1202
1203 /* This function is used when a sender address or a From: or Sender: header
1204 line is being created from the caller's login, or from an authenticated_id. It
1205 applies appropriate quoting rules for a local part.
1206
1207 Argument:    the local part
1208 Returns:     the local part, quoted if necessary
1209 */
1210
1211 uschar *
1212 local_part_quote(uschar *lpart)
1213 {
1214 BOOL needs_quote = FALSE;
1215 gstring * g;
1216
1217 for (uschar * t = lpart; !needs_quote && *t != 0; t++)
1218   {
1219   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1220     (*t != '.' || t == lpart || t[1] == 0);
1221   }
1222
1223 if (!needs_quote) return lpart;
1224
1225 g = string_catn(NULL, US"\"", 1);
1226
1227 for (;;)
1228   {
1229   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1230   if (nq == NULL)
1231     {
1232     g = string_cat(g, lpart);
1233     break;
1234     }
1235   g = string_catn(g, lpart, nq - lpart);
1236   g = string_catn(g, US"\\", 1);
1237   g = string_catn(g, nq, 1);
1238   lpart = nq + 1;
1239   }
1240
1241 g = string_catn(g, US"\"", 1);
1242 return string_from_gstring(g);
1243 }
1244
1245
1246
1247 #ifdef USE_READLINE
1248 /*************************************************
1249 *         Load readline() functions              *
1250 *************************************************/
1251
1252 /* This function is called from testing executions that read data from stdin,
1253 but only when running as the calling user. Currently, only -be does this. The
1254 function loads the readline() function library and passes back the functions.
1255 On some systems, it needs the curses library, so load that too, but try without
1256 it if loading fails. All this functionality has to be requested at build time.
1257
1258 Arguments:
1259   fn_readline_ptr   pointer to where to put the readline pointer
1260   fn_addhist_ptr    pointer to where to put the addhistory function
1261
1262 Returns:            the dlopen handle or NULL on failure
1263 */
1264
1265 static void *
1266 set_readline(char * (**fn_readline_ptr)(const char *),
1267              void   (**fn_addhist_ptr)(const char *))
1268 {
1269 void *dlhandle;
1270 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1271
1272 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1273 if (dlhandle_curses) dlclose(dlhandle_curses);
1274
1275 if (dlhandle)
1276   {
1277   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1278    *   char * readline (const char *prompt);
1279    *   void add_history (const char *string);
1280    */
1281   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1282   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1283   }
1284 else
1285   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1286
1287 return dlhandle;
1288 }
1289 #endif
1290
1291
1292
1293 /*************************************************
1294 *    Get a line from stdin for testing things    *
1295 *************************************************/
1296
1297 /* This function is called when running tests that can take a number of lines
1298 of input (for example, -be and -bt). It handles continuations and trailing
1299 spaces. And prompting and a blank line output on eof. If readline() is in use,
1300 the arguments are non-NULL and provide the relevant functions.
1301
1302 Arguments:
1303   fn_readline   readline function or NULL
1304   fn_addhist    addhist function or NULL
1305
1306 Returns:        pointer to dynamic memory, or NULL at end of file
1307 */
1308
1309 static uschar *
1310 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1311 {
1312 gstring * g = NULL;
1313
1314 if (!fn_readline) { printf("> "); fflush(stdout); }
1315
1316 for (int i = 0;; i++)
1317   {
1318   uschar buffer[1024];
1319   uschar *p, *ss;
1320
1321   #ifdef USE_READLINE
1322   char *readline_line = NULL;
1323   if (fn_readline)
1324     {
1325     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1326     if (*readline_line != 0 && fn_addhist) fn_addhist(readline_line);
1327     p = US readline_line;
1328     }
1329   else
1330   #endif
1331
1332   /* readline() not in use */
1333
1334     {
1335     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;
1336     p = buffer;
1337     }
1338
1339   /* Handle the line */
1340
1341   ss = p + (int)Ustrlen(p);
1342   while (ss > p && isspace(ss[-1])) ss--;
1343
1344   if (i > 0)
1345     while (p < ss && isspace(*p)) p++;   /* leading space after cont */
1346
1347   g = string_catn(g, p, ss - p);
1348
1349   #ifdef USE_READLINE
1350   if (fn_readline) free(readline_line);
1351   #endif
1352
1353   /* g can only be NULL if ss==p */
1354   if (ss == p || g->s[g->ptr-1] != '\\')
1355     break;
1356
1357   --g->ptr;
1358   (void) string_from_gstring(g);
1359   }
1360
1361 if (!g) printf("\n");
1362 return string_from_gstring(g);
1363 }
1364
1365
1366
1367 /*************************************************
1368 *    Output usage information for the program    *
1369 *************************************************/
1370
1371 /* This function is called when there are no recipients
1372    or a specific --help argument was added.
1373
1374 Arguments:
1375   progname      information on what name we were called by
1376
1377 Returns:        DOES NOT RETURN
1378 */
1379
1380 static void
1381 exim_usage(uschar *progname)
1382 {
1383
1384 /* Handle specific program invocation variants */
1385 if (Ustrcmp(progname, US"-mailq") == 0)
1386   exim_fail(
1387     "mailq - list the contents of the mail queue\n\n"
1388     "For a list of options, see the Exim documentation.\n");
1389
1390 /* Generic usage - we output this whatever happens */
1391 exim_fail(
1392   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1393   "not directly from a shell command line. Options and/or arguments control\n"
1394   "what it does when called. For a list of options, see the Exim documentation.\n");
1395 }
1396
1397
1398
1399 /*************************************************
1400 *    Validate that the macros given are okay     *
1401 *************************************************/
1402
1403 /* Typically, Exim will drop privileges if macros are supplied.  In some
1404 cases, we want to not do so.
1405
1406 Arguments:    opt_D_used - true if the commandline had a "-D" option
1407 Returns:      true if trusted, false otherwise
1408 */
1409
1410 static BOOL
1411 macros_trusted(BOOL opt_D_used)
1412 {
1413 #ifdef WHITELIST_D_MACROS
1414 uschar *whitelisted, *end, *p, **whites;
1415 int white_count, i, n;
1416 size_t len;
1417 BOOL prev_char_item, found;
1418 #endif
1419
1420 if (!opt_D_used)
1421   return TRUE;
1422 #ifndef WHITELIST_D_MACROS
1423 return FALSE;
1424 #else
1425
1426 /* We only trust -D overrides for some invoking users:
1427 root, the exim run-time user, the optional config owner user.
1428 I don't know why config-owner would be needed, but since they can own the
1429 config files anyway, there's no security risk to letting them override -D. */
1430 if ( ! ((real_uid == root_uid)
1431      || (real_uid == exim_uid)
1432 #ifdef CONFIGURE_OWNER
1433      || (real_uid == config_uid)
1434 #endif
1435    ))
1436   {
1437   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1438   return FALSE;
1439   }
1440
1441 /* Get a list of macros which are whitelisted */
1442 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1443 prev_char_item = FALSE;
1444 white_count = 0;
1445 for (p = whitelisted; *p != '\0'; ++p)
1446   {
1447   if (*p == ':' || isspace(*p))
1448     {
1449     *p = '\0';
1450     if (prev_char_item)
1451       ++white_count;
1452     prev_char_item = FALSE;
1453     continue;
1454     }
1455   if (!prev_char_item)
1456     prev_char_item = TRUE;
1457   }
1458 end = p;
1459 if (prev_char_item)
1460   ++white_count;
1461 if (!white_count)
1462   return FALSE;
1463 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1464 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1465   {
1466   if (*p != '\0')
1467     {
1468     whites[i++] = p;
1469     if (i == white_count)
1470       break;
1471     while (*p != '\0' && p < end)
1472       ++p;
1473     }
1474   }
1475 whites[i] = NULL;
1476
1477 /* The list of commandline macros should be very short.
1478 Accept the N*M complexity. */
1479 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1480   {
1481   found = FALSE;
1482   for (uschar ** w = whites; *w; ++w)
1483     if (Ustrcmp(*w, m->name) == 0)
1484       {
1485       found = TRUE;
1486       break;
1487       }
1488   if (!found)
1489     return FALSE;
1490   if (!m->replacement)
1491     continue;
1492   if ((len = m->replen) == 0)
1493     continue;
1494   n = pcre_exec(regex_whitelisted_macro, NULL, CS m->replacement, len,
1495    0, PCRE_EOPT, NULL, 0);
1496   if (n < 0)
1497     {
1498     if (n != PCRE_ERROR_NOMATCH)
1499       debug_printf("macros_trusted checking %s returned %d\n", m->name, n);
1500     return FALSE;
1501     }
1502   }
1503 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1504 return TRUE;
1505 #endif
1506 }
1507
1508
1509 /*************************************************
1510 *          Expansion testing                     *
1511 *************************************************/
1512
1513 /* Expand and print one item, doing macro-processing.
1514
1515 Arguments:
1516   item          line for expansion
1517 */
1518
1519 static void
1520 expansion_test_line(uschar * line)
1521 {
1522 int len;
1523 BOOL dummy_macexp;
1524
1525 Ustrncpy(big_buffer, line, big_buffer_size);
1526 big_buffer[big_buffer_size-1] = '\0';
1527 len = Ustrlen(big_buffer);
1528
1529 (void) macros_expand(0, &len, &dummy_macexp);
1530
1531 if (isupper(big_buffer[0]))
1532   {
1533   if (macro_read_assignment(big_buffer))
1534     printf("Defined macro '%s'\n", mlast->name);
1535   }
1536 else
1537   if ((line = expand_string(big_buffer))) printf("%s\n", CS line);
1538   else printf("Failed: %s\n", expand_string_message);
1539 }
1540
1541
1542
1543 /*************************************************
1544 *          Entry point and high-level code       *
1545 *************************************************/
1546
1547 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1548 the appropriate action. All the necessary functions are present in the one
1549 binary. I originally thought one should split it up, but it turns out that so
1550 much of the apparatus is needed in each chunk that one might as well just have
1551 it all available all the time, which then makes the coding easier as well.
1552
1553 Arguments:
1554   argc      count of entries in argv
1555   argv      argument strings, with argv[0] being the program name
1556
1557 Returns:    EXIT_SUCCESS if terminated successfully
1558             EXIT_FAILURE otherwise, except when a message has been sent
1559               to the sender, and -oee was given
1560 */
1561
1562 int
1563 main(int argc, char **cargv)
1564 {
1565 uschar **argv = USS cargv;
1566 int  arg_receive_timeout = -1;
1567 int  arg_smtp_receive_timeout = -1;
1568 int  arg_error_handling = error_handling;
1569 int  filter_sfd = -1;
1570 int  filter_ufd = -1;
1571 int  group_count;
1572 int  i, rv;
1573 int  list_queue_option = 0;
1574 int  msg_action = 0;
1575 int  msg_action_arg = -1;
1576 int  namelen = (argv[0] == NULL)? 0 : Ustrlen(argv[0]);
1577 int  queue_only_reason = 0;
1578 #ifdef EXIM_PERL
1579 int  perl_start_option = 0;
1580 #endif
1581 int  recipients_arg = argc;
1582 int  sender_address_domain = 0;
1583 int  test_retry_arg = -1;
1584 int  test_rewrite_arg = -1;
1585 gid_t original_egid;
1586 BOOL arg_queue_only = FALSE;
1587 BOOL bi_option = FALSE;
1588 BOOL checking = FALSE;
1589 BOOL count_queue = FALSE;
1590 BOOL expansion_test = FALSE;
1591 BOOL extract_recipients = FALSE;
1592 BOOL flag_G = FALSE;
1593 BOOL flag_n = FALSE;
1594 BOOL forced_delivery = FALSE;
1595 BOOL f_end_dot = FALSE;
1596 BOOL deliver_give_up = FALSE;
1597 BOOL list_queue = FALSE;
1598 BOOL list_options = FALSE;
1599 BOOL list_config = FALSE;
1600 BOOL local_queue_only;
1601 BOOL more = TRUE;
1602 BOOL one_msg_action = FALSE;
1603 BOOL opt_D_used = FALSE;
1604 BOOL queue_only_set = FALSE;
1605 BOOL receiving_message = TRUE;
1606 BOOL sender_ident_set = FALSE;
1607 BOOL session_local_queue_only;
1608 BOOL unprivileged;
1609 BOOL removed_privilege = FALSE;
1610 BOOL usage_wanted = FALSE;
1611 BOOL verify_address_mode = FALSE;
1612 BOOL verify_as_sender = FALSE;
1613 BOOL version_printed = FALSE;
1614 uschar *alias_arg = NULL;
1615 uschar *called_as = US"";
1616 uschar *cmdline_syslog_name = NULL;
1617 uschar *start_queue_run_id = NULL;
1618 uschar *stop_queue_run_id = NULL;
1619 uschar *expansion_test_message = NULL;
1620 uschar *ftest_domain = NULL;
1621 uschar *ftest_localpart = NULL;
1622 uschar *ftest_prefix = NULL;
1623 uschar *ftest_suffix = NULL;
1624 uschar *log_oneline = NULL;
1625 uschar *malware_test_file = NULL;
1626 uschar *real_sender_address;
1627 uschar *originator_home = US"/";
1628 size_t sz;
1629 rmark reset_point;
1630
1631 struct passwd *pw;
1632 struct stat statbuf;
1633 pid_t passed_qr_pid = (pid_t)0;
1634 int passed_qr_pipe = -1;
1635 gid_t group_list[EXIM_GROUPLIST_SIZE];
1636
1637 /* For the -bI: flag */
1638 enum commandline_info info_flag = CMDINFO_NONE;
1639 BOOL info_stdout = FALSE;
1640
1641 /* Possible options for -R and -S */
1642
1643 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1644
1645 /* Need to define this in case we need to change the environment in order
1646 to get rid of a bogus time zone. We have to make it char rather than uschar
1647 because some OS define it in /usr/include/unistd.h. */
1648
1649 extern char **environ;
1650
1651 #ifdef MEASURE_TIMING
1652 (void)gettimeofday(&timestamp_startup, NULL);
1653 #endif
1654
1655 /* If the Exim user and/or group and/or the configuration file owner/group were
1656 defined by ref:name at build time, we must now find the actual uid/gid values.
1657 This is a feature to make the lives of binary distributors easier. */
1658
1659 #ifdef EXIM_USERNAME
1660 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1661   {
1662   if (exim_uid == 0)
1663     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1664
1665   /* If ref:name uses a number as the name, route_finduser() returns
1666   TRUE with exim_uid set and pw coerced to NULL. */
1667   if (pw)
1668     exim_gid = pw->pw_gid;
1669 #ifndef EXIM_GROUPNAME
1670   else
1671     exim_fail(
1672         "exim: ref:name should specify a usercode, not a group.\n"
1673         "exim: can't let you get away with it unless you also specify a group.\n");
1674 #endif
1675   }
1676 else
1677   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1678 #endif
1679
1680 #ifdef EXIM_GROUPNAME
1681 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1682   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1683 #endif
1684
1685 #ifdef CONFIGURE_OWNERNAME
1686 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1687   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1688     CONFIGURE_OWNERNAME);
1689 #endif
1690
1691 /* We default the system_filter_user to be the Exim run-time user, as a
1692 sane non-root value. */
1693 system_filter_uid = exim_uid;
1694
1695 #ifdef CONFIGURE_GROUPNAME
1696 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1697   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1698     CONFIGURE_GROUPNAME);
1699 #endif
1700
1701 /* In the Cygwin environment, some initialization used to need doing.
1702 It was fudged in by means of this macro; now no longer but we'll leave
1703 it in case of others. */
1704
1705 #ifdef OS_INIT
1706 OS_INIT
1707 #endif
1708
1709 /* Check a field which is patched when we are running Exim within its
1710 testing harness; do a fast initial check, and then the whole thing. */
1711
1712 f.running_in_test_harness =
1713   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1714 if (f.running_in_test_harness)
1715   debug_store = TRUE;
1716
1717 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1718 at the start of a program; however, it seems that some environments do not
1719 follow this. A "strange" locale can affect the formatting of timestamps, so we
1720 make quite sure. */
1721
1722 setlocale(LC_ALL, "C");
1723
1724 /* Get the offset between CLOCK_MONOTONIC and wallclock */
1725
1726 #ifdef _POSIX_MONOTONIC_CLOCK
1727 exim_clock_init();
1728 #endif
1729
1730 /* Set up the default handler for timing using alarm(). */
1731
1732 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1733
1734 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1735 because store_malloc writes a log entry on failure. */
1736
1737 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1738   exim_fail("exim: failed to get store for log buffer\n");
1739
1740 /* Initialize the default log options. */
1741
1742 bits_set(log_selector, log_selector_size, log_default);
1743
1744 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1745 NULL when the daemon is run and the file is closed. We have to use this
1746 indirection, because some systems don't allow writing to the variable "stderr".
1747 */
1748
1749 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1750
1751 /* Arrange for the PCRE regex library to use our store functions. Note that
1752 the normal calls are actually macros that add additional arguments for
1753 debugging purposes so we have to assign specially constructed functions here.
1754 The default is to use store in the stacking pool, but this is overridden in the
1755 regex_must_compile() function. */
1756
1757 pcre_malloc = function_store_get;
1758 pcre_free = function_dummy_free;
1759
1760 /* Ensure there is a big buffer for temporary use in several places. It is put
1761 in malloc store so that it can be freed for enlargement if necessary. */
1762
1763 big_buffer = store_malloc(big_buffer_size);
1764
1765 /* Set up the handler for the data request signal, and set the initial
1766 descriptive text. */
1767
1768 process_info = store_get(PROCESS_INFO_SIZE, TRUE);      /* tainted */
1769 set_process_info("initializing");
1770 os_restarting_signal(SIGUSR1, usr1_handler);
1771
1772 /* If running in a dockerized environment, the TERM signal is only
1773 delegated to the PID 1 if we request it by setting an signal handler */
1774 if (getpid() == 1) signal(SIGTERM, term_handler);
1775
1776 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1777 in the daemon code. For the rest of Exim's uses, we ignore it. */
1778
1779 signal(SIGHUP, SIG_IGN);
1780
1781 /* We don't want to die on pipe errors as the code is written to handle
1782 the write error instead. */
1783
1784 signal(SIGPIPE, SIG_IGN);
1785
1786 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1787 set to SIG_IGN. This causes subprocesses that complete before the parent
1788 process waits for them not to hang around, so when Exim calls wait(), nothing
1789 is there. The wait() code has been made robust against this, but let's ensure
1790 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1791 ending status. We use sigaction rather than plain signal() on those OS where
1792 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1793 problem on AIX with this.) */
1794
1795 #ifdef SA_NOCLDWAIT
1796   {
1797   struct sigaction act;
1798   act.sa_handler = SIG_DFL;
1799   sigemptyset(&(act.sa_mask));
1800   act.sa_flags = 0;
1801   sigaction(SIGCHLD, &act, NULL);
1802   }
1803 #else
1804 signal(SIGCHLD, SIG_DFL);
1805 #endif
1806
1807 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1808 SIGHUP. */
1809
1810 sighup_argv = argv;
1811
1812 /* Set up the version number. Set up the leading 'E' for the external form of
1813 message ids, set the pointer to the internal form, and initialize it to
1814 indicate no message being processed. */
1815
1816 version_init();
1817 message_id_option[0] = '-';
1818 message_id_external = message_id_option + 1;
1819 message_id_external[0] = 'E';
1820 message_id = message_id_external + 1;
1821 message_id[0] = 0;
1822
1823 /* Set the umask to zero so that any files Exim creates using open() are
1824 created with the modes that it specifies. NOTE: Files created with fopen() have
1825 a problem, which was not recognized till rather late (February 2006). With this
1826 umask, such files will be world writeable. (They are all content scanning files
1827 in the spool directory, which isn't world-accessible, so this is not a
1828 disaster, but it's untidy.) I don't want to change this overall setting,
1829 however, because it will interact badly with the open() calls. Instead, there's
1830 now a function called modefopen() that fiddles with the umask while calling
1831 fopen(). */
1832
1833 (void)umask(0);
1834
1835 /* Precompile the regular expression for matching a message id. Keep this in
1836 step with the code that generates ids in the accept.c module. We need to do
1837 this here, because the -M options check their arguments for syntactic validity
1838 using mac_ismsgid, which uses this. */
1839
1840 regex_ismsgid =
1841   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
1842
1843 /* Precompile the regular expression that is used for matching an SMTP error
1844 code, possibly extended, at the start of an error message. Note that the
1845 terminating whitespace character is included. */
1846
1847 regex_smtp_code =
1848   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
1849     FALSE, TRUE);
1850
1851 #ifdef WHITELIST_D_MACROS
1852 /* Precompile the regular expression used to filter the content of macros
1853 given to -D for permissibility. */
1854
1855 regex_whitelisted_macro =
1856   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
1857 #endif
1858
1859 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
1860
1861 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
1862 this seems to be a generally accepted convention, since one finds symbolic
1863 links called "mailq" in standard OS configurations. */
1864
1865 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
1866     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
1867   {
1868   list_queue = TRUE;
1869   receiving_message = FALSE;
1870   called_as = US"-mailq";
1871   }
1872
1873 /* If the program is called as "rmail" treat it as equivalent to
1874 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
1875 i.e. preventing a single dot on a line from terminating the message, and
1876 returning with zero return code, even in cases of error (provided an error
1877 message has been sent). */
1878
1879 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
1880     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
1881   {
1882   f.dot_ends = FALSE;
1883   called_as = US"-rmail";
1884   errors_sender_rc = EXIT_SUCCESS;
1885   }
1886
1887 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
1888 this is a smail convention. */
1889
1890 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
1891     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
1892   {
1893   smtp_input = smtp_batched_input = TRUE;
1894   called_as = US"-rsmtp";
1895   }
1896
1897 /* If the program is called as "runq" treat it as equivalent to "exim -q";
1898 this is a smail convention. */
1899
1900 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
1901     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
1902   {
1903   queue_interval = 0;
1904   receiving_message = FALSE;
1905   called_as = US"-runq";
1906   }
1907
1908 /* If the program is called as "newaliases" treat it as equivalent to
1909 "exim -bi"; this is a sendmail convention. */
1910
1911 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
1912     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
1913   {
1914   bi_option = TRUE;
1915   receiving_message = FALSE;
1916   called_as = US"-newaliases";
1917   }
1918
1919 /* Save the original effective uid for a couple of uses later. It should
1920 normally be root, but in some esoteric environments it may not be. */
1921
1922 original_euid = geteuid();
1923 original_egid = getegid();
1924
1925 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
1926 to be the same as the real ones. This makes a difference only if Exim is setuid
1927 (or setgid) to something other than root, which could be the case in some
1928 special configurations. */
1929
1930 real_uid = getuid();
1931 real_gid = getgid();
1932
1933 if (real_uid == root_uid)
1934   {
1935   if ((rv = setgid(real_gid)))
1936     exim_fail("exim: setgid(%ld) failed: %s\n",
1937         (long int)real_gid, strerror(errno));
1938   if ((rv = setuid(real_uid)))
1939     exim_fail("exim: setuid(%ld) failed: %s\n",
1940         (long int)real_uid, strerror(errno));
1941   }
1942
1943 /* If neither the original real uid nor the original euid was root, Exim is
1944 running in an unprivileged state. */
1945
1946 unprivileged = (real_uid != root_uid && original_euid != root_uid);
1947
1948 /* Scan the program's arguments. Some can be dealt with right away; others are
1949 simply recorded for checking and handling afterwards. Do a high-level switch
1950 on the second character (the one after '-'), to save some effort. */
1951
1952 for (i = 1; i < argc; i++)
1953   {
1954   BOOL badarg = FALSE;
1955   uschar *arg = argv[i];
1956   uschar *argrest;
1957   int switchchar;
1958
1959   /* An argument not starting with '-' is the start of a recipients list;
1960   break out of the options-scanning loop. */
1961
1962   if (arg[0] != '-')
1963     {
1964     recipients_arg = i;
1965     break;
1966     }
1967
1968   /* An option consisting of -- terminates the options */
1969
1970   if (Ustrcmp(arg, "--") == 0)
1971     {
1972     recipients_arg = i + 1;
1973     break;
1974     }
1975
1976   /* Handle flagged options */
1977
1978   switchchar = arg[1];
1979   argrest = arg+2;
1980
1981   /* Make all -ex options synonymous with -oex arguments, since that
1982   is assumed by various callers. Also make -qR options synonymous with -R
1983   options, as that seems to be required as well. Allow for -qqR too, and
1984   the same for -S options. */
1985
1986   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
1987       Ustrncmp(arg+1, "qR", 2) == 0 ||
1988       Ustrncmp(arg+1, "qS", 2) == 0)
1989     {
1990     switchchar = arg[2];
1991     argrest++;
1992     }
1993   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
1994     {
1995     switchchar = arg[3];
1996     argrest += 2;
1997     f.queue_2stage = TRUE;
1998     }
1999
2000   /* Make -r synonymous with -f, since it is a documented alias */
2001
2002   else if (arg[1] == 'r') switchchar = 'f';
2003
2004   /* Make -ov synonymous with -v */
2005
2006   else if (Ustrcmp(arg, "-ov") == 0)
2007     {
2008     switchchar = 'v';
2009     argrest++;
2010     }
2011
2012   /* deal with --option_aliases */
2013   else if (switchchar == '-')
2014     {
2015     if (Ustrcmp(argrest, "help") == 0)
2016       {
2017       usage_wanted = TRUE;
2018       break;
2019       }
2020     else if (Ustrcmp(argrest, "version") == 0)
2021       {
2022       switchchar = 'b';
2023       argrest = US"V";
2024       }
2025     }
2026
2027   /* High-level switch on active initial letter */
2028
2029   switch(switchchar)
2030     {
2031
2032     /* sendmail uses -Ac and -Am to control which .cf file is used;
2033     we ignore them. */
2034     case 'A':
2035     if (*argrest == '\0') { badarg = TRUE; break; }
2036     else
2037       {
2038       BOOL ignore = FALSE;
2039       switch (*argrest)
2040         {
2041         case 'c':
2042         case 'm':
2043           if (*(argrest + 1) == '\0')
2044             ignore = TRUE;
2045           break;
2046         }
2047       if (!ignore) badarg = TRUE;
2048       }
2049     break;
2050
2051     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2052     so has no need of it. */
2053
2054     case 'B':
2055     if (!*argrest) i++;       /* Skip over the type */
2056     break;
2057
2058
2059     case 'b':
2060       {
2061       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2062
2063       switch (*argrest++)
2064         {
2065         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2066            -bdf: Ditto, but in the foreground.
2067         */
2068         case 'd':
2069           f.daemon_listen = TRUE;
2070           if (*argrest == 'f') f.background_daemon = FALSE;
2071           else if (*argrest) badarg = TRUE;
2072           break;
2073
2074         /* -be:  Run in expansion test mode
2075            -bem: Ditto, but read a message from a file first
2076         */
2077         case 'e':
2078           expansion_test = checking = TRUE;
2079           if (*argrest == 'm')
2080             {
2081             if (++i >= argc) { badarg = TRUE; break; }
2082             expansion_test_message = argv[i];
2083             argrest++;
2084             }
2085           if (*argrest) badarg = TRUE;
2086           break;
2087
2088         /* -bF:  Run system filter test */
2089         case 'F':
2090           filter_test |= checking = FTEST_SYSTEM;
2091           if (*argrest) { badarg = TRUE; break; }
2092           if (++i < argc) filter_test_sfile = argv[i]; else
2093             exim_fail("exim: file name expected after %s\n", argv[i-1]);
2094           break;
2095
2096         /* -bf:  Run user filter test
2097            -bfd: Set domain for filter testing
2098            -bfl: Set local part for filter testing
2099            -bfp: Set prefix for filter testing
2100            -bfs: Set suffix for filter testing
2101         */
2102         case 'f':
2103           if (!*argrest)
2104             {
2105             filter_test |= checking = FTEST_USER;
2106             if (++i < argc) filter_test_ufile = argv[i];
2107             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2108             }
2109           else
2110             {
2111             if (++i >= argc)
2112               exim_fail("exim: string expected after %s\n", arg);
2113             if (Ustrcmp(argrest, "d") == 0) ftest_domain = argv[i];
2114             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = argv[i];
2115             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = argv[i];
2116             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = argv[i];
2117             else badarg = TRUE;
2118             }
2119           break;
2120
2121         /* -bh: Host checking - an IP address must follow. */
2122         case 'h':
2123           if (!*argrest || Ustrcmp(argrest, "c") == 0)
2124             {
2125             if (++i >= argc) { badarg = TRUE; break; }
2126             sender_host_address = argv[i];
2127             host_checking = checking = f.log_testing_mode = TRUE;
2128             f.host_checking_callout = *argrest == 'c';
2129             message_logs = FALSE;
2130             }
2131           else badarg = TRUE;
2132           break;
2133
2134         /* -bi: This option is used by sendmail to initialize *the* alias file,
2135         though it has the -oA option to specify a different file. Exim has no
2136         concept of *the* alias file, but since Sun's YP make script calls
2137         sendmail this way, some support must be provided. */
2138         case 'i':
2139           if (!*++argrest) bi_option = TRUE;
2140           else badarg = TRUE;
2141           break;
2142
2143         /* -bI: provide information, of the type to follow after a colon.
2144         This is an Exim flag. */
2145         case 'I':
2146           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2147             {
2148             uschar *p = argrest+1;
2149             info_flag = CMDINFO_HELP;
2150             if (Ustrlen(p))
2151               if (strcmpic(p, CUS"sieve") == 0)
2152                 {
2153                 info_flag = CMDINFO_SIEVE;
2154                 info_stdout = TRUE;
2155                 }
2156               else if (strcmpic(p, CUS"dscp") == 0)
2157                 {
2158                 info_flag = CMDINFO_DSCP;
2159                 info_stdout = TRUE;
2160                 }
2161               else if (strcmpic(p, CUS"help") == 0)
2162                 info_stdout = TRUE;
2163             }
2164           else badarg = TRUE;
2165           break;
2166
2167         /* -bm: Accept and deliver message - the default option. Reinstate
2168         receiving_message, which got turned off for all -b options.
2169            -bmalware: test the filename given for malware */
2170         case 'm':
2171           if (!*argrest) receiving_message = TRUE;
2172           else if (Ustrcmp(argrest, "alware") == 0)
2173             {
2174             if (++i >= argc) { badarg = TRUE; break; }
2175             checking = TRUE;
2176             malware_test_file = argv[i];
2177             }
2178           else badarg = TRUE;
2179           break;
2180
2181         /* -bnq: For locally originating messages, do not qualify unqualified
2182         addresses. In the envelope, this causes errors; in header lines they
2183         just get left. */
2184         case 'n':
2185           if (Ustrcmp(argrest, "q") == 0)
2186             {
2187             f.allow_unqualified_sender = FALSE;
2188             f.allow_unqualified_recipient = FALSE;
2189             }
2190           else badarg = TRUE;
2191           break;
2192
2193         /* -bpxx: List the contents of the mail queue, in various forms. If
2194         the option is -bpc, just a queue count is needed. Otherwise, if the
2195         first letter after p is r, then order is random. */
2196         case 'p':
2197           if (*argrest == 'c')
2198             {
2199             count_queue = TRUE;
2200             if (*++argrest) badarg = TRUE;
2201             break;
2202             }
2203
2204           if (*argrest == 'r')
2205             {
2206             list_queue_option = 8;
2207             argrest++;
2208             }
2209           else list_queue_option = 0;
2210
2211           list_queue = TRUE;
2212
2213           /* -bp: List the contents of the mail queue, top-level only */
2214
2215           if (!*argrest) {}
2216
2217           /* -bpu: List the contents of the mail queue, top-level undelivered */
2218
2219           else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2220
2221           /* -bpa: List the contents of the mail queue, including all delivered */
2222
2223           else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2224
2225           /* Unknown after -bp[r] */
2226
2227           else badarg = TRUE;
2228           break;
2229
2230
2231         /* -bP: List the configuration variables given as the address list.
2232         Force -v, so configuration errors get displayed. */
2233         case 'P':
2234
2235           /* -bP config: we need to setup here, because later,
2236            * when list_options is checked, the config is read already */
2237           if (*argrest)
2238             badarg = TRUE;
2239           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2240             {
2241             list_config = TRUE;
2242             readconf_save_config(version_string);
2243             }
2244           else
2245             {
2246             list_options = TRUE;
2247             debug_selector |= D_v;
2248             debug_file = stderr;
2249             }
2250           break;
2251
2252         /* -brt: Test retry configuration lookup */
2253         case 'r':
2254           if (Ustrcmp(argrest, "t") == 0)
2255             {
2256             checking = TRUE;
2257             test_retry_arg = i + 1;
2258             goto END_ARG;
2259             }
2260
2261           /* -brw: Test rewrite configuration */
2262
2263           else if (Ustrcmp(argrest, "w") == 0)
2264             {
2265             checking = TRUE;
2266             test_rewrite_arg = i + 1;
2267             goto END_ARG;
2268             }
2269           else badarg = TRUE;
2270           break;
2271
2272         /* -bS: Read SMTP commands on standard input, but produce no replies -
2273         all errors are reported by sending messages. */
2274         case 'S':
2275           if (!*argrest)
2276             smtp_input = smtp_batched_input = receiving_message = TRUE;
2277           else badarg = TRUE;
2278           break;
2279
2280         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2281         on standard output. */
2282         case 's':
2283           if (!*argrest) smtp_input = receiving_message = TRUE;
2284           else badarg = TRUE;
2285           break;
2286
2287         /* -bt: address testing mode */
2288         case 't':
2289           if (!*argrest)
2290             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2291           else badarg = TRUE;
2292           break;
2293
2294         /* -bv: verify addresses */
2295         case 'v':
2296           if (!*argrest)
2297             verify_address_mode = checking = f.log_testing_mode = TRUE;
2298
2299         /* -bvs: verify sender addresses */
2300
2301           else if (Ustrcmp(argrest, "s") == 0)
2302             {
2303             verify_address_mode = checking = f.log_testing_mode = TRUE;
2304             verify_as_sender = TRUE;
2305             }
2306           else badarg = TRUE;
2307           break;
2308
2309         /* -bV: Print version string and support details */
2310         case 'V':
2311           if (!*argrest)
2312             {
2313             printf("Exim version %s #%s built %s\n", version_string,
2314               version_cnumber, version_date);
2315             printf("%s\n", CS version_copyright);
2316             version_printed = TRUE;
2317             show_whats_supported(stdout);
2318             f.log_testing_mode = TRUE;
2319             }
2320           else badarg = TRUE;
2321           break;
2322
2323         /* -bw: inetd wait mode, accept a listening socket as stdin */
2324         case 'w':
2325           f.inetd_wait_mode = TRUE;
2326           f.background_daemon = FALSE;
2327           f.daemon_listen = TRUE;
2328           if (*argrest)
2329             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2330               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2331           break;
2332
2333         default:
2334           badarg = TRUE;
2335           break;
2336         }
2337       break;
2338       }
2339
2340
2341     /* -C: change configuration file list; ignore if it isn't really
2342     a change! Enforce a prefix check if required. */
2343
2344     case 'C':
2345     if (*argrest == 0)
2346       {
2347       if(++i < argc) argrest = argv[i]; else
2348         { badarg = TRUE; break; }
2349       }
2350     if (Ustrcmp(config_main_filelist, argrest) != 0)
2351       {
2352       #ifdef ALT_CONFIG_PREFIX
2353       int sep = 0;
2354       int len = Ustrlen(ALT_CONFIG_PREFIX);
2355       const uschar *list = argrest;
2356       uschar *filename;
2357       while((filename = string_nextinlist(&list, &sep, big_buffer,
2358              big_buffer_size)) != NULL)
2359         {
2360         if ((Ustrlen(filename) < len ||
2361              Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0 ||
2362              Ustrstr(filename, "/../") != NULL) &&
2363              (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid))
2364           exim_fail("-C Permission denied\n");
2365         }
2366       #endif
2367       if (real_uid != root_uid)
2368         {
2369         #ifdef TRUSTED_CONFIG_LIST
2370
2371         if (real_uid != exim_uid
2372             #ifdef CONFIGURE_OWNER
2373             && real_uid != config_uid
2374             #endif
2375             )
2376           f.trusted_config = FALSE;
2377         else
2378           {
2379           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2380           if (trust_list)
2381             {
2382             struct stat statbuf;
2383
2384             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2385                 (statbuf.st_uid != root_uid        /* owner not root */
2386                  #ifdef CONFIGURE_OWNER
2387                  && statbuf.st_uid != config_uid   /* owner not the special one */
2388                  #endif
2389                    ) ||                            /* or */
2390                 (statbuf.st_gid != root_gid        /* group not root */
2391                  #ifdef CONFIGURE_GROUP
2392                  && statbuf.st_gid != config_gid   /* group not the special one */
2393                  #endif
2394                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2395                    ) ||                            /* or */
2396                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2397               {
2398               f.trusted_config = FALSE;
2399               fclose(trust_list);
2400               }
2401             else
2402               {
2403               /* Well, the trust list at least is up to scratch... */
2404               rmark reset_point = store_mark();
2405               uschar *trusted_configs[32];
2406               int nr_configs = 0;
2407               int i = 0;
2408
2409               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2410                 {
2411                 uschar *start = big_buffer, *nl;
2412                 while (*start && isspace(*start))
2413                 start++;
2414                 if (*start != '/')
2415                   continue;
2416                 nl = Ustrchr(start, '\n');
2417                 if (nl)
2418                   *nl = 0;
2419                 trusted_configs[nr_configs++] = string_copy(start);
2420                 if (nr_configs == 32)
2421                   break;
2422                 }
2423               fclose(trust_list);
2424
2425               if (nr_configs)
2426                 {
2427                 int sep = 0;
2428                 const uschar *list = argrest;
2429                 uschar *filename;
2430                 while (f.trusted_config && (filename = string_nextinlist(&list,
2431                         &sep, big_buffer, big_buffer_size)) != NULL)
2432                   {
2433                   for (i=0; i < nr_configs; i++)
2434                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2435                       break;
2436                   if (i == nr_configs)
2437                     {
2438                     f.trusted_config = FALSE;
2439                     break;
2440                     }
2441                   }
2442                 }
2443               else      /* No valid prefixes found in trust_list file. */
2444                 f.trusted_config = FALSE;
2445               store_reset(reset_point);
2446               }
2447             }
2448           else          /* Could not open trust_list file. */
2449             f.trusted_config = FALSE;
2450           }
2451       #else
2452         /* Not root; don't trust config */
2453         f.trusted_config = FALSE;
2454       #endif
2455         }
2456
2457       config_main_filelist = argrest;
2458       f.config_changed = TRUE;
2459       }
2460     break;
2461
2462
2463     /* -D: set up a macro definition */
2464
2465     case 'D':
2466 #ifdef DISABLE_D_OPTION
2467       exim_fail("exim: -D is not available in this Exim binary\n");
2468 #else
2469       {
2470       int ptr = 0;
2471       macro_item *m;
2472       uschar name[24];
2473       uschar *s = argrest;
2474
2475       opt_D_used = TRUE;
2476       while (isspace(*s)) s++;
2477
2478       if (*s < 'A' || *s > 'Z')
2479         exim_fail("exim: macro name set by -D must start with "
2480           "an upper case letter\n");
2481
2482       while (isalnum(*s) || *s == '_')
2483         {
2484         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2485         s++;
2486         }
2487       name[ptr] = 0;
2488       if (ptr == 0) { badarg = TRUE; break; }
2489       while (isspace(*s)) s++;
2490       if (*s != 0)
2491         {
2492         if (*s++ != '=') { badarg = TRUE; break; }
2493         while (isspace(*s)) s++;
2494         }
2495
2496       for (m = macros_user; m; m = m->next)
2497         if (Ustrcmp(m->name, name) == 0)
2498           exim_fail("exim: duplicated -D in command line\n");
2499
2500       m = macro_create(name, s, TRUE);
2501
2502       if (clmacro_count >= MAX_CLMACROS)
2503         exim_fail("exim: too many -D options on command line\n");
2504       clmacros[clmacro_count++] =
2505         string_sprintf("-D%s=%s", m->name, m->replacement);
2506       }
2507     #endif
2508     break;
2509
2510     /* -d: Set debug level (see also -v below) or set the drop_cr option.
2511     The latter is now a no-op, retained for compatibility only. If -dd is used,
2512     debugging subprocesses of the daemon is disabled. */
2513
2514     case 'd':
2515     if (Ustrcmp(argrest, "ropcr") == 0)
2516       {
2517       /* drop_cr = TRUE; */
2518       }
2519
2520     /* Use an intermediate variable so that we don't set debugging while
2521     decoding the debugging bits. */
2522
2523     else
2524       {
2525       unsigned int selector = D_default;
2526       debug_selector = 0;
2527       debug_file = NULL;
2528       if (*argrest == 'd')
2529         {
2530         f.debug_daemon = TRUE;
2531         argrest++;
2532         }
2533       if (*argrest != 0)
2534         decode_bits(&selector, 1, debug_notall, argrest,
2535           debug_options, debug_options_count, US"debug", 0);
2536       debug_selector = selector;
2537       }
2538     break;
2539
2540
2541     /* -E: This is a local error message. This option is not intended for
2542     external use at all, but is not restricted to trusted callers because it
2543     does no harm (just suppresses certain error messages) and if Exim is run
2544     not setuid root it won't always be trusted when it generates error
2545     messages using this option. If there is a message id following -E, point
2546     message_reference at it, for logging. */
2547
2548     case 'E':
2549     f.local_error_message = TRUE;
2550     if (mac_ismsgid(argrest)) message_reference = argrest;
2551     break;
2552
2553
2554     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2555     option, so it looks as if historically the -oex options are also callable
2556     without the leading -o. So we have to accept them. Before the switch,
2557     anything starting -oe has been converted to -e. Exim does not support all
2558     of the sendmail error options. */
2559
2560     case 'e':
2561     if (Ustrcmp(argrest, "e") == 0)
2562       {
2563       arg_error_handling = ERRORS_SENDER;
2564       errors_sender_rc = EXIT_SUCCESS;
2565       }
2566     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2567     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2568     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2569     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2570     else badarg = TRUE;
2571     break;
2572
2573
2574     /* -F: Set sender's full name, used instead of the gecos entry from
2575     the password file. Since users can usually alter their gecos entries,
2576     there's no security involved in using this instead. The data can follow
2577     the -F or be in the next argument. */
2578
2579     case 'F':
2580     if (*argrest == 0)
2581       {
2582       if(++i < argc) argrest = argv[i]; else
2583         { badarg = TRUE; break; }
2584       }
2585     originator_name = argrest;
2586     f.sender_name_forced = TRUE;
2587     break;
2588
2589
2590     /* -f: Set sender's address - this value is only actually used if Exim is
2591     run by a trusted user, or if untrusted_set_sender is set and matches the
2592     address, except that the null address can always be set by any user. The
2593     test for this happens later, when the value given here is ignored when not
2594     permitted. For an untrusted user, the actual sender is still put in Sender:
2595     if it doesn't match the From: header (unless no_local_from_check is set).
2596     The data can follow the -f or be in the next argument. The -r switch is an
2597     obsolete form of -f but since there appear to be programs out there that
2598     use anything that sendmail has ever supported, better accept it - the
2599     synonymizing is done before the switch above.
2600
2601     At this stage, we must allow domain literal addresses, because we don't
2602     know what the setting of allow_domain_literals is yet. Ditto for trailing
2603     dots and strip_trailing_dot. */
2604
2605     case 'f':
2606       {
2607       int dummy_start, dummy_end;
2608       uschar *errmess;
2609       if (*argrest == 0)
2610         {
2611         if (i+1 < argc) argrest = argv[++i]; else
2612           { badarg = TRUE; break; }
2613         }
2614       if (*argrest == 0)
2615         *(sender_address = store_get(1, FALSE)) = '\0';  /* Ensure writeable memory */
2616       else
2617         {
2618         uschar *temp = argrest + Ustrlen(argrest) - 1;
2619         while (temp >= argrest && isspace(*temp)) temp--;
2620         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2621         allow_domain_literals = TRUE;
2622         strip_trailing_dot = TRUE;
2623 #ifdef SUPPORT_I18N
2624         allow_utf8_domains = TRUE;
2625 #endif
2626         sender_address = parse_extract_address(argrest, &errmess,
2627           &dummy_start, &dummy_end, &sender_address_domain, TRUE);
2628         sender_address = string_copy_taint(sender_address, TRUE);
2629 #ifdef SUPPORT_I18N
2630         message_smtputf8 =  string_is_utf8(sender_address);
2631         allow_utf8_domains = FALSE;
2632 #endif
2633         allow_domain_literals = FALSE;
2634         strip_trailing_dot = FALSE;
2635         if (!sender_address)
2636           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2637         }
2638       f.sender_address_forced = TRUE;
2639       }
2640     break;
2641
2642     /* -G: sendmail invocation to specify that it's a gateway submission and
2643     sendmail may complain about problems instead of fixing them.
2644     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2645     not at this time complain about problems. */
2646
2647     case 'G':
2648     flag_G = TRUE;
2649     break;
2650
2651     /* -h: Set the hop count for an incoming message. Exim does not currently
2652     support this; it always computes it by counting the Received: headers.
2653     To put it in will require a change to the spool header file format. */
2654
2655     case 'h':
2656     if (*argrest == 0)
2657       {
2658       if(++i < argc) argrest = argv[i]; else
2659         { badarg = TRUE; break; }
2660       }
2661     if (!isdigit(*argrest)) badarg = TRUE;
2662     break;
2663
2664
2665     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2666     not to be documented for sendmail but mailx (at least) uses it) */
2667
2668     case 'i':
2669     if (*argrest == 0) f.dot_ends = FALSE; else badarg = TRUE;
2670     break;
2671
2672
2673     /* -L: set the identifier used for syslog; equivalent to setting
2674     syslog_processname in the config file, but needs to be an admin option. */
2675
2676     case 'L':
2677     if (*argrest == '\0')
2678       {
2679       if(++i < argc) argrest = argv[i]; else
2680         { badarg = TRUE; break; }
2681       }
2682     if ((sz = Ustrlen(argrest)) > 32)
2683       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2684     if (sz < 1)
2685       exim_fail("exim: the -L syslog name is too short\n");
2686     cmdline_syslog_name = argrest;
2687     break;
2688
2689     case 'M':
2690     receiving_message = FALSE;
2691
2692     /* -MC:  continue delivery of another message via an existing open
2693     file descriptor. This option is used for an internal call by the
2694     smtp transport when there is a pending message waiting to go to an
2695     address to which it has got a connection. Five subsequent arguments are
2696     required: transport name, host name, IP address, sequence number, and
2697     message_id. Transports may decline to create new processes if the sequence
2698     number gets too big. The channel is stdin. This (-MC) must be the last
2699     argument. There's a subsequent check that the real-uid is privileged.
2700
2701     If we are running in the test harness. delay for a bit, to let the process
2702     that set this one up complete. This makes for repeatability of the logging,
2703     etc. output. */
2704
2705     if (Ustrcmp(argrest, "C") == 0)
2706       {
2707       union sockaddr_46 interface_sock;
2708       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2709
2710       if (argc != i + 6)
2711         exim_fail("exim: too many or too few arguments after -MC\n");
2712
2713       if (msg_action_arg >= 0)
2714         exim_fail("exim: incompatible arguments\n");
2715
2716       continue_transport = argv[++i];
2717       continue_hostname = argv[++i];
2718       continue_host_address = argv[++i];
2719       continue_sequence = Uatoi(argv[++i]);
2720       msg_action = MSG_DELIVER;
2721       msg_action_arg = ++i;
2722       forced_delivery = TRUE;
2723       queue_run_pid = passed_qr_pid;
2724       queue_run_pipe = passed_qr_pipe;
2725
2726       if (!mac_ismsgid(argv[i]))
2727         exim_fail("exim: malformed message id %s after -MC option\n",
2728           argv[i]);
2729
2730       /* Set up $sending_ip_address and $sending_port, unless proxied */
2731
2732       if (!continue_proxy_cipher)
2733         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2734             &size) == 0)
2735           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2736             &sending_port);
2737         else
2738           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2739             strerror(errno));
2740
2741       testharness_pause_ms(500);
2742       break;
2743       }
2744
2745     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2746       {
2747       switch(argrest[1])
2748         {
2749     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2750     precedes -MC (see above). The flag indicates that the host to which
2751     Exim is connected has accepted an AUTH sequence. */
2752
2753         case 'A': f.smtp_authenticated = TRUE; break;
2754
2755     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2756        that exim is connected to supports the esmtp extension DSN */
2757
2758         case 'D': smtp_peer_options |= OPTION_DSN; break;
2759
2760     /* -MCG: set the queue name, to a non-default value */
2761
2762         case 'G': if (++i < argc) queue_name = string_copy(argv[i]);
2763                   else badarg = TRUE;
2764                   break;
2765
2766     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2767
2768         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2769
2770     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2771     it preceded -MC (see above) */
2772
2773         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2774
2775     /* -MCQ: pass on the pid of the queue-running process that started
2776     this chain of deliveries and the fd of its synchronizing pipe; this
2777     is useful only when it precedes -MC (see above) */
2778
2779         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
2780                   else badarg = TRUE;
2781                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
2782                   else badarg = TRUE;
2783                   break;
2784
2785     /* -MCS: set the smtp_use_size flag; this is useful only when it
2786     precedes -MC (see above) */
2787
2788         case 'S': smtp_peer_options |= OPTION_SIZE; break;
2789
2790 #ifndef DISABLE_TLS
2791     /* -MCt: similar to -MCT below but the connection is still open
2792     via a proxy process which handles the TLS context and coding.
2793     Require three arguments for the proxied local address and port,
2794     and the TLS cipher.  */
2795
2796         case 't': if (++i < argc) sending_ip_address = argv[i];
2797                   else badarg = TRUE;
2798                   if (++i < argc) sending_port = (int)(Uatol(argv[i]));
2799                   else badarg = TRUE;
2800                   if (++i < argc) continue_proxy_cipher = argv[i];
2801                   else badarg = TRUE;
2802                   /*FALLTHROUGH*/
2803
2804     /* -MCT: set the tls_offered flag; this is useful only when it
2805     precedes -MC (see above). The flag indicates that the host to which
2806     Exim is connected has offered TLS support. */
2807
2808         case 'T': smtp_peer_options |= OPTION_TLS; break;
2809 #endif
2810
2811         default:  badarg = TRUE; break;
2812         }
2813       break;
2814       }
2815
2816     /* -M[x]: various operations on the following list of message ids:
2817        -M    deliver the messages, ignoring next retry times and thawing
2818        -Mc   deliver the messages, checking next retry times, no thawing
2819        -Mf   freeze the messages
2820        -Mg   give up on the messages
2821        -Mt   thaw the messages
2822        -Mrm  remove the messages
2823     In the above cases, this must be the last option. There are also the
2824     following options which are followed by a single message id, and which
2825     act on that message. Some of them use the "recipient" addresses as well.
2826        -Mar  add recipient(s)
2827        -Mmad mark all recipients delivered
2828        -Mmd  mark recipients(s) delivered
2829        -Mes  edit sender
2830        -Mset load a message for use with -be
2831        -Mvb  show body
2832        -Mvc  show copy (of whole message, in RFC 2822 format)
2833        -Mvh  show header
2834        -Mvl  show log
2835     */
2836
2837     else if (*argrest == 0)
2838       {
2839       msg_action = MSG_DELIVER;
2840       forced_delivery = f.deliver_force_thaw = TRUE;
2841       }
2842     else if (Ustrcmp(argrest, "ar") == 0)
2843       {
2844       msg_action = MSG_ADD_RECIPIENT;
2845       one_msg_action = TRUE;
2846       }
2847     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
2848     else if (Ustrcmp(argrest, "es") == 0)
2849       {
2850       msg_action = MSG_EDIT_SENDER;
2851       one_msg_action = TRUE;
2852       }
2853     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
2854     else if (Ustrcmp(argrest, "g") == 0)
2855       {
2856       msg_action = MSG_DELIVER;
2857       deliver_give_up = TRUE;
2858       }
2859    else if (Ustrcmp(argrest, "G") == 0)
2860       {
2861       msg_action = MSG_SETQUEUE;
2862       queue_name_dest = argv[++i];
2863       }
2864     else if (Ustrcmp(argrest, "mad") == 0)
2865       {
2866       msg_action = MSG_MARK_ALL_DELIVERED;
2867       }
2868     else if (Ustrcmp(argrest, "md") == 0)
2869       {
2870       msg_action = MSG_MARK_DELIVERED;
2871       one_msg_action = TRUE;
2872       }
2873     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
2874     else if (Ustrcmp(argrest, "set") == 0)
2875       {
2876       msg_action = MSG_LOAD;
2877       one_msg_action = TRUE;
2878       }
2879     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
2880     else if (Ustrcmp(argrest, "vb") == 0)
2881       {
2882       msg_action = MSG_SHOW_BODY;
2883       one_msg_action = TRUE;
2884       }
2885     else if (Ustrcmp(argrest, "vc") == 0)
2886       {
2887       msg_action = MSG_SHOW_COPY;
2888       one_msg_action = TRUE;
2889       }
2890     else if (Ustrcmp(argrest, "vh") == 0)
2891       {
2892       msg_action = MSG_SHOW_HEADER;
2893       one_msg_action = TRUE;
2894       }
2895     else if (Ustrcmp(argrest, "vl") == 0)
2896       {
2897       msg_action = MSG_SHOW_LOG;
2898       one_msg_action = TRUE;
2899       }
2900     else { badarg = TRUE; break; }
2901
2902     /* All the -Mxx options require at least one message id. */
2903
2904     msg_action_arg = i + 1;
2905     if (msg_action_arg >= argc)
2906       exim_fail("exim: no message ids given after %s option\n", arg);
2907
2908     /* Some require only message ids to follow */
2909
2910     if (!one_msg_action)
2911       {
2912       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
2913         exim_fail("exim: malformed message id %s after %s option\n",
2914           argv[j], arg);
2915       goto END_ARG;   /* Remaining args are ids */
2916       }
2917
2918     /* Others require only one message id, possibly followed by addresses,
2919     which will be handled as normal arguments. */
2920
2921     else
2922       {
2923       if (!mac_ismsgid(argv[msg_action_arg]))
2924         exim_fail("exim: malformed message id %s after %s option\n",
2925           argv[msg_action_arg], arg);
2926       i++;
2927       }
2928     break;
2929
2930
2931     /* Some programs seem to call the -om option without the leading o;
2932     for sendmail it askes for "me too". Exim always does this. */
2933
2934     case 'm':
2935     if (*argrest != 0) badarg = TRUE;
2936     break;
2937
2938
2939     /* -N: don't do delivery - a debugging option that stops transports doing
2940     their thing. It implies debugging at the D_v level. */
2941
2942     case 'N':
2943     if (*argrest == 0)
2944       {
2945       f.dont_deliver = TRUE;
2946       debug_selector |= D_v;
2947       debug_file = stderr;
2948       }
2949     else badarg = TRUE;
2950     break;
2951
2952
2953     /* -n: This means "don't alias" in sendmail, apparently.
2954     For normal invocations, it has no effect.
2955     It may affect some other options. */
2956
2957     case 'n':
2958     flag_n = TRUE;
2959     break;
2960
2961     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
2962     option to the specified value. This form uses long names. We need to handle
2963     -O option=value and -Ooption=value. */
2964
2965     case 'O':
2966     if (*argrest == 0)
2967       if (++i >= argc)
2968         exim_fail("exim: string expected after -O\n");
2969     break;
2970
2971     case 'o':
2972     switch (*argrest++)
2973       {
2974       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
2975       file" option). */
2976       case 'A':
2977         if (!*(alias_arg = argrest))
2978           if (i+1 < argc) alias_arg = argv[++i];
2979           else exim_fail("exim: string expected after -oA\n");
2980         break;
2981
2982       /* -oB: Set a connection message max value for remote deliveries */
2983       case 'B':
2984         {
2985         uschar * p = argrest;
2986         if (!*p)
2987           if (i+1 < argc && isdigit((argv[i+1][0])))
2988             p = argv[++i];
2989           else
2990             {
2991             connection_max_messages = 1;
2992             p = NULL;
2993             }
2994
2995         if (p)
2996           {
2997           if (!isdigit(*p))
2998             exim_fail("exim: number expected after -oB\n");
2999           connection_max_messages = Uatoi(p);
3000           }
3001         }
3002         break;
3003
3004       /* -odb: background delivery */
3005
3006       case 'd':
3007         if (Ustrcmp(argrest, "b") == 0)
3008           {
3009           f.synchronous_delivery = FALSE;
3010           arg_queue_only = FALSE;
3011           queue_only_set = TRUE;
3012           }
3013
3014       /* -odd: testsuite-only: add no inter-process delays */
3015
3016         else if (Ustrcmp(argrest, "d") == 0)
3017           f.testsuite_delays = FALSE;
3018
3019       /* -odf: foreground delivery (smail-compatible option); same effect as
3020          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3021       */
3022
3023         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3024           {
3025           f.synchronous_delivery = TRUE;
3026           arg_queue_only = FALSE;
3027           queue_only_set = TRUE;
3028           }
3029
3030       /* -odq: queue only */
3031
3032         else if (Ustrcmp(argrest, "q") == 0)
3033           {
3034           f.synchronous_delivery = FALSE;
3035           arg_queue_only = TRUE;
3036           queue_only_set = TRUE;
3037           }
3038
3039       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3040       but no remote delivery */
3041
3042         else if (Ustrcmp(argrest, "qs") == 0)
3043           {
3044           f.queue_smtp = TRUE;
3045           arg_queue_only = FALSE;
3046           queue_only_set = TRUE;
3047           }
3048         else badarg = TRUE;
3049         break;
3050
3051       /* -oex: Sendmail error flags. As these are also accepted without the
3052       leading -o prefix, for compatibility with vacation and other callers,
3053       they are handled with -e above. */
3054
3055       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3056          -oitrue: Another sendmail syntax for the same */
3057
3058       case 'i':
3059         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3060           f.dot_ends = FALSE;
3061         else badarg = TRUE;
3062         break;
3063
3064     /* -oM*: Set various characteristics for an incoming message; actually
3065     acted on for trusted callers only. */
3066
3067       case 'M':
3068         {
3069         if (i+1 >= argc)
3070           exim_fail("exim: data expected after -oM%s\n", argrest);
3071
3072         /* -oMa: Set sender host address */
3073
3074         if (Ustrcmp(argrest, "a") == 0) sender_host_address = argv[++i];
3075
3076         /* -oMaa: Set authenticator name */
3077
3078         else if (Ustrcmp(argrest, "aa") == 0)
3079           sender_host_authenticated = argv[++i];
3080
3081         /* -oMas: setting authenticated sender */
3082
3083         else if (Ustrcmp(argrest, "as") == 0)
3084           authenticated_sender = string_copy_taint(argv[++i], TRUE);
3085
3086         /* -oMai: setting authenticated id */
3087
3088         else if (Ustrcmp(argrest, "ai") == 0)
3089           authenticated_id = string_copy_taint(argv[++i], TRUE);
3090
3091         /* -oMi: Set incoming interface address */
3092
3093         else if (Ustrcmp(argrest, "i") == 0) interface_address = argv[++i];
3094
3095         /* -oMm: Message reference */
3096
3097         else if (Ustrcmp(argrest, "m") == 0)
3098           {
3099           if (!mac_ismsgid(argv[i+1]))
3100               exim_fail("-oMm must be a valid message ID\n");
3101           if (!f.trusted_config)
3102               exim_fail("-oMm must be called by a trusted user/config\n");
3103             message_reference = argv[++i];
3104           }
3105
3106         /* -oMr: Received protocol */
3107
3108         else if (Ustrcmp(argrest, "r") == 0)
3109
3110           if (received_protocol)
3111             exim_fail("received_protocol is set already\n");
3112           else
3113             received_protocol = argv[++i];
3114
3115         /* -oMs: Set sender host name */
3116
3117         else if (Ustrcmp(argrest, "s") == 0)
3118           sender_host_name = string_copy_taint(argv[++i], TRUE);
3119
3120         /* -oMt: Set sender ident */
3121
3122         else if (Ustrcmp(argrest, "t") == 0)
3123           {
3124           sender_ident_set = TRUE;
3125           sender_ident = argv[++i];
3126           }
3127
3128         /* Else a bad argument */
3129
3130         else
3131           badarg = TRUE;
3132         }
3133         break;
3134
3135       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3136       seem to call this as -m (undocumented), so that is also accepted (see
3137       above). */
3138       /* -oo: An ancient flag for old-style addresses which still seems to
3139       crop up in some calls (see in SCO). */
3140
3141       case 'm':
3142       case 'o':
3143         if (*argrest) badarg = TRUE;
3144         break;
3145
3146       /* -oP <name>: set pid file path for daemon
3147          -oPX:       delete pid file of daemon */
3148
3149       case 'P':
3150         if (!*argrest) override_pid_file_path = argv[++i];
3151         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3152         else badarg = TRUE;
3153         break;
3154
3155
3156       /* -or <n>: set timeout for non-SMTP acceptance
3157          -os <n>: set timeout for SMTP acceptance */
3158
3159       case 'r':
3160       case 's':
3161         {
3162         int * tp = argrest[-1] == 'r'
3163           ? &arg_receive_timeout : &arg_smtp_receive_timeout;
3164         if (*argrest)
3165           *tp = readconf_readtime(argrest, 0, FALSE);
3166         else if (i+1 < argc)
3167           *tp = readconf_readtime(argv[++i], 0, FALSE);
3168
3169         if (*tp < 0)
3170           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3171         }
3172         break;
3173
3174       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3175
3176       case 'X':
3177         if (*argrest) badarg = TRUE;
3178         else override_local_interfaces = argv[++i];
3179         break;
3180
3181       /* Unknown -o argument */
3182
3183       default:
3184         badarg = TRUE;
3185       }
3186     break;
3187
3188
3189     /* -ps: force Perl startup; -pd force delayed Perl startup */
3190
3191     case 'p':
3192     #ifdef EXIM_PERL
3193     if (*argrest == 's' && argrest[1] == 0)
3194       {
3195       perl_start_option = 1;
3196       break;
3197       }
3198     if (*argrest == 'd' && argrest[1] == 0)
3199       {
3200       perl_start_option = -1;
3201       break;
3202       }
3203     #endif
3204
3205     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3206     which sets the host protocol and host name */
3207
3208     if (*argrest == 0)
3209       if (i+1 < argc)
3210         argrest = argv[++i];
3211       else
3212         { badarg = TRUE; break; }
3213
3214     if (*argrest != 0)
3215       {
3216       uschar *hn;
3217
3218       if (received_protocol)
3219         exim_fail("received_protocol is set already\n");
3220
3221       hn = Ustrchr(argrest, ':');
3222       if (hn == NULL)
3223         received_protocol = argrest;
3224       else
3225         {
3226         int old_pool = store_pool;
3227         store_pool = POOL_PERM;
3228         received_protocol = string_copyn(argrest, hn - argrest);
3229         store_pool = old_pool;
3230         sender_host_name = hn + 1;
3231         }
3232       }
3233     break;
3234
3235
3236     case 'q':
3237     receiving_message = FALSE;
3238     if (queue_interval >= 0)
3239       exim_fail("exim: -q specified more than once\n");
3240
3241     /* -qq...: Do queue runs in a 2-stage manner */
3242
3243     if (*argrest == 'q')
3244       {
3245       f.queue_2stage = TRUE;
3246       argrest++;
3247       }
3248
3249     /* -qi...: Do only first (initial) deliveries */
3250
3251     if (*argrest == 'i')
3252       {
3253       f.queue_run_first_delivery = TRUE;
3254       argrest++;
3255       }
3256
3257     /* -qf...: Run the queue, forcing deliveries
3258        -qff..: Ditto, forcing thawing as well */
3259
3260     if (*argrest == 'f')
3261       {
3262       f.queue_run_force = TRUE;
3263       if (*++argrest == 'f')
3264         {
3265         f.deliver_force_thaw = TRUE;
3266         argrest++;
3267         }
3268       }
3269
3270     /* -q[f][f]l...: Run the queue only on local deliveries */
3271
3272     if (*argrest == 'l')
3273       {
3274       f.queue_run_local = TRUE;
3275       argrest++;
3276       }
3277
3278     /* -q[f][f][l][G<name>]... Work on the named queue */
3279
3280     if (*argrest == 'G')
3281       {
3282       int i;
3283       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3284       queue_name = string_copyn(argrest, i);
3285       argrest += i;
3286       if (*argrest == '/') argrest++;
3287       }
3288
3289     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3290     only, optionally named, optionally starting from a given message id. */
3291
3292     if (!(list_queue || count_queue))
3293       if (*argrest == 0
3294          && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3295         {
3296         queue_interval = 0;
3297         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3298           start_queue_run_id = argv[++i];
3299         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3300           stop_queue_run_id = argv[++i];
3301         }
3302
3303     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3304     forced, optionally local only, optionally named. */
3305
3306       else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3307                                                   0, FALSE)) <= 0)
3308         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3309     break;
3310
3311
3312     case 'R':   /* Synonymous with -qR... */
3313     receiving_message = FALSE;
3314
3315     /* -Rf:   As -R (below) but force all deliveries,
3316        -Rff:  Ditto, but also thaw all frozen messages,
3317        -Rr:   String is regex
3318        -Rrf:  Regex and force
3319        -Rrff: Regex and force and thaw
3320
3321     in all cases provided there are no further characters in this
3322     argument. */
3323
3324     if (*argrest != 0)
3325       for (int i = 0; i < nelem(rsopts); i++)
3326         if (Ustrcmp(argrest, rsopts[i]) == 0)
3327           {
3328           if (i != 2) f.queue_run_force = TRUE;
3329           if (i >= 2) f.deliver_selectstring_regex = TRUE;
3330           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3331           argrest += Ustrlen(rsopts[i]);
3332           }
3333
3334     /* -R: Set string to match in addresses for forced queue run to
3335     pick out particular messages. */
3336
3337     if (*argrest)
3338       deliver_selectstring = argrest;
3339     else if (i+1 < argc)
3340       deliver_selectstring = argv[++i];
3341     else
3342       exim_fail("exim: string expected after -R\n");
3343     break;
3344
3345
3346     /* -r: an obsolete synonym for -f (see above) */
3347
3348
3349     /* -S: Like -R but works on sender. */
3350
3351     case 'S':   /* Synonymous with -qS... */
3352     receiving_message = FALSE;
3353
3354     /* -Sf:   As -S (below) but force all deliveries,
3355        -Sff:  Ditto, but also thaw all frozen messages,
3356        -Sr:   String is regex
3357        -Srf:  Regex and force
3358        -Srff: Regex and force and thaw
3359
3360     in all cases provided there are no further characters in this
3361     argument. */
3362
3363     if (*argrest)
3364       for (int i = 0; i < nelem(rsopts); i++)
3365         if (Ustrcmp(argrest, rsopts[i]) == 0)
3366           {
3367           if (i != 2) f.queue_run_force = TRUE;
3368           if (i >= 2) f.deliver_selectstring_sender_regex = TRUE;
3369           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3370           argrest += Ustrlen(rsopts[i]);
3371           }
3372
3373     /* -S: Set string to match in addresses for forced queue run to
3374     pick out particular messages. */
3375
3376     if (*argrest)
3377       deliver_selectstring_sender = argrest;
3378     else if (i+1 < argc)
3379       deliver_selectstring_sender = argv[++i];
3380     else
3381       exim_fail("exim: string expected after -S\n");
3382     break;
3383
3384     /* -Tqt is an option that is exclusively for use by the testing suite.
3385     It is not recognized in other circumstances. It allows for the setting up
3386     of explicit "queue times" so that various warning/retry things can be
3387     tested. Otherwise variability of clock ticks etc. cause problems. */
3388
3389     case 'T':
3390     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3391       fudged_queue_times = argv[++i];
3392     else badarg = TRUE;
3393     break;
3394
3395
3396     /* -t: Set flag to extract recipients from body of message. */
3397
3398     case 't':
3399     if (*argrest == 0) extract_recipients = TRUE;
3400
3401     /* -ti: Set flag to extract recipients from body of message, and also
3402     specify that dot does not end the message. */
3403
3404     else if (Ustrcmp(argrest, "i") == 0)
3405       {
3406       extract_recipients = TRUE;
3407       f.dot_ends = FALSE;
3408       }
3409
3410     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3411
3412     #ifndef DISABLE_TLS
3413     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3414     #endif
3415
3416     else badarg = TRUE;
3417     break;
3418
3419
3420     /* -U: This means "initial user submission" in sendmail, apparently. The
3421     doc claims that in future sendmail may refuse syntactically invalid
3422     messages instead of fixing them. For the moment, we just ignore it. */
3423
3424     case 'U':
3425     break;
3426
3427
3428     /* -v: verify things - this is a very low-level debugging */
3429
3430     case 'v':
3431     if (*argrest == 0)
3432       {
3433       debug_selector |= D_v;
3434       debug_file = stderr;
3435       }
3436     else badarg = TRUE;
3437     break;
3438
3439
3440     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3441
3442       The -x flag tells the sendmail command that mail from a local
3443       mail program has National Language Support (NLS) extended characters
3444       in the body of the mail item. The sendmail command can send mail with
3445       extended NLS characters across networks that normally corrupts these
3446       8-bit characters.
3447
3448     As Exim is 8-bit clean, it just ignores this flag. */
3449
3450     case 'x':
3451     if (*argrest != 0) badarg = TRUE;
3452     break;
3453
3454     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3455     logs to that file.  We swallow the parameter and otherwise ignore it. */
3456
3457     case 'X':
3458     if (*argrest == '\0')
3459       if (++i >= argc)
3460         exim_fail("exim: string expected after -X\n");
3461     break;
3462
3463     case 'z':
3464     if (*argrest == '\0')
3465       if (++i < argc)
3466         log_oneline = argv[i];
3467       else
3468         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3469     break;
3470
3471     /* All other initial characters are errors */
3472
3473     default:
3474     badarg = TRUE;
3475     break;
3476     }         /* End of high-level switch statement */
3477
3478   /* Failed to recognize the option, or syntax error */
3479
3480   if (badarg)
3481     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3482       "option %s\n", arg);
3483   }
3484
3485
3486 /* If -R or -S have been specified without -q, assume a single queue run. */
3487
3488 if (  (deliver_selectstring || deliver_selectstring_sender)
3489    && queue_interval < 0)
3490     queue_interval = 0;
3491
3492
3493 END_ARG:
3494 /* If usage_wanted is set we call the usage function - which never returns */
3495 if (usage_wanted) exim_usage(called_as);
3496
3497 /* Arguments have been processed. Check for incompatibilities. */
3498 if ((
3499     (smtp_input || extract_recipients || recipients_arg < argc) &&
3500     (f.daemon_listen || queue_interval >= 0 || bi_option ||
3501       test_retry_arg >= 0 || test_rewrite_arg >= 0 ||
3502       filter_test != FTEST_NONE || (msg_action_arg > 0 && !one_msg_action))
3503     ) ||
3504     (
3505     msg_action_arg > 0 &&
3506     (f.daemon_listen || queue_interval > 0 || list_options ||
3507       (checking && msg_action != MSG_LOAD) ||
3508       bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0)
3509     ) ||
3510     (
3511     (f.daemon_listen || queue_interval > 0) &&
3512     (sender_address != NULL || list_options || list_queue || checking ||
3513       bi_option)
3514     ) ||
3515     (
3516     f.daemon_listen && queue_interval == 0
3517     ) ||
3518     (
3519     f.inetd_wait_mode && queue_interval >= 0
3520     ) ||
3521     (
3522     list_options &&
3523     (checking || smtp_input || extract_recipients ||
3524       filter_test != FTEST_NONE || bi_option)
3525     ) ||
3526     (
3527     verify_address_mode &&
3528     (f.address_test_mode || smtp_input || extract_recipients ||
3529       filter_test != FTEST_NONE || bi_option)
3530     ) ||
3531     (
3532     f.address_test_mode && (smtp_input || extract_recipients ||
3533       filter_test != FTEST_NONE || bi_option)
3534     ) ||
3535     (
3536     smtp_input && (sender_address != NULL || filter_test != FTEST_NONE ||
3537       extract_recipients)
3538     ) ||
3539     (
3540     deliver_selectstring != NULL && queue_interval < 0
3541     ) ||
3542     (
3543     msg_action == MSG_LOAD &&
3544       (!expansion_test || expansion_test_message != NULL)
3545     )
3546    )
3547   exim_fail("exim: incompatible command-line options or arguments\n");
3548
3549 /* If debugging is set up, set the file and the file descriptor to pass on to
3550 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3551 to run in the foreground. */
3552
3553 if (debug_selector != 0)
3554   {
3555   debug_file = stderr;
3556   debug_fd = fileno(debug_file);
3557   f.background_daemon = FALSE;
3558   testharness_pause_ms(100);   /* lets caller finish */
3559   if (debug_selector != D_v)    /* -v only doesn't show this */
3560     {
3561     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3562       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3563       debug_selector);
3564     if (!version_printed)
3565       show_whats_supported(stderr);
3566     }
3567   }
3568
3569 /* When started with root privilege, ensure that the limits on the number of
3570 open files and the number of processes (where that is accessible) are
3571 sufficiently large, or are unset, in case Exim has been called from an
3572 environment where the limits are screwed down. Not all OS have the ability to
3573 change some of these limits. */
3574
3575 if (unprivileged)
3576   {
3577   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3578   }
3579 else
3580   {
3581   struct rlimit rlp;
3582
3583   #ifdef RLIMIT_NOFILE
3584   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3585     {
3586     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3587       strerror(errno));
3588     rlp.rlim_cur = rlp.rlim_max = 0;
3589     }
3590
3591   /* I originally chose 1000 as a nice big number that was unlikely to
3592   be exceeded. It turns out that some older OS have a fixed upper limit of
3593   256. */
3594
3595   if (rlp.rlim_cur < 1000)
3596     {
3597     rlp.rlim_cur = rlp.rlim_max = 1000;
3598     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3599       {
3600       rlp.rlim_cur = rlp.rlim_max = 256;
3601       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3602         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3603           strerror(errno));
3604       }
3605     }
3606   #endif
3607
3608   #ifdef RLIMIT_NPROC
3609   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3610     {
3611     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3612       strerror(errno));
3613     rlp.rlim_cur = rlp.rlim_max = 0;
3614     }
3615
3616   #ifdef RLIM_INFINITY
3617   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3618     {
3619     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3620   #else
3621   if (rlp.rlim_cur < 1000)
3622     {
3623     rlp.rlim_cur = rlp.rlim_max = 1000;
3624   #endif
3625     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3626       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3627         strerror(errno));
3628     }
3629   #endif
3630   }
3631
3632 /* Exim is normally entered as root (but some special configurations are
3633 possible that don't do this). However, it always spins off sub-processes that
3634 set their uid and gid as required for local delivery. We don't want to pass on
3635 any extra groups that root may belong to, so we want to get rid of them all at
3636 this point.
3637
3638 We need to obey setgroups() at this stage, before possibly giving up root
3639 privilege for a changed configuration file, but later on we might need to
3640 check on the additional groups for the admin user privilege - can't do that
3641 till after reading the config, which might specify the exim gid. Therefore,
3642 save the group list here first. */
3643
3644 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3645   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3646
3647 /* There is a fundamental difference in some BSD systems in the matter of
3648 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3649 known not to be different. On the "different" systems there is a single group
3650 list, and the first entry in it is the current group. On all other versions of
3651 Unix there is a supplementary group list, which is in *addition* to the current
3652 group. Consequently, to get rid of all extraneous groups on a "standard" system
3653 you pass over 0 groups to setgroups(), while on a "different" system you pass
3654 over a single group - the current group, which is always the first group in the
3655 list. Calling setgroups() with zero groups on a "different" system results in
3656 an error return. The following code should cope with both types of system.
3657
3658  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
3659  the "setgroups() with zero groups" - and changes the egid.
3660  Thanks to that we had to stash the original_egid above, for use below
3661  in the call to exim_setugid().
3662
3663 However, if this process isn't running as root, setgroups() can't be used
3664 since you have to be root to run it, even if throwing away groups.
3665 Except, sigh, for Hurd - where you can.
3666 Not being root here happens only in some unusual configurations. */
3667
3668 if (  !unprivileged
3669 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
3670    && setgroups(0, NULL) != 0
3671 #endif
3672    && setgroups(1, group_list) != 0)
3673   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
3674
3675 /* If the configuration file name has been altered by an argument on the
3676 command line (either a new file name or a macro definition) and the caller is
3677 not root, or if this is a filter testing run, remove any setuid privilege the
3678 program has and run as the underlying user.
3679
3680 The exim user is locked out of this, which severely restricts the use of -C
3681 for some purposes.
3682
3683 Otherwise, set the real ids to the effective values (should be root unless run
3684 from inetd, which it can either be root or the exim uid, if one is configured).
3685
3686 There is a private mechanism for bypassing some of this, in order to make it
3687 possible to test lots of configurations automatically, without having either to
3688 recompile each time, or to patch in an actual configuration file name and other
3689 values (such as the path name). If running in the test harness, pretend that
3690 configuration file changes and macro definitions haven't happened. */
3691
3692 if ((                                            /* EITHER */
3693     (!f.trusted_config ||                          /* Config changed, or */
3694      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
3695     real_uid != root_uid &&                      /* Not root, and */
3696     !f.running_in_test_harness                     /* Not fudged */
3697     ) ||                                         /*   OR   */
3698     expansion_test                               /* expansion testing */
3699     ||                                           /*   OR   */
3700     filter_test != FTEST_NONE)                   /* Filter testing */
3701   {
3702   setgroups(group_count, group_list);
3703   exim_setugid(real_uid, real_gid, FALSE,
3704     US"-C, -D, -be or -bf forces real uid");
3705   removed_privilege = TRUE;
3706
3707   /* In the normal case when Exim is called like this, stderr is available
3708   and should be used for any logging information because attempts to write
3709   to the log will usually fail. To arrange this, we unset really_exim. However,
3710   if no stderr is available there is no point - we might as well have a go
3711   at the log (if it fails, syslog will be written).
3712
3713   Note that if the invoker is Exim, the logs remain available. Messing with
3714   this causes unlogged successful deliveries.  */
3715
3716   if (log_stderr && real_uid != exim_uid)
3717     f.really_exim = FALSE;
3718   }
3719
3720 /* Privilege is to be retained for the moment. It may be dropped later,
3721 depending on the job that this Exim process has been asked to do. For now, set
3722 the real uid to the effective so that subsequent re-execs of Exim are done by a
3723 privileged user. */
3724
3725 else
3726   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
3727
3728 /* If testing a filter, open the file(s) now, before wasting time doing other
3729 setups and reading the message. */
3730
3731 if (filter_test & FTEST_SYSTEM)
3732   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
3733     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
3734       strerror(errno));
3735
3736 if (filter_test & FTEST_USER)
3737   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
3738     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
3739       strerror(errno));
3740
3741 /* Initialise lookup_list
3742 If debugging, already called above via version reporting.
3743 In either case, we initialise the list of available lookups while running
3744 as root.  All dynamically modules are loaded from a directory which is
3745 hard-coded into the binary and is code which, if not a module, would be
3746 part of Exim already.  Ability to modify the content of the directory
3747 is equivalent to the ability to modify a setuid binary!
3748
3749 This needs to happen before we read the main configuration. */
3750 init_lookup_list();
3751
3752 #ifdef SUPPORT_I18N
3753 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
3754 #endif
3755
3756 /* Read the main runtime configuration data; this gives up if there
3757 is a failure. It leaves the configuration file open so that the subsequent
3758 configuration data for delivery can be read if needed.
3759
3760 NOTE: immediately after opening the configuration file we change the working
3761 directory to "/"! Later we change to $spool_directory. We do it there, because
3762 during readconf_main() some expansion takes place already. */
3763
3764 /* Store the initial cwd before we change directories.  Can be NULL if the
3765 dir has already been unlinked. */
3766 initial_cwd = os_getcwd(NULL, 0);
3767
3768 /* checking:
3769     -be[m] expansion test        -
3770     -b[fF] filter test           new
3771     -bh[c] host test             -
3772     -bmalware malware_test_file  new
3773     -brt   retry test            new
3774     -brw   rewrite test          new
3775     -bt    address test          -
3776     -bv[s] address verify        -
3777    list_options:
3778     -bP <option> (except -bP config, which sets list_config)
3779
3780 If any of these options is set, we suppress warnings about configuration
3781 issues (currently about tls_advertise_hosts and keep_environment not being
3782 defined) */
3783
3784   {
3785 #ifdef MEASURE_TIMING
3786   struct timeval t0, diff;
3787   (void)gettimeofday(&t0, NULL);
3788 #endif
3789
3790   readconf_main(checking || list_options);
3791
3792 #ifdef MEASURE_TIMING
3793   report_time_since(&t0, US"readconf_main (delta)");
3794 #endif
3795   }
3796
3797
3798 /* Now in directory "/" */
3799
3800 if (cleanup_environment() == FALSE)
3801   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
3802
3803
3804 /* If an action on specific messages is requested, or if a daemon or queue
3805 runner is being started, we need to know if Exim was called by an admin user.
3806 This is the case if the real user is root or exim, or if the real group is
3807 exim, or if one of the supplementary groups is exim or a group listed in
3808 admin_groups. We don't fail all message actions immediately if not admin_user,
3809 since some actions can be performed by non-admin users. Instead, set admin_user
3810 for later interrogation. */
3811
3812 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
3813   f.admin_user = TRUE;
3814 else
3815   for (int i = 0; i < group_count && !f.admin_user; i++)
3816     if (group_list[i] == exim_gid)
3817       f.admin_user = TRUE;
3818     else if (admin_groups)
3819       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
3820         if (admin_groups[j] == group_list[i])
3821           f.admin_user = TRUE;
3822
3823 /* Another group of privileged users are the trusted users. These are root,
3824 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
3825 are permitted to specify sender_addresses with -f on the command line, and
3826 other message parameters as well. */
3827
3828 if (real_uid == root_uid || real_uid == exim_uid)
3829   f.trusted_caller = TRUE;
3830 else
3831   {
3832   if (trusted_users)
3833     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
3834       if (trusted_users[i] == real_uid)
3835         f.trusted_caller = TRUE;
3836
3837   if (trusted_groups)
3838     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
3839       if (trusted_groups[i] == real_gid)
3840         f.trusted_caller = TRUE;
3841       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
3842         if (trusted_groups[i] == group_list[j])
3843           f.trusted_caller = TRUE;
3844   }
3845
3846 /* At this point, we know if the user is privileged and some command-line
3847 options become possibly impermissible, depending upon the configuration file. */
3848
3849 if (checking && commandline_checks_require_admin && !f.admin_user)
3850   exim_fail("exim: those command-line flags are set to require admin\n");
3851
3852 /* Handle the decoding of logging options. */
3853
3854 decode_bits(log_selector, log_selector_size, log_notall,
3855   log_selector_string, log_options, log_options_count, US"log", 0);
3856
3857 DEBUG(D_any)
3858   {
3859   debug_printf("configuration file is %s\n", config_main_filename);
3860   debug_printf("log selectors =");
3861   for (int i = 0; i < log_selector_size; i++)
3862     debug_printf(" %08x", log_selector[i]);
3863   debug_printf("\n");
3864   }
3865
3866 /* If domain literals are not allowed, check the sender address that was
3867 supplied with -f. Ditto for a stripped trailing dot. */
3868
3869 if (sender_address)
3870   {
3871   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
3872     exim_fail("exim: bad -f address \"%s\": domain literals not "
3873       "allowed\n", sender_address);
3874   if (f_end_dot && !strip_trailing_dot)
3875     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
3876       "(trailing dot not allowed)\n", sender_address);
3877   }
3878
3879 /* See if an admin user overrode our logging. */
3880
3881 if (cmdline_syslog_name)
3882   if (f.admin_user)
3883     {
3884     syslog_processname = cmdline_syslog_name;
3885     log_file_path = string_copy(CUS"syslog");
3886     }
3887   else
3888     /* not a panic, non-privileged users should not be able to spam paniclog */
3889     exim_fail(
3890         "exim: you lack sufficient privilege to specify syslog process name\n");
3891
3892 /* Paranoia check of maximum lengths of certain strings. There is a check
3893 on the length of the log file path in log.c, which will come into effect
3894 if there are any calls to write the log earlier than this. However, if we
3895 get this far but the string is very long, it is better to stop now than to
3896 carry on and (e.g.) receive a message and then have to collapse. The call to
3897 log_write() from here will cause the ultimate panic collapse if the complete
3898 file name exceeds the buffer length. */
3899
3900 if (Ustrlen(log_file_path) > 200)
3901   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3902     "log_file_path is longer than 200 chars: aborting");
3903
3904 if (Ustrlen(pid_file_path) > 200)
3905   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3906     "pid_file_path is longer than 200 chars: aborting");
3907
3908 if (Ustrlen(spool_directory) > 200)
3909   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3910     "spool_directory is longer than 200 chars: aborting");
3911
3912 /* Length check on the process name given to syslog for its TAG field,
3913 which is only permitted to be 32 characters or less. See RFC 3164. */
3914
3915 if (Ustrlen(syslog_processname) > 32)
3916   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3917     "syslog_processname is longer than 32 chars: aborting");
3918
3919 if (log_oneline)
3920   if (f.admin_user)
3921     {
3922     log_write(0, LOG_MAIN, "%s", log_oneline);
3923     return EXIT_SUCCESS;
3924     }
3925   else
3926     return EXIT_FAILURE;
3927
3928 /* In some operating systems, the environment variable TMPDIR controls where
3929 temporary files are created; Exim doesn't use these (apart from when delivering
3930 to MBX mailboxes), but called libraries such as DBM libraries may require them.
3931 If TMPDIR is found in the environment, reset it to the value defined in the
3932 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
3933 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
3934 EXIM_TMPDIR by the build scripts.
3935 */
3936
3937 #ifdef EXIM_TMPDIR
3938   if (environ) for (uschar ** p = USS environ; *p; p++)
3939     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
3940       {
3941       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
3942       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
3943       *p = newp;
3944       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
3945       }
3946 #endif
3947
3948 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
3949 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
3950 we may need to get rid of a bogus timezone setting. This can arise when Exim is
3951 called by a user who has set the TZ variable. This then affects the timestamps
3952 in log files and in Received: headers, and any created Date: header lines. The
3953 required timezone is settable in the configuration file, so nothing can be done
3954 about this earlier - but hopefully nothing will normally be logged earlier than
3955 this. We have to make a new environment if TZ is wrong, but don't bother if
3956 timestamps_utc is set, because then all times are in UTC anyway. */
3957
3958 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
3959   f.timestamps_utc = TRUE;
3960 else
3961   {
3962   uschar *envtz = US getenv("TZ");
3963   if (envtz
3964       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
3965       : timezone_string != NULL
3966      )
3967     {
3968     uschar **p = USS environ;
3969     uschar **new;
3970     uschar **newp;
3971     int count = 0;
3972     if (environ) while (*p++) count++;
3973     if (!envtz) count++;
3974     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
3975     if (environ) for (p = USS environ; *p; p++)
3976       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
3977     if (timezone_string)
3978       {
3979       *newp = store_malloc(Ustrlen(timezone_string) + 4);
3980       sprintf(CS *newp++, "TZ=%s", timezone_string);
3981       }
3982     *newp = NULL;
3983     environ = CSS new;
3984     tzset();
3985     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
3986       tod_stamp(tod_log));
3987     }
3988   }
3989
3990 /* Handle the case when we have removed the setuid privilege because of -C or
3991 -D. This means that the caller of Exim was not root.
3992
3993 There is a problem if we were running as the Exim user. The sysadmin may
3994 expect this case to retain privilege because "the binary was called by the
3995 Exim user", but it hasn't, because either the -D option set macros, or the
3996 -C option set a non-trusted configuration file. There are two possibilities:
3997
3998   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
3999       to do message deliveries. Thus, the fact that it is running as a
4000       non-privileged user is plausible, and might be wanted in some special
4001       configurations. However, really_exim will have been set false when
4002       privilege was dropped, to stop Exim trying to write to its normal log
4003       files. Therefore, re-enable normal log processing, assuming the sysadmin
4004       has set up the log directory correctly.
4005
4006   (2) If deliver_drop_privilege is not set, the configuration won't work as
4007       apparently intended, and so we log a panic message. In order to retain
4008       root for -C or -D, the caller must either be root or be invoking a
4009       trusted configuration file (when deliver_drop_privilege is false). */
4010
4011 if (  removed_privilege
4012    && (!f.trusted_config || opt_D_used)
4013    && real_uid == exim_uid)
4014   if (deliver_drop_privilege)
4015     f.really_exim = TRUE; /* let logging work normally */
4016   else
4017     log_write(0, LOG_MAIN|LOG_PANIC,
4018       "exim user lost privilege for using %s option",
4019       f.trusted_config? "-D" : "-C");
4020
4021 /* Start up Perl interpreter if Perl support is configured and there is a
4022 perl_startup option, and the configuration or the command line specifies
4023 initializing starting. Note that the global variables are actually called
4024 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4025
4026 #ifdef EXIM_PERL
4027 if (perl_start_option != 0)
4028   opt_perl_at_start = (perl_start_option > 0);
4029 if (opt_perl_at_start && opt_perl_startup != NULL)
4030   {
4031   uschar *errstr;
4032   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4033   if ((errstr = init_perl(opt_perl_startup)))
4034     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4035   opt_perl_started = TRUE;
4036   }
4037 #endif /* EXIM_PERL */
4038
4039 /* Log the arguments of the call if the configuration file said so. This is
4040 a debugging feature for finding out what arguments certain MUAs actually use.
4041 Don't attempt it if logging is disabled, or if listing variables or if
4042 verifying/testing addresses or expansions. */
4043
4044 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4045    && f.really_exim && !list_options && !checking)
4046   {
4047   uschar *p = big_buffer;
4048   Ustrcpy(p, US"cwd= (failed)");
4049
4050   if (!initial_cwd)
4051     p += 13;
4052   else
4053     {
4054     Ustrncpy(p + 4, initial_cwd, big_buffer_size-5);
4055     p += 4 + Ustrlen(initial_cwd);
4056     /* in case p is near the end and we don't provide enough space for
4057      * string_format to be willing to write. */
4058     *p = '\0';
4059     }
4060
4061   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4062   while (*p) p++;
4063   for (int i = 0; i < argc; i++)
4064     {
4065     int len = Ustrlen(argv[i]);
4066     const uschar *printing;
4067     uschar *quote;
4068     if (p + len + 8 >= big_buffer + big_buffer_size)
4069       {
4070       Ustrcpy(p, US" ...");
4071       log_write(0, LOG_MAIN, "%s", big_buffer);
4072       Ustrcpy(big_buffer, US"...");
4073       p = big_buffer + 3;
4074       }
4075     printing = string_printing(argv[i]);
4076     if (printing[0] == 0) quote = US"\""; else
4077       {
4078       const uschar *pp = printing;
4079       quote = US"";
4080       while (*pp != 0) if (isspace(*pp++)) { quote = US"\""; break; }
4081       }
4082     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4083       (p - big_buffer) - 4), printing, quote);
4084     }
4085
4086   if (LOGGING(arguments))
4087     log_write(0, LOG_MAIN, "%s", big_buffer);
4088   else
4089     debug_printf("%s\n", big_buffer);
4090   }
4091
4092 /* Set the working directory to be the top-level spool directory. We don't rely
4093 on this in the code, which always uses fully qualified names, but it's useful
4094 for core dumps etc. Don't complain if it fails - the spool directory might not
4095 be generally accessible and calls with the -C option (and others) have lost
4096 privilege by now. Before the chdir, we try to ensure that the directory exists.
4097 */
4098
4099 if (Uchdir(spool_directory) != 0)
4100   {
4101   int dummy;
4102   (void)directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4103   dummy = /* quieten compiler */ Uchdir(spool_directory);
4104   dummy = dummy;        /* yet more compiler quietening, sigh */
4105   }
4106
4107 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4108 alias file. Exim doesn't have such a concept, but this call is screwed into
4109 Sun's YP makefiles. Handle this by calling a configured script, as the real
4110 user who called Exim. The -oA option can be used to pass an argument to the
4111 script. */
4112
4113 if (bi_option)
4114   {
4115   (void)fclose(config_file);
4116   if (bi_command != NULL)
4117     {
4118     int i = 0;
4119     uschar *argv[3];
4120     argv[i++] = bi_command;
4121     if (alias_arg != NULL) argv[i++] = alias_arg;
4122     argv[i++] = NULL;
4123
4124     setgroups(group_count, group_list);
4125     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4126
4127     DEBUG(D_exec) debug_printf("exec %.256s %.256s\n", argv[0],
4128       (argv[1] == NULL)? US"" : argv[1]);
4129
4130     execv(CS argv[0], (char *const *)argv);
4131     exim_fail("exim: exec failed: %s\n", strerror(errno));
4132     }
4133   else
4134     {
4135     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4136     exit(EXIT_SUCCESS);
4137     }
4138   }
4139
4140 /* We moved the admin/trusted check to be immediately after reading the
4141 configuration file.  We leave these prints here to ensure that syslog setup,
4142 logfile setup, and so on has already happened. */
4143
4144 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4145 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4146
4147 /* Only an admin user may start the daemon or force a queue run in the default
4148 configuration, but the queue run restriction can be relaxed. Only an admin
4149 user may request that a message be returned to its sender forthwith. Only an
4150 admin user may specify a debug level greater than D_v (because it might show
4151 passwords, etc. in lookup queries). Only an admin user may request a queue
4152 count. Only an admin user can use the test interface to scan for email
4153 (because Exim will be in the spool dir and able to look at mails). */
4154
4155 if (!f.admin_user)
4156   {
4157   BOOL debugset = (debug_selector & ~D_v) != 0;
4158   if (  deliver_give_up || f.daemon_listen || malware_test_file
4159      || count_queue && queue_list_requires_admin
4160      || list_queue && queue_list_requires_admin
4161      || queue_interval >= 0 && prod_requires_admin
4162      || queue_name_dest && prod_requires_admin
4163      || debugset && !f.running_in_test_harness
4164      )
4165     exim_fail("exim:%s permission denied\n", debugset? " debugging" : "");
4166   }
4167
4168 /* If the real user is not root or the exim uid, the argument for passing
4169 in an open TCP/IP connection for another message is not permitted, nor is
4170 running with the -N option for any delivery action, unless this call to exim is
4171 one that supplied an input message, or we are using a patched exim for
4172 regression testing. */
4173
4174 if (real_uid != root_uid && real_uid != exim_uid &&
4175      (continue_hostname != NULL ||
4176        (f.dont_deliver &&
4177          (queue_interval >= 0 || f.daemon_listen || msg_action_arg > 0)
4178        )) && !f.running_in_test_harness)
4179   exim_fail("exim: Permission denied\n");
4180
4181 /* If the caller is not trusted, certain arguments are ignored when running for
4182 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4183 Note that authority for performing certain actions on messages is tested in the
4184 queue_action() function. */
4185
4186 if (!f.trusted_caller && !checking)
4187   {
4188   sender_host_name = sender_host_address = interface_address =
4189     sender_ident = received_protocol = NULL;
4190   sender_host_port = interface_port = 0;
4191   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4192   }
4193
4194 /* If a sender host address is set, extract the optional port number off the
4195 end of it and check its syntax. Do the same thing for the interface address.
4196 Exim exits if the syntax is bad. */
4197
4198 else
4199   {
4200   if (sender_host_address != NULL)
4201     sender_host_port = check_port(sender_host_address);
4202   if (interface_address != NULL)
4203     interface_port = check_port(interface_address);
4204   }
4205
4206 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4207 if (flag_G)
4208   {
4209   if (f.trusted_caller)
4210     {
4211     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4212     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4213     }
4214   else
4215     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4216   }
4217
4218 /* If an SMTP message is being received check to see if the standard input is a
4219 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4220 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4221 barf. */
4222
4223 if (smtp_input)
4224   {
4225   union sockaddr_46 inetd_sock;
4226   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4227   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4228     {
4229     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4230     if (family == AF_INET || family == AF_INET6)
4231       {
4232       union sockaddr_46 interface_sock;
4233       size = sizeof(interface_sock);
4234
4235       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4236         interface_address = host_ntoa(-1, &interface_sock, NULL,
4237           &interface_port);
4238
4239       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4240
4241       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4242         {
4243         f.is_inetd = TRUE;
4244         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4245           NULL, &sender_host_port);
4246         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4247           "inetd is not supported when mua_wrapper is set");
4248         }
4249       else
4250         exim_fail(
4251           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4252       }
4253     }
4254   }
4255
4256 /* If the load average is going to be needed while receiving a message, get it
4257 now for those OS that require the first call to os_getloadavg() to be done as
4258 root. There will be further calls later for each message received. */
4259
4260 #ifdef LOAD_AVG_NEEDS_ROOT
4261 if (  receiving_message
4262    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4263   load_average = OS_GETLOADAVG();
4264 #endif
4265
4266 /* The queue_only configuration option can be overridden by -odx on the command
4267 line, except that if queue_only_override is false, queue_only cannot be unset
4268 from the command line. */
4269
4270 if (queue_only_set && (queue_only_override || arg_queue_only))
4271   queue_only = arg_queue_only;
4272
4273 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4274 -or and -os. */
4275
4276 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4277 if (arg_smtp_receive_timeout >= 0)
4278   smtp_receive_timeout = arg_smtp_receive_timeout;
4279
4280 /* If Exim was started with root privilege, unless we have already removed the
4281 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4282 except when starting the daemon or doing some kind of delivery or address
4283 testing (-bt). These are the only cases when root need to be retained. We run
4284 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4285 retained only for starting the daemon. We always do the initgroups() in this
4286 situation (controlled by the TRUE below), in order to be as close as possible
4287 to the state Exim usually runs in. */
4288
4289 if (!unprivileged &&                      /* originally had root AND */
4290     !removed_privilege &&                 /* still got root AND      */
4291     !f.daemon_listen &&                     /* not starting the daemon */
4292     queue_interval <= 0 &&                /* (either kind of daemon) */
4293       (                                   /*    AND EITHER           */
4294       deliver_drop_privilege ||           /* requested unprivileged  */
4295         (                                 /*       OR                */
4296         queue_interval < 0 &&             /* not running the queue   */
4297         (msg_action_arg < 0 ||            /*       and               */
4298           msg_action != MSG_DELIVER) &&   /* not delivering and      */
4299         (!checking || !f.address_test_mode) /* not address checking    */
4300    )  ) )
4301   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4302
4303 /* When we are retaining a privileged uid, we still change to the exim gid. */
4304
4305 else
4306   {
4307   int rv;
4308   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4309   rv = setgid(exim_gid);
4310   /* Impact of failure is that some stuff might end up with an incorrect group.
4311   We track this for failures from root, since any attempt to change privilege
4312   by root should succeed and failures should be examined.  For non-root,
4313   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4314   no need to complain then. */
4315   if (rv == -1)
4316     if (!(unprivileged || removed_privilege))
4317       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4318     else
4319       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4320           (long int)exim_gid, strerror(errno));
4321   }
4322
4323 /* Handle a request to scan a file for malware */
4324 if (malware_test_file)
4325   {
4326 #ifdef WITH_CONTENT_SCAN
4327   int result;
4328   set_process_info("scanning file for malware");
4329   result = malware_in_file(malware_test_file);
4330   if (result == FAIL)
4331     {
4332     printf("No malware found.\n");
4333     exit(EXIT_SUCCESS);
4334     }
4335   if (result != OK)
4336     {
4337     printf("Malware lookup returned non-okay/fail: %d\n", result);
4338     exit(EXIT_FAILURE);
4339     }
4340   if (malware_name)
4341     printf("Malware found: %s\n", malware_name);
4342   else
4343     printf("Malware scan detected malware of unknown name.\n");
4344 #else
4345   printf("Malware scanning not enabled at compile time.\n");
4346 #endif
4347   exit(EXIT_FAILURE);
4348   }
4349
4350 /* Handle a request to list the delivery queue */
4351
4352 if (list_queue)
4353   {
4354   set_process_info("listing the queue");
4355   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4356   exit(EXIT_SUCCESS);
4357   }
4358
4359 /* Handle a request to count the delivery queue */
4360
4361 if (count_queue)
4362   {
4363   set_process_info("counting the queue");
4364   fprintf(stdout, "%u\n", queue_count());
4365   exit(EXIT_SUCCESS);
4366   }
4367
4368 /* Handle actions on specific messages, except for the force delivery and
4369 message load actions, which are done below. Some actions take a whole list of
4370 message ids, which are known to continue up to the end of the arguments. Others
4371 take a single message id and then operate on the recipients list. */
4372
4373 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4374   {
4375   int yield = EXIT_SUCCESS;
4376   set_process_info("acting on specified messages");
4377
4378   /* ACL definitions may be needed when removing a message (-Mrm) because
4379   event_action gets expanded */
4380
4381   if (msg_action == MSG_REMOVE)
4382     readconf_rest();
4383
4384   if (!one_msg_action)
4385     {
4386     for (i = msg_action_arg; i < argc; i++)
4387       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4388         yield = EXIT_FAILURE;
4389     switch (msg_action)
4390       {
4391       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4392       default: printf("\n"); break;
4393       }
4394     }
4395
4396   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4397     recipients_arg)) yield = EXIT_FAILURE;
4398   exit(yield);
4399   }
4400
4401 /* We used to set up here to skip reading the ACL section, on
4402  (msg_action_arg > 0 || (queue_interval == 0 && !f.daemon_listen)
4403 Now, since the intro of the ${acl } expansion, ACL definitions may be
4404 needed in transports so we lost the optimisation. */
4405
4406   {
4407 #ifdef MEASURE_TIMING
4408   struct timeval t0, diff;
4409   (void)gettimeofday(&t0, NULL);
4410 #endif
4411
4412   readconf_rest();
4413
4414 #ifdef MEASURE_TIMING
4415   report_time_since(&t0, US"readconf_rest (delta)");
4416 #endif
4417   }
4418
4419 /* Handle the -brt option. This is for checking out retry configurations.
4420 The next three arguments are a domain name or a complete address, and
4421 optionally two error numbers. All it does is to call the function that
4422 scans the retry configuration data. */
4423
4424 if (test_retry_arg >= 0)
4425   {
4426   retry_config *yield;
4427   int basic_errno = 0;
4428   int more_errno = 0;
4429   uschar *s1, *s2;
4430
4431   if (test_retry_arg >= argc)
4432     {
4433     printf("-brt needs a domain or address argument\n");
4434     exim_exit(EXIT_FAILURE, US"main");
4435     }
4436   s1 = argv[test_retry_arg++];
4437   s2 = NULL;
4438
4439   /* If the first argument contains no @ and no . it might be a local user
4440   or it might be a single-component name. Treat as a domain. */
4441
4442   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4443     {
4444     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4445       "being \ntreated as a one-component domain, not as a local part.\n\n",
4446       s1);
4447     }
4448
4449   /* There may be an optional second domain arg. */
4450
4451   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4452     s2 = argv[test_retry_arg++];
4453
4454   /* The final arg is an error name */
4455
4456   if (test_retry_arg < argc)
4457     {
4458     uschar *ss = argv[test_retry_arg];
4459     uschar *error =
4460       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4461     if (error != NULL)
4462       {
4463       printf("%s\n", CS error);
4464       return EXIT_FAILURE;
4465       }
4466
4467     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4468     code > 100 as an error is for matching codes to the decade. Turn them into
4469     a real error code, off the decade. */
4470
4471     if (basic_errno == ERRNO_MAIL4XX ||
4472         basic_errno == ERRNO_RCPT4XX ||
4473         basic_errno == ERRNO_DATA4XX)
4474       {
4475       int code = (more_errno >> 8) & 255;
4476       if (code == 255)
4477         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4478       else if (code > 100)
4479         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4480       }
4481     }
4482
4483   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4484     printf("No retry information found\n");
4485   else
4486     {
4487     more_errno = yield->more_errno;
4488     printf("Retry rule: %s  ", yield->pattern);
4489
4490     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4491       {
4492       printf("quota%s%s  ",
4493         (more_errno > 0)? "_" : "",
4494         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4495       }
4496     else if (yield->basic_errno == ECONNREFUSED)
4497       {
4498       printf("refused%s%s  ",
4499         (more_errno > 0)? "_" : "",
4500         (more_errno == 'M')? "MX" :
4501         (more_errno == 'A')? "A" : "");
4502       }
4503     else if (yield->basic_errno == ETIMEDOUT)
4504       {
4505       printf("timeout");
4506       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4507       more_errno &= 255;
4508       if (more_errno != 0) printf("_%s",
4509         (more_errno == 'M')? "MX" : "A");
4510       printf("  ");
4511       }
4512     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4513       printf("auth_failed  ");
4514     else printf("*  ");
4515
4516     for (retry_rule * r = yield->rules; r; r = r->next)
4517       {
4518       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4519       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4520       if (r->rule == 'G')
4521         {
4522         int x = r->p2;
4523         int f = x % 1000;
4524         int d = 100;
4525         printf(",%d.", x/1000);
4526         do
4527           {
4528           printf("%d", f/d);
4529           f %= d;
4530           d /= 10;
4531           }
4532         while (f != 0);
4533         }
4534       printf("; ");
4535       }
4536
4537     printf("\n");
4538     }
4539   exim_exit(EXIT_SUCCESS, US"main");
4540   }
4541
4542 /* Handle a request to list one or more configuration options */
4543 /* If -n was set, we suppress some information */
4544
4545 if (list_options)
4546   {
4547   BOOL fail = FALSE;
4548   set_process_info("listing variables");
4549   if (recipients_arg >= argc)
4550     fail = !readconf_print(US"all", NULL, flag_n);
4551   else for (i = recipients_arg; i < argc; i++)
4552     {
4553     if (i < argc - 1 &&
4554         (Ustrcmp(argv[i], "router") == 0 ||
4555          Ustrcmp(argv[i], "transport") == 0 ||
4556          Ustrcmp(argv[i], "authenticator") == 0 ||
4557          Ustrcmp(argv[i], "macro") == 0 ||
4558          Ustrcmp(argv[i], "environment") == 0))
4559       {
4560       fail |= !readconf_print(argv[i+1], argv[i], flag_n);
4561       i++;
4562       }
4563     else
4564       fail = !readconf_print(argv[i], NULL, flag_n);
4565     }
4566   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS, US"main");
4567   }
4568
4569 if (list_config)
4570   {
4571   set_process_info("listing config");
4572   exim_exit(readconf_print(US"config", NULL, flag_n)
4573                 ? EXIT_SUCCESS : EXIT_FAILURE, US"main");
4574   }
4575
4576
4577 /* Initialise subsystems as required. */
4578
4579 tcp_init();
4580
4581 /* Handle a request to deliver one or more messages that are already on the
4582 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4583 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4584
4585 Delivery of specific messages is typically used for a small number when
4586 prodding by hand (when the option forced_delivery will be set) or when
4587 re-execing to regain root privilege. Each message delivery must happen in a
4588 separate process, so we fork a process for each one, and run them sequentially
4589 so that debugging output doesn't get intertwined, and to avoid spawning too
4590 many processes if a long list is given. However, don't fork for the last one;
4591 this saves a process in the common case when Exim is called to deliver just one
4592 message. */
4593
4594 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4595   {
4596   if (prod_requires_admin && !f.admin_user)
4597     {
4598     fprintf(stderr, "exim: Permission denied\n");
4599     exim_exit(EXIT_FAILURE, US"main");
4600     }
4601   set_process_info("delivering specified messages");
4602   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4603   for (i = msg_action_arg; i < argc; i++)
4604     {
4605     int status;
4606     pid_t pid;
4607     if (i == argc - 1)
4608       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4609     else if ((pid = exim_fork(US"cmdline-delivery")) == 0)
4610       {
4611       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4612       exim_underbar_exit(EXIT_SUCCESS, US"cmdline-delivery");
4613       }
4614     else if (pid < 0)
4615       {
4616       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4617         strerror(errno));
4618       exim_exit(EXIT_FAILURE, US"main");
4619       }
4620     else wait(&status);
4621     }
4622   exim_exit(EXIT_SUCCESS, US"main");
4623   }
4624
4625
4626 /* If only a single queue run is requested, without SMTP listening, we can just
4627 turn into a queue runner, with an optional starting message id. */
4628
4629 if (queue_interval == 0 && !f.daemon_listen)
4630   {
4631   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4632     start_queue_run_id ? US" starting at " : US"",
4633     start_queue_run_id ? start_queue_run_id: US"",
4634     stop_queue_run_id ?  US" stopping at " : US"",
4635     stop_queue_run_id ?  stop_queue_run_id : US"");
4636   if (*queue_name)
4637     set_process_info("running the '%s' queue (single queue run)", queue_name);
4638   else
4639     set_process_info("running the queue (single queue run)");
4640   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4641   exim_exit(EXIT_SUCCESS, US"main");
4642   }
4643
4644
4645 /* Find the login name of the real user running this process. This is always
4646 needed when receiving a message, because it is written into the spool file. It
4647 may also be used to construct a from: or a sender: header, and in this case we
4648 need the user's full name as well, so save a copy of it, checked for RFC822
4649 syntax and munged if necessary, if it hasn't previously been set by the -F
4650 argument. We may try to get the passwd entry more than once, in case NIS or
4651 other delays are in evidence. Save the home directory for use in filter testing
4652 (only). */
4653
4654 for (i = 0;;)
4655   {
4656   if ((pw = getpwuid(real_uid)) != NULL)
4657     {
4658     originator_login = string_copy(US pw->pw_name);
4659     originator_home = string_copy(US pw->pw_dir);
4660
4661     /* If user name has not been set by -F, set it from the passwd entry
4662     unless -f has been used to set the sender address by a trusted user. */
4663
4664     if (!originator_name)
4665       {
4666       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
4667         {
4668         uschar *name = US pw->pw_gecos;
4669         uschar *amp = Ustrchr(name, '&');
4670         uschar buffer[256];
4671
4672         /* Most Unix specify that a '&' character in the gecos field is
4673         replaced by a copy of the login name, and some even specify that
4674         the first character should be upper cased, so that's what we do. */
4675
4676         if (amp)
4677           {
4678           int loffset;
4679           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
4680             (int)(amp - name), name, &loffset, originator_login, amp + 1);
4681           buffer[loffset] = toupper(buffer[loffset]);
4682           name = buffer;
4683           }
4684
4685         /* If a pattern for matching the gecos field was supplied, apply
4686         it and then expand the name string. */
4687
4688         if (gecos_pattern && gecos_name)
4689           {
4690           const pcre *re;
4691           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
4692
4693           if (regex_match_and_setup(re, name, 0, -1))
4694             {
4695             uschar *new_name = expand_string(gecos_name);
4696             expand_nmax = -1;
4697             if (new_name)
4698               {
4699               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
4700                 "gecos field \"%s\"\n", new_name, name);
4701               name = new_name;
4702               }
4703             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
4704               "\"%s\": %s\n", gecos_name, expand_string_message);
4705             }
4706           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
4707             "gecos field \"%s\"\n", gecos_pattern, name);
4708           store_free((void *)re);
4709           }
4710         originator_name = string_copy(name);
4711         }
4712
4713       /* A trusted caller has used -f but not -F */
4714
4715       else originator_name = US"";
4716       }
4717
4718     /* Break the retry loop */
4719
4720     break;
4721     }
4722
4723   if (++i > finduser_retries) break;
4724   sleep(1);
4725   }
4726
4727 /* If we cannot get a user login, log the incident and give up, unless the
4728 configuration specifies something to use. When running in the test harness,
4729 any setting of unknown_login overrides the actual name. */
4730
4731 if (originator_login == NULL || f.running_in_test_harness)
4732   {
4733   if (unknown_login != NULL)
4734     {
4735     originator_login = expand_string(unknown_login);
4736     if (originator_name == NULL && unknown_username != NULL)
4737       originator_name = expand_string(unknown_username);
4738     if (originator_name == NULL) originator_name = US"";
4739     }
4740   if (originator_login == NULL)
4741     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
4742       (int)real_uid);
4743   }
4744
4745 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
4746 RFC822 address.*/
4747
4748 originator_name = string_copy(parse_fix_phrase(originator_name,
4749   Ustrlen(originator_name), big_buffer, big_buffer_size));
4750
4751 /* If a message is created by this call of Exim, the uid/gid of its originator
4752 are those of the caller. These values are overridden if an existing message is
4753 read in from the spool. */
4754
4755 originator_uid = real_uid;
4756 originator_gid = real_gid;
4757
4758 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
4759   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
4760
4761 /* Run in daemon and/or queue-running mode. The function daemon_go() never
4762 returns. We leave this till here so that the originator_ fields are available
4763 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
4764 mode. */
4765
4766 if (f.daemon_listen || f.inetd_wait_mode || queue_interval > 0)
4767   {
4768   if (mua_wrapper)
4769     {
4770     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
4771     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
4772       "mua_wrapper is set");
4773     }
4774
4775 # ifndef DISABLE_TLS
4776   /* This also checks that the library linkage is working and we can call
4777   routines in it, so call even if tls_require_ciphers is unset */
4778     {
4779 # ifdef MEASURE_TIMING
4780     struct timeval t0, diff;
4781     (void)gettimeofday(&t0, NULL);
4782 # endif
4783     if (!tls_dropprivs_validate_require_cipher(FALSE))
4784       exit(1);
4785 # ifdef MEASURE_TIMING
4786     report_time_since(&t0, US"validate_ciphers (delta)");
4787 # endif
4788     }
4789 #endif
4790
4791   daemon_go();
4792   }
4793
4794 /* If the sender ident has not been set (by a trusted caller) set it to
4795 the caller. This will get overwritten below for an inetd call. If a trusted
4796 caller has set it empty, unset it. */
4797
4798 if (!sender_ident) sender_ident = originator_login;
4799 else if (!*sender_ident) sender_ident = NULL;
4800
4801 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
4802 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
4803 originator_* variables set. */
4804
4805 if (test_rewrite_arg >= 0)
4806   {
4807   f.really_exim = FALSE;
4808   if (test_rewrite_arg >= argc)
4809     {
4810     printf("-brw needs an address argument\n");
4811     exim_exit(EXIT_FAILURE, US"main");
4812     }
4813   rewrite_test(argv[test_rewrite_arg]);
4814   exim_exit(EXIT_SUCCESS, US"main");
4815   }
4816
4817 /* A locally-supplied message is considered to be coming from a local user
4818 unless a trusted caller supplies a sender address with -f, or is passing in the
4819 message via SMTP (inetd invocation or otherwise). */
4820
4821 if (  !sender_address && !smtp_input
4822    || !f.trusted_caller && filter_test == FTEST_NONE)
4823   {
4824   f.sender_local = TRUE;
4825
4826   /* A trusted caller can supply authenticated_sender and authenticated_id
4827   via -oMas and -oMai and if so, they will already be set. Otherwise, force
4828   defaults except when host checking. */
4829
4830   if (!authenticated_sender && !host_checking)
4831     authenticated_sender = string_sprintf("%s@%s", originator_login,
4832       qualify_domain_sender);
4833   if (!authenticated_id && !host_checking)
4834     authenticated_id = originator_login;
4835   }
4836
4837 /* Trusted callers are always permitted to specify the sender address.
4838 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
4839 is specified is the empty address. However, if a trusted caller does not
4840 specify a sender address for SMTP input, we leave sender_address unset. This
4841 causes the MAIL commands to be honoured. */
4842
4843 if (  !smtp_input && !sender_address
4844    || !receive_check_set_sender(sender_address))
4845   {
4846   /* Either the caller is not permitted to set a general sender, or this is
4847   non-SMTP input and the trusted caller has not set a sender. If there is no
4848   sender, or if a sender other than <> is set, override with the originator's
4849   login (which will get qualified below), except when checking things. */
4850
4851   if (sender_address == NULL             /* No sender_address set */
4852        ||                                /*         OR            */
4853        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
4854        !checking))                       /* Not running tests, including filter tests */
4855     {
4856     sender_address = originator_login;
4857     f.sender_address_forced = FALSE;
4858     sender_address_domain = 0;
4859     }
4860   }
4861
4862 /* Remember whether an untrusted caller set the sender address */
4863
4864 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
4865
4866 /* Ensure that the sender address is fully qualified unless it is the empty
4867 address, which indicates an error message, or doesn't exist (root caller, smtp
4868 interface, no -f argument). */
4869
4870 if (sender_address && *sender_address && sender_address_domain == 0)
4871   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
4872     qualify_domain_sender);
4873
4874 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
4875
4876 /* Handle a request to verify a list of addresses, or test them for delivery.
4877 This must follow the setting of the sender address, since routers can be
4878 predicated upon the sender. If no arguments are given, read addresses from
4879 stdin. Set debug_level to at least D_v to get full output for address testing.
4880 */
4881
4882 if (verify_address_mode || f.address_test_mode)
4883   {
4884   int exit_value = 0;
4885   int flags = vopt_qualify;
4886
4887   if (verify_address_mode)
4888     {
4889     if (!verify_as_sender) flags |= vopt_is_recipient;
4890     DEBUG(D_verify) debug_print_ids(US"Verifying:");
4891     }
4892
4893   else
4894     {
4895     flags |= vopt_is_recipient;
4896     debug_selector |= D_v;
4897     debug_file = stderr;
4898     debug_fd = fileno(debug_file);
4899     DEBUG(D_verify) debug_print_ids(US"Address testing:");
4900     }
4901
4902   if (recipients_arg < argc)
4903     {
4904     while (recipients_arg < argc)
4905       {
4906       /* Supplied addresses are tainted since they come from a user */
4907       uschar * s = string_copy_taint(argv[recipients_arg++], TRUE);
4908       while (*s)
4909         {
4910         BOOL finished = FALSE;
4911         uschar *ss = parse_find_address_end(s, FALSE);
4912         if (*ss == ',') *ss = 0; else finished = TRUE;
4913         test_address(s, flags, &exit_value);
4914         s = ss;
4915         if (!finished)
4916           while (*++s == ',' || isspace(*s)) ;
4917         }
4918       }
4919     }
4920
4921   else for (;;)
4922     {
4923     uschar * s = get_stdinput(NULL, NULL);
4924     if (!s) break;
4925     test_address(string_copy_taint(s, TRUE), flags, &exit_value);
4926     }
4927
4928   route_tidyup();
4929   exim_exit(exit_value, US"main");
4930   }
4931
4932 /* Handle expansion checking. Either expand items on the command line, or read
4933 from stdin if there aren't any. If -Mset was specified, load the message so
4934 that its variables can be used, but restrict this facility to admin users.
4935 Otherwise, if -bem was used, read a message from stdin. */
4936
4937 if (expansion_test)
4938   {
4939   dns_init(FALSE, FALSE, FALSE);
4940   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
4941     {
4942     uschar spoolname[256];  /* Not big_buffer; used in spool_read_header() */
4943     if (!f.admin_user)
4944       exim_fail("exim: permission denied\n");
4945     message_id = argv[msg_action_arg];
4946     (void)string_format(spoolname, sizeof(spoolname), "%s-H", message_id);
4947     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
4948       printf ("Failed to load message datafile %s\n", message_id);
4949     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
4950       printf ("Failed to load message %s\n", message_id);
4951     }
4952
4953   /* Read a test message from a file. We fudge it up to be on stdin, saving
4954   stdin itself for later reading of expansion strings. */
4955
4956   else if (expansion_test_message)
4957     {
4958     int save_stdin = dup(0);
4959     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
4960     if (fd < 0)
4961       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
4962         strerror(errno));
4963     (void) dup2(fd, 0);
4964     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
4965     message_ended = END_NOTENDED;
4966     read_message_body(receive_msg(extract_recipients));
4967     message_linecount += body_linecount;
4968     (void)dup2(save_stdin, 0);
4969     (void)close(save_stdin);
4970     clearerr(stdin);               /* Required by Darwin */
4971     }
4972
4973   /* Only admin users may see config-file macros this way */
4974
4975   if (!f.admin_user) macros_user = macros = mlast = NULL;
4976
4977   /* Allow $recipients for this testing */
4978
4979   f.enable_dollar_recipients = TRUE;
4980
4981   /* Expand command line items */
4982
4983   if (recipients_arg < argc)
4984     while (recipients_arg < argc)
4985       expansion_test_line(argv[recipients_arg++]);
4986
4987   /* Read stdin */
4988
4989   else
4990     {
4991     char *(*fn_readline)(const char *) = NULL;
4992     void (*fn_addhist)(const char *) = NULL;
4993     uschar * s;
4994
4995 #ifdef USE_READLINE
4996     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
4997 #endif
4998
4999     while (s = get_stdinput(fn_readline, fn_addhist))
5000       expansion_test_line(s);
5001
5002 #ifdef USE_READLINE
5003     if (dlhandle) dlclose(dlhandle);
5004 #endif
5005     }
5006
5007   /* The data file will be open after -Mset */
5008
5009   if (deliver_datafile >= 0)
5010     {
5011     (void)close(deliver_datafile);
5012     deliver_datafile = -1;
5013     }
5014
5015   exim_exit(EXIT_SUCCESS, US"main: expansion test");
5016   }
5017
5018
5019 /* The active host name is normally the primary host name, but it can be varied
5020 for hosts that want to play several parts at once. We need to ensure that it is
5021 set for host checking, and for receiving messages. */
5022
5023 smtp_active_hostname = primary_hostname;
5024 if (raw_active_hostname != NULL)
5025   {
5026   uschar *nah = expand_string(raw_active_hostname);
5027   if (nah == NULL)
5028     {
5029     if (!f.expand_string_forcedfail)
5030       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5031         "(smtp_active_hostname): %s", raw_active_hostname,
5032         expand_string_message);
5033     }
5034   else if (nah[0] != 0) smtp_active_hostname = nah;
5035   }
5036
5037 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5038 given IP address so that the blocking and relay configuration can be tested.
5039 Unless a sender_ident was set by -oMt, we discard it (the default is the
5040 caller's login name). An RFC 1413 call is made only if we are running in the
5041 test harness and an incoming interface and both ports are specified, because
5042 there is no TCP/IP call to find the ident for. */
5043
5044 if (host_checking)
5045   {
5046   int x[4];
5047   int size;
5048
5049   if (!sender_ident_set)
5050     {
5051     sender_ident = NULL;
5052     if (f.running_in_test_harness && sender_host_port
5053        && interface_address && interface_port)
5054       verify_get_ident(1223);           /* note hardwired port number */
5055     }
5056
5057   /* In case the given address is a non-canonical IPv6 address, canonicalize
5058   it. The code works for both IPv4 and IPv6, as it happens. */
5059
5060   size = host_aton(sender_host_address, x);
5061   sender_host_address = store_get(48, FALSE);  /* large enough for full IPv6 */
5062   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5063
5064   /* Now set up for testing */
5065
5066   host_build_sender_fullhost();
5067   smtp_input = TRUE;
5068   smtp_in = stdin;
5069   smtp_out = stdout;
5070   f.sender_local = FALSE;
5071   f.sender_host_notsocket = TRUE;
5072   debug_file = stderr;
5073   debug_fd = fileno(debug_file);
5074   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5075     "**** but without any ident (RFC 1413) callback.\n"
5076     "**** This is not for real!\n\n",
5077       sender_host_address);
5078
5079   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5080   if (verify_check_host(&hosts_connection_nolog) == OK)
5081     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5082   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5083
5084   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5085   because a log line has already been written for all its failure exists
5086   (usually "connection refused: <reason>") and writing another one is
5087   unnecessary clutter. */
5088
5089   if (smtp_start_session())
5090     {
5091     for (; (reset_point = store_mark()); store_reset(reset_point))
5092       {
5093       if (smtp_setup_msg() <= 0) break;
5094       if (!receive_msg(FALSE)) break;
5095
5096       return_path = sender_address = NULL;
5097       dnslist_domain = dnslist_matched = NULL;
5098 #ifndef DISABLE_DKIM
5099       dkim_cur_signer = NULL;
5100 #endif
5101       acl_var_m = NULL;
5102       deliver_localpart_orig = NULL;
5103       deliver_domain_orig = NULL;
5104       callout_address = sending_ip_address = NULL;
5105       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5106       }
5107     smtp_log_no_mail();
5108     }
5109   exim_exit(EXIT_SUCCESS, US"main");
5110   }
5111
5112
5113 /* Arrange for message reception if recipients or SMTP were specified;
5114 otherwise complain unless a version print (-bV) happened or this is a filter
5115 verification test or info dump.
5116 In the former case, show the configuration file name. */
5117
5118 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5119   {
5120   if (version_printed)
5121     {
5122     if (Ustrchr(config_main_filelist, ':'))
5123       printf("Configuration file search path is %s\n", config_main_filelist);
5124     printf("Configuration file is %s\n", config_main_filename);
5125     return EXIT_SUCCESS;
5126     }
5127
5128   if (info_flag != CMDINFO_NONE)
5129     {
5130     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5131     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5132     }
5133
5134   if (filter_test == FTEST_NONE)
5135     exim_usage(called_as);
5136   }
5137
5138
5139 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5140 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5141 that we are not called from inetd, because that is rejected above. The
5142 following configuration settings are forced here:
5143
5144   (1) Synchronous delivery (-odi)
5145   (2) Errors to stderr (-oep == -oeq)
5146   (3) No parallel remote delivery
5147   (4) Unprivileged delivery
5148
5149 We don't force overall queueing options because there are several of them;
5150 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5151 to override any SMTP queueing. */
5152
5153 if (mua_wrapper)
5154   {
5155   f.synchronous_delivery = TRUE;
5156   arg_error_handling = ERRORS_STDERR;
5157   remote_max_parallel = 1;
5158   deliver_drop_privilege = TRUE;
5159   f.queue_smtp = FALSE;
5160   queue_smtp_domains = NULL;
5161 #ifdef SUPPORT_I18N
5162   message_utf8_downconvert = -1;        /* convert-if-needed */
5163 #endif
5164   }
5165
5166
5167 /* Prepare to accept one or more new messages on the standard input. When a
5168 message has been read, its id is returned in message_id[]. If doing immediate
5169 delivery, we fork a delivery process for each received message, except for the
5170 last one, where we can save a process switch.
5171
5172 It is only in non-smtp mode that error_handling is allowed to be changed from
5173 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5174 sendmail error modes other than -oem ever actually used? Later: yes.) */
5175
5176 if (!smtp_input) error_handling = arg_error_handling;
5177
5178 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5179 logging being sent down the socket and make an identd call to get the
5180 sender_ident. */
5181
5182 else if (f.is_inetd)
5183   {
5184   (void)fclose(stderr);
5185   exim_nullstd();                       /* Re-open to /dev/null */
5186   verify_get_ident(IDENT_PORT);
5187   host_build_sender_fullhost();
5188   set_process_info("handling incoming connection from %s via inetd",
5189     sender_fullhost);
5190   }
5191
5192 /* If the sender host address has been set, build sender_fullhost if it hasn't
5193 already been done (which it will have been for inetd). This caters for the
5194 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5195 so that the test for IP options is skipped for -bs input. */
5196
5197 if (sender_host_address && !sender_fullhost)
5198   {
5199   host_build_sender_fullhost();
5200   set_process_info("handling incoming connection from %s via -oMa",
5201     sender_fullhost);
5202   f.sender_host_notsocket = TRUE;
5203   }
5204
5205 /* Otherwise, set the sender host as unknown except for inetd calls. This
5206 prevents host checking in the case of -bs not from inetd and also for -bS. */
5207
5208 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5209
5210 /* If stdout does not exist, then dup stdin to stdout. This can happen
5211 if exim is started from inetd. In this case fd 0 will be set to the socket,
5212 but fd 1 will not be set. This also happens for passed SMTP channels. */
5213
5214 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5215
5216 /* Set up the incoming protocol name and the state of the program. Root is
5217 allowed to force received protocol via the -oMr option above. If we have come
5218 via inetd, the process info has already been set up. We don't set
5219 received_protocol here for smtp input, as it varies according to
5220 batch/HELO/EHLO/AUTH/TLS. */
5221
5222 if (smtp_input)
5223   {
5224   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5225     smtp_batched_input? "batched " : "",
5226     (sender_address!= NULL)? sender_address : originator_login);
5227   }
5228 else
5229   {
5230   int old_pool = store_pool;
5231   store_pool = POOL_PERM;
5232   if (!received_protocol)
5233     received_protocol = string_sprintf("local%s", called_as);
5234   store_pool = old_pool;
5235   set_process_info("accepting a local non-SMTP message from <%s>",
5236     sender_address);
5237   }
5238
5239 /* Initialize the session_local_queue-only flag (this will be ignored if
5240 mua_wrapper is set) */
5241
5242 queue_check_only();
5243 session_local_queue_only = queue_only;
5244
5245 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5246 the spool if so configured. On failure, we must not attempt to send an error
5247 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5248 error code is given.) */
5249
5250 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5251   exim_fail("exim: insufficient disk space\n");
5252
5253 /* If this is smtp input of any kind, real or batched, handle the start of the
5254 SMTP session.
5255
5256 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5257 because a log line has already been written for all its failure exists
5258 (usually "connection refused: <reason>") and writing another one is
5259 unnecessary clutter. */
5260
5261 if (smtp_input)
5262   {
5263   smtp_in = stdin;
5264   smtp_out = stdout;
5265   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5266   if (verify_check_host(&hosts_connection_nolog) == OK)
5267     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5268   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5269   if (!smtp_start_session())
5270     {
5271     mac_smtp_fflush();
5272     exim_exit(EXIT_SUCCESS, US"smtp_start toplevel");
5273     }
5274   }
5275
5276 /* Otherwise, set up the input size limit here. */
5277
5278 else
5279   {
5280   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5281   if (expand_string_message)
5282     if (thismessage_size_limit == -1)
5283       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5284         "message_size_limit: %s", expand_string_message);
5285     else
5286       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5287         "message_size_limit: %s", expand_string_message);
5288   }
5289
5290 /* Loop for several messages when reading SMTP input. If we fork any child
5291 processes, we don't want to wait for them unless synchronous delivery is
5292 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5293 same as SIG_DFL, despite the fact that documentation often lists the default as
5294 "ignore". This is a confusing area. This is what I know:
5295
5296 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5297 processes that complete simply to go away without ever becoming defunct. You
5298 can't then wait for them - but we don't want to wait for them in the
5299 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5300 happen for all OS (e.g. *BSD is different).
5301
5302 But that's not the end of the story. Some (many? all?) systems have the
5303 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5304 has by default, so it seems that the difference is merely one of default
5305 (compare restarting vs non-restarting signals).
5306
5307 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5308 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5309 of the loop below. Paranoia rules.
5310
5311 February 2003: That's *still* not the end of the story. There are now versions
5312 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5313 process then calls waitpid(), a grumble is written to the system log, because
5314 this is logically inconsistent. In other words, it doesn't like the paranoia.
5315 As a consequence of this, the waitpid() below is now excluded if we are sure
5316 that SIG_IGN works. */
5317
5318 if (!f.synchronous_delivery)
5319   {
5320   #ifdef SA_NOCLDWAIT
5321   struct sigaction act;
5322   act.sa_handler = SIG_IGN;
5323   sigemptyset(&(act.sa_mask));
5324   act.sa_flags = SA_NOCLDWAIT;
5325   sigaction(SIGCHLD, &act, NULL);
5326   #else
5327   signal(SIGCHLD, SIG_IGN);
5328   #endif
5329   }
5330
5331 /* Save the current store pool point, for resetting at the start of
5332 each message, and save the real sender address, if any. */
5333
5334 real_sender_address = sender_address;
5335
5336 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5337 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5338 collapsed). */
5339
5340 while (more)
5341   {
5342   reset_point = store_mark();
5343   message_id[0] = 0;
5344
5345   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5346   input and build the recipients list, before calling receive_msg() to read the
5347   message proper. Whatever sender address is given in the SMTP transaction is
5348   often ignored for local senders - we use the actual sender, which is normally
5349   either the underlying user running this process or a -f argument provided by
5350   a trusted caller. It is saved in real_sender_address. The test for whether to
5351   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5352
5353   if (smtp_input)
5354     {
5355     int rc;
5356     if ((rc = smtp_setup_msg()) > 0)
5357       {
5358       if (real_sender_address != NULL &&
5359           !receive_check_set_sender(sender_address))
5360         {
5361         sender_address = raw_sender = real_sender_address;
5362         sender_address_unrewritten = NULL;
5363         }
5364
5365       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5366       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5367       the very end. The result of the ACL is ignored (as for other non-SMTP
5368       messages). It is run for its potential side effects. */
5369
5370       if (smtp_batched_input && acl_not_smtp_start != NULL)
5371         {
5372         uschar *user_msg, *log_msg;
5373         f.enable_dollar_recipients = TRUE;
5374         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5375           &user_msg, &log_msg);
5376         f.enable_dollar_recipients = FALSE;
5377         }
5378
5379       /* Now get the data for the message */
5380
5381       more = receive_msg(extract_recipients);
5382       if (message_id[0] == 0)
5383         {
5384         cancel_cutthrough_connection(TRUE, US"receive dropped");
5385         if (more) goto moreloop;
5386         smtp_log_no_mail();               /* Log no mail if configured */
5387         exim_exit(EXIT_FAILURE, US"receive toplevel");
5388         }
5389       }
5390     else
5391       {
5392       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5393       smtp_log_no_mail();               /* Log no mail if configured */
5394       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS, US"msg setup toplevel");
5395       }
5396     }
5397
5398   /* In the non-SMTP case, we have all the information from the command
5399   line, but must process it in case it is in the more general RFC822
5400   format, and in any case, to detect syntax errors. Also, it appears that
5401   the use of comma-separated lists as single arguments is common, so we
5402   had better support them. */
5403
5404   else
5405     {
5406     int rcount = 0;
5407     int count = argc - recipients_arg;
5408     uschar **list = argv + recipients_arg;
5409
5410     /* These options cannot be changed dynamically for non-SMTP messages */
5411
5412     f.active_local_sender_retain = local_sender_retain;
5413     f.active_local_from_check = local_from_check;
5414
5415     /* Save before any rewriting */
5416
5417     raw_sender = string_copy(sender_address);
5418
5419     /* Loop for each argument (supplied by user hence tainted) */
5420
5421     for (int i = 0; i < count; i++)
5422       {
5423       int start, end, domain;
5424       uschar * errmess;
5425       uschar * s = string_copy_taint(list[i], TRUE);
5426
5427       /* Loop for each comma-separated address */
5428
5429       while (*s != 0)
5430         {
5431         BOOL finished = FALSE;
5432         uschar *recipient;
5433         uschar *ss = parse_find_address_end(s, FALSE);
5434
5435         if (*ss == ',') *ss = 0; else finished = TRUE;
5436
5437         /* Check max recipients - if -t was used, these aren't recipients */
5438
5439         if (recipients_max > 0 && ++rcount > recipients_max &&
5440             !extract_recipients)
5441           if (error_handling == ERRORS_STDERR)
5442             {
5443             fprintf(stderr, "exim: too many recipients\n");
5444             exim_exit(EXIT_FAILURE, US"main");
5445             }
5446           else
5447             return
5448               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5449                 errors_sender_rc : EXIT_FAILURE;
5450
5451 #ifdef SUPPORT_I18N
5452         {
5453         BOOL b = allow_utf8_domains;
5454         allow_utf8_domains = TRUE;
5455 #endif
5456         recipient =
5457           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5458
5459 #ifdef SUPPORT_I18N
5460         if (string_is_utf8(recipient))
5461           message_smtputf8 = TRUE;
5462         else
5463           allow_utf8_domains = b;
5464         }
5465 #endif
5466         if (domain == 0 && !f.allow_unqualified_recipient)
5467           {
5468           recipient = NULL;
5469           errmess = US"unqualified recipient address not allowed";
5470           }
5471
5472         if (recipient == NULL)
5473           {
5474           if (error_handling == ERRORS_STDERR)
5475             {
5476             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5477               string_printing(list[i]), errmess);
5478             exim_exit(EXIT_FAILURE, US"main");
5479             }
5480           else
5481             {
5482             error_block eblock;
5483             eblock.next = NULL;
5484             eblock.text1 = string_printing(list[i]);
5485             eblock.text2 = errmess;
5486             return
5487               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5488                 errors_sender_rc : EXIT_FAILURE;
5489             }
5490           }
5491
5492         receive_add_recipient(string_copy_taint(recipient, TRUE), -1);
5493         s = ss;
5494         if (!finished)
5495           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5496         }
5497       }
5498
5499     /* Show the recipients when debugging */
5500
5501     DEBUG(D_receive)
5502       {
5503       if (sender_address != NULL) debug_printf("Sender: %s\n", sender_address);
5504       if (recipients_list != NULL)
5505         {
5506         debug_printf("Recipients:\n");
5507         for (int i = 0; i < recipients_count; i++)
5508           debug_printf("  %s\n", recipients_list[i].address);
5509         }
5510       }
5511
5512     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5513     ignored; rejecting here would just add complication, and it can just as
5514     well be done later. Allow $recipients to be visible in the ACL. */
5515
5516     if (acl_not_smtp_start)
5517       {
5518       uschar *user_msg, *log_msg;
5519       f.enable_dollar_recipients = TRUE;
5520       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5521         &user_msg, &log_msg);
5522       f.enable_dollar_recipients = FALSE;
5523       }
5524
5525     /* Pause for a while waiting for input.  If none received in that time,
5526     close the logfile, if we had one open; then if we wait for a long-running
5527     datasource (months, in one use-case) log rotation will not leave us holding
5528     the file copy. */
5529
5530     if (!receive_timeout)
5531       {
5532       struct timeval t = { .tv_sec = 30*60, .tv_usec = 0 };     /* 30 minutes */
5533       fd_set r;
5534
5535       FD_ZERO(&r); FD_SET(0, &r);
5536       if (select(1, &r, NULL, NULL, &t) == 0) mainlog_close();
5537       }
5538
5539     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5540     will just read the headers for the message, and not write anything onto the
5541     spool. */
5542
5543     message_ended = END_NOTENDED;
5544     more = receive_msg(extract_recipients);
5545
5546     /* more is always FALSE here (not SMTP message) when reading a message
5547     for real; when reading the headers of a message for filter testing,
5548     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5549
5550     if (message_id[0] == 0) exim_exit(EXIT_FAILURE, US"main");
5551     }  /* Non-SMTP message reception */
5552
5553   /* If this is a filter testing run, there are headers in store, but
5554   no message on the spool. Run the filtering code in testing mode, setting
5555   the domain to the qualify domain and the local part to the current user,
5556   unless they have been set by options. The prefix and suffix are left unset
5557   unless specified. The the return path is set to to the sender unless it has
5558   already been set from a return-path header in the message. */
5559
5560   if (filter_test != FTEST_NONE)
5561     {
5562     deliver_domain = (ftest_domain != NULL)?
5563       ftest_domain : qualify_domain_recipient;
5564     deliver_domain_orig = deliver_domain;
5565     deliver_localpart = (ftest_localpart != NULL)?
5566       ftest_localpart : originator_login;
5567     deliver_localpart_orig = deliver_localpart;
5568     deliver_localpart_prefix = ftest_prefix;
5569     deliver_localpart_suffix = ftest_suffix;
5570     deliver_home = originator_home;
5571
5572     if (return_path == NULL)
5573       {
5574       printf("Return-path copied from sender\n");
5575       return_path = string_copy(sender_address);
5576       }
5577     else
5578       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5579     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5580
5581     receive_add_recipient(
5582       string_sprintf("%s%s%s@%s",
5583         (ftest_prefix == NULL)? US"" : ftest_prefix,
5584         deliver_localpart,
5585         (ftest_suffix == NULL)? US"" : ftest_suffix,
5586         deliver_domain), -1);
5587
5588     printf("Recipient   = %s\n", recipients_list[0].address);
5589     if (ftest_prefix != NULL) printf("Prefix    = %s\n", ftest_prefix);
5590     if (ftest_suffix != NULL) printf("Suffix    = %s\n", ftest_suffix);
5591
5592     if (chdir("/"))   /* Get away from wherever the user is running this from */
5593       {
5594       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5595       exim_exit(EXIT_FAILURE, US"main");
5596       }
5597
5598     /* Now we run either a system filter test, or a user filter test, or both.
5599     In the latter case, headers added by the system filter will persist and be
5600     available to the user filter. We need to copy the filter variables
5601     explicitly. */
5602
5603     if ((filter_test & FTEST_SYSTEM) != 0)
5604       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5605         exim_exit(EXIT_FAILURE, US"main");
5606
5607     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5608
5609     if ((filter_test & FTEST_USER) != 0)
5610       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5611         exim_exit(EXIT_FAILURE, US"main");
5612
5613     exim_exit(EXIT_SUCCESS, US"main");
5614     }
5615
5616   /* Else act on the result of message reception. We should not get here unless
5617   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5618   will be TRUE. If it is not, check on the number of messages received in this
5619   connection. */
5620
5621   if (!session_local_queue_only &&
5622       smtp_accept_queue_per_connection > 0 &&
5623       receive_messagecount > smtp_accept_queue_per_connection)
5624     {
5625     session_local_queue_only = TRUE;
5626     queue_only_reason = 2;
5627     }
5628
5629   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5630   and queue_only_load is set, check that the load average is below it. If it is
5631   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5632   default), we put the whole session into queue_only mode. It then remains this
5633   way for any subsequent messages on the same SMTP connection. This is a
5634   deliberate choice; even though the load average may fall, it doesn't seem
5635   right to deliver later messages on the same call when not delivering earlier
5636   ones. However, there are odd cases where this is not wanted, so this can be
5637   changed by setting queue_only_load_latch false. */
5638
5639   local_queue_only = session_local_queue_only;
5640   if (!local_queue_only && queue_only_load >= 0)
5641     {
5642     local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load;
5643     if (local_queue_only)
5644       {
5645       queue_only_reason = 3;
5646       if (queue_only_load_latch) session_local_queue_only = TRUE;
5647       }
5648     }
5649
5650   /* If running as an MUA wrapper, all queueing options and freezing options
5651   are ignored. */
5652
5653   if (mua_wrapper)
5654     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
5655
5656   /* Log the queueing here, when it will get a message id attached, but
5657   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
5658   connections). */
5659
5660   if (local_queue_only)
5661     {
5662     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5663     switch(queue_only_reason)
5664       {
5665       case 2:
5666         log_write(L_delay_delivery,
5667                 LOG_MAIN, "no immediate delivery: more than %d messages "
5668           "received in one connection", smtp_accept_queue_per_connection);
5669         break;
5670
5671       case 3:
5672         log_write(L_delay_delivery,
5673                 LOG_MAIN, "no immediate delivery: load average %.2f",
5674                 (double)load_average/1000.0);
5675       break;
5676       }
5677     }
5678
5679   else if (f.queue_only_policy || f.deliver_freeze)
5680     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5681
5682   /* Else do the delivery unless the ACL or local_scan() called for queue only
5683   or froze the message. Always deliver in a separate process. A fork failure is
5684   not a disaster, as the delivery will eventually happen on a subsequent queue
5685   run. The search cache must be tidied before the fork, as the parent will
5686   do it before exiting. The child will trigger a lookup failure and
5687   thereby defer the delivery if it tries to use (for example) a cached ldap
5688   connection that the parent has called unbind on. */
5689
5690   else
5691     {
5692     pid_t pid;
5693     search_tidyup();
5694
5695     if ((pid = exim_fork(US"local-accept delivery")) == 0)
5696       {
5697       int rc;
5698       close_unwanted();      /* Close unwanted file descriptors and TLS */
5699       exim_nullstd();        /* Ensure std{in,out,err} exist */
5700
5701       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
5702       mode, deliver_drop_privilege is forced TRUE). */
5703
5704       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
5705         {
5706         delivery_re_exec(CEE_EXEC_EXIT);
5707         /* Control does not return here. */
5708         }
5709
5710       /* No need to re-exec */
5711
5712       rc = deliver_message(message_id, FALSE, FALSE);
5713       search_tidyup();
5714       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
5715         ? EXIT_SUCCESS : EXIT_FAILURE, US"cmdline-delivery");
5716       }
5717
5718     if (pid < 0)
5719       {
5720       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
5721       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
5722         "process: %s", strerror(errno));
5723       }
5724     else
5725       {
5726       release_cutthrough_connection(US"msg passed for delivery");
5727
5728       /* In the parent, wait if synchronous delivery is required. This will
5729       always be the case in MUA wrapper mode. */
5730
5731       if (f.synchronous_delivery)
5732         {
5733         int status;
5734         while (wait(&status) != pid);
5735         if ((status & 0x00ff) != 0)
5736           log_write(0, LOG_MAIN|LOG_PANIC,
5737             "process %d crashed with signal %d while delivering %s",
5738             (int)pid, status & 0x00ff, message_id);
5739         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE, US"main");
5740         }
5741       }
5742     }
5743
5744   /* The loop will repeat if more is TRUE. If we do not know know that the OS
5745   automatically reaps children (see comments above the loop), clear away any
5746   finished subprocesses here, in case there are lots of messages coming in
5747   from the same source. */
5748
5749   #ifndef SIG_IGN_WORKS
5750   while (waitpid(-1, NULL, WNOHANG) > 0);
5751   #endif
5752
5753 moreloop:
5754   return_path = sender_address = NULL;
5755   authenticated_sender = NULL;
5756   deliver_localpart_orig = NULL;
5757   deliver_domain_orig = NULL;
5758   deliver_host = deliver_host_address = NULL;
5759   dnslist_domain = dnslist_matched = NULL;
5760 #ifdef WITH_CONTENT_SCAN
5761   malware_name = NULL;
5762 #endif
5763   callout_address = NULL;
5764   sending_ip_address = NULL;
5765   acl_var_m = NULL;
5766   for(int i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
5767
5768   store_reset(reset_point);
5769   }
5770
5771 exim_exit(EXIT_SUCCESS, US"main");   /* Never returns */
5772 return 0;                  /* To stop compiler warning */
5773 }
5774
5775
5776 /* End of exim.c */