084fa8db2bafc6df1d3223785ef4552371830bb7
[users/jgh/exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8
9 /* The main function: entry point, initialization, and high-level control.
10 Also a few functions that don't naturally fit elsewhere. */
11
12
13 #include "exim.h"
14
15 #if defined(__GLIBC__) && !defined(__UCLIBC__)
16 # include <gnu/libc-version.h>
17 #endif
18
19 #ifdef USE_GNUTLS
20 # include <gnutls/gnutls.h>
21 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
22 #  define DISABLE_OCSP
23 # endif
24 #endif
25
26 extern void init_lookup_list(void);
27
28
29
30 /*************************************************
31 *      Function interface to store functions     *
32 *************************************************/
33
34 /* We need some real functions to pass to the PCRE regular expression library
35 for store allocation via Exim's store manager. The normal calls are actually
36 macros that pass over location information to make tracing easier. These
37 functions just interface to the standard macro calls. A good compiler will
38 optimize out the tail recursion and so not make them too expensive. There
39 are two sets of functions; one for use when we want to retain the compiled
40 regular expression for a long time; the other for short-term use. */
41
42 static void *
43 function_store_get(size_t size)
44 {
45 /* For now, regard all RE results as potentially tainted.  We might need
46 more intelligence on this point. */
47 return store_get((int)size, TRUE);
48 }
49
50 static void
51 function_dummy_free(void *block) { block = block; }
52
53 static void *
54 function_store_malloc(size_t size)
55 {
56 return store_malloc((int)size);
57 }
58
59 static void
60 function_store_free(void *block)
61 {
62 store_free(block);
63 }
64
65
66
67
68 /*************************************************
69 *         Enums for cmdline interface            *
70 *************************************************/
71
72 enum commandline_info { CMDINFO_NONE=0,
73   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
74
75
76
77
78 /*************************************************
79 *  Compile regular expression and panic on fail  *
80 *************************************************/
81
82 /* This function is called when failure to compile a regular expression leads
83 to a panic exit. In other cases, pcre_compile() is called directly. In many
84 cases where this function is used, the results of the compilation are to be
85 placed in long-lived store, so we temporarily reset the store management
86 functions that PCRE uses if the use_malloc flag is set.
87
88 Argument:
89   pattern     the pattern to compile
90   caseless    TRUE if caseless matching is required
91   use_malloc  TRUE if compile into malloc store
92
93 Returns:      pointer to the compiled pattern
94 */
95
96 const pcre *
97 regex_must_compile(const uschar *pattern, BOOL caseless, BOOL use_malloc)
98 {
99 int offset;
100 int options = PCRE_COPT;
101 const pcre *yield;
102 const uschar *error;
103 if (use_malloc)
104   {
105   pcre_malloc = function_store_malloc;
106   pcre_free = function_store_free;
107   }
108 if (caseless) options |= PCRE_CASELESS;
109 yield = pcre_compile(CCS pattern, options, (const char **)&error, &offset, NULL);
110 pcre_malloc = function_store_get;
111 pcre_free = function_dummy_free;
112 if (yield == NULL)
113   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
114     "%s at offset %d while compiling %s", error, offset, pattern);
115 return yield;
116 }
117
118
119
120
121 /*************************************************
122 *   Execute regular expression and set strings   *
123 *************************************************/
124
125 /* This function runs a regular expression match, and sets up the pointers to
126 the matched substrings.
127
128 Arguments:
129   re          the compiled expression
130   subject     the subject string
131   options     additional PCRE options
132   setup       if < 0 do full setup
133               if >= 0 setup from setup+1 onwards,
134                 excluding the full matched string
135
136 Returns:      TRUE or FALSE
137 */
138
139 BOOL
140 regex_match_and_setup(const pcre *re, const uschar *subject, int options, int setup)
141 {
142 int ovector[3*(EXPAND_MAXN+1)];
143 uschar * s = string_copy(subject);      /* de-constifying */
144 int n = pcre_exec(re, NULL, CS s, Ustrlen(s), 0,
145   PCRE_EOPT | options, ovector, nelem(ovector));
146 BOOL yield = n >= 0;
147 if (n == 0) n = EXPAND_MAXN + 1;
148 if (yield)
149   {
150   expand_nmax = setup < 0 ? 0 : setup + 1;
151   for (int nn = setup < 0 ? 0 : 2; nn < n*2; nn += 2)
152     {
153     expand_nstring[expand_nmax] = s + ovector[nn];
154     expand_nlength[expand_nmax++] = ovector[nn+1] - ovector[nn];
155     }
156   expand_nmax--;
157   }
158 return yield;
159 }
160
161
162
163
164 /*************************************************
165 *            Set up processing details           *
166 *************************************************/
167
168 /* Save a text string for dumping when SIGUSR1 is received.
169 Do checks for overruns.
170
171 Arguments: format and arguments, as for printf()
172 Returns:   nothing
173 */
174
175 void
176 set_process_info(const char *format, ...)
177 {
178 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
179 gstring * g;
180 int len;
181 va_list ap;
182
183 g = string_fmt_append(&gs, "%5d ", (int)getpid());
184 len = g->ptr;
185 va_start(ap, format);
186 if (!string_vformat(g, 0, format, ap))
187   {
188   gs.ptr = len;
189   g = string_cat(&gs, US"**** string overflowed buffer ****");
190   }
191 g = string_catn(g, US"\n", 1);
192 string_from_gstring(g);
193 process_info_len = g->ptr;
194 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
195 va_end(ap);
196 }
197
198 /***********************************************
199 *            Handler for SIGTERM               *
200 ***********************************************/
201
202 static void
203 term_handler(int sig)
204 {
205   exit(1);
206 }
207
208
209 /*************************************************
210 *             Handler for SIGUSR1                *
211 *************************************************/
212
213 /* SIGUSR1 causes any exim process to write to the process log details of
214 what it is currently doing. It will only be used if the OS is capable of
215 setting up a handler that causes automatic restarting of any system call
216 that is in progress at the time.
217
218 This function takes care to be signal-safe.
219
220 Argument: the signal number (SIGUSR1)
221 Returns:  nothing
222 */
223
224 static void
225 usr1_handler(int sig)
226 {
227 int fd;
228
229 os_restarting_signal(sig, usr1_handler);
230
231 if ((fd = Uopen(process_log_path, O_APPEND|O_WRONLY, LOG_MODE)) < 0)
232   {
233   /* If we are already running as the Exim user, try to create it in the
234   current process (assuming spool_directory exists). Otherwise, if we are
235   root, do the creation in an exim:exim subprocess. */
236
237   int euid = geteuid();
238   if (euid == exim_uid)
239     fd = Uopen(process_log_path, O_CREAT|O_APPEND|O_WRONLY, LOG_MODE);
240   else if (euid == root_uid)
241     fd = log_create_as_exim(process_log_path);
242   }
243
244 /* If we are neither exim nor root, or if we failed to create the log file,
245 give up. There is not much useful we can do with errors, since we don't want
246 to disrupt whatever is going on outside the signal handler. */
247
248 if (fd < 0) return;
249
250 (void)write(fd, process_info, process_info_len);
251 (void)close(fd);
252 }
253
254
255
256 /*************************************************
257 *             Timeout handler                    *
258 *************************************************/
259
260 /* This handler is enabled most of the time that Exim is running. The handler
261 doesn't actually get used unless alarm() has been called to set a timer, to
262 place a time limit on a system call of some kind. When the handler is run, it
263 re-enables itself.
264
265 There are some other SIGALRM handlers that are used in special cases when more
266 than just a flag setting is required; for example, when reading a message's
267 input. These are normally set up in the code module that uses them, and the
268 SIGALRM handler is reset to this one afterwards.
269
270 Argument: the signal value (SIGALRM)
271 Returns:  nothing
272 */
273
274 void
275 sigalrm_handler(int sig)
276 {
277 sig = sig;      /* Keep picky compilers happy */
278 sigalrm_seen = TRUE;
279 os_non_restarting_signal(SIGALRM, sigalrm_handler);
280 }
281
282
283
284 /*************************************************
285 *      Sleep for a fractional time interval      *
286 *************************************************/
287
288 /* This function is called by millisleep() and exim_wait_tick() to wait for a
289 period of time that may include a fraction of a second. The coding is somewhat
290 tedious. We do not expect setitimer() ever to fail, but if it does, the process
291 will wait for ever, so we panic in this instance. (There was a case of this
292 when a bug in a function that calls milliwait() caused it to pass invalid data.
293 That's when I added the check. :-)
294
295 We assume it to be not worth sleeping for under 100us; this value will
296 require revisiting as hardware advances.  This avoids the issue of
297 a zero-valued timer setting meaning "never fire".
298
299 Argument:  an itimerval structure containing the interval
300 Returns:   nothing
301 */
302
303 static void
304 milliwait(struct itimerval *itval)
305 {
306 sigset_t sigmask;
307 sigset_t old_sigmask;
308
309 if (itval->it_value.tv_usec < 100 && itval->it_value.tv_sec == 0)
310   return;
311 (void)sigemptyset(&sigmask);                           /* Empty mask */
312 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
313 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
314 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
315   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
316     "setitimer() failed: %s", strerror(errno));
317 (void)sigfillset(&sigmask);                            /* All signals */
318 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
319 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
320 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
321 }
322
323
324
325
326 /*************************************************
327 *         Millisecond sleep function             *
328 *************************************************/
329
330 /* The basic sleep() function has a granularity of 1 second, which is too rough
331 in some cases - for example, when using an increasing delay to slow down
332 spammers.
333
334 Argument:    number of millseconds
335 Returns:     nothing
336 */
337
338 void
339 millisleep(int msec)
340 {
341 struct itimerval itval;
342 itval.it_interval.tv_sec = 0;
343 itval.it_interval.tv_usec = 0;
344 itval.it_value.tv_sec = msec/1000;
345 itval.it_value.tv_usec = (msec % 1000) * 1000;
346 milliwait(&itval);
347 }
348
349
350
351 /*************************************************
352 *         Compare microsecond times              *
353 *************************************************/
354
355 /*
356 Arguments:
357   tv1         the first time
358   tv2         the second time
359
360 Returns:      -1, 0, or +1
361 */
362
363 static int
364 exim_tvcmp(struct timeval *t1, struct timeval *t2)
365 {
366 if (t1->tv_sec > t2->tv_sec) return +1;
367 if (t1->tv_sec < t2->tv_sec) return -1;
368 if (t1->tv_usec > t2->tv_usec) return +1;
369 if (t1->tv_usec < t2->tv_usec) return -1;
370 return 0;
371 }
372
373
374
375
376 /*************************************************
377 *          Clock tick wait function              *
378 *************************************************/
379
380 /* Exim uses a time + a pid to generate a unique identifier in two places: its
381 message IDs, and in file names for maildir deliveries. Because some OS now
382 re-use pids within the same second, sub-second times are now being used.
383 However, for absolute certainty, we must ensure the clock has ticked before
384 allowing the relevant process to complete. At the time of implementation of
385 this code (February 2003), the speed of processors is such that the clock will
386 invariably have ticked already by the time a process has done its job. This
387 function prepares for the time when things are faster - and it also copes with
388 clocks that go backwards.
389
390 Arguments:
391   then_tv      A timeval which was used to create uniqueness; its usec field
392                  has been rounded down to the value of the resolution.
393                  We want to be sure the current time is greater than this.
394   resolution   The resolution that was used to divide the microseconds
395                  (1 for maildir, larger for message ids)
396
397 Returns:       nothing
398 */
399
400 void
401 exim_wait_tick(struct timeval *then_tv, int resolution)
402 {
403 struct timeval now_tv;
404 long int now_true_usec;
405
406 (void)gettimeofday(&now_tv, NULL);
407 now_true_usec = now_tv.tv_usec;
408 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
409
410 if (exim_tvcmp(&now_tv, then_tv) <= 0)
411   {
412   struct itimerval itval;
413   itval.it_interval.tv_sec = 0;
414   itval.it_interval.tv_usec = 0;
415   itval.it_value.tv_sec = then_tv->tv_sec - now_tv.tv_sec;
416   itval.it_value.tv_usec = then_tv->tv_usec + resolution - now_true_usec;
417
418   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
419   negative value for the microseconds is possible only in the case when "now"
420   is more than a second less than "then". That means that itval.it_value.tv_sec
421   is greater than zero. The following correction is therefore safe. */
422
423   if (itval.it_value.tv_usec < 0)
424     {
425     itval.it_value.tv_usec += 1000000;
426     itval.it_value.tv_sec -= 1;
427     }
428
429   DEBUG(D_transport|D_receive)
430     {
431     if (!f.running_in_test_harness)
432       {
433       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
434         then_tv->tv_sec, (long) then_tv->tv_usec,
435         now_tv.tv_sec, (long) now_tv.tv_usec);
436       debug_printf("waiting " TIME_T_FMT ".%06lu\n",
437         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
438       }
439     }
440
441   milliwait(&itval);
442   }
443 }
444
445
446
447
448 /*************************************************
449 *   Call fopen() with umask 777 and adjust mode  *
450 *************************************************/
451
452 /* Exim runs with umask(0) so that files created with open() have the mode that
453 is specified in the open() call. However, there are some files, typically in
454 the spool directory, that are created with fopen(). They end up world-writeable
455 if no precautions are taken. Although the spool directory is not accessible to
456 the world, this is an untidiness. So this is a wrapper function for fopen()
457 that sorts out the mode of the created file.
458
459 Arguments:
460    filename       the file name
461    options        the fopen() options
462    mode           the required mode
463
464 Returns:          the fopened FILE or NULL
465 */
466
467 FILE *
468 modefopen(const uschar *filename, const char *options, mode_t mode)
469 {
470 mode_t saved_umask = umask(0777);
471 FILE *f = Ufopen(filename, options);
472 (void)umask(saved_umask);
473 if (f != NULL) (void)fchmod(fileno(f), mode);
474 return f;
475 }
476
477
478 /*************************************************
479 *   Ensure stdin, stdout, and stderr exist       *
480 *************************************************/
481
482 /* Some operating systems grumble if an exec() happens without a standard
483 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
484 file will be opened and will use these fd values, and then some other bit of
485 code will assume, for example, that it can write error messages to stderr.
486 This function ensures that fds 0, 1, and 2 are open if they do not already
487 exist, by connecting them to /dev/null.
488
489 This function is also used to ensure that std{in,out,err} exist at all times,
490 so that if any library that Exim calls tries to use them, it doesn't crash.
491
492 Arguments:  None
493 Returns:    Nothing
494 */
495
496 void
497 exim_nullstd(void)
498 {
499 int devnull = -1;
500 struct stat statbuf;
501 for (int i = 0; i <= 2; i++)
502   {
503   if (fstat(i, &statbuf) < 0 && errno == EBADF)
504     {
505     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
506     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
507       string_open_failed(errno, "/dev/null", NULL));
508     if (devnull != i) (void)dup2(devnull, i);
509     }
510   }
511 if (devnull > 2) (void)close(devnull);
512 }
513
514
515
516
517 /*************************************************
518 *   Close unwanted file descriptors for delivery *
519 *************************************************/
520
521 /* This function is called from a new process that has been forked to deliver
522 an incoming message, either directly, or using exec.
523
524 We want any smtp input streams to be closed in this new process. However, it
525 has been observed that using fclose() here causes trouble. When reading in -bS
526 input, duplicate copies of messages have been seen. The files will be sharing a
527 file pointer with the parent process, and it seems that fclose() (at least on
528 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
529 least sometimes. Hence we go for closing the underlying file descriptors.
530
531 If TLS is active, we want to shut down the TLS library, but without molesting
532 the parent's SSL connection.
533
534 For delivery of a non-SMTP message, we want to close stdin and stdout (and
535 stderr unless debugging) because the calling process might have set them up as
536 pipes and be waiting for them to close before it waits for the submission
537 process to terminate. If they aren't closed, they hold up the calling process
538 until the initial delivery process finishes, which is not what we want.
539
540 Exception: We do want it for synchronous delivery!
541
542 And notwithstanding all the above, if D_resolver is set, implying resolver
543 debugging, leave stdout open, because that's where the resolver writes its
544 debugging output.
545
546 When we close stderr (which implies we've also closed stdout), we also get rid
547 of any controlling terminal.
548
549 Arguments:   None
550 Returns:     Nothing
551 */
552
553 static void
554 close_unwanted(void)
555 {
556 if (smtp_input)
557   {
558 #ifndef DISABLE_TLS
559   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
560 #endif
561   (void)close(fileno(smtp_in));
562   (void)close(fileno(smtp_out));
563   smtp_in = NULL;
564   }
565 else
566   {
567   (void)close(0);                                          /* stdin */
568   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
569   if (debug_selector == 0)                                 /* stderr */
570     {
571     if (!f.synchronous_delivery)
572       {
573       (void)close(2);
574       log_stderr = NULL;
575       }
576     (void)setsid();
577     }
578   }
579 }
580
581
582
583
584 /*************************************************
585 *          Set uid and gid                       *
586 *************************************************/
587
588 /* This function sets a new uid and gid permanently, optionally calling
589 initgroups() to set auxiliary groups. There are some special cases when running
590 Exim in unprivileged modes. In these situations the effective uid will not be
591 root; if we already have the right effective uid/gid, and don't need to
592 initialize any groups, leave things as they are.
593
594 Arguments:
595   uid        the uid
596   gid        the gid
597   igflag     TRUE if initgroups() wanted
598   msg        text to use in debugging output and failure log
599
600 Returns:     nothing; bombs out on failure
601 */
602
603 void
604 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, uschar *msg)
605 {
606 uid_t euid = geteuid();
607 gid_t egid = getegid();
608
609 if (euid == root_uid || euid != uid || egid != gid || igflag)
610   {
611   /* At least one OS returns +1 for initgroups failure, so just check for
612   non-zero. */
613
614   if (igflag)
615     {
616     struct passwd *pw = getpwuid(uid);
617     if (!pw)
618       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
619         "no passwd entry for uid=%ld", (long int)uid);
620
621     if (initgroups(pw->pw_name, gid) != 0)
622       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
623         (long int)uid, strerror(errno));
624     }
625
626   if (setgid(gid) < 0 || setuid(uid) < 0)
627     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
628       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
629   }
630
631 /* Debugging output included uid/gid and all groups */
632
633 DEBUG(D_uid)
634   {
635   int group_count, save_errno;
636   gid_t group_list[EXIM_GROUPLIST_SIZE];
637   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
638     (long int)geteuid(), (long int)getegid(), (long int)getpid());
639   group_count = getgroups(nelem(group_list), group_list);
640   save_errno = errno;
641   debug_printf("  auxiliary group list:");
642   if (group_count > 0)
643     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
644   else if (group_count < 0)
645     debug_printf(" <error: %s>", strerror(save_errno));
646   else debug_printf(" <none>");
647   debug_printf("\n");
648   }
649 }
650
651
652
653
654 /*************************************************
655 *               Exit point                       *
656 *************************************************/
657
658 /* Exim exits via this function so that it always clears up any open
659 databases.
660
661 Arguments:
662   rc         return code
663
664 Returns:     does not return
665 */
666
667 void
668 exim_exit(int rc, const uschar * process)
669 {
670 search_tidyup();
671 store_exit();
672 DEBUG(D_any)
673   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d %s%s%sterminating with rc=%d "
674     ">>>>>>>>>>>>>>>>\n", (int)getpid(),
675     process ? "(" : "", process, process ? ") " : "", rc);
676 exit(rc);
677 }
678
679
680 void
681 exim_underbar_exit(int rc)
682 {
683 store_exit();
684 _exit(rc);
685 }
686
687
688
689 /* Print error string, then die */
690 static void
691 exim_fail(const char * fmt, ...)
692 {
693 va_list ap;
694 va_start(ap, fmt);
695 vfprintf(stderr, fmt, ap);
696 exit(EXIT_FAILURE);
697 }
698
699 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
700 of chown()/fchown().  See src/functions.h for more explanation */
701 int
702 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
703 {
704 int saved_errno = errno;  /* from the preceeding chown call */
705 #if 1
706 log_write(0, LOG_MAIN|LOG_PANIC,
707   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
708   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
709   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
710 #else
711 /* I leave this here, commented, in case the "bug"(?) comes up again.
712    It is not an Exim bug, but we can provide a workaround.
713    See Bug 2391
714    HS 2019-04-18 */
715
716 struct stat buf;
717
718 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
719 {
720   if (buf.st_uid == owner && buf.st_gid == group) return 0;
721   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
722 }
723 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
724
725 #endif
726 errno = saved_errno;
727 return -1;
728 }
729
730
731 /*************************************************
732 *         Extract port from host address         *
733 *************************************************/
734
735 /* Called to extract the port from the values given to -oMa and -oMi.
736 It also checks the syntax of the address, and terminates it before the
737 port data when a port is extracted.
738
739 Argument:
740   address   the address, with possible port on the end
741
742 Returns:    the port, or zero if there isn't one
743             bombs out on a syntax error
744 */
745
746 static int
747 check_port(uschar *address)
748 {
749 int port = host_address_extract_port(address);
750 if (string_is_ip_address(address, NULL) == 0)
751   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
752 return port;
753 }
754
755
756
757 /*************************************************
758 *              Test/verify an address            *
759 *************************************************/
760
761 /* This function is called by the -bv and -bt code. It extracts a working
762 address from a full RFC 822 address. This isn't really necessary per se, but it
763 has the effect of collapsing source routes.
764
765 Arguments:
766   s            the address string
767   flags        flag bits for verify_address()
768   exit_value   to be set for failures
769
770 Returns:       nothing
771 */
772
773 static void
774 test_address(uschar *s, int flags, int *exit_value)
775 {
776 int start, end, domain;
777 uschar *parse_error = NULL;
778 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
779   FALSE);
780 if (address == NULL)
781   {
782   fprintf(stdout, "syntax error: %s\n", parse_error);
783   *exit_value = 2;
784   }
785 else
786   {
787   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
788     -1, -1, NULL, NULL, NULL);
789   if (rc == FAIL) *exit_value = 2;
790     else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
791   }
792 }
793
794
795
796 /*************************************************
797 *          Show supported features               *
798 *************************************************/
799
800 static void
801 show_db_version(FILE * f)
802 {
803 #ifdef DB_VERSION_STRING
804 DEBUG(D_any)
805   {
806   fprintf(f, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
807   fprintf(f, "                      Runtime: %s\n",
808     db_version(NULL, NULL, NULL));
809   }
810 else
811   fprintf(f, "Berkeley DB: %s\n", DB_VERSION_STRING);
812
813 #elif defined(BTREEVERSION) && defined(HASHVERSION)
814   #ifdef USE_DB
815   fprintf(f, "Probably Berkeley DB version 1.8x (native mode)\n");
816   #else
817   fprintf(f, "Probably Berkeley DB version 1.8x (compatibility mode)\n");
818   #endif
819
820 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
821 fprintf(f, "Probably ndbm\n");
822 #elif defined(USE_TDB)
823 fprintf(f, "Using tdb\n");
824 #else
825   #ifdef USE_GDBM
826   fprintf(f, "Probably GDBM (native mode)\n");
827   #else
828   fprintf(f, "Probably GDBM (compatibility mode)\n");
829   #endif
830 #endif
831 }
832
833
834 /* This function is called for -bV/--version and for -d to output the optional
835 features of the current Exim binary.
836
837 Arguments:  a FILE for printing
838 Returns:    nothing
839 */
840
841 static void
842 show_whats_supported(FILE * fp)
843 {
844 DEBUG(D_any) {} else show_db_version(fp);
845
846 fprintf(fp, "Support for:");
847 #ifdef SUPPORT_CRYPTEQ
848   fprintf(fp, " crypteq");
849 #endif
850 #if HAVE_ICONV
851   fprintf(fp, " iconv()");
852 #endif
853 #if HAVE_IPV6
854   fprintf(fp, " IPv6");
855 #endif
856 #ifdef HAVE_SETCLASSRESOURCES
857   fprintf(fp, " use_setclassresources");
858 #endif
859 #ifdef SUPPORT_PAM
860   fprintf(fp, " PAM");
861 #endif
862 #ifdef EXIM_PERL
863   fprintf(fp, " Perl");
864 #endif
865 #ifdef EXPAND_DLFUNC
866   fprintf(fp, " Expand_dlfunc");
867 #endif
868 #ifdef USE_TCP_WRAPPERS
869   fprintf(fp, " TCPwrappers");
870 #endif
871 #ifdef USE_GNUTLS
872   fprintf(fp, " GnuTLS");
873 #endif
874 #ifdef USE_OPENSSL
875   fprintf(fp, " OpenSSL");
876 #endif
877 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
878   fprintf(fp, " translate_ip_address");
879 #endif
880 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
881   fprintf(fp, " move_frozen_messages");
882 #endif
883 #ifdef WITH_CONTENT_SCAN
884   fprintf(fp, " Content_Scanning");
885 #endif
886 #ifdef SUPPORT_DANE
887   fprintf(fp, " DANE");
888 #endif
889 #ifndef DISABLE_DKIM
890   fprintf(fp, " DKIM");
891 #endif
892 #ifndef DISABLE_DNSSEC
893   fprintf(fp, " DNSSEC");
894 #endif
895 #ifndef DISABLE_EVENT
896   fprintf(fp, " Event");
897 #endif
898 #ifdef SUPPORT_I18N
899   fprintf(fp, " I18N");
900 #endif
901 #ifndef DISABLE_OCSP
902   fprintf(fp, " OCSP");
903 #endif
904 #ifdef SUPPORT_PIPE_CONNECT
905   fprintf(fp, " PIPE_CONNECT");
906 #endif
907 #ifndef DISABLE_PRDR
908   fprintf(fp, " PRDR");
909 #endif
910 #ifdef SUPPORT_PROXY
911   fprintf(fp, " PROXY");
912 #endif
913 #ifdef SUPPORT_SOCKS
914   fprintf(fp, " SOCKS");
915 #endif
916 #ifdef SUPPORT_SPF
917   fprintf(fp, " SPF");
918 #endif
919 #ifdef SUPPORT_DMARC
920   fprintf(fp, " DMARC");
921 #endif
922 #ifdef TCP_FASTOPEN
923   tcp_init();
924   if (f.tcp_fastopen_ok) fprintf(fp, " TCP_Fast_Open");
925 #endif
926 #ifdef EXPERIMENTAL_LMDB
927   fprintf(fp, " Experimental_LMDB");
928 #endif
929 #ifdef EXPERIMENTAL_QUEUEFILE
930   fprintf(fp, " Experimental_QUEUEFILE");
931 #endif
932 #if defined(EXPERIMENTAL_SRS) || defined(EXPERIMENTAL_SRS_NATIVE)
933   fprintf(fp, " Experimental_SRS");
934 #endif
935 #ifdef EXPERIMENTAL_ARC
936   fprintf(fp, " Experimental_ARC");
937 #endif
938 #ifdef EXPERIMENTAL_BRIGHTMAIL
939   fprintf(fp, " Experimental_Brightmail");
940 #endif
941 #ifdef EXPERIMENTAL_DCC
942   fprintf(fp, " Experimental_DCC");
943 #endif
944 #ifdef EXPERIMENTAL_DSN_INFO
945   fprintf(fp, " Experimental_DSN_info");
946 #endif
947 #ifdef EXPERIMENTAL_TLS_RESUME
948   fprintf(fp, " Experimental_TLS_resume");
949 #endif
950 fprintf(fp, "\n");
951
952 fprintf(fp, "Lookups (built-in):");
953 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
954   fprintf(fp, " lsearch wildlsearch nwildlsearch iplsearch");
955 #endif
956 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
957   fprintf(fp, " cdb");
958 #endif
959 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
960   fprintf(fp, " dbm dbmjz dbmnz");
961 #endif
962 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
963   fprintf(fp, " dnsdb");
964 #endif
965 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
966   fprintf(fp, " dsearch");
967 #endif
968 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
969   fprintf(fp, " ibase");
970 #endif
971 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
972   fprintf(fp, " json");
973 #endif
974 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
975   fprintf(fp, " ldap ldapdn ldapm");
976 #endif
977 #ifdef EXPERIMENTAL_LMDB
978   fprintf(fp, " lmdb");
979 #endif
980 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
981   fprintf(fp, " mysql");
982 #endif
983 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
984   fprintf(fp, " nis nis0");
985 #endif
986 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
987   fprintf(fp, " nisplus");
988 #endif
989 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
990   fprintf(fp, " oracle");
991 #endif
992 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
993   fprintf(fp, " passwd");
994 #endif
995 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
996   fprintf(fp, " pgsql");
997 #endif
998 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
999   fprintf(fp, " redis");
1000 #endif
1001 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1002   fprintf(fp, " sqlite");
1003 #endif
1004 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1005   fprintf(fp, " testdb");
1006 #endif
1007 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1008   fprintf(fp, " whoson");
1009 #endif
1010 fprintf(fp, "\n");
1011
1012 auth_show_supported(fp);
1013 route_show_supported(fp);
1014 transport_show_supported(fp);
1015
1016 #ifdef WITH_CONTENT_SCAN
1017 malware_show_supported(fp);
1018 #endif
1019
1020 if (fixed_never_users[0] > 0)
1021   {
1022   int i;
1023   fprintf(fp, "Fixed never_users: ");
1024   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1025     fprintf(fp, "%d:", (unsigned int)fixed_never_users[i]);
1026   fprintf(fp, "%d\n", (unsigned int)fixed_never_users[i]);
1027   }
1028
1029 fprintf(fp, "Configure owner: %d:%d\n", config_uid, config_gid);
1030
1031 fprintf(fp, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1032
1033 /* Everything else is details which are only worth reporting when debugging.
1034 Perhaps the tls_version_report should move into this too. */
1035 DEBUG(D_any) do {
1036
1037 /* clang defines __GNUC__ (at least, for me) so test for it first */
1038 #if defined(__clang__)
1039   fprintf(fp, "Compiler: CLang [%s]\n", __clang_version__);
1040 #elif defined(__GNUC__)
1041   fprintf(fp, "Compiler: GCC [%s]\n",
1042 # ifdef __VERSION__
1043       __VERSION__
1044 # else
1045       "? unknown version ?"
1046 # endif
1047       );
1048 #else
1049   fprintf(fp, "Compiler: <unknown>\n");
1050 #endif
1051
1052 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1053   fprintf(fp, "Library version: Glibc: Compile: %d.%d\n",
1054                 __GLIBC__, __GLIBC_MINOR__);
1055   if (__GLIBC_PREREQ(2, 1))
1056     fprintf(fp, "                        Runtime: %s\n",
1057                 gnu_get_libc_version());
1058 #endif
1059
1060 show_db_version(fp);
1061
1062 #ifndef DISABLE_TLS
1063   tls_version_report(fp);
1064 #endif
1065 #ifdef SUPPORT_I18N
1066   utf8_version_report(fp);
1067 #endif
1068
1069   for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1070     if (authi->version_report)
1071       (*authi->version_report)(fp);
1072
1073   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1074   characters; unless it's an ancient version of PCRE in which case it
1075   is not defined. */
1076 #ifndef PCRE_PRERELEASE
1077 # define PCRE_PRERELEASE
1078 #endif
1079 #define QUOTE(X) #X
1080 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1081   fprintf(fp, "Library version: PCRE: Compile: %d.%d%s\n"
1082              "                       Runtime: %s\n",
1083           PCRE_MAJOR, PCRE_MINOR,
1084           EXPAND_AND_QUOTE(PCRE_PRERELEASE) "",
1085           pcre_version());
1086 #undef QUOTE
1087 #undef EXPAND_AND_QUOTE
1088
1089   init_lookup_list();
1090   for (int i = 0; i < lookup_list_count; i++)
1091     if (lookup_list[i]->version_report)
1092       lookup_list[i]->version_report(fp);
1093
1094 #ifdef WHITELIST_D_MACROS
1095   fprintf(fp, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1096 #else
1097   fprintf(fp, "WHITELIST_D_MACROS unset\n");
1098 #endif
1099 #ifdef TRUSTED_CONFIG_LIST
1100   fprintf(fp, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1101 #else
1102   fprintf(fp, "TRUSTED_CONFIG_LIST unset\n");
1103 #endif
1104
1105 } while (0);
1106 }
1107
1108
1109 /*************************************************
1110 *     Show auxiliary information about Exim      *
1111 *************************************************/
1112
1113 static void
1114 show_exim_information(enum commandline_info request, FILE *stream)
1115 {
1116 switch(request)
1117   {
1118   case CMDINFO_NONE:
1119     fprintf(stream, "Oops, something went wrong.\n");
1120     return;
1121   case CMDINFO_HELP:
1122     fprintf(stream,
1123 "The -bI: flag takes a string indicating which information to provide.\n"
1124 "If the string is not recognised, you'll get this help (on stderr).\n"
1125 "\n"
1126 "  exim -bI:help    this information\n"
1127 "  exim -bI:dscp    list of known dscp value keywords\n"
1128 "  exim -bI:sieve   list of supported sieve extensions\n"
1129 );
1130     return;
1131   case CMDINFO_SIEVE:
1132     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1133       fprintf(stream, "%s\n", *pp);
1134     return;
1135   case CMDINFO_DSCP:
1136     dscp_list_to_stream(stream);
1137     return;
1138   }
1139 }
1140
1141
1142 /*************************************************
1143 *               Quote a local part               *
1144 *************************************************/
1145
1146 /* This function is used when a sender address or a From: or Sender: header
1147 line is being created from the caller's login, or from an authenticated_id. It
1148 applies appropriate quoting rules for a local part.
1149
1150 Argument:    the local part
1151 Returns:     the local part, quoted if necessary
1152 */
1153
1154 uschar *
1155 local_part_quote(uschar *lpart)
1156 {
1157 BOOL needs_quote = FALSE;
1158 gstring * g;
1159
1160 for (uschar * t = lpart; !needs_quote && *t != 0; t++)
1161   {
1162   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1163     (*t != '.' || t == lpart || t[1] == 0);
1164   }
1165
1166 if (!needs_quote) return lpart;
1167
1168 g = string_catn(NULL, US"\"", 1);
1169
1170 for (;;)
1171   {
1172   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1173   if (nq == NULL)
1174     {
1175     g = string_cat(g, lpart);
1176     break;
1177     }
1178   g = string_catn(g, lpart, nq - lpart);
1179   g = string_catn(g, US"\\", 1);
1180   g = string_catn(g, nq, 1);
1181   lpart = nq + 1;
1182   }
1183
1184 g = string_catn(g, US"\"", 1);
1185 return string_from_gstring(g);
1186 }
1187
1188
1189
1190 #ifdef USE_READLINE
1191 /*************************************************
1192 *         Load readline() functions              *
1193 *************************************************/
1194
1195 /* This function is called from testing executions that read data from stdin,
1196 but only when running as the calling user. Currently, only -be does this. The
1197 function loads the readline() function library and passes back the functions.
1198 On some systems, it needs the curses library, so load that too, but try without
1199 it if loading fails. All this functionality has to be requested at build time.
1200
1201 Arguments:
1202   fn_readline_ptr   pointer to where to put the readline pointer
1203   fn_addhist_ptr    pointer to where to put the addhistory function
1204
1205 Returns:            the dlopen handle or NULL on failure
1206 */
1207
1208 static void *
1209 set_readline(char * (**fn_readline_ptr)(const char *),
1210              void   (**fn_addhist_ptr)(const char *))
1211 {
1212 void *dlhandle;
1213 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1214
1215 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1216 if (dlhandle_curses != NULL) dlclose(dlhandle_curses);
1217
1218 if (dlhandle != NULL)
1219   {
1220   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1221    *   char * readline (const char *prompt);
1222    *   void add_history (const char *string);
1223    */
1224   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1225   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1226   }
1227 else
1228   {
1229   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1230   }
1231
1232 return dlhandle;
1233 }
1234 #endif
1235
1236
1237
1238 /*************************************************
1239 *    Get a line from stdin for testing things    *
1240 *************************************************/
1241
1242 /* This function is called when running tests that can take a number of lines
1243 of input (for example, -be and -bt). It handles continuations and trailing
1244 spaces. And prompting and a blank line output on eof. If readline() is in use,
1245 the arguments are non-NULL and provide the relevant functions.
1246
1247 Arguments:
1248   fn_readline   readline function or NULL
1249   fn_addhist    addhist function or NULL
1250
1251 Returns:        pointer to dynamic memory, or NULL at end of file
1252 */
1253
1254 static uschar *
1255 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1256 {
1257 gstring * g = NULL;
1258
1259 if (!fn_readline) { printf("> "); fflush(stdout); }
1260
1261 for (int i = 0;; i++)
1262   {
1263   uschar buffer[1024];
1264   uschar *p, *ss;
1265
1266   #ifdef USE_READLINE
1267   char *readline_line = NULL;
1268   if (fn_readline)
1269     {
1270     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1271     if (*readline_line != 0 && fn_addhist) fn_addhist(readline_line);
1272     p = US readline_line;
1273     }
1274   else
1275   #endif
1276
1277   /* readline() not in use */
1278
1279     {
1280     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;
1281     p = buffer;
1282     }
1283
1284   /* Handle the line */
1285
1286   ss = p + (int)Ustrlen(p);
1287   while (ss > p && isspace(ss[-1])) ss--;
1288
1289   if (i > 0)
1290     while (p < ss && isspace(*p)) p++;   /* leading space after cont */
1291
1292   g = string_catn(g, p, ss - p);
1293
1294   #ifdef USE_READLINE
1295   if (fn_readline) free(readline_line);
1296   #endif
1297
1298   /* g can only be NULL if ss==p */
1299   if (ss == p || g->s[g->ptr-1] != '\\')
1300     break;
1301
1302   --g->ptr;
1303   (void) string_from_gstring(g);
1304   }
1305
1306 if (!g) printf("\n");
1307 return string_from_gstring(g);
1308 }
1309
1310
1311
1312 /*************************************************
1313 *    Output usage information for the program    *
1314 *************************************************/
1315
1316 /* This function is called when there are no recipients
1317    or a specific --help argument was added.
1318
1319 Arguments:
1320   progname      information on what name we were called by
1321
1322 Returns:        DOES NOT RETURN
1323 */
1324
1325 static void
1326 exim_usage(uschar *progname)
1327 {
1328
1329 /* Handle specific program invocation variants */
1330 if (Ustrcmp(progname, US"-mailq") == 0)
1331   exim_fail(
1332     "mailq - list the contents of the mail queue\n\n"
1333     "For a list of options, see the Exim documentation.\n");
1334
1335 /* Generic usage - we output this whatever happens */
1336 exim_fail(
1337   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1338   "not directly from a shell command line. Options and/or arguments control\n"
1339   "what it does when called. For a list of options, see the Exim documentation.\n");
1340 }
1341
1342
1343
1344 /*************************************************
1345 *    Validate that the macros given are okay     *
1346 *************************************************/
1347
1348 /* Typically, Exim will drop privileges if macros are supplied.  In some
1349 cases, we want to not do so.
1350
1351 Arguments:    opt_D_used - true if the commandline had a "-D" option
1352 Returns:      true if trusted, false otherwise
1353 */
1354
1355 static BOOL
1356 macros_trusted(BOOL opt_D_used)
1357 {
1358 #ifdef WHITELIST_D_MACROS
1359 uschar *whitelisted, *end, *p, **whites;
1360 int white_count, i, n;
1361 size_t len;
1362 BOOL prev_char_item, found;
1363 #endif
1364
1365 if (!opt_D_used)
1366   return TRUE;
1367 #ifndef WHITELIST_D_MACROS
1368 return FALSE;
1369 #else
1370
1371 /* We only trust -D overrides for some invoking users:
1372 root, the exim run-time user, the optional config owner user.
1373 I don't know why config-owner would be needed, but since they can own the
1374 config files anyway, there's no security risk to letting them override -D. */
1375 if ( ! ((real_uid == root_uid)
1376      || (real_uid == exim_uid)
1377 #ifdef CONFIGURE_OWNER
1378      || (real_uid == config_uid)
1379 #endif
1380    ))
1381   {
1382   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1383   return FALSE;
1384   }
1385
1386 /* Get a list of macros which are whitelisted */
1387 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1388 prev_char_item = FALSE;
1389 white_count = 0;
1390 for (p = whitelisted; *p != '\0'; ++p)
1391   {
1392   if (*p == ':' || isspace(*p))
1393     {
1394     *p = '\0';
1395     if (prev_char_item)
1396       ++white_count;
1397     prev_char_item = FALSE;
1398     continue;
1399     }
1400   if (!prev_char_item)
1401     prev_char_item = TRUE;
1402   }
1403 end = p;
1404 if (prev_char_item)
1405   ++white_count;
1406 if (!white_count)
1407   return FALSE;
1408 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1409 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1410   {
1411   if (*p != '\0')
1412     {
1413     whites[i++] = p;
1414     if (i == white_count)
1415       break;
1416     while (*p != '\0' && p < end)
1417       ++p;
1418     }
1419   }
1420 whites[i] = NULL;
1421
1422 /* The list of commandline macros should be very short.
1423 Accept the N*M complexity. */
1424 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1425   {
1426   found = FALSE;
1427   for (uschar ** w = whites; *w; ++w)
1428     if (Ustrcmp(*w, m->name) == 0)
1429       {
1430       found = TRUE;
1431       break;
1432       }
1433   if (!found)
1434     return FALSE;
1435   if (!m->replacement)
1436     continue;
1437   if ((len = m->replen) == 0)
1438     continue;
1439   n = pcre_exec(regex_whitelisted_macro, NULL, CS m->replacement, len,
1440    0, PCRE_EOPT, NULL, 0);
1441   if (n < 0)
1442     {
1443     if (n != PCRE_ERROR_NOMATCH)
1444       debug_printf("macros_trusted checking %s returned %d\n", m->name, n);
1445     return FALSE;
1446     }
1447   }
1448 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1449 return TRUE;
1450 #endif
1451 }
1452
1453
1454 /*************************************************
1455 *          Expansion testing                     *
1456 *************************************************/
1457
1458 /* Expand and print one item, doing macro-processing.
1459
1460 Arguments:
1461   item          line for expansion
1462 */
1463
1464 static void
1465 expansion_test_line(uschar * line)
1466 {
1467 int len;
1468 BOOL dummy_macexp;
1469
1470 Ustrncpy(big_buffer, line, big_buffer_size);
1471 big_buffer[big_buffer_size-1] = '\0';
1472 len = Ustrlen(big_buffer);
1473
1474 (void) macros_expand(0, &len, &dummy_macexp);
1475
1476 if (isupper(big_buffer[0]))
1477   {
1478   if (macro_read_assignment(big_buffer))
1479     printf("Defined macro '%s'\n", mlast->name);
1480   }
1481 else
1482   if ((line = expand_string(big_buffer))) printf("%s\n", CS line);
1483   else printf("Failed: %s\n", expand_string_message);
1484 }
1485
1486
1487
1488 /*************************************************
1489 *          Entry point and high-level code       *
1490 *************************************************/
1491
1492 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1493 the appropriate action. All the necessary functions are present in the one
1494 binary. I originally thought one should split it up, but it turns out that so
1495 much of the apparatus is needed in each chunk that one might as well just have
1496 it all available all the time, which then makes the coding easier as well.
1497
1498 Arguments:
1499   argc      count of entries in argv
1500   argv      argument strings, with argv[0] being the program name
1501
1502 Returns:    EXIT_SUCCESS if terminated successfully
1503             EXIT_FAILURE otherwise, except when a message has been sent
1504               to the sender, and -oee was given
1505 */
1506
1507 int
1508 main(int argc, char **cargv)
1509 {
1510 uschar **argv = USS cargv;
1511 int  arg_receive_timeout = -1;
1512 int  arg_smtp_receive_timeout = -1;
1513 int  arg_error_handling = error_handling;
1514 int  filter_sfd = -1;
1515 int  filter_ufd = -1;
1516 int  group_count;
1517 int  i, rv;
1518 int  list_queue_option = 0;
1519 int  msg_action = 0;
1520 int  msg_action_arg = -1;
1521 int  namelen = (argv[0] == NULL)? 0 : Ustrlen(argv[0]);
1522 int  queue_only_reason = 0;
1523 #ifdef EXIM_PERL
1524 int  perl_start_option = 0;
1525 #endif
1526 int  recipients_arg = argc;
1527 int  sender_address_domain = 0;
1528 int  test_retry_arg = -1;
1529 int  test_rewrite_arg = -1;
1530 gid_t original_egid;
1531 BOOL arg_queue_only = FALSE;
1532 BOOL bi_option = FALSE;
1533 BOOL checking = FALSE;
1534 BOOL count_queue = FALSE;
1535 BOOL expansion_test = FALSE;
1536 BOOL extract_recipients = FALSE;
1537 BOOL flag_G = FALSE;
1538 BOOL flag_n = FALSE;
1539 BOOL forced_delivery = FALSE;
1540 BOOL f_end_dot = FALSE;
1541 BOOL deliver_give_up = FALSE;
1542 BOOL list_queue = FALSE;
1543 BOOL list_options = FALSE;
1544 BOOL list_config = FALSE;
1545 BOOL local_queue_only;
1546 BOOL more = TRUE;
1547 BOOL one_msg_action = FALSE;
1548 BOOL opt_D_used = FALSE;
1549 BOOL queue_only_set = FALSE;
1550 BOOL receiving_message = TRUE;
1551 BOOL sender_ident_set = FALSE;
1552 BOOL session_local_queue_only;
1553 BOOL unprivileged;
1554 BOOL removed_privilege = FALSE;
1555 BOOL usage_wanted = FALSE;
1556 BOOL verify_address_mode = FALSE;
1557 BOOL verify_as_sender = FALSE;
1558 BOOL version_printed = FALSE;
1559 uschar *alias_arg = NULL;
1560 uschar *called_as = US"";
1561 uschar *cmdline_syslog_name = NULL;
1562 uschar *start_queue_run_id = NULL;
1563 uschar *stop_queue_run_id = NULL;
1564 uschar *expansion_test_message = NULL;
1565 uschar *ftest_domain = NULL;
1566 uschar *ftest_localpart = NULL;
1567 uschar *ftest_prefix = NULL;
1568 uschar *ftest_suffix = NULL;
1569 uschar *log_oneline = NULL;
1570 uschar *malware_test_file = NULL;
1571 uschar *real_sender_address;
1572 uschar *originator_home = US"/";
1573 size_t sz;
1574 rmark reset_point;
1575
1576 struct passwd *pw;
1577 struct stat statbuf;
1578 pid_t passed_qr_pid = (pid_t)0;
1579 int passed_qr_pipe = -1;
1580 gid_t group_list[EXIM_GROUPLIST_SIZE];
1581
1582 /* For the -bI: flag */
1583 enum commandline_info info_flag = CMDINFO_NONE;
1584 BOOL info_stdout = FALSE;
1585
1586 /* Possible options for -R and -S */
1587
1588 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1589
1590 /* Need to define this in case we need to change the environment in order
1591 to get rid of a bogus time zone. We have to make it char rather than uschar
1592 because some OS define it in /usr/include/unistd.h. */
1593
1594 extern char **environ;
1595
1596 #ifdef MEASURE_TIMING
1597 (void)gettimeofday(&timestamp_startup, NULL);
1598 #endif
1599
1600 /* If the Exim user and/or group and/or the configuration file owner/group were
1601 defined by ref:name at build time, we must now find the actual uid/gid values.
1602 This is a feature to make the lives of binary distributors easier. */
1603
1604 #ifdef EXIM_USERNAME
1605 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1606   {
1607   if (exim_uid == 0)
1608     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1609
1610   /* If ref:name uses a number as the name, route_finduser() returns
1611   TRUE with exim_uid set and pw coerced to NULL. */
1612   if (pw)
1613     exim_gid = pw->pw_gid;
1614 #ifndef EXIM_GROUPNAME
1615   else
1616     exim_fail(
1617         "exim: ref:name should specify a usercode, not a group.\n"
1618         "exim: can't let you get away with it unless you also specify a group.\n");
1619 #endif
1620   }
1621 else
1622   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1623 #endif
1624
1625 #ifdef EXIM_GROUPNAME
1626 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1627   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1628 #endif
1629
1630 #ifdef CONFIGURE_OWNERNAME
1631 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1632   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1633     CONFIGURE_OWNERNAME);
1634 #endif
1635
1636 /* We default the system_filter_user to be the Exim run-time user, as a
1637 sane non-root value. */
1638 system_filter_uid = exim_uid;
1639
1640 #ifdef CONFIGURE_GROUPNAME
1641 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1642   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1643     CONFIGURE_GROUPNAME);
1644 #endif
1645
1646 /* In the Cygwin environment, some initialization used to need doing.
1647 It was fudged in by means of this macro; now no longer but we'll leave
1648 it in case of others. */
1649
1650 #ifdef OS_INIT
1651 OS_INIT
1652 #endif
1653
1654 /* Check a field which is patched when we are running Exim within its
1655 testing harness; do a fast initial check, and then the whole thing. */
1656
1657 f.running_in_test_harness =
1658   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1659 if (f.running_in_test_harness)
1660   debug_store = TRUE;
1661
1662 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1663 at the start of a program; however, it seems that some environments do not
1664 follow this. A "strange" locale can affect the formatting of timestamps, so we
1665 make quite sure. */
1666
1667 setlocale(LC_ALL, "C");
1668
1669 /* Set up the default handler for timing using alarm(). */
1670
1671 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1672
1673 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1674 because store_malloc writes a log entry on failure. */
1675
1676 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1677   exim_fail("exim: failed to get store for log buffer\n");
1678
1679 /* Initialize the default log options. */
1680
1681 bits_set(log_selector, log_selector_size, log_default);
1682
1683 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1684 NULL when the daemon is run and the file is closed. We have to use this
1685 indirection, because some systems don't allow writing to the variable "stderr".
1686 */
1687
1688 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1689
1690 /* Arrange for the PCRE regex library to use our store functions. Note that
1691 the normal calls are actually macros that add additional arguments for
1692 debugging purposes so we have to assign specially constructed functions here.
1693 The default is to use store in the stacking pool, but this is overridden in the
1694 regex_must_compile() function. */
1695
1696 pcre_malloc = function_store_get;
1697 pcre_free = function_dummy_free;
1698
1699 /* Ensure there is a big buffer for temporary use in several places. It is put
1700 in malloc store so that it can be freed for enlargement if necessary. */
1701
1702 big_buffer = store_malloc(big_buffer_size);
1703
1704 /* Set up the handler for the data request signal, and set the initial
1705 descriptive text. */
1706
1707 process_info = store_get(PROCESS_INFO_SIZE, TRUE);      /* tainted */
1708 set_process_info("initializing");
1709 os_restarting_signal(SIGUSR1, usr1_handler);
1710
1711 /* If running in a dockerized environment, the TERM signal is only
1712 delegated to the PID 1 if we request it by setting an signal handler */
1713 if (getpid() == 1) signal(SIGTERM, term_handler);
1714
1715 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1716 in the daemon code. For the rest of Exim's uses, we ignore it. */
1717
1718 signal(SIGHUP, SIG_IGN);
1719
1720 /* We don't want to die on pipe errors as the code is written to handle
1721 the write error instead. */
1722
1723 signal(SIGPIPE, SIG_IGN);
1724
1725 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1726 set to SIG_IGN. This causes subprocesses that complete before the parent
1727 process waits for them not to hang around, so when Exim calls wait(), nothing
1728 is there. The wait() code has been made robust against this, but let's ensure
1729 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1730 ending status. We use sigaction rather than plain signal() on those OS where
1731 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1732 problem on AIX with this.) */
1733
1734 #ifdef SA_NOCLDWAIT
1735   {
1736   struct sigaction act;
1737   act.sa_handler = SIG_DFL;
1738   sigemptyset(&(act.sa_mask));
1739   act.sa_flags = 0;
1740   sigaction(SIGCHLD, &act, NULL);
1741   }
1742 #else
1743 signal(SIGCHLD, SIG_DFL);
1744 #endif
1745
1746 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1747 SIGHUP. */
1748
1749 sighup_argv = argv;
1750
1751 /* Set up the version number. Set up the leading 'E' for the external form of
1752 message ids, set the pointer to the internal form, and initialize it to
1753 indicate no message being processed. */
1754
1755 version_init();
1756 message_id_option[0] = '-';
1757 message_id_external = message_id_option + 1;
1758 message_id_external[0] = 'E';
1759 message_id = message_id_external + 1;
1760 message_id[0] = 0;
1761
1762 /* Set the umask to zero so that any files Exim creates using open() are
1763 created with the modes that it specifies. NOTE: Files created with fopen() have
1764 a problem, which was not recognized till rather late (February 2006). With this
1765 umask, such files will be world writeable. (They are all content scanning files
1766 in the spool directory, which isn't world-accessible, so this is not a
1767 disaster, but it's untidy.) I don't want to change this overall setting,
1768 however, because it will interact badly with the open() calls. Instead, there's
1769 now a function called modefopen() that fiddles with the umask while calling
1770 fopen(). */
1771
1772 (void)umask(0);
1773
1774 /* Precompile the regular expression for matching a message id. Keep this in
1775 step with the code that generates ids in the accept.c module. We need to do
1776 this here, because the -M options check their arguments for syntactic validity
1777 using mac_ismsgid, which uses this. */
1778
1779 regex_ismsgid =
1780   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
1781
1782 /* Precompile the regular expression that is used for matching an SMTP error
1783 code, possibly extended, at the start of an error message. Note that the
1784 terminating whitespace character is included. */
1785
1786 regex_smtp_code =
1787   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
1788     FALSE, TRUE);
1789
1790 #ifdef WHITELIST_D_MACROS
1791 /* Precompile the regular expression used to filter the content of macros
1792 given to -D for permissibility. */
1793
1794 regex_whitelisted_macro =
1795   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
1796 #endif
1797
1798 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
1799
1800 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
1801 this seems to be a generally accepted convention, since one finds symbolic
1802 links called "mailq" in standard OS configurations. */
1803
1804 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
1805     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
1806   {
1807   list_queue = TRUE;
1808   receiving_message = FALSE;
1809   called_as = US"-mailq";
1810   }
1811
1812 /* If the program is called as "rmail" treat it as equivalent to
1813 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
1814 i.e. preventing a single dot on a line from terminating the message, and
1815 returning with zero return code, even in cases of error (provided an error
1816 message has been sent). */
1817
1818 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
1819     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
1820   {
1821   f.dot_ends = FALSE;
1822   called_as = US"-rmail";
1823   errors_sender_rc = EXIT_SUCCESS;
1824   }
1825
1826 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
1827 this is a smail convention. */
1828
1829 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
1830     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
1831   {
1832   smtp_input = smtp_batched_input = TRUE;
1833   called_as = US"-rsmtp";
1834   }
1835
1836 /* If the program is called as "runq" treat it as equivalent to "exim -q";
1837 this is a smail convention. */
1838
1839 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
1840     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
1841   {
1842   queue_interval = 0;
1843   receiving_message = FALSE;
1844   called_as = US"-runq";
1845   }
1846
1847 /* If the program is called as "newaliases" treat it as equivalent to
1848 "exim -bi"; this is a sendmail convention. */
1849
1850 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
1851     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
1852   {
1853   bi_option = TRUE;
1854   receiving_message = FALSE;
1855   called_as = US"-newaliases";
1856   }
1857
1858 /* Save the original effective uid for a couple of uses later. It should
1859 normally be root, but in some esoteric environments it may not be. */
1860
1861 original_euid = geteuid();
1862 original_egid = getegid();
1863
1864 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
1865 to be the same as the real ones. This makes a difference only if Exim is setuid
1866 (or setgid) to something other than root, which could be the case in some
1867 special configurations. */
1868
1869 real_uid = getuid();
1870 real_gid = getgid();
1871
1872 if (real_uid == root_uid)
1873   {
1874   if ((rv = setgid(real_gid)))
1875     exim_fail("exim: setgid(%ld) failed: %s\n",
1876         (long int)real_gid, strerror(errno));
1877   if ((rv = setuid(real_uid)))
1878     exim_fail("exim: setuid(%ld) failed: %s\n",
1879         (long int)real_uid, strerror(errno));
1880   }
1881
1882 /* If neither the original real uid nor the original euid was root, Exim is
1883 running in an unprivileged state. */
1884
1885 unprivileged = (real_uid != root_uid && original_euid != root_uid);
1886
1887 /* Scan the program's arguments. Some can be dealt with right away; others are
1888 simply recorded for checking and handling afterwards. Do a high-level switch
1889 on the second character (the one after '-'), to save some effort. */
1890
1891 for (i = 1; i < argc; i++)
1892   {
1893   BOOL badarg = FALSE;
1894   uschar *arg = argv[i];
1895   uschar *argrest;
1896   int switchchar;
1897
1898   /* An argument not starting with '-' is the start of a recipients list;
1899   break out of the options-scanning loop. */
1900
1901   if (arg[0] != '-')
1902     {
1903     recipients_arg = i;
1904     break;
1905     }
1906
1907   /* An option consisting of -- terminates the options */
1908
1909   if (Ustrcmp(arg, "--") == 0)
1910     {
1911     recipients_arg = i + 1;
1912     break;
1913     }
1914
1915   /* Handle flagged options */
1916
1917   switchchar = arg[1];
1918   argrest = arg+2;
1919
1920   /* Make all -ex options synonymous with -oex arguments, since that
1921   is assumed by various callers. Also make -qR options synonymous with -R
1922   options, as that seems to be required as well. Allow for -qqR too, and
1923   the same for -S options. */
1924
1925   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
1926       Ustrncmp(arg+1, "qR", 2) == 0 ||
1927       Ustrncmp(arg+1, "qS", 2) == 0)
1928     {
1929     switchchar = arg[2];
1930     argrest++;
1931     }
1932   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
1933     {
1934     switchchar = arg[3];
1935     argrest += 2;
1936     f.queue_2stage = TRUE;
1937     }
1938
1939   /* Make -r synonymous with -f, since it is a documented alias */
1940
1941   else if (arg[1] == 'r') switchchar = 'f';
1942
1943   /* Make -ov synonymous with -v */
1944
1945   else if (Ustrcmp(arg, "-ov") == 0)
1946     {
1947     switchchar = 'v';
1948     argrest++;
1949     }
1950
1951   /* deal with --option_aliases */
1952   else if (switchchar == '-')
1953     {
1954     if (Ustrcmp(argrest, "help") == 0)
1955       {
1956       usage_wanted = TRUE;
1957       break;
1958       }
1959     else if (Ustrcmp(argrest, "version") == 0)
1960       {
1961       switchchar = 'b';
1962       argrest = US"V";
1963       }
1964     }
1965
1966   /* High-level switch on active initial letter */
1967
1968   switch(switchchar)
1969     {
1970
1971     /* sendmail uses -Ac and -Am to control which .cf file is used;
1972     we ignore them. */
1973     case 'A':
1974     if (*argrest == '\0') { badarg = TRUE; break; }
1975     else
1976       {
1977       BOOL ignore = FALSE;
1978       switch (*argrest)
1979         {
1980         case 'c':
1981         case 'm':
1982           if (*(argrest + 1) == '\0')
1983             ignore = TRUE;
1984           break;
1985         }
1986       if (!ignore) { badarg = TRUE; break; }
1987       }
1988     break;
1989
1990     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
1991     so has no need of it. */
1992
1993     case 'B':
1994     if (*argrest == 0) i++;       /* Skip over the type */
1995     break;
1996
1997
1998     case 'b':
1999     receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2000
2001     /* -bd:  Run in daemon mode, awaiting SMTP connections.
2002        -bdf: Ditto, but in the foreground.
2003     */
2004
2005     if (*argrest == 'd')
2006       {
2007       f.daemon_listen = TRUE;
2008       if (*(++argrest) == 'f') f.background_daemon = FALSE;
2009         else if (*argrest != 0) { badarg = TRUE; break; }
2010       }
2011
2012     /* -be:  Run in expansion test mode
2013        -bem: Ditto, but read a message from a file first
2014     */
2015
2016     else if (*argrest == 'e')
2017       {
2018       expansion_test = checking = TRUE;
2019       if (argrest[1] == 'm')
2020         {
2021         if (++i >= argc) { badarg = TRUE; break; }
2022         expansion_test_message = argv[i];
2023         argrest++;
2024         }
2025       if (argrest[1] != 0) { badarg = TRUE; break; }
2026       }
2027
2028     /* -bF:  Run system filter test */
2029
2030     else if (*argrest == 'F')
2031       {
2032       filter_test |= checking = FTEST_SYSTEM;
2033       if (*(++argrest) != 0) { badarg = TRUE; break; }
2034       if (++i < argc) filter_test_sfile = argv[i]; else
2035         exim_fail("exim: file name expected after %s\n", argv[i-1]);
2036       }
2037
2038     /* -bf:  Run user filter test
2039        -bfd: Set domain for filter testing
2040        -bfl: Set local part for filter testing
2041        -bfp: Set prefix for filter testing
2042        -bfs: Set suffix for filter testing
2043     */
2044
2045     else if (*argrest == 'f')
2046       {
2047       if (*(++argrest) == 0)
2048         {
2049         filter_test |= checking = FTEST_USER;
2050         if (++i < argc) filter_test_ufile = argv[i]; else
2051           exim_fail("exim: file name expected after %s\n", argv[i-1]);
2052         }
2053       else
2054         {
2055         if (++i >= argc)
2056           exim_fail("exim: string expected after %s\n", arg);
2057         if (Ustrcmp(argrest, "d") == 0) ftest_domain = argv[i];
2058         else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = argv[i];
2059         else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = argv[i];
2060         else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = argv[i];
2061         else { badarg = TRUE; break; }
2062         }
2063       }
2064
2065     /* -bh: Host checking - an IP address must follow. */
2066
2067     else if (Ustrcmp(argrest, "h") == 0 || Ustrcmp(argrest, "hc") == 0)
2068       {
2069       if (++i >= argc) { badarg = TRUE; break; }
2070       sender_host_address = argv[i];
2071       host_checking = checking = f.log_testing_mode = TRUE;
2072       f.host_checking_callout = argrest[1] == 'c';
2073       message_logs = FALSE;
2074       }
2075
2076     /* -bi: This option is used by sendmail to initialize *the* alias file,
2077     though it has the -oA option to specify a different file. Exim has no
2078     concept of *the* alias file, but since Sun's YP make script calls
2079     sendmail this way, some support must be provided. */
2080
2081     else if (Ustrcmp(argrest, "i") == 0) bi_option = TRUE;
2082
2083     /* -bI: provide information, of the type to follow after a colon.
2084     This is an Exim flag. */
2085
2086     else if (argrest[0] == 'I' && Ustrlen(argrest) >= 2 && argrest[1] == ':')
2087       {
2088       uschar *p = &argrest[2];
2089       info_flag = CMDINFO_HELP;
2090       if (Ustrlen(p))
2091         {
2092         if (strcmpic(p, CUS"sieve") == 0)
2093           {
2094           info_flag = CMDINFO_SIEVE;
2095           info_stdout = TRUE;
2096           }
2097         else if (strcmpic(p, CUS"dscp") == 0)
2098           {
2099           info_flag = CMDINFO_DSCP;
2100           info_stdout = TRUE;
2101           }
2102         else if (strcmpic(p, CUS"help") == 0)
2103           {
2104           info_stdout = TRUE;
2105           }
2106         }
2107       }
2108
2109     /* -bm: Accept and deliver message - the default option. Reinstate
2110     receiving_message, which got turned off for all -b options. */
2111
2112     else if (Ustrcmp(argrest, "m") == 0) receiving_message = TRUE;
2113
2114     /* -bmalware: test the filename given for malware */
2115
2116     else if (Ustrcmp(argrest, "malware") == 0)
2117       {
2118       if (++i >= argc) { badarg = TRUE; break; }
2119       checking = TRUE;
2120       malware_test_file = argv[i];
2121       }
2122
2123     /* -bnq: For locally originating messages, do not qualify unqualified
2124     addresses. In the envelope, this causes errors; in header lines they
2125     just get left. */
2126
2127     else if (Ustrcmp(argrest, "nq") == 0)
2128       {
2129       f.allow_unqualified_sender = FALSE;
2130       f.allow_unqualified_recipient = FALSE;
2131       }
2132
2133     /* -bpxx: List the contents of the mail queue, in various forms. If
2134     the option is -bpc, just a queue count is needed. Otherwise, if the
2135     first letter after p is r, then order is random. */
2136
2137     else if (*argrest == 'p')
2138       {
2139       if (*(++argrest) == 'c')
2140         {
2141         count_queue = TRUE;
2142         if (*(++argrest) != 0) badarg = TRUE;
2143         break;
2144         }
2145
2146       if (*argrest == 'r')
2147         {
2148         list_queue_option = 8;
2149         argrest++;
2150         }
2151       else list_queue_option = 0;
2152
2153       list_queue = TRUE;
2154
2155       /* -bp: List the contents of the mail queue, top-level only */
2156
2157       if (*argrest == 0) {}
2158
2159       /* -bpu: List the contents of the mail queue, top-level undelivered */
2160
2161       else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2162
2163       /* -bpa: List the contents of the mail queue, including all delivered */
2164
2165       else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2166
2167       /* Unknown after -bp[r] */
2168
2169       else
2170         {
2171         badarg = TRUE;
2172         break;
2173         }
2174       }
2175
2176
2177     /* -bP: List the configuration variables given as the address list.
2178     Force -v, so configuration errors get displayed. */
2179
2180     else if (Ustrcmp(argrest, "P") == 0)
2181       {
2182       /* -bP config: we need to setup here, because later,
2183        * when list_options is checked, the config is read already */
2184       if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2185         {
2186         list_config = TRUE;
2187         readconf_save_config(version_string);
2188         }
2189       else
2190         {
2191         list_options = TRUE;
2192         debug_selector |= D_v;
2193         debug_file = stderr;
2194         }
2195       }
2196
2197     /* -brt: Test retry configuration lookup */
2198
2199     else if (Ustrcmp(argrest, "rt") == 0)
2200       {
2201       checking = TRUE;
2202       test_retry_arg = i + 1;
2203       goto END_ARG;
2204       }
2205
2206     /* -brw: Test rewrite configuration */
2207
2208     else if (Ustrcmp(argrest, "rw") == 0)
2209       {
2210       checking = TRUE;
2211       test_rewrite_arg = i + 1;
2212       goto END_ARG;
2213       }
2214
2215     /* -bS: Read SMTP commands on standard input, but produce no replies -
2216     all errors are reported by sending messages. */
2217
2218     else if (Ustrcmp(argrest, "S") == 0)
2219       smtp_input = smtp_batched_input = receiving_message = TRUE;
2220
2221     /* -bs: Read SMTP commands on standard input and produce SMTP replies
2222     on standard output. */
2223
2224     else if (Ustrcmp(argrest, "s") == 0) smtp_input = receiving_message = TRUE;
2225
2226     /* -bt: address testing mode */
2227
2228     else if (Ustrcmp(argrest, "t") == 0)
2229       f.address_test_mode = checking = f.log_testing_mode = TRUE;
2230
2231     /* -bv: verify addresses */
2232
2233     else if (Ustrcmp(argrest, "v") == 0)
2234       verify_address_mode = checking = f.log_testing_mode = TRUE;
2235
2236     /* -bvs: verify sender addresses */
2237
2238     else if (Ustrcmp(argrest, "vs") == 0)
2239       {
2240       verify_address_mode = checking = f.log_testing_mode = TRUE;
2241       verify_as_sender = TRUE;
2242       }
2243
2244     /* -bV: Print version string and support details */
2245
2246     else if (Ustrcmp(argrest, "V") == 0)
2247       {
2248       printf("Exim version %s #%s built %s\n", version_string,
2249         version_cnumber, version_date);
2250       printf("%s\n", CS version_copyright);
2251       version_printed = TRUE;
2252       show_whats_supported(stdout);
2253       f.log_testing_mode = TRUE;
2254       }
2255
2256     /* -bw: inetd wait mode, accept a listening socket as stdin */
2257
2258     else if (*argrest == 'w')
2259       {
2260       f.inetd_wait_mode = TRUE;
2261       f.background_daemon = FALSE;
2262       f.daemon_listen = TRUE;
2263       if (*(++argrest) != '\0')
2264         if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2265           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2266       }
2267
2268     else badarg = TRUE;
2269     break;
2270
2271
2272     /* -C: change configuration file list; ignore if it isn't really
2273     a change! Enforce a prefix check if required. */
2274
2275     case 'C':
2276     if (*argrest == 0)
2277       {
2278       if(++i < argc) argrest = argv[i]; else
2279         { badarg = TRUE; break; }
2280       }
2281     if (Ustrcmp(config_main_filelist, argrest) != 0)
2282       {
2283       #ifdef ALT_CONFIG_PREFIX
2284       int sep = 0;
2285       int len = Ustrlen(ALT_CONFIG_PREFIX);
2286       const uschar *list = argrest;
2287       uschar *filename;
2288       while((filename = string_nextinlist(&list, &sep, big_buffer,
2289              big_buffer_size)) != NULL)
2290         {
2291         if ((Ustrlen(filename) < len ||
2292              Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0 ||
2293              Ustrstr(filename, "/../") != NULL) &&
2294              (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid))
2295           exim_fail("-C Permission denied\n");
2296         }
2297       #endif
2298       if (real_uid != root_uid)
2299         {
2300         #ifdef TRUSTED_CONFIG_LIST
2301
2302         if (real_uid != exim_uid
2303             #ifdef CONFIGURE_OWNER
2304             && real_uid != config_uid
2305             #endif
2306             )
2307           f.trusted_config = FALSE;
2308         else
2309           {
2310           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2311           if (trust_list)
2312             {
2313             struct stat statbuf;
2314
2315             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2316                 (statbuf.st_uid != root_uid        /* owner not root */
2317                  #ifdef CONFIGURE_OWNER
2318                  && statbuf.st_uid != config_uid   /* owner not the special one */
2319                  #endif
2320                    ) ||                            /* or */
2321                 (statbuf.st_gid != root_gid        /* group not root */
2322                  #ifdef CONFIGURE_GROUP
2323                  && statbuf.st_gid != config_gid   /* group not the special one */
2324                  #endif
2325                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2326                    ) ||                            /* or */
2327                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2328               {
2329               f.trusted_config = FALSE;
2330               fclose(trust_list);
2331               }
2332             else
2333               {
2334               /* Well, the trust list at least is up to scratch... */
2335               rmark reset_point = store_mark();
2336               uschar *trusted_configs[32];
2337               int nr_configs = 0;
2338               int i = 0;
2339
2340               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2341                 {
2342                 uschar *start = big_buffer, *nl;
2343                 while (*start && isspace(*start))
2344                 start++;
2345                 if (*start != '/')
2346                   continue;
2347                 nl = Ustrchr(start, '\n');
2348                 if (nl)
2349                   *nl = 0;
2350                 trusted_configs[nr_configs++] = string_copy(start);
2351                 if (nr_configs == 32)
2352                   break;
2353                 }
2354               fclose(trust_list);
2355
2356               if (nr_configs)
2357                 {
2358                 int sep = 0;
2359                 const uschar *list = argrest;
2360                 uschar *filename;
2361                 while (f.trusted_config && (filename = string_nextinlist(&list,
2362                         &sep, big_buffer, big_buffer_size)) != NULL)
2363                   {
2364                   for (i=0; i < nr_configs; i++)
2365                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2366                       break;
2367                   if (i == nr_configs)
2368                     {
2369                     f.trusted_config = FALSE;
2370                     break;
2371                     }
2372                   }
2373                 }
2374               else      /* No valid prefixes found in trust_list file. */
2375                 f.trusted_config = FALSE;
2376               store_reset(reset_point);
2377               }
2378             }
2379           else          /* Could not open trust_list file. */
2380             f.trusted_config = FALSE;
2381           }
2382       #else
2383         /* Not root; don't trust config */
2384         f.trusted_config = FALSE;
2385       #endif
2386         }
2387
2388       config_main_filelist = argrest;
2389       f.config_changed = TRUE;
2390       }
2391     break;
2392
2393
2394     /* -D: set up a macro definition */
2395
2396     case 'D':
2397 #ifdef DISABLE_D_OPTION
2398       exim_fail("exim: -D is not available in this Exim binary\n");
2399 #else
2400       {
2401       int ptr = 0;
2402       macro_item *m;
2403       uschar name[24];
2404       uschar *s = argrest;
2405
2406       opt_D_used = TRUE;
2407       while (isspace(*s)) s++;
2408
2409       if (*s < 'A' || *s > 'Z')
2410         exim_fail("exim: macro name set by -D must start with "
2411           "an upper case letter\n");
2412
2413       while (isalnum(*s) || *s == '_')
2414         {
2415         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2416         s++;
2417         }
2418       name[ptr] = 0;
2419       if (ptr == 0) { badarg = TRUE; break; }
2420       while (isspace(*s)) s++;
2421       if (*s != 0)
2422         {
2423         if (*s++ != '=') { badarg = TRUE; break; }
2424         while (isspace(*s)) s++;
2425         }
2426
2427       for (m = macros_user; m; m = m->next)
2428         if (Ustrcmp(m->name, name) == 0)
2429           exim_fail("exim: duplicated -D in command line\n");
2430
2431       m = macro_create(name, s, TRUE);
2432
2433       if (clmacro_count >= MAX_CLMACROS)
2434         exim_fail("exim: too many -D options on command line\n");
2435       clmacros[clmacro_count++] =
2436         string_sprintf("-D%s=%s", m->name, m->replacement);
2437       }
2438     #endif
2439     break;
2440
2441     /* -d: Set debug level (see also -v below) or set the drop_cr option.
2442     The latter is now a no-op, retained for compatibility only. If -dd is used,
2443     debugging subprocesses of the daemon is disabled. */
2444
2445     case 'd':
2446     if (Ustrcmp(argrest, "ropcr") == 0)
2447       {
2448       /* drop_cr = TRUE; */
2449       }
2450
2451     /* Use an intermediate variable so that we don't set debugging while
2452     decoding the debugging bits. */
2453
2454     else
2455       {
2456       unsigned int selector = D_default;
2457       debug_selector = 0;
2458       debug_file = NULL;
2459       if (*argrest == 'd')
2460         {
2461         f.debug_daemon = TRUE;
2462         argrest++;
2463         }
2464       if (*argrest != 0)
2465         decode_bits(&selector, 1, debug_notall, argrest,
2466           debug_options, debug_options_count, US"debug", 0);
2467       debug_selector = selector;
2468       }
2469     break;
2470
2471
2472     /* -E: This is a local error message. This option is not intended for
2473     external use at all, but is not restricted to trusted callers because it
2474     does no harm (just suppresses certain error messages) and if Exim is run
2475     not setuid root it won't always be trusted when it generates error
2476     messages using this option. If there is a message id following -E, point
2477     message_reference at it, for logging. */
2478
2479     case 'E':
2480     f.local_error_message = TRUE;
2481     if (mac_ismsgid(argrest)) message_reference = argrest;
2482     break;
2483
2484
2485     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2486     option, so it looks as if historically the -oex options are also callable
2487     without the leading -o. So we have to accept them. Before the switch,
2488     anything starting -oe has been converted to -e. Exim does not support all
2489     of the sendmail error options. */
2490
2491     case 'e':
2492     if (Ustrcmp(argrest, "e") == 0)
2493       {
2494       arg_error_handling = ERRORS_SENDER;
2495       errors_sender_rc = EXIT_SUCCESS;
2496       }
2497     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2498     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2499     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2500     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2501     else badarg = TRUE;
2502     break;
2503
2504
2505     /* -F: Set sender's full name, used instead of the gecos entry from
2506     the password file. Since users can usually alter their gecos entries,
2507     there's no security involved in using this instead. The data can follow
2508     the -F or be in the next argument. */
2509
2510     case 'F':
2511     if (*argrest == 0)
2512       {
2513       if(++i < argc) argrest = argv[i]; else
2514         { badarg = TRUE; break; }
2515       }
2516     originator_name = argrest;
2517     f.sender_name_forced = TRUE;
2518     break;
2519
2520
2521     /* -f: Set sender's address - this value is only actually used if Exim is
2522     run by a trusted user, or if untrusted_set_sender is set and matches the
2523     address, except that the null address can always be set by any user. The
2524     test for this happens later, when the value given here is ignored when not
2525     permitted. For an untrusted user, the actual sender is still put in Sender:
2526     if it doesn't match the From: header (unless no_local_from_check is set).
2527     The data can follow the -f or be in the next argument. The -r switch is an
2528     obsolete form of -f but since there appear to be programs out there that
2529     use anything that sendmail has ever supported, better accept it - the
2530     synonymizing is done before the switch above.
2531
2532     At this stage, we must allow domain literal addresses, because we don't
2533     know what the setting of allow_domain_literals is yet. Ditto for trailing
2534     dots and strip_trailing_dot. */
2535
2536     case 'f':
2537       {
2538       int dummy_start, dummy_end;
2539       uschar *errmess;
2540       if (*argrest == 0)
2541         {
2542         if (i+1 < argc) argrest = argv[++i]; else
2543           { badarg = TRUE; break; }
2544         }
2545       if (*argrest == 0)
2546         *(sender_address = store_get(1, FALSE)) = '\0';  /* Ensure writeable memory */
2547       else
2548         {
2549         uschar *temp = argrest + Ustrlen(argrest) - 1;
2550         while (temp >= argrest && isspace(*temp)) temp--;
2551         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2552         allow_domain_literals = TRUE;
2553         strip_trailing_dot = TRUE;
2554 #ifdef SUPPORT_I18N
2555         allow_utf8_domains = TRUE;
2556 #endif
2557         sender_address = parse_extract_address(argrest, &errmess,
2558           &dummy_start, &dummy_end, &sender_address_domain, TRUE);
2559         sender_address = string_copy_taint(sender_address, TRUE);
2560 #ifdef SUPPORT_I18N
2561         message_smtputf8 =  string_is_utf8(sender_address);
2562         allow_utf8_domains = FALSE;
2563 #endif
2564         allow_domain_literals = FALSE;
2565         strip_trailing_dot = FALSE;
2566         if (!sender_address)
2567           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2568         }
2569       f.sender_address_forced = TRUE;
2570       }
2571     break;
2572
2573     /* -G: sendmail invocation to specify that it's a gateway submission and
2574     sendmail may complain about problems instead of fixing them.
2575     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2576     not at this time complain about problems. */
2577
2578     case 'G':
2579     flag_G = TRUE;
2580     break;
2581
2582     /* -h: Set the hop count for an incoming message. Exim does not currently
2583     support this; it always computes it by counting the Received: headers.
2584     To put it in will require a change to the spool header file format. */
2585
2586     case 'h':
2587     if (*argrest == 0)
2588       {
2589       if(++i < argc) argrest = argv[i]; else
2590         { badarg = TRUE; break; }
2591       }
2592     if (!isdigit(*argrest)) badarg = TRUE;
2593     break;
2594
2595
2596     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2597     not to be documented for sendmail but mailx (at least) uses it) */
2598
2599     case 'i':
2600     if (*argrest == 0) f.dot_ends = FALSE; else badarg = TRUE;
2601     break;
2602
2603
2604     /* -L: set the identifier used for syslog; equivalent to setting
2605     syslog_processname in the config file, but needs to be an admin option. */
2606
2607     case 'L':
2608     if (*argrest == '\0')
2609       {
2610       if(++i < argc) argrest = argv[i]; else
2611         { badarg = TRUE; break; }
2612       }
2613     if ((sz = Ustrlen(argrest)) > 32)
2614       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2615     if (sz < 1)
2616       exim_fail("exim: the -L syslog name is too short\n");
2617     cmdline_syslog_name = argrest;
2618     break;
2619
2620     case 'M':
2621     receiving_message = FALSE;
2622
2623     /* -MC:  continue delivery of another message via an existing open
2624     file descriptor. This option is used for an internal call by the
2625     smtp transport when there is a pending message waiting to go to an
2626     address to which it has got a connection. Five subsequent arguments are
2627     required: transport name, host name, IP address, sequence number, and
2628     message_id. Transports may decline to create new processes if the sequence
2629     number gets too big. The channel is stdin. This (-MC) must be the last
2630     argument. There's a subsequent check that the real-uid is privileged.
2631
2632     If we are running in the test harness. delay for a bit, to let the process
2633     that set this one up complete. This makes for repeatability of the logging,
2634     etc. output. */
2635
2636     if (Ustrcmp(argrest, "C") == 0)
2637       {
2638       union sockaddr_46 interface_sock;
2639       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2640
2641       if (argc != i + 6)
2642         exim_fail("exim: too many or too few arguments after -MC\n");
2643
2644       if (msg_action_arg >= 0)
2645         exim_fail("exim: incompatible arguments\n");
2646
2647       continue_transport = argv[++i];
2648       continue_hostname = argv[++i];
2649       continue_host_address = argv[++i];
2650       continue_sequence = Uatoi(argv[++i]);
2651       msg_action = MSG_DELIVER;
2652       msg_action_arg = ++i;
2653       forced_delivery = TRUE;
2654       queue_run_pid = passed_qr_pid;
2655       queue_run_pipe = passed_qr_pipe;
2656
2657       if (!mac_ismsgid(argv[i]))
2658         exim_fail("exim: malformed message id %s after -MC option\n",
2659           argv[i]);
2660
2661       /* Set up $sending_ip_address and $sending_port, unless proxied */
2662
2663       if (!continue_proxy_cipher)
2664         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2665             &size) == 0)
2666           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2667             &sending_port);
2668         else
2669           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2670             strerror(errno));
2671
2672       testharness_pause_ms(500);
2673       break;
2674       }
2675
2676     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2677       {
2678       switch(argrest[1])
2679         {
2680     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2681     precedes -MC (see above). The flag indicates that the host to which
2682     Exim is connected has accepted an AUTH sequence. */
2683
2684         case 'A': f.smtp_authenticated = TRUE; break;
2685
2686     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2687        that exim is connected to supports the esmtp extension DSN */
2688
2689         case 'D': smtp_peer_options |= OPTION_DSN; break;
2690
2691     /* -MCG: set the queue name, to a non-default value */
2692
2693         case 'G': if (++i < argc) queue_name = string_copy(argv[i]);
2694                   else badarg = TRUE;
2695                   break;
2696
2697     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2698
2699         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2700
2701     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2702     it preceded -MC (see above) */
2703
2704         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2705
2706     /* -MCQ: pass on the pid of the queue-running process that started
2707     this chain of deliveries and the fd of its synchronizing pipe; this
2708     is useful only when it precedes -MC (see above) */
2709
2710         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
2711                   else badarg = TRUE;
2712                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
2713                   else badarg = TRUE;
2714                   break;
2715
2716     /* -MCS: set the smtp_use_size flag; this is useful only when it
2717     precedes -MC (see above) */
2718
2719         case 'S': smtp_peer_options |= OPTION_SIZE; break;
2720
2721 #ifndef DISABLE_TLS
2722     /* -MCt: similar to -MCT below but the connection is still open
2723     via a proxy process which handles the TLS context and coding.
2724     Require three arguments for the proxied local address and port,
2725     and the TLS cipher.  */
2726
2727         case 't': if (++i < argc) sending_ip_address = argv[i];
2728                   else badarg = TRUE;
2729                   if (++i < argc) sending_port = (int)(Uatol(argv[i]));
2730                   else badarg = TRUE;
2731                   if (++i < argc) continue_proxy_cipher = argv[i];
2732                   else badarg = TRUE;
2733                   /*FALLTHROUGH*/
2734
2735     /* -MCT: set the tls_offered flag; this is useful only when it
2736     precedes -MC (see above). The flag indicates that the host to which
2737     Exim is connected has offered TLS support. */
2738
2739         case 'T': smtp_peer_options |= OPTION_TLS; break;
2740 #endif
2741
2742         default:  badarg = TRUE; break;
2743         }
2744       break;
2745       }
2746
2747     /* -M[x]: various operations on the following list of message ids:
2748        -M    deliver the messages, ignoring next retry times and thawing
2749        -Mc   deliver the messages, checking next retry times, no thawing
2750        -Mf   freeze the messages
2751        -Mg   give up on the messages
2752        -Mt   thaw the messages
2753        -Mrm  remove the messages
2754     In the above cases, this must be the last option. There are also the
2755     following options which are followed by a single message id, and which
2756     act on that message. Some of them use the "recipient" addresses as well.
2757        -Mar  add recipient(s)
2758        -Mmad mark all recipients delivered
2759        -Mmd  mark recipients(s) delivered
2760        -Mes  edit sender
2761        -Mset load a message for use with -be
2762        -Mvb  show body
2763        -Mvc  show copy (of whole message, in RFC 2822 format)
2764        -Mvh  show header
2765        -Mvl  show log
2766     */
2767
2768     else if (*argrest == 0)
2769       {
2770       msg_action = MSG_DELIVER;
2771       forced_delivery = f.deliver_force_thaw = TRUE;
2772       }
2773     else if (Ustrcmp(argrest, "ar") == 0)
2774       {
2775       msg_action = MSG_ADD_RECIPIENT;
2776       one_msg_action = TRUE;
2777       }
2778     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
2779     else if (Ustrcmp(argrest, "es") == 0)
2780       {
2781       msg_action = MSG_EDIT_SENDER;
2782       one_msg_action = TRUE;
2783       }
2784     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
2785     else if (Ustrcmp(argrest, "g") == 0)
2786       {
2787       msg_action = MSG_DELIVER;
2788       deliver_give_up = TRUE;
2789       }
2790     else if (Ustrcmp(argrest, "mad") == 0)
2791       {
2792       msg_action = MSG_MARK_ALL_DELIVERED;
2793       }
2794     else if (Ustrcmp(argrest, "md") == 0)
2795       {
2796       msg_action = MSG_MARK_DELIVERED;
2797       one_msg_action = TRUE;
2798       }
2799     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
2800     else if (Ustrcmp(argrest, "set") == 0)
2801       {
2802       msg_action = MSG_LOAD;
2803       one_msg_action = TRUE;
2804       }
2805     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
2806     else if (Ustrcmp(argrest, "vb") == 0)
2807       {
2808       msg_action = MSG_SHOW_BODY;
2809       one_msg_action = TRUE;
2810       }
2811     else if (Ustrcmp(argrest, "vc") == 0)
2812       {
2813       msg_action = MSG_SHOW_COPY;
2814       one_msg_action = TRUE;
2815       }
2816     else if (Ustrcmp(argrest, "vh") == 0)
2817       {
2818       msg_action = MSG_SHOW_HEADER;
2819       one_msg_action = TRUE;
2820       }
2821     else if (Ustrcmp(argrest, "vl") == 0)
2822       {
2823       msg_action = MSG_SHOW_LOG;
2824       one_msg_action = TRUE;
2825       }
2826     else { badarg = TRUE; break; }
2827
2828     /* All the -Mxx options require at least one message id. */
2829
2830     msg_action_arg = i + 1;
2831     if (msg_action_arg >= argc)
2832       exim_fail("exim: no message ids given after %s option\n", arg);
2833
2834     /* Some require only message ids to follow */
2835
2836     if (!one_msg_action)
2837       {
2838       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
2839         exim_fail("exim: malformed message id %s after %s option\n",
2840           argv[j], arg);
2841       goto END_ARG;   /* Remaining args are ids */
2842       }
2843
2844     /* Others require only one message id, possibly followed by addresses,
2845     which will be handled as normal arguments. */
2846
2847     else
2848       {
2849       if (!mac_ismsgid(argv[msg_action_arg]))
2850         exim_fail("exim: malformed message id %s after %s option\n",
2851           argv[msg_action_arg], arg);
2852       i++;
2853       }
2854     break;
2855
2856
2857     /* Some programs seem to call the -om option without the leading o;
2858     for sendmail it askes for "me too". Exim always does this. */
2859
2860     case 'm':
2861     if (*argrest != 0) badarg = TRUE;
2862     break;
2863
2864
2865     /* -N: don't do delivery - a debugging option that stops transports doing
2866     their thing. It implies debugging at the D_v level. */
2867
2868     case 'N':
2869     if (*argrest == 0)
2870       {
2871       f.dont_deliver = TRUE;
2872       debug_selector |= D_v;
2873       debug_file = stderr;
2874       }
2875     else badarg = TRUE;
2876     break;
2877
2878
2879     /* -n: This means "don't alias" in sendmail, apparently.
2880     For normal invocations, it has no effect.
2881     It may affect some other options. */
2882
2883     case 'n':
2884     flag_n = TRUE;
2885     break;
2886
2887     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
2888     option to the specified value. This form uses long names. We need to handle
2889     -O option=value and -Ooption=value. */
2890
2891     case 'O':
2892     if (*argrest == 0)
2893       {
2894       if (++i >= argc)
2895         exim_fail("exim: string expected after -O\n");
2896       }
2897     break;
2898
2899     case 'o':
2900
2901     /* -oA: Set an argument for the bi command (sendmail's "alternate alias
2902     file" option). */
2903
2904     if (*argrest == 'A')
2905       {
2906       alias_arg = argrest + 1;
2907       if (alias_arg[0] == 0)
2908         {
2909         if (i+1 < argc) alias_arg = argv[++i]; else
2910           exim_fail("exim: string expected after -oA\n");
2911         }
2912       }
2913
2914     /* -oB: Set a connection message max value for remote deliveries */
2915
2916     else if (*argrest == 'B')
2917       {
2918       uschar *p = argrest + 1;
2919       if (p[0] == 0)
2920         {
2921         if (i+1 < argc && isdigit((argv[i+1][0]))) p = argv[++i]; else
2922           {
2923           connection_max_messages = 1;
2924           p = NULL;
2925           }
2926         }
2927
2928       if (p != NULL)
2929         {
2930         if (!isdigit(*p))
2931           exim_fail("exim: number expected after -oB\n");
2932         connection_max_messages = Uatoi(p);
2933         }
2934       }
2935
2936     /* -odb: background delivery */
2937
2938     else if (Ustrcmp(argrest, "db") == 0)
2939       {
2940       f.synchronous_delivery = FALSE;
2941       arg_queue_only = FALSE;
2942       queue_only_set = TRUE;
2943       }
2944
2945     /* -odf: foreground delivery (smail-compatible option); same effect as
2946        -odi: interactive (synchronous) delivery (sendmail-compatible option)
2947     */
2948
2949     else if (Ustrcmp(argrest, "df") == 0 || Ustrcmp(argrest, "di") == 0)
2950       {
2951       f.synchronous_delivery = TRUE;
2952       arg_queue_only = FALSE;
2953       queue_only_set = TRUE;
2954       }
2955
2956     /* -odq: queue only */
2957
2958     else if (Ustrcmp(argrest, "dq") == 0)
2959       {
2960       f.synchronous_delivery = FALSE;
2961       arg_queue_only = TRUE;
2962       queue_only_set = TRUE;
2963       }
2964
2965     /* -odqs: queue SMTP only - do local deliveries and remote routing,
2966     but no remote delivery */
2967
2968     else if (Ustrcmp(argrest, "dqs") == 0)
2969       {
2970       f.queue_smtp = TRUE;
2971       arg_queue_only = FALSE;
2972       queue_only_set = TRUE;
2973       }
2974
2975     /* -oex: Sendmail error flags. As these are also accepted without the
2976     leading -o prefix, for compatibility with vacation and other callers,
2977     they are handled with -e above. */
2978
2979     /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
2980        -oitrue: Another sendmail syntax for the same */
2981
2982     else if (Ustrcmp(argrest, "i") == 0 ||
2983              Ustrcmp(argrest, "itrue") == 0)
2984       f.dot_ends = FALSE;
2985
2986     /* -oM*: Set various characteristics for an incoming message; actually
2987     acted on for trusted callers only. */
2988
2989     else if (*argrest == 'M')
2990       {
2991       if (i+1 >= argc)
2992         exim_fail("exim: data expected after -o%s\n", argrest);
2993
2994       /* -oMa: Set sender host address */
2995
2996       if (Ustrcmp(argrest, "Ma") == 0) sender_host_address = argv[++i];
2997
2998       /* -oMaa: Set authenticator name */
2999
3000       else if (Ustrcmp(argrest, "Maa") == 0)
3001         sender_host_authenticated = argv[++i];
3002
3003       /* -oMas: setting authenticated sender */
3004
3005       else if (Ustrcmp(argrest, "Mas") == 0)
3006         authenticated_sender = string_copy_taint(argv[++i], TRUE);
3007
3008       /* -oMai: setting authenticated id */
3009
3010       else if (Ustrcmp(argrest, "Mai") == 0)
3011         authenticated_id = string_copy_taint(argv[++i], TRUE);
3012
3013       /* -oMi: Set incoming interface address */
3014
3015       else if (Ustrcmp(argrest, "Mi") == 0) interface_address = argv[++i];
3016
3017       /* -oMm: Message reference */
3018
3019       else if (Ustrcmp(argrest, "Mm") == 0)
3020         {
3021         if (!mac_ismsgid(argv[i+1]))
3022             exim_fail("-oMm must be a valid message ID\n");
3023         if (!f.trusted_config)
3024             exim_fail("-oMm must be called by a trusted user/config\n");
3025           message_reference = argv[++i];
3026         }
3027
3028       /* -oMr: Received protocol */
3029
3030       else if (Ustrcmp(argrest, "Mr") == 0)
3031
3032         if (received_protocol)
3033           exim_fail("received_protocol is set already\n");
3034         else
3035           received_protocol = argv[++i];
3036
3037       /* -oMs: Set sender host name */
3038
3039       else if (Ustrcmp(argrest, "Ms") == 0)
3040         sender_host_name = string_copy_taint(argv[++i], TRUE);
3041
3042       /* -oMt: Set sender ident */
3043
3044       else if (Ustrcmp(argrest, "Mt") == 0)
3045         {
3046         sender_ident_set = TRUE;
3047         sender_ident = argv[++i];
3048         }
3049
3050       /* Else a bad argument */
3051
3052       else
3053         {
3054         badarg = TRUE;
3055         break;
3056         }
3057       }
3058
3059     /* -om: Me-too flag for aliases. Exim always does this. Some programs
3060     seem to call this as -m (undocumented), so that is also accepted (see
3061     above). */
3062
3063     else if (Ustrcmp(argrest, "m") == 0) {}
3064
3065     /* -oo: An ancient flag for old-style addresses which still seems to
3066     crop up in some calls (see in SCO). */
3067
3068     else if (Ustrcmp(argrest, "o") == 0) {}
3069
3070     /* -oP <name>: set pid file path for daemon */
3071
3072     else if (Ustrcmp(argrest, "P") == 0)
3073       override_pid_file_path = argv[++i];
3074
3075     /* -or <n>: set timeout for non-SMTP acceptance
3076        -os <n>: set timeout for SMTP acceptance */
3077
3078     else if (*argrest == 'r' || *argrest == 's')
3079       {
3080       int *tp = (*argrest == 'r')?
3081         &arg_receive_timeout : &arg_smtp_receive_timeout;
3082       if (argrest[1] == 0)
3083         {
3084         if (i+1 < argc) *tp= readconf_readtime(argv[++i], 0, FALSE);
3085         }
3086       else *tp = readconf_readtime(argrest + 1, 0, FALSE);
3087       if (*tp < 0)
3088         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3089       }
3090
3091     /* -oX <list>: Override local_interfaces and/or default daemon ports */
3092
3093     else if (Ustrcmp(argrest, "X") == 0)
3094       override_local_interfaces = argv[++i];
3095
3096     /* Unknown -o argument */
3097
3098     else badarg = TRUE;
3099     break;
3100
3101
3102     /* -ps: force Perl startup; -pd force delayed Perl startup */
3103
3104     case 'p':
3105     #ifdef EXIM_PERL
3106     if (*argrest == 's' && argrest[1] == 0)
3107       {
3108       perl_start_option = 1;
3109       break;
3110       }
3111     if (*argrest == 'd' && argrest[1] == 0)
3112       {
3113       perl_start_option = -1;
3114       break;
3115       }
3116     #endif
3117
3118     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3119     which sets the host protocol and host name */
3120
3121     if (*argrest == 0)
3122       if (i+1 < argc)
3123         argrest = argv[++i];
3124       else
3125         { badarg = TRUE; break; }
3126
3127     if (*argrest != 0)
3128       {
3129       uschar *hn;
3130
3131       if (received_protocol)
3132         exim_fail("received_protocol is set already\n");
3133
3134       hn = Ustrchr(argrest, ':');
3135       if (hn == NULL)
3136         received_protocol = argrest;
3137       else
3138         {
3139         int old_pool = store_pool;
3140         store_pool = POOL_PERM;
3141         received_protocol = string_copyn(argrest, hn - argrest);
3142         store_pool = old_pool;
3143         sender_host_name = hn + 1;
3144         }
3145       }
3146     break;
3147
3148
3149     case 'q':
3150     receiving_message = FALSE;
3151     if (queue_interval >= 0)
3152       exim_fail("exim: -q specified more than once\n");
3153
3154     /* -qq...: Do queue runs in a 2-stage manner */
3155
3156     if (*argrest == 'q')
3157       {
3158       f.queue_2stage = TRUE;
3159       argrest++;
3160       }
3161
3162     /* -qi...: Do only first (initial) deliveries */
3163
3164     if (*argrest == 'i')
3165       {
3166       f.queue_run_first_delivery = TRUE;
3167       argrest++;
3168       }
3169
3170     /* -qf...: Run the queue, forcing deliveries
3171        -qff..: Ditto, forcing thawing as well */
3172
3173     if (*argrest == 'f')
3174       {
3175       f.queue_run_force = TRUE;
3176       if (*++argrest == 'f')
3177         {
3178         f.deliver_force_thaw = TRUE;
3179         argrest++;
3180         }
3181       }
3182
3183     /* -q[f][f]l...: Run the queue only on local deliveries */
3184
3185     if (*argrest == 'l')
3186       {
3187       f.queue_run_local = TRUE;
3188       argrest++;
3189       }
3190
3191     /* -q[f][f][l][G<name>]... Work on the named queue */
3192
3193     if (*argrest == 'G')
3194       {
3195       int i;
3196       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3197       queue_name = string_copyn(argrest, i);
3198       argrest += i;
3199       if (*argrest == '/') argrest++;
3200       }
3201
3202     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3203     only, optionally named, optionally starting from a given message id. */
3204
3205     if (!(list_queue || count_queue))
3206       if (*argrest == 0
3207          && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3208         {
3209         queue_interval = 0;
3210         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3211           start_queue_run_id = argv[++i];
3212         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3213           stop_queue_run_id = argv[++i];
3214         }
3215
3216     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3217     forced, optionally local only, optionally named. */
3218
3219       else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3220                                                   0, FALSE)) <= 0)
3221         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3222     break;
3223
3224
3225     case 'R':   /* Synonymous with -qR... */
3226     receiving_message = FALSE;
3227
3228     /* -Rf:   As -R (below) but force all deliveries,
3229        -Rff:  Ditto, but also thaw all frozen messages,
3230        -Rr:   String is regex
3231        -Rrf:  Regex and force
3232        -Rrff: Regex and force and thaw
3233
3234     in all cases provided there are no further characters in this
3235     argument. */
3236
3237     if (*argrest != 0)
3238       for (int i = 0; i < nelem(rsopts); i++)
3239         if (Ustrcmp(argrest, rsopts[i]) == 0)
3240           {
3241           if (i != 2) f.queue_run_force = TRUE;
3242           if (i >= 2) f.deliver_selectstring_regex = TRUE;
3243           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3244           argrest += Ustrlen(rsopts[i]);
3245           }
3246
3247     /* -R: Set string to match in addresses for forced queue run to
3248     pick out particular messages. */
3249
3250     if (*argrest)
3251       deliver_selectstring = argrest;
3252     else if (i+1 < argc)
3253       deliver_selectstring = argv[++i];
3254     else
3255       exim_fail("exim: string expected after -R\n");
3256     break;
3257
3258
3259     /* -r: an obsolete synonym for -f (see above) */
3260
3261
3262     /* -S: Like -R but works on sender. */
3263
3264     case 'S':   /* Synonymous with -qS... */
3265     receiving_message = FALSE;
3266
3267     /* -Sf:   As -S (below) but force all deliveries,
3268        -Sff:  Ditto, but also thaw all frozen messages,
3269        -Sr:   String is regex
3270        -Srf:  Regex and force
3271        -Srff: Regex and force and thaw
3272
3273     in all cases provided there are no further characters in this
3274     argument. */
3275
3276     if (*argrest)
3277       for (int i = 0; i < nelem(rsopts); i++)
3278         if (Ustrcmp(argrest, rsopts[i]) == 0)
3279           {
3280           if (i != 2) f.queue_run_force = TRUE;
3281           if (i >= 2) f.deliver_selectstring_sender_regex = TRUE;
3282           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3283           argrest += Ustrlen(rsopts[i]);
3284           }
3285
3286     /* -S: Set string to match in addresses for forced queue run to
3287     pick out particular messages. */
3288
3289     if (*argrest)
3290       deliver_selectstring_sender = argrest;
3291     else if (i+1 < argc)
3292       deliver_selectstring_sender = argv[++i];
3293     else
3294       exim_fail("exim: string expected after -S\n");
3295     break;
3296
3297     /* -Tqt is an option that is exclusively for use by the testing suite.
3298     It is not recognized in other circumstances. It allows for the setting up
3299     of explicit "queue times" so that various warning/retry things can be
3300     tested. Otherwise variability of clock ticks etc. cause problems. */
3301
3302     case 'T':
3303     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3304       fudged_queue_times = argv[++i];
3305     else badarg = TRUE;
3306     break;
3307
3308
3309     /* -t: Set flag to extract recipients from body of message. */
3310
3311     case 't':
3312     if (*argrest == 0) extract_recipients = TRUE;
3313
3314     /* -ti: Set flag to extract recipients from body of message, and also
3315     specify that dot does not end the message. */
3316
3317     else if (Ustrcmp(argrest, "i") == 0)
3318       {
3319       extract_recipients = TRUE;
3320       f.dot_ends = FALSE;
3321       }
3322
3323     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3324
3325     #ifndef DISABLE_TLS
3326     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3327     #endif
3328
3329     else badarg = TRUE;
3330     break;
3331
3332
3333     /* -U: This means "initial user submission" in sendmail, apparently. The
3334     doc claims that in future sendmail may refuse syntactically invalid
3335     messages instead of fixing them. For the moment, we just ignore it. */
3336
3337     case 'U':
3338     break;
3339
3340
3341     /* -v: verify things - this is a very low-level debugging */
3342
3343     case 'v':
3344     if (*argrest == 0)
3345       {
3346       debug_selector |= D_v;
3347       debug_file = stderr;
3348       }
3349     else badarg = TRUE;
3350     break;
3351
3352
3353     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3354
3355       The -x flag tells the sendmail command that mail from a local
3356       mail program has National Language Support (NLS) extended characters
3357       in the body of the mail item. The sendmail command can send mail with
3358       extended NLS characters across networks that normally corrupts these
3359       8-bit characters.
3360
3361     As Exim is 8-bit clean, it just ignores this flag. */
3362
3363     case 'x':
3364     if (*argrest != 0) badarg = TRUE;
3365     break;
3366
3367     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3368     logs to that file.  We swallow the parameter and otherwise ignore it. */
3369
3370     case 'X':
3371     if (*argrest == '\0')
3372       if (++i >= argc)
3373         exim_fail("exim: string expected after -X\n");
3374     break;
3375
3376     case 'z':
3377     if (*argrest == '\0')
3378       if (++i < argc)
3379         log_oneline = argv[i];
3380       else
3381         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3382     break;
3383
3384     /* All other initial characters are errors */
3385
3386     default:
3387     badarg = TRUE;
3388     break;
3389     }         /* End of high-level switch statement */
3390
3391   /* Failed to recognize the option, or syntax error */
3392
3393   if (badarg)
3394     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3395       "option %s\n", arg);
3396   }
3397
3398
3399 /* If -R or -S have been specified without -q, assume a single queue run. */
3400
3401 if (  (deliver_selectstring || deliver_selectstring_sender)
3402    && queue_interval < 0)
3403     queue_interval = 0;
3404
3405
3406 END_ARG:
3407 /* If usage_wanted is set we call the usage function - which never returns */
3408 if (usage_wanted) exim_usage(called_as);
3409
3410 /* Arguments have been processed. Check for incompatibilities. */
3411 if ((
3412     (smtp_input || extract_recipients || recipients_arg < argc) &&
3413     (f.daemon_listen || queue_interval >= 0 || bi_option ||
3414       test_retry_arg >= 0 || test_rewrite_arg >= 0 ||
3415       filter_test != FTEST_NONE || (msg_action_arg > 0 && !one_msg_action))
3416     ) ||
3417     (
3418     msg_action_arg > 0 &&
3419     (f.daemon_listen || queue_interval > 0 || list_options ||
3420       (checking && msg_action != MSG_LOAD) ||
3421       bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0)
3422     ) ||
3423     (
3424     (f.daemon_listen || queue_interval > 0) &&
3425     (sender_address != NULL || list_options || list_queue || checking ||
3426       bi_option)
3427     ) ||
3428     (
3429     f.daemon_listen && queue_interval == 0
3430     ) ||
3431     (
3432     f.inetd_wait_mode && queue_interval >= 0
3433     ) ||
3434     (
3435     list_options &&
3436     (checking || smtp_input || extract_recipients ||
3437       filter_test != FTEST_NONE || bi_option)
3438     ) ||
3439     (
3440     verify_address_mode &&
3441     (f.address_test_mode || smtp_input || extract_recipients ||
3442       filter_test != FTEST_NONE || bi_option)
3443     ) ||
3444     (
3445     f.address_test_mode && (smtp_input || extract_recipients ||
3446       filter_test != FTEST_NONE || bi_option)
3447     ) ||
3448     (
3449     smtp_input && (sender_address != NULL || filter_test != FTEST_NONE ||
3450       extract_recipients)
3451     ) ||
3452     (
3453     deliver_selectstring != NULL && queue_interval < 0
3454     ) ||
3455     (
3456     msg_action == MSG_LOAD &&
3457       (!expansion_test || expansion_test_message != NULL)
3458     )
3459    )
3460   exim_fail("exim: incompatible command-line options or arguments\n");
3461
3462 /* If debugging is set up, set the file and the file descriptor to pass on to
3463 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3464 to run in the foreground. */
3465
3466 if (debug_selector != 0)
3467   {
3468   debug_file = stderr;
3469   debug_fd = fileno(debug_file);
3470   f.background_daemon = FALSE;
3471   testharness_pause_ms(100);   /* lets caller finish */
3472   if (debug_selector != D_v)    /* -v only doesn't show this */
3473     {
3474     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3475       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3476       debug_selector);
3477     if (!version_printed)
3478       show_whats_supported(stderr);
3479     }
3480   }
3481
3482 /* When started with root privilege, ensure that the limits on the number of
3483 open files and the number of processes (where that is accessible) are
3484 sufficiently large, or are unset, in case Exim has been called from an
3485 environment where the limits are screwed down. Not all OS have the ability to
3486 change some of these limits. */
3487
3488 if (unprivileged)
3489   {
3490   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3491   }
3492 else
3493   {
3494   struct rlimit rlp;
3495
3496   #ifdef RLIMIT_NOFILE
3497   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3498     {
3499     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3500       strerror(errno));
3501     rlp.rlim_cur = rlp.rlim_max = 0;
3502     }
3503
3504   /* I originally chose 1000 as a nice big number that was unlikely to
3505   be exceeded. It turns out that some older OS have a fixed upper limit of
3506   256. */
3507
3508   if (rlp.rlim_cur < 1000)
3509     {
3510     rlp.rlim_cur = rlp.rlim_max = 1000;
3511     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3512       {
3513       rlp.rlim_cur = rlp.rlim_max = 256;
3514       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3515         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3516           strerror(errno));
3517       }
3518     }
3519   #endif
3520
3521   #ifdef RLIMIT_NPROC
3522   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3523     {
3524     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3525       strerror(errno));
3526     rlp.rlim_cur = rlp.rlim_max = 0;
3527     }
3528
3529   #ifdef RLIM_INFINITY
3530   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3531     {
3532     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3533   #else
3534   if (rlp.rlim_cur < 1000)
3535     {
3536     rlp.rlim_cur = rlp.rlim_max = 1000;
3537   #endif
3538     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3539       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3540         strerror(errno));
3541     }
3542   #endif
3543   }
3544
3545 /* Exim is normally entered as root (but some special configurations are
3546 possible that don't do this). However, it always spins off sub-processes that
3547 set their uid and gid as required for local delivery. We don't want to pass on
3548 any extra groups that root may belong to, so we want to get rid of them all at
3549 this point.
3550
3551 We need to obey setgroups() at this stage, before possibly giving up root
3552 privilege for a changed configuration file, but later on we might need to
3553 check on the additional groups for the admin user privilege - can't do that
3554 till after reading the config, which might specify the exim gid. Therefore,
3555 save the group list here first. */
3556
3557 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3558   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3559
3560 /* There is a fundamental difference in some BSD systems in the matter of
3561 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3562 known not to be different. On the "different" systems there is a single group
3563 list, and the first entry in it is the current group. On all other versions of
3564 Unix there is a supplementary group list, which is in *addition* to the current
3565 group. Consequently, to get rid of all extraneous groups on a "standard" system
3566 you pass over 0 groups to setgroups(), while on a "different" system you pass
3567 over a single group - the current group, which is always the first group in the
3568 list. Calling setgroups() with zero groups on a "different" system results in
3569 an error return. The following code should cope with both types of system.
3570
3571  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
3572  the "setgroups() with zero groups" - and changes the egid.
3573  Thanks to that we had to stash the original_egid above, for use below
3574  in the call to exim_setugid().
3575
3576 However, if this process isn't running as root, setgroups() can't be used
3577 since you have to be root to run it, even if throwing away groups. Not being
3578 root here happens only in some unusual configurations. We just ignore the
3579 error. */
3580
3581 if (setgroups(0, NULL) != 0 && setgroups(1, group_list) != 0 && !unprivileged)
3582   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
3583
3584 /* If the configuration file name has been altered by an argument on the
3585 command line (either a new file name or a macro definition) and the caller is
3586 not root, or if this is a filter testing run, remove any setuid privilege the
3587 program has and run as the underlying user.
3588
3589 The exim user is locked out of this, which severely restricts the use of -C
3590 for some purposes.
3591
3592 Otherwise, set the real ids to the effective values (should be root unless run
3593 from inetd, which it can either be root or the exim uid, if one is configured).
3594
3595 There is a private mechanism for bypassing some of this, in order to make it
3596 possible to test lots of configurations automatically, without having either to
3597 recompile each time, or to patch in an actual configuration file name and other
3598 values (such as the path name). If running in the test harness, pretend that
3599 configuration file changes and macro definitions haven't happened. */
3600
3601 if ((                                            /* EITHER */
3602     (!f.trusted_config ||                          /* Config changed, or */
3603      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
3604     real_uid != root_uid &&                      /* Not root, and */
3605     !f.running_in_test_harness                     /* Not fudged */
3606     ) ||                                         /*   OR   */
3607     expansion_test                               /* expansion testing */
3608     ||                                           /*   OR   */
3609     filter_test != FTEST_NONE)                   /* Filter testing */
3610   {
3611   setgroups(group_count, group_list);
3612   exim_setugid(real_uid, real_gid, FALSE,
3613     US"-C, -D, -be or -bf forces real uid");
3614   removed_privilege = TRUE;
3615
3616   /* In the normal case when Exim is called like this, stderr is available
3617   and should be used for any logging information because attempts to write
3618   to the log will usually fail. To arrange this, we unset really_exim. However,
3619   if no stderr is available there is no point - we might as well have a go
3620   at the log (if it fails, syslog will be written).
3621
3622   Note that if the invoker is Exim, the logs remain available. Messing with
3623   this causes unlogged successful deliveries.  */
3624
3625   if (log_stderr && real_uid != exim_uid)
3626     f.really_exim = FALSE;
3627   }
3628
3629 /* Privilege is to be retained for the moment. It may be dropped later,
3630 depending on the job that this Exim process has been asked to do. For now, set
3631 the real uid to the effective so that subsequent re-execs of Exim are done by a
3632 privileged user. */
3633
3634 else
3635   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
3636
3637 /* If testing a filter, open the file(s) now, before wasting time doing other
3638 setups and reading the message. */
3639
3640 if (filter_test & FTEST_SYSTEM)
3641   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
3642     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
3643       strerror(errno));
3644
3645 if (filter_test & FTEST_USER)
3646   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
3647     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
3648       strerror(errno));
3649
3650 /* Initialise lookup_list
3651 If debugging, already called above via version reporting.
3652 In either case, we initialise the list of available lookups while running
3653 as root.  All dynamically modules are loaded from a directory which is
3654 hard-coded into the binary and is code which, if not a module, would be
3655 part of Exim already.  Ability to modify the content of the directory
3656 is equivalent to the ability to modify a setuid binary!
3657
3658 This needs to happen before we read the main configuration. */
3659 init_lookup_list();
3660
3661 #ifdef SUPPORT_I18N
3662 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
3663 #endif
3664
3665 /* Read the main runtime configuration data; this gives up if there
3666 is a failure. It leaves the configuration file open so that the subsequent
3667 configuration data for delivery can be read if needed.
3668
3669 NOTE: immediately after opening the configuration file we change the working
3670 directory to "/"! Later we change to $spool_directory. We do it there, because
3671 during readconf_main() some expansion takes place already. */
3672
3673 /* Store the initial cwd before we change directories.  Can be NULL if the
3674 dir has already been unlinked. */
3675 initial_cwd = os_getcwd(NULL, 0);
3676
3677 /* checking:
3678     -be[m] expansion test        -
3679     -b[fF] filter test           new
3680     -bh[c] host test             -
3681     -bmalware malware_test_file  new
3682     -brt   retry test            new
3683     -brw   rewrite test          new
3684     -bt    address test          -
3685     -bv[s] address verify        -
3686    list_options:
3687     -bP <option> (except -bP config, which sets list_config)
3688
3689 If any of these options is set, we suppress warnings about configuration
3690 issues (currently about tls_advertise_hosts and keep_environment not being
3691 defined) */
3692
3693   {
3694 #ifdef MEASURE_TIMING
3695   struct timeval t0, diff;
3696   (void)gettimeofday(&t0, NULL);
3697 #endif
3698
3699   readconf_main(checking || list_options);
3700
3701 #ifdef MEASURE_TIMING
3702   report_time_since(&t0, US"readconf_main (delta)");
3703 #endif
3704   }
3705
3706
3707 /* Now in directory "/" */
3708
3709 if (cleanup_environment() == FALSE)
3710   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
3711
3712
3713 /* If an action on specific messages is requested, or if a daemon or queue
3714 runner is being started, we need to know if Exim was called by an admin user.
3715 This is the case if the real user is root or exim, or if the real group is
3716 exim, or if one of the supplementary groups is exim or a group listed in
3717 admin_groups. We don't fail all message actions immediately if not admin_user,
3718 since some actions can be performed by non-admin users. Instead, set admin_user
3719 for later interrogation. */
3720
3721 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
3722   f.admin_user = TRUE;
3723 else
3724   for (int i = 0; i < group_count && !f.admin_user; i++)
3725     if (group_list[i] == exim_gid)
3726       f.admin_user = TRUE;
3727     else if (admin_groups)
3728       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
3729         if (admin_groups[j] == group_list[i])
3730           f.admin_user = TRUE;
3731
3732 /* Another group of privileged users are the trusted users. These are root,
3733 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
3734 are permitted to specify sender_addresses with -f on the command line, and
3735 other message parameters as well. */
3736
3737 if (real_uid == root_uid || real_uid == exim_uid)
3738   f.trusted_caller = TRUE;
3739 else
3740   {
3741   if (trusted_users)
3742     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
3743       if (trusted_users[i] == real_uid)
3744         f.trusted_caller = TRUE;
3745
3746   if (trusted_groups)
3747     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
3748       if (trusted_groups[i] == real_gid)
3749         f.trusted_caller = TRUE;
3750       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
3751         if (trusted_groups[i] == group_list[j])
3752           f.trusted_caller = TRUE;
3753   }
3754
3755 /* At this point, we know if the user is privileged and some command-line
3756 options become possibly impermissible, depending upon the configuration file. */
3757
3758 if (checking && commandline_checks_require_admin && !f.admin_user)
3759   exim_fail("exim: those command-line flags are set to require admin\n");
3760
3761 /* Handle the decoding of logging options. */
3762
3763 decode_bits(log_selector, log_selector_size, log_notall,
3764   log_selector_string, log_options, log_options_count, US"log", 0);
3765
3766 DEBUG(D_any)
3767   {
3768   debug_printf("configuration file is %s\n", config_main_filename);
3769   debug_printf("log selectors =");
3770   for (int i = 0; i < log_selector_size; i++)
3771     debug_printf(" %08x", log_selector[i]);
3772   debug_printf("\n");
3773   }
3774
3775 /* If domain literals are not allowed, check the sender address that was
3776 supplied with -f. Ditto for a stripped trailing dot. */
3777
3778 if (sender_address)
3779   {
3780   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
3781     exim_fail("exim: bad -f address \"%s\": domain literals not "
3782       "allowed\n", sender_address);
3783   if (f_end_dot && !strip_trailing_dot)
3784     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
3785       "(trailing dot not allowed)\n", sender_address);
3786   }
3787
3788 /* See if an admin user overrode our logging. */
3789
3790 if (cmdline_syslog_name)
3791   if (f.admin_user)
3792     {
3793     syslog_processname = cmdline_syslog_name;
3794     log_file_path = string_copy(CUS"syslog");
3795     }
3796   else
3797     /* not a panic, non-privileged users should not be able to spam paniclog */
3798     exim_fail(
3799         "exim: you lack sufficient privilege to specify syslog process name\n");
3800
3801 /* Paranoia check of maximum lengths of certain strings. There is a check
3802 on the length of the log file path in log.c, which will come into effect
3803 if there are any calls to write the log earlier than this. However, if we
3804 get this far but the string is very long, it is better to stop now than to
3805 carry on and (e.g.) receive a message and then have to collapse. The call to
3806 log_write() from here will cause the ultimate panic collapse if the complete
3807 file name exceeds the buffer length. */
3808
3809 if (Ustrlen(log_file_path) > 200)
3810   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3811     "log_file_path is longer than 200 chars: aborting");
3812
3813 if (Ustrlen(pid_file_path) > 200)
3814   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3815     "pid_file_path is longer than 200 chars: aborting");
3816
3817 if (Ustrlen(spool_directory) > 200)
3818   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3819     "spool_directory is longer than 200 chars: aborting");
3820
3821 /* Length check on the process name given to syslog for its TAG field,
3822 which is only permitted to be 32 characters or less. See RFC 3164. */
3823
3824 if (Ustrlen(syslog_processname) > 32)
3825   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3826     "syslog_processname is longer than 32 chars: aborting");
3827
3828 if (log_oneline)
3829   if (f.admin_user)
3830     {
3831     log_write(0, LOG_MAIN, "%s", log_oneline);
3832     return EXIT_SUCCESS;
3833     }
3834   else
3835     return EXIT_FAILURE;
3836
3837 /* In some operating systems, the environment variable TMPDIR controls where
3838 temporary files are created; Exim doesn't use these (apart from when delivering
3839 to MBX mailboxes), but called libraries such as DBM libraries may require them.
3840 If TMPDIR is found in the environment, reset it to the value defined in the
3841 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
3842 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
3843 EXIM_TMPDIR by the build scripts.
3844 */
3845
3846 #ifdef EXIM_TMPDIR
3847   if (environ) for (uschar ** p = USS environ; *p; p++)
3848     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
3849       {
3850       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
3851       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
3852       *p = newp;
3853       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
3854       }
3855 #endif
3856
3857 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
3858 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
3859 we may need to get rid of a bogus timezone setting. This can arise when Exim is
3860 called by a user who has set the TZ variable. This then affects the timestamps
3861 in log files and in Received: headers, and any created Date: header lines. The
3862 required timezone is settable in the configuration file, so nothing can be done
3863 about this earlier - but hopefully nothing will normally be logged earlier than
3864 this. We have to make a new environment if TZ is wrong, but don't bother if
3865 timestamps_utc is set, because then all times are in UTC anyway. */
3866
3867 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
3868   f.timestamps_utc = TRUE;
3869 else
3870   {
3871   uschar *envtz = US getenv("TZ");
3872   if (envtz
3873       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
3874       : timezone_string != NULL
3875      )
3876     {
3877     uschar **p = USS environ;
3878     uschar **new;
3879     uschar **newp;
3880     int count = 0;
3881     if (environ) while (*p++) count++;
3882     if (!envtz) count++;
3883     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
3884     if (environ) for (p = USS environ; *p; p++)
3885       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
3886     if (timezone_string)
3887       {
3888       *newp = store_malloc(Ustrlen(timezone_string) + 4);
3889       sprintf(CS *newp++, "TZ=%s", timezone_string);
3890       }
3891     *newp = NULL;
3892     environ = CSS new;
3893     tzset();
3894     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
3895       tod_stamp(tod_log));
3896     }
3897   }
3898
3899 /* Handle the case when we have removed the setuid privilege because of -C or
3900 -D. This means that the caller of Exim was not root.
3901
3902 There is a problem if we were running as the Exim user. The sysadmin may
3903 expect this case to retain privilege because "the binary was called by the
3904 Exim user", but it hasn't, because either the -D option set macros, or the
3905 -C option set a non-trusted configuration file. There are two possibilities:
3906
3907   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
3908       to do message deliveries. Thus, the fact that it is running as a
3909       non-privileged user is plausible, and might be wanted in some special
3910       configurations. However, really_exim will have been set false when
3911       privilege was dropped, to stop Exim trying to write to its normal log
3912       files. Therefore, re-enable normal log processing, assuming the sysadmin
3913       has set up the log directory correctly.
3914
3915   (2) If deliver_drop_privilege is not set, the configuration won't work as
3916       apparently intended, and so we log a panic message. In order to retain
3917       root for -C or -D, the caller must either be root or be invoking a
3918       trusted configuration file (when deliver_drop_privilege is false). */
3919
3920 if (  removed_privilege
3921    && (!f.trusted_config || opt_D_used)
3922    && real_uid == exim_uid)
3923   if (deliver_drop_privilege)
3924     f.really_exim = TRUE; /* let logging work normally */
3925   else
3926     log_write(0, LOG_MAIN|LOG_PANIC,
3927       "exim user lost privilege for using %s option",
3928       f.trusted_config? "-D" : "-C");
3929
3930 /* Start up Perl interpreter if Perl support is configured and there is a
3931 perl_startup option, and the configuration or the command line specifies
3932 initializing starting. Note that the global variables are actually called
3933 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
3934
3935 #ifdef EXIM_PERL
3936 if (perl_start_option != 0)
3937   opt_perl_at_start = (perl_start_option > 0);
3938 if (opt_perl_at_start && opt_perl_startup != NULL)
3939   {
3940   uschar *errstr;
3941   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
3942   if ((errstr = init_perl(opt_perl_startup)))
3943     exim_fail("exim: error in perl_startup code: %s\n", errstr);
3944   opt_perl_started = TRUE;
3945   }
3946 #endif /* EXIM_PERL */
3947
3948 /* Log the arguments of the call if the configuration file said so. This is
3949 a debugging feature for finding out what arguments certain MUAs actually use.
3950 Don't attempt it if logging is disabled, or if listing variables or if
3951 verifying/testing addresses or expansions. */
3952
3953 if (  (debug_selector & D_any  ||  LOGGING(arguments))
3954    && f.really_exim && !list_options && !checking)
3955   {
3956   uschar *p = big_buffer;
3957   Ustrcpy(p, US"cwd= (failed)");
3958
3959   if (!initial_cwd)
3960     p += 13;
3961   else
3962     {
3963     Ustrncpy(p + 4, initial_cwd, big_buffer_size-5);
3964     p += 4 + Ustrlen(initial_cwd);
3965     /* in case p is near the end and we don't provide enough space for
3966      * string_format to be willing to write. */
3967     *p = '\0';
3968     }
3969
3970   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
3971   while (*p) p++;
3972   for (int i = 0; i < argc; i++)
3973     {
3974     int len = Ustrlen(argv[i]);
3975     const uschar *printing;
3976     uschar *quote;
3977     if (p + len + 8 >= big_buffer + big_buffer_size)
3978       {
3979       Ustrcpy(p, US" ...");
3980       log_write(0, LOG_MAIN, "%s", big_buffer);
3981       Ustrcpy(big_buffer, US"...");
3982       p = big_buffer + 3;
3983       }
3984     printing = string_printing(argv[i]);
3985     if (printing[0] == 0) quote = US"\""; else
3986       {
3987       const uschar *pp = printing;
3988       quote = US"";
3989       while (*pp != 0) if (isspace(*pp++)) { quote = US"\""; break; }
3990       }
3991     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
3992       (p - big_buffer) - 4), printing, quote);
3993     }
3994
3995   if (LOGGING(arguments))
3996     log_write(0, LOG_MAIN, "%s", big_buffer);
3997   else
3998     debug_printf("%s\n", big_buffer);
3999   }
4000
4001 /* Set the working directory to be the top-level spool directory. We don't rely
4002 on this in the code, which always uses fully qualified names, but it's useful
4003 for core dumps etc. Don't complain if it fails - the spool directory might not
4004 be generally accessible and calls with the -C option (and others) have lost
4005 privilege by now. Before the chdir, we try to ensure that the directory exists.
4006 */
4007
4008 if (Uchdir(spool_directory) != 0)
4009   {
4010   int dummy;
4011   (void)directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4012   dummy = /* quieten compiler */ Uchdir(spool_directory);
4013   dummy = dummy;        /* yet more compiler quietening, sigh */
4014   }
4015
4016 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4017 alias file. Exim doesn't have such a concept, but this call is screwed into
4018 Sun's YP makefiles. Handle this by calling a configured script, as the real
4019 user who called Exim. The -oA option can be used to pass an argument to the
4020 script. */
4021
4022 if (bi_option)
4023   {
4024   (void)fclose(config_file);
4025   if (bi_command != NULL)
4026     {
4027     int i = 0;
4028     uschar *argv[3];
4029     argv[i++] = bi_command;
4030     if (alias_arg != NULL) argv[i++] = alias_arg;
4031     argv[i++] = NULL;
4032
4033     setgroups(group_count, group_list);
4034     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4035
4036     DEBUG(D_exec) debug_printf("exec %.256s %.256s\n", argv[0],
4037       (argv[1] == NULL)? US"" : argv[1]);
4038
4039     execv(CS argv[0], (char *const *)argv);
4040     exim_fail("exim: exec failed: %s\n", strerror(errno));
4041     }
4042   else
4043     {
4044     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4045     exit(EXIT_SUCCESS);
4046     }
4047   }
4048
4049 /* We moved the admin/trusted check to be immediately after reading the
4050 configuration file.  We leave these prints here to ensure that syslog setup,
4051 logfile setup, and so on has already happened. */
4052
4053 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4054 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4055
4056 /* Only an admin user may start the daemon or force a queue run in the default
4057 configuration, but the queue run restriction can be relaxed. Only an admin
4058 user may request that a message be returned to its sender forthwith. Only an
4059 admin user may specify a debug level greater than D_v (because it might show
4060 passwords, etc. in lookup queries). Only an admin user may request a queue
4061 count. Only an admin user can use the test interface to scan for email
4062 (because Exim will be in the spool dir and able to look at mails). */
4063
4064 if (!f.admin_user)
4065   {
4066   BOOL debugset = (debug_selector & ~D_v) != 0;
4067   if (deliver_give_up || f.daemon_listen || malware_test_file ||
4068      (count_queue && queue_list_requires_admin) ||
4069      (list_queue && queue_list_requires_admin) ||
4070      (queue_interval >= 0 && prod_requires_admin) ||
4071      (debugset && !f.running_in_test_harness))
4072     exim_fail("exim:%s permission denied\n", debugset? " debugging" : "");
4073   }
4074
4075 /* If the real user is not root or the exim uid, the argument for passing
4076 in an open TCP/IP connection for another message is not permitted, nor is
4077 running with the -N option for any delivery action, unless this call to exim is
4078 one that supplied an input message, or we are using a patched exim for
4079 regression testing. */
4080
4081 if (real_uid != root_uid && real_uid != exim_uid &&
4082      (continue_hostname != NULL ||
4083        (f.dont_deliver &&
4084          (queue_interval >= 0 || f.daemon_listen || msg_action_arg > 0)
4085        )) && !f.running_in_test_harness)
4086   exim_fail("exim: Permission denied\n");
4087
4088 /* If the caller is not trusted, certain arguments are ignored when running for
4089 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4090 Note that authority for performing certain actions on messages is tested in the
4091 queue_action() function. */
4092
4093 if (!f.trusted_caller && !checking)
4094   {
4095   sender_host_name = sender_host_address = interface_address =
4096     sender_ident = received_protocol = NULL;
4097   sender_host_port = interface_port = 0;
4098   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4099   }
4100
4101 /* If a sender host address is set, extract the optional port number off the
4102 end of it and check its syntax. Do the same thing for the interface address.
4103 Exim exits if the syntax is bad. */
4104
4105 else
4106   {
4107   if (sender_host_address != NULL)
4108     sender_host_port = check_port(sender_host_address);
4109   if (interface_address != NULL)
4110     interface_port = check_port(interface_address);
4111   }
4112
4113 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4114 if (flag_G)
4115   {
4116   if (f.trusted_caller)
4117     {
4118     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4119     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4120     }
4121   else
4122     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4123   }
4124
4125 /* If an SMTP message is being received check to see if the standard input is a
4126 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4127 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4128 barf. */
4129
4130 if (smtp_input)
4131   {
4132   union sockaddr_46 inetd_sock;
4133   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4134   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4135     {
4136     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4137     if (family == AF_INET || family == AF_INET6)
4138       {
4139       union sockaddr_46 interface_sock;
4140       size = sizeof(interface_sock);
4141
4142       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4143         interface_address = host_ntoa(-1, &interface_sock, NULL,
4144           &interface_port);
4145
4146       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4147
4148       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4149         {
4150         f.is_inetd = TRUE;
4151         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4152           NULL, &sender_host_port);
4153         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4154           "inetd is not supported when mua_wrapper is set");
4155         }
4156       else
4157         exim_fail(
4158           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4159       }
4160     }
4161   }
4162
4163 /* If the load average is going to be needed while receiving a message, get it
4164 now for those OS that require the first call to os_getloadavg() to be done as
4165 root. There will be further calls later for each message received. */
4166
4167 #ifdef LOAD_AVG_NEEDS_ROOT
4168 if (receiving_message &&
4169       (queue_only_load >= 0 ||
4170         (f.is_inetd && smtp_load_reserve >= 0)
4171       ))
4172   {
4173   load_average = OS_GETLOADAVG();
4174   }
4175 #endif
4176
4177 /* The queue_only configuration option can be overridden by -odx on the command
4178 line, except that if queue_only_override is false, queue_only cannot be unset
4179 from the command line. */
4180
4181 if (queue_only_set && (queue_only_override || arg_queue_only))
4182   queue_only = arg_queue_only;
4183
4184 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4185 -or and -os. */
4186
4187 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4188 if (arg_smtp_receive_timeout >= 0)
4189   smtp_receive_timeout = arg_smtp_receive_timeout;
4190
4191 /* If Exim was started with root privilege, unless we have already removed the
4192 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4193 except when starting the daemon or doing some kind of delivery or address
4194 testing (-bt). These are the only cases when root need to be retained. We run
4195 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4196 retained only for starting the daemon. We always do the initgroups() in this
4197 situation (controlled by the TRUE below), in order to be as close as possible
4198 to the state Exim usually runs in. */
4199
4200 if (!unprivileged &&                      /* originally had root AND */
4201     !removed_privilege &&                 /* still got root AND      */
4202     !f.daemon_listen &&                     /* not starting the daemon */
4203     queue_interval <= 0 &&                /* (either kind of daemon) */
4204       (                                   /*    AND EITHER           */
4205       deliver_drop_privilege ||           /* requested unprivileged  */
4206         (                                 /*       OR                */
4207         queue_interval < 0 &&             /* not running the queue   */
4208         (msg_action_arg < 0 ||            /*       and               */
4209           msg_action != MSG_DELIVER) &&   /* not delivering and      */
4210         (!checking || !f.address_test_mode) /* not address checking    */
4211    )  ) )
4212   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4213
4214 /* When we are retaining a privileged uid, we still change to the exim gid. */
4215
4216 else
4217   {
4218   int rv;
4219   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4220   rv = setgid(exim_gid);
4221   /* Impact of failure is that some stuff might end up with an incorrect group.
4222   We track this for failures from root, since any attempt to change privilege
4223   by root should succeed and failures should be examined.  For non-root,
4224   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4225   no need to complain then. */
4226   if (rv == -1)
4227     if (!(unprivileged || removed_privilege))
4228       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4229     else
4230       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4231           (long int)exim_gid, strerror(errno));
4232   }
4233
4234 /* Handle a request to scan a file for malware */
4235 if (malware_test_file)
4236   {
4237 #ifdef WITH_CONTENT_SCAN
4238   int result;
4239   set_process_info("scanning file for malware");
4240   result = malware_in_file(malware_test_file);
4241   if (result == FAIL)
4242     {
4243     printf("No malware found.\n");
4244     exit(EXIT_SUCCESS);
4245     }
4246   if (result != OK)
4247     {
4248     printf("Malware lookup returned non-okay/fail: %d\n", result);
4249     exit(EXIT_FAILURE);
4250     }
4251   if (malware_name)
4252     printf("Malware found: %s\n", malware_name);
4253   else
4254     printf("Malware scan detected malware of unknown name.\n");
4255 #else
4256   printf("Malware scanning not enabled at compile time.\n");
4257 #endif
4258   exit(EXIT_FAILURE);
4259   }
4260
4261 /* Handle a request to list the delivery queue */
4262
4263 if (list_queue)
4264   {
4265   set_process_info("listing the queue");
4266   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4267   exit(EXIT_SUCCESS);
4268   }
4269
4270 /* Handle a request to count the delivery queue */
4271
4272 if (count_queue)
4273   {
4274   set_process_info("counting the queue");
4275   queue_count();
4276   exit(EXIT_SUCCESS);
4277   }
4278
4279 /* Handle actions on specific messages, except for the force delivery and
4280 message load actions, which are done below. Some actions take a whole list of
4281 message ids, which are known to continue up to the end of the arguments. Others
4282 take a single message id and then operate on the recipients list. */
4283
4284 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4285   {
4286   int yield = EXIT_SUCCESS;
4287   set_process_info("acting on specified messages");
4288
4289   /* ACL definitions may be needed when removing a message (-Mrm) because
4290   event_action gets expanded */
4291
4292   if (msg_action == MSG_REMOVE)
4293     readconf_rest();
4294
4295   if (!one_msg_action)
4296     {
4297     for (i = msg_action_arg; i < argc; i++)
4298       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4299         yield = EXIT_FAILURE;
4300     }
4301
4302   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4303     recipients_arg)) yield = EXIT_FAILURE;
4304   exit(yield);
4305   }
4306
4307 /* We used to set up here to skip reading the ACL section, on
4308  (msg_action_arg > 0 || (queue_interval == 0 && !f.daemon_listen)
4309 Now, since the intro of the ${acl } expansion, ACL definitions may be
4310 needed in transports so we lost the optimisation. */
4311
4312   {
4313 #ifdef MEASURE_TIMING
4314   struct timeval t0, diff;
4315   (void)gettimeofday(&t0, NULL);
4316 #endif
4317
4318   readconf_rest();
4319
4320 #ifdef MEASURE_TIMING
4321   report_time_since(&t0, US"readconf_rest (delta)");
4322 #endif
4323   }
4324
4325 /* Handle the -brt option. This is for checking out retry configurations.
4326 The next three arguments are a domain name or a complete address, and
4327 optionally two error numbers. All it does is to call the function that
4328 scans the retry configuration data. */
4329
4330 if (test_retry_arg >= 0)
4331   {
4332   retry_config *yield;
4333   int basic_errno = 0;
4334   int more_errno = 0;
4335   uschar *s1, *s2;
4336
4337   if (test_retry_arg >= argc)
4338     {
4339     printf("-brt needs a domain or address argument\n");
4340     exim_exit(EXIT_FAILURE, US"main");
4341     }
4342   s1 = argv[test_retry_arg++];
4343   s2 = NULL;
4344
4345   /* If the first argument contains no @ and no . it might be a local user
4346   or it might be a single-component name. Treat as a domain. */
4347
4348   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4349     {
4350     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4351       "being \ntreated as a one-component domain, not as a local part.\n\n",
4352       s1);
4353     }
4354
4355   /* There may be an optional second domain arg. */
4356
4357   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4358     s2 = argv[test_retry_arg++];
4359
4360   /* The final arg is an error name */
4361
4362   if (test_retry_arg < argc)
4363     {
4364     uschar *ss = argv[test_retry_arg];
4365     uschar *error =
4366       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4367     if (error != NULL)
4368       {
4369       printf("%s\n", CS error);
4370       return EXIT_FAILURE;
4371       }
4372
4373     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4374     code > 100 as an error is for matching codes to the decade. Turn them into
4375     a real error code, off the decade. */
4376
4377     if (basic_errno == ERRNO_MAIL4XX ||
4378         basic_errno == ERRNO_RCPT4XX ||
4379         basic_errno == ERRNO_DATA4XX)
4380       {
4381       int code = (more_errno >> 8) & 255;
4382       if (code == 255)
4383         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4384       else if (code > 100)
4385         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4386       }
4387     }
4388
4389   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4390     printf("No retry information found\n");
4391   else
4392     {
4393     more_errno = yield->more_errno;
4394     printf("Retry rule: %s  ", yield->pattern);
4395
4396     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4397       {
4398       printf("quota%s%s  ",
4399         (more_errno > 0)? "_" : "",
4400         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4401       }
4402     else if (yield->basic_errno == ECONNREFUSED)
4403       {
4404       printf("refused%s%s  ",
4405         (more_errno > 0)? "_" : "",
4406         (more_errno == 'M')? "MX" :
4407         (more_errno == 'A')? "A" : "");
4408       }
4409     else if (yield->basic_errno == ETIMEDOUT)
4410       {
4411       printf("timeout");
4412       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4413       more_errno &= 255;
4414       if (more_errno != 0) printf("_%s",
4415         (more_errno == 'M')? "MX" : "A");
4416       printf("  ");
4417       }
4418     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4419       printf("auth_failed  ");
4420     else printf("*  ");
4421
4422     for (retry_rule * r = yield->rules; r; r = r->next)
4423       {
4424       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4425       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4426       if (r->rule == 'G')
4427         {
4428         int x = r->p2;
4429         int f = x % 1000;
4430         int d = 100;
4431         printf(",%d.", x/1000);
4432         do
4433           {
4434           printf("%d", f/d);
4435           f %= d;
4436           d /= 10;
4437           }
4438         while (f != 0);
4439         }
4440       printf("; ");
4441       }
4442
4443     printf("\n");
4444     }
4445   exim_exit(EXIT_SUCCESS, US"main");
4446   }
4447
4448 /* Handle a request to list one or more configuration options */
4449 /* If -n was set, we suppress some information */
4450
4451 if (list_options)
4452   {
4453   BOOL fail = FALSE;
4454   set_process_info("listing variables");
4455   if (recipients_arg >= argc)
4456     fail = !readconf_print(US"all", NULL, flag_n);
4457   else for (i = recipients_arg; i < argc; i++)
4458     {
4459     if (i < argc - 1 &&
4460         (Ustrcmp(argv[i], "router") == 0 ||
4461          Ustrcmp(argv[i], "transport") == 0 ||
4462          Ustrcmp(argv[i], "authenticator") == 0 ||
4463          Ustrcmp(argv[i], "macro") == 0 ||
4464          Ustrcmp(argv[i], "environment") == 0))
4465       {
4466       fail |= !readconf_print(argv[i+1], argv[i], flag_n);
4467       i++;
4468       }
4469     else
4470       fail = !readconf_print(argv[i], NULL, flag_n);
4471     }
4472   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS, US"main");
4473   }
4474
4475 if (list_config)
4476   {
4477   set_process_info("listing config");
4478   exim_exit(readconf_print(US"config", NULL, flag_n)
4479                 ? EXIT_SUCCESS : EXIT_FAILURE, US"main");
4480   }
4481
4482
4483 /* Initialise subsystems as required. */
4484
4485 tcp_init();
4486
4487 /* Handle a request to deliver one or more messages that are already on the
4488 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4489 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4490
4491 Delivery of specific messages is typically used for a small number when
4492 prodding by hand (when the option forced_delivery will be set) or when
4493 re-execing to regain root privilege. Each message delivery must happen in a
4494 separate process, so we fork a process for each one, and run them sequentially
4495 so that debugging output doesn't get intertwined, and to avoid spawning too
4496 many processes if a long list is given. However, don't fork for the last one;
4497 this saves a process in the common case when Exim is called to deliver just one
4498 message. */
4499
4500 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4501   {
4502   if (prod_requires_admin && !f.admin_user)
4503     {
4504     fprintf(stderr, "exim: Permission denied\n");
4505     exim_exit(EXIT_FAILURE, US"main");
4506     }
4507   set_process_info("delivering specified messages");
4508   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4509   for (i = msg_action_arg; i < argc; i++)
4510     {
4511     int status;
4512     pid_t pid;
4513     if (i == argc - 1)
4514       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4515     else if ((pid = fork()) == 0)
4516       {
4517       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4518       exim_underbar_exit(EXIT_SUCCESS);
4519       }
4520     else if (pid < 0)
4521       {
4522       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4523         strerror(errno));
4524       exim_exit(EXIT_FAILURE, US"main");
4525       }
4526     else wait(&status);
4527     }
4528   exim_exit(EXIT_SUCCESS, US"main");
4529   }
4530
4531
4532 /* If only a single queue run is requested, without SMTP listening, we can just
4533 turn into a queue runner, with an optional starting message id. */
4534
4535 if (queue_interval == 0 && !f.daemon_listen)
4536   {
4537   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4538     (start_queue_run_id == NULL)? US"" : US" starting at ",
4539     (start_queue_run_id == NULL)? US"" : start_queue_run_id,
4540     (stop_queue_run_id == NULL)?  US"" : US" stopping at ",
4541     (stop_queue_run_id == NULL)?  US"" : stop_queue_run_id);
4542   if (*queue_name)
4543     set_process_info("running the '%s' queue (single queue run)", queue_name);
4544   else
4545     set_process_info("running the queue (single queue run)");
4546   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4547   exim_exit(EXIT_SUCCESS, US"main");
4548   }
4549
4550
4551 /* Find the login name of the real user running this process. This is always
4552 needed when receiving a message, because it is written into the spool file. It
4553 may also be used to construct a from: or a sender: header, and in this case we
4554 need the user's full name as well, so save a copy of it, checked for RFC822
4555 syntax and munged if necessary, if it hasn't previously been set by the -F
4556 argument. We may try to get the passwd entry more than once, in case NIS or
4557 other delays are in evidence. Save the home directory for use in filter testing
4558 (only). */
4559
4560 for (i = 0;;)
4561   {
4562   if ((pw = getpwuid(real_uid)) != NULL)
4563     {
4564     originator_login = string_copy(US pw->pw_name);
4565     originator_home = string_copy(US pw->pw_dir);
4566
4567     /* If user name has not been set by -F, set it from the passwd entry
4568     unless -f has been used to set the sender address by a trusted user. */
4569
4570     if (!originator_name)
4571       {
4572       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
4573         {
4574         uschar *name = US pw->pw_gecos;
4575         uschar *amp = Ustrchr(name, '&');
4576         uschar buffer[256];
4577
4578         /* Most Unix specify that a '&' character in the gecos field is
4579         replaced by a copy of the login name, and some even specify that
4580         the first character should be upper cased, so that's what we do. */
4581
4582         if (amp)
4583           {
4584           int loffset;
4585           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
4586             (int)(amp - name), name, &loffset, originator_login, amp + 1);
4587           buffer[loffset] = toupper(buffer[loffset]);
4588           name = buffer;
4589           }
4590
4591         /* If a pattern for matching the gecos field was supplied, apply
4592         it and then expand the name string. */
4593
4594         if (gecos_pattern && gecos_name)
4595           {
4596           const pcre *re;
4597           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
4598
4599           if (regex_match_and_setup(re, name, 0, -1))
4600             {
4601             uschar *new_name = expand_string(gecos_name);
4602             expand_nmax = -1;
4603             if (new_name)
4604               {
4605               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
4606                 "gecos field \"%s\"\n", new_name, name);
4607               name = new_name;
4608               }
4609             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
4610               "\"%s\": %s\n", gecos_name, expand_string_message);
4611             }
4612           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
4613             "gecos field \"%s\"\n", gecos_pattern, name);
4614           store_free((void *)re);
4615           }
4616         originator_name = string_copy(name);
4617         }
4618
4619       /* A trusted caller has used -f but not -F */
4620
4621       else originator_name = US"";
4622       }
4623
4624     /* Break the retry loop */
4625
4626     break;
4627     }
4628
4629   if (++i > finduser_retries) break;
4630   sleep(1);
4631   }
4632
4633 /* If we cannot get a user login, log the incident and give up, unless the
4634 configuration specifies something to use. When running in the test harness,
4635 any setting of unknown_login overrides the actual name. */
4636
4637 if (originator_login == NULL || f.running_in_test_harness)
4638   {
4639   if (unknown_login != NULL)
4640     {
4641     originator_login = expand_string(unknown_login);
4642     if (originator_name == NULL && unknown_username != NULL)
4643       originator_name = expand_string(unknown_username);
4644     if (originator_name == NULL) originator_name = US"";
4645     }
4646   if (originator_login == NULL)
4647     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
4648       (int)real_uid);
4649   }
4650
4651 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
4652 RFC822 address.*/
4653
4654 originator_name = string_copy(parse_fix_phrase(originator_name,
4655   Ustrlen(originator_name), big_buffer, big_buffer_size));
4656
4657 /* If a message is created by this call of Exim, the uid/gid of its originator
4658 are those of the caller. These values are overridden if an existing message is
4659 read in from the spool. */
4660
4661 originator_uid = real_uid;
4662 originator_gid = real_gid;
4663
4664 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
4665   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
4666
4667 /* Run in daemon and/or queue-running mode. The function daemon_go() never
4668 returns. We leave this till here so that the originator_ fields are available
4669 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
4670 mode. */
4671
4672 if (f.daemon_listen || f.inetd_wait_mode || queue_interval > 0)
4673   {
4674   if (mua_wrapper)
4675     {
4676     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
4677     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
4678       "mua_wrapper is set");
4679     }
4680
4681 # ifndef DISABLE_TLS
4682   /* This also checks that the library linkage is working and we can call
4683   routines in it, so call even if tls_require_ciphers is unset */
4684     {
4685 # ifdef MEASURE_TIMING
4686     struct timeval t0, diff;
4687     (void)gettimeofday(&t0, NULL);
4688 # endif
4689     if (!tls_dropprivs_validate_require_cipher(FALSE))
4690       exit(1);
4691 # ifdef MEASURE_TIMING
4692     report_time_since(&t0, US"validate_ciphers (delta)");
4693 # endif
4694     }
4695 #endif
4696
4697   daemon_go();
4698   }
4699
4700 /* If the sender ident has not been set (by a trusted caller) set it to
4701 the caller. This will get overwritten below for an inetd call. If a trusted
4702 caller has set it empty, unset it. */
4703
4704 if (!sender_ident) sender_ident = originator_login;
4705 else if (!*sender_ident) sender_ident = NULL;
4706
4707 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
4708 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
4709 originator_* variables set. */
4710
4711 if (test_rewrite_arg >= 0)
4712   {
4713   f.really_exim = FALSE;
4714   if (test_rewrite_arg >= argc)
4715     {
4716     printf("-brw needs an address argument\n");
4717     exim_exit(EXIT_FAILURE, US"main");
4718     }
4719   rewrite_test(argv[test_rewrite_arg]);
4720   exim_exit(EXIT_SUCCESS, US"main");
4721   }
4722
4723 /* A locally-supplied message is considered to be coming from a local user
4724 unless a trusted caller supplies a sender address with -f, or is passing in the
4725 message via SMTP (inetd invocation or otherwise). */
4726
4727 if (  !sender_address && !smtp_input
4728    || !f.trusted_caller && filter_test == FTEST_NONE)
4729   {
4730   f.sender_local = TRUE;
4731
4732   /* A trusted caller can supply authenticated_sender and authenticated_id
4733   via -oMas and -oMai and if so, they will already be set. Otherwise, force
4734   defaults except when host checking. */
4735
4736   if (!authenticated_sender && !host_checking)
4737     authenticated_sender = string_sprintf("%s@%s", originator_login,
4738       qualify_domain_sender);
4739   if (!authenticated_id && !host_checking)
4740     authenticated_id = originator_login;
4741   }
4742
4743 /* Trusted callers are always permitted to specify the sender address.
4744 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
4745 is specified is the empty address. However, if a trusted caller does not
4746 specify a sender address for SMTP input, we leave sender_address unset. This
4747 causes the MAIL commands to be honoured. */
4748
4749 if (  !smtp_input && !sender_address
4750    || !receive_check_set_sender(sender_address))
4751   {
4752   /* Either the caller is not permitted to set a general sender, or this is
4753   non-SMTP input and the trusted caller has not set a sender. If there is no
4754   sender, or if a sender other than <> is set, override with the originator's
4755   login (which will get qualified below), except when checking things. */
4756
4757   if (sender_address == NULL             /* No sender_address set */
4758        ||                                /*         OR            */
4759        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
4760        !checking))                       /* Not running tests, including filter tests */
4761     {
4762     sender_address = originator_login;
4763     f.sender_address_forced = FALSE;
4764     sender_address_domain = 0;
4765     }
4766   }
4767
4768 /* Remember whether an untrusted caller set the sender address */
4769
4770 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
4771
4772 /* Ensure that the sender address is fully qualified unless it is the empty
4773 address, which indicates an error message, or doesn't exist (root caller, smtp
4774 interface, no -f argument). */
4775
4776 if (sender_address && *sender_address && sender_address_domain == 0)
4777   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
4778     qualify_domain_sender);
4779
4780 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
4781
4782 /* Handle a request to verify a list of addresses, or test them for delivery.
4783 This must follow the setting of the sender address, since routers can be
4784 predicated upon the sender. If no arguments are given, read addresses from
4785 stdin. Set debug_level to at least D_v to get full output for address testing.
4786 */
4787
4788 if (verify_address_mode || f.address_test_mode)
4789   {
4790   int exit_value = 0;
4791   int flags = vopt_qualify;
4792
4793   if (verify_address_mode)
4794     {
4795     if (!verify_as_sender) flags |= vopt_is_recipient;
4796     DEBUG(D_verify) debug_print_ids(US"Verifying:");
4797     }
4798
4799   else
4800     {
4801     flags |= vopt_is_recipient;
4802     debug_selector |= D_v;
4803     debug_file = stderr;
4804     debug_fd = fileno(debug_file);
4805     DEBUG(D_verify) debug_print_ids(US"Address testing:");
4806     }
4807
4808   if (recipients_arg < argc)
4809     {
4810     while (recipients_arg < argc)
4811       {
4812       uschar *s = argv[recipients_arg++];
4813       while (*s != 0)
4814         {
4815         BOOL finished = FALSE;
4816         uschar *ss = parse_find_address_end(s, FALSE);
4817         if (*ss == ',') *ss = 0; else finished = TRUE;
4818         test_address(s, flags, &exit_value);
4819         s = ss;
4820         if (!finished)
4821           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
4822         }
4823       }
4824     }
4825
4826   else for (;;)
4827     {
4828     uschar *s = get_stdinput(NULL, NULL);
4829     if (s == NULL) break;
4830     test_address(s, flags, &exit_value);
4831     }
4832
4833   route_tidyup();
4834   exim_exit(exit_value, US"main");
4835   }
4836
4837 /* Handle expansion checking. Either expand items on the command line, or read
4838 from stdin if there aren't any. If -Mset was specified, load the message so
4839 that its variables can be used, but restrict this facility to admin users.
4840 Otherwise, if -bem was used, read a message from stdin. */
4841
4842 if (expansion_test)
4843   {
4844   dns_init(FALSE, FALSE, FALSE);
4845   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
4846     {
4847     uschar spoolname[256];  /* Not big_buffer; used in spool_read_header() */
4848     if (!f.admin_user)
4849       exim_fail("exim: permission denied\n");
4850     message_id = argv[msg_action_arg];
4851     (void)string_format(spoolname, sizeof(spoolname), "%s-H", message_id);
4852     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
4853       printf ("Failed to load message datafile %s\n", message_id);
4854     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
4855       printf ("Failed to load message %s\n", message_id);
4856     }
4857
4858   /* Read a test message from a file. We fudge it up to be on stdin, saving
4859   stdin itself for later reading of expansion strings. */
4860
4861   else if (expansion_test_message)
4862     {
4863     int save_stdin = dup(0);
4864     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
4865     if (fd < 0)
4866       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
4867         strerror(errno));
4868     (void) dup2(fd, 0);
4869     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
4870     message_ended = END_NOTENDED;
4871     read_message_body(receive_msg(extract_recipients));
4872     message_linecount += body_linecount;
4873     (void)dup2(save_stdin, 0);
4874     (void)close(save_stdin);
4875     clearerr(stdin);               /* Required by Darwin */
4876     }
4877
4878   /* Only admin users may see config-file macros this way */
4879
4880   if (!f.admin_user) macros_user = macros = mlast = NULL;
4881
4882   /* Allow $recipients for this testing */
4883
4884   f.enable_dollar_recipients = TRUE;
4885
4886   /* Expand command line items */
4887
4888   if (recipients_arg < argc)
4889     while (recipients_arg < argc)
4890       expansion_test_line(argv[recipients_arg++]);
4891
4892   /* Read stdin */
4893
4894   else
4895     {
4896     char *(*fn_readline)(const char *) = NULL;
4897     void (*fn_addhist)(const char *) = NULL;
4898     uschar * s;
4899
4900 #ifdef USE_READLINE
4901     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
4902 #endif
4903
4904     while (s = get_stdinput(fn_readline, fn_addhist))
4905       expansion_test_line(s);
4906
4907 #ifdef USE_READLINE
4908     if (dlhandle) dlclose(dlhandle);
4909 #endif
4910     }
4911
4912   /* The data file will be open after -Mset */
4913
4914   if (deliver_datafile >= 0)
4915     {
4916     (void)close(deliver_datafile);
4917     deliver_datafile = -1;
4918     }
4919
4920   exim_exit(EXIT_SUCCESS, US"main: expansion test");
4921   }
4922
4923
4924 /* The active host name is normally the primary host name, but it can be varied
4925 for hosts that want to play several parts at once. We need to ensure that it is
4926 set for host checking, and for receiving messages. */
4927
4928 smtp_active_hostname = primary_hostname;
4929 if (raw_active_hostname != NULL)
4930   {
4931   uschar *nah = expand_string(raw_active_hostname);
4932   if (nah == NULL)
4933     {
4934     if (!f.expand_string_forcedfail)
4935       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
4936         "(smtp_active_hostname): %s", raw_active_hostname,
4937         expand_string_message);
4938     }
4939   else if (nah[0] != 0) smtp_active_hostname = nah;
4940   }
4941
4942 /* Handle host checking: this facility mocks up an incoming SMTP call from a
4943 given IP address so that the blocking and relay configuration can be tested.
4944 Unless a sender_ident was set by -oMt, we discard it (the default is the
4945 caller's login name). An RFC 1413 call is made only if we are running in the
4946 test harness and an incoming interface and both ports are specified, because
4947 there is no TCP/IP call to find the ident for. */
4948
4949 if (host_checking)
4950   {
4951   int x[4];
4952   int size;
4953
4954   if (!sender_ident_set)
4955     {
4956     sender_ident = NULL;
4957     if (f.running_in_test_harness && sender_host_port != 0 &&
4958         interface_address != NULL && interface_port != 0)
4959       verify_get_ident(1413);
4960     }
4961
4962   /* In case the given address is a non-canonical IPv6 address, canonicalize
4963   it. The code works for both IPv4 and IPv6, as it happens. */
4964
4965   size = host_aton(sender_host_address, x);
4966   sender_host_address = store_get(48, FALSE);  /* large enough for full IPv6 */
4967   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
4968
4969   /* Now set up for testing */
4970
4971   host_build_sender_fullhost();
4972   smtp_input = TRUE;
4973   smtp_in = stdin;
4974   smtp_out = stdout;
4975   f.sender_local = FALSE;
4976   f.sender_host_notsocket = TRUE;
4977   debug_file = stderr;
4978   debug_fd = fileno(debug_file);
4979   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
4980     "**** but without any ident (RFC 1413) callback.\n"
4981     "**** This is not for real!\n\n",
4982       sender_host_address);
4983
4984   memset(sender_host_cache, 0, sizeof(sender_host_cache));
4985   if (verify_check_host(&hosts_connection_nolog) == OK)
4986     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
4987   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
4988
4989   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
4990   because a log line has already been written for all its failure exists
4991   (usually "connection refused: <reason>") and writing another one is
4992   unnecessary clutter. */
4993
4994   if (smtp_start_session())
4995     {
4996     for (; (reset_point = store_mark()); store_reset(reset_point))
4997       {
4998       if (smtp_setup_msg() <= 0) break;
4999       if (!receive_msg(FALSE)) break;
5000
5001       return_path = sender_address = NULL;
5002       dnslist_domain = dnslist_matched = NULL;
5003 #ifndef DISABLE_DKIM
5004       dkim_cur_signer = NULL;
5005 #endif
5006       acl_var_m = NULL;
5007       deliver_localpart_orig = NULL;
5008       deliver_domain_orig = NULL;
5009       callout_address = sending_ip_address = NULL;
5010       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5011       }
5012     smtp_log_no_mail();
5013     }
5014   exim_exit(EXIT_SUCCESS, US"main");
5015   }
5016
5017
5018 /* Arrange for message reception if recipients or SMTP were specified;
5019 otherwise complain unless a version print (-bV) happened or this is a filter
5020 verification test or info dump.
5021 In the former case, show the configuration file name. */
5022
5023 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5024   {
5025   if (version_printed)
5026     {
5027     if (Ustrchr(config_main_filelist, ':'))
5028       printf("Configuration file search path is %s\n", config_main_filelist);
5029     printf("Configuration file is %s\n", config_main_filename);
5030     return EXIT_SUCCESS;
5031     }
5032
5033   if (info_flag != CMDINFO_NONE)
5034     {
5035     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5036     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5037     }
5038
5039   if (filter_test == FTEST_NONE)
5040     exim_usage(called_as);
5041   }
5042
5043
5044 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5045 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5046 that we are not called from inetd, because that is rejected above. The
5047 following configuration settings are forced here:
5048
5049   (1) Synchronous delivery (-odi)
5050   (2) Errors to stderr (-oep == -oeq)
5051   (3) No parallel remote delivery
5052   (4) Unprivileged delivery
5053
5054 We don't force overall queueing options because there are several of them;
5055 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5056 to override any SMTP queueing. */
5057
5058 if (mua_wrapper)
5059   {
5060   f.synchronous_delivery = TRUE;
5061   arg_error_handling = ERRORS_STDERR;
5062   remote_max_parallel = 1;
5063   deliver_drop_privilege = TRUE;
5064   f.queue_smtp = FALSE;
5065   queue_smtp_domains = NULL;
5066 #ifdef SUPPORT_I18N
5067   message_utf8_downconvert = -1;        /* convert-if-needed */
5068 #endif
5069   }
5070
5071
5072 /* Prepare to accept one or more new messages on the standard input. When a
5073 message has been read, its id is returned in message_id[]. If doing immediate
5074 delivery, we fork a delivery process for each received message, except for the
5075 last one, where we can save a process switch.
5076
5077 It is only in non-smtp mode that error_handling is allowed to be changed from
5078 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5079 sendmail error modes other than -oem ever actually used? Later: yes.) */
5080
5081 if (!smtp_input) error_handling = arg_error_handling;
5082
5083 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5084 logging being sent down the socket and make an identd call to get the
5085 sender_ident. */
5086
5087 else if (f.is_inetd)
5088   {
5089   (void)fclose(stderr);
5090   exim_nullstd();                       /* Re-open to /dev/null */
5091   verify_get_ident(IDENT_PORT);
5092   host_build_sender_fullhost();
5093   set_process_info("handling incoming connection from %s via inetd",
5094     sender_fullhost);
5095   }
5096
5097 /* If the sender host address has been set, build sender_fullhost if it hasn't
5098 already been done (which it will have been for inetd). This caters for the
5099 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5100 so that the test for IP options is skipped for -bs input. */
5101
5102 if (sender_host_address && !sender_fullhost)
5103   {
5104   host_build_sender_fullhost();
5105   set_process_info("handling incoming connection from %s via -oMa",
5106     sender_fullhost);
5107   f.sender_host_notsocket = TRUE;
5108   }
5109
5110 /* Otherwise, set the sender host as unknown except for inetd calls. This
5111 prevents host checking in the case of -bs not from inetd and also for -bS. */
5112
5113 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5114
5115 /* If stdout does not exist, then dup stdin to stdout. This can happen
5116 if exim is started from inetd. In this case fd 0 will be set to the socket,
5117 but fd 1 will not be set. This also happens for passed SMTP channels. */
5118
5119 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5120
5121 /* Set up the incoming protocol name and the state of the program. Root is
5122 allowed to force received protocol via the -oMr option above. If we have come
5123 via inetd, the process info has already been set up. We don't set
5124 received_protocol here for smtp input, as it varies according to
5125 batch/HELO/EHLO/AUTH/TLS. */
5126
5127 if (smtp_input)
5128   {
5129   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5130     smtp_batched_input? "batched " : "",
5131     (sender_address!= NULL)? sender_address : originator_login);
5132   }
5133 else
5134   {
5135   int old_pool = store_pool;
5136   store_pool = POOL_PERM;
5137   if (!received_protocol)
5138     received_protocol = string_sprintf("local%s", called_as);
5139   store_pool = old_pool;
5140   set_process_info("accepting a local non-SMTP message from <%s>",
5141     sender_address);
5142   }
5143
5144 /* Initialize the session_local_queue-only flag (this will be ignored if
5145 mua_wrapper is set) */
5146
5147 queue_check_only();
5148 session_local_queue_only = queue_only;
5149
5150 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5151 the spool if so configured. On failure, we must not attempt to send an error
5152 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5153 error code is given.) */
5154
5155 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5156   exim_fail("exim: insufficient disk space\n");
5157
5158 /* If this is smtp input of any kind, real or batched, handle the start of the
5159 SMTP session.
5160
5161 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5162 because a log line has already been written for all its failure exists
5163 (usually "connection refused: <reason>") and writing another one is
5164 unnecessary clutter. */
5165
5166 if (smtp_input)
5167   {
5168   smtp_in = stdin;
5169   smtp_out = stdout;
5170   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5171   if (verify_check_host(&hosts_connection_nolog) == OK)
5172     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5173   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5174   if (!smtp_start_session())
5175     {
5176     mac_smtp_fflush();
5177     exim_exit(EXIT_SUCCESS, US"smtp_start toplevel");
5178     }
5179   }
5180
5181 /* Otherwise, set up the input size limit here. */
5182
5183 else
5184   {
5185   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5186   if (expand_string_message)
5187     if (thismessage_size_limit == -1)
5188       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5189         "message_size_limit: %s", expand_string_message);
5190     else
5191       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5192         "message_size_limit: %s", expand_string_message);
5193   }
5194
5195 /* Loop for several messages when reading SMTP input. If we fork any child
5196 processes, we don't want to wait for them unless synchronous delivery is
5197 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5198 same as SIG_DFL, despite the fact that documentation often lists the default as
5199 "ignore". This is a confusing area. This is what I know:
5200
5201 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5202 processes that complete simply to go away without ever becoming defunct. You
5203 can't then wait for them - but we don't want to wait for them in the
5204 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5205 happen for all OS (e.g. *BSD is different).
5206
5207 But that's not the end of the story. Some (many? all?) systems have the
5208 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5209 has by default, so it seems that the difference is merely one of default
5210 (compare restarting vs non-restarting signals).
5211
5212 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5213 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5214 of the loop below. Paranoia rules.
5215
5216 February 2003: That's *still* not the end of the story. There are now versions
5217 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5218 process then calls waitpid(), a grumble is written to the system log, because
5219 this is logically inconsistent. In other words, it doesn't like the paranoia.
5220 As a consequence of this, the waitpid() below is now excluded if we are sure
5221 that SIG_IGN works. */
5222
5223 if (!f.synchronous_delivery)
5224   {
5225   #ifdef SA_NOCLDWAIT
5226   struct sigaction act;
5227   act.sa_handler = SIG_IGN;
5228   sigemptyset(&(act.sa_mask));
5229   act.sa_flags = SA_NOCLDWAIT;
5230   sigaction(SIGCHLD, &act, NULL);
5231   #else
5232   signal(SIGCHLD, SIG_IGN);
5233   #endif
5234   }
5235
5236 /* Save the current store pool point, for resetting at the start of
5237 each message, and save the real sender address, if any. */
5238
5239 real_sender_address = sender_address;
5240
5241 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5242 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5243 collapsed). */
5244
5245 while (more)
5246   {
5247   reset_point = store_mark();
5248   message_id[0] = 0;
5249
5250   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5251   input and build the recipients list, before calling receive_msg() to read the
5252   message proper. Whatever sender address is given in the SMTP transaction is
5253   often ignored for local senders - we use the actual sender, which is normally
5254   either the underlying user running this process or a -f argument provided by
5255   a trusted caller. It is saved in real_sender_address. The test for whether to
5256   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5257
5258   if (smtp_input)
5259     {
5260     int rc;
5261     if ((rc = smtp_setup_msg()) > 0)
5262       {
5263       if (real_sender_address != NULL &&
5264           !receive_check_set_sender(sender_address))
5265         {
5266         sender_address = raw_sender = real_sender_address;
5267         sender_address_unrewritten = NULL;
5268         }
5269
5270       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5271       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5272       the very end. The result of the ACL is ignored (as for other non-SMTP
5273       messages). It is run for its potential side effects. */
5274
5275       if (smtp_batched_input && acl_not_smtp_start != NULL)
5276         {
5277         uschar *user_msg, *log_msg;
5278         f.enable_dollar_recipients = TRUE;
5279         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5280           &user_msg, &log_msg);
5281         f.enable_dollar_recipients = FALSE;
5282         }
5283
5284       /* Now get the data for the message */
5285
5286       more = receive_msg(extract_recipients);
5287       if (message_id[0] == 0)
5288         {
5289         cancel_cutthrough_connection(TRUE, US"receive dropped");
5290         if (more) goto moreloop;
5291         smtp_log_no_mail();               /* Log no mail if configured */
5292         exim_exit(EXIT_FAILURE, US"receive toplevel");
5293         }
5294       }
5295     else
5296       {
5297       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5298       smtp_log_no_mail();               /* Log no mail if configured */
5299       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS, US"msg setup toplevel");
5300       }
5301     }
5302
5303   /* In the non-SMTP case, we have all the information from the command
5304   line, but must process it in case it is in the more general RFC822
5305   format, and in any case, to detect syntax errors. Also, it appears that
5306   the use of comma-separated lists as single arguments is common, so we
5307   had better support them. */
5308
5309   else
5310     {
5311     int rcount = 0;
5312     int count = argc - recipients_arg;
5313     uschar **list = argv + recipients_arg;
5314
5315     /* These options cannot be changed dynamically for non-SMTP messages */
5316
5317     f.active_local_sender_retain = local_sender_retain;
5318     f.active_local_from_check = local_from_check;
5319
5320     /* Save before any rewriting */
5321
5322     raw_sender = string_copy(sender_address);
5323
5324     /* Loop for each argument */
5325
5326     for (int i = 0; i < count; i++)
5327       {
5328       int start, end, domain;
5329       uschar *errmess;
5330       uschar *s = list[i];
5331
5332       /* Loop for each comma-separated address */
5333
5334       while (*s != 0)
5335         {
5336         BOOL finished = FALSE;
5337         uschar *recipient;
5338         uschar *ss = parse_find_address_end(s, FALSE);
5339
5340         if (*ss == ',') *ss = 0; else finished = TRUE;
5341
5342         /* Check max recipients - if -t was used, these aren't recipients */
5343
5344         if (recipients_max > 0 && ++rcount > recipients_max &&
5345             !extract_recipients)
5346           if (error_handling == ERRORS_STDERR)
5347             {
5348             fprintf(stderr, "exim: too many recipients\n");
5349             exim_exit(EXIT_FAILURE, US"main");
5350             }
5351           else
5352             return
5353               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5354                 errors_sender_rc : EXIT_FAILURE;
5355
5356 #ifdef SUPPORT_I18N
5357         {
5358         BOOL b = allow_utf8_domains;
5359         allow_utf8_domains = TRUE;
5360 #endif
5361         recipient =
5362           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5363
5364 #ifdef SUPPORT_I18N
5365         if (string_is_utf8(recipient))
5366           message_smtputf8 = TRUE;
5367         else
5368           allow_utf8_domains = b;
5369         }
5370 #endif
5371         if (domain == 0 && !f.allow_unqualified_recipient)
5372           {
5373           recipient = NULL;
5374           errmess = US"unqualified recipient address not allowed";
5375           }
5376
5377         if (recipient == NULL)
5378           {
5379           if (error_handling == ERRORS_STDERR)
5380             {
5381             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5382               string_printing(list[i]), errmess);
5383             exim_exit(EXIT_FAILURE, US"main");
5384             }
5385           else
5386             {
5387             error_block eblock;
5388             eblock.next = NULL;
5389             eblock.text1 = string_printing(list[i]);
5390             eblock.text2 = errmess;
5391             return
5392               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5393                 errors_sender_rc : EXIT_FAILURE;
5394             }
5395           }
5396
5397         receive_add_recipient(string_copy_taint(recipient, TRUE), -1);
5398         s = ss;
5399         if (!finished)
5400           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5401         }
5402       }
5403
5404     /* Show the recipients when debugging */
5405
5406     DEBUG(D_receive)
5407       {
5408       if (sender_address != NULL) debug_printf("Sender: %s\n", sender_address);
5409       if (recipients_list != NULL)
5410         {
5411         debug_printf("Recipients:\n");
5412         for (int i = 0; i < recipients_count; i++)
5413           debug_printf("  %s\n", recipients_list[i].address);
5414         }
5415       }
5416
5417     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5418     ignored; rejecting here would just add complication, and it can just as
5419     well be done later. Allow $recipients to be visible in the ACL. */
5420
5421     if (acl_not_smtp_start)
5422       {
5423       uschar *user_msg, *log_msg;
5424       f.enable_dollar_recipients = TRUE;
5425       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5426         &user_msg, &log_msg);
5427       f.enable_dollar_recipients = FALSE;
5428       }
5429
5430     /* Pause for a while waiting for input.  If none received in that time,
5431     close the logfile, if we had one open; then if we wait for a long-running
5432     datasource (months, in one use-case) log rotation will not leave us holding
5433     the file copy. */
5434
5435     if (!receive_timeout)
5436       {
5437       struct timeval t = { .tv_sec = 30*60, .tv_usec = 0 };     /* 30 minutes */
5438       fd_set r;
5439
5440       FD_ZERO(&r); FD_SET(0, &r);
5441       if (select(1, &r, NULL, NULL, &t) == 0) mainlog_close();
5442       }
5443
5444     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5445     will just read the headers for the message, and not write anything onto the
5446     spool. */
5447
5448     message_ended = END_NOTENDED;
5449     more = receive_msg(extract_recipients);
5450
5451     /* more is always FALSE here (not SMTP message) when reading a message
5452     for real; when reading the headers of a message for filter testing,
5453     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5454
5455     if (message_id[0] == 0) exim_exit(EXIT_FAILURE, US"main");
5456     }  /* Non-SMTP message reception */
5457
5458   /* If this is a filter testing run, there are headers in store, but
5459   no message on the spool. Run the filtering code in testing mode, setting
5460   the domain to the qualify domain and the local part to the current user,
5461   unless they have been set by options. The prefix and suffix are left unset
5462   unless specified. The the return path is set to to the sender unless it has
5463   already been set from a return-path header in the message. */
5464
5465   if (filter_test != FTEST_NONE)
5466     {
5467     deliver_domain = (ftest_domain != NULL)?
5468       ftest_domain : qualify_domain_recipient;
5469     deliver_domain_orig = deliver_domain;
5470     deliver_localpart = (ftest_localpart != NULL)?
5471       ftest_localpart : originator_login;
5472     deliver_localpart_orig = deliver_localpart;
5473     deliver_localpart_prefix = ftest_prefix;
5474     deliver_localpart_suffix = ftest_suffix;
5475     deliver_home = originator_home;
5476
5477     if (return_path == NULL)
5478       {
5479       printf("Return-path copied from sender\n");
5480       return_path = string_copy(sender_address);
5481       }
5482     else
5483       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5484     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5485
5486     receive_add_recipient(
5487       string_sprintf("%s%s%s@%s",
5488         (ftest_prefix == NULL)? US"" : ftest_prefix,
5489         deliver_localpart,
5490         (ftest_suffix == NULL)? US"" : ftest_suffix,
5491         deliver_domain), -1);
5492
5493     printf("Recipient   = %s\n", recipients_list[0].address);
5494     if (ftest_prefix != NULL) printf("Prefix    = %s\n", ftest_prefix);
5495     if (ftest_suffix != NULL) printf("Suffix    = %s\n", ftest_suffix);
5496
5497     if (chdir("/"))   /* Get away from wherever the user is running this from */
5498       {
5499       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5500       exim_exit(EXIT_FAILURE, US"main");
5501       }
5502
5503     /* Now we run either a system filter test, or a user filter test, or both.
5504     In the latter case, headers added by the system filter will persist and be
5505     available to the user filter. We need to copy the filter variables
5506     explicitly. */
5507
5508     if ((filter_test & FTEST_SYSTEM) != 0)
5509       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5510         exim_exit(EXIT_FAILURE, US"main");
5511
5512     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5513
5514     if ((filter_test & FTEST_USER) != 0)
5515       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5516         exim_exit(EXIT_FAILURE, US"main");
5517
5518     exim_exit(EXIT_SUCCESS, US"main");
5519     }
5520
5521   /* Else act on the result of message reception. We should not get here unless
5522   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5523   will be TRUE. If it is not, check on the number of messages received in this
5524   connection. */
5525
5526   if (!session_local_queue_only &&
5527       smtp_accept_queue_per_connection > 0 &&
5528       receive_messagecount > smtp_accept_queue_per_connection)
5529     {
5530     session_local_queue_only = TRUE;
5531     queue_only_reason = 2;
5532     }
5533
5534   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5535   and queue_only_load is set, check that the load average is below it. If it is
5536   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5537   default), we put the whole session into queue_only mode. It then remains this
5538   way for any subsequent messages on the same SMTP connection. This is a
5539   deliberate choice; even though the load average may fall, it doesn't seem
5540   right to deliver later messages on the same call when not delivering earlier
5541   ones. However, there are odd cases where this is not wanted, so this can be
5542   changed by setting queue_only_load_latch false. */
5543
5544   local_queue_only = session_local_queue_only;
5545   if (!local_queue_only && queue_only_load >= 0)
5546     {
5547     local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load;
5548     if (local_queue_only)
5549       {
5550       queue_only_reason = 3;
5551       if (queue_only_load_latch) session_local_queue_only = TRUE;
5552       }
5553     }
5554
5555   /* If running as an MUA wrapper, all queueing options and freezing options
5556   are ignored. */
5557
5558   if (mua_wrapper)
5559     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
5560
5561   /* Log the queueing here, when it will get a message id attached, but
5562   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
5563   connections). */
5564
5565   if (local_queue_only)
5566     {
5567     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5568     switch(queue_only_reason)
5569       {
5570       case 2:
5571         log_write(L_delay_delivery,
5572                 LOG_MAIN, "no immediate delivery: more than %d messages "
5573           "received in one connection", smtp_accept_queue_per_connection);
5574         break;
5575
5576       case 3:
5577         log_write(L_delay_delivery,
5578                 LOG_MAIN, "no immediate delivery: load average %.2f",
5579                 (double)load_average/1000.0);
5580       break;
5581       }
5582     }
5583
5584   else if (f.queue_only_policy || f.deliver_freeze)
5585     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5586
5587   /* Else do the delivery unless the ACL or local_scan() called for queue only
5588   or froze the message. Always deliver in a separate process. A fork failure is
5589   not a disaster, as the delivery will eventually happen on a subsequent queue
5590   run. The search cache must be tidied before the fork, as the parent will
5591   do it before exiting. The child will trigger a lookup failure and
5592   thereby defer the delivery if it tries to use (for example) a cached ldap
5593   connection that the parent has called unbind on. */
5594
5595   else
5596     {
5597     pid_t pid;
5598     search_tidyup();
5599
5600     if ((pid = fork()) == 0)
5601       {
5602       int rc;
5603       close_unwanted();      /* Close unwanted file descriptors and TLS */
5604       exim_nullstd();        /* Ensure std{in,out,err} exist */
5605
5606       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
5607       mode, deliver_drop_privilege is forced TRUE). */
5608
5609       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
5610         {
5611         delivery_re_exec(CEE_EXEC_EXIT);
5612         /* Control does not return here. */
5613         }
5614
5615       /* No need to re-exec */
5616
5617       rc = deliver_message(message_id, FALSE, FALSE);
5618       search_tidyup();
5619       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
5620         ? EXIT_SUCCESS : EXIT_FAILURE);
5621       }
5622
5623     if (pid < 0)
5624       {
5625       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
5626       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
5627         "process: %s", strerror(errno));
5628       }
5629     else
5630       {
5631       release_cutthrough_connection(US"msg passed for delivery");
5632
5633       /* In the parent, wait if synchronous delivery is required. This will
5634       always be the case in MUA wrapper mode. */
5635
5636       if (f.synchronous_delivery)
5637         {
5638         int status;
5639         while (wait(&status) != pid);
5640         if ((status & 0x00ff) != 0)
5641           log_write(0, LOG_MAIN|LOG_PANIC,
5642             "process %d crashed with signal %d while delivering %s",
5643             (int)pid, status & 0x00ff, message_id);
5644         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE, US"main");
5645         }
5646       }
5647     }
5648
5649   /* The loop will repeat if more is TRUE. If we do not know know that the OS
5650   automatically reaps children (see comments above the loop), clear away any
5651   finished subprocesses here, in case there are lots of messages coming in
5652   from the same source. */
5653
5654   #ifndef SIG_IGN_WORKS
5655   while (waitpid(-1, NULL, WNOHANG) > 0);
5656   #endif
5657
5658 moreloop:
5659   return_path = sender_address = NULL;
5660   authenticated_sender = NULL;
5661   deliver_localpart_orig = NULL;
5662   deliver_domain_orig = NULL;
5663   deliver_host = deliver_host_address = NULL;
5664   dnslist_domain = dnslist_matched = NULL;
5665 #ifdef WITH_CONTENT_SCAN
5666   malware_name = NULL;
5667 #endif
5668   callout_address = NULL;
5669   sending_ip_address = NULL;
5670   acl_var_m = NULL;
5671   for(int i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
5672
5673   store_reset(reset_point);
5674   }
5675
5676 exim_exit(EXIT_SUCCESS, US"main");   /* Never returns */
5677 return 0;                  /* To stop compiler warning */
5678 }
5679
5680
5681 /* End of exim.c */