Merge branch '4.next'
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2018 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8
9 /* The main function: entry point, initialization, and high-level control.
10 Also a few functions that don't naturally fit elsewhere. */
11
12
13 #include "exim.h"
14
15 #if defined(__GLIBC__) && !defined(__UCLIBC__)
16 # include <gnu/libc-version.h>
17 #endif
18
19 #ifdef USE_GNUTLS
20 # include <gnutls/gnutls.h>
21 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
22 #  define DISABLE_OCSP
23 # endif
24 #endif
25
26 extern void init_lookup_list(void);
27
28
29
30 /*************************************************
31 *      Function interface to store functions     *
32 *************************************************/
33
34 /* We need some real functions to pass to the PCRE regular expression library
35 for store allocation via Exim's store manager. The normal calls are actually
36 macros that pass over location information to make tracing easier. These
37 functions just interface to the standard macro calls. A good compiler will
38 optimize out the tail recursion and so not make them too expensive. There
39 are two sets of functions; one for use when we want to retain the compiled
40 regular expression for a long time; the other for short-term use. */
41
42 static void *
43 function_store_get(size_t size)
44 {
45 /* For now, regard all RE results as potentially tainted.  We might need
46 more intelligence on this point. */
47 return store_get((int)size, TRUE);
48 }
49
50 static void
51 function_dummy_free(void *block) { block = block; }
52
53 static void *
54 function_store_malloc(size_t size)
55 {
56 return store_malloc((int)size);
57 }
58
59 static void
60 function_store_free(void *block)
61 {
62 store_free(block);
63 }
64
65
66
67
68 /*************************************************
69 *         Enums for cmdline interface            *
70 *************************************************/
71
72 enum commandline_info { CMDINFO_NONE=0,
73   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
74
75
76
77
78 /*************************************************
79 *  Compile regular expression and panic on fail  *
80 *************************************************/
81
82 /* This function is called when failure to compile a regular expression leads
83 to a panic exit. In other cases, pcre_compile() is called directly. In many
84 cases where this function is used, the results of the compilation are to be
85 placed in long-lived store, so we temporarily reset the store management
86 functions that PCRE uses if the use_malloc flag is set.
87
88 Argument:
89   pattern     the pattern to compile
90   caseless    TRUE if caseless matching is required
91   use_malloc  TRUE if compile into malloc store
92
93 Returns:      pointer to the compiled pattern
94 */
95
96 const pcre *
97 regex_must_compile(const uschar *pattern, BOOL caseless, BOOL use_malloc)
98 {
99 int offset;
100 int options = PCRE_COPT;
101 const pcre *yield;
102 const uschar *error;
103 if (use_malloc)
104   {
105   pcre_malloc = function_store_malloc;
106   pcre_free = function_store_free;
107   }
108 if (caseless) options |= PCRE_CASELESS;
109 yield = pcre_compile(CCS pattern, options, (const char **)&error, &offset, NULL);
110 pcre_malloc = function_store_get;
111 pcre_free = function_dummy_free;
112 if (yield == NULL)
113   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
114     "%s at offset %d while compiling %s", error, offset, pattern);
115 return yield;
116 }
117
118
119
120
121 /*************************************************
122 *   Execute regular expression and set strings   *
123 *************************************************/
124
125 /* This function runs a regular expression match, and sets up the pointers to
126 the matched substrings.
127
128 Arguments:
129   re          the compiled expression
130   subject     the subject string
131   options     additional PCRE options
132   setup       if < 0 do full setup
133               if >= 0 setup from setup+1 onwards,
134                 excluding the full matched string
135
136 Returns:      TRUE or FALSE
137 */
138
139 BOOL
140 regex_match_and_setup(const pcre *re, const uschar *subject, int options, int setup)
141 {
142 int ovector[3*(EXPAND_MAXN+1)];
143 uschar * s = string_copy(subject);      /* de-constifying */
144 int n = pcre_exec(re, NULL, CS s, Ustrlen(s), 0,
145   PCRE_EOPT | options, ovector, nelem(ovector));
146 BOOL yield = n >= 0;
147 if (n == 0) n = EXPAND_MAXN + 1;
148 if (yield)
149   {
150   expand_nmax = setup < 0 ? 0 : setup + 1;
151   for (int nn = setup < 0 ? 0 : 2; nn < n*2; nn += 2)
152     {
153     expand_nstring[expand_nmax] = s + ovector[nn];
154     expand_nlength[expand_nmax++] = ovector[nn+1] - ovector[nn];
155     }
156   expand_nmax--;
157   }
158 return yield;
159 }
160
161
162
163
164 /*************************************************
165 *            Set up processing details           *
166 *************************************************/
167
168 /* Save a text string for dumping when SIGUSR1 is received.
169 Do checks for overruns.
170
171 Arguments: format and arguments, as for printf()
172 Returns:   nothing
173 */
174
175 void
176 set_process_info(const char *format, ...)
177 {
178 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
179 gstring * g;
180 int len;
181 va_list ap;
182
183 g = string_fmt_append(&gs, "%5d ", (int)getpid());
184 len = g->ptr;
185 va_start(ap, format);
186 if (!string_vformat(g, 0, format, ap))
187   {
188   gs.ptr = len;
189   g = string_cat(&gs, US"**** string overflowed buffer ****");
190   }
191 g = string_catn(g, US"\n", 1);
192 string_from_gstring(g);
193 process_info_len = g->ptr;
194 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
195 va_end(ap);
196 }
197
198 /***********************************************
199 *            Handler for SIGTERM               *
200 ***********************************************/
201
202 static void
203 term_handler(int sig)
204 {
205 exit(1);
206 }
207
208
209 /*************************************************
210 *             Handler for SIGUSR1                *
211 *************************************************/
212
213 /* SIGUSR1 causes any exim process to write to the process log details of
214 what it is currently doing. It will only be used if the OS is capable of
215 setting up a handler that causes automatic restarting of any system call
216 that is in progress at the time.
217
218 This function takes care to be signal-safe.
219
220 Argument: the signal number (SIGUSR1)
221 Returns:  nothing
222 */
223
224 static void
225 usr1_handler(int sig)
226 {
227 int fd;
228
229 os_restarting_signal(sig, usr1_handler);
230
231 if ((fd = Uopen(process_log_path, O_APPEND|O_WRONLY, LOG_MODE)) < 0)
232   {
233   /* If we are already running as the Exim user, try to create it in the
234   current process (assuming spool_directory exists). Otherwise, if we are
235   root, do the creation in an exim:exim subprocess. */
236
237   int euid = geteuid();
238   if (euid == exim_uid)
239     fd = Uopen(process_log_path, O_CREAT|O_APPEND|O_WRONLY, LOG_MODE);
240   else if (euid == root_uid)
241     fd = log_create_as_exim(process_log_path);
242   }
243
244 /* If we are neither exim nor root, or if we failed to create the log file,
245 give up. There is not much useful we can do with errors, since we don't want
246 to disrupt whatever is going on outside the signal handler. */
247
248 if (fd < 0) return;
249
250 (void)write(fd, process_info, process_info_len);
251 (void)close(fd);
252 }
253
254
255
256 /*************************************************
257 *             Timeout handler                    *
258 *************************************************/
259
260 /* This handler is enabled most of the time that Exim is running. The handler
261 doesn't actually get used unless alarm() has been called to set a timer, to
262 place a time limit on a system call of some kind. When the handler is run, it
263 re-enables itself.
264
265 There are some other SIGALRM handlers that are used in special cases when more
266 than just a flag setting is required; for example, when reading a message's
267 input. These are normally set up in the code module that uses them, and the
268 SIGALRM handler is reset to this one afterwards.
269
270 Argument: the signal value (SIGALRM)
271 Returns:  nothing
272 */
273
274 void
275 sigalrm_handler(int sig)
276 {
277 sig = sig;      /* Keep picky compilers happy */
278 sigalrm_seen = TRUE;
279 os_non_restarting_signal(SIGALRM, sigalrm_handler);
280 }
281
282
283
284 /*************************************************
285 *      Sleep for a fractional time interval      *
286 *************************************************/
287
288 /* This function is called by millisleep() and exim_wait_tick() to wait for a
289 period of time that may include a fraction of a second. The coding is somewhat
290 tedious. We do not expect setitimer() ever to fail, but if it does, the process
291 will wait for ever, so we panic in this instance. (There was a case of this
292 when a bug in a function that calls milliwait() caused it to pass invalid data.
293 That's when I added the check. :-)
294
295 We assume it to be not worth sleeping for under 100us; this value will
296 require revisiting as hardware advances.  This avoids the issue of
297 a zero-valued timer setting meaning "never fire".
298
299 Argument:  an itimerval structure containing the interval
300 Returns:   nothing
301 */
302
303 static void
304 milliwait(struct itimerval *itval)
305 {
306 sigset_t sigmask;
307 sigset_t old_sigmask;
308
309 if (itval->it_value.tv_usec < 100 && itval->it_value.tv_sec == 0)
310   return;
311 (void)sigemptyset(&sigmask);                           /* Empty mask */
312 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
313 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
314 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
315   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
316     "setitimer() failed: %s", strerror(errno));
317 (void)sigfillset(&sigmask);                            /* All signals */
318 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
319 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
320 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
321 }
322
323
324
325
326 /*************************************************
327 *         Millisecond sleep function             *
328 *************************************************/
329
330 /* The basic sleep() function has a granularity of 1 second, which is too rough
331 in some cases - for example, when using an increasing delay to slow down
332 spammers.
333
334 Argument:    number of millseconds
335 Returns:     nothing
336 */
337
338 void
339 millisleep(int msec)
340 {
341 struct itimerval itval;
342 itval.it_interval.tv_sec = 0;
343 itval.it_interval.tv_usec = 0;
344 itval.it_value.tv_sec = msec/1000;
345 itval.it_value.tv_usec = (msec % 1000) * 1000;
346 milliwait(&itval);
347 }
348
349
350
351 /*************************************************
352 *         Compare microsecond times              *
353 *************************************************/
354
355 /*
356 Arguments:
357   tv1         the first time
358   tv2         the second time
359
360 Returns:      -1, 0, or +1
361 */
362
363 static int
364 exim_tvcmp(struct timeval *t1, struct timeval *t2)
365 {
366 if (t1->tv_sec > t2->tv_sec) return +1;
367 if (t1->tv_sec < t2->tv_sec) return -1;
368 if (t1->tv_usec > t2->tv_usec) return +1;
369 if (t1->tv_usec < t2->tv_usec) return -1;
370 return 0;
371 }
372
373
374
375
376 /*************************************************
377 *          Clock tick wait function              *
378 *************************************************/
379
380 /* Exim uses a time + a pid to generate a unique identifier in two places: its
381 message IDs, and in file names for maildir deliveries. Because some OS now
382 re-use pids within the same second, sub-second times are now being used.
383 However, for absolute certainty, we must ensure the clock has ticked before
384 allowing the relevant process to complete. At the time of implementation of
385 this code (February 2003), the speed of processors is such that the clock will
386 invariably have ticked already by the time a process has done its job. This
387 function prepares for the time when things are faster - and it also copes with
388 clocks that go backwards.
389
390 Arguments:
391   then_tv      A timeval which was used to create uniqueness; its usec field
392                  has been rounded down to the value of the resolution.
393                  We want to be sure the current time is greater than this.
394   resolution   The resolution that was used to divide the microseconds
395                  (1 for maildir, larger for message ids)
396
397 Returns:       nothing
398 */
399
400 void
401 exim_wait_tick(struct timeval *then_tv, int resolution)
402 {
403 struct timeval now_tv;
404 long int now_true_usec;
405
406 (void)gettimeofday(&now_tv, NULL);
407 now_true_usec = now_tv.tv_usec;
408 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
409
410 if (exim_tvcmp(&now_tv, then_tv) <= 0)
411   {
412   struct itimerval itval;
413   itval.it_interval.tv_sec = 0;
414   itval.it_interval.tv_usec = 0;
415   itval.it_value.tv_sec = then_tv->tv_sec - now_tv.tv_sec;
416   itval.it_value.tv_usec = then_tv->tv_usec + resolution - now_true_usec;
417
418   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
419   negative value for the microseconds is possible only in the case when "now"
420   is more than a second less than "then". That means that itval.it_value.tv_sec
421   is greater than zero. The following correction is therefore safe. */
422
423   if (itval.it_value.tv_usec < 0)
424     {
425     itval.it_value.tv_usec += 1000000;
426     itval.it_value.tv_sec -= 1;
427     }
428
429   DEBUG(D_transport|D_receive)
430     {
431     if (!f.running_in_test_harness)
432       {
433       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
434         then_tv->tv_sec, (long) then_tv->tv_usec,
435         now_tv.tv_sec, (long) now_tv.tv_usec);
436       debug_printf("waiting " TIME_T_FMT ".%06lu\n",
437         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
438       }
439     }
440
441   milliwait(&itval);
442   }
443 }
444
445
446
447
448 /*************************************************
449 *   Call fopen() with umask 777 and adjust mode  *
450 *************************************************/
451
452 /* Exim runs with umask(0) so that files created with open() have the mode that
453 is specified in the open() call. However, there are some files, typically in
454 the spool directory, that are created with fopen(). They end up world-writeable
455 if no precautions are taken. Although the spool directory is not accessible to
456 the world, this is an untidiness. So this is a wrapper function for fopen()
457 that sorts out the mode of the created file.
458
459 Arguments:
460    filename       the file name
461    options        the fopen() options
462    mode           the required mode
463
464 Returns:          the fopened FILE or NULL
465 */
466
467 FILE *
468 modefopen(const uschar *filename, const char *options, mode_t mode)
469 {
470 mode_t saved_umask = umask(0777);
471 FILE *f = Ufopen(filename, options);
472 (void)umask(saved_umask);
473 if (f != NULL) (void)fchmod(fileno(f), mode);
474 return f;
475 }
476
477
478 /*************************************************
479 *   Ensure stdin, stdout, and stderr exist       *
480 *************************************************/
481
482 /* Some operating systems grumble if an exec() happens without a standard
483 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
484 file will be opened and will use these fd values, and then some other bit of
485 code will assume, for example, that it can write error messages to stderr.
486 This function ensures that fds 0, 1, and 2 are open if they do not already
487 exist, by connecting them to /dev/null.
488
489 This function is also used to ensure that std{in,out,err} exist at all times,
490 so that if any library that Exim calls tries to use them, it doesn't crash.
491
492 Arguments:  None
493 Returns:    Nothing
494 */
495
496 void
497 exim_nullstd(void)
498 {
499 int devnull = -1;
500 struct stat statbuf;
501 for (int i = 0; i <= 2; i++)
502   {
503   if (fstat(i, &statbuf) < 0 && errno == EBADF)
504     {
505     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
506     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
507       string_open_failed(errno, "/dev/null", NULL));
508     if (devnull != i) (void)dup2(devnull, i);
509     }
510   }
511 if (devnull > 2) (void)close(devnull);
512 }
513
514
515
516
517 /*************************************************
518 *   Close unwanted file descriptors for delivery *
519 *************************************************/
520
521 /* This function is called from a new process that has been forked to deliver
522 an incoming message, either directly, or using exec.
523
524 We want any smtp input streams to be closed in this new process. However, it
525 has been observed that using fclose() here causes trouble. When reading in -bS
526 input, duplicate copies of messages have been seen. The files will be sharing a
527 file pointer with the parent process, and it seems that fclose() (at least on
528 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
529 least sometimes. Hence we go for closing the underlying file descriptors.
530
531 If TLS is active, we want to shut down the TLS library, but without molesting
532 the parent's SSL connection.
533
534 For delivery of a non-SMTP message, we want to close stdin and stdout (and
535 stderr unless debugging) because the calling process might have set them up as
536 pipes and be waiting for them to close before it waits for the submission
537 process to terminate. If they aren't closed, they hold up the calling process
538 until the initial delivery process finishes, which is not what we want.
539
540 Exception: We do want it for synchronous delivery!
541
542 And notwithstanding all the above, if D_resolver is set, implying resolver
543 debugging, leave stdout open, because that's where the resolver writes its
544 debugging output.
545
546 When we close stderr (which implies we've also closed stdout), we also get rid
547 of any controlling terminal.
548
549 Arguments:   None
550 Returns:     Nothing
551 */
552
553 static void
554 close_unwanted(void)
555 {
556 if (smtp_input)
557   {
558 #ifndef DISABLE_TLS
559   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
560 #endif
561   (void)close(fileno(smtp_in));
562   (void)close(fileno(smtp_out));
563   smtp_in = NULL;
564   }
565 else
566   {
567   (void)close(0);                                          /* stdin */
568   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
569   if (debug_selector == 0)                                 /* stderr */
570     {
571     if (!f.synchronous_delivery)
572       {
573       (void)close(2);
574       log_stderr = NULL;
575       }
576     (void)setsid();
577     }
578   }
579 }
580
581
582
583
584 /*************************************************
585 *          Set uid and gid                       *
586 *************************************************/
587
588 /* This function sets a new uid and gid permanently, optionally calling
589 initgroups() to set auxiliary groups. There are some special cases when running
590 Exim in unprivileged modes. In these situations the effective uid will not be
591 root; if we already have the right effective uid/gid, and don't need to
592 initialize any groups, leave things as they are.
593
594 Arguments:
595   uid        the uid
596   gid        the gid
597   igflag     TRUE if initgroups() wanted
598   msg        text to use in debugging output and failure log
599
600 Returns:     nothing; bombs out on failure
601 */
602
603 void
604 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, uschar *msg)
605 {
606 uid_t euid = geteuid();
607 gid_t egid = getegid();
608
609 if (euid == root_uid || euid != uid || egid != gid || igflag)
610   {
611   /* At least one OS returns +1 for initgroups failure, so just check for
612   non-zero. */
613
614   if (igflag)
615     {
616     struct passwd *pw = getpwuid(uid);
617     if (!pw)
618       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
619         "no passwd entry for uid=%ld", (long int)uid);
620
621     if (initgroups(pw->pw_name, gid) != 0)
622       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
623         (long int)uid, strerror(errno));
624     }
625
626   if (setgid(gid) < 0 || setuid(uid) < 0)
627     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
628       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
629   }
630
631 /* Debugging output included uid/gid and all groups */
632
633 DEBUG(D_uid)
634   {
635   int group_count, save_errno;
636   gid_t group_list[EXIM_GROUPLIST_SIZE];
637   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
638     (long int)geteuid(), (long int)getegid(), (long int)getpid());
639   group_count = getgroups(nelem(group_list), group_list);
640   save_errno = errno;
641   debug_printf("  auxiliary group list:");
642   if (group_count > 0)
643     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
644   else if (group_count < 0)
645     debug_printf(" <error: %s>", strerror(save_errno));
646   else debug_printf(" <none>");
647   debug_printf("\n");
648   }
649 }
650
651
652
653
654 /*************************************************
655 *               Exit point                       *
656 *************************************************/
657
658 /* Exim exits via this function so that it always clears up any open
659 databases.
660
661 Arguments:
662   rc         return code
663
664 Returns:     does not return
665 */
666
667 void
668 exim_exit(int rc, const uschar * process)
669 {
670 search_tidyup();
671 store_exit();
672 DEBUG(D_any)
673   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d %s%s%sterminating with rc=%d "
674     ">>>>>>>>>>>>>>>>\n", (int)getpid(),
675     process ? "(" : "", process, process ? ") " : "", rc);
676 exit(rc);
677 }
678
679
680 void
681 exim_underbar_exit(int rc)
682 {
683 store_exit();
684 _exit(rc);
685 }
686
687
688
689 /* Print error string, then die */
690 static void
691 exim_fail(const char * fmt, ...)
692 {
693 va_list ap;
694 va_start(ap, fmt);
695 vfprintf(stderr, fmt, ap);
696 exit(EXIT_FAILURE);
697 }
698
699 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
700 of chown()/fchown().  See src/functions.h for more explanation */
701 int
702 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
703 {
704 int saved_errno = errno;  /* from the preceeding chown call */
705 #if 1
706 log_write(0, LOG_MAIN|LOG_PANIC,
707   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
708   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
709   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
710 #else
711 /* I leave this here, commented, in case the "bug"(?) comes up again.
712    It is not an Exim bug, but we can provide a workaround.
713    See Bug 2391
714    HS 2019-04-18 */
715
716 struct stat buf;
717
718 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
719 {
720   if (buf.st_uid == owner && buf.st_gid == group) return 0;
721   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
722 }
723 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
724
725 #endif
726 errno = saved_errno;
727 return -1;
728 }
729
730
731 /*************************************************
732 *         Extract port from host address         *
733 *************************************************/
734
735 /* Called to extract the port from the values given to -oMa and -oMi.
736 It also checks the syntax of the address, and terminates it before the
737 port data when a port is extracted.
738
739 Argument:
740   address   the address, with possible port on the end
741
742 Returns:    the port, or zero if there isn't one
743             bombs out on a syntax error
744 */
745
746 static int
747 check_port(uschar *address)
748 {
749 int port = host_address_extract_port(address);
750 if (string_is_ip_address(address, NULL) == 0)
751   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
752 return port;
753 }
754
755
756
757 /*************************************************
758 *              Test/verify an address            *
759 *************************************************/
760
761 /* This function is called by the -bv and -bt code. It extracts a working
762 address from a full RFC 822 address. This isn't really necessary per se, but it
763 has the effect of collapsing source routes.
764
765 Arguments:
766   s            the address string
767   flags        flag bits for verify_address()
768   exit_value   to be set for failures
769
770 Returns:       nothing
771 */
772
773 static void
774 test_address(uschar *s, int flags, int *exit_value)
775 {
776 int start, end, domain;
777 uschar *parse_error = NULL;
778 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
779   FALSE);
780 if (address == NULL)
781   {
782   fprintf(stdout, "syntax error: %s\n", parse_error);
783   *exit_value = 2;
784   }
785 else
786   {
787   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
788     -1, -1, NULL, NULL, NULL);
789   if (rc == FAIL) *exit_value = 2;
790     else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
791   }
792 }
793
794
795
796 /*************************************************
797 *          Show supported features               *
798 *************************************************/
799
800 static void
801 show_db_version(FILE * f)
802 {
803 #ifdef DB_VERSION_STRING
804 DEBUG(D_any)
805   {
806   fprintf(f, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
807   fprintf(f, "                      Runtime: %s\n",
808     db_version(NULL, NULL, NULL));
809   }
810 else
811   fprintf(f, "Berkeley DB: %s\n", DB_VERSION_STRING);
812
813 #elif defined(BTREEVERSION) && defined(HASHVERSION)
814   #ifdef USE_DB
815   fprintf(f, "Probably Berkeley DB version 1.8x (native mode)\n");
816   #else
817   fprintf(f, "Probably Berkeley DB version 1.8x (compatibility mode)\n");
818   #endif
819
820 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
821 fprintf(f, "Probably ndbm\n");
822 #elif defined(USE_TDB)
823 fprintf(f, "Using tdb\n");
824 #else
825   #ifdef USE_GDBM
826   fprintf(f, "Probably GDBM (native mode)\n");
827   #else
828   fprintf(f, "Probably GDBM (compatibility mode)\n");
829   #endif
830 #endif
831 }
832
833
834 /* This function is called for -bV/--version and for -d to output the optional
835 features of the current Exim binary.
836
837 Arguments:  a FILE for printing
838 Returns:    nothing
839 */
840
841 static void
842 show_whats_supported(FILE * fp)
843 {
844 DEBUG(D_any) {} else show_db_version(fp);
845
846 fprintf(fp, "Support for:");
847 #ifdef SUPPORT_CRYPTEQ
848   fprintf(fp, " crypteq");
849 #endif
850 #if HAVE_ICONV
851   fprintf(fp, " iconv()");
852 #endif
853 #if HAVE_IPV6
854   fprintf(fp, " IPv6");
855 #endif
856 #ifdef HAVE_SETCLASSRESOURCES
857   fprintf(fp, " use_setclassresources");
858 #endif
859 #ifdef SUPPORT_PAM
860   fprintf(fp, " PAM");
861 #endif
862 #ifdef EXIM_PERL
863   fprintf(fp, " Perl");
864 #endif
865 #ifdef EXPAND_DLFUNC
866   fprintf(fp, " Expand_dlfunc");
867 #endif
868 #ifdef USE_TCP_WRAPPERS
869   fprintf(fp, " TCPwrappers");
870 #endif
871 #ifdef USE_GNUTLS
872   fprintf(fp, " GnuTLS");
873 #endif
874 #ifdef USE_OPENSSL
875   fprintf(fp, " OpenSSL");
876 #endif
877 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
878   fprintf(fp, " translate_ip_address");
879 #endif
880 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
881   fprintf(fp, " move_frozen_messages");
882 #endif
883 #ifdef WITH_CONTENT_SCAN
884   fprintf(fp, " Content_Scanning");
885 #endif
886 #ifdef SUPPORT_DANE
887   fprintf(fp, " DANE");
888 #endif
889 #ifndef DISABLE_DKIM
890   fprintf(fp, " DKIM");
891 #endif
892 #ifndef DISABLE_DNSSEC
893   fprintf(fp, " DNSSEC");
894 #endif
895 #ifndef DISABLE_EVENT
896   fprintf(fp, " Event");
897 #endif
898 #ifdef SUPPORT_I18N
899   fprintf(fp, " I18N");
900 #endif
901 #ifndef DISABLE_OCSP
902   fprintf(fp, " OCSP");
903 #endif
904 #ifndef DISABLE_PIPE_CONNECT
905   fprintf(fp, " PIPE_CONNECT");
906 #endif
907 #ifndef DISABLE_PRDR
908   fprintf(fp, " PRDR");
909 #endif
910 #ifdef SUPPORT_PROXY
911   fprintf(fp, " PROXY");
912 #endif
913 #ifdef SUPPORT_SOCKS
914   fprintf(fp, " SOCKS");
915 #endif
916 #ifdef SUPPORT_SPF
917   fprintf(fp, " SPF");
918 #endif
919 #ifdef SUPPORT_DMARC
920   fprintf(fp, " DMARC");
921 #endif
922 #ifdef TCP_FASTOPEN
923   tcp_init();
924   if (f.tcp_fastopen_ok) fprintf(fp, " TCP_Fast_Open");
925 #endif
926 #ifdef EXPERIMENTAL_LMDB
927   fprintf(fp, " Experimental_LMDB");
928 #endif
929 #ifdef EXPERIMENTAL_QUEUEFILE
930   fprintf(fp, " Experimental_QUEUEFILE");
931 #endif
932 #if defined(EXPERIMENTAL_SRS) || defined(EXPERIMENTAL_SRS_NATIVE)
933   fprintf(fp, " Experimental_SRS");
934 #endif
935 #ifdef EXPERIMENTAL_ARC
936   fprintf(fp, " Experimental_ARC");
937 #endif
938 #ifdef EXPERIMENTAL_BRIGHTMAIL
939   fprintf(fp, " Experimental_Brightmail");
940 #endif
941 #ifdef EXPERIMENTAL_DCC
942   fprintf(fp, " Experimental_DCC");
943 #endif
944 #ifdef EXPERIMENTAL_DSN_INFO
945   fprintf(fp, " Experimental_DSN_info");
946 #endif
947 #ifdef EXPERIMENTAL_TLS_RESUME
948   fprintf(fp, " Experimental_TLS_resume");
949 #endif
950 fprintf(fp, "\n");
951
952 fprintf(fp, "Lookups (built-in):");
953 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
954   fprintf(fp, " lsearch wildlsearch nwildlsearch iplsearch");
955 #endif
956 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
957   fprintf(fp, " cdb");
958 #endif
959 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
960   fprintf(fp, " dbm dbmjz dbmnz");
961 #endif
962 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
963   fprintf(fp, " dnsdb");
964 #endif
965 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
966   fprintf(fp, " dsearch");
967 #endif
968 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
969   fprintf(fp, " ibase");
970 #endif
971 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
972   fprintf(fp, " json");
973 #endif
974 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
975   fprintf(fp, " ldap ldapdn ldapm");
976 #endif
977 #ifdef EXPERIMENTAL_LMDB
978   fprintf(fp, " lmdb");
979 #endif
980 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
981   fprintf(fp, " mysql");
982 #endif
983 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
984   fprintf(fp, " nis nis0");
985 #endif
986 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
987   fprintf(fp, " nisplus");
988 #endif
989 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
990   fprintf(fp, " oracle");
991 #endif
992 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
993   fprintf(fp, " passwd");
994 #endif
995 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
996   fprintf(fp, " pgsql");
997 #endif
998 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
999   fprintf(fp, " redis");
1000 #endif
1001 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1002   fprintf(fp, " sqlite");
1003 #endif
1004 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1005   fprintf(fp, " testdb");
1006 #endif
1007 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1008   fprintf(fp, " whoson");
1009 #endif
1010 fprintf(fp, "\n");
1011
1012 auth_show_supported(fp);
1013 route_show_supported(fp);
1014 transport_show_supported(fp);
1015
1016 #ifdef WITH_CONTENT_SCAN
1017 malware_show_supported(fp);
1018 #endif
1019
1020 if (fixed_never_users[0] > 0)
1021   {
1022   int i;
1023   fprintf(fp, "Fixed never_users: ");
1024   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1025     fprintf(fp, "%d:", (unsigned int)fixed_never_users[i]);
1026   fprintf(fp, "%d\n", (unsigned int)fixed_never_users[i]);
1027   }
1028
1029 fprintf(fp, "Configure owner: %d:%d\n", config_uid, config_gid);
1030
1031 fprintf(fp, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1032
1033 /* Everything else is details which are only worth reporting when debugging.
1034 Perhaps the tls_version_report should move into this too. */
1035 DEBUG(D_any) do {
1036
1037 /* clang defines __GNUC__ (at least, for me) so test for it first */
1038 #if defined(__clang__)
1039   fprintf(fp, "Compiler: CLang [%s]\n", __clang_version__);
1040 #elif defined(__GNUC__)
1041   fprintf(fp, "Compiler: GCC [%s]\n",
1042 # ifdef __VERSION__
1043       __VERSION__
1044 # else
1045       "? unknown version ?"
1046 # endif
1047       );
1048 #else
1049   fprintf(fp, "Compiler: <unknown>\n");
1050 #endif
1051
1052 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1053   fprintf(fp, "Library version: Glibc: Compile: %d.%d\n",
1054                 __GLIBC__, __GLIBC_MINOR__);
1055   if (__GLIBC_PREREQ(2, 1))
1056     fprintf(fp, "                        Runtime: %s\n",
1057                 gnu_get_libc_version());
1058 #endif
1059
1060 show_db_version(fp);
1061
1062 #ifndef DISABLE_TLS
1063   tls_version_report(fp);
1064 #endif
1065 #ifdef SUPPORT_I18N
1066   utf8_version_report(fp);
1067 #endif
1068
1069   for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1070     if (authi->version_report)
1071       (*authi->version_report)(fp);
1072
1073   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1074   characters; unless it's an ancient version of PCRE in which case it
1075   is not defined. */
1076 #ifndef PCRE_PRERELEASE
1077 # define PCRE_PRERELEASE
1078 #endif
1079 #define QUOTE(X) #X
1080 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1081   fprintf(fp, "Library version: PCRE: Compile: %d.%d%s\n"
1082              "                       Runtime: %s\n",
1083           PCRE_MAJOR, PCRE_MINOR,
1084           EXPAND_AND_QUOTE(PCRE_PRERELEASE) "",
1085           pcre_version());
1086 #undef QUOTE
1087 #undef EXPAND_AND_QUOTE
1088
1089   init_lookup_list();
1090   for (int i = 0; i < lookup_list_count; i++)
1091     if (lookup_list[i]->version_report)
1092       lookup_list[i]->version_report(fp);
1093
1094 #ifdef WHITELIST_D_MACROS
1095   fprintf(fp, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1096 #else
1097   fprintf(fp, "WHITELIST_D_MACROS unset\n");
1098 #endif
1099 #ifdef TRUSTED_CONFIG_LIST
1100   fprintf(fp, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1101 #else
1102   fprintf(fp, "TRUSTED_CONFIG_LIST unset\n");
1103 #endif
1104
1105 } while (0);
1106 }
1107
1108
1109 /*************************************************
1110 *     Show auxiliary information about Exim      *
1111 *************************************************/
1112
1113 static void
1114 show_exim_information(enum commandline_info request, FILE *stream)
1115 {
1116 switch(request)
1117   {
1118   case CMDINFO_NONE:
1119     fprintf(stream, "Oops, something went wrong.\n");
1120     return;
1121   case CMDINFO_HELP:
1122     fprintf(stream,
1123 "The -bI: flag takes a string indicating which information to provide.\n"
1124 "If the string is not recognised, you'll get this help (on stderr).\n"
1125 "\n"
1126 "  exim -bI:help    this information\n"
1127 "  exim -bI:dscp    list of known dscp value keywords\n"
1128 "  exim -bI:sieve   list of supported sieve extensions\n"
1129 );
1130     return;
1131   case CMDINFO_SIEVE:
1132     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1133       fprintf(stream, "%s\n", *pp);
1134     return;
1135   case CMDINFO_DSCP:
1136     dscp_list_to_stream(stream);
1137     return;
1138   }
1139 }
1140
1141
1142 /*************************************************
1143 *               Quote a local part               *
1144 *************************************************/
1145
1146 /* This function is used when a sender address or a From: or Sender: header
1147 line is being created from the caller's login, or from an authenticated_id. It
1148 applies appropriate quoting rules for a local part.
1149
1150 Argument:    the local part
1151 Returns:     the local part, quoted if necessary
1152 */
1153
1154 uschar *
1155 local_part_quote(uschar *lpart)
1156 {
1157 BOOL needs_quote = FALSE;
1158 gstring * g;
1159
1160 for (uschar * t = lpart; !needs_quote && *t != 0; t++)
1161   {
1162   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1163     (*t != '.' || t == lpart || t[1] == 0);
1164   }
1165
1166 if (!needs_quote) return lpart;
1167
1168 g = string_catn(NULL, US"\"", 1);
1169
1170 for (;;)
1171   {
1172   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1173   if (nq == NULL)
1174     {
1175     g = string_cat(g, lpart);
1176     break;
1177     }
1178   g = string_catn(g, lpart, nq - lpart);
1179   g = string_catn(g, US"\\", 1);
1180   g = string_catn(g, nq, 1);
1181   lpart = nq + 1;
1182   }
1183
1184 g = string_catn(g, US"\"", 1);
1185 return string_from_gstring(g);
1186 }
1187
1188
1189
1190 #ifdef USE_READLINE
1191 /*************************************************
1192 *         Load readline() functions              *
1193 *************************************************/
1194
1195 /* This function is called from testing executions that read data from stdin,
1196 but only when running as the calling user. Currently, only -be does this. The
1197 function loads the readline() function library and passes back the functions.
1198 On some systems, it needs the curses library, so load that too, but try without
1199 it if loading fails. All this functionality has to be requested at build time.
1200
1201 Arguments:
1202   fn_readline_ptr   pointer to where to put the readline pointer
1203   fn_addhist_ptr    pointer to where to put the addhistory function
1204
1205 Returns:            the dlopen handle or NULL on failure
1206 */
1207
1208 static void *
1209 set_readline(char * (**fn_readline_ptr)(const char *),
1210              void   (**fn_addhist_ptr)(const char *))
1211 {
1212 void *dlhandle;
1213 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1214
1215 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1216 if (dlhandle_curses != NULL) dlclose(dlhandle_curses);
1217
1218 if (dlhandle != NULL)
1219   {
1220   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1221    *   char * readline (const char *prompt);
1222    *   void add_history (const char *string);
1223    */
1224   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1225   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1226   }
1227 else
1228   {
1229   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1230   }
1231
1232 return dlhandle;
1233 }
1234 #endif
1235
1236
1237
1238 /*************************************************
1239 *    Get a line from stdin for testing things    *
1240 *************************************************/
1241
1242 /* This function is called when running tests that can take a number of lines
1243 of input (for example, -be and -bt). It handles continuations and trailing
1244 spaces. And prompting and a blank line output on eof. If readline() is in use,
1245 the arguments are non-NULL and provide the relevant functions.
1246
1247 Arguments:
1248   fn_readline   readline function or NULL
1249   fn_addhist    addhist function or NULL
1250
1251 Returns:        pointer to dynamic memory, or NULL at end of file
1252 */
1253
1254 static uschar *
1255 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1256 {
1257 gstring * g = NULL;
1258
1259 if (!fn_readline) { printf("> "); fflush(stdout); }
1260
1261 for (int i = 0;; i++)
1262   {
1263   uschar buffer[1024];
1264   uschar *p, *ss;
1265
1266   #ifdef USE_READLINE
1267   char *readline_line = NULL;
1268   if (fn_readline)
1269     {
1270     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1271     if (*readline_line != 0 && fn_addhist) fn_addhist(readline_line);
1272     p = US readline_line;
1273     }
1274   else
1275   #endif
1276
1277   /* readline() not in use */
1278
1279     {
1280     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;
1281     p = buffer;
1282     }
1283
1284   /* Handle the line */
1285
1286   ss = p + (int)Ustrlen(p);
1287   while (ss > p && isspace(ss[-1])) ss--;
1288
1289   if (i > 0)
1290     while (p < ss && isspace(*p)) p++;   /* leading space after cont */
1291
1292   g = string_catn(g, p, ss - p);
1293
1294   #ifdef USE_READLINE
1295   if (fn_readline) free(readline_line);
1296   #endif
1297
1298   /* g can only be NULL if ss==p */
1299   if (ss == p || g->s[g->ptr-1] != '\\')
1300     break;
1301
1302   --g->ptr;
1303   (void) string_from_gstring(g);
1304   }
1305
1306 if (!g) printf("\n");
1307 return string_from_gstring(g);
1308 }
1309
1310
1311
1312 /*************************************************
1313 *    Output usage information for the program    *
1314 *************************************************/
1315
1316 /* This function is called when there are no recipients
1317    or a specific --help argument was added.
1318
1319 Arguments:
1320   progname      information on what name we were called by
1321
1322 Returns:        DOES NOT RETURN
1323 */
1324
1325 static void
1326 exim_usage(uschar *progname)
1327 {
1328
1329 /* Handle specific program invocation variants */
1330 if (Ustrcmp(progname, US"-mailq") == 0)
1331   exim_fail(
1332     "mailq - list the contents of the mail queue\n\n"
1333     "For a list of options, see the Exim documentation.\n");
1334
1335 /* Generic usage - we output this whatever happens */
1336 exim_fail(
1337   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1338   "not directly from a shell command line. Options and/or arguments control\n"
1339   "what it does when called. For a list of options, see the Exim documentation.\n");
1340 }
1341
1342
1343
1344 /*************************************************
1345 *    Validate that the macros given are okay     *
1346 *************************************************/
1347
1348 /* Typically, Exim will drop privileges if macros are supplied.  In some
1349 cases, we want to not do so.
1350
1351 Arguments:    opt_D_used - true if the commandline had a "-D" option
1352 Returns:      true if trusted, false otherwise
1353 */
1354
1355 static BOOL
1356 macros_trusted(BOOL opt_D_used)
1357 {
1358 #ifdef WHITELIST_D_MACROS
1359 uschar *whitelisted, *end, *p, **whites;
1360 int white_count, i, n;
1361 size_t len;
1362 BOOL prev_char_item, found;
1363 #endif
1364
1365 if (!opt_D_used)
1366   return TRUE;
1367 #ifndef WHITELIST_D_MACROS
1368 return FALSE;
1369 #else
1370
1371 /* We only trust -D overrides for some invoking users:
1372 root, the exim run-time user, the optional config owner user.
1373 I don't know why config-owner would be needed, but since they can own the
1374 config files anyway, there's no security risk to letting them override -D. */
1375 if ( ! ((real_uid == root_uid)
1376      || (real_uid == exim_uid)
1377 #ifdef CONFIGURE_OWNER
1378      || (real_uid == config_uid)
1379 #endif
1380    ))
1381   {
1382   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1383   return FALSE;
1384   }
1385
1386 /* Get a list of macros which are whitelisted */
1387 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1388 prev_char_item = FALSE;
1389 white_count = 0;
1390 for (p = whitelisted; *p != '\0'; ++p)
1391   {
1392   if (*p == ':' || isspace(*p))
1393     {
1394     *p = '\0';
1395     if (prev_char_item)
1396       ++white_count;
1397     prev_char_item = FALSE;
1398     continue;
1399     }
1400   if (!prev_char_item)
1401     prev_char_item = TRUE;
1402   }
1403 end = p;
1404 if (prev_char_item)
1405   ++white_count;
1406 if (!white_count)
1407   return FALSE;
1408 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1409 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1410   {
1411   if (*p != '\0')
1412     {
1413     whites[i++] = p;
1414     if (i == white_count)
1415       break;
1416     while (*p != '\0' && p < end)
1417       ++p;
1418     }
1419   }
1420 whites[i] = NULL;
1421
1422 /* The list of commandline macros should be very short.
1423 Accept the N*M complexity. */
1424 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1425   {
1426   found = FALSE;
1427   for (uschar ** w = whites; *w; ++w)
1428     if (Ustrcmp(*w, m->name) == 0)
1429       {
1430       found = TRUE;
1431       break;
1432       }
1433   if (!found)
1434     return FALSE;
1435   if (!m->replacement)
1436     continue;
1437   if ((len = m->replen) == 0)
1438     continue;
1439   n = pcre_exec(regex_whitelisted_macro, NULL, CS m->replacement, len,
1440    0, PCRE_EOPT, NULL, 0);
1441   if (n < 0)
1442     {
1443     if (n != PCRE_ERROR_NOMATCH)
1444       debug_printf("macros_trusted checking %s returned %d\n", m->name, n);
1445     return FALSE;
1446     }
1447   }
1448 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1449 return TRUE;
1450 #endif
1451 }
1452
1453
1454 /*************************************************
1455 *          Expansion testing                     *
1456 *************************************************/
1457
1458 /* Expand and print one item, doing macro-processing.
1459
1460 Arguments:
1461   item          line for expansion
1462 */
1463
1464 static void
1465 expansion_test_line(uschar * line)
1466 {
1467 int len;
1468 BOOL dummy_macexp;
1469
1470 Ustrncpy(big_buffer, line, big_buffer_size);
1471 big_buffer[big_buffer_size-1] = '\0';
1472 len = Ustrlen(big_buffer);
1473
1474 (void) macros_expand(0, &len, &dummy_macexp);
1475
1476 if (isupper(big_buffer[0]))
1477   {
1478   if (macro_read_assignment(big_buffer))
1479     printf("Defined macro '%s'\n", mlast->name);
1480   }
1481 else
1482   if ((line = expand_string(big_buffer))) printf("%s\n", CS line);
1483   else printf("Failed: %s\n", expand_string_message);
1484 }
1485
1486
1487
1488 /*************************************************
1489 *          Entry point and high-level code       *
1490 *************************************************/
1491
1492 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1493 the appropriate action. All the necessary functions are present in the one
1494 binary. I originally thought one should split it up, but it turns out that so
1495 much of the apparatus is needed in each chunk that one might as well just have
1496 it all available all the time, which then makes the coding easier as well.
1497
1498 Arguments:
1499   argc      count of entries in argv
1500   argv      argument strings, with argv[0] being the program name
1501
1502 Returns:    EXIT_SUCCESS if terminated successfully
1503             EXIT_FAILURE otherwise, except when a message has been sent
1504               to the sender, and -oee was given
1505 */
1506
1507 int
1508 main(int argc, char **cargv)
1509 {
1510 uschar **argv = USS cargv;
1511 int  arg_receive_timeout = -1;
1512 int  arg_smtp_receive_timeout = -1;
1513 int  arg_error_handling = error_handling;
1514 int  filter_sfd = -1;
1515 int  filter_ufd = -1;
1516 int  group_count;
1517 int  i, rv;
1518 int  list_queue_option = 0;
1519 int  msg_action = 0;
1520 int  msg_action_arg = -1;
1521 int  namelen = (argv[0] == NULL)? 0 : Ustrlen(argv[0]);
1522 int  queue_only_reason = 0;
1523 #ifdef EXIM_PERL
1524 int  perl_start_option = 0;
1525 #endif
1526 int  recipients_arg = argc;
1527 int  sender_address_domain = 0;
1528 int  test_retry_arg = -1;
1529 int  test_rewrite_arg = -1;
1530 gid_t original_egid;
1531 BOOL arg_queue_only = FALSE;
1532 BOOL bi_option = FALSE;
1533 BOOL checking = FALSE;
1534 BOOL count_queue = FALSE;
1535 BOOL expansion_test = FALSE;
1536 BOOL extract_recipients = FALSE;
1537 BOOL flag_G = FALSE;
1538 BOOL flag_n = FALSE;
1539 BOOL forced_delivery = FALSE;
1540 BOOL f_end_dot = FALSE;
1541 BOOL deliver_give_up = FALSE;
1542 BOOL list_queue = FALSE;
1543 BOOL list_options = FALSE;
1544 BOOL list_config = FALSE;
1545 BOOL local_queue_only;
1546 BOOL more = TRUE;
1547 BOOL one_msg_action = FALSE;
1548 BOOL opt_D_used = FALSE;
1549 BOOL queue_only_set = FALSE;
1550 BOOL receiving_message = TRUE;
1551 BOOL sender_ident_set = FALSE;
1552 BOOL session_local_queue_only;
1553 BOOL unprivileged;
1554 BOOL removed_privilege = FALSE;
1555 BOOL usage_wanted = FALSE;
1556 BOOL verify_address_mode = FALSE;
1557 BOOL verify_as_sender = FALSE;
1558 BOOL version_printed = FALSE;
1559 uschar *alias_arg = NULL;
1560 uschar *called_as = US"";
1561 uschar *cmdline_syslog_name = NULL;
1562 uschar *start_queue_run_id = NULL;
1563 uschar *stop_queue_run_id = NULL;
1564 uschar *expansion_test_message = NULL;
1565 uschar *ftest_domain = NULL;
1566 uschar *ftest_localpart = NULL;
1567 uschar *ftest_prefix = NULL;
1568 uschar *ftest_suffix = NULL;
1569 uschar *log_oneline = NULL;
1570 uschar *malware_test_file = NULL;
1571 uschar *real_sender_address;
1572 uschar *originator_home = US"/";
1573 size_t sz;
1574 rmark reset_point;
1575
1576 struct passwd *pw;
1577 struct stat statbuf;
1578 pid_t passed_qr_pid = (pid_t)0;
1579 int passed_qr_pipe = -1;
1580 gid_t group_list[EXIM_GROUPLIST_SIZE];
1581
1582 /* For the -bI: flag */
1583 enum commandline_info info_flag = CMDINFO_NONE;
1584 BOOL info_stdout = FALSE;
1585
1586 /* Possible options for -R and -S */
1587
1588 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1589
1590 /* Need to define this in case we need to change the environment in order
1591 to get rid of a bogus time zone. We have to make it char rather than uschar
1592 because some OS define it in /usr/include/unistd.h. */
1593
1594 extern char **environ;
1595
1596 #ifdef MEASURE_TIMING
1597 (void)gettimeofday(&timestamp_startup, NULL);
1598 #endif
1599
1600 /* If the Exim user and/or group and/or the configuration file owner/group were
1601 defined by ref:name at build time, we must now find the actual uid/gid values.
1602 This is a feature to make the lives of binary distributors easier. */
1603
1604 #ifdef EXIM_USERNAME
1605 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1606   {
1607   if (exim_uid == 0)
1608     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1609
1610   /* If ref:name uses a number as the name, route_finduser() returns
1611   TRUE with exim_uid set and pw coerced to NULL. */
1612   if (pw)
1613     exim_gid = pw->pw_gid;
1614 #ifndef EXIM_GROUPNAME
1615   else
1616     exim_fail(
1617         "exim: ref:name should specify a usercode, not a group.\n"
1618         "exim: can't let you get away with it unless you also specify a group.\n");
1619 #endif
1620   }
1621 else
1622   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1623 #endif
1624
1625 #ifdef EXIM_GROUPNAME
1626 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1627   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1628 #endif
1629
1630 #ifdef CONFIGURE_OWNERNAME
1631 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1632   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1633     CONFIGURE_OWNERNAME);
1634 #endif
1635
1636 /* We default the system_filter_user to be the Exim run-time user, as a
1637 sane non-root value. */
1638 system_filter_uid = exim_uid;
1639
1640 #ifdef CONFIGURE_GROUPNAME
1641 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1642   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1643     CONFIGURE_GROUPNAME);
1644 #endif
1645
1646 /* In the Cygwin environment, some initialization used to need doing.
1647 It was fudged in by means of this macro; now no longer but we'll leave
1648 it in case of others. */
1649
1650 #ifdef OS_INIT
1651 OS_INIT
1652 #endif
1653
1654 /* Check a field which is patched when we are running Exim within its
1655 testing harness; do a fast initial check, and then the whole thing. */
1656
1657 f.running_in_test_harness =
1658   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1659 if (f.running_in_test_harness)
1660   debug_store = TRUE;
1661
1662 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1663 at the start of a program; however, it seems that some environments do not
1664 follow this. A "strange" locale can affect the formatting of timestamps, so we
1665 make quite sure. */
1666
1667 setlocale(LC_ALL, "C");
1668
1669 /* Set up the default handler for timing using alarm(). */
1670
1671 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1672
1673 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1674 because store_malloc writes a log entry on failure. */
1675
1676 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1677   exim_fail("exim: failed to get store for log buffer\n");
1678
1679 /* Initialize the default log options. */
1680
1681 bits_set(log_selector, log_selector_size, log_default);
1682
1683 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1684 NULL when the daemon is run and the file is closed. We have to use this
1685 indirection, because some systems don't allow writing to the variable "stderr".
1686 */
1687
1688 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1689
1690 /* Arrange for the PCRE regex library to use our store functions. Note that
1691 the normal calls are actually macros that add additional arguments for
1692 debugging purposes so we have to assign specially constructed functions here.
1693 The default is to use store in the stacking pool, but this is overridden in the
1694 regex_must_compile() function. */
1695
1696 pcre_malloc = function_store_get;
1697 pcre_free = function_dummy_free;
1698
1699 /* Ensure there is a big buffer for temporary use in several places. It is put
1700 in malloc store so that it can be freed for enlargement if necessary. */
1701
1702 big_buffer = store_malloc(big_buffer_size);
1703
1704 /* Set up the handler for the data request signal, and set the initial
1705 descriptive text. */
1706
1707 process_info = store_get(PROCESS_INFO_SIZE, TRUE);      /* tainted */
1708 set_process_info("initializing");
1709 os_restarting_signal(SIGUSR1, usr1_handler);
1710
1711 /* If running in a dockerized environment, the TERM signal is only
1712 delegated to the PID 1 if we request it by setting an signal handler */
1713 if (getpid() == 1) signal(SIGTERM, term_handler);
1714
1715 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1716 in the daemon code. For the rest of Exim's uses, we ignore it. */
1717
1718 signal(SIGHUP, SIG_IGN);
1719
1720 /* We don't want to die on pipe errors as the code is written to handle
1721 the write error instead. */
1722
1723 signal(SIGPIPE, SIG_IGN);
1724
1725 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1726 set to SIG_IGN. This causes subprocesses that complete before the parent
1727 process waits for them not to hang around, so when Exim calls wait(), nothing
1728 is there. The wait() code has been made robust against this, but let's ensure
1729 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1730 ending status. We use sigaction rather than plain signal() on those OS where
1731 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1732 problem on AIX with this.) */
1733
1734 #ifdef SA_NOCLDWAIT
1735   {
1736   struct sigaction act;
1737   act.sa_handler = SIG_DFL;
1738   sigemptyset(&(act.sa_mask));
1739   act.sa_flags = 0;
1740   sigaction(SIGCHLD, &act, NULL);
1741   }
1742 #else
1743 signal(SIGCHLD, SIG_DFL);
1744 #endif
1745
1746 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1747 SIGHUP. */
1748
1749 sighup_argv = argv;
1750
1751 /* Set up the version number. Set up the leading 'E' for the external form of
1752 message ids, set the pointer to the internal form, and initialize it to
1753 indicate no message being processed. */
1754
1755 version_init();
1756 message_id_option[0] = '-';
1757 message_id_external = message_id_option + 1;
1758 message_id_external[0] = 'E';
1759 message_id = message_id_external + 1;
1760 message_id[0] = 0;
1761
1762 /* Set the umask to zero so that any files Exim creates using open() are
1763 created with the modes that it specifies. NOTE: Files created with fopen() have
1764 a problem, which was not recognized till rather late (February 2006). With this
1765 umask, such files will be world writeable. (They are all content scanning files
1766 in the spool directory, which isn't world-accessible, so this is not a
1767 disaster, but it's untidy.) I don't want to change this overall setting,
1768 however, because it will interact badly with the open() calls. Instead, there's
1769 now a function called modefopen() that fiddles with the umask while calling
1770 fopen(). */
1771
1772 (void)umask(0);
1773
1774 /* Precompile the regular expression for matching a message id. Keep this in
1775 step with the code that generates ids in the accept.c module. We need to do
1776 this here, because the -M options check their arguments for syntactic validity
1777 using mac_ismsgid, which uses this. */
1778
1779 regex_ismsgid =
1780   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
1781
1782 /* Precompile the regular expression that is used for matching an SMTP error
1783 code, possibly extended, at the start of an error message. Note that the
1784 terminating whitespace character is included. */
1785
1786 regex_smtp_code =
1787   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
1788     FALSE, TRUE);
1789
1790 #ifdef WHITELIST_D_MACROS
1791 /* Precompile the regular expression used to filter the content of macros
1792 given to -D for permissibility. */
1793
1794 regex_whitelisted_macro =
1795   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
1796 #endif
1797
1798 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
1799
1800 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
1801 this seems to be a generally accepted convention, since one finds symbolic
1802 links called "mailq" in standard OS configurations. */
1803
1804 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
1805     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
1806   {
1807   list_queue = TRUE;
1808   receiving_message = FALSE;
1809   called_as = US"-mailq";
1810   }
1811
1812 /* If the program is called as "rmail" treat it as equivalent to
1813 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
1814 i.e. preventing a single dot on a line from terminating the message, and
1815 returning with zero return code, even in cases of error (provided an error
1816 message has been sent). */
1817
1818 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
1819     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
1820   {
1821   f.dot_ends = FALSE;
1822   called_as = US"-rmail";
1823   errors_sender_rc = EXIT_SUCCESS;
1824   }
1825
1826 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
1827 this is a smail convention. */
1828
1829 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
1830     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
1831   {
1832   smtp_input = smtp_batched_input = TRUE;
1833   called_as = US"-rsmtp";
1834   }
1835
1836 /* If the program is called as "runq" treat it as equivalent to "exim -q";
1837 this is a smail convention. */
1838
1839 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
1840     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
1841   {
1842   queue_interval = 0;
1843   receiving_message = FALSE;
1844   called_as = US"-runq";
1845   }
1846
1847 /* If the program is called as "newaliases" treat it as equivalent to
1848 "exim -bi"; this is a sendmail convention. */
1849
1850 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
1851     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
1852   {
1853   bi_option = TRUE;
1854   receiving_message = FALSE;
1855   called_as = US"-newaliases";
1856   }
1857
1858 /* Save the original effective uid for a couple of uses later. It should
1859 normally be root, but in some esoteric environments it may not be. */
1860
1861 original_euid = geteuid();
1862 original_egid = getegid();
1863
1864 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
1865 to be the same as the real ones. This makes a difference only if Exim is setuid
1866 (or setgid) to something other than root, which could be the case in some
1867 special configurations. */
1868
1869 real_uid = getuid();
1870 real_gid = getgid();
1871
1872 if (real_uid == root_uid)
1873   {
1874   if ((rv = setgid(real_gid)))
1875     exim_fail("exim: setgid(%ld) failed: %s\n",
1876         (long int)real_gid, strerror(errno));
1877   if ((rv = setuid(real_uid)))
1878     exim_fail("exim: setuid(%ld) failed: %s\n",
1879         (long int)real_uid, strerror(errno));
1880   }
1881
1882 /* If neither the original real uid nor the original euid was root, Exim is
1883 running in an unprivileged state. */
1884
1885 unprivileged = (real_uid != root_uid && original_euid != root_uid);
1886
1887 /* Scan the program's arguments. Some can be dealt with right away; others are
1888 simply recorded for checking and handling afterwards. Do a high-level switch
1889 on the second character (the one after '-'), to save some effort. */
1890
1891 for (i = 1; i < argc; i++)
1892   {
1893   BOOL badarg = FALSE;
1894   uschar *arg = argv[i];
1895   uschar *argrest;
1896   int switchchar;
1897
1898   /* An argument not starting with '-' is the start of a recipients list;
1899   break out of the options-scanning loop. */
1900
1901   if (arg[0] != '-')
1902     {
1903     recipients_arg = i;
1904     break;
1905     }
1906
1907   /* An option consisting of -- terminates the options */
1908
1909   if (Ustrcmp(arg, "--") == 0)
1910     {
1911     recipients_arg = i + 1;
1912     break;
1913     }
1914
1915   /* Handle flagged options */
1916
1917   switchchar = arg[1];
1918   argrest = arg+2;
1919
1920   /* Make all -ex options synonymous with -oex arguments, since that
1921   is assumed by various callers. Also make -qR options synonymous with -R
1922   options, as that seems to be required as well. Allow for -qqR too, and
1923   the same for -S options. */
1924
1925   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
1926       Ustrncmp(arg+1, "qR", 2) == 0 ||
1927       Ustrncmp(arg+1, "qS", 2) == 0)
1928     {
1929     switchchar = arg[2];
1930     argrest++;
1931     }
1932   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
1933     {
1934     switchchar = arg[3];
1935     argrest += 2;
1936     f.queue_2stage = TRUE;
1937     }
1938
1939   /* Make -r synonymous with -f, since it is a documented alias */
1940
1941   else if (arg[1] == 'r') switchchar = 'f';
1942
1943   /* Make -ov synonymous with -v */
1944
1945   else if (Ustrcmp(arg, "-ov") == 0)
1946     {
1947     switchchar = 'v';
1948     argrest++;
1949     }
1950
1951   /* deal with --option_aliases */
1952   else if (switchchar == '-')
1953     {
1954     if (Ustrcmp(argrest, "help") == 0)
1955       {
1956       usage_wanted = TRUE;
1957       break;
1958       }
1959     else if (Ustrcmp(argrest, "version") == 0)
1960       {
1961       switchchar = 'b';
1962       argrest = US"V";
1963       }
1964     }
1965
1966   /* High-level switch on active initial letter */
1967
1968   switch(switchchar)
1969     {
1970
1971     /* sendmail uses -Ac and -Am to control which .cf file is used;
1972     we ignore them. */
1973     case 'A':
1974     if (*argrest == '\0') { badarg = TRUE; break; }
1975     else
1976       {
1977       BOOL ignore = FALSE;
1978       switch (*argrest)
1979         {
1980         case 'c':
1981         case 'm':
1982           if (*(argrest + 1) == '\0')
1983             ignore = TRUE;
1984           break;
1985         }
1986       if (!ignore) { badarg = TRUE; break; }
1987       }
1988     break;
1989
1990     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
1991     so has no need of it. */
1992
1993     case 'B':
1994     if (*argrest == 0) i++;       /* Skip over the type */
1995     break;
1996
1997
1998     case 'b':
1999     receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2000
2001     /* -bd:  Run in daemon mode, awaiting SMTP connections.
2002        -bdf: Ditto, but in the foreground.
2003     */
2004
2005     if (*argrest == 'd')
2006       {
2007       f.daemon_listen = TRUE;
2008       if (*(++argrest) == 'f') f.background_daemon = FALSE;
2009         else if (*argrest != 0) { badarg = TRUE; break; }
2010       }
2011
2012     /* -be:  Run in expansion test mode
2013        -bem: Ditto, but read a message from a file first
2014     */
2015
2016     else if (*argrest == 'e')
2017       {
2018       expansion_test = checking = TRUE;
2019       if (argrest[1] == 'm')
2020         {
2021         if (++i >= argc) { badarg = TRUE; break; }
2022         expansion_test_message = argv[i];
2023         argrest++;
2024         }
2025       if (argrest[1] != 0) { badarg = TRUE; break; }
2026       }
2027
2028     /* -bF:  Run system filter test */
2029
2030     else if (*argrest == 'F')
2031       {
2032       filter_test |= checking = FTEST_SYSTEM;
2033       if (*(++argrest) != 0) { badarg = TRUE; break; }
2034       if (++i < argc) filter_test_sfile = argv[i]; else
2035         exim_fail("exim: file name expected after %s\n", argv[i-1]);
2036       }
2037
2038     /* -bf:  Run user filter test
2039        -bfd: Set domain for filter testing
2040        -bfl: Set local part for filter testing
2041        -bfp: Set prefix for filter testing
2042        -bfs: Set suffix for filter testing
2043     */
2044
2045     else if (*argrest == 'f')
2046       {
2047       if (*(++argrest) == 0)
2048         {
2049         filter_test |= checking = FTEST_USER;
2050         if (++i < argc) filter_test_ufile = argv[i]; else
2051           exim_fail("exim: file name expected after %s\n", argv[i-1]);
2052         }
2053       else
2054         {
2055         if (++i >= argc)
2056           exim_fail("exim: string expected after %s\n", arg);
2057         if (Ustrcmp(argrest, "d") == 0) ftest_domain = argv[i];
2058         else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = argv[i];
2059         else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = argv[i];
2060         else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = argv[i];
2061         else { badarg = TRUE; break; }
2062         }
2063       }
2064
2065     /* -bh: Host checking - an IP address must follow. */
2066
2067     else if (Ustrcmp(argrest, "h") == 0 || Ustrcmp(argrest, "hc") == 0)
2068       {
2069       if (++i >= argc) { badarg = TRUE; break; }
2070       sender_host_address = argv[i];
2071       host_checking = checking = f.log_testing_mode = TRUE;
2072       f.host_checking_callout = argrest[1] == 'c';
2073       message_logs = FALSE;
2074       }
2075
2076     /* -bi: This option is used by sendmail to initialize *the* alias file,
2077     though it has the -oA option to specify a different file. Exim has no
2078     concept of *the* alias file, but since Sun's YP make script calls
2079     sendmail this way, some support must be provided. */
2080
2081     else if (Ustrcmp(argrest, "i") == 0) bi_option = TRUE;
2082
2083     /* -bI: provide information, of the type to follow after a colon.
2084     This is an Exim flag. */
2085
2086     else if (argrest[0] == 'I' && Ustrlen(argrest) >= 2 && argrest[1] == ':')
2087       {
2088       uschar *p = &argrest[2];
2089       info_flag = CMDINFO_HELP;
2090       if (Ustrlen(p))
2091         {
2092         if (strcmpic(p, CUS"sieve") == 0)
2093           {
2094           info_flag = CMDINFO_SIEVE;
2095           info_stdout = TRUE;
2096           }
2097         else if (strcmpic(p, CUS"dscp") == 0)
2098           {
2099           info_flag = CMDINFO_DSCP;
2100           info_stdout = TRUE;
2101           }
2102         else if (strcmpic(p, CUS"help") == 0)
2103           {
2104           info_stdout = TRUE;
2105           }
2106         }
2107       }
2108
2109     /* -bm: Accept and deliver message - the default option. Reinstate
2110     receiving_message, which got turned off for all -b options. */
2111
2112     else if (Ustrcmp(argrest, "m") == 0) receiving_message = TRUE;
2113
2114     /* -bmalware: test the filename given for malware */
2115
2116     else if (Ustrcmp(argrest, "malware") == 0)
2117       {
2118       if (++i >= argc) { badarg = TRUE; break; }
2119       checking = TRUE;
2120       malware_test_file = argv[i];
2121       }
2122
2123     /* -bnq: For locally originating messages, do not qualify unqualified
2124     addresses. In the envelope, this causes errors; in header lines they
2125     just get left. */
2126
2127     else if (Ustrcmp(argrest, "nq") == 0)
2128       {
2129       f.allow_unqualified_sender = FALSE;
2130       f.allow_unqualified_recipient = FALSE;
2131       }
2132
2133     /* -bpxx: List the contents of the mail queue, in various forms. If
2134     the option is -bpc, just a queue count is needed. Otherwise, if the
2135     first letter after p is r, then order is random. */
2136
2137     else if (*argrest == 'p')
2138       {
2139       if (*(++argrest) == 'c')
2140         {
2141         count_queue = TRUE;
2142         if (*(++argrest) != 0) badarg = TRUE;
2143         break;
2144         }
2145
2146       if (*argrest == 'r')
2147         {
2148         list_queue_option = 8;
2149         argrest++;
2150         }
2151       else list_queue_option = 0;
2152
2153       list_queue = TRUE;
2154
2155       /* -bp: List the contents of the mail queue, top-level only */
2156
2157       if (*argrest == 0) {}
2158
2159       /* -bpu: List the contents of the mail queue, top-level undelivered */
2160
2161       else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2162
2163       /* -bpa: List the contents of the mail queue, including all delivered */
2164
2165       else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2166
2167       /* Unknown after -bp[r] */
2168
2169       else
2170         {
2171         badarg = TRUE;
2172         break;
2173         }
2174       }
2175
2176
2177     /* -bP: List the configuration variables given as the address list.
2178     Force -v, so configuration errors get displayed. */
2179
2180     else if (Ustrcmp(argrest, "P") == 0)
2181       {
2182       /* -bP config: we need to setup here, because later,
2183        * when list_options is checked, the config is read already */
2184       if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2185         {
2186         list_config = TRUE;
2187         readconf_save_config(version_string);
2188         }
2189       else
2190         {
2191         list_options = TRUE;
2192         debug_selector |= D_v;
2193         debug_file = stderr;
2194         }
2195       }
2196
2197     /* -brt: Test retry configuration lookup */
2198
2199     else if (Ustrcmp(argrest, "rt") == 0)
2200       {
2201       checking = TRUE;
2202       test_retry_arg = i + 1;
2203       goto END_ARG;
2204       }
2205
2206     /* -brw: Test rewrite configuration */
2207
2208     else if (Ustrcmp(argrest, "rw") == 0)
2209       {
2210       checking = TRUE;
2211       test_rewrite_arg = i + 1;
2212       goto END_ARG;
2213       }
2214
2215     /* -bS: Read SMTP commands on standard input, but produce no replies -
2216     all errors are reported by sending messages. */
2217
2218     else if (Ustrcmp(argrest, "S") == 0)
2219       smtp_input = smtp_batched_input = receiving_message = TRUE;
2220
2221     /* -bs: Read SMTP commands on standard input and produce SMTP replies
2222     on standard output. */
2223
2224     else if (Ustrcmp(argrest, "s") == 0) smtp_input = receiving_message = TRUE;
2225
2226     /* -bt: address testing mode */
2227
2228     else if (Ustrcmp(argrest, "t") == 0)
2229       f.address_test_mode = checking = f.log_testing_mode = TRUE;
2230
2231     /* -bv: verify addresses */
2232
2233     else if (Ustrcmp(argrest, "v") == 0)
2234       verify_address_mode = checking = f.log_testing_mode = TRUE;
2235
2236     /* -bvs: verify sender addresses */
2237
2238     else if (Ustrcmp(argrest, "vs") == 0)
2239       {
2240       verify_address_mode = checking = f.log_testing_mode = TRUE;
2241       verify_as_sender = TRUE;
2242       }
2243
2244     /* -bV: Print version string and support details */
2245
2246     else if (Ustrcmp(argrest, "V") == 0)
2247       {
2248       printf("Exim version %s #%s built %s\n", version_string,
2249         version_cnumber, version_date);
2250       printf("%s\n", CS version_copyright);
2251       version_printed = TRUE;
2252       show_whats_supported(stdout);
2253       f.log_testing_mode = TRUE;
2254       }
2255
2256     /* -bw: inetd wait mode, accept a listening socket as stdin */
2257
2258     else if (*argrest == 'w')
2259       {
2260       f.inetd_wait_mode = TRUE;
2261       f.background_daemon = FALSE;
2262       f.daemon_listen = TRUE;
2263       if (*(++argrest) != '\0')
2264         if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2265           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2266       }
2267
2268     else badarg = TRUE;
2269     break;
2270
2271
2272     /* -C: change configuration file list; ignore if it isn't really
2273     a change! Enforce a prefix check if required. */
2274
2275     case 'C':
2276     if (*argrest == 0)
2277       {
2278       if(++i < argc) argrest = argv[i]; else
2279         { badarg = TRUE; break; }
2280       }
2281     if (Ustrcmp(config_main_filelist, argrest) != 0)
2282       {
2283       #ifdef ALT_CONFIG_PREFIX
2284       int sep = 0;
2285       int len = Ustrlen(ALT_CONFIG_PREFIX);
2286       const uschar *list = argrest;
2287       uschar *filename;
2288       while((filename = string_nextinlist(&list, &sep, big_buffer,
2289              big_buffer_size)) != NULL)
2290         {
2291         if ((Ustrlen(filename) < len ||
2292              Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0 ||
2293              Ustrstr(filename, "/../") != NULL) &&
2294              (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid))
2295           exim_fail("-C Permission denied\n");
2296         }
2297       #endif
2298       if (real_uid != root_uid)
2299         {
2300         #ifdef TRUSTED_CONFIG_LIST
2301
2302         if (real_uid != exim_uid
2303             #ifdef CONFIGURE_OWNER
2304             && real_uid != config_uid
2305             #endif
2306             )
2307           f.trusted_config = FALSE;
2308         else
2309           {
2310           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2311           if (trust_list)
2312             {
2313             struct stat statbuf;
2314
2315             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2316                 (statbuf.st_uid != root_uid        /* owner not root */
2317                  #ifdef CONFIGURE_OWNER
2318                  && statbuf.st_uid != config_uid   /* owner not the special one */
2319                  #endif
2320                    ) ||                            /* or */
2321                 (statbuf.st_gid != root_gid        /* group not root */
2322                  #ifdef CONFIGURE_GROUP
2323                  && statbuf.st_gid != config_gid   /* group not the special one */
2324                  #endif
2325                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2326                    ) ||                            /* or */
2327                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2328               {
2329               f.trusted_config = FALSE;
2330               fclose(trust_list);
2331               }
2332             else
2333               {
2334               /* Well, the trust list at least is up to scratch... */
2335               rmark reset_point = store_mark();
2336               uschar *trusted_configs[32];
2337               int nr_configs = 0;
2338               int i = 0;
2339
2340               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2341                 {
2342                 uschar *start = big_buffer, *nl;
2343                 while (*start && isspace(*start))
2344                 start++;
2345                 if (*start != '/')
2346                   continue;
2347                 nl = Ustrchr(start, '\n');
2348                 if (nl)
2349                   *nl = 0;
2350                 trusted_configs[nr_configs++] = string_copy(start);
2351                 if (nr_configs == 32)
2352                   break;
2353                 }
2354               fclose(trust_list);
2355
2356               if (nr_configs)
2357                 {
2358                 int sep = 0;
2359                 const uschar *list = argrest;
2360                 uschar *filename;
2361                 while (f.trusted_config && (filename = string_nextinlist(&list,
2362                         &sep, big_buffer, big_buffer_size)) != NULL)
2363                   {
2364                   for (i=0; i < nr_configs; i++)
2365                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2366                       break;
2367                   if (i == nr_configs)
2368                     {
2369                     f.trusted_config = FALSE;
2370                     break;
2371                     }
2372                   }
2373                 }
2374               else      /* No valid prefixes found in trust_list file. */
2375                 f.trusted_config = FALSE;
2376               store_reset(reset_point);
2377               }
2378             }
2379           else          /* Could not open trust_list file. */
2380             f.trusted_config = FALSE;
2381           }
2382       #else
2383         /* Not root; don't trust config */
2384         f.trusted_config = FALSE;
2385       #endif
2386         }
2387
2388       config_main_filelist = argrest;
2389       f.config_changed = TRUE;
2390       }
2391     break;
2392
2393
2394     /* -D: set up a macro definition */
2395
2396     case 'D':
2397 #ifdef DISABLE_D_OPTION
2398       exim_fail("exim: -D is not available in this Exim binary\n");
2399 #else
2400       {
2401       int ptr = 0;
2402       macro_item *m;
2403       uschar name[24];
2404       uschar *s = argrest;
2405
2406       opt_D_used = TRUE;
2407       while (isspace(*s)) s++;
2408
2409       if (*s < 'A' || *s > 'Z')
2410         exim_fail("exim: macro name set by -D must start with "
2411           "an upper case letter\n");
2412
2413       while (isalnum(*s) || *s == '_')
2414         {
2415         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2416         s++;
2417         }
2418       name[ptr] = 0;
2419       if (ptr == 0) { badarg = TRUE; break; }
2420       while (isspace(*s)) s++;
2421       if (*s != 0)
2422         {
2423         if (*s++ != '=') { badarg = TRUE; break; }
2424         while (isspace(*s)) s++;
2425         }
2426
2427       for (m = macros_user; m; m = m->next)
2428         if (Ustrcmp(m->name, name) == 0)
2429           exim_fail("exim: duplicated -D in command line\n");
2430
2431       m = macro_create(name, s, TRUE);
2432
2433       if (clmacro_count >= MAX_CLMACROS)
2434         exim_fail("exim: too many -D options on command line\n");
2435       clmacros[clmacro_count++] =
2436         string_sprintf("-D%s=%s", m->name, m->replacement);
2437       }
2438     #endif
2439     break;
2440
2441     /* -d: Set debug level (see also -v below) or set the drop_cr option.
2442     The latter is now a no-op, retained for compatibility only. If -dd is used,
2443     debugging subprocesses of the daemon is disabled. */
2444
2445     case 'd':
2446     if (Ustrcmp(argrest, "ropcr") == 0)
2447       {
2448       /* drop_cr = TRUE; */
2449       }
2450
2451     /* Use an intermediate variable so that we don't set debugging while
2452     decoding the debugging bits. */
2453
2454     else
2455       {
2456       unsigned int selector = D_default;
2457       debug_selector = 0;
2458       debug_file = NULL;
2459       if (*argrest == 'd')
2460         {
2461         f.debug_daemon = TRUE;
2462         argrest++;
2463         }
2464       if (*argrest != 0)
2465         decode_bits(&selector, 1, debug_notall, argrest,
2466           debug_options, debug_options_count, US"debug", 0);
2467       debug_selector = selector;
2468       }
2469     break;
2470
2471
2472     /* -E: This is a local error message. This option is not intended for
2473     external use at all, but is not restricted to trusted callers because it
2474     does no harm (just suppresses certain error messages) and if Exim is run
2475     not setuid root it won't always be trusted when it generates error
2476     messages using this option. If there is a message id following -E, point
2477     message_reference at it, for logging. */
2478
2479     case 'E':
2480     f.local_error_message = TRUE;
2481     if (mac_ismsgid(argrest)) message_reference = argrest;
2482     break;
2483
2484
2485     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2486     option, so it looks as if historically the -oex options are also callable
2487     without the leading -o. So we have to accept them. Before the switch,
2488     anything starting -oe has been converted to -e. Exim does not support all
2489     of the sendmail error options. */
2490
2491     case 'e':
2492     if (Ustrcmp(argrest, "e") == 0)
2493       {
2494       arg_error_handling = ERRORS_SENDER;
2495       errors_sender_rc = EXIT_SUCCESS;
2496       }
2497     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2498     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2499     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2500     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2501     else badarg = TRUE;
2502     break;
2503
2504
2505     /* -F: Set sender's full name, used instead of the gecos entry from
2506     the password file. Since users can usually alter their gecos entries,
2507     there's no security involved in using this instead. The data can follow
2508     the -F or be in the next argument. */
2509
2510     case 'F':
2511     if (*argrest == 0)
2512       {
2513       if(++i < argc) argrest = argv[i]; else
2514         { badarg = TRUE; break; }
2515       }
2516     originator_name = argrest;
2517     f.sender_name_forced = TRUE;
2518     break;
2519
2520
2521     /* -f: Set sender's address - this value is only actually used if Exim is
2522     run by a trusted user, or if untrusted_set_sender is set and matches the
2523     address, except that the null address can always be set by any user. The
2524     test for this happens later, when the value given here is ignored when not
2525     permitted. For an untrusted user, the actual sender is still put in Sender:
2526     if it doesn't match the From: header (unless no_local_from_check is set).
2527     The data can follow the -f or be in the next argument. The -r switch is an
2528     obsolete form of -f but since there appear to be programs out there that
2529     use anything that sendmail has ever supported, better accept it - the
2530     synonymizing is done before the switch above.
2531
2532     At this stage, we must allow domain literal addresses, because we don't
2533     know what the setting of allow_domain_literals is yet. Ditto for trailing
2534     dots and strip_trailing_dot. */
2535
2536     case 'f':
2537       {
2538       int dummy_start, dummy_end;
2539       uschar *errmess;
2540       if (*argrest == 0)
2541         {
2542         if (i+1 < argc) argrest = argv[++i]; else
2543           { badarg = TRUE; break; }
2544         }
2545       if (*argrest == 0)
2546         *(sender_address = store_get(1, FALSE)) = '\0';  /* Ensure writeable memory */
2547       else
2548         {
2549         uschar *temp = argrest + Ustrlen(argrest) - 1;
2550         while (temp >= argrest && isspace(*temp)) temp--;
2551         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2552         allow_domain_literals = TRUE;
2553         strip_trailing_dot = TRUE;
2554 #ifdef SUPPORT_I18N
2555         allow_utf8_domains = TRUE;
2556 #endif
2557         sender_address = parse_extract_address(argrest, &errmess,
2558           &dummy_start, &dummy_end, &sender_address_domain, TRUE);
2559         sender_address = string_copy_taint(sender_address, TRUE);
2560 #ifdef SUPPORT_I18N
2561         message_smtputf8 =  string_is_utf8(sender_address);
2562         allow_utf8_domains = FALSE;
2563 #endif
2564         allow_domain_literals = FALSE;
2565         strip_trailing_dot = FALSE;
2566         if (!sender_address)
2567           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2568         }
2569       f.sender_address_forced = TRUE;
2570       }
2571     break;
2572
2573     /* -G: sendmail invocation to specify that it's a gateway submission and
2574     sendmail may complain about problems instead of fixing them.
2575     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2576     not at this time complain about problems. */
2577
2578     case 'G':
2579     flag_G = TRUE;
2580     break;
2581
2582     /* -h: Set the hop count for an incoming message. Exim does not currently
2583     support this; it always computes it by counting the Received: headers.
2584     To put it in will require a change to the spool header file format. */
2585
2586     case 'h':
2587     if (*argrest == 0)
2588       {
2589       if(++i < argc) argrest = argv[i]; else
2590         { badarg = TRUE; break; }
2591       }
2592     if (!isdigit(*argrest)) badarg = TRUE;
2593     break;
2594
2595
2596     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2597     not to be documented for sendmail but mailx (at least) uses it) */
2598
2599     case 'i':
2600     if (*argrest == 0) f.dot_ends = FALSE; else badarg = TRUE;
2601     break;
2602
2603
2604     /* -L: set the identifier used for syslog; equivalent to setting
2605     syslog_processname in the config file, but needs to be an admin option. */
2606
2607     case 'L':
2608     if (*argrest == '\0')
2609       {
2610       if(++i < argc) argrest = argv[i]; else
2611         { badarg = TRUE; break; }
2612       }
2613     if ((sz = Ustrlen(argrest)) > 32)
2614       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2615     if (sz < 1)
2616       exim_fail("exim: the -L syslog name is too short\n");
2617     cmdline_syslog_name = argrest;
2618     break;
2619
2620     case 'M':
2621     receiving_message = FALSE;
2622
2623     /* -MC:  continue delivery of another message via an existing open
2624     file descriptor. This option is used for an internal call by the
2625     smtp transport when there is a pending message waiting to go to an
2626     address to which it has got a connection. Five subsequent arguments are
2627     required: transport name, host name, IP address, sequence number, and
2628     message_id. Transports may decline to create new processes if the sequence
2629     number gets too big. The channel is stdin. This (-MC) must be the last
2630     argument. There's a subsequent check that the real-uid is privileged.
2631
2632     If we are running in the test harness. delay for a bit, to let the process
2633     that set this one up complete. This makes for repeatability of the logging,
2634     etc. output. */
2635
2636     if (Ustrcmp(argrest, "C") == 0)
2637       {
2638       union sockaddr_46 interface_sock;
2639       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2640
2641       if (argc != i + 6)
2642         exim_fail("exim: too many or too few arguments after -MC\n");
2643
2644       if (msg_action_arg >= 0)
2645         exim_fail("exim: incompatible arguments\n");
2646
2647       continue_transport = argv[++i];
2648       continue_hostname = argv[++i];
2649       continue_host_address = argv[++i];
2650       continue_sequence = Uatoi(argv[++i]);
2651       msg_action = MSG_DELIVER;
2652       msg_action_arg = ++i;
2653       forced_delivery = TRUE;
2654       queue_run_pid = passed_qr_pid;
2655       queue_run_pipe = passed_qr_pipe;
2656
2657       if (!mac_ismsgid(argv[i]))
2658         exim_fail("exim: malformed message id %s after -MC option\n",
2659           argv[i]);
2660
2661       /* Set up $sending_ip_address and $sending_port, unless proxied */
2662
2663       if (!continue_proxy_cipher)
2664         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2665             &size) == 0)
2666           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2667             &sending_port);
2668         else
2669           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2670             strerror(errno));
2671
2672       testharness_pause_ms(500);
2673       break;
2674       }
2675
2676     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2677       {
2678       switch(argrest[1])
2679         {
2680     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2681     precedes -MC (see above). The flag indicates that the host to which
2682     Exim is connected has accepted an AUTH sequence. */
2683
2684         case 'A': f.smtp_authenticated = TRUE; break;
2685
2686     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2687        that exim is connected to supports the esmtp extension DSN */
2688
2689         case 'D': smtp_peer_options |= OPTION_DSN; break;
2690
2691     /* -MCG: set the queue name, to a non-default value */
2692
2693         case 'G': if (++i < argc) queue_name = string_copy(argv[i]);
2694                   else badarg = TRUE;
2695                   break;
2696
2697     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2698
2699         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2700
2701     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2702     it preceded -MC (see above) */
2703
2704         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2705
2706     /* -MCQ: pass on the pid of the queue-running process that started
2707     this chain of deliveries and the fd of its synchronizing pipe; this
2708     is useful only when it precedes -MC (see above) */
2709
2710         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
2711                   else badarg = TRUE;
2712                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
2713                   else badarg = TRUE;
2714                   break;
2715
2716     /* -MCS: set the smtp_use_size flag; this is useful only when it
2717     precedes -MC (see above) */
2718
2719         case 'S': smtp_peer_options |= OPTION_SIZE; break;
2720
2721 #ifndef DISABLE_TLS
2722     /* -MCt: similar to -MCT below but the connection is still open
2723     via a proxy process which handles the TLS context and coding.
2724     Require three arguments for the proxied local address and port,
2725     and the TLS cipher.  */
2726
2727         case 't': if (++i < argc) sending_ip_address = argv[i];
2728                   else badarg = TRUE;
2729                   if (++i < argc) sending_port = (int)(Uatol(argv[i]));
2730                   else badarg = TRUE;
2731                   if (++i < argc) continue_proxy_cipher = argv[i];
2732                   else badarg = TRUE;
2733                   /*FALLTHROUGH*/
2734
2735     /* -MCT: set the tls_offered flag; this is useful only when it
2736     precedes -MC (see above). The flag indicates that the host to which
2737     Exim is connected has offered TLS support. */
2738
2739         case 'T': smtp_peer_options |= OPTION_TLS; break;
2740 #endif
2741
2742         default:  badarg = TRUE; break;
2743         }
2744       break;
2745       }
2746
2747     /* -M[x]: various operations on the following list of message ids:
2748        -M    deliver the messages, ignoring next retry times and thawing
2749        -Mc   deliver the messages, checking next retry times, no thawing
2750        -Mf   freeze the messages
2751        -Mg   give up on the messages
2752        -Mt   thaw the messages
2753        -Mrm  remove the messages
2754     In the above cases, this must be the last option. There are also the
2755     following options which are followed by a single message id, and which
2756     act on that message. Some of them use the "recipient" addresses as well.
2757        -Mar  add recipient(s)
2758        -Mmad mark all recipients delivered
2759        -Mmd  mark recipients(s) delivered
2760        -Mes  edit sender
2761        -Mset load a message for use with -be
2762        -Mvb  show body
2763        -Mvc  show copy (of whole message, in RFC 2822 format)
2764        -Mvh  show header
2765        -Mvl  show log
2766     */
2767
2768     else if (*argrest == 0)
2769       {
2770       msg_action = MSG_DELIVER;
2771       forced_delivery = f.deliver_force_thaw = TRUE;
2772       }
2773     else if (Ustrcmp(argrest, "ar") == 0)
2774       {
2775       msg_action = MSG_ADD_RECIPIENT;
2776       one_msg_action = TRUE;
2777       }
2778     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
2779     else if (Ustrcmp(argrest, "es") == 0)
2780       {
2781       msg_action = MSG_EDIT_SENDER;
2782       one_msg_action = TRUE;
2783       }
2784     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
2785     else if (Ustrcmp(argrest, "g") == 0)
2786       {
2787       msg_action = MSG_DELIVER;
2788       deliver_give_up = TRUE;
2789       }
2790    else if (Ustrcmp(argrest, "G") == 0)
2791       {
2792       msg_action = MSG_SETQUEUE;
2793       queue_name_dest = argv[++i];
2794       }
2795     else if (Ustrcmp(argrest, "mad") == 0)
2796       {
2797       msg_action = MSG_MARK_ALL_DELIVERED;
2798       }
2799     else if (Ustrcmp(argrest, "md") == 0)
2800       {
2801       msg_action = MSG_MARK_DELIVERED;
2802       one_msg_action = TRUE;
2803       }
2804     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
2805     else if (Ustrcmp(argrest, "set") == 0)
2806       {
2807       msg_action = MSG_LOAD;
2808       one_msg_action = TRUE;
2809       }
2810     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
2811     else if (Ustrcmp(argrest, "vb") == 0)
2812       {
2813       msg_action = MSG_SHOW_BODY;
2814       one_msg_action = TRUE;
2815       }
2816     else if (Ustrcmp(argrest, "vc") == 0)
2817       {
2818       msg_action = MSG_SHOW_COPY;
2819       one_msg_action = TRUE;
2820       }
2821     else if (Ustrcmp(argrest, "vh") == 0)
2822       {
2823       msg_action = MSG_SHOW_HEADER;
2824       one_msg_action = TRUE;
2825       }
2826     else if (Ustrcmp(argrest, "vl") == 0)
2827       {
2828       msg_action = MSG_SHOW_LOG;
2829       one_msg_action = TRUE;
2830       }
2831     else { badarg = TRUE; break; }
2832
2833     /* All the -Mxx options require at least one message id. */
2834
2835     msg_action_arg = i + 1;
2836     if (msg_action_arg >= argc)
2837       exim_fail("exim: no message ids given after %s option\n", arg);
2838
2839     /* Some require only message ids to follow */
2840
2841     if (!one_msg_action)
2842       {
2843       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
2844         exim_fail("exim: malformed message id %s after %s option\n",
2845           argv[j], arg);
2846       goto END_ARG;   /* Remaining args are ids */
2847       }
2848
2849     /* Others require only one message id, possibly followed by addresses,
2850     which will be handled as normal arguments. */
2851
2852     else
2853       {
2854       if (!mac_ismsgid(argv[msg_action_arg]))
2855         exim_fail("exim: malformed message id %s after %s option\n",
2856           argv[msg_action_arg], arg);
2857       i++;
2858       }
2859     break;
2860
2861
2862     /* Some programs seem to call the -om option without the leading o;
2863     for sendmail it askes for "me too". Exim always does this. */
2864
2865     case 'm':
2866     if (*argrest != 0) badarg = TRUE;
2867     break;
2868
2869
2870     /* -N: don't do delivery - a debugging option that stops transports doing
2871     their thing. It implies debugging at the D_v level. */
2872
2873     case 'N':
2874     if (*argrest == 0)
2875       {
2876       f.dont_deliver = TRUE;
2877       debug_selector |= D_v;
2878       debug_file = stderr;
2879       }
2880     else badarg = TRUE;
2881     break;
2882
2883
2884     /* -n: This means "don't alias" in sendmail, apparently.
2885     For normal invocations, it has no effect.
2886     It may affect some other options. */
2887
2888     case 'n':
2889     flag_n = TRUE;
2890     break;
2891
2892     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
2893     option to the specified value. This form uses long names. We need to handle
2894     -O option=value and -Ooption=value. */
2895
2896     case 'O':
2897     if (*argrest == 0)
2898       {
2899       if (++i >= argc)
2900         exim_fail("exim: string expected after -O\n");
2901       }
2902     break;
2903
2904     case 'o':
2905
2906     /* -oA: Set an argument for the bi command (sendmail's "alternate alias
2907     file" option). */
2908
2909     if (*argrest == 'A')
2910       {
2911       alias_arg = argrest + 1;
2912       if (alias_arg[0] == 0)
2913         {
2914         if (i+1 < argc) alias_arg = argv[++i]; else
2915           exim_fail("exim: string expected after -oA\n");
2916         }
2917       }
2918
2919     /* -oB: Set a connection message max value for remote deliveries */
2920
2921     else if (*argrest == 'B')
2922       {
2923       uschar *p = argrest + 1;
2924       if (p[0] == 0)
2925         {
2926         if (i+1 < argc && isdigit((argv[i+1][0]))) p = argv[++i]; else
2927           {
2928           connection_max_messages = 1;
2929           p = NULL;
2930           }
2931         }
2932
2933       if (p != NULL)
2934         {
2935         if (!isdigit(*p))
2936           exim_fail("exim: number expected after -oB\n");
2937         connection_max_messages = Uatoi(p);
2938         }
2939       }
2940
2941     /* -odb: background delivery */
2942
2943     else if (Ustrcmp(argrest, "db") == 0)
2944       {
2945       f.synchronous_delivery = FALSE;
2946       arg_queue_only = FALSE;
2947       queue_only_set = TRUE;
2948       }
2949
2950     /* -odf: foreground delivery (smail-compatible option); same effect as
2951        -odi: interactive (synchronous) delivery (sendmail-compatible option)
2952     */
2953
2954     else if (Ustrcmp(argrest, "df") == 0 || Ustrcmp(argrest, "di") == 0)
2955       {
2956       f.synchronous_delivery = TRUE;
2957       arg_queue_only = FALSE;
2958       queue_only_set = TRUE;
2959       }
2960
2961     /* -odq: queue only */
2962
2963     else if (Ustrcmp(argrest, "dq") == 0)
2964       {
2965       f.synchronous_delivery = FALSE;
2966       arg_queue_only = TRUE;
2967       queue_only_set = TRUE;
2968       }
2969
2970     /* -odqs: queue SMTP only - do local deliveries and remote routing,
2971     but no remote delivery */
2972
2973     else if (Ustrcmp(argrest, "dqs") == 0)
2974       {
2975       f.queue_smtp = TRUE;
2976       arg_queue_only = FALSE;
2977       queue_only_set = TRUE;
2978       }
2979
2980     /* -oex: Sendmail error flags. As these are also accepted without the
2981     leading -o prefix, for compatibility with vacation and other callers,
2982     they are handled with -e above. */
2983
2984     /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
2985        -oitrue: Another sendmail syntax for the same */
2986
2987     else if (Ustrcmp(argrest, "i") == 0 ||
2988              Ustrcmp(argrest, "itrue") == 0)
2989       f.dot_ends = FALSE;
2990
2991     /* -oM*: Set various characteristics for an incoming message; actually
2992     acted on for trusted callers only. */
2993
2994     else if (*argrest == 'M')
2995       {
2996       if (i+1 >= argc)
2997         exim_fail("exim: data expected after -o%s\n", argrest);
2998
2999       /* -oMa: Set sender host address */
3000
3001       if (Ustrcmp(argrest, "Ma") == 0) sender_host_address = argv[++i];
3002
3003       /* -oMaa: Set authenticator name */
3004
3005       else if (Ustrcmp(argrest, "Maa") == 0)
3006         sender_host_authenticated = argv[++i];
3007
3008       /* -oMas: setting authenticated sender */
3009
3010       else if (Ustrcmp(argrest, "Mas") == 0)
3011         authenticated_sender = string_copy_taint(argv[++i], TRUE);
3012
3013       /* -oMai: setting authenticated id */
3014
3015       else if (Ustrcmp(argrest, "Mai") == 0)
3016         authenticated_id = string_copy_taint(argv[++i], TRUE);
3017
3018       /* -oMi: Set incoming interface address */
3019
3020       else if (Ustrcmp(argrest, "Mi") == 0) interface_address = argv[++i];
3021
3022       /* -oMm: Message reference */
3023
3024       else if (Ustrcmp(argrest, "Mm") == 0)
3025         {
3026         if (!mac_ismsgid(argv[i+1]))
3027             exim_fail("-oMm must be a valid message ID\n");
3028         if (!f.trusted_config)
3029             exim_fail("-oMm must be called by a trusted user/config\n");
3030           message_reference = argv[++i];
3031         }
3032
3033       /* -oMr: Received protocol */
3034
3035       else if (Ustrcmp(argrest, "Mr") == 0)
3036
3037         if (received_protocol)
3038           exim_fail("received_protocol is set already\n");
3039         else
3040           received_protocol = argv[++i];
3041
3042       /* -oMs: Set sender host name */
3043
3044       else if (Ustrcmp(argrest, "Ms") == 0)
3045         sender_host_name = string_copy_taint(argv[++i], TRUE);
3046
3047       /* -oMt: Set sender ident */
3048
3049       else if (Ustrcmp(argrest, "Mt") == 0)
3050         {
3051         sender_ident_set = TRUE;
3052         sender_ident = argv[++i];
3053         }
3054
3055       /* Else a bad argument */
3056
3057       else
3058         {
3059         badarg = TRUE;
3060         break;
3061         }
3062       }
3063
3064     /* -om: Me-too flag for aliases. Exim always does this. Some programs
3065     seem to call this as -m (undocumented), so that is also accepted (see
3066     above). */
3067
3068     else if (Ustrcmp(argrest, "m") == 0) {}
3069
3070     /* -oo: An ancient flag for old-style addresses which still seems to
3071     crop up in some calls (see in SCO). */
3072
3073     else if (Ustrcmp(argrest, "o") == 0) {}
3074
3075     /* -oP <name>: set pid file path for daemon
3076        -oPX:       delete pid file of daemon */
3077
3078     else if (Ustrcmp(argrest, "P") == 0)
3079       override_pid_file_path = argv[++i];
3080
3081     else if (Ustrcmp(argrest, "PX") == 0)
3082       delete_pid_file();
3083
3084     /* -or <n>: set timeout for non-SMTP acceptance
3085        -os <n>: set timeout for SMTP acceptance */
3086
3087     else if (*argrest == 'r' || *argrest == 's')
3088       {
3089       int *tp = (*argrest == 'r')?
3090         &arg_receive_timeout : &arg_smtp_receive_timeout;
3091       if (argrest[1] == 0)
3092         {
3093         if (i+1 < argc) *tp= readconf_readtime(argv[++i], 0, FALSE);
3094         }
3095       else *tp = readconf_readtime(argrest + 1, 0, FALSE);
3096       if (*tp < 0)
3097         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3098       }
3099
3100     /* -oX <list>: Override local_interfaces and/or default daemon ports */
3101
3102     else if (Ustrcmp(argrest, "X") == 0)
3103       override_local_interfaces = argv[++i];
3104
3105     /* Unknown -o argument */
3106
3107     else badarg = TRUE;
3108     break;
3109
3110
3111     /* -ps: force Perl startup; -pd force delayed Perl startup */
3112
3113     case 'p':
3114     #ifdef EXIM_PERL
3115     if (*argrest == 's' && argrest[1] == 0)
3116       {
3117       perl_start_option = 1;
3118       break;
3119       }
3120     if (*argrest == 'd' && argrest[1] == 0)
3121       {
3122       perl_start_option = -1;
3123       break;
3124       }
3125     #endif
3126
3127     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3128     which sets the host protocol and host name */
3129
3130     if (*argrest == 0)
3131       if (i+1 < argc)
3132         argrest = argv[++i];
3133       else
3134         { badarg = TRUE; break; }
3135
3136     if (*argrest != 0)
3137       {
3138       uschar *hn;
3139
3140       if (received_protocol)
3141         exim_fail("received_protocol is set already\n");
3142
3143       hn = Ustrchr(argrest, ':');
3144       if (hn == NULL)
3145         received_protocol = argrest;
3146       else
3147         {
3148         int old_pool = store_pool;
3149         store_pool = POOL_PERM;
3150         received_protocol = string_copyn(argrest, hn - argrest);
3151         store_pool = old_pool;
3152         sender_host_name = hn + 1;
3153         }
3154       }
3155     break;
3156
3157
3158     case 'q':
3159     receiving_message = FALSE;
3160     if (queue_interval >= 0)
3161       exim_fail("exim: -q specified more than once\n");
3162
3163     /* -qq...: Do queue runs in a 2-stage manner */
3164
3165     if (*argrest == 'q')
3166       {
3167       f.queue_2stage = TRUE;
3168       argrest++;
3169       }
3170
3171     /* -qi...: Do only first (initial) deliveries */
3172
3173     if (*argrest == 'i')
3174       {
3175       f.queue_run_first_delivery = TRUE;
3176       argrest++;
3177       }
3178
3179     /* -qf...: Run the queue, forcing deliveries
3180        -qff..: Ditto, forcing thawing as well */
3181
3182     if (*argrest == 'f')
3183       {
3184       f.queue_run_force = TRUE;
3185       if (*++argrest == 'f')
3186         {
3187         f.deliver_force_thaw = TRUE;
3188         argrest++;
3189         }
3190       }
3191
3192     /* -q[f][f]l...: Run the queue only on local deliveries */
3193
3194     if (*argrest == 'l')
3195       {
3196       f.queue_run_local = TRUE;
3197       argrest++;
3198       }
3199
3200     /* -q[f][f][l][G<name>]... Work on the named queue */
3201
3202     if (*argrest == 'G')
3203       {
3204       int i;
3205       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3206       queue_name = string_copyn(argrest, i);
3207       argrest += i;
3208       if (*argrest == '/') argrest++;
3209       }
3210
3211     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3212     only, optionally named, optionally starting from a given message id. */
3213
3214     if (!(list_queue || count_queue))
3215       if (*argrest == 0
3216          && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3217         {
3218         queue_interval = 0;
3219         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3220           start_queue_run_id = argv[++i];
3221         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3222           stop_queue_run_id = argv[++i];
3223         }
3224
3225     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3226     forced, optionally local only, optionally named. */
3227
3228       else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3229                                                   0, FALSE)) <= 0)
3230         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3231     break;
3232
3233
3234     case 'R':   /* Synonymous with -qR... */
3235     receiving_message = FALSE;
3236
3237     /* -Rf:   As -R (below) but force all deliveries,
3238        -Rff:  Ditto, but also thaw all frozen messages,
3239        -Rr:   String is regex
3240        -Rrf:  Regex and force
3241        -Rrff: Regex and force and thaw
3242
3243     in all cases provided there are no further characters in this
3244     argument. */
3245
3246     if (*argrest != 0)
3247       for (int i = 0; i < nelem(rsopts); i++)
3248         if (Ustrcmp(argrest, rsopts[i]) == 0)
3249           {
3250           if (i != 2) f.queue_run_force = TRUE;
3251           if (i >= 2) f.deliver_selectstring_regex = TRUE;
3252           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3253           argrest += Ustrlen(rsopts[i]);
3254           }
3255
3256     /* -R: Set string to match in addresses for forced queue run to
3257     pick out particular messages. */
3258
3259     if (*argrest)
3260       deliver_selectstring = argrest;
3261     else if (i+1 < argc)
3262       deliver_selectstring = argv[++i];
3263     else
3264       exim_fail("exim: string expected after -R\n");
3265     break;
3266
3267
3268     /* -r: an obsolete synonym for -f (see above) */
3269
3270
3271     /* -S: Like -R but works on sender. */
3272
3273     case 'S':   /* Synonymous with -qS... */
3274     receiving_message = FALSE;
3275
3276     /* -Sf:   As -S (below) but force all deliveries,
3277        -Sff:  Ditto, but also thaw all frozen messages,
3278        -Sr:   String is regex
3279        -Srf:  Regex and force
3280        -Srff: Regex and force and thaw
3281
3282     in all cases provided there are no further characters in this
3283     argument. */
3284
3285     if (*argrest)
3286       for (int i = 0; i < nelem(rsopts); i++)
3287         if (Ustrcmp(argrest, rsopts[i]) == 0)
3288           {
3289           if (i != 2) f.queue_run_force = TRUE;
3290           if (i >= 2) f.deliver_selectstring_sender_regex = TRUE;
3291           if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3292           argrest += Ustrlen(rsopts[i]);
3293           }
3294
3295     /* -S: Set string to match in addresses for forced queue run to
3296     pick out particular messages. */
3297
3298     if (*argrest)
3299       deliver_selectstring_sender = argrest;
3300     else if (i+1 < argc)
3301       deliver_selectstring_sender = argv[++i];
3302     else
3303       exim_fail("exim: string expected after -S\n");
3304     break;
3305
3306     /* -Tqt is an option that is exclusively for use by the testing suite.
3307     It is not recognized in other circumstances. It allows for the setting up
3308     of explicit "queue times" so that various warning/retry things can be
3309     tested. Otherwise variability of clock ticks etc. cause problems. */
3310
3311     case 'T':
3312     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3313       fudged_queue_times = argv[++i];
3314     else badarg = TRUE;
3315     break;
3316
3317
3318     /* -t: Set flag to extract recipients from body of message. */
3319
3320     case 't':
3321     if (*argrest == 0) extract_recipients = TRUE;
3322
3323     /* -ti: Set flag to extract recipients from body of message, and also
3324     specify that dot does not end the message. */
3325
3326     else if (Ustrcmp(argrest, "i") == 0)
3327       {
3328       extract_recipients = TRUE;
3329       f.dot_ends = FALSE;
3330       }
3331
3332     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3333
3334     #ifndef DISABLE_TLS
3335     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3336     #endif
3337
3338     else badarg = TRUE;
3339     break;
3340
3341
3342     /* -U: This means "initial user submission" in sendmail, apparently. The
3343     doc claims that in future sendmail may refuse syntactically invalid
3344     messages instead of fixing them. For the moment, we just ignore it. */
3345
3346     case 'U':
3347     break;
3348
3349
3350     /* -v: verify things - this is a very low-level debugging */
3351
3352     case 'v':
3353     if (*argrest == 0)
3354       {
3355       debug_selector |= D_v;
3356       debug_file = stderr;
3357       }
3358     else badarg = TRUE;
3359     break;
3360
3361
3362     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3363
3364       The -x flag tells the sendmail command that mail from a local
3365       mail program has National Language Support (NLS) extended characters
3366       in the body of the mail item. The sendmail command can send mail with
3367       extended NLS characters across networks that normally corrupts these
3368       8-bit characters.
3369
3370     As Exim is 8-bit clean, it just ignores this flag. */
3371
3372     case 'x':
3373     if (*argrest != 0) badarg = TRUE;
3374     break;
3375
3376     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3377     logs to that file.  We swallow the parameter and otherwise ignore it. */
3378
3379     case 'X':
3380     if (*argrest == '\0')
3381       if (++i >= argc)
3382         exim_fail("exim: string expected after -X\n");
3383     break;
3384
3385     case 'z':
3386     if (*argrest == '\0')
3387       if (++i < argc)
3388         log_oneline = argv[i];
3389       else
3390         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3391     break;
3392
3393     /* All other initial characters are errors */
3394
3395     default:
3396     badarg = TRUE;
3397     break;
3398     }         /* End of high-level switch statement */
3399
3400   /* Failed to recognize the option, or syntax error */
3401
3402   if (badarg)
3403     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3404       "option %s\n", arg);
3405   }
3406
3407
3408 /* If -R or -S have been specified without -q, assume a single queue run. */
3409
3410 if (  (deliver_selectstring || deliver_selectstring_sender)
3411    && queue_interval < 0)
3412     queue_interval = 0;
3413
3414
3415 END_ARG:
3416 /* If usage_wanted is set we call the usage function - which never returns */
3417 if (usage_wanted) exim_usage(called_as);
3418
3419 /* Arguments have been processed. Check for incompatibilities. */
3420 if ((
3421     (smtp_input || extract_recipients || recipients_arg < argc) &&
3422     (f.daemon_listen || queue_interval >= 0 || bi_option ||
3423       test_retry_arg >= 0 || test_rewrite_arg >= 0 ||
3424       filter_test != FTEST_NONE || (msg_action_arg > 0 && !one_msg_action))
3425     ) ||
3426     (
3427     msg_action_arg > 0 &&
3428     (f.daemon_listen || queue_interval > 0 || list_options ||
3429       (checking && msg_action != MSG_LOAD) ||
3430       bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0)
3431     ) ||
3432     (
3433     (f.daemon_listen || queue_interval > 0) &&
3434     (sender_address != NULL || list_options || list_queue || checking ||
3435       bi_option)
3436     ) ||
3437     (
3438     f.daemon_listen && queue_interval == 0
3439     ) ||
3440     (
3441     f.inetd_wait_mode && queue_interval >= 0
3442     ) ||
3443     (
3444     list_options &&
3445     (checking || smtp_input || extract_recipients ||
3446       filter_test != FTEST_NONE || bi_option)
3447     ) ||
3448     (
3449     verify_address_mode &&
3450     (f.address_test_mode || smtp_input || extract_recipients ||
3451       filter_test != FTEST_NONE || bi_option)
3452     ) ||
3453     (
3454     f.address_test_mode && (smtp_input || extract_recipients ||
3455       filter_test != FTEST_NONE || bi_option)
3456     ) ||
3457     (
3458     smtp_input && (sender_address != NULL || filter_test != FTEST_NONE ||
3459       extract_recipients)
3460     ) ||
3461     (
3462     deliver_selectstring != NULL && queue_interval < 0
3463     ) ||
3464     (
3465     msg_action == MSG_LOAD &&
3466       (!expansion_test || expansion_test_message != NULL)
3467     )
3468    )
3469   exim_fail("exim: incompatible command-line options or arguments\n");
3470
3471 /* If debugging is set up, set the file and the file descriptor to pass on to
3472 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3473 to run in the foreground. */
3474
3475 if (debug_selector != 0)
3476   {
3477   debug_file = stderr;
3478   debug_fd = fileno(debug_file);
3479   f.background_daemon = FALSE;
3480   testharness_pause_ms(100);   /* lets caller finish */
3481   if (debug_selector != D_v)    /* -v only doesn't show this */
3482     {
3483     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3484       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3485       debug_selector);
3486     if (!version_printed)
3487       show_whats_supported(stderr);
3488     }
3489   }
3490
3491 /* When started with root privilege, ensure that the limits on the number of
3492 open files and the number of processes (where that is accessible) are
3493 sufficiently large, or are unset, in case Exim has been called from an
3494 environment where the limits are screwed down. Not all OS have the ability to
3495 change some of these limits. */
3496
3497 if (unprivileged)
3498   {
3499   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3500   }
3501 else
3502   {
3503   struct rlimit rlp;
3504
3505   #ifdef RLIMIT_NOFILE
3506   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3507     {
3508     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3509       strerror(errno));
3510     rlp.rlim_cur = rlp.rlim_max = 0;
3511     }
3512
3513   /* I originally chose 1000 as a nice big number that was unlikely to
3514   be exceeded. It turns out that some older OS have a fixed upper limit of
3515   256. */
3516
3517   if (rlp.rlim_cur < 1000)
3518     {
3519     rlp.rlim_cur = rlp.rlim_max = 1000;
3520     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3521       {
3522       rlp.rlim_cur = rlp.rlim_max = 256;
3523       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3524         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3525           strerror(errno));
3526       }
3527     }
3528   #endif
3529
3530   #ifdef RLIMIT_NPROC
3531   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3532     {
3533     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3534       strerror(errno));
3535     rlp.rlim_cur = rlp.rlim_max = 0;
3536     }
3537
3538   #ifdef RLIM_INFINITY
3539   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3540     {
3541     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3542   #else
3543   if (rlp.rlim_cur < 1000)
3544     {
3545     rlp.rlim_cur = rlp.rlim_max = 1000;
3546   #endif
3547     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3548       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3549         strerror(errno));
3550     }
3551   #endif
3552   }
3553
3554 /* Exim is normally entered as root (but some special configurations are
3555 possible that don't do this). However, it always spins off sub-processes that
3556 set their uid and gid as required for local delivery. We don't want to pass on
3557 any extra groups that root may belong to, so we want to get rid of them all at
3558 this point.
3559
3560 We need to obey setgroups() at this stage, before possibly giving up root
3561 privilege for a changed configuration file, but later on we might need to
3562 check on the additional groups for the admin user privilege - can't do that
3563 till after reading the config, which might specify the exim gid. Therefore,
3564 save the group list here first. */
3565
3566 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3567   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3568
3569 /* There is a fundamental difference in some BSD systems in the matter of
3570 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3571 known not to be different. On the "different" systems there is a single group
3572 list, and the first entry in it is the current group. On all other versions of
3573 Unix there is a supplementary group list, which is in *addition* to the current
3574 group. Consequently, to get rid of all extraneous groups on a "standard" system
3575 you pass over 0 groups to setgroups(), while on a "different" system you pass
3576 over a single group - the current group, which is always the first group in the
3577 list. Calling setgroups() with zero groups on a "different" system results in
3578 an error return. The following code should cope with both types of system.
3579
3580  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
3581  the "setgroups() with zero groups" - and changes the egid.
3582  Thanks to that we had to stash the original_egid above, for use below
3583  in the call to exim_setugid().
3584
3585 However, if this process isn't running as root, setgroups() can't be used
3586 since you have to be root to run it, even if throwing away groups. Not being
3587 root here happens only in some unusual configurations. We just ignore the
3588 error. */
3589
3590 if (setgroups(0, NULL) != 0 && setgroups(1, group_list) != 0 && !unprivileged)
3591   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
3592
3593 /* If the configuration file name has been altered by an argument on the
3594 command line (either a new file name or a macro definition) and the caller is
3595 not root, or if this is a filter testing run, remove any setuid privilege the
3596 program has and run as the underlying user.
3597
3598 The exim user is locked out of this, which severely restricts the use of -C
3599 for some purposes.
3600
3601 Otherwise, set the real ids to the effective values (should be root unless run
3602 from inetd, which it can either be root or the exim uid, if one is configured).
3603
3604 There is a private mechanism for bypassing some of this, in order to make it
3605 possible to test lots of configurations automatically, without having either to
3606 recompile each time, or to patch in an actual configuration file name and other
3607 values (such as the path name). If running in the test harness, pretend that
3608 configuration file changes and macro definitions haven't happened. */
3609
3610 if ((                                            /* EITHER */
3611     (!f.trusted_config ||                          /* Config changed, or */
3612      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
3613     real_uid != root_uid &&                      /* Not root, and */
3614     !f.running_in_test_harness                     /* Not fudged */
3615     ) ||                                         /*   OR   */
3616     expansion_test                               /* expansion testing */
3617     ||                                           /*   OR   */
3618     filter_test != FTEST_NONE)                   /* Filter testing */
3619   {
3620   setgroups(group_count, group_list);
3621   exim_setugid(real_uid, real_gid, FALSE,
3622     US"-C, -D, -be or -bf forces real uid");
3623   removed_privilege = TRUE;
3624
3625   /* In the normal case when Exim is called like this, stderr is available
3626   and should be used for any logging information because attempts to write
3627   to the log will usually fail. To arrange this, we unset really_exim. However,
3628   if no stderr is available there is no point - we might as well have a go
3629   at the log (if it fails, syslog will be written).
3630
3631   Note that if the invoker is Exim, the logs remain available. Messing with
3632   this causes unlogged successful deliveries.  */
3633
3634   if (log_stderr && real_uid != exim_uid)
3635     f.really_exim = FALSE;
3636   }
3637
3638 /* Privilege is to be retained for the moment. It may be dropped later,
3639 depending on the job that this Exim process has been asked to do. For now, set
3640 the real uid to the effective so that subsequent re-execs of Exim are done by a
3641 privileged user. */
3642
3643 else
3644   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
3645
3646 /* If testing a filter, open the file(s) now, before wasting time doing other
3647 setups and reading the message. */
3648
3649 if (filter_test & FTEST_SYSTEM)
3650   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
3651     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
3652       strerror(errno));
3653
3654 if (filter_test & FTEST_USER)
3655   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
3656     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
3657       strerror(errno));
3658
3659 /* Initialise lookup_list
3660 If debugging, already called above via version reporting.
3661 In either case, we initialise the list of available lookups while running
3662 as root.  All dynamically modules are loaded from a directory which is
3663 hard-coded into the binary and is code which, if not a module, would be
3664 part of Exim already.  Ability to modify the content of the directory
3665 is equivalent to the ability to modify a setuid binary!
3666
3667 This needs to happen before we read the main configuration. */
3668 init_lookup_list();
3669
3670 #ifdef SUPPORT_I18N
3671 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
3672 #endif
3673
3674 /* Read the main runtime configuration data; this gives up if there
3675 is a failure. It leaves the configuration file open so that the subsequent
3676 configuration data for delivery can be read if needed.
3677
3678 NOTE: immediately after opening the configuration file we change the working
3679 directory to "/"! Later we change to $spool_directory. We do it there, because
3680 during readconf_main() some expansion takes place already. */
3681
3682 /* Store the initial cwd before we change directories.  Can be NULL if the
3683 dir has already been unlinked. */
3684 initial_cwd = os_getcwd(NULL, 0);
3685
3686 /* checking:
3687     -be[m] expansion test        -
3688     -b[fF] filter test           new
3689     -bh[c] host test             -
3690     -bmalware malware_test_file  new
3691     -brt   retry test            new
3692     -brw   rewrite test          new
3693     -bt    address test          -
3694     -bv[s] address verify        -
3695    list_options:
3696     -bP <option> (except -bP config, which sets list_config)
3697
3698 If any of these options is set, we suppress warnings about configuration
3699 issues (currently about tls_advertise_hosts and keep_environment not being
3700 defined) */
3701
3702   {
3703 #ifdef MEASURE_TIMING
3704   struct timeval t0, diff;
3705   (void)gettimeofday(&t0, NULL);
3706 #endif
3707
3708   readconf_main(checking || list_options);
3709
3710 #ifdef MEASURE_TIMING
3711   report_time_since(&t0, US"readconf_main (delta)");
3712 #endif
3713   }
3714
3715
3716 /* Now in directory "/" */
3717
3718 if (cleanup_environment() == FALSE)
3719   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
3720
3721
3722 /* If an action on specific messages is requested, or if a daemon or queue
3723 runner is being started, we need to know if Exim was called by an admin user.
3724 This is the case if the real user is root or exim, or if the real group is
3725 exim, or if one of the supplementary groups is exim or a group listed in
3726 admin_groups. We don't fail all message actions immediately if not admin_user,
3727 since some actions can be performed by non-admin users. Instead, set admin_user
3728 for later interrogation. */
3729
3730 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
3731   f.admin_user = TRUE;
3732 else
3733   for (int i = 0; i < group_count && !f.admin_user; i++)
3734     if (group_list[i] == exim_gid)
3735       f.admin_user = TRUE;
3736     else if (admin_groups)
3737       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
3738         if (admin_groups[j] == group_list[i])
3739           f.admin_user = TRUE;
3740
3741 /* Another group of privileged users are the trusted users. These are root,
3742 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
3743 are permitted to specify sender_addresses with -f on the command line, and
3744 other message parameters as well. */
3745
3746 if (real_uid == root_uid || real_uid == exim_uid)
3747   f.trusted_caller = TRUE;
3748 else
3749   {
3750   if (trusted_users)
3751     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
3752       if (trusted_users[i] == real_uid)
3753         f.trusted_caller = TRUE;
3754
3755   if (trusted_groups)
3756     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
3757       if (trusted_groups[i] == real_gid)
3758         f.trusted_caller = TRUE;
3759       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
3760         if (trusted_groups[i] == group_list[j])
3761           f.trusted_caller = TRUE;
3762   }
3763
3764 /* At this point, we know if the user is privileged and some command-line
3765 options become possibly impermissible, depending upon the configuration file. */
3766
3767 if (checking && commandline_checks_require_admin && !f.admin_user)
3768   exim_fail("exim: those command-line flags are set to require admin\n");
3769
3770 /* Handle the decoding of logging options. */
3771
3772 decode_bits(log_selector, log_selector_size, log_notall,
3773   log_selector_string, log_options, log_options_count, US"log", 0);
3774
3775 DEBUG(D_any)
3776   {
3777   debug_printf("configuration file is %s\n", config_main_filename);
3778   debug_printf("log selectors =");
3779   for (int i = 0; i < log_selector_size; i++)
3780     debug_printf(" %08x", log_selector[i]);
3781   debug_printf("\n");
3782   }
3783
3784 /* If domain literals are not allowed, check the sender address that was
3785 supplied with -f. Ditto for a stripped trailing dot. */
3786
3787 if (sender_address)
3788   {
3789   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
3790     exim_fail("exim: bad -f address \"%s\": domain literals not "
3791       "allowed\n", sender_address);
3792   if (f_end_dot && !strip_trailing_dot)
3793     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
3794       "(trailing dot not allowed)\n", sender_address);
3795   }
3796
3797 /* See if an admin user overrode our logging. */
3798
3799 if (cmdline_syslog_name)
3800   if (f.admin_user)
3801     {
3802     syslog_processname = cmdline_syslog_name;
3803     log_file_path = string_copy(CUS"syslog");
3804     }
3805   else
3806     /* not a panic, non-privileged users should not be able to spam paniclog */
3807     exim_fail(
3808         "exim: you lack sufficient privilege to specify syslog process name\n");
3809
3810 /* Paranoia check of maximum lengths of certain strings. There is a check
3811 on the length of the log file path in log.c, which will come into effect
3812 if there are any calls to write the log earlier than this. However, if we
3813 get this far but the string is very long, it is better to stop now than to
3814 carry on and (e.g.) receive a message and then have to collapse. The call to
3815 log_write() from here will cause the ultimate panic collapse if the complete
3816 file name exceeds the buffer length. */
3817
3818 if (Ustrlen(log_file_path) > 200)
3819   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3820     "log_file_path is longer than 200 chars: aborting");
3821
3822 if (Ustrlen(pid_file_path) > 200)
3823   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3824     "pid_file_path is longer than 200 chars: aborting");
3825
3826 if (Ustrlen(spool_directory) > 200)
3827   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3828     "spool_directory is longer than 200 chars: aborting");
3829
3830 /* Length check on the process name given to syslog for its TAG field,
3831 which is only permitted to be 32 characters or less. See RFC 3164. */
3832
3833 if (Ustrlen(syslog_processname) > 32)
3834   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3835     "syslog_processname is longer than 32 chars: aborting");
3836
3837 if (log_oneline)
3838   if (f.admin_user)
3839     {
3840     log_write(0, LOG_MAIN, "%s", log_oneline);
3841     return EXIT_SUCCESS;
3842     }
3843   else
3844     return EXIT_FAILURE;
3845
3846 /* In some operating systems, the environment variable TMPDIR controls where
3847 temporary files are created; Exim doesn't use these (apart from when delivering
3848 to MBX mailboxes), but called libraries such as DBM libraries may require them.
3849 If TMPDIR is found in the environment, reset it to the value defined in the
3850 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
3851 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
3852 EXIM_TMPDIR by the build scripts.
3853 */
3854
3855 #ifdef EXIM_TMPDIR
3856   if (environ) for (uschar ** p = USS environ; *p; p++)
3857     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
3858       {
3859       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
3860       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
3861       *p = newp;
3862       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
3863       }
3864 #endif
3865
3866 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
3867 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
3868 we may need to get rid of a bogus timezone setting. This can arise when Exim is
3869 called by a user who has set the TZ variable. This then affects the timestamps
3870 in log files and in Received: headers, and any created Date: header lines. The
3871 required timezone is settable in the configuration file, so nothing can be done
3872 about this earlier - but hopefully nothing will normally be logged earlier than
3873 this. We have to make a new environment if TZ is wrong, but don't bother if
3874 timestamps_utc is set, because then all times are in UTC anyway. */
3875
3876 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
3877   f.timestamps_utc = TRUE;
3878 else
3879   {
3880   uschar *envtz = US getenv("TZ");
3881   if (envtz
3882       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
3883       : timezone_string != NULL
3884      )
3885     {
3886     uschar **p = USS environ;
3887     uschar **new;
3888     uschar **newp;
3889     int count = 0;
3890     if (environ) while (*p++) count++;
3891     if (!envtz) count++;
3892     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
3893     if (environ) for (p = USS environ; *p; p++)
3894       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
3895     if (timezone_string)
3896       {
3897       *newp = store_malloc(Ustrlen(timezone_string) + 4);
3898       sprintf(CS *newp++, "TZ=%s", timezone_string);
3899       }
3900     *newp = NULL;
3901     environ = CSS new;
3902     tzset();
3903     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
3904       tod_stamp(tod_log));
3905     }
3906   }
3907
3908 /* Handle the case when we have removed the setuid privilege because of -C or
3909 -D. This means that the caller of Exim was not root.
3910
3911 There is a problem if we were running as the Exim user. The sysadmin may
3912 expect this case to retain privilege because "the binary was called by the
3913 Exim user", but it hasn't, because either the -D option set macros, or the
3914 -C option set a non-trusted configuration file. There are two possibilities:
3915
3916   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
3917       to do message deliveries. Thus, the fact that it is running as a
3918       non-privileged user is plausible, and might be wanted in some special
3919       configurations. However, really_exim will have been set false when
3920       privilege was dropped, to stop Exim trying to write to its normal log
3921       files. Therefore, re-enable normal log processing, assuming the sysadmin
3922       has set up the log directory correctly.
3923
3924   (2) If deliver_drop_privilege is not set, the configuration won't work as
3925       apparently intended, and so we log a panic message. In order to retain
3926       root for -C or -D, the caller must either be root or be invoking a
3927       trusted configuration file (when deliver_drop_privilege is false). */
3928
3929 if (  removed_privilege
3930    && (!f.trusted_config || opt_D_used)
3931    && real_uid == exim_uid)
3932   if (deliver_drop_privilege)
3933     f.really_exim = TRUE; /* let logging work normally */
3934   else
3935     log_write(0, LOG_MAIN|LOG_PANIC,
3936       "exim user lost privilege for using %s option",
3937       f.trusted_config? "-D" : "-C");
3938
3939 /* Start up Perl interpreter if Perl support is configured and there is a
3940 perl_startup option, and the configuration or the command line specifies
3941 initializing starting. Note that the global variables are actually called
3942 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
3943
3944 #ifdef EXIM_PERL
3945 if (perl_start_option != 0)
3946   opt_perl_at_start = (perl_start_option > 0);
3947 if (opt_perl_at_start && opt_perl_startup != NULL)
3948   {
3949   uschar *errstr;
3950   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
3951   if ((errstr = init_perl(opt_perl_startup)))
3952     exim_fail("exim: error in perl_startup code: %s\n", errstr);
3953   opt_perl_started = TRUE;
3954   }
3955 #endif /* EXIM_PERL */
3956
3957 /* Log the arguments of the call if the configuration file said so. This is
3958 a debugging feature for finding out what arguments certain MUAs actually use.
3959 Don't attempt it if logging is disabled, or if listing variables or if
3960 verifying/testing addresses or expansions. */
3961
3962 if (  (debug_selector & D_any  ||  LOGGING(arguments))
3963    && f.really_exim && !list_options && !checking)
3964   {
3965   uschar *p = big_buffer;
3966   Ustrcpy(p, US"cwd= (failed)");
3967
3968   if (!initial_cwd)
3969     p += 13;
3970   else
3971     {
3972     Ustrncpy(p + 4, initial_cwd, big_buffer_size-5);
3973     p += 4 + Ustrlen(initial_cwd);
3974     /* in case p is near the end and we don't provide enough space for
3975      * string_format to be willing to write. */
3976     *p = '\0';
3977     }
3978
3979   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
3980   while (*p) p++;
3981   for (int i = 0; i < argc; i++)
3982     {
3983     int len = Ustrlen(argv[i]);
3984     const uschar *printing;
3985     uschar *quote;
3986     if (p + len + 8 >= big_buffer + big_buffer_size)
3987       {
3988       Ustrcpy(p, US" ...");
3989       log_write(0, LOG_MAIN, "%s", big_buffer);
3990       Ustrcpy(big_buffer, US"...");
3991       p = big_buffer + 3;
3992       }
3993     printing = string_printing(argv[i]);
3994     if (printing[0] == 0) quote = US"\""; else
3995       {
3996       const uschar *pp = printing;
3997       quote = US"";
3998       while (*pp != 0) if (isspace(*pp++)) { quote = US"\""; break; }
3999       }
4000     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4001       (p - big_buffer) - 4), printing, quote);
4002     }
4003
4004   if (LOGGING(arguments))
4005     log_write(0, LOG_MAIN, "%s", big_buffer);
4006   else
4007     debug_printf("%s\n", big_buffer);
4008   }
4009
4010 /* Set the working directory to be the top-level spool directory. We don't rely
4011 on this in the code, which always uses fully qualified names, but it's useful
4012 for core dumps etc. Don't complain if it fails - the spool directory might not
4013 be generally accessible and calls with the -C option (and others) have lost
4014 privilege by now. Before the chdir, we try to ensure that the directory exists.
4015 */
4016
4017 if (Uchdir(spool_directory) != 0)
4018   {
4019   int dummy;
4020   (void)directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4021   dummy = /* quieten compiler */ Uchdir(spool_directory);
4022   dummy = dummy;        /* yet more compiler quietening, sigh */
4023   }
4024
4025 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4026 alias file. Exim doesn't have such a concept, but this call is screwed into
4027 Sun's YP makefiles. Handle this by calling a configured script, as the real
4028 user who called Exim. The -oA option can be used to pass an argument to the
4029 script. */
4030
4031 if (bi_option)
4032   {
4033   (void)fclose(config_file);
4034   if (bi_command != NULL)
4035     {
4036     int i = 0;
4037     uschar *argv[3];
4038     argv[i++] = bi_command;
4039     if (alias_arg != NULL) argv[i++] = alias_arg;
4040     argv[i++] = NULL;
4041
4042     setgroups(group_count, group_list);
4043     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4044
4045     DEBUG(D_exec) debug_printf("exec %.256s %.256s\n", argv[0],
4046       (argv[1] == NULL)? US"" : argv[1]);
4047
4048     execv(CS argv[0], (char *const *)argv);
4049     exim_fail("exim: exec failed: %s\n", strerror(errno));
4050     }
4051   else
4052     {
4053     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4054     exit(EXIT_SUCCESS);
4055     }
4056   }
4057
4058 /* We moved the admin/trusted check to be immediately after reading the
4059 configuration file.  We leave these prints here to ensure that syslog setup,
4060 logfile setup, and so on has already happened. */
4061
4062 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4063 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4064
4065 /* Only an admin user may start the daemon or force a queue run in the default
4066 configuration, but the queue run restriction can be relaxed. Only an admin
4067 user may request that a message be returned to its sender forthwith. Only an
4068 admin user may specify a debug level greater than D_v (because it might show
4069 passwords, etc. in lookup queries). Only an admin user may request a queue
4070 count. Only an admin user can use the test interface to scan for email
4071 (because Exim will be in the spool dir and able to look at mails). */
4072
4073 if (!f.admin_user)
4074   {
4075   BOOL debugset = (debug_selector & ~D_v) != 0;
4076   if (  deliver_give_up || f.daemon_listen || malware_test_file
4077      || count_queue && queue_list_requires_admin
4078      || list_queue && queue_list_requires_admin
4079      || queue_interval >= 0 && prod_requires_admin
4080      || queue_name_dest && prod_requires_admin
4081      || debugset && !f.running_in_test_harness
4082      )
4083     exim_fail("exim:%s permission denied\n", debugset? " debugging" : "");
4084   }
4085
4086 /* If the real user is not root or the exim uid, the argument for passing
4087 in an open TCP/IP connection for another message is not permitted, nor is
4088 running with the -N option for any delivery action, unless this call to exim is
4089 one that supplied an input message, or we are using a patched exim for
4090 regression testing. */
4091
4092 if (real_uid != root_uid && real_uid != exim_uid &&
4093      (continue_hostname != NULL ||
4094        (f.dont_deliver &&
4095          (queue_interval >= 0 || f.daemon_listen || msg_action_arg > 0)
4096        )) && !f.running_in_test_harness)
4097   exim_fail("exim: Permission denied\n");
4098
4099 /* If the caller is not trusted, certain arguments are ignored when running for
4100 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4101 Note that authority for performing certain actions on messages is tested in the
4102 queue_action() function. */
4103
4104 if (!f.trusted_caller && !checking)
4105   {
4106   sender_host_name = sender_host_address = interface_address =
4107     sender_ident = received_protocol = NULL;
4108   sender_host_port = interface_port = 0;
4109   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4110   }
4111
4112 /* If a sender host address is set, extract the optional port number off the
4113 end of it and check its syntax. Do the same thing for the interface address.
4114 Exim exits if the syntax is bad. */
4115
4116 else
4117   {
4118   if (sender_host_address != NULL)
4119     sender_host_port = check_port(sender_host_address);
4120   if (interface_address != NULL)
4121     interface_port = check_port(interface_address);
4122   }
4123
4124 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4125 if (flag_G)
4126   {
4127   if (f.trusted_caller)
4128     {
4129     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4130     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4131     }
4132   else
4133     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4134   }
4135
4136 /* If an SMTP message is being received check to see if the standard input is a
4137 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4138 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4139 barf. */
4140
4141 if (smtp_input)
4142   {
4143   union sockaddr_46 inetd_sock;
4144   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4145   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4146     {
4147     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4148     if (family == AF_INET || family == AF_INET6)
4149       {
4150       union sockaddr_46 interface_sock;
4151       size = sizeof(interface_sock);
4152
4153       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4154         interface_address = host_ntoa(-1, &interface_sock, NULL,
4155           &interface_port);
4156
4157       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4158
4159       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4160         {
4161         f.is_inetd = TRUE;
4162         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4163           NULL, &sender_host_port);
4164         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4165           "inetd is not supported when mua_wrapper is set");
4166         }
4167       else
4168         exim_fail(
4169           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4170       }
4171     }
4172   }
4173
4174 /* If the load average is going to be needed while receiving a message, get it
4175 now for those OS that require the first call to os_getloadavg() to be done as
4176 root. There will be further calls later for each message received. */
4177
4178 #ifdef LOAD_AVG_NEEDS_ROOT
4179 if (  receiving_message
4180    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4181   load_average = OS_GETLOADAVG();
4182 #endif
4183
4184 /* The queue_only configuration option can be overridden by -odx on the command
4185 line, except that if queue_only_override is false, queue_only cannot be unset
4186 from the command line. */
4187
4188 if (queue_only_set && (queue_only_override || arg_queue_only))
4189   queue_only = arg_queue_only;
4190
4191 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4192 -or and -os. */
4193
4194 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4195 if (arg_smtp_receive_timeout >= 0)
4196   smtp_receive_timeout = arg_smtp_receive_timeout;
4197
4198 /* If Exim was started with root privilege, unless we have already removed the
4199 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4200 except when starting the daemon or doing some kind of delivery or address
4201 testing (-bt). These are the only cases when root need to be retained. We run
4202 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4203 retained only for starting the daemon. We always do the initgroups() in this
4204 situation (controlled by the TRUE below), in order to be as close as possible
4205 to the state Exim usually runs in. */
4206
4207 if (!unprivileged &&                      /* originally had root AND */
4208     !removed_privilege &&                 /* still got root AND      */
4209     !f.daemon_listen &&                     /* not starting the daemon */
4210     queue_interval <= 0 &&                /* (either kind of daemon) */
4211       (                                   /*    AND EITHER           */
4212       deliver_drop_privilege ||           /* requested unprivileged  */
4213         (                                 /*       OR                */
4214         queue_interval < 0 &&             /* not running the queue   */
4215         (msg_action_arg < 0 ||            /*       and               */
4216           msg_action != MSG_DELIVER) &&   /* not delivering and      */
4217         (!checking || !f.address_test_mode) /* not address checking    */
4218    )  ) )
4219   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4220
4221 /* When we are retaining a privileged uid, we still change to the exim gid. */
4222
4223 else
4224   {
4225   int rv;
4226   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4227   rv = setgid(exim_gid);
4228   /* Impact of failure is that some stuff might end up with an incorrect group.
4229   We track this for failures from root, since any attempt to change privilege
4230   by root should succeed and failures should be examined.  For non-root,
4231   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4232   no need to complain then. */
4233   if (rv == -1)
4234     if (!(unprivileged || removed_privilege))
4235       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4236     else
4237       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4238           (long int)exim_gid, strerror(errno));
4239   }
4240
4241 /* Handle a request to scan a file for malware */
4242 if (malware_test_file)
4243   {
4244 #ifdef WITH_CONTENT_SCAN
4245   int result;
4246   set_process_info("scanning file for malware");
4247   result = malware_in_file(malware_test_file);
4248   if (result == FAIL)
4249     {
4250     printf("No malware found.\n");
4251     exit(EXIT_SUCCESS);
4252     }
4253   if (result != OK)
4254     {
4255     printf("Malware lookup returned non-okay/fail: %d\n", result);
4256     exit(EXIT_FAILURE);
4257     }
4258   if (malware_name)
4259     printf("Malware found: %s\n", malware_name);
4260   else
4261     printf("Malware scan detected malware of unknown name.\n");
4262 #else
4263   printf("Malware scanning not enabled at compile time.\n");
4264 #endif
4265   exit(EXIT_FAILURE);
4266   }
4267
4268 /* Handle a request to list the delivery queue */
4269
4270 if (list_queue)
4271   {
4272   set_process_info("listing the queue");
4273   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4274   exit(EXIT_SUCCESS);
4275   }
4276
4277 /* Handle a request to count the delivery queue */
4278
4279 if (count_queue)
4280   {
4281   set_process_info("counting the queue");
4282   queue_count();
4283   exit(EXIT_SUCCESS);
4284   }
4285
4286 /* Handle actions on specific messages, except for the force delivery and
4287 message load actions, which are done below. Some actions take a whole list of
4288 message ids, which are known to continue up to the end of the arguments. Others
4289 take a single message id and then operate on the recipients list. */
4290
4291 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4292   {
4293   int yield = EXIT_SUCCESS;
4294   set_process_info("acting on specified messages");
4295
4296   /* ACL definitions may be needed when removing a message (-Mrm) because
4297   event_action gets expanded */
4298
4299   if (msg_action == MSG_REMOVE)
4300     readconf_rest();
4301
4302   if (!one_msg_action)
4303     {
4304     for (i = msg_action_arg; i < argc; i++)
4305       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4306         yield = EXIT_FAILURE;
4307     switch (msg_action)
4308       {
4309       case MSG_REMOVE: MSG_DELETE: case MSG_FREEZE: case MSG_THAW: break;
4310       default: printf("\n"); break;
4311       }
4312     }
4313
4314   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4315     recipients_arg)) yield = EXIT_FAILURE;
4316   exit(yield);
4317   }
4318
4319 /* We used to set up here to skip reading the ACL section, on
4320  (msg_action_arg > 0 || (queue_interval == 0 && !f.daemon_listen)
4321 Now, since the intro of the ${acl } expansion, ACL definitions may be
4322 needed in transports so we lost the optimisation. */
4323
4324   {
4325 #ifdef MEASURE_TIMING
4326   struct timeval t0, diff;
4327   (void)gettimeofday(&t0, NULL);
4328 #endif
4329
4330   readconf_rest();
4331
4332 #ifdef MEASURE_TIMING
4333   report_time_since(&t0, US"readconf_rest (delta)");
4334 #endif
4335   }
4336
4337 /* Handle the -brt option. This is for checking out retry configurations.
4338 The next three arguments are a domain name or a complete address, and
4339 optionally two error numbers. All it does is to call the function that
4340 scans the retry configuration data. */
4341
4342 if (test_retry_arg >= 0)
4343   {
4344   retry_config *yield;
4345   int basic_errno = 0;
4346   int more_errno = 0;
4347   uschar *s1, *s2;
4348
4349   if (test_retry_arg >= argc)
4350     {
4351     printf("-brt needs a domain or address argument\n");
4352     exim_exit(EXIT_FAILURE, US"main");
4353     }
4354   s1 = argv[test_retry_arg++];
4355   s2 = NULL;
4356
4357   /* If the first argument contains no @ and no . it might be a local user
4358   or it might be a single-component name. Treat as a domain. */
4359
4360   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4361     {
4362     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4363       "being \ntreated as a one-component domain, not as a local part.\n\n",
4364       s1);
4365     }
4366
4367   /* There may be an optional second domain arg. */
4368
4369   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4370     s2 = argv[test_retry_arg++];
4371
4372   /* The final arg is an error name */
4373
4374   if (test_retry_arg < argc)
4375     {
4376     uschar *ss = argv[test_retry_arg];
4377     uschar *error =
4378       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4379     if (error != NULL)
4380       {
4381       printf("%s\n", CS error);
4382       return EXIT_FAILURE;
4383       }
4384
4385     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4386     code > 100 as an error is for matching codes to the decade. Turn them into
4387     a real error code, off the decade. */
4388
4389     if (basic_errno == ERRNO_MAIL4XX ||
4390         basic_errno == ERRNO_RCPT4XX ||
4391         basic_errno == ERRNO_DATA4XX)
4392       {
4393       int code = (more_errno >> 8) & 255;
4394       if (code == 255)
4395         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4396       else if (code > 100)
4397         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4398       }
4399     }
4400
4401   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4402     printf("No retry information found\n");
4403   else
4404     {
4405     more_errno = yield->more_errno;
4406     printf("Retry rule: %s  ", yield->pattern);
4407
4408     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4409       {
4410       printf("quota%s%s  ",
4411         (more_errno > 0)? "_" : "",
4412         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4413       }
4414     else if (yield->basic_errno == ECONNREFUSED)
4415       {
4416       printf("refused%s%s  ",
4417         (more_errno > 0)? "_" : "",
4418         (more_errno == 'M')? "MX" :
4419         (more_errno == 'A')? "A" : "");
4420       }
4421     else if (yield->basic_errno == ETIMEDOUT)
4422       {
4423       printf("timeout");
4424       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4425       more_errno &= 255;
4426       if (more_errno != 0) printf("_%s",
4427         (more_errno == 'M')? "MX" : "A");
4428       printf("  ");
4429       }
4430     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4431       printf("auth_failed  ");
4432     else printf("*  ");
4433
4434     for (retry_rule * r = yield->rules; r; r = r->next)
4435       {
4436       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4437       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4438       if (r->rule == 'G')
4439         {
4440         int x = r->p2;
4441         int f = x % 1000;
4442         int d = 100;
4443         printf(",%d.", x/1000);
4444         do
4445           {
4446           printf("%d", f/d);
4447           f %= d;
4448           d /= 10;
4449           }
4450         while (f != 0);
4451         }
4452       printf("; ");
4453       }
4454
4455     printf("\n");
4456     }
4457   exim_exit(EXIT_SUCCESS, US"main");
4458   }
4459
4460 /* Handle a request to list one or more configuration options */
4461 /* If -n was set, we suppress some information */
4462
4463 if (list_options)
4464   {
4465   BOOL fail = FALSE;
4466   set_process_info("listing variables");
4467   if (recipients_arg >= argc)
4468     fail = !readconf_print(US"all", NULL, flag_n);
4469   else for (i = recipients_arg; i < argc; i++)
4470     {
4471     if (i < argc - 1 &&
4472         (Ustrcmp(argv[i], "router") == 0 ||
4473          Ustrcmp(argv[i], "transport") == 0 ||
4474          Ustrcmp(argv[i], "authenticator") == 0 ||
4475          Ustrcmp(argv[i], "macro") == 0 ||
4476          Ustrcmp(argv[i], "environment") == 0))
4477       {
4478       fail |= !readconf_print(argv[i+1], argv[i], flag_n);
4479       i++;
4480       }
4481     else
4482       fail = !readconf_print(argv[i], NULL, flag_n);
4483     }
4484   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS, US"main");
4485   }
4486
4487 if (list_config)
4488   {
4489   set_process_info("listing config");
4490   exim_exit(readconf_print(US"config", NULL, flag_n)
4491                 ? EXIT_SUCCESS : EXIT_FAILURE, US"main");
4492   }
4493
4494
4495 /* Initialise subsystems as required. */
4496
4497 tcp_init();
4498
4499 /* Handle a request to deliver one or more messages that are already on the
4500 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4501 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4502
4503 Delivery of specific messages is typically used for a small number when
4504 prodding by hand (when the option forced_delivery will be set) or when
4505 re-execing to regain root privilege. Each message delivery must happen in a
4506 separate process, so we fork a process for each one, and run them sequentially
4507 so that debugging output doesn't get intertwined, and to avoid spawning too
4508 many processes if a long list is given. However, don't fork for the last one;
4509 this saves a process in the common case when Exim is called to deliver just one
4510 message. */
4511
4512 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4513   {
4514   if (prod_requires_admin && !f.admin_user)
4515     {
4516     fprintf(stderr, "exim: Permission denied\n");
4517     exim_exit(EXIT_FAILURE, US"main");
4518     }
4519   set_process_info("delivering specified messages");
4520   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4521   for (i = msg_action_arg; i < argc; i++)
4522     {
4523     int status;
4524     pid_t pid;
4525     if (i == argc - 1)
4526       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4527     else if ((pid = fork()) == 0)
4528       {
4529       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4530       exim_underbar_exit(EXIT_SUCCESS);
4531       }
4532     else if (pid < 0)
4533       {
4534       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4535         strerror(errno));
4536       exim_exit(EXIT_FAILURE, US"main");
4537       }
4538     else wait(&status);
4539     }
4540   exim_exit(EXIT_SUCCESS, US"main");
4541   }
4542
4543
4544 /* If only a single queue run is requested, without SMTP listening, we can just
4545 turn into a queue runner, with an optional starting message id. */
4546
4547 if (queue_interval == 0 && !f.daemon_listen)
4548   {
4549   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4550     (start_queue_run_id == NULL)? US"" : US" starting at ",
4551     (start_queue_run_id == NULL)? US"" : start_queue_run_id,
4552     (stop_queue_run_id == NULL)?  US"" : US" stopping at ",
4553     (stop_queue_run_id == NULL)?  US"" : stop_queue_run_id);
4554   if (*queue_name)
4555     set_process_info("running the '%s' queue (single queue run)", queue_name);
4556   else
4557     set_process_info("running the queue (single queue run)");
4558   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4559   exim_exit(EXIT_SUCCESS, US"main");
4560   }
4561
4562
4563 /* Find the login name of the real user running this process. This is always
4564 needed when receiving a message, because it is written into the spool file. It
4565 may also be used to construct a from: or a sender: header, and in this case we
4566 need the user's full name as well, so save a copy of it, checked for RFC822
4567 syntax and munged if necessary, if it hasn't previously been set by the -F
4568 argument. We may try to get the passwd entry more than once, in case NIS or
4569 other delays are in evidence. Save the home directory for use in filter testing
4570 (only). */
4571
4572 for (i = 0;;)
4573   {
4574   if ((pw = getpwuid(real_uid)) != NULL)
4575     {
4576     originator_login = string_copy(US pw->pw_name);
4577     originator_home = string_copy(US pw->pw_dir);
4578
4579     /* If user name has not been set by -F, set it from the passwd entry
4580     unless -f has been used to set the sender address by a trusted user. */
4581
4582     if (!originator_name)
4583       {
4584       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
4585         {
4586         uschar *name = US pw->pw_gecos;
4587         uschar *amp = Ustrchr(name, '&');
4588         uschar buffer[256];
4589
4590         /* Most Unix specify that a '&' character in the gecos field is
4591         replaced by a copy of the login name, and some even specify that
4592         the first character should be upper cased, so that's what we do. */
4593
4594         if (amp)
4595           {
4596           int loffset;
4597           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
4598             (int)(amp - name), name, &loffset, originator_login, amp + 1);
4599           buffer[loffset] = toupper(buffer[loffset]);
4600           name = buffer;
4601           }
4602
4603         /* If a pattern for matching the gecos field was supplied, apply
4604         it and then expand the name string. */
4605
4606         if (gecos_pattern && gecos_name)
4607           {
4608           const pcre *re;
4609           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
4610
4611           if (regex_match_and_setup(re, name, 0, -1))
4612             {
4613             uschar *new_name = expand_string(gecos_name);
4614             expand_nmax = -1;
4615             if (new_name)
4616               {
4617               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
4618                 "gecos field \"%s\"\n", new_name, name);
4619               name = new_name;
4620               }
4621             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
4622               "\"%s\": %s\n", gecos_name, expand_string_message);
4623             }
4624           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
4625             "gecos field \"%s\"\n", gecos_pattern, name);
4626           store_free((void *)re);
4627           }
4628         originator_name = string_copy(name);
4629         }
4630
4631       /* A trusted caller has used -f but not -F */
4632
4633       else originator_name = US"";
4634       }
4635
4636     /* Break the retry loop */
4637
4638     break;
4639     }
4640
4641   if (++i > finduser_retries) break;
4642   sleep(1);
4643   }
4644
4645 /* If we cannot get a user login, log the incident and give up, unless the
4646 configuration specifies something to use. When running in the test harness,
4647 any setting of unknown_login overrides the actual name. */
4648
4649 if (originator_login == NULL || f.running_in_test_harness)
4650   {
4651   if (unknown_login != NULL)
4652     {
4653     originator_login = expand_string(unknown_login);
4654     if (originator_name == NULL && unknown_username != NULL)
4655       originator_name = expand_string(unknown_username);
4656     if (originator_name == NULL) originator_name = US"";
4657     }
4658   if (originator_login == NULL)
4659     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
4660       (int)real_uid);
4661   }
4662
4663 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
4664 RFC822 address.*/
4665
4666 originator_name = string_copy(parse_fix_phrase(originator_name,
4667   Ustrlen(originator_name), big_buffer, big_buffer_size));
4668
4669 /* If a message is created by this call of Exim, the uid/gid of its originator
4670 are those of the caller. These values are overridden if an existing message is
4671 read in from the spool. */
4672
4673 originator_uid = real_uid;
4674 originator_gid = real_gid;
4675
4676 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
4677   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
4678
4679 /* Run in daemon and/or queue-running mode. The function daemon_go() never
4680 returns. We leave this till here so that the originator_ fields are available
4681 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
4682 mode. */
4683
4684 if (f.daemon_listen || f.inetd_wait_mode || queue_interval > 0)
4685   {
4686   if (mua_wrapper)
4687     {
4688     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
4689     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
4690       "mua_wrapper is set");
4691     }
4692
4693 # ifndef DISABLE_TLS
4694   /* This also checks that the library linkage is working and we can call
4695   routines in it, so call even if tls_require_ciphers is unset */
4696     {
4697 # ifdef MEASURE_TIMING
4698     struct timeval t0, diff;
4699     (void)gettimeofday(&t0, NULL);
4700 # endif
4701     if (!tls_dropprivs_validate_require_cipher(FALSE))
4702       exit(1);
4703 # ifdef MEASURE_TIMING
4704     report_time_since(&t0, US"validate_ciphers (delta)");
4705 # endif
4706     }
4707 #endif
4708
4709   daemon_go();
4710   }
4711
4712 /* If the sender ident has not been set (by a trusted caller) set it to
4713 the caller. This will get overwritten below for an inetd call. If a trusted
4714 caller has set it empty, unset it. */
4715
4716 if (!sender_ident) sender_ident = originator_login;
4717 else if (!*sender_ident) sender_ident = NULL;
4718
4719 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
4720 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
4721 originator_* variables set. */
4722
4723 if (test_rewrite_arg >= 0)
4724   {
4725   f.really_exim = FALSE;
4726   if (test_rewrite_arg >= argc)
4727     {
4728     printf("-brw needs an address argument\n");
4729     exim_exit(EXIT_FAILURE, US"main");
4730     }
4731   rewrite_test(argv[test_rewrite_arg]);
4732   exim_exit(EXIT_SUCCESS, US"main");
4733   }
4734
4735 /* A locally-supplied message is considered to be coming from a local user
4736 unless a trusted caller supplies a sender address with -f, or is passing in the
4737 message via SMTP (inetd invocation or otherwise). */
4738
4739 if (  !sender_address && !smtp_input
4740    || !f.trusted_caller && filter_test == FTEST_NONE)
4741   {
4742   f.sender_local = TRUE;
4743
4744   /* A trusted caller can supply authenticated_sender and authenticated_id
4745   via -oMas and -oMai and if so, they will already be set. Otherwise, force
4746   defaults except when host checking. */
4747
4748   if (!authenticated_sender && !host_checking)
4749     authenticated_sender = string_sprintf("%s@%s", originator_login,
4750       qualify_domain_sender);
4751   if (!authenticated_id && !host_checking)
4752     authenticated_id = originator_login;
4753   }
4754
4755 /* Trusted callers are always permitted to specify the sender address.
4756 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
4757 is specified is the empty address. However, if a trusted caller does not
4758 specify a sender address for SMTP input, we leave sender_address unset. This
4759 causes the MAIL commands to be honoured. */
4760
4761 if (  !smtp_input && !sender_address
4762    || !receive_check_set_sender(sender_address))
4763   {
4764   /* Either the caller is not permitted to set a general sender, or this is
4765   non-SMTP input and the trusted caller has not set a sender. If there is no
4766   sender, or if a sender other than <> is set, override with the originator's
4767   login (which will get qualified below), except when checking things. */
4768
4769   if (sender_address == NULL             /* No sender_address set */
4770        ||                                /*         OR            */
4771        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
4772        !checking))                       /* Not running tests, including filter tests */
4773     {
4774     sender_address = originator_login;
4775     f.sender_address_forced = FALSE;
4776     sender_address_domain = 0;
4777     }
4778   }
4779
4780 /* Remember whether an untrusted caller set the sender address */
4781
4782 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
4783
4784 /* Ensure that the sender address is fully qualified unless it is the empty
4785 address, which indicates an error message, or doesn't exist (root caller, smtp
4786 interface, no -f argument). */
4787
4788 if (sender_address && *sender_address && sender_address_domain == 0)
4789   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
4790     qualify_domain_sender);
4791
4792 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
4793
4794 /* Handle a request to verify a list of addresses, or test them for delivery.
4795 This must follow the setting of the sender address, since routers can be
4796 predicated upon the sender. If no arguments are given, read addresses from
4797 stdin. Set debug_level to at least D_v to get full output for address testing.
4798 */
4799
4800 if (verify_address_mode || f.address_test_mode)
4801   {
4802   int exit_value = 0;
4803   int flags = vopt_qualify;
4804
4805   if (verify_address_mode)
4806     {
4807     if (!verify_as_sender) flags |= vopt_is_recipient;
4808     DEBUG(D_verify) debug_print_ids(US"Verifying:");
4809     }
4810
4811   else
4812     {
4813     flags |= vopt_is_recipient;
4814     debug_selector |= D_v;
4815     debug_file = stderr;
4816     debug_fd = fileno(debug_file);
4817     DEBUG(D_verify) debug_print_ids(US"Address testing:");
4818     }
4819
4820   if (recipients_arg < argc)
4821     {
4822     while (recipients_arg < argc)
4823       {
4824       /* Supplied addresses are tainted since they come from a user */
4825       uschar * s = string_copy_taint(argv[recipients_arg++], TRUE);
4826       while (*s)
4827         {
4828         BOOL finished = FALSE;
4829         uschar *ss = parse_find_address_end(s, FALSE);
4830         if (*ss == ',') *ss = 0; else finished = TRUE;
4831         test_address(s, flags, &exit_value);
4832         s = ss;
4833         if (!finished)
4834           while (*++s == ',' || isspace(*s)) ;
4835         }
4836       }
4837     }
4838
4839   else for (;;)
4840     {
4841     uschar * s = get_stdinput(NULL, NULL);
4842     if (!s) break;
4843     test_address(string_copy_taint(s, TRUE), flags, &exit_value);
4844     }
4845
4846   route_tidyup();
4847   exim_exit(exit_value, US"main");
4848   }
4849
4850 /* Handle expansion checking. Either expand items on the command line, or read
4851 from stdin if there aren't any. If -Mset was specified, load the message so
4852 that its variables can be used, but restrict this facility to admin users.
4853 Otherwise, if -bem was used, read a message from stdin. */
4854
4855 if (expansion_test)
4856   {
4857   dns_init(FALSE, FALSE, FALSE);
4858   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
4859     {
4860     uschar spoolname[256];  /* Not big_buffer; used in spool_read_header() */
4861     if (!f.admin_user)
4862       exim_fail("exim: permission denied\n");
4863     message_id = argv[msg_action_arg];
4864     (void)string_format(spoolname, sizeof(spoolname), "%s-H", message_id);
4865     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
4866       printf ("Failed to load message datafile %s\n", message_id);
4867     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
4868       printf ("Failed to load message %s\n", message_id);
4869     }
4870
4871   /* Read a test message from a file. We fudge it up to be on stdin, saving
4872   stdin itself for later reading of expansion strings. */
4873
4874   else if (expansion_test_message)
4875     {
4876     int save_stdin = dup(0);
4877     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
4878     if (fd < 0)
4879       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
4880         strerror(errno));
4881     (void) dup2(fd, 0);
4882     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
4883     message_ended = END_NOTENDED;
4884     read_message_body(receive_msg(extract_recipients));
4885     message_linecount += body_linecount;
4886     (void)dup2(save_stdin, 0);
4887     (void)close(save_stdin);
4888     clearerr(stdin);               /* Required by Darwin */
4889     }
4890
4891   /* Only admin users may see config-file macros this way */
4892
4893   if (!f.admin_user) macros_user = macros = mlast = NULL;
4894
4895   /* Allow $recipients for this testing */
4896
4897   f.enable_dollar_recipients = TRUE;
4898
4899   /* Expand command line items */
4900
4901   if (recipients_arg < argc)
4902     while (recipients_arg < argc)
4903       expansion_test_line(argv[recipients_arg++]);
4904
4905   /* Read stdin */
4906
4907   else
4908     {
4909     char *(*fn_readline)(const char *) = NULL;
4910     void (*fn_addhist)(const char *) = NULL;
4911     uschar * s;
4912
4913 #ifdef USE_READLINE
4914     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
4915 #endif
4916
4917     while (s = get_stdinput(fn_readline, fn_addhist))
4918       expansion_test_line(s);
4919
4920 #ifdef USE_READLINE
4921     if (dlhandle) dlclose(dlhandle);
4922 #endif
4923     }
4924
4925   /* The data file will be open after -Mset */
4926
4927   if (deliver_datafile >= 0)
4928     {
4929     (void)close(deliver_datafile);
4930     deliver_datafile = -1;
4931     }
4932
4933   exim_exit(EXIT_SUCCESS, US"main: expansion test");
4934   }
4935
4936
4937 /* The active host name is normally the primary host name, but it can be varied
4938 for hosts that want to play several parts at once. We need to ensure that it is
4939 set for host checking, and for receiving messages. */
4940
4941 smtp_active_hostname = primary_hostname;
4942 if (raw_active_hostname != NULL)
4943   {
4944   uschar *nah = expand_string(raw_active_hostname);
4945   if (nah == NULL)
4946     {
4947     if (!f.expand_string_forcedfail)
4948       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
4949         "(smtp_active_hostname): %s", raw_active_hostname,
4950         expand_string_message);
4951     }
4952   else if (nah[0] != 0) smtp_active_hostname = nah;
4953   }
4954
4955 /* Handle host checking: this facility mocks up an incoming SMTP call from a
4956 given IP address so that the blocking and relay configuration can be tested.
4957 Unless a sender_ident was set by -oMt, we discard it (the default is the
4958 caller's login name). An RFC 1413 call is made only if we are running in the
4959 test harness and an incoming interface and both ports are specified, because
4960 there is no TCP/IP call to find the ident for. */
4961
4962 if (host_checking)
4963   {
4964   int x[4];
4965   int size;
4966
4967   if (!sender_ident_set)
4968     {
4969     sender_ident = NULL;
4970     if (f.running_in_test_harness && sender_host_port != 0 &&
4971         interface_address != NULL && interface_port != 0)
4972       verify_get_ident(1413);
4973     }
4974
4975   /* In case the given address is a non-canonical IPv6 address, canonicalize
4976   it. The code works for both IPv4 and IPv6, as it happens. */
4977
4978   size = host_aton(sender_host_address, x);
4979   sender_host_address = store_get(48, FALSE);  /* large enough for full IPv6 */
4980   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
4981
4982   /* Now set up for testing */
4983
4984   host_build_sender_fullhost();
4985   smtp_input = TRUE;
4986   smtp_in = stdin;
4987   smtp_out = stdout;
4988   f.sender_local = FALSE;
4989   f.sender_host_notsocket = TRUE;
4990   debug_file = stderr;
4991   debug_fd = fileno(debug_file);
4992   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
4993     "**** but without any ident (RFC 1413) callback.\n"
4994     "**** This is not for real!\n\n",
4995       sender_host_address);
4996
4997   memset(sender_host_cache, 0, sizeof(sender_host_cache));
4998   if (verify_check_host(&hosts_connection_nolog) == OK)
4999     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5000   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5001
5002   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5003   because a log line has already been written for all its failure exists
5004   (usually "connection refused: <reason>") and writing another one is
5005   unnecessary clutter. */
5006
5007   if (smtp_start_session())
5008     {
5009     for (; (reset_point = store_mark()); store_reset(reset_point))
5010       {
5011       if (smtp_setup_msg() <= 0) break;
5012       if (!receive_msg(FALSE)) break;
5013
5014       return_path = sender_address = NULL;
5015       dnslist_domain = dnslist_matched = NULL;
5016 #ifndef DISABLE_DKIM
5017       dkim_cur_signer = NULL;
5018 #endif
5019       acl_var_m = NULL;
5020       deliver_localpart_orig = NULL;
5021       deliver_domain_orig = NULL;
5022       callout_address = sending_ip_address = NULL;
5023       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5024       }
5025     smtp_log_no_mail();
5026     }
5027   exim_exit(EXIT_SUCCESS, US"main");
5028   }
5029
5030
5031 /* Arrange for message reception if recipients or SMTP were specified;
5032 otherwise complain unless a version print (-bV) happened or this is a filter
5033 verification test or info dump.
5034 In the former case, show the configuration file name. */
5035
5036 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5037   {
5038   if (version_printed)
5039     {
5040     if (Ustrchr(config_main_filelist, ':'))
5041       printf("Configuration file search path is %s\n", config_main_filelist);
5042     printf("Configuration file is %s\n", config_main_filename);
5043     return EXIT_SUCCESS;
5044     }
5045
5046   if (info_flag != CMDINFO_NONE)
5047     {
5048     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5049     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5050     }
5051
5052   if (filter_test == FTEST_NONE)
5053     exim_usage(called_as);
5054   }
5055
5056
5057 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5058 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5059 that we are not called from inetd, because that is rejected above. The
5060 following configuration settings are forced here:
5061
5062   (1) Synchronous delivery (-odi)
5063   (2) Errors to stderr (-oep == -oeq)
5064   (3) No parallel remote delivery
5065   (4) Unprivileged delivery
5066
5067 We don't force overall queueing options because there are several of them;
5068 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5069 to override any SMTP queueing. */
5070
5071 if (mua_wrapper)
5072   {
5073   f.synchronous_delivery = TRUE;
5074   arg_error_handling = ERRORS_STDERR;
5075   remote_max_parallel = 1;
5076   deliver_drop_privilege = TRUE;
5077   f.queue_smtp = FALSE;
5078   queue_smtp_domains = NULL;
5079 #ifdef SUPPORT_I18N
5080   message_utf8_downconvert = -1;        /* convert-if-needed */
5081 #endif
5082   }
5083
5084
5085 /* Prepare to accept one or more new messages on the standard input. When a
5086 message has been read, its id is returned in message_id[]. If doing immediate
5087 delivery, we fork a delivery process for each received message, except for the
5088 last one, where we can save a process switch.
5089
5090 It is only in non-smtp mode that error_handling is allowed to be changed from
5091 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5092 sendmail error modes other than -oem ever actually used? Later: yes.) */
5093
5094 if (!smtp_input) error_handling = arg_error_handling;
5095
5096 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5097 logging being sent down the socket and make an identd call to get the
5098 sender_ident. */
5099
5100 else if (f.is_inetd)
5101   {
5102   (void)fclose(stderr);
5103   exim_nullstd();                       /* Re-open to /dev/null */
5104   verify_get_ident(IDENT_PORT);
5105   host_build_sender_fullhost();
5106   set_process_info("handling incoming connection from %s via inetd",
5107     sender_fullhost);
5108   }
5109
5110 /* If the sender host address has been set, build sender_fullhost if it hasn't
5111 already been done (which it will have been for inetd). This caters for the
5112 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5113 so that the test for IP options is skipped for -bs input. */
5114
5115 if (sender_host_address && !sender_fullhost)
5116   {
5117   host_build_sender_fullhost();
5118   set_process_info("handling incoming connection from %s via -oMa",
5119     sender_fullhost);
5120   f.sender_host_notsocket = TRUE;
5121   }
5122
5123 /* Otherwise, set the sender host as unknown except for inetd calls. This
5124 prevents host checking in the case of -bs not from inetd and also for -bS. */
5125
5126 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5127
5128 /* If stdout does not exist, then dup stdin to stdout. This can happen
5129 if exim is started from inetd. In this case fd 0 will be set to the socket,
5130 but fd 1 will not be set. This also happens for passed SMTP channels. */
5131
5132 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5133
5134 /* Set up the incoming protocol name and the state of the program. Root is
5135 allowed to force received protocol via the -oMr option above. If we have come
5136 via inetd, the process info has already been set up. We don't set
5137 received_protocol here for smtp input, as it varies according to
5138 batch/HELO/EHLO/AUTH/TLS. */
5139
5140 if (smtp_input)
5141   {
5142   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5143     smtp_batched_input? "batched " : "",
5144     (sender_address!= NULL)? sender_address : originator_login);
5145   }
5146 else
5147   {
5148   int old_pool = store_pool;
5149   store_pool = POOL_PERM;
5150   if (!received_protocol)
5151     received_protocol = string_sprintf("local%s", called_as);
5152   store_pool = old_pool;
5153   set_process_info("accepting a local non-SMTP message from <%s>",
5154     sender_address);
5155   }
5156
5157 /* Initialize the session_local_queue-only flag (this will be ignored if
5158 mua_wrapper is set) */
5159
5160 queue_check_only();
5161 session_local_queue_only = queue_only;
5162
5163 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5164 the spool if so configured. On failure, we must not attempt to send an error
5165 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5166 error code is given.) */
5167
5168 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5169   exim_fail("exim: insufficient disk space\n");
5170
5171 /* If this is smtp input of any kind, real or batched, handle the start of the
5172 SMTP session.
5173
5174 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5175 because a log line has already been written for all its failure exists
5176 (usually "connection refused: <reason>") and writing another one is
5177 unnecessary clutter. */
5178
5179 if (smtp_input)
5180   {
5181   smtp_in = stdin;
5182   smtp_out = stdout;
5183   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5184   if (verify_check_host(&hosts_connection_nolog) == OK)
5185     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5186   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5187   if (!smtp_start_session())
5188     {
5189     mac_smtp_fflush();
5190     exim_exit(EXIT_SUCCESS, US"smtp_start toplevel");
5191     }
5192   }
5193
5194 /* Otherwise, set up the input size limit here. */
5195
5196 else
5197   {
5198   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5199   if (expand_string_message)
5200     if (thismessage_size_limit == -1)
5201       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5202         "message_size_limit: %s", expand_string_message);
5203     else
5204       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5205         "message_size_limit: %s", expand_string_message);
5206   }
5207
5208 /* Loop for several messages when reading SMTP input. If we fork any child
5209 processes, we don't want to wait for them unless synchronous delivery is
5210 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5211 same as SIG_DFL, despite the fact that documentation often lists the default as
5212 "ignore". This is a confusing area. This is what I know:
5213
5214 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5215 processes that complete simply to go away without ever becoming defunct. You
5216 can't then wait for them - but we don't want to wait for them in the
5217 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5218 happen for all OS (e.g. *BSD is different).
5219
5220 But that's not the end of the story. Some (many? all?) systems have the
5221 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5222 has by default, so it seems that the difference is merely one of default
5223 (compare restarting vs non-restarting signals).
5224
5225 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5226 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5227 of the loop below. Paranoia rules.
5228
5229 February 2003: That's *still* not the end of the story. There are now versions
5230 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5231 process then calls waitpid(), a grumble is written to the system log, because
5232 this is logically inconsistent. In other words, it doesn't like the paranoia.
5233 As a consequence of this, the waitpid() below is now excluded if we are sure
5234 that SIG_IGN works. */
5235
5236 if (!f.synchronous_delivery)
5237   {
5238   #ifdef SA_NOCLDWAIT
5239   struct sigaction act;
5240   act.sa_handler = SIG_IGN;
5241   sigemptyset(&(act.sa_mask));
5242   act.sa_flags = SA_NOCLDWAIT;
5243   sigaction(SIGCHLD, &act, NULL);
5244   #else
5245   signal(SIGCHLD, SIG_IGN);
5246   #endif
5247   }
5248
5249 /* Save the current store pool point, for resetting at the start of
5250 each message, and save the real sender address, if any. */
5251
5252 real_sender_address = sender_address;
5253
5254 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5255 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5256 collapsed). */
5257
5258 while (more)
5259   {
5260   reset_point = store_mark();
5261   message_id[0] = 0;
5262
5263   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5264   input and build the recipients list, before calling receive_msg() to read the
5265   message proper. Whatever sender address is given in the SMTP transaction is
5266   often ignored for local senders - we use the actual sender, which is normally
5267   either the underlying user running this process or a -f argument provided by
5268   a trusted caller. It is saved in real_sender_address. The test for whether to
5269   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5270
5271   if (smtp_input)
5272     {
5273     int rc;
5274     if ((rc = smtp_setup_msg()) > 0)
5275       {
5276       if (real_sender_address != NULL &&
5277           !receive_check_set_sender(sender_address))
5278         {
5279         sender_address = raw_sender = real_sender_address;
5280         sender_address_unrewritten = NULL;
5281         }
5282
5283       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5284       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5285       the very end. The result of the ACL is ignored (as for other non-SMTP
5286       messages). It is run for its potential side effects. */
5287
5288       if (smtp_batched_input && acl_not_smtp_start != NULL)
5289         {
5290         uschar *user_msg, *log_msg;
5291         f.enable_dollar_recipients = TRUE;
5292         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5293           &user_msg, &log_msg);
5294         f.enable_dollar_recipients = FALSE;
5295         }
5296
5297       /* Now get the data for the message */
5298
5299       more = receive_msg(extract_recipients);
5300       if (message_id[0] == 0)
5301         {
5302         cancel_cutthrough_connection(TRUE, US"receive dropped");
5303         if (more) goto moreloop;
5304         smtp_log_no_mail();               /* Log no mail if configured */
5305         exim_exit(EXIT_FAILURE, US"receive toplevel");
5306         }
5307       }
5308     else
5309       {
5310       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5311       smtp_log_no_mail();               /* Log no mail if configured */
5312       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS, US"msg setup toplevel");
5313       }
5314     }
5315
5316   /* In the non-SMTP case, we have all the information from the command
5317   line, but must process it in case it is in the more general RFC822
5318   format, and in any case, to detect syntax errors. Also, it appears that
5319   the use of comma-separated lists as single arguments is common, so we
5320   had better support them. */
5321
5322   else
5323     {
5324     int rcount = 0;
5325     int count = argc - recipients_arg;
5326     uschar **list = argv + recipients_arg;
5327
5328     /* These options cannot be changed dynamically for non-SMTP messages */
5329
5330     f.active_local_sender_retain = local_sender_retain;
5331     f.active_local_from_check = local_from_check;
5332
5333     /* Save before any rewriting */
5334
5335     raw_sender = string_copy(sender_address);
5336
5337     /* Loop for each argument (supplied by user hence tainted) */
5338
5339     for (int i = 0; i < count; i++)
5340       {
5341       int start, end, domain;
5342       uschar * errmess;
5343       uschar * s = string_copy_taint(list[i], TRUE);
5344
5345       /* Loop for each comma-separated address */
5346
5347       while (*s != 0)
5348         {
5349         BOOL finished = FALSE;
5350         uschar *recipient;
5351         uschar *ss = parse_find_address_end(s, FALSE);
5352
5353         if (*ss == ',') *ss = 0; else finished = TRUE;
5354
5355         /* Check max recipients - if -t was used, these aren't recipients */
5356
5357         if (recipients_max > 0 && ++rcount > recipients_max &&
5358             !extract_recipients)
5359           if (error_handling == ERRORS_STDERR)
5360             {
5361             fprintf(stderr, "exim: too many recipients\n");
5362             exim_exit(EXIT_FAILURE, US"main");
5363             }
5364           else
5365             return
5366               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5367                 errors_sender_rc : EXIT_FAILURE;
5368
5369 #ifdef SUPPORT_I18N
5370         {
5371         BOOL b = allow_utf8_domains;
5372         allow_utf8_domains = TRUE;
5373 #endif
5374         recipient =
5375           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5376
5377 #ifdef SUPPORT_I18N
5378         if (string_is_utf8(recipient))
5379           message_smtputf8 = TRUE;
5380         else
5381           allow_utf8_domains = b;
5382         }
5383 #endif
5384         if (domain == 0 && !f.allow_unqualified_recipient)
5385           {
5386           recipient = NULL;
5387           errmess = US"unqualified recipient address not allowed";
5388           }
5389
5390         if (recipient == NULL)
5391           {
5392           if (error_handling == ERRORS_STDERR)
5393             {
5394             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5395               string_printing(list[i]), errmess);
5396             exim_exit(EXIT_FAILURE, US"main");
5397             }
5398           else
5399             {
5400             error_block eblock;
5401             eblock.next = NULL;
5402             eblock.text1 = string_printing(list[i]);
5403             eblock.text2 = errmess;
5404             return
5405               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5406                 errors_sender_rc : EXIT_FAILURE;
5407             }
5408           }
5409
5410         receive_add_recipient(string_copy_taint(recipient, TRUE), -1);
5411         s = ss;
5412         if (!finished)
5413           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5414         }
5415       }
5416
5417     /* Show the recipients when debugging */
5418
5419     DEBUG(D_receive)
5420       {
5421       if (sender_address != NULL) debug_printf("Sender: %s\n", sender_address);
5422       if (recipients_list != NULL)
5423         {
5424         debug_printf("Recipients:\n");
5425         for (int i = 0; i < recipients_count; i++)
5426           debug_printf("  %s\n", recipients_list[i].address);
5427         }
5428       }
5429
5430     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5431     ignored; rejecting here would just add complication, and it can just as
5432     well be done later. Allow $recipients to be visible in the ACL. */
5433
5434     if (acl_not_smtp_start)
5435       {
5436       uschar *user_msg, *log_msg;
5437       f.enable_dollar_recipients = TRUE;
5438       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5439         &user_msg, &log_msg);
5440       f.enable_dollar_recipients = FALSE;
5441       }
5442
5443     /* Pause for a while waiting for input.  If none received in that time,
5444     close the logfile, if we had one open; then if we wait for a long-running
5445     datasource (months, in one use-case) log rotation will not leave us holding
5446     the file copy. */
5447
5448     if (!receive_timeout)
5449       {
5450       struct timeval t = { .tv_sec = 30*60, .tv_usec = 0 };     /* 30 minutes */
5451       fd_set r;
5452
5453       FD_ZERO(&r); FD_SET(0, &r);
5454       if (select(1, &r, NULL, NULL, &t) == 0) mainlog_close();
5455       }
5456
5457     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5458     will just read the headers for the message, and not write anything onto the
5459     spool. */
5460
5461     message_ended = END_NOTENDED;
5462     more = receive_msg(extract_recipients);
5463
5464     /* more is always FALSE here (not SMTP message) when reading a message
5465     for real; when reading the headers of a message for filter testing,
5466     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5467
5468     if (message_id[0] == 0) exim_exit(EXIT_FAILURE, US"main");
5469     }  /* Non-SMTP message reception */
5470
5471   /* If this is a filter testing run, there are headers in store, but
5472   no message on the spool. Run the filtering code in testing mode, setting
5473   the domain to the qualify domain and the local part to the current user,
5474   unless they have been set by options. The prefix and suffix are left unset
5475   unless specified. The the return path is set to to the sender unless it has
5476   already been set from a return-path header in the message. */
5477
5478   if (filter_test != FTEST_NONE)
5479     {
5480     deliver_domain = (ftest_domain != NULL)?
5481       ftest_domain : qualify_domain_recipient;
5482     deliver_domain_orig = deliver_domain;
5483     deliver_localpart = (ftest_localpart != NULL)?
5484       ftest_localpart : originator_login;
5485     deliver_localpart_orig = deliver_localpart;
5486     deliver_localpart_prefix = ftest_prefix;
5487     deliver_localpart_suffix = ftest_suffix;
5488     deliver_home = originator_home;
5489
5490     if (return_path == NULL)
5491       {
5492       printf("Return-path copied from sender\n");
5493       return_path = string_copy(sender_address);
5494       }
5495     else
5496       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5497     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5498
5499     receive_add_recipient(
5500       string_sprintf("%s%s%s@%s",
5501         (ftest_prefix == NULL)? US"" : ftest_prefix,
5502         deliver_localpart,
5503         (ftest_suffix == NULL)? US"" : ftest_suffix,
5504         deliver_domain), -1);
5505
5506     printf("Recipient   = %s\n", recipients_list[0].address);
5507     if (ftest_prefix != NULL) printf("Prefix    = %s\n", ftest_prefix);
5508     if (ftest_suffix != NULL) printf("Suffix    = %s\n", ftest_suffix);
5509
5510     if (chdir("/"))   /* Get away from wherever the user is running this from */
5511       {
5512       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5513       exim_exit(EXIT_FAILURE, US"main");
5514       }
5515
5516     /* Now we run either a system filter test, or a user filter test, or both.
5517     In the latter case, headers added by the system filter will persist and be
5518     available to the user filter. We need to copy the filter variables
5519     explicitly. */
5520
5521     if ((filter_test & FTEST_SYSTEM) != 0)
5522       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5523         exim_exit(EXIT_FAILURE, US"main");
5524
5525     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5526
5527     if ((filter_test & FTEST_USER) != 0)
5528       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5529         exim_exit(EXIT_FAILURE, US"main");
5530
5531     exim_exit(EXIT_SUCCESS, US"main");
5532     }
5533
5534   /* Else act on the result of message reception. We should not get here unless
5535   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5536   will be TRUE. If it is not, check on the number of messages received in this
5537   connection. */
5538
5539   if (!session_local_queue_only &&
5540       smtp_accept_queue_per_connection > 0 &&
5541       receive_messagecount > smtp_accept_queue_per_connection)
5542     {
5543     session_local_queue_only = TRUE;
5544     queue_only_reason = 2;
5545     }
5546
5547   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5548   and queue_only_load is set, check that the load average is below it. If it is
5549   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5550   default), we put the whole session into queue_only mode. It then remains this
5551   way for any subsequent messages on the same SMTP connection. This is a
5552   deliberate choice; even though the load average may fall, it doesn't seem
5553   right to deliver later messages on the same call when not delivering earlier
5554   ones. However, there are odd cases where this is not wanted, so this can be
5555   changed by setting queue_only_load_latch false. */
5556
5557   local_queue_only = session_local_queue_only;
5558   if (!local_queue_only && queue_only_load >= 0)
5559     {
5560     local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load;
5561     if (local_queue_only)
5562       {
5563       queue_only_reason = 3;
5564       if (queue_only_load_latch) session_local_queue_only = TRUE;
5565       }
5566     }
5567
5568   /* If running as an MUA wrapper, all queueing options and freezing options
5569   are ignored. */
5570
5571   if (mua_wrapper)
5572     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
5573
5574   /* Log the queueing here, when it will get a message id attached, but
5575   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
5576   connections). */
5577
5578   if (local_queue_only)
5579     {
5580     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5581     switch(queue_only_reason)
5582       {
5583       case 2:
5584         log_write(L_delay_delivery,
5585                 LOG_MAIN, "no immediate delivery: more than %d messages "
5586           "received in one connection", smtp_accept_queue_per_connection);
5587         break;
5588
5589       case 3:
5590         log_write(L_delay_delivery,
5591                 LOG_MAIN, "no immediate delivery: load average %.2f",
5592                 (double)load_average/1000.0);
5593       break;
5594       }
5595     }
5596
5597   else if (f.queue_only_policy || f.deliver_freeze)
5598     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5599
5600   /* Else do the delivery unless the ACL or local_scan() called for queue only
5601   or froze the message. Always deliver in a separate process. A fork failure is
5602   not a disaster, as the delivery will eventually happen on a subsequent queue
5603   run. The search cache must be tidied before the fork, as the parent will
5604   do it before exiting. The child will trigger a lookup failure and
5605   thereby defer the delivery if it tries to use (for example) a cached ldap
5606   connection that the parent has called unbind on. */
5607
5608   else
5609     {
5610     pid_t pid;
5611     search_tidyup();
5612
5613     if ((pid = fork()) == 0)
5614       {
5615       int rc;
5616       close_unwanted();      /* Close unwanted file descriptors and TLS */
5617       exim_nullstd();        /* Ensure std{in,out,err} exist */
5618
5619       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
5620       mode, deliver_drop_privilege is forced TRUE). */
5621
5622       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
5623         {
5624         delivery_re_exec(CEE_EXEC_EXIT);
5625         /* Control does not return here. */
5626         }
5627
5628       /* No need to re-exec */
5629
5630       rc = deliver_message(message_id, FALSE, FALSE);
5631       search_tidyup();
5632       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
5633         ? EXIT_SUCCESS : EXIT_FAILURE);
5634       }
5635
5636     if (pid < 0)
5637       {
5638       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
5639       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
5640         "process: %s", strerror(errno));
5641       }
5642     else
5643       {
5644       release_cutthrough_connection(US"msg passed for delivery");
5645
5646       /* In the parent, wait if synchronous delivery is required. This will
5647       always be the case in MUA wrapper mode. */
5648
5649       if (f.synchronous_delivery)
5650         {
5651         int status;
5652         while (wait(&status) != pid);
5653         if ((status & 0x00ff) != 0)
5654           log_write(0, LOG_MAIN|LOG_PANIC,
5655             "process %d crashed with signal %d while delivering %s",
5656             (int)pid, status & 0x00ff, message_id);
5657         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE, US"main");
5658         }
5659       }
5660     }
5661
5662   /* The loop will repeat if more is TRUE. If we do not know know that the OS
5663   automatically reaps children (see comments above the loop), clear away any
5664   finished subprocesses here, in case there are lots of messages coming in
5665   from the same source. */
5666
5667   #ifndef SIG_IGN_WORKS
5668   while (waitpid(-1, NULL, WNOHANG) > 0);
5669   #endif
5670
5671 moreloop:
5672   return_path = sender_address = NULL;
5673   authenticated_sender = NULL;
5674   deliver_localpart_orig = NULL;
5675   deliver_domain_orig = NULL;
5676   deliver_host = deliver_host_address = NULL;
5677   dnslist_domain = dnslist_matched = NULL;
5678 #ifdef WITH_CONTENT_SCAN
5679   malware_name = NULL;
5680 #endif
5681   callout_address = NULL;
5682   sending_ip_address = NULL;
5683   acl_var_m = NULL;
5684   for(int i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
5685
5686   store_reset(reset_point);
5687   }
5688
5689 exim_exit(EXIT_SUCCESS, US"main");   /* Never returns */
5690 return 0;                  /* To stop compiler warning */
5691 }
5692
5693
5694 /* End of exim.c */