TFO: on FreeBSD avoid client TFO-mode connects unless a TCP_FASTOPEN setsocketopt...
[users/heiko/exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2016 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8
9 /* The main function: entry point, initialization, and high-level control.
10 Also a few functions that don't naturally fit elsewhere. */
11
12
13 #include "exim.h"
14
15 #if defined(__GLIBC__) && !defined(__UCLIBC__)
16 # include <gnu/libc-version.h>
17 #endif
18
19 #ifdef USE_GNUTLS
20 # include <gnutls/gnutls.h>
21 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
22 #  define DISABLE_OCSP
23 # endif
24 #endif
25
26 extern void init_lookup_list(void);
27
28
29
30 /*************************************************
31 *      Function interface to store functions     *
32 *************************************************/
33
34 /* We need some real functions to pass to the PCRE regular expression library
35 for store allocation via Exim's store manager. The normal calls are actually
36 macros that pass over location information to make tracing easier. These
37 functions just interface to the standard macro calls. A good compiler will
38 optimize out the tail recursion and so not make them too expensive. There
39 are two sets of functions; one for use when we want to retain the compiled
40 regular expression for a long time; the other for short-term use. */
41
42 static void *
43 function_store_get(size_t size)
44 {
45 return store_get((int)size);
46 }
47
48 static void
49 function_dummy_free(void *block) { block = block; }
50
51 static void *
52 function_store_malloc(size_t size)
53 {
54 return store_malloc((int)size);
55 }
56
57 static void
58 function_store_free(void *block)
59 {
60 store_free(block);
61 }
62
63
64
65
66 /*************************************************
67 *         Enums for cmdline interface            *
68 *************************************************/
69
70 enum commandline_info { CMDINFO_NONE=0,
71   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
72
73
74
75
76 /*************************************************
77 *  Compile regular expression and panic on fail  *
78 *************************************************/
79
80 /* This function is called when failure to compile a regular expression leads
81 to a panic exit. In other cases, pcre_compile() is called directly. In many
82 cases where this function is used, the results of the compilation are to be
83 placed in long-lived store, so we temporarily reset the store management
84 functions that PCRE uses if the use_malloc flag is set.
85
86 Argument:
87   pattern     the pattern to compile
88   caseless    TRUE if caseless matching is required
89   use_malloc  TRUE if compile into malloc store
90
91 Returns:      pointer to the compiled pattern
92 */
93
94 const pcre *
95 regex_must_compile(const uschar *pattern, BOOL caseless, BOOL use_malloc)
96 {
97 int offset;
98 int options = PCRE_COPT;
99 const pcre *yield;
100 const uschar *error;
101 if (use_malloc)
102   {
103   pcre_malloc = function_store_malloc;
104   pcre_free = function_store_free;
105   }
106 if (caseless) options |= PCRE_CASELESS;
107 yield = pcre_compile(CCS pattern, options, (const char **)&error, &offset, NULL);
108 pcre_malloc = function_store_get;
109 pcre_free = function_dummy_free;
110 if (yield == NULL)
111   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
112     "%s at offset %d while compiling %s", error, offset, pattern);
113 return yield;
114 }
115
116
117
118
119 /*************************************************
120 *   Execute regular expression and set strings   *
121 *************************************************/
122
123 /* This function runs a regular expression match, and sets up the pointers to
124 the matched substrings.
125
126 Arguments:
127   re          the compiled expression
128   subject     the subject string
129   options     additional PCRE options
130   setup       if < 0 do full setup
131               if >= 0 setup from setup+1 onwards,
132                 excluding the full matched string
133
134 Returns:      TRUE or FALSE
135 */
136
137 BOOL
138 regex_match_and_setup(const pcre *re, const uschar *subject, int options, int setup)
139 {
140 int ovector[3*(EXPAND_MAXN+1)];
141 uschar * s = string_copy(subject);      /* de-constifying */
142 int n = pcre_exec(re, NULL, CS s, Ustrlen(s), 0,
143   PCRE_EOPT | options, ovector, sizeof(ovector)/sizeof(int));
144 BOOL yield = n >= 0;
145 if (n == 0) n = EXPAND_MAXN + 1;
146 if (yield)
147   {
148   int nn;
149   expand_nmax = (setup < 0)? 0 : setup + 1;
150   for (nn = (setup < 0)? 0 : 2; nn < n*2; nn += 2)
151     {
152     expand_nstring[expand_nmax] = s + ovector[nn];
153     expand_nlength[expand_nmax++] = ovector[nn+1] - ovector[nn];
154     }
155   expand_nmax--;
156   }
157 return yield;
158 }
159
160
161
162
163 /*************************************************
164 *            Set up processing details           *
165 *************************************************/
166
167 /* Save a text string for dumping when SIGUSR1 is received.
168 Do checks for overruns.
169
170 Arguments: format and arguments, as for printf()
171 Returns:   nothing
172 */
173
174 void
175 set_process_info(const char *format, ...)
176 {
177 int len = sprintf(CS process_info, "%5d ", (int)getpid());
178 va_list ap;
179 va_start(ap, format);
180 if (!string_vformat(process_info + len, PROCESS_INFO_SIZE - len - 2, format, ap))
181   Ustrcpy(process_info + len, "**** string overflowed buffer ****");
182 len = Ustrlen(process_info);
183 process_info[len+0] = '\n';
184 process_info[len+1] = '\0';
185 process_info_len = len + 1;
186 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
187 va_end(ap);
188 }
189
190
191
192
193 /*************************************************
194 *             Handler for SIGUSR1                *
195 *************************************************/
196
197 /* SIGUSR1 causes any exim process to write to the process log details of
198 what it is currently doing. It will only be used if the OS is capable of
199 setting up a handler that causes automatic restarting of any system call
200 that is in progress at the time.
201
202 This function takes care to be signal-safe.
203
204 Argument: the signal number (SIGUSR1)
205 Returns:  nothing
206 */
207
208 static void
209 usr1_handler(int sig)
210 {
211 int fd;
212
213 os_restarting_signal(sig, usr1_handler);
214
215 if ((fd = Uopen(process_log_path, O_APPEND|O_WRONLY, LOG_MODE)) < 0)
216   {
217   /* If we are already running as the Exim user, try to create it in the
218   current process (assuming spool_directory exists). Otherwise, if we are
219   root, do the creation in an exim:exim subprocess. */
220
221   int euid = geteuid();
222   if (euid == exim_uid)
223     fd = Uopen(process_log_path, O_CREAT|O_APPEND|O_WRONLY, LOG_MODE);
224   else if (euid == root_uid)
225     fd = log_create_as_exim(process_log_path);
226   }
227
228 /* If we are neither exim nor root, or if we failed to create the log file,
229 give up. There is not much useful we can do with errors, since we don't want
230 to disrupt whatever is going on outside the signal handler. */
231
232 if (fd < 0) return;
233
234 (void)write(fd, process_info, process_info_len);
235 (void)close(fd);
236 }
237
238
239
240 /*************************************************
241 *             Timeout handler                    *
242 *************************************************/
243
244 /* This handler is enabled most of the time that Exim is running. The handler
245 doesn't actually get used unless alarm() has been called to set a timer, to
246 place a time limit on a system call of some kind. When the handler is run, it
247 re-enables itself.
248
249 There are some other SIGALRM handlers that are used in special cases when more
250 than just a flag setting is required; for example, when reading a message's
251 input. These are normally set up in the code module that uses them, and the
252 SIGALRM handler is reset to this one afterwards.
253
254 Argument: the signal value (SIGALRM)
255 Returns:  nothing
256 */
257
258 void
259 sigalrm_handler(int sig)
260 {
261 sig = sig;      /* Keep picky compilers happy */
262 sigalrm_seen = TRUE;
263 os_non_restarting_signal(SIGALRM, sigalrm_handler);
264 }
265
266
267
268 /*************************************************
269 *      Sleep for a fractional time interval      *
270 *************************************************/
271
272 /* This function is called by millisleep() and exim_wait_tick() to wait for a
273 period of time that may include a fraction of a second. The coding is somewhat
274 tedious. We do not expect setitimer() ever to fail, but if it does, the process
275 will wait for ever, so we panic in this instance. (There was a case of this
276 when a bug in a function that calls milliwait() caused it to pass invalid data.
277 That's when I added the check. :-)
278
279 We assume it to be not worth sleeping for under 100us; this value will
280 require revisiting as hardware advances.  This avoids the issue of
281 a zero-valued timer setting meaning "never fire".
282
283 Argument:  an itimerval structure containing the interval
284 Returns:   nothing
285 */
286
287 static void
288 milliwait(struct itimerval *itval)
289 {
290 sigset_t sigmask;
291 sigset_t old_sigmask;
292
293 if (itval->it_value.tv_usec < 100 && itval->it_value.tv_sec == 0)
294   return;
295 (void)sigemptyset(&sigmask);                           /* Empty mask */
296 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
297 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
298 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
299   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
300     "setitimer() failed: %s", strerror(errno));
301 (void)sigfillset(&sigmask);                            /* All signals */
302 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
303 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
304 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
305 }
306
307
308
309
310 /*************************************************
311 *         Millisecond sleep function             *
312 *************************************************/
313
314 /* The basic sleep() function has a granularity of 1 second, which is too rough
315 in some cases - for example, when using an increasing delay to slow down
316 spammers.
317
318 Argument:    number of millseconds
319 Returns:     nothing
320 */
321
322 void
323 millisleep(int msec)
324 {
325 struct itimerval itval;
326 itval.it_interval.tv_sec = 0;
327 itval.it_interval.tv_usec = 0;
328 itval.it_value.tv_sec = msec/1000;
329 itval.it_value.tv_usec = (msec % 1000) * 1000;
330 milliwait(&itval);
331 }
332
333
334
335 /*************************************************
336 *         Compare microsecond times              *
337 *************************************************/
338
339 /*
340 Arguments:
341   tv1         the first time
342   tv2         the second time
343
344 Returns:      -1, 0, or +1
345 */
346
347 static int
348 exim_tvcmp(struct timeval *t1, struct timeval *t2)
349 {
350 if (t1->tv_sec > t2->tv_sec) return +1;
351 if (t1->tv_sec < t2->tv_sec) return -1;
352 if (t1->tv_usec > t2->tv_usec) return +1;
353 if (t1->tv_usec < t2->tv_usec) return -1;
354 return 0;
355 }
356
357
358
359
360 /*************************************************
361 *          Clock tick wait function              *
362 *************************************************/
363
364 /* Exim uses a time + a pid to generate a unique identifier in two places: its
365 message IDs, and in file names for maildir deliveries. Because some OS now
366 re-use pids within the same second, sub-second times are now being used.
367 However, for absolute certainty, we must ensure the clock has ticked before
368 allowing the relevant process to complete. At the time of implementation of
369 this code (February 2003), the speed of processors is such that the clock will
370 invariably have ticked already by the time a process has done its job. This
371 function prepares for the time when things are faster - and it also copes with
372 clocks that go backwards.
373
374 Arguments:
375   then_tv      A timeval which was used to create uniqueness; its usec field
376                  has been rounded down to the value of the resolution.
377                  We want to be sure the current time is greater than this.
378   resolution   The resolution that was used to divide the microseconds
379                  (1 for maildir, larger for message ids)
380
381 Returns:       nothing
382 */
383
384 void
385 exim_wait_tick(struct timeval *then_tv, int resolution)
386 {
387 struct timeval now_tv;
388 long int now_true_usec;
389
390 (void)gettimeofday(&now_tv, NULL);
391 now_true_usec = now_tv.tv_usec;
392 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
393
394 if (exim_tvcmp(&now_tv, then_tv) <= 0)
395   {
396   struct itimerval itval;
397   itval.it_interval.tv_sec = 0;
398   itval.it_interval.tv_usec = 0;
399   itval.it_value.tv_sec = then_tv->tv_sec - now_tv.tv_sec;
400   itval.it_value.tv_usec = then_tv->tv_usec + resolution - now_true_usec;
401
402   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
403   negative value for the microseconds is possible only in the case when "now"
404   is more than a second less than "then". That means that itval.it_value.tv_sec
405   is greater than zero. The following correction is therefore safe. */
406
407   if (itval.it_value.tv_usec < 0)
408     {
409     itval.it_value.tv_usec += 1000000;
410     itval.it_value.tv_sec -= 1;
411     }
412
413   DEBUG(D_transport|D_receive)
414     {
415     if (!running_in_test_harness)
416       {
417       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
418         then_tv->tv_sec, (long) then_tv->tv_usec,
419         now_tv.tv_sec, (long) now_tv.tv_usec);
420       debug_printf("waiting " TIME_T_FMT ".%06lu\n",
421         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
422       }
423     }
424
425   milliwait(&itval);
426   }
427 }
428
429
430
431
432 /*************************************************
433 *   Call fopen() with umask 777 and adjust mode  *
434 *************************************************/
435
436 /* Exim runs with umask(0) so that files created with open() have the mode that
437 is specified in the open() call. However, there are some files, typically in
438 the spool directory, that are created with fopen(). They end up world-writeable
439 if no precautions are taken. Although the spool directory is not accessible to
440 the world, this is an untidiness. So this is a wrapper function for fopen()
441 that sorts out the mode of the created file.
442
443 Arguments:
444    filename       the file name
445    options        the fopen() options
446    mode           the required mode
447
448 Returns:          the fopened FILE or NULL
449 */
450
451 FILE *
452 modefopen(const uschar *filename, const char *options, mode_t mode)
453 {
454 mode_t saved_umask = umask(0777);
455 FILE *f = Ufopen(filename, options);
456 (void)umask(saved_umask);
457 if (f != NULL) (void)fchmod(fileno(f), mode);
458 return f;
459 }
460
461
462
463
464 /*************************************************
465 *   Ensure stdin, stdout, and stderr exist       *
466 *************************************************/
467
468 /* Some operating systems grumble if an exec() happens without a standard
469 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
470 file will be opened and will use these fd values, and then some other bit of
471 code will assume, for example, that it can write error messages to stderr.
472 This function ensures that fds 0, 1, and 2 are open if they do not already
473 exist, by connecting them to /dev/null.
474
475 This function is also used to ensure that std{in,out,err} exist at all times,
476 so that if any library that Exim calls tries to use them, it doesn't crash.
477
478 Arguments:  None
479 Returns:    Nothing
480 */
481
482 void
483 exim_nullstd(void)
484 {
485 int i;
486 int devnull = -1;
487 struct stat statbuf;
488 for (i = 0; i <= 2; i++)
489   {
490   if (fstat(i, &statbuf) < 0 && errno == EBADF)
491     {
492     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
493     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
494       string_open_failed(errno, "/dev/null"));
495     if (devnull != i) (void)dup2(devnull, i);
496     }
497   }
498 if (devnull > 2) (void)close(devnull);
499 }
500
501
502
503
504 /*************************************************
505 *   Close unwanted file descriptors for delivery *
506 *************************************************/
507
508 /* This function is called from a new process that has been forked to deliver
509 an incoming message, either directly, or using exec.
510
511 We want any smtp input streams to be closed in this new process. However, it
512 has been observed that using fclose() here causes trouble. When reading in -bS
513 input, duplicate copies of messages have been seen. The files will be sharing a
514 file pointer with the parent process, and it seems that fclose() (at least on
515 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
516 least sometimes. Hence we go for closing the underlying file descriptors.
517
518 If TLS is active, we want to shut down the TLS library, but without molesting
519 the parent's SSL connection.
520
521 For delivery of a non-SMTP message, we want to close stdin and stdout (and
522 stderr unless debugging) because the calling process might have set them up as
523 pipes and be waiting for them to close before it waits for the submission
524 process to terminate. If they aren't closed, they hold up the calling process
525 until the initial delivery process finishes, which is not what we want.
526
527 Exception: We do want it for synchronous delivery!
528
529 And notwithstanding all the above, if D_resolver is set, implying resolver
530 debugging, leave stdout open, because that's where the resolver writes its
531 debugging output.
532
533 When we close stderr (which implies we've also closed stdout), we also get rid
534 of any controlling terminal.
535
536 Arguments:   None
537 Returns:     Nothing
538 */
539
540 static void
541 close_unwanted(void)
542 {
543 if (smtp_input)
544   {
545   #ifdef SUPPORT_TLS
546   tls_close(TRUE, FALSE);      /* Shut down the TLS library */
547   #endif
548   (void)close(fileno(smtp_in));
549   (void)close(fileno(smtp_out));
550   smtp_in = NULL;
551   }
552 else
553   {
554   (void)close(0);                                          /* stdin */
555   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
556   if (debug_selector == 0)                                 /* stderr */
557     {
558     if (!synchronous_delivery)
559       {
560       (void)close(2);
561       log_stderr = NULL;
562       }
563     (void)setsid();
564     }
565   }
566 }
567
568
569
570
571 /*************************************************
572 *          Set uid and gid                       *
573 *************************************************/
574
575 /* This function sets a new uid and gid permanently, optionally calling
576 initgroups() to set auxiliary groups. There are some special cases when running
577 Exim in unprivileged modes. In these situations the effective uid will not be
578 root; if we already have the right effective uid/gid, and don't need to
579 initialize any groups, leave things as they are.
580
581 Arguments:
582   uid        the uid
583   gid        the gid
584   igflag     TRUE if initgroups() wanted
585   msg        text to use in debugging output and failure log
586
587 Returns:     nothing; bombs out on failure
588 */
589
590 void
591 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, uschar *msg)
592 {
593 uid_t euid = geteuid();
594 gid_t egid = getegid();
595
596 if (euid == root_uid || euid != uid || egid != gid || igflag)
597   {
598   /* At least one OS returns +1 for initgroups failure, so just check for
599   non-zero. */
600
601   if (igflag)
602     {
603     struct passwd *pw = getpwuid(uid);
604     if (pw != NULL)
605       {
606       if (initgroups(pw->pw_name, gid) != 0)
607         log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
608           (long int)uid, strerror(errno));
609       }
610     else log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
611       "no passwd entry for uid=%ld", (long int)uid);
612     }
613
614   if (setgid(gid) < 0 || setuid(uid) < 0)
615     {
616     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
617       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
618     }
619   }
620
621 /* Debugging output included uid/gid and all groups */
622
623 DEBUG(D_uid)
624   {
625   int group_count, save_errno;
626   gid_t group_list[NGROUPS_MAX];
627   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
628     (long int)geteuid(), (long int)getegid(), (long int)getpid());
629   group_count = getgroups(NGROUPS_MAX, group_list);
630   save_errno = errno;
631   debug_printf("  auxiliary group list:");
632   if (group_count > 0)
633     {
634     int i;
635     for (i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
636     }
637   else if (group_count < 0)
638     debug_printf(" <error: %s>", strerror(save_errno));
639   else debug_printf(" <none>");
640   debug_printf("\n");
641   }
642 }
643
644
645
646
647 /*************************************************
648 *               Exit point                       *
649 *************************************************/
650
651 /* Exim exits via this function so that it always clears up any open
652 databases.
653
654 Arguments:
655   rc         return code
656
657 Returns:     does not return
658 */
659
660 void
661 exim_exit(int rc)
662 {
663 search_tidyup();
664 DEBUG(D_any)
665   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d terminating with rc=%d "
666     ">>>>>>>>>>>>>>>>\n", (int)getpid(), rc);
667 exit(rc);
668 }
669
670
671
672
673 /*************************************************
674 *         Extract port from host address         *
675 *************************************************/
676
677 /* Called to extract the port from the values given to -oMa and -oMi.
678 It also checks the syntax of the address, and terminates it before the
679 port data when a port is extracted.
680
681 Argument:
682   address   the address, with possible port on the end
683
684 Returns:    the port, or zero if there isn't one
685             bombs out on a syntax error
686 */
687
688 static int
689 check_port(uschar *address)
690 {
691 int port = host_address_extract_port(address);
692 if (string_is_ip_address(address, NULL) == 0)
693   {
694   fprintf(stderr, "exim abandoned: \"%s\" is not an IP address\n", address);
695   exit(EXIT_FAILURE);
696   }
697 return port;
698 }
699
700
701
702 /*************************************************
703 *              Test/verify an address            *
704 *************************************************/
705
706 /* This function is called by the -bv and -bt code. It extracts a working
707 address from a full RFC 822 address. This isn't really necessary per se, but it
708 has the effect of collapsing source routes.
709
710 Arguments:
711   s            the address string
712   flags        flag bits for verify_address()
713   exit_value   to be set for failures
714
715 Returns:       nothing
716 */
717
718 static void
719 test_address(uschar *s, int flags, int *exit_value)
720 {
721 int start, end, domain;
722 uschar *parse_error = NULL;
723 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
724   FALSE);
725 if (address == NULL)
726   {
727   fprintf(stdout, "syntax error: %s\n", parse_error);
728   *exit_value = 2;
729   }
730 else
731   {
732   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
733     -1, -1, NULL, NULL, NULL);
734   if (rc == FAIL) *exit_value = 2;
735     else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
736   }
737 }
738
739
740
741 /*************************************************
742 *          Show supported features               *
743 *************************************************/
744
745 /* This function is called for -bV/--version and for -d to output the optional
746 features of the current Exim binary.
747
748 Arguments:  a FILE for printing
749 Returns:    nothing
750 */
751
752 static void
753 show_whats_supported(FILE *f)
754 {
755   auth_info *authi;
756
757 #ifdef DB_VERSION_STRING
758 fprintf(f, "Berkeley DB: %s\n", DB_VERSION_STRING);
759 #elif defined(BTREEVERSION) && defined(HASHVERSION)
760   #ifdef USE_DB
761   fprintf(f, "Probably Berkeley DB version 1.8x (native mode)\n");
762   #else
763   fprintf(f, "Probably Berkeley DB version 1.8x (compatibility mode)\n");
764   #endif
765 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
766 fprintf(f, "Probably ndbm\n");
767 #elif defined(USE_TDB)
768 fprintf(f, "Using tdb\n");
769 #else
770   #ifdef USE_GDBM
771   fprintf(f, "Probably GDBM (native mode)\n");
772   #else
773   fprintf(f, "Probably GDBM (compatibility mode)\n");
774   #endif
775 #endif
776
777 fprintf(f, "Support for:");
778 #ifdef SUPPORT_CRYPTEQ
779   fprintf(f, " crypteq");
780 #endif
781 #if HAVE_ICONV
782   fprintf(f, " iconv()");
783 #endif
784 #if HAVE_IPV6
785   fprintf(f, " IPv6");
786 #endif
787 #ifdef HAVE_SETCLASSRESOURCES
788   fprintf(f, " use_setclassresources");
789 #endif
790 #ifdef SUPPORT_PAM
791   fprintf(f, " PAM");
792 #endif
793 #ifdef EXIM_PERL
794   fprintf(f, " Perl");
795 #endif
796 #ifdef EXPAND_DLFUNC
797   fprintf(f, " Expand_dlfunc");
798 #endif
799 #ifdef USE_TCP_WRAPPERS
800   fprintf(f, " TCPwrappers");
801 #endif
802 #ifdef SUPPORT_TLS
803   #ifdef USE_GNUTLS
804   fprintf(f, " GnuTLS");
805   #else
806   fprintf(f, " OpenSSL");
807   #endif
808 #endif
809 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
810   fprintf(f, " translate_ip_address");
811 #endif
812 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
813   fprintf(f, " move_frozen_messages");
814 #endif
815 #ifdef WITH_CONTENT_SCAN
816   fprintf(f, " Content_Scanning");
817 #endif
818 #ifndef DISABLE_DKIM
819   fprintf(f, " DKIM");
820 #endif
821 #ifndef DISABLE_DNSSEC
822   fprintf(f, " DNSSEC");
823 #endif
824 #ifndef DISABLE_EVENT
825   fprintf(f, " Event");
826 #endif
827 #ifdef SUPPORT_I18N
828   fprintf(f, " I18N");
829 #endif
830 #ifndef DISABLE_OCSP
831   fprintf(f, " OCSP");
832 #endif
833 #ifndef DISABLE_PRDR
834   fprintf(f, " PRDR");
835 #endif
836 #ifdef SUPPORT_PROXY
837   fprintf(f, " PROXY");
838 #endif
839 #ifdef SUPPORT_SOCKS
840   fprintf(f, " SOCKS");
841 #endif
842 #ifdef TCP_FASTOPEN
843   deliver_init();
844   if (tcp_fastopen_ok) fprintf(f, " TCP_Fast_Open");
845 #endif
846 #ifdef EXPERIMENTAL_LMDB
847   fprintf(f, " Experimental_LMDB");
848 #endif
849 #ifdef EXPERIMENTAL_QUEUEFILE
850   fprintf(f, " Experimental_QUEUEFILE");
851 #endif
852 #ifdef EXPERIMENTAL_SPF
853   fprintf(f, " Experimental_SPF");
854 #endif
855 #ifdef EXPERIMENTAL_SRS
856   fprintf(f, " Experimental_SRS");
857 #endif
858 #ifdef EXPERIMENTAL_BRIGHTMAIL
859   fprintf(f, " Experimental_Brightmail");
860 #endif
861 #ifdef EXPERIMENTAL_DANE
862   fprintf(f, " Experimental_DANE");
863 #endif
864 #ifdef EXPERIMENTAL_DCC
865   fprintf(f, " Experimental_DCC");
866 #endif
867 #ifdef EXPERIMENTAL_DMARC
868   fprintf(f, " Experimental_DMARC");
869 #endif
870 #ifdef EXPERIMENTAL_DSN_INFO
871   fprintf(f, " Experimental_DSN_info");
872 #endif
873 fprintf(f, "\n");
874
875 fprintf(f, "Lookups (built-in):");
876 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
877   fprintf(f, " lsearch wildlsearch nwildlsearch iplsearch");
878 #endif
879 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
880   fprintf(f, " cdb");
881 #endif
882 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
883   fprintf(f, " dbm dbmjz dbmnz");
884 #endif
885 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
886   fprintf(f, " dnsdb");
887 #endif
888 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
889   fprintf(f, " dsearch");
890 #endif
891 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
892   fprintf(f, " ibase");
893 #endif
894 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
895   fprintf(f, " ldap ldapdn ldapm");
896 #endif
897 #ifdef EXPERIMENTAL_LMDB
898   fprintf(f, " lmdb");
899 #endif
900 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
901   fprintf(f, " mysql");
902 #endif
903 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
904   fprintf(f, " nis nis0");
905 #endif
906 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
907   fprintf(f, " nisplus");
908 #endif
909 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
910   fprintf(f, " oracle");
911 #endif
912 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
913   fprintf(f, " passwd");
914 #endif
915 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
916   fprintf(f, " pgsql");
917 #endif
918 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
919   fprintf(f, " redis");
920 #endif
921 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
922   fprintf(f, " sqlite");
923 #endif
924 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
925   fprintf(f, " testdb");
926 #endif
927 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
928   fprintf(f, " whoson");
929 #endif
930 fprintf(f, "\n");
931
932 fprintf(f, "Authenticators:");
933 #ifdef AUTH_CRAM_MD5
934   fprintf(f, " cram_md5");
935 #endif
936 #ifdef AUTH_CYRUS_SASL
937   fprintf(f, " cyrus_sasl");
938 #endif
939 #ifdef AUTH_DOVECOT
940   fprintf(f, " dovecot");
941 #endif
942 #ifdef AUTH_GSASL
943   fprintf(f, " gsasl");
944 #endif
945 #ifdef AUTH_HEIMDAL_GSSAPI
946   fprintf(f, " heimdal_gssapi");
947 #endif
948 #ifdef AUTH_PLAINTEXT
949   fprintf(f, " plaintext");
950 #endif
951 #ifdef AUTH_SPA
952   fprintf(f, " spa");
953 #endif
954 #ifdef AUTH_TLS
955   fprintf(f, " tls");
956 #endif
957 fprintf(f, "\n");
958
959 fprintf(f, "Routers:");
960 #ifdef ROUTER_ACCEPT
961   fprintf(f, " accept");
962 #endif
963 #ifdef ROUTER_DNSLOOKUP
964   fprintf(f, " dnslookup");
965 #endif
966 #ifdef ROUTER_IPLITERAL
967   fprintf(f, " ipliteral");
968 #endif
969 #ifdef ROUTER_IPLOOKUP
970   fprintf(f, " iplookup");
971 #endif
972 #ifdef ROUTER_MANUALROUTE
973   fprintf(f, " manualroute");
974 #endif
975 #ifdef ROUTER_QUERYPROGRAM
976   fprintf(f, " queryprogram");
977 #endif
978 #ifdef ROUTER_REDIRECT
979   fprintf(f, " redirect");
980 #endif
981 fprintf(f, "\n");
982
983 fprintf(f, "Transports:");
984 #ifdef TRANSPORT_APPENDFILE
985   fprintf(f, " appendfile");
986   #ifdef SUPPORT_MAILDIR
987     fprintf(f, "/maildir");
988   #endif
989   #ifdef SUPPORT_MAILSTORE
990     fprintf(f, "/mailstore");
991   #endif
992   #ifdef SUPPORT_MBX
993     fprintf(f, "/mbx");
994   #endif
995 #endif
996 #ifdef TRANSPORT_AUTOREPLY
997   fprintf(f, " autoreply");
998 #endif
999 #ifdef TRANSPORT_LMTP
1000   fprintf(f, " lmtp");
1001 #endif
1002 #ifdef TRANSPORT_PIPE
1003   fprintf(f, " pipe");
1004 #endif
1005 #ifdef EXPERIMENTAL_QUEUEFILE
1006   fprintf(f, " queuefile");
1007 #endif
1008 #ifdef TRANSPORT_SMTP
1009   fprintf(f, " smtp");
1010 #endif
1011 fprintf(f, "\n");
1012
1013 if (fixed_never_users[0] > 0)
1014   {
1015   int i;
1016   fprintf(f, "Fixed never_users: ");
1017   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1018     fprintf(f, "%d:", (unsigned int)fixed_never_users[i]);
1019   fprintf(f, "%d\n", (unsigned int)fixed_never_users[i]);
1020   }
1021
1022 fprintf(f, "Configure owner: %d:%d\n", config_uid, config_gid);
1023
1024 fprintf(f, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1025
1026 /* Everything else is details which are only worth reporting when debugging.
1027 Perhaps the tls_version_report should move into this too. */
1028 DEBUG(D_any) do {
1029
1030   int i;
1031
1032 /* clang defines __GNUC__ (at least, for me) so test for it first */
1033 #if defined(__clang__)
1034   fprintf(f, "Compiler: CLang [%s]\n", __clang_version__);
1035 #elif defined(__GNUC__)
1036   fprintf(f, "Compiler: GCC [%s]\n",
1037 # ifdef __VERSION__
1038       __VERSION__
1039 # else
1040       "? unknown version ?"
1041 # endif
1042       );
1043 #else
1044   fprintf(f, "Compiler: <unknown>\n");
1045 #endif
1046
1047 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1048   fprintf(f, "Library version: Glibc: Compile: %d.%d\n",
1049                 __GLIBC__, __GLIBC_MINOR__);
1050   if (__GLIBC_PREREQ(2, 1))
1051     fprintf(f, "                        Runtime: %s\n",
1052                 gnu_get_libc_version());
1053 #endif
1054
1055 #ifdef SUPPORT_TLS
1056   tls_version_report(f);
1057 #endif
1058 #ifdef SUPPORT_I18N
1059   utf8_version_report(f);
1060 #endif
1061
1062   for (authi = auths_available; *authi->driver_name != '\0'; ++authi)
1063     if (authi->version_report)
1064       (*authi->version_report)(f);
1065
1066   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1067   characters; unless it's an ancient version of PCRE in which case it
1068   is not defined. */
1069 #ifndef PCRE_PRERELEASE
1070 # define PCRE_PRERELEASE
1071 #endif
1072 #define QUOTE(X) #X
1073 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1074   fprintf(f, "Library version: PCRE: Compile: %d.%d%s\n"
1075              "                       Runtime: %s\n",
1076           PCRE_MAJOR, PCRE_MINOR,
1077           EXPAND_AND_QUOTE(PCRE_PRERELEASE) "",
1078           pcre_version());
1079 #undef QUOTE
1080 #undef EXPAND_AND_QUOTE
1081
1082   init_lookup_list();
1083   for (i = 0; i < lookup_list_count; i++)
1084     if (lookup_list[i]->version_report)
1085       lookup_list[i]->version_report(f);
1086
1087 #ifdef WHITELIST_D_MACROS
1088   fprintf(f, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1089 #else
1090   fprintf(f, "WHITELIST_D_MACROS unset\n");
1091 #endif
1092 #ifdef TRUSTED_CONFIG_LIST
1093   fprintf(f, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1094 #else
1095   fprintf(f, "TRUSTED_CONFIG_LIST unset\n");
1096 #endif
1097
1098 } while (0);
1099 }
1100
1101
1102 /*************************************************
1103 *     Show auxiliary information about Exim      *
1104 *************************************************/
1105
1106 static void
1107 show_exim_information(enum commandline_info request, FILE *stream)
1108 {
1109 const uschar **pp;
1110
1111 switch(request)
1112   {
1113   case CMDINFO_NONE:
1114     fprintf(stream, "Oops, something went wrong.\n");
1115     return;
1116   case CMDINFO_HELP:
1117     fprintf(stream,
1118 "The -bI: flag takes a string indicating which information to provide.\n"
1119 "If the string is not recognised, you'll get this help (on stderr).\n"
1120 "\n"
1121 "  exim -bI:help    this information\n"
1122 "  exim -bI:dscp    dscp value keywords known\n"
1123 "  exim -bI:sieve   list of supported sieve extensions, one per line.\n"
1124 );
1125     return;
1126   case CMDINFO_SIEVE:
1127     for (pp = exim_sieve_extension_list; *pp; ++pp)
1128       fprintf(stream, "%s\n", *pp);
1129     return;
1130   case CMDINFO_DSCP:
1131     dscp_list_to_stream(stream);
1132     return;
1133   }
1134 }
1135
1136
1137 /*************************************************
1138 *               Quote a local part               *
1139 *************************************************/
1140
1141 /* This function is used when a sender address or a From: or Sender: header
1142 line is being created from the caller's login, or from an authenticated_id. It
1143 applies appropriate quoting rules for a local part.
1144
1145 Argument:    the local part
1146 Returns:     the local part, quoted if necessary
1147 */
1148
1149 uschar *
1150 local_part_quote(uschar *lpart)
1151 {
1152 BOOL needs_quote = FALSE;
1153 int size, ptr;
1154 uschar *yield;
1155 uschar *t;
1156
1157 for (t = lpart; !needs_quote && *t != 0; t++)
1158   {
1159   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1160     (*t != '.' || t == lpart || t[1] == 0);
1161   }
1162
1163 if (!needs_quote) return lpart;
1164
1165 size = ptr = 0;
1166 yield = string_catn(NULL, &size, &ptr, US"\"", 1);
1167
1168 for (;;)
1169   {
1170   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1171   if (nq == NULL)
1172     {
1173     yield = string_cat(yield, &size, &ptr, lpart);
1174     break;
1175     }
1176   yield = string_catn(yield, &size, &ptr, lpart, nq - lpart);
1177   yield = string_catn(yield, &size, &ptr, US"\\", 1);
1178   yield = string_catn(yield, &size, &ptr, nq, 1);
1179   lpart = nq + 1;
1180   }
1181
1182 yield = string_catn(yield, &size, &ptr, US"\"", 1);
1183 yield[ptr] = 0;
1184 return yield;
1185 }
1186
1187
1188
1189 #ifdef USE_READLINE
1190 /*************************************************
1191 *         Load readline() functions              *
1192 *************************************************/
1193
1194 /* This function is called from testing executions that read data from stdin,
1195 but only when running as the calling user. Currently, only -be does this. The
1196 function loads the readline() function library and passes back the functions.
1197 On some systems, it needs the curses library, so load that too, but try without
1198 it if loading fails. All this functionality has to be requested at build time.
1199
1200 Arguments:
1201   fn_readline_ptr   pointer to where to put the readline pointer
1202   fn_addhist_ptr    pointer to where to put the addhistory function
1203
1204 Returns:            the dlopen handle or NULL on failure
1205 */
1206
1207 static void *
1208 set_readline(char * (**fn_readline_ptr)(const char *),
1209              void   (**fn_addhist_ptr)(const char *))
1210 {
1211 void *dlhandle;
1212 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1213
1214 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1215 if (dlhandle_curses != NULL) dlclose(dlhandle_curses);
1216
1217 if (dlhandle != NULL)
1218   {
1219   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1220    *   char * readline (const char *prompt);
1221    *   void add_history (const char *string);
1222    */
1223   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1224   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1225   }
1226 else
1227   {
1228   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1229   }
1230
1231 return dlhandle;
1232 }
1233 #endif
1234
1235
1236
1237 /*************************************************
1238 *    Get a line from stdin for testing things    *
1239 *************************************************/
1240
1241 /* This function is called when running tests that can take a number of lines
1242 of input (for example, -be and -bt). It handles continuations and trailing
1243 spaces. And prompting and a blank line output on eof. If readline() is in use,
1244 the arguments are non-NULL and provide the relevant functions.
1245
1246 Arguments:
1247   fn_readline   readline function or NULL
1248   fn_addhist    addhist function or NULL
1249
1250 Returns:        pointer to dynamic memory, or NULL at end of file
1251 */
1252
1253 static uschar *
1254 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1255 {
1256 int i;
1257 int size = 0;
1258 int ptr = 0;
1259 uschar *yield = NULL;
1260
1261 if (fn_readline == NULL) { printf("> "); fflush(stdout); }
1262
1263 for (i = 0;; i++)
1264   {
1265   uschar buffer[1024];
1266   uschar *p, *ss;
1267
1268   #ifdef USE_READLINE
1269   char *readline_line = NULL;
1270   if (fn_readline != NULL)
1271     {
1272     if ((readline_line = fn_readline((i > 0)? "":"> ")) == NULL) break;
1273     if (*readline_line != 0 && fn_addhist != NULL) fn_addhist(readline_line);
1274     p = US readline_line;
1275     }
1276   else
1277   #endif
1278
1279   /* readline() not in use */
1280
1281     {
1282     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;
1283     p = buffer;
1284     }
1285
1286   /* Handle the line */
1287
1288   ss = p + (int)Ustrlen(p);
1289   while (ss > p && isspace(ss[-1])) ss--;
1290
1291   if (i > 0)
1292     {
1293     while (p < ss && isspace(*p)) p++;   /* leading space after cont */
1294     }
1295
1296   yield = string_catn(yield, &size, &ptr, p, ss - p);
1297
1298   #ifdef USE_READLINE
1299   if (fn_readline != NULL) free(readline_line);
1300   #endif
1301
1302   /* yield can only be NULL if ss==p */
1303   if (ss == p || yield[ptr-1] != '\\')
1304     {
1305     if (yield) yield[ptr] = 0;
1306     break;
1307     }
1308   yield[--ptr] = 0;
1309   }
1310
1311 if (yield == NULL) printf("\n");
1312 return yield;
1313 }
1314
1315
1316
1317 /*************************************************
1318 *    Output usage information for the program    *
1319 *************************************************/
1320
1321 /* This function is called when there are no recipients
1322    or a specific --help argument was added.
1323
1324 Arguments:
1325   progname      information on what name we were called by
1326
1327 Returns:        DOES NOT RETURN
1328 */
1329
1330 static void
1331 exim_usage(uschar *progname)
1332 {
1333
1334 /* Handle specific program invocation variants */
1335 if (Ustrcmp(progname, US"-mailq") == 0)
1336   {
1337   fprintf(stderr,
1338     "mailq - list the contents of the mail queue\n\n"
1339     "For a list of options, see the Exim documentation.\n");
1340   exit(EXIT_FAILURE);
1341   }
1342
1343 /* Generic usage - we output this whatever happens */
1344 fprintf(stderr,
1345   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1346   "not directly from a shell command line. Options and/or arguments control\n"
1347   "what it does when called. For a list of options, see the Exim documentation.\n");
1348
1349 exit(EXIT_FAILURE);
1350 }
1351
1352
1353
1354 /*************************************************
1355 *    Validate that the macros given are okay     *
1356 *************************************************/
1357
1358 /* Typically, Exim will drop privileges if macros are supplied.  In some
1359 cases, we want to not do so.
1360
1361 Arguments:    opt_D_used - true if the commandline had a "-D" option
1362 Returns:      true if trusted, false otherwise
1363 */
1364
1365 static BOOL
1366 macros_trusted(BOOL opt_D_used)
1367 {
1368 #ifdef WHITELIST_D_MACROS
1369 macro_item *m;
1370 uschar *whitelisted, *end, *p, **whites, **w;
1371 int white_count, i, n;
1372 size_t len;
1373 BOOL prev_char_item, found;
1374 #endif
1375
1376 if (!opt_D_used)
1377   return TRUE;
1378 #ifndef WHITELIST_D_MACROS
1379 return FALSE;
1380 #else
1381
1382 /* We only trust -D overrides for some invoking users:
1383 root, the exim run-time user, the optional config owner user.
1384 I don't know why config-owner would be needed, but since they can own the
1385 config files anyway, there's no security risk to letting them override -D. */
1386 if ( ! ((real_uid == root_uid)
1387      || (real_uid == exim_uid)
1388 #ifdef CONFIGURE_OWNER
1389      || (real_uid == config_uid)
1390 #endif
1391    ))
1392   {
1393   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1394   return FALSE;
1395   }
1396
1397 /* Get a list of macros which are whitelisted */
1398 whitelisted = string_copy_malloc(US WHITELIST_D_MACROS);
1399 prev_char_item = FALSE;
1400 white_count = 0;
1401 for (p = whitelisted; *p != '\0'; ++p)
1402   {
1403   if (*p == ':' || isspace(*p))
1404     {
1405     *p = '\0';
1406     if (prev_char_item)
1407       ++white_count;
1408     prev_char_item = FALSE;
1409     continue;
1410     }
1411   if (!prev_char_item)
1412     prev_char_item = TRUE;
1413   }
1414 end = p;
1415 if (prev_char_item)
1416   ++white_count;
1417 if (!white_count)
1418   return FALSE;
1419 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1420 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1421   {
1422   if (*p != '\0')
1423     {
1424     whites[i++] = p;
1425     if (i == white_count)
1426       break;
1427     while (*p != '\0' && p < end)
1428       ++p;
1429     }
1430   }
1431 whites[i] = NULL;
1432
1433 /* The list of commandline macros should be very short.
1434 Accept the N*M complexity. */
1435 for (m = macros; m; m = m->next) if (m->command_line)
1436   {
1437   found = FALSE;
1438   for (w = whites; *w; ++w)
1439     if (Ustrcmp(*w, m->name) == 0)
1440       {
1441       found = TRUE;
1442       break;
1443       }
1444   if (!found)
1445     return FALSE;
1446   if (!m->replacement)
1447     continue;
1448   if ((len = m->replen) == 0)
1449     continue;
1450   n = pcre_exec(regex_whitelisted_macro, NULL, CS m->replacement, len,
1451    0, PCRE_EOPT, NULL, 0);
1452   if (n < 0)
1453     {
1454     if (n != PCRE_ERROR_NOMATCH)
1455       debug_printf("macros_trusted checking %s returned %d\n", m->name, n);
1456     return FALSE;
1457     }
1458   }
1459 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1460 return TRUE;
1461 #endif
1462 }
1463
1464
1465 /*************************************************
1466 *          Entry point and high-level code       *
1467 *************************************************/
1468
1469 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1470 the appropriate action. All the necessary functions are present in the one
1471 binary. I originally thought one should split it up, but it turns out that so
1472 much of the apparatus is needed in each chunk that one might as well just have
1473 it all available all the time, which then makes the coding easier as well.
1474
1475 Arguments:
1476   argc      count of entries in argv
1477   argv      argument strings, with argv[0] being the program name
1478
1479 Returns:    EXIT_SUCCESS if terminated successfully
1480             EXIT_FAILURE otherwise, except when a message has been sent
1481               to the sender, and -oee was given
1482 */
1483
1484 int
1485 main(int argc, char **cargv)
1486 {
1487 uschar **argv = USS cargv;
1488 int  arg_receive_timeout = -1;
1489 int  arg_smtp_receive_timeout = -1;
1490 int  arg_error_handling = error_handling;
1491 int  filter_sfd = -1;
1492 int  filter_ufd = -1;
1493 int  group_count;
1494 int  i, rv;
1495 int  list_queue_option = 0;
1496 int  msg_action = 0;
1497 int  msg_action_arg = -1;
1498 int  namelen = (argv[0] == NULL)? 0 : Ustrlen(argv[0]);
1499 int  queue_only_reason = 0;
1500 #ifdef EXIM_PERL
1501 int  perl_start_option = 0;
1502 #endif
1503 int  recipients_arg = argc;
1504 int  sender_address_domain = 0;
1505 int  test_retry_arg = -1;
1506 int  test_rewrite_arg = -1;
1507 BOOL arg_queue_only = FALSE;
1508 BOOL bi_option = FALSE;
1509 BOOL checking = FALSE;
1510 BOOL count_queue = FALSE;
1511 BOOL expansion_test = FALSE;
1512 BOOL extract_recipients = FALSE;
1513 BOOL flag_G = FALSE;
1514 BOOL flag_n = FALSE;
1515 BOOL forced_delivery = FALSE;
1516 BOOL f_end_dot = FALSE;
1517 BOOL deliver_give_up = FALSE;
1518 BOOL list_queue = FALSE;
1519 BOOL list_options = FALSE;
1520 BOOL list_config = FALSE;
1521 BOOL local_queue_only;
1522 BOOL more = TRUE;
1523 BOOL one_msg_action = FALSE;
1524 BOOL opt_D_used = FALSE;
1525 BOOL queue_only_set = FALSE;
1526 BOOL receiving_message = TRUE;
1527 BOOL sender_ident_set = FALSE;
1528 BOOL session_local_queue_only;
1529 BOOL unprivileged;
1530 BOOL removed_privilege = FALSE;
1531 BOOL usage_wanted = FALSE;
1532 BOOL verify_address_mode = FALSE;
1533 BOOL verify_as_sender = FALSE;
1534 BOOL version_printed = FALSE;
1535 uschar *alias_arg = NULL;
1536 uschar *called_as = US"";
1537 uschar *cmdline_syslog_name = NULL;
1538 uschar *start_queue_run_id = NULL;
1539 uschar *stop_queue_run_id = NULL;
1540 uschar *expansion_test_message = NULL;
1541 uschar *ftest_domain = NULL;
1542 uschar *ftest_localpart = NULL;
1543 uschar *ftest_prefix = NULL;
1544 uschar *ftest_suffix = NULL;
1545 uschar *log_oneline = NULL;
1546 uschar *malware_test_file = NULL;
1547 uschar *real_sender_address;
1548 uschar *originator_home = US"/";
1549 size_t sz;
1550 void *reset_point;
1551
1552 struct passwd *pw;
1553 struct stat statbuf;
1554 pid_t passed_qr_pid = (pid_t)0;
1555 int passed_qr_pipe = -1;
1556 gid_t group_list[NGROUPS_MAX];
1557
1558 /* For the -bI: flag */
1559 enum commandline_info info_flag = CMDINFO_NONE;
1560 BOOL info_stdout = FALSE;
1561
1562 /* Possible options for -R and -S */
1563
1564 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1565
1566 /* Need to define this in case we need to change the environment in order
1567 to get rid of a bogus time zone. We have to make it char rather than uschar
1568 because some OS define it in /usr/include/unistd.h. */
1569
1570 extern char **environ;
1571
1572 /* If the Exim user and/or group and/or the configuration file owner/group were
1573 defined by ref:name at build time, we must now find the actual uid/gid values.
1574 This is a feature to make the lives of binary distributors easier. */
1575
1576 #ifdef EXIM_USERNAME
1577 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1578   {
1579   if (exim_uid == 0)
1580     {
1581     fprintf(stderr, "exim: refusing to run with uid 0 for \"%s\"\n",
1582       EXIM_USERNAME);
1583     exit(EXIT_FAILURE);
1584     }
1585   /* If ref:name uses a number as the name, route_finduser() returns
1586   TRUE with exim_uid set and pw coerced to NULL. */
1587   if (pw)
1588     exim_gid = pw->pw_gid;
1589 #ifndef EXIM_GROUPNAME
1590   else
1591     {
1592     fprintf(stderr,
1593         "exim: ref:name should specify a usercode, not a group.\n"
1594         "exim: can't let you get away with it unless you also specify a group.\n");
1595     exit(EXIT_FAILURE);
1596     }
1597 #endif
1598   }
1599 else
1600   {
1601   fprintf(stderr, "exim: failed to find uid for user name \"%s\"\n",
1602     EXIM_USERNAME);
1603   exit(EXIT_FAILURE);
1604   }
1605 #endif
1606
1607 #ifdef EXIM_GROUPNAME
1608 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1609   {
1610   fprintf(stderr, "exim: failed to find gid for group name \"%s\"\n",
1611     EXIM_GROUPNAME);
1612   exit(EXIT_FAILURE);
1613   }
1614 #endif
1615
1616 #ifdef CONFIGURE_OWNERNAME
1617 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1618   {
1619   fprintf(stderr, "exim: failed to find uid for user name \"%s\"\n",
1620     CONFIGURE_OWNERNAME);
1621   exit(EXIT_FAILURE);
1622   }
1623 #endif
1624
1625 /* We default the system_filter_user to be the Exim run-time user, as a
1626 sane non-root value. */
1627 system_filter_uid = exim_uid;
1628
1629 #ifdef CONFIGURE_GROUPNAME
1630 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1631   {
1632   fprintf(stderr, "exim: failed to find gid for group name \"%s\"\n",
1633     CONFIGURE_GROUPNAME);
1634   exit(EXIT_FAILURE);
1635   }
1636 #endif
1637
1638 /* In the Cygwin environment, some initialization used to need doing.
1639 It was fudged in by means of this macro; now no longer but we'll leave
1640 it in case of others. */
1641
1642 #ifdef OS_INIT
1643 OS_INIT
1644 #endif
1645
1646 /* Check a field which is patched when we are running Exim within its
1647 testing harness; do a fast initial check, and then the whole thing. */
1648
1649 running_in_test_harness =
1650   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1651
1652 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1653 at the start of a program; however, it seems that some environments do not
1654 follow this. A "strange" locale can affect the formatting of timestamps, so we
1655 make quite sure. */
1656
1657 setlocale(LC_ALL, "C");
1658
1659 /* Set up the default handler for timing using alarm(). */
1660
1661 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1662
1663 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1664 because store_malloc writes a log entry on failure. */
1665
1666 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1667   {
1668   fprintf(stderr, "exim: failed to get store for log buffer\n");
1669   exit(EXIT_FAILURE);
1670   }
1671
1672 /* Initialize the default log options. */
1673
1674 bits_set(log_selector, log_selector_size, log_default);
1675
1676 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1677 NULL when the daemon is run and the file is closed. We have to use this
1678 indirection, because some systems don't allow writing to the variable "stderr".
1679 */
1680
1681 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1682
1683 /* Arrange for the PCRE regex library to use our store functions. Note that
1684 the normal calls are actually macros that add additional arguments for
1685 debugging purposes so we have to assign specially constructed functions here.
1686 The default is to use store in the stacking pool, but this is overridden in the
1687 regex_must_compile() function. */
1688
1689 pcre_malloc = function_store_get;
1690 pcre_free = function_dummy_free;
1691
1692 /* Ensure there is a big buffer for temporary use in several places. It is put
1693 in malloc store so that it can be freed for enlargement if necessary. */
1694
1695 big_buffer = store_malloc(big_buffer_size);
1696
1697 /* Set up the handler for the data request signal, and set the initial
1698 descriptive text. */
1699
1700 set_process_info("initializing");
1701 os_restarting_signal(SIGUSR1, usr1_handler);
1702
1703 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1704 in the daemon code. For the rest of Exim's uses, we ignore it. */
1705
1706 signal(SIGHUP, SIG_IGN);
1707
1708 /* We don't want to die on pipe errors as the code is written to handle
1709 the write error instead. */
1710
1711 signal(SIGPIPE, SIG_IGN);
1712
1713 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1714 set to SIG_IGN. This causes subprocesses that complete before the parent
1715 process waits for them not to hang around, so when Exim calls wait(), nothing
1716 is there. The wait() code has been made robust against this, but let's ensure
1717 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1718 ending status. We use sigaction rather than plain signal() on those OS where
1719 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1720 problem on AIX with this.) */
1721
1722 #ifdef SA_NOCLDWAIT
1723   {
1724   struct sigaction act;
1725   act.sa_handler = SIG_DFL;
1726   sigemptyset(&(act.sa_mask));
1727   act.sa_flags = 0;
1728   sigaction(SIGCHLD, &act, NULL);
1729   }
1730 #else
1731 signal(SIGCHLD, SIG_DFL);
1732 #endif
1733
1734 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1735 SIGHUP. */
1736
1737 sighup_argv = argv;
1738
1739 /* Set up the version number. Set up the leading 'E' for the external form of
1740 message ids, set the pointer to the internal form, and initialize it to
1741 indicate no message being processed. */
1742
1743 version_init();
1744 message_id_option[0] = '-';
1745 message_id_external = message_id_option + 1;
1746 message_id_external[0] = 'E';
1747 message_id = message_id_external + 1;
1748 message_id[0] = 0;
1749
1750 /* Set the umask to zero so that any files Exim creates using open() are
1751 created with the modes that it specifies. NOTE: Files created with fopen() have
1752 a problem, which was not recognized till rather late (February 2006). With this
1753 umask, such files will be world writeable. (They are all content scanning files
1754 in the spool directory, which isn't world-accessible, so this is not a
1755 disaster, but it's untidy.) I don't want to change this overall setting,
1756 however, because it will interact badly with the open() calls. Instead, there's
1757 now a function called modefopen() that fiddles with the umask while calling
1758 fopen(). */
1759
1760 (void)umask(0);
1761
1762 /* Precompile the regular expression for matching a message id. Keep this in
1763 step with the code that generates ids in the accept.c module. We need to do
1764 this here, because the -M options check their arguments for syntactic validity
1765 using mac_ismsgid, which uses this. */
1766
1767 regex_ismsgid =
1768   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
1769
1770 /* Precompile the regular expression that is used for matching an SMTP error
1771 code, possibly extended, at the start of an error message. Note that the
1772 terminating whitespace character is included. */
1773
1774 regex_smtp_code =
1775   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
1776     FALSE, TRUE);
1777
1778 #ifdef WHITELIST_D_MACROS
1779 /* Precompile the regular expression used to filter the content of macros
1780 given to -D for permissibility. */
1781
1782 regex_whitelisted_macro =
1783   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
1784 #endif
1785
1786 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
1787
1788 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
1789 this seems to be a generally accepted convention, since one finds symbolic
1790 links called "mailq" in standard OS configurations. */
1791
1792 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
1793     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
1794   {
1795   list_queue = TRUE;
1796   receiving_message = FALSE;
1797   called_as = US"-mailq";
1798   }
1799
1800 /* If the program is called as "rmail" treat it as equivalent to
1801 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
1802 i.e. preventing a single dot on a line from terminating the message, and
1803 returning with zero return code, even in cases of error (provided an error
1804 message has been sent). */
1805
1806 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
1807     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
1808   {
1809   dot_ends = FALSE;
1810   called_as = US"-rmail";
1811   errors_sender_rc = EXIT_SUCCESS;
1812   }
1813
1814 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
1815 this is a smail convention. */
1816
1817 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
1818     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
1819   {
1820   smtp_input = smtp_batched_input = TRUE;
1821   called_as = US"-rsmtp";
1822   }
1823
1824 /* If the program is called as "runq" treat it as equivalent to "exim -q";
1825 this is a smail convention. */
1826
1827 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
1828     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
1829   {
1830   queue_interval = 0;
1831   receiving_message = FALSE;
1832   called_as = US"-runq";
1833   }
1834
1835 /* If the program is called as "newaliases" treat it as equivalent to
1836 "exim -bi"; this is a sendmail convention. */
1837
1838 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
1839     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
1840   {
1841   bi_option = TRUE;
1842   receiving_message = FALSE;
1843   called_as = US"-newaliases";
1844   }
1845
1846 /* Save the original effective uid for a couple of uses later. It should
1847 normally be root, but in some esoteric environments it may not be. */
1848
1849 original_euid = geteuid();
1850
1851 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
1852 to be the same as the real ones. This makes a difference only if Exim is setuid
1853 (or setgid) to something other than root, which could be the case in some
1854 special configurations. */
1855
1856 real_uid = getuid();
1857 real_gid = getgid();
1858
1859 if (real_uid == root_uid)
1860   {
1861   rv = setgid(real_gid);
1862   if (rv)
1863     {
1864     fprintf(stderr, "exim: setgid(%ld) failed: %s\n",
1865         (long int)real_gid, strerror(errno));
1866     exit(EXIT_FAILURE);
1867     }
1868   rv = setuid(real_uid);
1869   if (rv)
1870     {
1871     fprintf(stderr, "exim: setuid(%ld) failed: %s\n",
1872         (long int)real_uid, strerror(errno));
1873     exit(EXIT_FAILURE);
1874     }
1875   }
1876
1877 /* If neither the original real uid nor the original euid was root, Exim is
1878 running in an unprivileged state. */
1879
1880 unprivileged = (real_uid != root_uid && original_euid != root_uid);
1881
1882 /* Scan the program's arguments. Some can be dealt with right away; others are
1883 simply recorded for checking and handling afterwards. Do a high-level switch
1884 on the second character (the one after '-'), to save some effort. */
1885
1886 for (i = 1; i < argc; i++)
1887   {
1888   BOOL badarg = FALSE;
1889   uschar *arg = argv[i];
1890   uschar *argrest;
1891   int switchchar;
1892
1893   /* An argument not starting with '-' is the start of a recipients list;
1894   break out of the options-scanning loop. */
1895
1896   if (arg[0] != '-')
1897     {
1898     recipients_arg = i;
1899     break;
1900     }
1901
1902   /* An option consisting of -- terminates the options */
1903
1904   if (Ustrcmp(arg, "--") == 0)
1905     {
1906     recipients_arg = i + 1;
1907     break;
1908     }
1909
1910   /* Handle flagged options */
1911
1912   switchchar = arg[1];
1913   argrest = arg+2;
1914
1915   /* Make all -ex options synonymous with -oex arguments, since that
1916   is assumed by various callers. Also make -qR options synonymous with -R
1917   options, as that seems to be required as well. Allow for -qqR too, and
1918   the same for -S options. */
1919
1920   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
1921       Ustrncmp(arg+1, "qR", 2) == 0 ||
1922       Ustrncmp(arg+1, "qS", 2) == 0)
1923     {
1924     switchchar = arg[2];
1925     argrest++;
1926     }
1927   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
1928     {
1929     switchchar = arg[3];
1930     argrest += 2;
1931     queue_2stage = TRUE;
1932     }
1933
1934   /* Make -r synonymous with -f, since it is a documented alias */
1935
1936   else if (arg[1] == 'r') switchchar = 'f';
1937
1938   /* Make -ov synonymous with -v */
1939
1940   else if (Ustrcmp(arg, "-ov") == 0)
1941     {
1942     switchchar = 'v';
1943     argrest++;
1944     }
1945
1946   /* deal with --option_aliases */
1947   else if (switchchar == '-')
1948     {
1949     if (Ustrcmp(argrest, "help") == 0)
1950       {
1951       usage_wanted = TRUE;
1952       break;
1953       }
1954     else if (Ustrcmp(argrest, "version") == 0)
1955       {
1956       switchchar = 'b';
1957       argrest = US"V";
1958       }
1959     }
1960
1961   /* High-level switch on active initial letter */
1962
1963   switch(switchchar)
1964     {
1965
1966     /* sendmail uses -Ac and -Am to control which .cf file is used;
1967     we ignore them. */
1968     case 'A':
1969     if (*argrest == '\0') { badarg = TRUE; break; }
1970     else
1971       {
1972       BOOL ignore = FALSE;
1973       switch (*argrest)
1974         {
1975         case 'c':
1976         case 'm':
1977           if (*(argrest + 1) == '\0')
1978             ignore = TRUE;
1979           break;
1980         }
1981       if (!ignore) { badarg = TRUE; break; }
1982       }
1983     break;
1984
1985     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
1986     so has no need of it. */
1987
1988     case 'B':
1989     if (*argrest == 0) i++;       /* Skip over the type */
1990     break;
1991
1992
1993     case 'b':
1994     receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
1995
1996     /* -bd:  Run in daemon mode, awaiting SMTP connections.
1997        -bdf: Ditto, but in the foreground.
1998     */
1999
2000     if (*argrest == 'd')
2001       {
2002       daemon_listen = TRUE;
2003       if (*(++argrest) == 'f') background_daemon = FALSE;
2004         else if (*argrest != 0) { badarg = TRUE; break; }
2005       }
2006
2007     /* -be:  Run in expansion test mode
2008        -bem: Ditto, but read a message from a file first
2009     */
2010
2011     else if (*argrest == 'e')
2012       {
2013       expansion_test = checking = TRUE;
2014       if (argrest[1] == 'm')
2015         {
2016         if (++i >= argc) { badarg = TRUE; break; }
2017         expansion_test_message = argv[i];
2018         argrest++;
2019         }
2020       if (argrest[1] != 0) { badarg = TRUE; break; }
2021       }
2022
2023     /* -bF:  Run system filter test */
2024
2025     else if (*argrest == 'F')
2026       {
2027       filter_test |= checking = FTEST_SYSTEM;
2028       if (*(++argrest) != 0) { badarg = TRUE; break; }
2029       if (++i < argc) filter_test_sfile = argv[i]; else
2030         {
2031         fprintf(stderr, "exim: file name expected after %s\n", argv[i-1]);
2032         exit(EXIT_FAILURE);
2033         }
2034       }
2035
2036     /* -bf:  Run user filter test
2037        -bfd: Set domain for filter testing
2038        -bfl: Set local part for filter testing
2039        -bfp: Set prefix for filter testing
2040        -bfs: Set suffix for filter testing
2041     */
2042
2043     else if (*argrest == 'f')
2044       {
2045       if (*(++argrest) == 0)
2046         {
2047         filter_test |= checking = FTEST_USER;
2048         if (++i < argc) filter_test_ufile = argv[i]; else
2049           {
2050           fprintf(stderr, "exim: file name expected after %s\n", argv[i-1]);
2051           exit(EXIT_FAILURE);
2052           }
2053         }
2054       else
2055         {
2056         if (++i >= argc)
2057           {
2058           fprintf(stderr, "exim: string expected after %s\n", arg);
2059           exit(EXIT_FAILURE);
2060           }
2061         if (Ustrcmp(argrest, "d") == 0) ftest_domain = argv[i];
2062         else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = argv[i];
2063         else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = argv[i];
2064         else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = argv[i];
2065         else { badarg = TRUE; break; }
2066         }
2067       }
2068
2069     /* -bh: Host checking - an IP address must follow. */
2070
2071     else if (Ustrcmp(argrest, "h") == 0 || Ustrcmp(argrest, "hc") == 0)
2072       {
2073       if (++i >= argc) { badarg = TRUE; break; }
2074       sender_host_address = argv[i];
2075       host_checking = checking = log_testing_mode = TRUE;
2076       host_checking_callout = argrest[1] == 'c';
2077       message_logs = FALSE;
2078       }
2079
2080     /* -bi: This option is used by sendmail to initialize *the* alias file,
2081     though it has the -oA option to specify a different file. Exim has no
2082     concept of *the* alias file, but since Sun's YP make script calls
2083     sendmail this way, some support must be provided. */
2084
2085     else if (Ustrcmp(argrest, "i") == 0) bi_option = TRUE;
2086
2087     /* -bI: provide information, of the type to follow after a colon.
2088     This is an Exim flag. */
2089
2090     else if (argrest[0] == 'I' && Ustrlen(argrest) >= 2 && argrest[1] == ':')
2091       {
2092       uschar *p = &argrest[2];
2093       info_flag = CMDINFO_HELP;
2094       if (Ustrlen(p))
2095         {
2096         if (strcmpic(p, CUS"sieve") == 0)
2097           {
2098           info_flag = CMDINFO_SIEVE;
2099           info_stdout = TRUE;
2100           }
2101         else if (strcmpic(p, CUS"dscp") == 0)
2102           {
2103           info_flag = CMDINFO_DSCP;
2104           info_stdout = TRUE;
2105           }
2106         else if (strcmpic(p, CUS"help") == 0)
2107           {
2108           info_stdout = TRUE;
2109           }
2110         }
2111       }
2112
2113     /* -bm: Accept and deliver message - the default option. Reinstate
2114     receiving_message, which got turned off for all -b options. */
2115
2116     else if (Ustrcmp(argrest, "m") == 0) receiving_message = TRUE;
2117
2118     /* -bmalware: test the filename given for malware */
2119
2120     else if (Ustrcmp(argrest, "malware") == 0)
2121       {
2122       if (++i >= argc) { badarg = TRUE; break; }
2123       checking = TRUE;
2124       malware_test_file = argv[i];
2125       }
2126
2127     /* -bnq: For locally originating messages, do not qualify unqualified
2128     addresses. In the envelope, this causes errors; in header lines they
2129     just get left. */
2130
2131     else if (Ustrcmp(argrest, "nq") == 0)
2132       {
2133       allow_unqualified_sender = FALSE;
2134       allow_unqualified_recipient = FALSE;
2135       }
2136
2137     /* -bpxx: List the contents of the mail queue, in various forms. If
2138     the option is -bpc, just a queue count is needed. Otherwise, if the
2139     first letter after p is r, then order is random. */
2140
2141     else if (*argrest == 'p')
2142       {
2143       if (*(++argrest) == 'c')
2144         {
2145         count_queue = TRUE;
2146         if (*(++argrest) != 0) badarg = TRUE;
2147         break;
2148         }
2149
2150       if (*argrest == 'r')
2151         {
2152         list_queue_option = 8;
2153         argrest++;
2154         }
2155       else list_queue_option = 0;
2156
2157       list_queue = TRUE;
2158
2159       /* -bp: List the contents of the mail queue, top-level only */
2160
2161       if (*argrest == 0) {}
2162
2163       /* -bpu: List the contents of the mail queue, top-level undelivered */
2164
2165       else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2166
2167       /* -bpa: List the contents of the mail queue, including all delivered */
2168
2169       else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2170
2171       /* Unknown after -bp[r] */
2172
2173       else
2174         {
2175         badarg = TRUE;
2176         break;
2177         }
2178       }
2179
2180
2181     /* -bP: List the configuration variables given as the address list.
2182     Force -v, so configuration errors get displayed. */
2183
2184     else if (Ustrcmp(argrest, "P") == 0)
2185       {
2186       /* -bP config: we need to setup here, because later,
2187        * when list_options is checked, the config is read already */
2188       if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2189         {
2190         list_config = TRUE;
2191         readconf_save_config(version_string);
2192         }
2193       else
2194         {
2195         list_options = TRUE;
2196         debug_selector |= D_v;
2197         debug_file = stderr;
2198         }
2199       }
2200
2201     /* -brt: Test retry configuration lookup */
2202
2203     else if (Ustrcmp(argrest, "rt") == 0)
2204       {
2205       checking = TRUE;
2206       test_retry_arg = i + 1;
2207       goto END_ARG;
2208       }
2209
2210     /* -brw: Test rewrite configuration */
2211
2212     else if (Ustrcmp(argrest, "rw") == 0)
2213       {
2214       checking = TRUE;
2215       test_rewrite_arg = i + 1;
2216       goto END_ARG;
2217       }
2218
2219     /* -bS: Read SMTP commands on standard input, but produce no replies -
2220     all errors are reported by sending messages. */
2221
2222     else if (Ustrcmp(argrest, "S") == 0)
2223       smtp_input = smtp_batched_input = receiving_message = TRUE;
2224
2225     /* -bs: Read SMTP commands on standard input and produce SMTP replies
2226     on standard output. */
2227
2228     else if (Ustrcmp(argrest, "s") == 0) smtp_input = receiving_message = TRUE;
2229
2230     /* -bt: address testing mode */
2231
2232     else if (Ustrcmp(argrest, "t") == 0)
2233       address_test_mode = checking = log_testing_mode = TRUE;
2234
2235     /* -bv: verify addresses */
2236
2237     else if (Ustrcmp(argrest, "v") == 0)
2238       verify_address_mode = checking = log_testing_mode = TRUE;
2239
2240     /* -bvs: verify sender addresses */
2241
2242     else if (Ustrcmp(argrest, "vs") == 0)
2243       {
2244       verify_address_mode = checking = log_testing_mode = TRUE;
2245       verify_as_sender = TRUE;
2246       }
2247
2248     /* -bV: Print version string and support details */
2249
2250     else if (Ustrcmp(argrest, "V") == 0)
2251       {
2252       printf("Exim version %s #%s built %s\n", version_string,
2253         version_cnumber, version_date);
2254       printf("%s\n", CS version_copyright);
2255       version_printed = TRUE;
2256       show_whats_supported(stdout);
2257       log_testing_mode = TRUE;
2258       }
2259
2260     /* -bw: inetd wait mode, accept a listening socket as stdin */
2261
2262     else if (*argrest == 'w')
2263       {
2264       inetd_wait_mode = TRUE;
2265       background_daemon = FALSE;
2266       daemon_listen = TRUE;
2267       if (*(++argrest) != '\0')
2268         {
2269         inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE);
2270         if (inetd_wait_timeout <= 0)
2271           {
2272           fprintf(stderr, "exim: bad time value %s: abandoned\n", argv[i]);
2273           exit(EXIT_FAILURE);
2274           }
2275         }
2276       }
2277
2278     else badarg = TRUE;
2279     break;
2280
2281
2282     /* -C: change configuration file list; ignore if it isn't really
2283     a change! Enforce a prefix check if required. */
2284
2285     case 'C':
2286     if (*argrest == 0)
2287       {
2288       if(++i < argc) argrest = argv[i]; else
2289         { badarg = TRUE; break; }
2290       }
2291     if (Ustrcmp(config_main_filelist, argrest) != 0)
2292       {
2293       #ifdef ALT_CONFIG_PREFIX
2294       int sep = 0;
2295       int len = Ustrlen(ALT_CONFIG_PREFIX);
2296       const uschar *list = argrest;
2297       uschar *filename;
2298       while((filename = string_nextinlist(&list, &sep, big_buffer,
2299              big_buffer_size)) != NULL)
2300         {
2301         if ((Ustrlen(filename) < len ||
2302              Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0 ||
2303              Ustrstr(filename, "/../") != NULL) &&
2304              (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid))
2305           {
2306           fprintf(stderr, "-C Permission denied\n");
2307           exit(EXIT_FAILURE);
2308           }
2309         }
2310       #endif
2311       if (real_uid != root_uid)
2312         {
2313         #ifdef TRUSTED_CONFIG_LIST
2314
2315         if (real_uid != exim_uid
2316             #ifdef CONFIGURE_OWNER
2317             && real_uid != config_uid
2318             #endif
2319             )
2320           trusted_config = FALSE;
2321         else
2322           {
2323           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2324           if (trust_list)
2325             {
2326             struct stat statbuf;
2327
2328             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2329                 (statbuf.st_uid != root_uid        /* owner not root */
2330                  #ifdef CONFIGURE_OWNER
2331                  && statbuf.st_uid != config_uid   /* owner not the special one */
2332                  #endif
2333                    ) ||                            /* or */
2334                 (statbuf.st_gid != root_gid        /* group not root */
2335                  #ifdef CONFIGURE_GROUP
2336                  && statbuf.st_gid != config_gid   /* group not the special one */
2337                  #endif
2338                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2339                    ) ||                            /* or */
2340                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2341               {
2342               trusted_config = FALSE;
2343               fclose(trust_list);
2344               }
2345             else
2346               {
2347               /* Well, the trust list at least is up to scratch... */
2348               void *reset_point = store_get(0);
2349               uschar *trusted_configs[32];
2350               int nr_configs = 0;
2351               int i = 0;
2352
2353               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2354                 {
2355                 uschar *start = big_buffer, *nl;
2356                 while (*start && isspace(*start))
2357                 start++;
2358                 if (*start != '/')
2359                   continue;
2360                 nl = Ustrchr(start, '\n');
2361                 if (nl)
2362                   *nl = 0;
2363                 trusted_configs[nr_configs++] = string_copy(start);
2364                 if (nr_configs == 32)
2365                   break;
2366                 }
2367               fclose(trust_list);
2368
2369               if (nr_configs)
2370                 {
2371                 int sep = 0;
2372                 const uschar *list = argrest;
2373                 uschar *filename;
2374                 while (trusted_config && (filename = string_nextinlist(&list,
2375                         &sep, big_buffer, big_buffer_size)) != NULL)
2376                   {
2377                   for (i=0; i < nr_configs; i++)
2378                     {
2379                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2380                       break;
2381                     }
2382                   if (i == nr_configs)
2383                     {
2384                     trusted_config = FALSE;
2385                     break;
2386                     }
2387                   }
2388                 store_reset(reset_point);
2389                 }
2390               else
2391                 {
2392                 /* No valid prefixes found in trust_list file. */
2393                 trusted_config = FALSE;
2394                 }
2395               }
2396             }
2397           else
2398             {
2399             /* Could not open trust_list file. */
2400             trusted_config = FALSE;
2401             }
2402           }
2403       #else
2404         /* Not root; don't trust config */
2405         trusted_config = FALSE;
2406       #endif
2407         }
2408
2409       config_main_filelist = argrest;
2410       config_changed = TRUE;
2411       }
2412     break;
2413
2414
2415     /* -D: set up a macro definition */
2416
2417     case 'D':
2418     #ifdef DISABLE_D_OPTION
2419     fprintf(stderr, "exim: -D is not available in this Exim binary\n");
2420     exit(EXIT_FAILURE);
2421     #else
2422       {
2423       int ptr = 0;
2424       macro_item *m;
2425       uschar name[24];
2426       uschar *s = argrest;
2427
2428       opt_D_used = TRUE;
2429       while (isspace(*s)) s++;
2430
2431       if (*s < 'A' || *s > 'Z')
2432         {
2433         fprintf(stderr, "exim: macro name set by -D must start with "
2434           "an upper case letter\n");
2435         exit(EXIT_FAILURE);
2436         }
2437
2438       while (isalnum(*s) || *s == '_')
2439         {
2440         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2441         s++;
2442         }
2443       name[ptr] = 0;
2444       if (ptr == 0) { badarg = TRUE; break; }
2445       while (isspace(*s)) s++;
2446       if (*s != 0)
2447         {
2448         if (*s++ != '=') { badarg = TRUE; break; }
2449         while (isspace(*s)) s++;
2450         }
2451
2452       for (m = macros; m; m = m->next)
2453         if (Ustrcmp(m->name, name) == 0)
2454           {
2455           fprintf(stderr, "exim: duplicated -D in command line\n");
2456           exit(EXIT_FAILURE);
2457           }
2458
2459       m = macro_create(string_copy(name), string_copy(s), TRUE);
2460
2461       if (clmacro_count >= MAX_CLMACROS)
2462         {
2463         fprintf(stderr, "exim: too many -D options on command line\n");
2464         exit(EXIT_FAILURE);
2465         }
2466       clmacros[clmacro_count++] = string_sprintf("-D%s=%s", m->name,
2467         m->replacement);
2468       }
2469     #endif
2470     break;
2471
2472     /* -d: Set debug level (see also -v below) or set the drop_cr option.
2473     The latter is now a no-op, retained for compatibility only. If -dd is used,
2474     debugging subprocesses of the daemon is disabled. */
2475
2476     case 'd':
2477     if (Ustrcmp(argrest, "ropcr") == 0)
2478       {
2479       /* drop_cr = TRUE; */
2480       }
2481
2482     /* Use an intermediate variable so that we don't set debugging while
2483     decoding the debugging bits. */
2484
2485     else
2486       {
2487       unsigned int selector = D_default;
2488       debug_selector = 0;
2489       debug_file = NULL;
2490       if (*argrest == 'd')
2491         {
2492         debug_daemon = TRUE;
2493         argrest++;
2494         }
2495       if (*argrest != 0)
2496         decode_bits(&selector, 1, debug_notall, argrest,
2497           debug_options, debug_options_count, US"debug", 0);
2498       debug_selector = selector;
2499       }
2500     break;
2501
2502
2503     /* -E: This is a local error message. This option is not intended for
2504     external use at all, but is not restricted to trusted callers because it
2505     does no harm (just suppresses certain error messages) and if Exim is run
2506     not setuid root it won't always be trusted when it generates error
2507     messages using this option. If there is a message id following -E, point
2508     message_reference at it, for logging. */
2509
2510     case 'E':
2511     local_error_message = TRUE;
2512     if (mac_ismsgid(argrest)) message_reference = argrest;
2513     break;
2514
2515
2516     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2517     option, so it looks as if historically the -oex options are also callable
2518     without the leading -o. So we have to accept them. Before the switch,
2519     anything starting -oe has been converted to -e. Exim does not support all
2520     of the sendmail error options. */
2521
2522     case 'e':
2523     if (Ustrcmp(argrest, "e") == 0)
2524       {
2525       arg_error_handling = ERRORS_SENDER;
2526       errors_sender_rc = EXIT_SUCCESS;
2527       }
2528     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2529     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2530     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2531     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2532     else badarg = TRUE;
2533     break;
2534
2535
2536     /* -F: Set sender's full name, used instead of the gecos entry from
2537     the password file. Since users can usually alter their gecos entries,
2538     there's no security involved in using this instead. The data can follow
2539     the -F or be in the next argument. */
2540
2541     case 'F':
2542     if (*argrest == 0)
2543       {
2544       if(++i < argc) argrest = argv[i]; else
2545         { badarg = TRUE; break; }
2546       }
2547     originator_name = argrest;
2548     sender_name_forced = TRUE;
2549     break;
2550
2551
2552     /* -f: Set sender's address - this value is only actually used if Exim is
2553     run by a trusted user, or if untrusted_set_sender is set and matches the
2554     address, except that the null address can always be set by any user. The
2555     test for this happens later, when the value given here is ignored when not
2556     permitted. For an untrusted user, the actual sender is still put in Sender:
2557     if it doesn't match the From: header (unless no_local_from_check is set).
2558     The data can follow the -f or be in the next argument. The -r switch is an
2559     obsolete form of -f but since there appear to be programs out there that
2560     use anything that sendmail has ever supported, better accept it - the
2561     synonymizing is done before the switch above.
2562
2563     At this stage, we must allow domain literal addresses, because we don't
2564     know what the setting of allow_domain_literals is yet. Ditto for trailing
2565     dots and strip_trailing_dot. */
2566
2567     case 'f':
2568       {
2569       int dummy_start, dummy_end;
2570       uschar *errmess;
2571       if (*argrest == 0)
2572         {
2573         if (i+1 < argc) argrest = argv[++i]; else
2574           { badarg = TRUE; break; }
2575         }
2576       if (*argrest == 0)
2577         sender_address = string_sprintf("");  /* Ensure writeable memory */
2578       else
2579         {
2580         uschar *temp = argrest + Ustrlen(argrest) - 1;
2581         while (temp >= argrest && isspace(*temp)) temp--;
2582         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2583         allow_domain_literals = TRUE;
2584         strip_trailing_dot = TRUE;
2585 #ifdef SUPPORT_I18N
2586         allow_utf8_domains = TRUE;
2587 #endif
2588         sender_address = parse_extract_address(argrest, &errmess,
2589           &dummy_start, &dummy_end, &sender_address_domain, TRUE);
2590 #ifdef SUPPORT_I18N
2591         message_smtputf8 =  string_is_utf8(sender_address);
2592         allow_utf8_domains = FALSE;
2593 #endif
2594         allow_domain_literals = FALSE;
2595         strip_trailing_dot = FALSE;
2596         if (sender_address == NULL)
2597           {
2598           fprintf(stderr, "exim: bad -f address \"%s\": %s\n", argrest, errmess);
2599           return EXIT_FAILURE;
2600           }
2601         }
2602       sender_address_forced = TRUE;
2603       }
2604     break;
2605
2606     /* -G: sendmail invocation to specify that it's a gateway submission and
2607     sendmail may complain about problems instead of fixing them.
2608     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2609     not at this time complain about problems. */
2610
2611     case 'G':
2612     flag_G = TRUE;
2613     break;
2614
2615     /* -h: Set the hop count for an incoming message. Exim does not currently
2616     support this; it always computes it by counting the Received: headers.
2617     To put it in will require a change to the spool header file format. */
2618
2619     case 'h':
2620     if (*argrest == 0)
2621       {
2622       if(++i < argc) argrest = argv[i]; else
2623         { badarg = TRUE; break; }
2624       }
2625     if (!isdigit(*argrest)) badarg = TRUE;
2626     break;
2627
2628
2629     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2630     not to be documented for sendmail but mailx (at least) uses it) */
2631
2632     case 'i':
2633     if (*argrest == 0) dot_ends = FALSE; else badarg = TRUE;
2634     break;
2635
2636
2637     /* -L: set the identifier used for syslog; equivalent to setting
2638     syslog_processname in the config file, but needs to be an admin option. */
2639
2640     case 'L':
2641     if (*argrest == '\0')
2642       {
2643       if(++i < argc) argrest = argv[i]; else
2644         { badarg = TRUE; break; }
2645       }
2646     sz = Ustrlen(argrest);
2647     if (sz > 32)
2648       {
2649       fprintf(stderr, "exim: the -L syslog name is too long: \"%s\"\n", argrest);
2650       return EXIT_FAILURE;
2651       }
2652     if (sz < 1)
2653       {
2654       fprintf(stderr, "exim: the -L syslog name is too short\n");
2655       return EXIT_FAILURE;
2656       }
2657     cmdline_syslog_name = argrest;
2658     break;
2659
2660     case 'M':
2661     receiving_message = FALSE;
2662
2663     /* -MC:  continue delivery of another message via an existing open
2664     file descriptor. This option is used for an internal call by the
2665     smtp transport when there is a pending message waiting to go to an
2666     address to which it has got a connection. Five subsequent arguments are
2667     required: transport name, host name, IP address, sequence number, and
2668     message_id. Transports may decline to create new processes if the sequence
2669     number gets too big. The channel is stdin. This (-MC) must be the last
2670     argument. There's a subsequent check that the real-uid is privileged.
2671
2672     If we are running in the test harness. delay for a bit, to let the process
2673     that set this one up complete. This makes for repeatability of the logging,
2674     etc. output. */
2675
2676     if (Ustrcmp(argrest, "C") == 0)
2677       {
2678       union sockaddr_46 interface_sock;
2679       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2680
2681       if (argc != i + 6)
2682         {
2683         fprintf(stderr, "exim: too many or too few arguments after -MC\n");
2684         return EXIT_FAILURE;
2685         }
2686
2687       if (msg_action_arg >= 0)
2688         {
2689         fprintf(stderr, "exim: incompatible arguments\n");
2690         return EXIT_FAILURE;
2691         }
2692
2693       continue_transport = argv[++i];
2694       continue_hostname = argv[++i];
2695       continue_host_address = argv[++i];
2696       continue_sequence = Uatoi(argv[++i]);
2697       msg_action = MSG_DELIVER;
2698       msg_action_arg = ++i;
2699       forced_delivery = TRUE;
2700       queue_run_pid = passed_qr_pid;
2701       queue_run_pipe = passed_qr_pipe;
2702
2703       if (!mac_ismsgid(argv[i]))
2704         {
2705         fprintf(stderr, "exim: malformed message id %s after -MC option\n",
2706           argv[i]);
2707         return EXIT_FAILURE;
2708         }
2709
2710       /* Set up $sending_ip_address and $sending_port, unless proxied */
2711
2712       if (!continue_proxy_cipher)
2713         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2714             &size) == 0)
2715           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2716             &sending_port);
2717         else
2718           {
2719           fprintf(stderr, "exim: getsockname() failed after -MC option: %s\n",
2720             strerror(errno));
2721           return EXIT_FAILURE;
2722           }
2723
2724       if (running_in_test_harness) millisleep(500);
2725       break;
2726       }
2727
2728     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2729       {
2730       switch(argrest[1])
2731         {
2732     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2733     precedes -MC (see above). The flag indicates that the host to which
2734     Exim is connected has accepted an AUTH sequence. */
2735
2736         case 'A': smtp_authenticated = TRUE; break;
2737
2738     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2739        that exim is connected to supports the esmtp extension DSN */
2740
2741         case 'D': smtp_peer_options |= OPTION_DSN; break;
2742
2743     /* -MCG: set the queue name, to a non-default value */
2744
2745         case 'G': if (++i < argc) queue_name = string_copy(argv[i]);
2746                   else badarg = TRUE;
2747                   break;
2748
2749     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2750
2751         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2752
2753     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2754     it preceded -MC (see above) */
2755
2756         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2757
2758     /* -MCQ: pass on the pid of the queue-running process that started
2759     this chain of deliveries and the fd of its synchronizing pipe; this
2760     is useful only when it precedes -MC (see above) */
2761
2762         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
2763                   else badarg = TRUE;
2764                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
2765                   else badarg = TRUE;
2766                   break;
2767
2768     /* -MCS: set the smtp_use_size flag; this is useful only when it
2769     precedes -MC (see above) */
2770
2771         case 'S': smtp_peer_options |= OPTION_SIZE; break;
2772
2773 #ifdef SUPPORT_TLS
2774     /* -MCt: similar to -MCT below but the connection is still open
2775     via a proxy proces which handles the TLS context and coding.
2776     Require three arguments for the proxied local address and port,
2777     and the TLS cipher.  */
2778
2779         case 't': if (++i < argc) sending_ip_address = argv[i];
2780                   else badarg = TRUE;
2781                   if (++i < argc) sending_port = (int)(Uatol(argv[i]));
2782                   else badarg = TRUE;
2783                   if (++i < argc) continue_proxy_cipher = argv[i];
2784                   else badarg = TRUE;
2785                   /*FALLTHROUGH*/
2786
2787     /* -MCT: set the tls_offered flag; this is useful only when it
2788     precedes -MC (see above). The flag indicates that the host to which
2789     Exim is connected has offered TLS support. */
2790
2791         case 'T': smtp_peer_options |= OPTION_TLS; break;
2792 #endif
2793
2794         default:  badarg = TRUE; break;
2795         }
2796         break;
2797       }
2798
2799     /* -M[x]: various operations on the following list of message ids:
2800        -M    deliver the messages, ignoring next retry times and thawing
2801        -Mc   deliver the messages, checking next retry times, no thawing
2802        -Mf   freeze the messages
2803        -Mg   give up on the messages
2804        -Mt   thaw the messages
2805        -Mrm  remove the messages
2806     In the above cases, this must be the last option. There are also the
2807     following options which are followed by a single message id, and which
2808     act on that message. Some of them use the "recipient" addresses as well.
2809        -Mar  add recipient(s)
2810        -Mmad mark all recipients delivered
2811        -Mmd  mark recipients(s) delivered
2812        -Mes  edit sender
2813        -Mset load a message for use with -be
2814        -Mvb  show body
2815        -Mvc  show copy (of whole message, in RFC 2822 format)
2816        -Mvh  show header
2817        -Mvl  show log
2818     */
2819
2820     else if (*argrest == 0)
2821       {
2822       msg_action = MSG_DELIVER;
2823       forced_delivery = deliver_force_thaw = TRUE;
2824       }
2825     else if (Ustrcmp(argrest, "ar") == 0)
2826       {
2827       msg_action = MSG_ADD_RECIPIENT;
2828       one_msg_action = TRUE;
2829       }
2830     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
2831     else if (Ustrcmp(argrest, "es") == 0)
2832       {
2833       msg_action = MSG_EDIT_SENDER;
2834       one_msg_action = TRUE;
2835       }
2836     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
2837     else if (Ustrcmp(argrest, "g") == 0)
2838       {
2839       msg_action = MSG_DELIVER;
2840       deliver_give_up = TRUE;
2841       }
2842     else if (Ustrcmp(argrest, "mad") == 0)
2843       {
2844       msg_action = MSG_MARK_ALL_DELIVERED;
2845       }
2846     else if (Ustrcmp(argrest, "md") == 0)
2847       {
2848       msg_action = MSG_MARK_DELIVERED;
2849       one_msg_action = TRUE;
2850       }
2851     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
2852     else if (Ustrcmp(argrest, "set") == 0)
2853       {
2854       msg_action = MSG_LOAD;
2855       one_msg_action = TRUE;
2856       }
2857     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
2858     else if (Ustrcmp(argrest, "vb") == 0)
2859       {
2860       msg_action = MSG_SHOW_BODY;
2861       one_msg_action = TRUE;
2862       }
2863     else if (Ustrcmp(argrest, "vc") == 0)
2864       {
2865       msg_action = MSG_SHOW_COPY;
2866       one_msg_action = TRUE;
2867       }
2868     else if (Ustrcmp(argrest, "vh") == 0)
2869       {
2870       msg_action = MSG_SHOW_HEADER;
2871       one_msg_action = TRUE;
2872       }
2873     else if (Ustrcmp(argrest, "vl") == 0)
2874       {
2875       msg_action = MSG_SHOW_LOG;
2876       one_msg_action = TRUE;
2877       }
2878     else { badarg = TRUE; break; }
2879
2880     /* All the -Mxx options require at least one message id. */
2881
2882     msg_action_arg = i + 1;
2883     if (msg_action_arg >= argc)
2884       {
2885       fprintf(stderr, "exim: no message ids given after %s option\n", arg);
2886       return EXIT_FAILURE;
2887       }
2888
2889     /* Some require only message ids to follow */
2890
2891     if (!one_msg_action)
2892       {
2893       int j;
2894       for (j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
2895         {
2896         fprintf(stderr, "exim: malformed message id %s after %s option\n",
2897           argv[j], arg);
2898         return EXIT_FAILURE;
2899         }
2900       goto END_ARG;   /* Remaining args are ids */
2901       }
2902
2903     /* Others require only one message id, possibly followed by addresses,
2904     which will be handled as normal arguments. */
2905
2906     else
2907       {
2908       if (!mac_ismsgid(argv[msg_action_arg]))
2909         {
2910         fprintf(stderr, "exim: malformed message id %s after %s option\n",
2911           argv[msg_action_arg], arg);
2912         return EXIT_FAILURE;
2913         }
2914       i++;
2915       }
2916     break;
2917
2918
2919     /* Some programs seem to call the -om option without the leading o;
2920     for sendmail it askes for "me too". Exim always does this. */
2921
2922     case 'm':
2923     if (*argrest != 0) badarg = TRUE;
2924     break;
2925
2926
2927     /* -N: don't do delivery - a debugging option that stops transports doing
2928     their thing. It implies debugging at the D_v level. */
2929
2930     case 'N':
2931     if (*argrest == 0)
2932       {
2933       dont_deliver = TRUE;
2934       debug_selector |= D_v;
2935       debug_file = stderr;
2936       }
2937     else badarg = TRUE;
2938     break;
2939
2940
2941     /* -n: This means "don't alias" in sendmail, apparently.
2942     For normal invocations, it has no effect.
2943     It may affect some other options. */
2944
2945     case 'n':
2946     flag_n = TRUE;
2947     break;
2948
2949     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
2950     option to the specified value. This form uses long names. We need to handle
2951     -O option=value and -Ooption=value. */
2952
2953     case 'O':
2954     if (*argrest == 0)
2955       {
2956       if (++i >= argc)
2957         {
2958         fprintf(stderr, "exim: string expected after -O\n");
2959         exit(EXIT_FAILURE);
2960         }
2961       }
2962     break;
2963
2964     case 'o':
2965
2966     /* -oA: Set an argument for the bi command (sendmail's "alternate alias
2967     file" option). */
2968
2969     if (*argrest == 'A')
2970       {
2971       alias_arg = argrest + 1;
2972       if (alias_arg[0] == 0)
2973         {
2974         if (i+1 < argc) alias_arg = argv[++i]; else
2975           {
2976           fprintf(stderr, "exim: string expected after -oA\n");
2977           exit(EXIT_FAILURE);
2978           }
2979         }
2980       }
2981
2982     /* -oB: Set a connection message max value for remote deliveries */
2983
2984     else if (*argrest == 'B')
2985       {
2986       uschar *p = argrest + 1;
2987       if (p[0] == 0)
2988         {
2989         if (i+1 < argc && isdigit((argv[i+1][0]))) p = argv[++i]; else
2990           {
2991           connection_max_messages = 1;
2992           p = NULL;
2993           }
2994         }
2995
2996       if (p != NULL)
2997         {
2998         if (!isdigit(*p))
2999           {
3000           fprintf(stderr, "exim: number expected after -oB\n");
3001           exit(EXIT_FAILURE);
3002           }
3003         connection_max_messages = Uatoi(p);
3004         }
3005       }
3006
3007     /* -odb: background delivery */
3008
3009     else if (Ustrcmp(argrest, "db") == 0)
3010       {
3011       synchronous_delivery = FALSE;
3012       arg_queue_only = FALSE;
3013       queue_only_set = TRUE;
3014       }
3015
3016     /* -odf: foreground delivery (smail-compatible option); same effect as
3017        -odi: interactive (synchronous) delivery (sendmail-compatible option)
3018     */
3019
3020     else if (Ustrcmp(argrest, "df") == 0 || Ustrcmp(argrest, "di") == 0)
3021       {
3022       synchronous_delivery = TRUE;
3023       arg_queue_only = FALSE;
3024       queue_only_set = TRUE;
3025       }
3026
3027     /* -odq: queue only */
3028
3029     else if (Ustrcmp(argrest, "dq") == 0)
3030       {
3031       synchronous_delivery = FALSE;
3032       arg_queue_only = TRUE;
3033       queue_only_set = TRUE;
3034       }
3035
3036     /* -odqs: queue SMTP only - do local deliveries and remote routing,
3037     but no remote delivery */
3038
3039     else if (Ustrcmp(argrest, "dqs") == 0)
3040       {
3041       queue_smtp = TRUE;
3042       arg_queue_only = FALSE;
3043       queue_only_set = TRUE;
3044       }
3045
3046     /* -oex: Sendmail error flags. As these are also accepted without the
3047     leading -o prefix, for compatibility with vacation and other callers,
3048     they are handled with -e above. */
3049
3050     /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3051        -oitrue: Another sendmail syntax for the same */
3052
3053     else if (Ustrcmp(argrest, "i") == 0 ||
3054              Ustrcmp(argrest, "itrue") == 0)
3055       dot_ends = FALSE;
3056
3057     /* -oM*: Set various characteristics for an incoming message; actually
3058     acted on for trusted callers only. */
3059
3060     else if (*argrest == 'M')
3061       {
3062       if (i+1 >= argc)
3063         {
3064         fprintf(stderr, "exim: data expected after -o%s\n", argrest);
3065         exit(EXIT_FAILURE);
3066         }
3067
3068       /* -oMa: Set sender host address */
3069
3070       if (Ustrcmp(argrest, "Ma") == 0) sender_host_address = argv[++i];
3071
3072       /* -oMaa: Set authenticator name */
3073
3074       else if (Ustrcmp(argrest, "Maa") == 0)
3075         sender_host_authenticated = argv[++i];
3076
3077       /* -oMas: setting authenticated sender */
3078
3079       else if (Ustrcmp(argrest, "Mas") == 0) authenticated_sender = argv[++i];
3080
3081       /* -oMai: setting authenticated id */
3082
3083       else if (Ustrcmp(argrest, "Mai") == 0) authenticated_id = argv[++i];
3084
3085       /* -oMi: Set incoming interface address */
3086
3087       else if (Ustrcmp(argrest, "Mi") == 0) interface_address = argv[++i];
3088
3089       /* -oMm: Message reference */
3090
3091       else if (Ustrcmp(argrest, "Mm") == 0)
3092         {
3093         if (!mac_ismsgid(argv[i+1]))
3094           {
3095             fprintf(stderr,"-oMm must be a valid message ID\n");
3096             exit(EXIT_FAILURE);
3097           }
3098         if (!trusted_config)
3099           {
3100             fprintf(stderr,"-oMm must be called by a trusted user/config\n");
3101             exit(EXIT_FAILURE);
3102           }
3103           message_reference = argv[++i];
3104         }
3105
3106       /* -oMr: Received protocol */
3107
3108       else if (Ustrcmp(argrest, "Mr") == 0)
3109
3110         if (received_protocol)
3111           {
3112           fprintf(stderr, "received_protocol is set already\n");
3113           exit(EXIT_FAILURE);
3114           }
3115         else received_protocol = argv[++i];
3116
3117       /* -oMs: Set sender host name */
3118
3119       else if (Ustrcmp(argrest, "Ms") == 0) sender_host_name = argv[++i];
3120
3121       /* -oMt: Set sender ident */
3122
3123       else if (Ustrcmp(argrest, "Mt") == 0)
3124         {
3125         sender_ident_set = TRUE;
3126         sender_ident = argv[++i];
3127         }
3128
3129       /* Else a bad argument */
3130
3131       else
3132         {
3133         badarg = TRUE;
3134         break;
3135         }
3136       }
3137
3138     /* -om: Me-too flag for aliases. Exim always does this. Some programs
3139     seem to call this as -m (undocumented), so that is also accepted (see
3140     above). */
3141
3142     else if (Ustrcmp(argrest, "m") == 0) {}
3143
3144     /* -oo: An ancient flag for old-style addresses which still seems to
3145     crop up in some calls (see in SCO). */
3146
3147     else if (Ustrcmp(argrest, "o") == 0) {}
3148
3149     /* -oP <name>: set pid file path for daemon */
3150
3151     else if (Ustrcmp(argrest, "P") == 0)
3152       override_pid_file_path = argv[++i];
3153
3154     /* -or <n>: set timeout for non-SMTP acceptance
3155        -os <n>: set timeout for SMTP acceptance */
3156
3157     else if (*argrest == 'r' || *argrest == 's')
3158       {
3159       int *tp = (*argrest == 'r')?
3160         &arg_receive_timeout : &arg_smtp_receive_timeout;
3161       if (argrest[1] == 0)
3162         {
3163         if (i+1 < argc) *tp= readconf_readtime(argv[++i], 0, FALSE);
3164         }
3165       else *tp = readconf_readtime(argrest + 1, 0, FALSE);
3166       if (*tp < 0)
3167         {
3168         fprintf(stderr, "exim: bad time value %s: abandoned\n", argv[i]);
3169         exit(EXIT_FAILURE);
3170         }
3171       }
3172
3173     /* -oX <list>: Override local_interfaces and/or default daemon ports */
3174
3175     else if (Ustrcmp(argrest, "X") == 0)
3176       override_local_interfaces = argv[++i];
3177
3178     /* Unknown -o argument */
3179
3180     else badarg = TRUE;
3181     break;
3182
3183
3184     /* -ps: force Perl startup; -pd force delayed Perl startup */
3185
3186     case 'p':
3187     #ifdef EXIM_PERL
3188     if (*argrest == 's' && argrest[1] == 0)
3189       {
3190       perl_start_option = 1;
3191       break;
3192       }
3193     if (*argrest == 'd' && argrest[1] == 0)
3194       {
3195       perl_start_option = -1;
3196       break;
3197       }
3198     #endif
3199
3200     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3201     which sets the host protocol and host name */
3202
3203     if (*argrest == 0)
3204       {
3205       if (i+1 < argc) argrest = argv[++i]; else
3206         { badarg = TRUE; break; }
3207       }
3208
3209     if (*argrest != 0)
3210       {
3211       uschar *hn;
3212
3213       if (received_protocol)
3214         {
3215         fprintf(stderr, "received_protocol is set already\n");
3216         exit(EXIT_FAILURE);
3217         }
3218
3219       hn = Ustrchr(argrest, ':');
3220       if (hn == NULL)
3221         {
3222         received_protocol = argrest;
3223         }
3224       else
3225         {
3226         int old_pool = store_pool;
3227         store_pool = POOL_PERM;
3228         received_protocol = string_copyn(argrest, hn - argrest);
3229         store_pool = old_pool;
3230         sender_host_name = hn + 1;
3231         }
3232       }
3233     break;
3234
3235
3236     case 'q':
3237     receiving_message = FALSE;
3238     if (queue_interval >= 0)
3239       {
3240       fprintf(stderr, "exim: -q specified more than once\n");
3241       exit(EXIT_FAILURE);
3242       }
3243
3244     /* -qq...: Do queue runs in a 2-stage manner */
3245
3246     if (*argrest == 'q')
3247       {
3248       queue_2stage = TRUE;
3249       argrest++;
3250       }
3251
3252     /* -qi...: Do only first (initial) deliveries */
3253
3254     if (*argrest == 'i')
3255       {
3256       queue_run_first_delivery = TRUE;
3257       argrest++;
3258       }
3259
3260     /* -qf...: Run the queue, forcing deliveries
3261        -qff..: Ditto, forcing thawing as well */
3262
3263     if (*argrest == 'f')
3264       {
3265       queue_run_force = TRUE;
3266       if (*++argrest == 'f')
3267         {
3268         deliver_force_thaw = TRUE;
3269         argrest++;
3270         }
3271       }
3272
3273     /* -q[f][f]l...: Run the queue only on local deliveries */
3274
3275     if (*argrest == 'l')
3276       {
3277       queue_run_local = TRUE;
3278       argrest++;
3279       }
3280
3281     /* -q[f][f][l][G<name>]... Work on the named queue */
3282
3283     if (*argrest == 'G')
3284       {
3285       int i;
3286       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3287       queue_name = string_copyn(argrest, i);
3288       argrest += i;
3289       if (*argrest == '/') argrest++;
3290       }
3291
3292     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3293     only, optionally named, optionally starting from a given message id. */
3294
3295     if (*argrest == 0 &&
3296         (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3297       {
3298       queue_interval = 0;
3299       if (i+1 < argc && mac_ismsgid(argv[i+1]))
3300         start_queue_run_id = argv[++i];
3301       if (i+1 < argc && mac_ismsgid(argv[i+1]))
3302         stop_queue_run_id = argv[++i];
3303       }
3304
3305     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3306     forced, optionally local only, optionally named. */
3307
3308     else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3309                                                 0, FALSE)) <= 0)
3310       {
3311       fprintf(stderr, "exim: bad time value %s: abandoned\n", argv[i]);
3312       exit(EXIT_FAILURE);
3313       }
3314     break;
3315
3316
3317     case 'R':   /* Synonymous with -qR... */
3318     receiving_message = FALSE;
3319
3320     /* -Rf:   As -R (below) but force all deliveries,
3321        -Rff:  Ditto, but also thaw all frozen messages,
3322        -Rr:   String is regex
3323        -Rrf:  Regex and force
3324        -Rrff: Regex and force and thaw
3325
3326     in all cases provided there are no further characters in this
3327     argument. */
3328
3329     if (*argrest != 0)
3330       {
3331       int i;
3332       for (i = 0; i < nelem(rsopts); i++)
3333         if (Ustrcmp(argrest, rsopts[i]) == 0)
3334           {
3335           if (i != 2) queue_run_force = TRUE;
3336           if (i >= 2) deliver_selectstring_regex = TRUE;
3337           if (i == 1 || i == 4) deliver_force_thaw = TRUE;
3338           argrest += Ustrlen(rsopts[i]);
3339           }
3340       }
3341
3342     /* -R: Set string to match in addresses for forced queue run to
3343     pick out particular messages. */
3344
3345     if (*argrest)
3346       deliver_selectstring = argrest;
3347     else if (i+1 < argc)
3348       deliver_selectstring = argv[++i];
3349     else
3350       {
3351       fprintf(stderr, "exim: string expected after -R\n");
3352       exit(EXIT_FAILURE);
3353       }
3354     break;
3355
3356
3357     /* -r: an obsolete synonym for -f (see above) */
3358
3359
3360     /* -S: Like -R but works on sender. */
3361
3362     case 'S':   /* Synonymous with -qS... */
3363     receiving_message = FALSE;
3364
3365     /* -Sf:   As -S (below) but force all deliveries,
3366        -Sff:  Ditto, but also thaw all frozen messages,
3367        -Sr:   String is regex
3368        -Srf:  Regex and force
3369        -Srff: Regex and force and thaw
3370
3371     in all cases provided there are no further characters in this
3372     argument. */
3373
3374     if (*argrest)
3375       {
3376       int i;
3377       for (i = 0; i < nelem(rsopts); i++)
3378         if (Ustrcmp(argrest, rsopts[i]) == 0)
3379           {
3380           if (i != 2) queue_run_force = TRUE;
3381           if (i >= 2) deliver_selectstring_sender_regex = TRUE;
3382           if (i == 1 || i == 4) deliver_force_thaw = TRUE;
3383           argrest += Ustrlen(rsopts[i]);
3384           }
3385       }
3386
3387     /* -S: Set string to match in addresses for forced queue run to
3388     pick out particular messages. */
3389
3390     if (*argrest)
3391       deliver_selectstring_sender = argrest;
3392     else if (i+1 < argc)
3393       deliver_selectstring_sender = argv[++i];
3394     else
3395       {
3396       fprintf(stderr, "exim: string expected after -S\n");
3397       exit(EXIT_FAILURE);
3398       }
3399     break;
3400
3401     /* -Tqt is an option that is exclusively for use by the testing suite.
3402     It is not recognized in other circumstances. It allows for the setting up
3403     of explicit "queue times" so that various warning/retry things can be
3404     tested. Otherwise variability of clock ticks etc. cause problems. */
3405
3406     case 'T':
3407     if (running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3408       fudged_queue_times = argv[++i];
3409     else badarg = TRUE;
3410     break;
3411
3412
3413     /* -t: Set flag to extract recipients from body of message. */
3414
3415     case 't':
3416     if (*argrest == 0) extract_recipients = TRUE;
3417
3418     /* -ti: Set flag to extract recipients from body of message, and also
3419     specify that dot does not end the message. */
3420
3421     else if (Ustrcmp(argrest, "i") == 0)
3422       {
3423       extract_recipients = TRUE;
3424       dot_ends = FALSE;
3425       }
3426
3427     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3428
3429     #ifdef SUPPORT_TLS
3430     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3431     #endif
3432
3433     else badarg = TRUE;
3434     break;
3435
3436
3437     /* -U: This means "initial user submission" in sendmail, apparently. The
3438     doc claims that in future sendmail may refuse syntactically invalid
3439     messages instead of fixing them. For the moment, we just ignore it. */
3440
3441     case 'U':
3442     break;
3443
3444
3445     /* -v: verify things - this is a very low-level debugging */
3446
3447     case 'v':
3448     if (*argrest == 0)
3449       {
3450       debug_selector |= D_v;
3451       debug_file = stderr;
3452       }
3453     else badarg = TRUE;
3454     break;
3455
3456
3457     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3458
3459       The -x flag tells the sendmail command that mail from a local
3460       mail program has National Language Support (NLS) extended characters
3461       in the body of the mail item. The sendmail command can send mail with
3462       extended NLS characters across networks that normally corrupts these
3463       8-bit characters.
3464
3465     As Exim is 8-bit clean, it just ignores this flag. */
3466
3467     case 'x':
3468     if (*argrest != 0) badarg = TRUE;
3469     break;
3470
3471     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3472     logs to that file.  We swallow the parameter and otherwise ignore it. */
3473
3474     case 'X':
3475     if (*argrest == '\0')
3476       if (++i >= argc)
3477         {
3478         fprintf(stderr, "exim: string expected after -X\n");
3479         exit(EXIT_FAILURE);
3480         }
3481     break;
3482
3483     case 'z':
3484     if (*argrest == '\0')
3485       if (++i < argc) log_oneline = argv[i]; else
3486         {
3487         fprintf(stderr, "exim: file name expected after %s\n", argv[i-1]);
3488         exit(EXIT_FAILURE);
3489         }
3490     break;
3491
3492     /* All other initial characters are errors */
3493
3494     default:
3495     badarg = TRUE;
3496     break;
3497     }         /* End of high-level switch statement */
3498
3499   /* Failed to recognize the option, or syntax error */
3500
3501   if (badarg)
3502     {
3503     fprintf(stderr, "exim abandoned: unknown, malformed, or incomplete "
3504       "option %s\n", arg);
3505     exit(EXIT_FAILURE);
3506     }
3507   }
3508
3509
3510 /* If -R or -S have been specified without -q, assume a single queue run. */
3511
3512 if (  (deliver_selectstring || deliver_selectstring_sender)
3513    && queue_interval < 0)
3514     queue_interval = 0;
3515
3516
3517 END_ARG:
3518 /* If usage_wanted is set we call the usage function - which never returns */
3519 if (usage_wanted) exim_usage(called_as);
3520
3521 /* Arguments have been processed. Check for incompatibilities. */
3522 if ((
3523     (smtp_input || extract_recipients || recipients_arg < argc) &&
3524     (daemon_listen || queue_interval >= 0 || bi_option ||
3525       test_retry_arg >= 0 || test_rewrite_arg >= 0 ||
3526       filter_test != FTEST_NONE || (msg_action_arg > 0 && !one_msg_action))
3527     ) ||
3528     (
3529     msg_action_arg > 0 &&
3530     (daemon_listen || queue_interval > 0 || list_options ||
3531       (checking && msg_action != MSG_LOAD) ||
3532       bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0)
3533     ) ||
3534     (
3535     (daemon_listen || queue_interval > 0) &&
3536     (sender_address != NULL || list_options || list_queue || checking ||
3537       bi_option)
3538     ) ||
3539     (
3540     daemon_listen && queue_interval == 0
3541     ) ||
3542     (
3543     inetd_wait_mode && queue_interval >= 0
3544     ) ||
3545     (
3546     list_options &&
3547     (checking || smtp_input || extract_recipients ||
3548       filter_test != FTEST_NONE || bi_option)
3549     ) ||
3550     (
3551     verify_address_mode &&
3552     (address_test_mode || smtp_input || extract_recipients ||
3553       filter_test != FTEST_NONE || bi_option)
3554     ) ||
3555     (
3556     address_test_mode && (smtp_input || extract_recipients ||
3557       filter_test != FTEST_NONE || bi_option)
3558     ) ||
3559     (
3560     smtp_input && (sender_address != NULL || filter_test != FTEST_NONE ||
3561       extract_recipients)
3562     ) ||
3563     (
3564     deliver_selectstring != NULL && queue_interval < 0
3565     ) ||
3566     (
3567     msg_action == MSG_LOAD &&
3568       (!expansion_test || expansion_test_message != NULL)
3569     )
3570    )
3571   {
3572   fprintf(stderr, "exim: incompatible command-line options or arguments\n");
3573   exit(EXIT_FAILURE);
3574   }
3575
3576 /* If debugging is set up, set the file and the file descriptor to pass on to
3577 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3578 to run in the foreground. */
3579
3580 if (debug_selector != 0)
3581   {
3582   debug_file = stderr;
3583   debug_fd = fileno(debug_file);
3584   background_daemon = FALSE;
3585   if (running_in_test_harness) millisleep(100);   /* lets caller finish */
3586   if (debug_selector != D_v)    /* -v only doesn't show this */
3587     {
3588     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3589       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3590       debug_selector);
3591     if (!version_printed)
3592       show_whats_supported(stderr);
3593     }
3594   }
3595
3596 /* When started with root privilege, ensure that the limits on the number of
3597 open files and the number of processes (where that is accessible) are
3598 sufficiently large, or are unset, in case Exim has been called from an
3599 environment where the limits are screwed down. Not all OS have the ability to
3600 change some of these limits. */
3601
3602 if (unprivileged)
3603   {
3604   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3605   }
3606 else
3607   {
3608   struct rlimit rlp;
3609
3610   #ifdef RLIMIT_NOFILE
3611   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3612     {
3613     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3614       strerror(errno));
3615     rlp.rlim_cur = rlp.rlim_max = 0;
3616     }
3617
3618   /* I originally chose 1000 as a nice big number that was unlikely to
3619   be exceeded. It turns out that some older OS have a fixed upper limit of
3620   256. */
3621
3622   if (rlp.rlim_cur < 1000)
3623     {
3624     rlp.rlim_cur = rlp.rlim_max = 1000;
3625     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3626       {
3627       rlp.rlim_cur = rlp.rlim_max = 256;
3628       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3629         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3630           strerror(errno));
3631       }
3632     }
3633   #endif
3634
3635   #ifdef RLIMIT_NPROC
3636   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3637     {
3638     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3639       strerror(errno));
3640     rlp.rlim_cur = rlp.rlim_max = 0;
3641     }
3642
3643   #ifdef RLIM_INFINITY
3644   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3645     {
3646     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3647   #else
3648   if (rlp.rlim_cur < 1000)
3649     {
3650     rlp.rlim_cur = rlp.rlim_max = 1000;
3651   #endif
3652     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3653       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3654         strerror(errno));
3655     }
3656   #endif
3657   }
3658
3659 /* Exim is normally entered as root (but some special configurations are
3660 possible that don't do this). However, it always spins off sub-processes that
3661 set their uid and gid as required for local delivery. We don't want to pass on
3662 any extra groups that root may belong to, so we want to get rid of them all at
3663 this point.
3664
3665 We need to obey setgroups() at this stage, before possibly giving up root
3666 privilege for a changed configuration file, but later on we might need to
3667 check on the additional groups for the admin user privilege - can't do that
3668 till after reading the config, which might specify the exim gid. Therefore,
3669 save the group list here first. */
3670
3671 group_count = getgroups(NGROUPS_MAX, group_list);
3672 if (group_count < 0)
3673   {
3674   fprintf(stderr, "exim: getgroups() failed: %s\n", strerror(errno));
3675   exit(EXIT_FAILURE);
3676   }
3677
3678 /* There is a fundamental difference in some BSD systems in the matter of
3679 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3680 known not to be different. On the "different" systems there is a single group
3681 list, and the first entry in it is the current group. On all other versions of
3682 Unix there is a supplementary group list, which is in *addition* to the current
3683 group. Consequently, to get rid of all extraneous groups on a "standard" system
3684 you pass over 0 groups to setgroups(), while on a "different" system you pass
3685 over a single group - the current group, which is always the first group in the
3686 list. Calling setgroups() with zero groups on a "different" system results in
3687 an error return. The following code should cope with both types of system.
3688
3689 However, if this process isn't running as root, setgroups() can't be used
3690 since you have to be root to run it, even if throwing away groups. Not being
3691 root here happens only in some unusual configurations. We just ignore the
3692 error. */
3693
3694 if (setgroups(0, NULL) != 0)
3695   {
3696   if (setgroups(1, group_list) != 0 && !unprivileged)
3697     {
3698     fprintf(stderr, "exim: setgroups() failed: %s\n", strerror(errno));
3699     exit(EXIT_FAILURE);
3700     }
3701   }
3702
3703 /* If the configuration file name has been altered by an argument on the
3704 command line (either a new file name or a macro definition) and the caller is
3705 not root, or if this is a filter testing run, remove any setuid privilege the
3706 program has and run as the underlying user.
3707
3708 The exim user is locked out of this, which severely restricts the use of -C
3709 for some purposes.
3710
3711 Otherwise, set the real ids to the effective values (should be root unless run
3712 from inetd, which it can either be root or the exim uid, if one is configured).
3713
3714 There is a private mechanism for bypassing some of this, in order to make it
3715 possible to test lots of configurations automatically, without having either to
3716 recompile each time, or to patch in an actual configuration file name and other
3717 values (such as the path name). If running in the test harness, pretend that
3718 configuration file changes and macro definitions haven't happened. */
3719
3720 if ((                                            /* EITHER */
3721     (!trusted_config ||                          /* Config changed, or */
3722      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
3723     real_uid != root_uid &&                      /* Not root, and */
3724     !running_in_test_harness                     /* Not fudged */
3725     ) ||                                         /*   OR   */
3726     expansion_test                               /* expansion testing */
3727     ||                                           /*   OR   */
3728     filter_test != FTEST_NONE)                   /* Filter testing */
3729   {
3730   setgroups(group_count, group_list);
3731   exim_setugid(real_uid, real_gid, FALSE,
3732     US"-C, -D, -be or -bf forces real uid");
3733   removed_privilege = TRUE;
3734
3735   /* In the normal case when Exim is called like this, stderr is available
3736   and should be used for any logging information because attempts to write
3737   to the log will usually fail. To arrange this, we unset really_exim. However,
3738   if no stderr is available there is no point - we might as well have a go
3739   at the log (if it fails, syslog will be written).
3740
3741   Note that if the invoker is Exim, the logs remain available. Messing with
3742   this causes unlogged successful deliveries.  */
3743
3744   if ((log_stderr != NULL) && (real_uid != exim_uid))
3745     really_exim = FALSE;
3746   }
3747
3748 /* Privilege is to be retained for the moment. It may be dropped later,
3749 depending on the job that this Exim process has been asked to do. For now, set
3750 the real uid to the effective so that subsequent re-execs of Exim are done by a
3751 privileged user. */
3752
3753 else exim_setugid(geteuid(), getegid(), FALSE, US"forcing real = effective");
3754
3755 /* If testing a filter, open the file(s) now, before wasting time doing other
3756 setups and reading the message. */
3757
3758 if ((filter_test & FTEST_SYSTEM) != 0)
3759   {
3760   filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0);
3761   if (filter_sfd < 0)
3762     {
3763     fprintf(stderr, "exim: failed to open %s: %s\n", filter_test_sfile,
3764       strerror(errno));
3765     return EXIT_FAILURE;
3766     }
3767   }
3768
3769 if ((filter_test & FTEST_USER) != 0)
3770   {
3771   filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0);
3772   if (filter_ufd < 0)
3773     {
3774     fprintf(stderr, "exim: failed to open %s: %s\n", filter_test_ufile,
3775       strerror(errno));
3776     return EXIT_FAILURE;
3777     }
3778   }
3779
3780 /* Initialise lookup_list
3781 If debugging, already called above via version reporting.
3782 In either case, we initialise the list of available lookups while running
3783 as root.  All dynamically modules are loaded from a directory which is
3784 hard-coded into the binary and is code which, if not a module, would be
3785 part of Exim already.  Ability to modify the content of the directory
3786 is equivalent to the ability to modify a setuid binary!
3787
3788 This needs to happen before we read the main configuration. */
3789 init_lookup_list();
3790
3791 #ifdef SUPPORT_I18N
3792 if (running_in_test_harness) smtputf8_advertise_hosts = NULL;
3793 #endif
3794
3795 /* Read the main runtime configuration data; this gives up if there
3796 is a failure. It leaves the configuration file open so that the subsequent
3797 configuration data for delivery can be read if needed.
3798
3799 NOTE: immediatly after opening the configuration file we change the working
3800 directory to "/"! Later we change to $spool_directory. We do it there, because
3801 during readconf_main() some expansion takes place already. */
3802
3803 /* Store the initial cwd before we change directories */
3804 if ((initial_cwd = os_getcwd(NULL, 0)) == NULL)
3805   {
3806   perror("exim: can't get the current working directory");
3807   exit(EXIT_FAILURE);
3808   }
3809
3810 /* checking:
3811     -be[m] expansion test        -
3812     -b[fF] filter test           new
3813     -bh[c] host test             -
3814     -bmalware malware_test_file  new
3815     -brt   retry test            new
3816     -brw   rewrite test          new
3817     -bt    address test          -
3818     -bv[s] address verify        -
3819    list_options:
3820     -bP <option> (except -bP config, which sets list_config)
3821
3822 If any of these options is set, we suppress warnings about configuration
3823 issues (currently about tls_advertise_hosts and keep_environment not being
3824 defined) */
3825
3826 readconf_main(checking || list_options);
3827
3828 if (builtin_macros_create_trigger) DEBUG(D_any)
3829   debug_printf("Builtin macros created (expensive) due to config line '%.*s'\n",
3830     Ustrlen(builtin_macros_create_trigger)-1, builtin_macros_create_trigger);
3831
3832 /* Now in directory "/" */
3833
3834 if (cleanup_environment() == FALSE)
3835   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
3836
3837
3838 /* If an action on specific messages is requested, or if a daemon or queue
3839 runner is being started, we need to know if Exim was called by an admin user.
3840 This is the case if the real user is root or exim, or if the real group is
3841 exim, or if one of the supplementary groups is exim or a group listed in
3842 admin_groups. We don't fail all message actions immediately if not admin_user,
3843 since some actions can be performed by non-admin users. Instead, set admin_user
3844 for later interrogation. */
3845
3846 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
3847   admin_user = TRUE;
3848 else
3849   {
3850   int i, j;
3851   for (i = 0; i < group_count && !admin_user; i++)
3852     if (group_list[i] == exim_gid)
3853       admin_user = TRUE;
3854     else if (admin_groups)
3855       for (j = 1; j <= (int)admin_groups[0] && !admin_user; j++)
3856         if (admin_groups[j] == group_list[i])
3857           admin_user = TRUE;
3858   }
3859
3860 /* Another group of privileged users are the trusted users. These are root,
3861 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
3862 are permitted to specify sender_addresses with -f on the command line, and
3863 other message parameters as well. */
3864
3865 if (real_uid == root_uid || real_uid == exim_uid)
3866   trusted_caller = TRUE;
3867 else
3868   {
3869   int i, j;
3870
3871   if (trusted_users)
3872     for (i = 1; i <= (int)trusted_users[0] && !trusted_caller; i++)
3873       if (trusted_users[i] == real_uid)
3874         trusted_caller = TRUE;
3875
3876   if (trusted_groups)
3877     for (i = 1; i <= (int)trusted_groups[0] && !trusted_caller; i++)
3878       if (trusted_groups[i] == real_gid)
3879         trusted_caller = TRUE;
3880       else for (j = 0; j < group_count && !trusted_caller; j++)
3881         if (trusted_groups[i] == group_list[j])
3882           trusted_caller = TRUE;
3883   }
3884
3885 /* At this point, we know if the user is privileged and some command-line
3886 options become possibly imperssible, depending upon the configuration file. */
3887
3888 if (checking && commandline_checks_require_admin && !admin_user) {
3889   fprintf(stderr, "exim: those command-line flags are set to require admin\n");
3890   exit(EXIT_FAILURE);
3891 }
3892
3893 /* Handle the decoding of logging options. */
3894
3895 decode_bits(log_selector, log_selector_size, log_notall,
3896   log_selector_string, log_options, log_options_count, US"log", 0);
3897
3898 DEBUG(D_any)
3899   {
3900   int i;
3901   debug_printf("configuration file is %s\n", config_main_filename);
3902   debug_printf("log selectors =");
3903   for (i = 0; i < log_selector_size; i++)
3904     debug_printf(" %08x", log_selector[i]);
3905   debug_printf("\n");
3906   }
3907
3908 /* If domain literals are not allowed, check the sender address that was
3909 supplied with -f. Ditto for a stripped trailing dot. */
3910
3911 if (sender_address != NULL)
3912   {
3913   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
3914     {
3915     fprintf(stderr, "exim: bad -f address \"%s\": domain literals not "
3916       "allowed\n", sender_address);
3917     return EXIT_FAILURE;
3918     }
3919   if (f_end_dot && !strip_trailing_dot)
3920     {
3921     fprintf(stderr, "exim: bad -f address \"%s.\": domain is malformed "
3922       "(trailing dot not allowed)\n", sender_address);
3923     return EXIT_FAILURE;
3924     }
3925   }
3926
3927 /* See if an admin user overrode our logging. */
3928
3929 if (cmdline_syslog_name != NULL)
3930   {
3931   if (admin_user)
3932     {
3933     syslog_processname = cmdline_syslog_name;
3934     log_file_path = string_copy(CUS"syslog");
3935     }
3936   else
3937     {
3938     /* not a panic, non-privileged users should not be able to spam paniclog */
3939     fprintf(stderr,
3940         "exim: you lack sufficient privilege to specify syslog process name\n");
3941     return EXIT_FAILURE;
3942     }
3943   }
3944
3945 /* Paranoia check of maximum lengths of certain strings. There is a check
3946 on the length of the log file path in log.c, which will come into effect
3947 if there are any calls to write the log earlier than this. However, if we
3948 get this far but the string is very long, it is better to stop now than to
3949 carry on and (e.g.) receive a message and then have to collapse. The call to
3950 log_write() from here will cause the ultimate panic collapse if the complete
3951 file name exceeds the buffer length. */
3952
3953 if (Ustrlen(log_file_path) > 200)
3954   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3955     "log_file_path is longer than 200 chars: aborting");
3956
3957 if (Ustrlen(pid_file_path) > 200)
3958   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3959     "pid_file_path is longer than 200 chars: aborting");
3960
3961 if (Ustrlen(spool_directory) > 200)
3962   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3963     "spool_directory is longer than 200 chars: aborting");
3964
3965 /* Length check on the process name given to syslog for its TAG field,
3966 which is only permitted to be 32 characters or less. See RFC 3164. */
3967
3968 if (Ustrlen(syslog_processname) > 32)
3969   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3970     "syslog_processname is longer than 32 chars: aborting");
3971
3972 if (log_oneline)
3973   if (admin_user)
3974     {
3975     log_write(0, LOG_MAIN, "%s", log_oneline);
3976     return EXIT_SUCCESS;
3977     }
3978   else
3979     return EXIT_FAILURE;
3980
3981 /* In some operating systems, the environment variable TMPDIR controls where
3982 temporary files are created; Exim doesn't use these (apart from when delivering
3983 to MBX mailboxes), but called libraries such as DBM libraries may require them.
3984 If TMPDIR is found in the environment, reset it to the value defined in the
3985 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
3986 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
3987 EXIM_TMPDIR by the build scripts.
3988 */
3989
3990 #ifdef EXIM_TMPDIR
3991   {
3992   uschar **p;
3993   if (environ) for (p = USS environ; *p; p++)
3994     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
3995       {
3996       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
3997       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
3998       *p = newp;
3999       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
4000       }
4001   }
4002 #endif
4003
4004 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
4005 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
4006 we may need to get rid of a bogus timezone setting. This can arise when Exim is
4007 called by a user who has set the TZ variable. This then affects the timestamps
4008 in log files and in Received: headers, and any created Date: header lines. The
4009 required timezone is settable in the configuration file, so nothing can be done
4010 about this earlier - but hopefully nothing will normally be logged earlier than
4011 this. We have to make a new environment if TZ is wrong, but don't bother if
4012 timestamps_utc is set, because then all times are in UTC anyway. */
4013
4014 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
4015   timestamps_utc = TRUE;
4016 else
4017   {
4018   uschar *envtz = US getenv("TZ");
4019   if (envtz
4020       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
4021       : timezone_string != NULL
4022      )
4023     {
4024     uschar **p = USS environ;
4025     uschar **new;
4026     uschar **newp;
4027     int count = 0;
4028     if (environ) while (*p++) count++;
4029     if (!envtz) count++;
4030     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4031     if (environ) for (p = USS environ; *p; p++)
4032       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4033     if (timezone_string)
4034       {
4035       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4036       sprintf(CS *newp++, "TZ=%s", timezone_string);
4037       }
4038     *newp = NULL;
4039     environ = CSS new;
4040     tzset();
4041     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4042       tod_stamp(tod_log));
4043     }
4044   }
4045
4046 /* Handle the case when we have removed the setuid privilege because of -C or
4047 -D. This means that the caller of Exim was not root.
4048
4049 There is a problem if we were running as the Exim user. The sysadmin may
4050 expect this case to retain privilege because "the binary was called by the
4051 Exim user", but it hasn't, because either the -D option set macros, or the
4052 -C option set a non-trusted configuration file. There are two possibilities:
4053
4054   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4055       to do message deliveries. Thus, the fact that it is running as a
4056       non-privileged user is plausible, and might be wanted in some special
4057       configurations. However, really_exim will have been set false when
4058       privilege was dropped, to stop Exim trying to write to its normal log
4059       files. Therefore, re-enable normal log processing, assuming the sysadmin
4060       has set up the log directory correctly.
4061
4062   (2) If deliver_drop_privilege is not set, the configuration won't work as
4063       apparently intended, and so we log a panic message. In order to retain
4064       root for -C or -D, the caller must either be root or be invoking a
4065       trusted configuration file (when deliver_drop_privilege is false). */
4066
4067 if (  removed_privilege
4068    && (!trusted_config || opt_D_used)
4069    && real_uid == exim_uid)
4070   if (deliver_drop_privilege)
4071     really_exim = TRUE; /* let logging work normally */
4072   else
4073     log_write(0, LOG_MAIN|LOG_PANIC,
4074       "exim user lost privilege for using %s option",
4075       trusted_config? "-D" : "-C");
4076
4077 /* Start up Perl interpreter if Perl support is configured and there is a
4078 perl_startup option, and the configuration or the command line specifies
4079 initializing starting. Note that the global variables are actually called
4080 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4081
4082 #ifdef EXIM_PERL
4083 if (perl_start_option != 0)
4084   opt_perl_at_start = (perl_start_option > 0);
4085 if (opt_perl_at_start && opt_perl_startup != NULL)
4086   {
4087   uschar *errstr;
4088   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4089   errstr = init_perl(opt_perl_startup);
4090   if (errstr != NULL)
4091     {
4092     fprintf(stderr, "exim: error in perl_startup code: %s\n", errstr);
4093     return EXIT_FAILURE;
4094     }
4095   opt_perl_started = TRUE;
4096   }
4097 #endif /* EXIM_PERL */
4098
4099 /* Log the arguments of the call if the configuration file said so. This is
4100 a debugging feature for finding out what arguments certain MUAs actually use.
4101 Don't attempt it if logging is disabled, or if listing variables or if
4102 verifying/testing addresses or expansions. */
4103
4104 if (((debug_selector & D_any) != 0 || LOGGING(arguments))
4105       && really_exim && !list_options && !checking)
4106   {
4107   int i;
4108   uschar *p = big_buffer;
4109   Ustrcpy(p, "cwd= (failed)");
4110
4111   Ustrncpy(p + 4, initial_cwd, big_buffer_size-5);
4112
4113   while (*p) p++;
4114   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4115   while (*p) p++;
4116   for (i = 0; i < argc; i++)
4117     {
4118     int len = Ustrlen(argv[i]);
4119     const uschar *printing;
4120     uschar *quote;
4121     if (p + len + 8 >= big_buffer + big_buffer_size)
4122       {
4123       Ustrcpy(p, " ...");
4124       log_write(0, LOG_MAIN, "%s", big_buffer);
4125       Ustrcpy(big_buffer, "...");
4126       p = big_buffer + 3;
4127       }
4128     printing = string_printing(argv[i]);
4129     if (printing[0] == 0) quote = US"\""; else
4130       {
4131       const uschar *pp = printing;
4132       quote = US"";
4133       while (*pp != 0) if (isspace(*pp++)) { quote = US"\""; break; }
4134       }
4135     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4136       (p - big_buffer) - 4), printing, quote);
4137     }
4138
4139   if (LOGGING(arguments))
4140     log_write(0, LOG_MAIN, "%s", big_buffer);
4141   else
4142     debug_printf("%s\n", big_buffer);
4143   }
4144
4145 /* Set the working directory to be the top-level spool directory. We don't rely
4146 on this in the code, which always uses fully qualified names, but it's useful
4147 for core dumps etc. Don't complain if it fails - the spool directory might not
4148 be generally accessible and calls with the -C option (and others) have lost
4149 privilege by now. Before the chdir, we try to ensure that the directory exists.
4150 */
4151
4152 if (Uchdir(spool_directory) != 0)
4153   {
4154   int dummy;
4155   (void)directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4156   dummy = /* quieten compiler */ Uchdir(spool_directory);
4157   dummy = dummy;        /* yet more compiler quietening, sigh */
4158   }
4159
4160 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4161 alias file. Exim doesn't have such a concept, but this call is screwed into
4162 Sun's YP makefiles. Handle this by calling a configured script, as the real
4163 user who called Exim. The -oA option can be used to pass an argument to the
4164 script. */
4165
4166 if (bi_option)
4167   {
4168   (void)fclose(config_file);
4169   if (bi_command != NULL)
4170     {
4171     int i = 0;
4172     uschar *argv[3];
4173     argv[i++] = bi_command;
4174     if (alias_arg != NULL) argv[i++] = alias_arg;
4175     argv[i++] = NULL;
4176
4177     setgroups(group_count, group_list);
4178     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4179
4180     DEBUG(D_exec) debug_printf("exec %.256s %.256s\n", argv[0],
4181       (argv[1] == NULL)? US"" : argv[1]);
4182
4183     execv(CS argv[0], (char *const *)argv);
4184     fprintf(stderr, "exim: exec failed: %s\n", strerror(errno));
4185     exit(EXIT_FAILURE);
4186     }
4187   else
4188     {
4189     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4190     exit(EXIT_SUCCESS);
4191     }
4192   }
4193
4194 /* We moved the admin/trusted check to be immediately after reading the
4195 configuration file.  We leave these prints here to ensure that syslog setup,
4196 logfile setup, and so on has already happened. */
4197
4198 if (trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4199 if (admin_user) DEBUG(D_any) debug_printf("admin user\n");
4200
4201 /* Only an admin user may start the daemon or force a queue run in the default
4202 configuration, but the queue run restriction can be relaxed. Only an admin
4203 user may request that a message be returned to its sender forthwith. Only an
4204 admin user may specify a debug level greater than D_v (because it might show
4205 passwords, etc. in lookup queries). Only an admin user may request a queue
4206 count. Only an admin user can use the test interface to scan for email
4207 (because Exim will be in the spool dir and able to look at mails). */
4208
4209 if (!admin_user)
4210   {
4211   BOOL debugset = (debug_selector & ~D_v) != 0;
4212   if (deliver_give_up || daemon_listen || malware_test_file ||
4213      (count_queue && queue_list_requires_admin) ||
4214      (list_queue && queue_list_requires_admin) ||
4215      (queue_interval >= 0 && prod_requires_admin) ||
4216      (debugset && !running_in_test_harness))
4217     {
4218     fprintf(stderr, "exim:%s permission denied\n", debugset? " debugging" : "");
4219     exit(EXIT_FAILURE);
4220     }
4221   }
4222
4223 /* If the real user is not root or the exim uid, the argument for passing
4224 in an open TCP/IP connection for another message is not permitted, nor is
4225 running with the -N option for any delivery action, unless this call to exim is
4226 one that supplied an input message, or we are using a patched exim for
4227 regression testing. */
4228
4229 if (real_uid != root_uid && real_uid != exim_uid &&
4230      (continue_hostname != NULL ||
4231        (dont_deliver &&
4232          (queue_interval >= 0 || daemon_listen || msg_action_arg > 0)
4233        )) && !running_in_test_harness)
4234   {
4235   fprintf(stderr, "exim: Permission denied\n");
4236   return EXIT_FAILURE;
4237   }
4238
4239 /* If the caller is not trusted, certain arguments are ignored when running for
4240 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4241 Note that authority for performing certain actions on messages is tested in the
4242 queue_action() function. */
4243
4244 if (!trusted_caller && !checking)
4245   {
4246   sender_host_name = sender_host_address = interface_address =
4247     sender_ident = received_protocol = NULL;
4248   sender_host_port = interface_port = 0;
4249   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4250   }
4251
4252 /* If a sender host address is set, extract the optional port number off the
4253 end of it and check its syntax. Do the same thing for the interface address.
4254 Exim exits if the syntax is bad. */
4255
4256 else
4257   {
4258   if (sender_host_address != NULL)
4259     sender_host_port = check_port(sender_host_address);
4260   if (interface_address != NULL)
4261     interface_port = check_port(interface_address);
4262   }
4263
4264 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4265 if (flag_G)
4266   {
4267   if (trusted_caller)
4268     {
4269     suppress_local_fixups = suppress_local_fixups_default = TRUE;
4270     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4271     }
4272   else
4273     {
4274     fprintf(stderr, "exim: permission denied (-G requires a trusted user)\n");
4275     return EXIT_FAILURE;
4276     }
4277   }
4278
4279 /* If an SMTP message is being received check to see if the standard input is a
4280 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4281 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4282 barf. */
4283
4284 if (smtp_input)
4285   {
4286   union sockaddr_46 inetd_sock;
4287   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4288   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4289     {
4290     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4291     if (family == AF_INET || family == AF_INET6)
4292       {
4293       union sockaddr_46 interface_sock;
4294       size = sizeof(interface_sock);
4295
4296       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4297         interface_address = host_ntoa(-1, &interface_sock, NULL,
4298           &interface_port);
4299
4300       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4301
4302       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4303         {
4304         is_inetd = TRUE;
4305         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4306           NULL, &sender_host_port);
4307         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4308           "inetd is not supported when mua_wrapper is set");
4309         }
4310       else
4311         {
4312         fprintf(stderr,
4313           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4314         return EXIT_FAILURE;
4315         }
4316       }
4317     }
4318   }
4319
4320 /* If the load average is going to be needed while receiving a message, get it
4321 now for those OS that require the first call to os_getloadavg() to be done as
4322 root. There will be further calls later for each message received. */
4323
4324 #ifdef LOAD_AVG_NEEDS_ROOT
4325 if (receiving_message &&
4326       (queue_only_load >= 0 ||
4327         (is_inetd && smtp_load_reserve >= 0)
4328       ))
4329   {
4330   load_average = OS_GETLOADAVG();
4331   }
4332 #endif
4333
4334 /* The queue_only configuration option can be overridden by -odx on the command
4335 line, except that if queue_only_override is false, queue_only cannot be unset
4336 from the command line. */
4337
4338 if (queue_only_set && (queue_only_override || arg_queue_only))
4339   queue_only = arg_queue_only;
4340
4341 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4342 -or and -os. */
4343
4344 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4345 if (arg_smtp_receive_timeout >= 0)
4346   smtp_receive_timeout = arg_smtp_receive_timeout;
4347
4348 /* If Exim was started with root privilege, unless we have already removed the
4349 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4350 except when starting the daemon or doing some kind of delivery or address
4351 testing (-bt). These are the only cases when root need to be retained. We run
4352 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4353 retained only for starting the daemon. We always do the initgroups() in this
4354 situation (controlled by the TRUE below), in order to be as close as possible
4355 to the state Exim usually runs in. */
4356
4357 if (!unprivileged &&                      /* originally had root AND */
4358     !removed_privilege &&                 /* still got root AND      */
4359     !daemon_listen &&                     /* not starting the daemon */
4360     queue_interval <= 0 &&                /* (either kind of daemon) */
4361       (                                   /*    AND EITHER           */
4362       deliver_drop_privilege ||           /* requested unprivileged  */
4363         (                                 /*       OR                */
4364         queue_interval < 0 &&             /* not running the queue   */
4365         (msg_action_arg < 0 ||            /*       and               */
4366           msg_action != MSG_DELIVER) &&   /* not delivering and      */
4367         (!checking || !address_test_mode) /* not address checking    */
4368    )  ) )
4369   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4370
4371 /* When we are retaining a privileged uid, we still change to the exim gid. */
4372
4373 else
4374   {
4375   int rv;
4376   rv = setgid(exim_gid);
4377   /* Impact of failure is that some stuff might end up with an incorrect group.
4378   We track this for failures from root, since any attempt to change privilege
4379   by root should succeed and failures should be examined.  For non-root,
4380   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4381   no need to complain then. */
4382   if (rv == -1)
4383     if (!(unprivileged || removed_privilege))
4384       {
4385       fprintf(stderr,
4386           "exim: changing group failed: %s\n", strerror(errno));
4387       exit(EXIT_FAILURE);
4388       }
4389     else
4390       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4391           (long int)exim_gid, strerror(errno));
4392   }
4393
4394 /* Handle a request to scan a file for malware */
4395 if (malware_test_file)
4396   {
4397 #ifdef WITH_CONTENT_SCAN
4398   int result;
4399   set_process_info("scanning file for malware");
4400   result = malware_in_file(malware_test_file);
4401   if (result == FAIL)
4402     {
4403     printf("No malware found.\n");
4404     exit(EXIT_SUCCESS);
4405     }
4406   if (result != OK)
4407     {
4408     printf("Malware lookup returned non-okay/fail: %d\n", result);
4409     exit(EXIT_FAILURE);
4410     }
4411   if (malware_name)
4412     printf("Malware found: %s\n", malware_name);
4413   else
4414     printf("Malware scan detected malware of unknown name.\n");
4415 #else
4416   printf("Malware scanning not enabled at compile time.\n");
4417 #endif
4418   exit(EXIT_FAILURE);
4419   }
4420
4421 /* Handle a request to list the delivery queue */
4422
4423 if (list_queue)
4424   {
4425   set_process_info("listing the queue");
4426   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4427   exit(EXIT_SUCCESS);
4428   }
4429
4430 /* Handle a request to count the delivery queue */
4431
4432 if (count_queue)
4433   {
4434   set_process_info("counting the queue");
4435   queue_count();
4436   exit(EXIT_SUCCESS);
4437   }
4438
4439 /* Handle actions on specific messages, except for the force delivery and
4440 message load actions, which are done below. Some actions take a whole list of
4441 message ids, which are known to continue up to the end of the arguments. Others
4442 take a single message id and then operate on the recipients list. */
4443
4444 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4445   {
4446   int yield = EXIT_SUCCESS;
4447   set_process_info("acting on specified messages");
4448
4449   if (!one_msg_action)
4450     {
4451     for (i = msg_action_arg; i < argc; i++)
4452       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4453         yield = EXIT_FAILURE;
4454     }
4455
4456   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4457     recipients_arg)) yield = EXIT_FAILURE;
4458   exit(yield);
4459   }
4460
4461 /* We used to set up here to skip reading the ACL section, on
4462  (msg_action_arg > 0 || (queue_interval == 0 && !daemon_listen)
4463 Now, since the intro of the ${acl } expansion, ACL definitions may be
4464 needed in transports so we lost the optimisation. */
4465
4466 readconf_rest();
4467
4468 /* The configuration data will have been read into POOL_PERM because we won't
4469 ever want to reset back past it. Change the current pool to POOL_MAIN. In fact,
4470 this is just a bit of pedantic tidiness. It wouldn't really matter if the
4471 configuration were read into POOL_MAIN, because we don't do any resets till
4472 later on. However, it seems right, and it does ensure that both pools get used.
4473 */
4474
4475 store_pool = POOL_MAIN;
4476
4477 /* Handle the -brt option. This is for checking out retry configurations.
4478 The next three arguments are a domain name or a complete address, and
4479 optionally two error numbers. All it does is to call the function that
4480 scans the retry configuration data. */
4481
4482 if (test_retry_arg >= 0)
4483   {
4484   retry_config *yield;
4485   int basic_errno = 0;
4486   int more_errno = 0;
4487   uschar *s1, *s2;
4488
4489   if (test_retry_arg >= argc)
4490     {
4491     printf("-brt needs a domain or address argument\n");
4492     exim_exit(EXIT_FAILURE);
4493     }
4494   s1 = argv[test_retry_arg++];
4495   s2 = NULL;
4496
4497   /* If the first argument contains no @ and no . it might be a local user
4498   or it might be a single-component name. Treat as a domain. */
4499
4500   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4501     {
4502     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4503       "being \ntreated as a one-component domain, not as a local part.\n\n",
4504       s1);
4505     }
4506
4507   /* There may be an optional second domain arg. */
4508
4509   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4510     s2 = argv[test_retry_arg++];
4511
4512   /* The final arg is an error name */
4513
4514   if (test_retry_arg < argc)
4515     {
4516     uschar *ss = argv[test_retry_arg];
4517     uschar *error =
4518       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4519     if (error != NULL)
4520       {
4521       printf("%s\n", CS error);
4522       return EXIT_FAILURE;
4523       }
4524
4525     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4526     code > 100 as an error is for matching codes to the decade. Turn them into
4527     a real error code, off the decade. */
4528
4529     if (basic_errno == ERRNO_MAIL4XX ||
4530         basic_errno == ERRNO_RCPT4XX ||
4531         basic_errno == ERRNO_DATA4XX)
4532       {
4533       int code = (more_errno >> 8) & 255;
4534       if (code == 255)
4535         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4536       else if (code > 100)
4537         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4538       }
4539     }
4540
4541   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4542     printf("No retry information found\n");
4543   else
4544     {
4545     retry_rule *r;
4546     more_errno = yield->more_errno;
4547     printf("Retry rule: %s  ", yield->pattern);
4548
4549     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4550       {
4551       printf("quota%s%s  ",
4552         (more_errno > 0)? "_" : "",
4553         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4554       }
4555     else if (yield->basic_errno == ECONNREFUSED)
4556       {
4557       printf("refused%s%s  ",
4558         (more_errno > 0)? "_" : "",
4559         (more_errno == 'M')? "MX" :
4560         (more_errno == 'A')? "A" : "");
4561       }
4562     else if (yield->basic_errno == ETIMEDOUT)
4563       {
4564       printf("timeout");
4565       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4566       more_errno &= 255;
4567       if (more_errno != 0) printf("_%s",
4568         (more_errno == 'M')? "MX" : "A");
4569       printf("  ");
4570       }
4571     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4572       printf("auth_failed  ");
4573     else printf("*  ");
4574
4575     for (r = yield->rules; r; r = r->next)
4576       {
4577       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4578       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4579       if (r->rule == 'G')
4580         {
4581         int x = r->p2;
4582         int f = x % 1000;
4583         int d = 100;
4584         printf(",%d.", x/1000);
4585         do
4586           {
4587           printf("%d", f/d);
4588           f %= d;
4589           d /= 10;
4590           }
4591         while (f != 0);
4592         }
4593       printf("; ");
4594       }
4595
4596     printf("\n");
4597     }
4598   exim_exit(EXIT_SUCCESS);
4599   }
4600
4601 /* Handle a request to list one or more configuration options */
4602 /* If -n was set, we suppress some information */
4603
4604 if (list_options)
4605   {
4606   set_process_info("listing variables");
4607   if (recipients_arg >= argc) readconf_print(US"all", NULL, flag_n);
4608     else for (i = recipients_arg; i < argc; i++)
4609       {
4610       if (i < argc - 1 &&
4611           (Ustrcmp(argv[i], "router") == 0 ||
4612            Ustrcmp(argv[i], "transport") == 0 ||
4613            Ustrcmp(argv[i], "authenticator") == 0 ||
4614            Ustrcmp(argv[i], "macro") == 0 ||
4615            Ustrcmp(argv[i], "environment") == 0))
4616         {
4617         readconf_print(argv[i+1], argv[i], flag_n);
4618         i++;
4619         }
4620       else readconf_print(argv[i], NULL, flag_n);
4621       }
4622   exim_exit(EXIT_SUCCESS);
4623   }
4624
4625 if (list_config)
4626   {
4627   set_process_info("listing config");
4628   readconf_print(US"config", NULL, flag_n);
4629   exim_exit(EXIT_SUCCESS);
4630   }
4631
4632
4633 /* Initialise subsystems as required */
4634 #ifndef DISABLE_DKIM
4635 dkim_exim_init();
4636 #endif
4637 deliver_init();
4638
4639
4640 /* Handle a request to deliver one or more messages that are already on the
4641 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4642 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4643
4644 Delivery of specific messages is typically used for a small number when
4645 prodding by hand (when the option forced_delivery will be set) or when
4646 re-execing to regain root privilege. Each message delivery must happen in a
4647 separate process, so we fork a process for each one, and run them sequentially
4648 so that debugging output doesn't get intertwined, and to avoid spawning too
4649 many processes if a long list is given. However, don't fork for the last one;
4650 this saves a process in the common case when Exim is called to deliver just one
4651 message. */
4652
4653 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4654   {
4655   if (prod_requires_admin && !admin_user)
4656     {
4657     fprintf(stderr, "exim: Permission denied\n");
4658     exim_exit(EXIT_FAILURE);
4659     }
4660   set_process_info("delivering specified messages");
4661   if (deliver_give_up) forced_delivery = deliver_force_thaw = TRUE;
4662   for (i = msg_action_arg; i < argc; i++)
4663     {
4664     int status;
4665     pid_t pid;
4666     if (i == argc - 1)
4667       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4668     else if ((pid = fork()) == 0)
4669       {
4670       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4671       _exit(EXIT_SUCCESS);
4672       }
4673     else if (pid < 0)
4674       {
4675       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4676         strerror(errno));
4677       exim_exit(EXIT_FAILURE);
4678       }
4679     else wait(&status);
4680     }
4681   exim_exit(EXIT_SUCCESS);
4682   }
4683
4684
4685 /* If only a single queue run is requested, without SMTP listening, we can just
4686 turn into a queue runner, with an optional starting message id. */
4687
4688 if (queue_interval == 0 && !daemon_listen)
4689   {
4690   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4691     (start_queue_run_id == NULL)? US"" : US" starting at ",
4692     (start_queue_run_id == NULL)? US"" : start_queue_run_id,
4693     (stop_queue_run_id == NULL)?  US"" : US" stopping at ",
4694     (stop_queue_run_id == NULL)?  US"" : stop_queue_run_id);
4695   if (*queue_name)
4696     set_process_info("running the '%s' queue (single queue run)", queue_name);
4697   else
4698     set_process_info("running the queue (single queue run)");
4699   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4700   exim_exit(EXIT_SUCCESS);
4701   }
4702
4703
4704 /* Find the login name of the real user running this process. This is always
4705 needed when receiving a message, because it is written into the spool file. It
4706 may also be used to construct a from: or a sender: header, and in this case we
4707 need the user's full name as well, so save a copy of it, checked for RFC822
4708 syntax and munged if necessary, if it hasn't previously been set by the -F
4709 argument. We may try to get the passwd entry more than once, in case NIS or
4710 other delays are in evidence. Save the home directory for use in filter testing
4711 (only). */
4712
4713 for (i = 0;;)
4714   {
4715   if ((pw = getpwuid(real_uid)) != NULL)
4716     {
4717     originator_login = string_copy(US pw->pw_name);
4718     originator_home = string_copy(US pw->pw_dir);
4719
4720     /* If user name has not been set by -F, set it from the passwd entry
4721     unless -f has been used to set the sender address by a trusted user. */
4722
4723     if (originator_name == NULL)
4724       {
4725       if (sender_address == NULL ||
4726            (!trusted_caller && filter_test == FTEST_NONE))
4727         {
4728         uschar *name = US pw->pw_gecos;
4729         uschar *amp = Ustrchr(name, '&');
4730         uschar buffer[256];
4731
4732         /* Most Unix specify that a '&' character in the gecos field is
4733         replaced by a copy of the login name, and some even specify that
4734         the first character should be upper cased, so that's what we do. */
4735
4736         if (amp != NULL)
4737           {
4738           int loffset;
4739           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
4740             amp - name, name, &loffset, originator_login, amp + 1);
4741           buffer[loffset] = toupper(buffer[loffset]);
4742           name = buffer;
4743           }
4744
4745         /* If a pattern for matching the gecos field was supplied, apply
4746         it and then expand the name string. */
4747
4748         if (gecos_pattern != NULL && gecos_name != NULL)
4749           {
4750           const pcre *re;
4751           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
4752
4753           if (regex_match_and_setup(re, name, 0, -1))
4754             {
4755             uschar *new_name = expand_string(gecos_name);
4756             expand_nmax = -1;
4757             if (new_name != NULL)
4758               {
4759               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
4760                 "gecos field \"%s\"\n", new_name, name);
4761               name = new_name;
4762               }
4763             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
4764               "\"%s\": %s\n", gecos_name, expand_string_message);
4765             }
4766           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
4767             "gecos field \"%s\"\n", gecos_pattern, name);
4768           store_free((void *)re);
4769           }
4770         originator_name = string_copy(name);
4771         }
4772
4773       /* A trusted caller has used -f but not -F */
4774
4775       else originator_name = US"";
4776       }
4777
4778     /* Break the retry loop */
4779
4780     break;
4781     }
4782
4783   if (++i > finduser_retries) break;
4784   sleep(1);
4785   }
4786
4787 /* If we cannot get a user login, log the incident and give up, unless the
4788 configuration specifies something to use. When running in the test harness,
4789 any setting of unknown_login overrides the actual name. */
4790
4791 if (originator_login == NULL || running_in_test_harness)
4792   {
4793   if (unknown_login != NULL)
4794     {
4795     originator_login = expand_string(unknown_login);
4796     if (originator_name == NULL && unknown_username != NULL)
4797       originator_name = expand_string(unknown_username);
4798     if (originator_name == NULL) originator_name = US"";
4799     }
4800   if (originator_login == NULL)
4801     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
4802       (int)real_uid);
4803   }
4804
4805 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
4806 RFC822 address.*/
4807
4808 originator_name = string_copy(parse_fix_phrase(originator_name,
4809   Ustrlen(originator_name), big_buffer, big_buffer_size));
4810
4811 /* If a message is created by this call of Exim, the uid/gid of its originator
4812 are those of the caller. These values are overridden if an existing message is
4813 read in from the spool. */
4814
4815 originator_uid = real_uid;
4816 originator_gid = real_gid;
4817
4818 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
4819   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
4820
4821 /* Run in daemon and/or queue-running mode. The function daemon_go() never
4822 returns. We leave this till here so that the originator_ fields are available
4823 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
4824 mode. */
4825
4826 if (daemon_listen || inetd_wait_mode || queue_interval > 0)
4827   {
4828   if (mua_wrapper)
4829     {
4830     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
4831     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
4832       "mua_wrapper is set");
4833     }
4834   daemon_go();
4835   }
4836
4837 /* If the sender ident has not been set (by a trusted caller) set it to
4838 the caller. This will get overwritten below for an inetd call. If a trusted
4839 caller has set it empty, unset it. */
4840
4841 if (sender_ident == NULL) sender_ident = originator_login;
4842   else if (sender_ident[0] == 0) sender_ident = NULL;
4843
4844 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
4845 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
4846 originator_* variables set. */
4847
4848 if (test_rewrite_arg >= 0)
4849   {
4850   really_exim = FALSE;
4851   if (test_rewrite_arg >= argc)
4852     {
4853     printf("-brw needs an address argument\n");
4854     exim_exit(EXIT_FAILURE);
4855     }
4856   rewrite_test(argv[test_rewrite_arg]);
4857   exim_exit(EXIT_SUCCESS);
4858   }
4859
4860 /* A locally-supplied message is considered to be coming from a local user
4861 unless a trusted caller supplies a sender address with -f, or is passing in the
4862 message via SMTP (inetd invocation or otherwise). */
4863
4864 if ((sender_address == NULL && !smtp_input) ||
4865     (!trusted_caller && filter_test == FTEST_NONE))
4866   {
4867   sender_local = TRUE;
4868
4869   /* A trusted caller can supply authenticated_sender and authenticated_id
4870   via -oMas and -oMai and if so, they will already be set. Otherwise, force
4871   defaults except when host checking. */
4872
4873   if (authenticated_sender == NULL && !host_checking)
4874     authenticated_sender = string_sprintf("%s@%s", originator_login,
4875       qualify_domain_sender);
4876   if (authenticated_id == NULL && !host_checking)
4877     authenticated_id = originator_login;
4878   }
4879
4880 /* Trusted callers are always permitted to specify the sender address.
4881 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
4882 is specified is the empty address. However, if a trusted caller does not
4883 specify a sender address for SMTP input, we leave sender_address unset. This
4884 causes the MAIL commands to be honoured. */
4885
4886 if ((!smtp_input && sender_address == NULL) ||
4887     !receive_check_set_sender(sender_address))
4888   {
4889   /* Either the caller is not permitted to set a general sender, or this is
4890   non-SMTP input and the trusted caller has not set a sender. If there is no
4891   sender, or if a sender other than <> is set, override with the originator's
4892   login (which will get qualified below), except when checking things. */
4893
4894   if (sender_address == NULL             /* No sender_address set */
4895        ||                                /*         OR            */
4896        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
4897        !checking))                       /* Not running tests, including filter tests */
4898     {
4899     sender_address = originator_login;
4900     sender_address_forced = FALSE;
4901     sender_address_domain = 0;
4902     }
4903   }
4904
4905 /* Remember whether an untrusted caller set the sender address */
4906
4907 sender_set_untrusted = sender_address != originator_login && !trusted_caller;
4908
4909 /* Ensure that the sender address is fully qualified unless it is the empty
4910 address, which indicates an error message, or doesn't exist (root caller, smtp
4911 interface, no -f argument). */
4912
4913 if (sender_address != NULL && sender_address[0] != 0 &&
4914     sender_address_domain == 0)
4915   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
4916     qualify_domain_sender);
4917
4918 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
4919
4920 /* Handle a request to verify a list of addresses, or test them for delivery.
4921 This must follow the setting of the sender address, since routers can be
4922 predicated upon the sender. If no arguments are given, read addresses from
4923 stdin. Set debug_level to at least D_v to get full output for address testing.
4924 */
4925
4926 if (verify_address_mode || address_test_mode)
4927   {
4928   int exit_value = 0;
4929   int flags = vopt_qualify;
4930
4931   if (verify_address_mode)
4932     {
4933     if (!verify_as_sender) flags |= vopt_is_recipient;
4934     DEBUG(D_verify) debug_print_ids(US"Verifying:");
4935     }
4936
4937   else
4938     {
4939     flags |= vopt_is_recipient;
4940     debug_selector |= D_v;
4941     debug_file = stderr;
4942     debug_fd = fileno(debug_file);
4943     DEBUG(D_verify) debug_print_ids(US"Address testing:");
4944     }
4945
4946   if (recipients_arg < argc)
4947     {
4948     while (recipients_arg < argc)
4949       {
4950       uschar *s = argv[recipients_arg++];
4951       while (*s != 0)
4952         {
4953         BOOL finished = FALSE;
4954         uschar *ss = parse_find_address_end(s, FALSE);
4955         if (*ss == ',') *ss = 0; else finished = TRUE;
4956         test_address(s, flags, &exit_value);
4957         s = ss;
4958         if (!finished)
4959           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
4960         }
4961       }
4962     }
4963
4964   else for (;;)
4965     {
4966     uschar *s = get_stdinput(NULL, NULL);
4967     if (s == NULL) break;
4968     test_address(s, flags, &exit_value);
4969     }
4970
4971   route_tidyup();
4972   exim_exit(exit_value);
4973   }
4974
4975 /* Handle expansion checking. Either expand items on the command line, or read
4976 from stdin if there aren't any. If -Mset was specified, load the message so
4977 that its variables can be used, but restrict this facility to admin users.
4978 Otherwise, if -bem was used, read a message from stdin. */
4979
4980 if (expansion_test)
4981   {
4982   dns_init(FALSE, FALSE, FALSE);
4983   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
4984     {
4985     uschar spoolname[256];  /* Not big_buffer; used in spool_read_header() */
4986     if (!admin_user)
4987       {
4988       fprintf(stderr, "exim: permission denied\n");
4989       exit(EXIT_FAILURE);
4990       }
4991     message_id = argv[msg_action_arg];
4992     (void)string_format(spoolname, sizeof(spoolname), "%s-H", message_id);
4993     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
4994       printf ("Failed to load message datafile %s\n", message_id);
4995     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
4996       printf ("Failed to load message %s\n", message_id);
4997     }
4998
4999   /* Read a test message from a file. We fudge it up to be on stdin, saving
5000   stdin itself for later reading of expansion strings. */
5001
5002   else if (expansion_test_message != NULL)
5003     {
5004     int save_stdin = dup(0);
5005     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
5006     if (fd < 0)
5007       {
5008       fprintf(stderr, "exim: failed to open %s: %s\n", expansion_test_message,
5009         strerror(errno));
5010       return EXIT_FAILURE;
5011       }
5012     (void) dup2(fd, 0);
5013     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5014     message_ended = END_NOTENDED;
5015     read_message_body(receive_msg(extract_recipients));
5016     message_linecount += body_linecount;
5017     (void)dup2(save_stdin, 0);
5018     (void)close(save_stdin);
5019     clearerr(stdin);               /* Required by Darwin */
5020     }
5021
5022   /* Allow $recipients for this testing */
5023
5024   enable_dollar_recipients = TRUE;
5025
5026   /* Expand command line items */
5027
5028   if (recipients_arg < argc)
5029     {
5030     while (recipients_arg < argc)
5031       {
5032       uschar *s = argv[recipients_arg++];
5033       uschar *ss = expand_string(s);
5034       if (ss == NULL) printf ("Failed: %s\n", expand_string_message);
5035       else printf("%s\n", CS ss);
5036       }
5037     }
5038
5039   /* Read stdin */
5040
5041   else
5042     {
5043     char *(*fn_readline)(const char *) = NULL;
5044     void (*fn_addhist)(const char *) = NULL;
5045
5046     #ifdef USE_READLINE
5047     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5048     #endif
5049
5050     for (;;)
5051       {
5052       uschar *ss;
5053       uschar *source = get_stdinput(fn_readline, fn_addhist);
5054       if (source == NULL) break;
5055       ss = expand_string(source);
5056       if (ss == NULL)
5057         printf ("Failed: %s\n", expand_string_message);
5058       else printf("%s\n", CS ss);
5059       }
5060
5061     #ifdef USE_READLINE
5062     if (dlhandle != NULL) dlclose(dlhandle);
5063     #endif
5064     }
5065
5066   /* The data file will be open after -Mset */
5067
5068   if (deliver_datafile >= 0)
5069     {
5070     (void)close(deliver_datafile);
5071     deliver_datafile = -1;
5072     }
5073
5074   exim_exit(EXIT_SUCCESS);
5075   }
5076
5077
5078 /* The active host name is normally the primary host name, but it can be varied
5079 for hosts that want to play several parts at once. We need to ensure that it is
5080 set for host checking, and for receiving messages. */
5081
5082 smtp_active_hostname = primary_hostname;
5083 if (raw_active_hostname != NULL)
5084   {
5085   uschar *nah = expand_string(raw_active_hostname);
5086   if (nah == NULL)
5087     {
5088     if (!expand_string_forcedfail)
5089       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5090         "(smtp_active_hostname): %s", raw_active_hostname,
5091         expand_string_message);
5092     }
5093   else if (nah[0] != 0) smtp_active_hostname = nah;
5094   }
5095
5096 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5097 given IP address so that the blocking and relay configuration can be tested.
5098 Unless a sender_ident was set by -oMt, we discard it (the default is the
5099 caller's login name). An RFC 1413 call is made only if we are running in the
5100 test harness and an incoming interface and both ports are specified, because
5101 there is no TCP/IP call to find the ident for. */
5102
5103 if (host_checking)
5104   {
5105   int x[4];
5106   int size;
5107
5108   if (!sender_ident_set)
5109     {
5110     sender_ident = NULL;
5111     if (running_in_test_harness && sender_host_port != 0 &&
5112         interface_address != NULL && interface_port != 0)
5113       verify_get_ident(1413);
5114     }
5115
5116   /* In case the given address is a non-canonical IPv6 address, canonicalize
5117   it. The code works for both IPv4 and IPv6, as it happens. */
5118
5119   size = host_aton(sender_host_address, x);
5120   sender_host_address = store_get(48);  /* large enough for full IPv6 */
5121   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5122
5123   /* Now set up for testing */
5124
5125   host_build_sender_fullhost();
5126   smtp_input = TRUE;
5127   smtp_in = stdin;
5128   smtp_out = stdout;
5129   sender_local = FALSE;
5130   sender_host_notsocket = TRUE;
5131   debug_file = stderr;
5132   debug_fd = fileno(debug_file);
5133   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5134     "**** but without any ident (RFC 1413) callback.\n"
5135     "**** This is not for real!\n\n",
5136       sender_host_address);
5137
5138   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5139   if (verify_check_host(&hosts_connection_nolog) == OK)
5140     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5141   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5142
5143   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5144   because a log line has already been written for all its failure exists
5145   (usually "connection refused: <reason>") and writing another one is
5146   unnecessary clutter. */
5147
5148   if (smtp_start_session())
5149     {
5150     for (reset_point = store_get(0); ; store_reset(reset_point))
5151       {
5152       if (smtp_setup_msg() <= 0) break;
5153       if (!receive_msg(FALSE)) break;
5154
5155       return_path = sender_address = NULL;
5156       dnslist_domain = dnslist_matched = NULL;
5157 #ifndef DISABLE_DKIM
5158       dkim_cur_signer = NULL;
5159 #endif
5160       acl_var_m = NULL;
5161       deliver_localpart_orig = NULL;
5162       deliver_domain_orig = NULL;
5163       callout_address = sending_ip_address = NULL;
5164       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5165       }
5166     smtp_log_no_mail();
5167     }
5168   exim_exit(EXIT_SUCCESS);
5169   }
5170
5171
5172 /* Arrange for message reception if recipients or SMTP were specified;
5173 otherwise complain unless a version print (-bV) happened or this is a filter
5174 verification test or info dump.
5175 In the former case, show the configuration file name. */
5176
5177 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5178   {
5179   if (version_printed)
5180     {
5181     printf("Configuration file is %s\n", config_main_filename);
5182     return EXIT_SUCCESS;
5183     }
5184
5185   if (info_flag != CMDINFO_NONE)
5186     {
5187     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5188     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5189     }
5190
5191   if (filter_test == FTEST_NONE)
5192     exim_usage(called_as);
5193   }
5194
5195
5196 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5197 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5198 that we are not called from inetd, because that is rejected above. The
5199 following configuration settings are forced here:
5200
5201   (1) Synchronous delivery (-odi)
5202   (2) Errors to stderr (-oep == -oeq)
5203   (3) No parallel remote delivery
5204   (4) Unprivileged delivery
5205
5206 We don't force overall queueing options because there are several of them;
5207 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5208 to override any SMTP queueing. */
5209
5210 if (mua_wrapper)
5211   {
5212   synchronous_delivery = TRUE;
5213   arg_error_handling = ERRORS_STDERR;
5214   remote_max_parallel = 1;
5215   deliver_drop_privilege = TRUE;
5216   queue_smtp = FALSE;
5217   queue_smtp_domains = NULL;
5218 #ifdef SUPPORT_I18N
5219   message_utf8_downconvert = -1;        /* convert-if-needed */
5220 #endif
5221   }
5222
5223
5224 /* Prepare to accept one or more new messages on the standard input. When a
5225 message has been read, its id is returned in message_id[]. If doing immediate
5226 delivery, we fork a delivery process for each received message, except for the
5227 last one, where we can save a process switch.
5228
5229 It is only in non-smtp mode that error_handling is allowed to be changed from
5230 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5231 sendmail error modes other than -oem ever actually used? Later: yes.) */
5232
5233 if (!smtp_input) error_handling = arg_error_handling;
5234
5235 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5236 logging being sent down the socket and make an identd call to get the
5237 sender_ident. */
5238
5239 else if (is_inetd)
5240   {
5241   (void)fclose(stderr);
5242   exim_nullstd();                       /* Re-open to /dev/null */
5243   verify_get_ident(IDENT_PORT);
5244   host_build_sender_fullhost();
5245   set_process_info("handling incoming connection from %s via inetd",
5246     sender_fullhost);
5247   }
5248
5249 /* If the sender host address has been set, build sender_fullhost if it hasn't
5250 already been done (which it will have been for inetd). This caters for the
5251 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5252 so that the test for IP options is skipped for -bs input. */
5253
5254 if (sender_host_address != NULL && sender_fullhost == NULL)
5255   {
5256   host_build_sender_fullhost();
5257   set_process_info("handling incoming connection from %s via -oMa",
5258     sender_fullhost);
5259   sender_host_notsocket = TRUE;
5260   }
5261
5262 /* Otherwise, set the sender host as unknown except for inetd calls. This
5263 prevents host checking in the case of -bs not from inetd and also for -bS. */
5264
5265 else if (!is_inetd) sender_host_unknown = TRUE;
5266
5267 /* If stdout does not exist, then dup stdin to stdout. This can happen
5268 if exim is started from inetd. In this case fd 0 will be set to the socket,
5269 but fd 1 will not be set. This also happens for passed SMTP channels. */
5270
5271 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5272
5273 /* Set up the incoming protocol name and the state of the program. Root is
5274 allowed to force received protocol via the -oMr option above. If we have come
5275 via inetd, the process info has already been set up. We don't set
5276 received_protocol here for smtp input, as it varies according to
5277 batch/HELO/EHLO/AUTH/TLS. */
5278
5279 if (smtp_input)
5280   {
5281   if (!is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5282     smtp_batched_input? "batched " : "",
5283     (sender_address!= NULL)? sender_address : originator_login);
5284   }
5285 else
5286   {
5287   int old_pool = store_pool;
5288   store_pool = POOL_PERM;
5289   if (!received_protocol)
5290     received_protocol = string_sprintf("local%s", called_as);
5291   store_pool = old_pool;
5292   set_process_info("accepting a local non-SMTP message from <%s>",
5293     sender_address);
5294   }
5295
5296 /* Initialize the session_local_queue-only flag (this will be ignored if
5297 mua_wrapper is set) */
5298
5299 queue_check_only();
5300 session_local_queue_only = queue_only;
5301
5302 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5303 the spool if so configured. On failure, we must not attempt to send an error
5304 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5305 error code is given.) */
5306
5307 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5308   {
5309   fprintf(stderr, "exim: insufficient disk space\n");
5310   return EXIT_FAILURE;
5311   }
5312
5313 /* If this is smtp input of any kind, real or batched, handle the start of the
5314 SMTP session.
5315
5316 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5317 because a log line has already been written for all its failure exists
5318 (usually "connection refused: <reason>") and writing another one is
5319 unnecessary clutter. */
5320
5321 if (smtp_input)
5322   {
5323   smtp_in = stdin;
5324   smtp_out = stdout;
5325   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5326   if (verify_check_host(&hosts_connection_nolog) == OK)
5327     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5328   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5329   if (!smtp_start_session())
5330     {
5331     mac_smtp_fflush();
5332     exim_exit(EXIT_SUCCESS);
5333     }
5334   }
5335
5336 /* Otherwise, set up the input size limit here. */
5337
5338 else
5339   {
5340   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5341   if (expand_string_message)
5342     if (thismessage_size_limit == -1)
5343       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5344         "message_size_limit: %s", expand_string_message);
5345     else
5346       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5347         "message_size_limit: %s", expand_string_message);
5348   }
5349
5350 /* Loop for several messages when reading SMTP input. If we fork any child
5351 processes, we don't want to wait for them unless synchronous delivery is
5352 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5353 same as SIG_DFL, despite the fact that documentation often lists the default as
5354 "ignore". This is a confusing area. This is what I know:
5355
5356 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5357 processes that complete simply to go away without ever becoming defunct. You
5358 can't then wait for them - but we don't want to wait for them in the
5359 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5360 happen for all OS (e.g. *BSD is different).
5361
5362 But that's not the end of the story. Some (many? all?) systems have the
5363 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5364 has by default, so it seems that the difference is merely one of default
5365 (compare restarting vs non-restarting signals).
5366
5367 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5368 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5369 of the loop below. Paranoia rules.
5370
5371 February 2003: That's *still* not the end of the story. There are now versions
5372 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5373 process then calls waitpid(), a grumble is written to the system log, because
5374 this is logically inconsistent. In other words, it doesn't like the paranoia.
5375 As a consequence of this, the waitpid() below is now excluded if we are sure
5376 that SIG_IGN works. */
5377
5378 if (!synchronous_delivery)
5379   {
5380   #ifdef SA_NOCLDWAIT
5381   struct sigaction act;
5382   act.sa_handler = SIG_IGN;
5383   sigemptyset(&(act.sa_mask));
5384   act.sa_flags = SA_NOCLDWAIT;
5385   sigaction(SIGCHLD, &act, NULL);
5386   #else
5387   signal(SIGCHLD, SIG_IGN);
5388   #endif
5389   }
5390
5391 /* Save the current store pool point, for resetting at the start of
5392 each message, and save the real sender address, if any. */
5393
5394 reset_point = store_get(0);
5395 real_sender_address = sender_address;
5396
5397 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5398 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5399 collapsed). */
5400
5401 while (more)
5402   {
5403   message_id[0] = 0;
5404
5405   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5406   input and build the recipients list, before calling receive_msg() to read the
5407   message proper. Whatever sender address is given in the SMTP transaction is
5408   often ignored for local senders - we use the actual sender, which is normally
5409   either the underlying user running this process or a -f argument provided by
5410   a trusted caller. It is saved in real_sender_address. The test for whether to
5411   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5412
5413   if (smtp_input)
5414     {
5415     int rc;
5416     if ((rc = smtp_setup_msg()) > 0)
5417       {
5418       if (real_sender_address != NULL &&
5419           !receive_check_set_sender(sender_address))
5420         {
5421         sender_address = raw_sender = real_sender_address;
5422         sender_address_unrewritten = NULL;
5423         }
5424
5425       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5426       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5427       the very end. The result of the ACL is ignored (as for other non-SMTP
5428       messages). It is run for its potential side effects. */
5429
5430       if (smtp_batched_input && acl_not_smtp_start != NULL)
5431         {
5432         uschar *user_msg, *log_msg;
5433         enable_dollar_recipients = TRUE;
5434         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5435           &user_msg, &log_msg);
5436         enable_dollar_recipients = FALSE;
5437         }
5438
5439       /* Now get the data for the message */
5440
5441       more = receive_msg(extract_recipients);
5442       if (message_id[0] == 0)
5443         {
5444         cancel_cutthrough_connection(TRUE, US"receive dropped");
5445         if (more) goto moreloop;
5446         smtp_log_no_mail();               /* Log no mail if configured */
5447         exim_exit(EXIT_FAILURE);
5448         }
5449       }
5450     else
5451       {
5452       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5453       smtp_log_no_mail();               /* Log no mail if configured */
5454       exim_exit((rc == 0)? EXIT_SUCCESS : EXIT_FAILURE);
5455       }
5456     }
5457
5458   /* In the non-SMTP case, we have all the information from the command
5459   line, but must process it in case it is in the more general RFC822
5460   format, and in any case, to detect syntax errors. Also, it appears that
5461   the use of comma-separated lists as single arguments is common, so we
5462   had better support them. */
5463
5464   else
5465     {
5466     int i;
5467     int rcount = 0;
5468     int count = argc - recipients_arg;
5469     uschar **list = argv + recipients_arg;
5470
5471     /* These options cannot be changed dynamically for non-SMTP messages */
5472
5473     active_local_sender_retain = local_sender_retain;
5474     active_local_from_check = local_from_check;
5475
5476     /* Save before any rewriting */
5477
5478     raw_sender = string_copy(sender_address);
5479
5480     /* Loop for each argument */
5481
5482     for (i = 0; i < count; i++)
5483       {
5484       int start, end, domain;
5485       uschar *errmess;
5486       uschar *s = list[i];
5487
5488       /* Loop for each comma-separated address */
5489
5490       while (*s != 0)
5491         {
5492         BOOL finished = FALSE;
5493         uschar *recipient;
5494         uschar *ss = parse_find_address_end(s, FALSE);
5495
5496         if (*ss == ',') *ss = 0; else finished = TRUE;
5497
5498         /* Check max recipients - if -t was used, these aren't recipients */
5499
5500         if (recipients_max > 0 && ++rcount > recipients_max &&
5501             !extract_recipients)
5502           if (error_handling == ERRORS_STDERR)
5503             {
5504             fprintf(stderr, "exim: too many recipients\n");
5505             exim_exit(EXIT_FAILURE);
5506             }
5507           else
5508             {
5509             return
5510               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5511                 errors_sender_rc : EXIT_FAILURE;
5512             }
5513
5514 #ifdef SUPPORT_I18N
5515         {
5516         BOOL b = allow_utf8_domains;
5517         allow_utf8_domains = TRUE;
5518 #endif
5519         recipient =
5520           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5521
5522 #ifdef SUPPORT_I18N
5523         if (string_is_utf8(recipient))
5524           message_smtputf8 = TRUE;
5525         else
5526           allow_utf8_domains = b;
5527         }
5528 #endif
5529         if (domain == 0 && !allow_unqualified_recipient)
5530           {
5531           recipient = NULL;
5532           errmess = US"unqualified recipient address not allowed";
5533           }
5534
5535         if (recipient == NULL)
5536           {
5537           if (error_handling == ERRORS_STDERR)
5538             {
5539             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5540               string_printing(list[i]), errmess);
5541             exim_exit(EXIT_FAILURE);
5542             }
5543           else
5544             {
5545             error_block eblock;
5546             eblock.next = NULL;
5547             eblock.text1 = string_printing(list[i]);
5548             eblock.text2 = errmess;
5549             return
5550               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5551                 errors_sender_rc : EXIT_FAILURE;
5552             }
5553           }
5554
5555         receive_add_recipient(recipient, -1);
5556         s = ss;
5557         if (!finished)
5558           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5559         }
5560       }
5561
5562     /* Show the recipients when debugging */
5563
5564     DEBUG(D_receive)
5565       {
5566       int i;
5567       if (sender_address != NULL) debug_printf("Sender: %s\n", sender_address);
5568       if (recipients_list != NULL)
5569         {
5570         debug_printf("Recipients:\n");
5571         for (i = 0; i < recipients_count; i++)
5572           debug_printf("  %s\n", recipients_list[i].address);
5573         }
5574       }
5575
5576     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5577     ignored; rejecting here would just add complication, and it can just as
5578     well be done later. Allow $recipients to be visible in the ACL. */
5579
5580     if (acl_not_smtp_start)
5581       {
5582       uschar *user_msg, *log_msg;
5583       enable_dollar_recipients = TRUE;
5584       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5585         &user_msg, &log_msg);
5586       enable_dollar_recipients = FALSE;
5587       }
5588
5589     /* Pause for a while waiting for input.  If none received in that time,
5590     close the logfile, if we had one open; then if we wait for a long-running
5591     datasource (months, in one use-case) log rotation will not leave us holding
5592     the file copy. */
5593
5594     if (!receive_timeout)
5595       {
5596       struct timeval t = { .tv_sec = 30*60, .tv_usec = 0 };     /* 30 minutes */
5597       fd_set r;
5598
5599       FD_ZERO(&r); FD_SET(0, &r);
5600       if (select(1, &r, NULL, NULL, &t) == 0) mainlog_close();
5601       }
5602
5603     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5604     will just read the headers for the message, and not write anything onto the
5605     spool. */
5606
5607     message_ended = END_NOTENDED;
5608     more = receive_msg(extract_recipients);
5609
5610     /* more is always FALSE here (not SMTP message) when reading a message
5611     for real; when reading the headers of a message for filter testing,
5612     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5613
5614     if (message_id[0] == 0) exim_exit(EXIT_FAILURE);
5615     }  /* Non-SMTP message reception */
5616
5617   /* If this is a filter testing run, there are headers in store, but
5618   no message on the spool. Run the filtering code in testing mode, setting
5619   the domain to the qualify domain and the local part to the current user,
5620   unless they have been set by options. The prefix and suffix are left unset
5621   unless specified. The the return path is set to to the sender unless it has
5622   already been set from a return-path header in the message. */
5623
5624   if (filter_test != FTEST_NONE)
5625     {
5626     deliver_domain = (ftest_domain != NULL)?
5627       ftest_domain : qualify_domain_recipient;
5628     deliver_domain_orig = deliver_domain;
5629     deliver_localpart = (ftest_localpart != NULL)?
5630       ftest_localpart : originator_login;
5631     deliver_localpart_orig = deliver_localpart;
5632     deliver_localpart_prefix = ftest_prefix;
5633     deliver_localpart_suffix = ftest_suffix;
5634     deliver_home = originator_home;
5635
5636     if (return_path == NULL)
5637       {
5638       printf("Return-path copied from sender\n");
5639       return_path = string_copy(sender_address);
5640       }
5641     else
5642       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5643     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5644
5645     receive_add_recipient(
5646       string_sprintf("%s%s%s@%s",
5647         (ftest_prefix == NULL)? US"" : ftest_prefix,
5648         deliver_localpart,
5649         (ftest_suffix == NULL)? US"" : ftest_suffix,
5650         deliver_domain), -1);
5651
5652     printf("Recipient   = %s\n", recipients_list[0].address);
5653     if (ftest_prefix != NULL) printf("Prefix    = %s\n", ftest_prefix);
5654     if (ftest_suffix != NULL) printf("Suffix    = %s\n", ftest_suffix);
5655
5656     if (chdir("/"))   /* Get away from wherever the user is running this from */
5657       {
5658       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5659       exim_exit(EXIT_FAILURE);
5660       }
5661
5662     /* Now we run either a system filter test, or a user filter test, or both.
5663     In the latter case, headers added by the system filter will persist and be
5664     available to the user filter. We need to copy the filter variables
5665     explicitly. */
5666
5667     if ((filter_test & FTEST_SYSTEM) != 0)
5668       {
5669       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5670         exim_exit(EXIT_FAILURE);
5671       }
5672
5673     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5674
5675     if ((filter_test & FTEST_USER) != 0)
5676       {
5677       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5678         exim_exit(EXIT_FAILURE);
5679       }
5680
5681     exim_exit(EXIT_SUCCESS);
5682     }
5683
5684   /* Else act on the result of message reception. We should not get here unless
5685   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5686   will be TRUE. If it is not, check on the number of messages received in this
5687   connection. */
5688
5689   if (!session_local_queue_only &&
5690       smtp_accept_queue_per_connection > 0 &&
5691       receive_messagecount > smtp_accept_queue_per_connection)
5692     {
5693     session_local_queue_only = TRUE;
5694     queue_only_reason = 2;
5695     }
5696
5697   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5698   and queue_only_load is set, check that the load average is below it. If it is
5699   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5700   default), we put the whole session into queue_only mode. It then remains this
5701   way for any subsequent messages on the same SMTP connection. This is a
5702   deliberate choice; even though the load average may fall, it doesn't seem
5703   right to deliver later messages on the same call when not delivering earlier
5704   ones. However, there are odd cases where this is not wanted, so this can be
5705   changed by setting queue_only_load_latch false. */
5706
5707   local_queue_only = session_local_queue_only;
5708   if (!local_queue_only && queue_only_load >= 0)
5709     {
5710     local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load;
5711     if (local_queue_only)
5712       {
5713       queue_only_reason = 3;
5714       if (queue_only_load_latch) session_local_queue_only = TRUE;
5715       }
5716     }
5717
5718   /* If running as an MUA wrapper, all queueing options and freezing options
5719   are ignored. */
5720
5721   if (mua_wrapper)
5722     local_queue_only = queue_only_policy = deliver_freeze = FALSE;
5723
5724   /* Log the queueing here, when it will get a message id attached, but
5725   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
5726   connections). */
5727
5728   if (local_queue_only)
5729     {
5730     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5731     switch(queue_only_reason)
5732       {
5733       case 2:
5734         log_write(L_delay_delivery,
5735                 LOG_MAIN, "no immediate delivery: more than %d messages "
5736           "received in one connection", smtp_accept_queue_per_connection);
5737         break;
5738
5739       case 3:
5740         log_write(L_delay_delivery,
5741                 LOG_MAIN, "no immediate delivery: load average %.2f",
5742                 (double)load_average/1000.0);
5743       break;
5744       }
5745     }
5746
5747   else if (queue_only_policy || deliver_freeze)
5748     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5749
5750   /* Else do the delivery unless the ACL or local_scan() called for queue only
5751   or froze the message. Always deliver in a separate process. A fork failure is
5752   not a disaster, as the delivery will eventually happen on a subsequent queue
5753   run. The search cache must be tidied before the fork, as the parent will
5754   do it before exiting. The child will trigger a lookup failure and
5755   thereby defer the delivery if it tries to use (for example) a cached ldap
5756   connection that the parent has called unbind on. */
5757
5758   else
5759     {
5760     pid_t pid;
5761     search_tidyup();
5762
5763     if ((pid = fork()) == 0)
5764       {
5765       int rc;
5766       close_unwanted();      /* Close unwanted file descriptors and TLS */
5767       exim_nullstd();        /* Ensure std{in,out,err} exist */
5768
5769       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
5770       mode, deliver_drop_privilege is forced TRUE). */
5771
5772       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
5773         {
5774         delivery_re_exec(CEE_EXEC_EXIT);
5775         /* Control does not return here. */
5776         }
5777
5778       /* No need to re-exec */
5779
5780       rc = deliver_message(message_id, FALSE, FALSE);
5781       search_tidyup();
5782       _exit((!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED)?
5783         EXIT_SUCCESS : EXIT_FAILURE);
5784       }
5785
5786     if (pid < 0)
5787       {
5788       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
5789       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
5790         "process: %s", strerror(errno));
5791       }
5792     else
5793       {
5794       release_cutthrough_connection(US"msg passed for delivery");
5795
5796       /* In the parent, wait if synchronous delivery is required. This will
5797       always be the case in MUA wrapper mode. */
5798
5799       if (synchronous_delivery)
5800         {
5801         int status;
5802         while (wait(&status) != pid);
5803         if ((status & 0x00ff) != 0)
5804           log_write(0, LOG_MAIN|LOG_PANIC,
5805             "process %d crashed with signal %d while delivering %s",
5806             (int)pid, status & 0x00ff, message_id);
5807         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
5808         }
5809       }
5810     }
5811
5812   /* The loop will repeat if more is TRUE. If we do not know know that the OS
5813   automatically reaps children (see comments above the loop), clear away any
5814   finished subprocesses here, in case there are lots of messages coming in
5815   from the same source. */
5816
5817   #ifndef SIG_IGN_WORKS
5818   while (waitpid(-1, NULL, WNOHANG) > 0);
5819   #endif
5820
5821 moreloop:
5822   return_path = sender_address = NULL;
5823   authenticated_sender = NULL;
5824   deliver_localpart_orig = NULL;
5825   deliver_domain_orig = NULL;
5826   deliver_host = deliver_host_address = NULL;
5827   dnslist_domain = dnslist_matched = NULL;
5828 #ifdef WITH_CONTENT_SCAN
5829   malware_name = NULL;
5830 #endif
5831   callout_address = NULL;
5832   sending_ip_address = NULL;
5833   acl_var_m = NULL;
5834   { int i; for(i=0; i<REGEX_VARS; i++) regex_vars[i] = NULL; }
5835
5836   store_reset(reset_point);
5837   }
5838
5839 exim_exit(EXIT_SUCCESS);   /* Never returns */
5840 return 0;                  /* To stop compiler warning */
5841 }
5842
5843 /*************************************************
5844 *          read as much as requested             *
5845 *************************************************/
5846
5847 /* The syscall read(2) doesn't always returns as much as we want. For
5848 several reasons it might get less. (Not talking about signals, as syscalls
5849 are restartable). When reading from a network or pipe connection the sender
5850 might send in smaller chunks, with delays between these chunks. The read(2)
5851 may return such a chunk.
5852
5853 The more the writer writes and the smaller the pipe between write and read is,
5854 the more we get the chance of reading leass than requested. (See bug 2130)
5855
5856 This function read(2)s until we got all the data we *requested*.
5857
5858 Note: This function may block. Use it only if you're sure about the
5859 amount of data you will get.
5860
5861 Argument:
5862   fd          the file descriptor to read from
5863   buffer      pointer to a buffer of size len
5864   len         the requested(!) amount of bytes
5865
5866 Returns:      the amount of bytes read
5867 */
5868 ssize_t
5869 readn(int fd, void *buffer, size_t len)
5870 {
5871   void *next = buffer;
5872   void *end = buffer + len;
5873
5874   while (next < end)
5875     {
5876     ssize_t got = read(fd, next, end - next);
5877
5878     /* I'm not sure if there are signals that can interrupt us,
5879     for now I assume the worst */
5880     if (got == -1 && errno == EINTR) continue;
5881     if (got <= 0) return next - buffer;
5882     next += got;
5883     }
5884
5885   return len;
5886 }
5887
5888
5889 /* End of exim.c */