String handling: refactor the expanding-string routines and users to use a descriptor...
[exim.git] / src / src / exim.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) University of Cambridge 1995 - 2016 */
6 /* See the file NOTICE for conditions of use and distribution. */
7
8
9 /* The main function: entry point, initialization, and high-level control.
10 Also a few functions that don't naturally fit elsewhere. */
11
12
13 #include "exim.h"
14
15 #if defined(__GLIBC__) && !defined(__UCLIBC__)
16 # include <gnu/libc-version.h>
17 #endif
18
19 #ifdef USE_GNUTLS
20 # include <gnutls/gnutls.h>
21 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
22 #  define DISABLE_OCSP
23 # endif
24 #endif
25
26 extern void init_lookup_list(void);
27
28
29
30 /*************************************************
31 *      Function interface to store functions     *
32 *************************************************/
33
34 /* We need some real functions to pass to the PCRE regular expression library
35 for store allocation via Exim's store manager. The normal calls are actually
36 macros that pass over location information to make tracing easier. These
37 functions just interface to the standard macro calls. A good compiler will
38 optimize out the tail recursion and so not make them too expensive. There
39 are two sets of functions; one for use when we want to retain the compiled
40 regular expression for a long time; the other for short-term use. */
41
42 static void *
43 function_store_get(size_t size)
44 {
45 return store_get((int)size);
46 }
47
48 static void
49 function_dummy_free(void *block) { block = block; }
50
51 static void *
52 function_store_malloc(size_t size)
53 {
54 return store_malloc((int)size);
55 }
56
57 static void
58 function_store_free(void *block)
59 {
60 store_free(block);
61 }
62
63
64
65
66 /*************************************************
67 *         Enums for cmdline interface            *
68 *************************************************/
69
70 enum commandline_info { CMDINFO_NONE=0,
71   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
72
73
74
75
76 /*************************************************
77 *  Compile regular expression and panic on fail  *
78 *************************************************/
79
80 /* This function is called when failure to compile a regular expression leads
81 to a panic exit. In other cases, pcre_compile() is called directly. In many
82 cases where this function is used, the results of the compilation are to be
83 placed in long-lived store, so we temporarily reset the store management
84 functions that PCRE uses if the use_malloc flag is set.
85
86 Argument:
87   pattern     the pattern to compile
88   caseless    TRUE if caseless matching is required
89   use_malloc  TRUE if compile into malloc store
90
91 Returns:      pointer to the compiled pattern
92 */
93
94 const pcre *
95 regex_must_compile(const uschar *pattern, BOOL caseless, BOOL use_malloc)
96 {
97 int offset;
98 int options = PCRE_COPT;
99 const pcre *yield;
100 const uschar *error;
101 if (use_malloc)
102   {
103   pcre_malloc = function_store_malloc;
104   pcre_free = function_store_free;
105   }
106 if (caseless) options |= PCRE_CASELESS;
107 yield = pcre_compile(CCS pattern, options, (const char **)&error, &offset, NULL);
108 pcre_malloc = function_store_get;
109 pcre_free = function_dummy_free;
110 if (yield == NULL)
111   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
112     "%s at offset %d while compiling %s", error, offset, pattern);
113 return yield;
114 }
115
116
117
118
119 /*************************************************
120 *   Execute regular expression and set strings   *
121 *************************************************/
122
123 /* This function runs a regular expression match, and sets up the pointers to
124 the matched substrings.
125
126 Arguments:
127   re          the compiled expression
128   subject     the subject string
129   options     additional PCRE options
130   setup       if < 0 do full setup
131               if >= 0 setup from setup+1 onwards,
132                 excluding the full matched string
133
134 Returns:      TRUE or FALSE
135 */
136
137 BOOL
138 regex_match_and_setup(const pcre *re, const uschar *subject, int options, int setup)
139 {
140 int ovector[3*(EXPAND_MAXN+1)];
141 uschar * s = string_copy(subject);      /* de-constifying */
142 int n = pcre_exec(re, NULL, CS s, Ustrlen(s), 0,
143   PCRE_EOPT | options, ovector, sizeof(ovector)/sizeof(int));
144 BOOL yield = n >= 0;
145 if (n == 0) n = EXPAND_MAXN + 1;
146 if (yield)
147   {
148   int nn;
149   expand_nmax = (setup < 0)? 0 : setup + 1;
150   for (nn = (setup < 0)? 0 : 2; nn < n*2; nn += 2)
151     {
152     expand_nstring[expand_nmax] = s + ovector[nn];
153     expand_nlength[expand_nmax++] = ovector[nn+1] - ovector[nn];
154     }
155   expand_nmax--;
156   }
157 return yield;
158 }
159
160
161
162
163 /*************************************************
164 *            Set up processing details           *
165 *************************************************/
166
167 /* Save a text string for dumping when SIGUSR1 is received.
168 Do checks for overruns.
169
170 Arguments: format and arguments, as for printf()
171 Returns:   nothing
172 */
173
174 void
175 set_process_info(const char *format, ...)
176 {
177 int len = sprintf(CS process_info, "%5d ", (int)getpid());
178 va_list ap;
179 va_start(ap, format);
180 if (!string_vformat(process_info + len, PROCESS_INFO_SIZE - len - 2, format, ap))
181   Ustrcpy(process_info + len, "**** string overflowed buffer ****");
182 len = Ustrlen(process_info);
183 process_info[len+0] = '\n';
184 process_info[len+1] = '\0';
185 process_info_len = len + 1;
186 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
187 va_end(ap);
188 }
189
190
191
192
193 /*************************************************
194 *             Handler for SIGUSR1                *
195 *************************************************/
196
197 /* SIGUSR1 causes any exim process to write to the process log details of
198 what it is currently doing. It will only be used if the OS is capable of
199 setting up a handler that causes automatic restarting of any system call
200 that is in progress at the time.
201
202 This function takes care to be signal-safe.
203
204 Argument: the signal number (SIGUSR1)
205 Returns:  nothing
206 */
207
208 static void
209 usr1_handler(int sig)
210 {
211 int fd;
212
213 os_restarting_signal(sig, usr1_handler);
214
215 if ((fd = Uopen(process_log_path, O_APPEND|O_WRONLY, LOG_MODE)) < 0)
216   {
217   /* If we are already running as the Exim user, try to create it in the
218   current process (assuming spool_directory exists). Otherwise, if we are
219   root, do the creation in an exim:exim subprocess. */
220
221   int euid = geteuid();
222   if (euid == exim_uid)
223     fd = Uopen(process_log_path, O_CREAT|O_APPEND|O_WRONLY, LOG_MODE);
224   else if (euid == root_uid)
225     fd = log_create_as_exim(process_log_path);
226   }
227
228 /* If we are neither exim nor root, or if we failed to create the log file,
229 give up. There is not much useful we can do with errors, since we don't want
230 to disrupt whatever is going on outside the signal handler. */
231
232 if (fd < 0) return;
233
234 (void)write(fd, process_info, process_info_len);
235 (void)close(fd);
236 }
237
238
239
240 /*************************************************
241 *             Timeout handler                    *
242 *************************************************/
243
244 /* This handler is enabled most of the time that Exim is running. The handler
245 doesn't actually get used unless alarm() has been called to set a timer, to
246 place a time limit on a system call of some kind. When the handler is run, it
247 re-enables itself.
248
249 There are some other SIGALRM handlers that are used in special cases when more
250 than just a flag setting is required; for example, when reading a message's
251 input. These are normally set up in the code module that uses them, and the
252 SIGALRM handler is reset to this one afterwards.
253
254 Argument: the signal value (SIGALRM)
255 Returns:  nothing
256 */
257
258 void
259 sigalrm_handler(int sig)
260 {
261 sig = sig;      /* Keep picky compilers happy */
262 sigalrm_seen = TRUE;
263 os_non_restarting_signal(SIGALRM, sigalrm_handler);
264 }
265
266
267
268 /*************************************************
269 *      Sleep for a fractional time interval      *
270 *************************************************/
271
272 /* This function is called by millisleep() and exim_wait_tick() to wait for a
273 period of time that may include a fraction of a second. The coding is somewhat
274 tedious. We do not expect setitimer() ever to fail, but if it does, the process
275 will wait for ever, so we panic in this instance. (There was a case of this
276 when a bug in a function that calls milliwait() caused it to pass invalid data.
277 That's when I added the check. :-)
278
279 We assume it to be not worth sleeping for under 100us; this value will
280 require revisiting as hardware advances.  This avoids the issue of
281 a zero-valued timer setting meaning "never fire".
282
283 Argument:  an itimerval structure containing the interval
284 Returns:   nothing
285 */
286
287 static void
288 milliwait(struct itimerval *itval)
289 {
290 sigset_t sigmask;
291 sigset_t old_sigmask;
292
293 if (itval->it_value.tv_usec < 100 && itval->it_value.tv_sec == 0)
294   return;
295 (void)sigemptyset(&sigmask);                           /* Empty mask */
296 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
297 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
298 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
299   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
300     "setitimer() failed: %s", strerror(errno));
301 (void)sigfillset(&sigmask);                            /* All signals */
302 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
303 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
304 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
305 }
306
307
308
309
310 /*************************************************
311 *         Millisecond sleep function             *
312 *************************************************/
313
314 /* The basic sleep() function has a granularity of 1 second, which is too rough
315 in some cases - for example, when using an increasing delay to slow down
316 spammers.
317
318 Argument:    number of millseconds
319 Returns:     nothing
320 */
321
322 void
323 millisleep(int msec)
324 {
325 struct itimerval itval;
326 itval.it_interval.tv_sec = 0;
327 itval.it_interval.tv_usec = 0;
328 itval.it_value.tv_sec = msec/1000;
329 itval.it_value.tv_usec = (msec % 1000) * 1000;
330 milliwait(&itval);
331 }
332
333
334
335 /*************************************************
336 *         Compare microsecond times              *
337 *************************************************/
338
339 /*
340 Arguments:
341   tv1         the first time
342   tv2         the second time
343
344 Returns:      -1, 0, or +1
345 */
346
347 static int
348 exim_tvcmp(struct timeval *t1, struct timeval *t2)
349 {
350 if (t1->tv_sec > t2->tv_sec) return +1;
351 if (t1->tv_sec < t2->tv_sec) return -1;
352 if (t1->tv_usec > t2->tv_usec) return +1;
353 if (t1->tv_usec < t2->tv_usec) return -1;
354 return 0;
355 }
356
357
358
359
360 /*************************************************
361 *          Clock tick wait function              *
362 *************************************************/
363
364 /* Exim uses a time + a pid to generate a unique identifier in two places: its
365 message IDs, and in file names for maildir deliveries. Because some OS now
366 re-use pids within the same second, sub-second times are now being used.
367 However, for absolute certainty, we must ensure the clock has ticked before
368 allowing the relevant process to complete. At the time of implementation of
369 this code (February 2003), the speed of processors is such that the clock will
370 invariably have ticked already by the time a process has done its job. This
371 function prepares for the time when things are faster - and it also copes with
372 clocks that go backwards.
373
374 Arguments:
375   then_tv      A timeval which was used to create uniqueness; its usec field
376                  has been rounded down to the value of the resolution.
377                  We want to be sure the current time is greater than this.
378   resolution   The resolution that was used to divide the microseconds
379                  (1 for maildir, larger for message ids)
380
381 Returns:       nothing
382 */
383
384 void
385 exim_wait_tick(struct timeval *then_tv, int resolution)
386 {
387 struct timeval now_tv;
388 long int now_true_usec;
389
390 (void)gettimeofday(&now_tv, NULL);
391 now_true_usec = now_tv.tv_usec;
392 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
393
394 if (exim_tvcmp(&now_tv, then_tv) <= 0)
395   {
396   struct itimerval itval;
397   itval.it_interval.tv_sec = 0;
398   itval.it_interval.tv_usec = 0;
399   itval.it_value.tv_sec = then_tv->tv_sec - now_tv.tv_sec;
400   itval.it_value.tv_usec = then_tv->tv_usec + resolution - now_true_usec;
401
402   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
403   negative value for the microseconds is possible only in the case when "now"
404   is more than a second less than "then". That means that itval.it_value.tv_sec
405   is greater than zero. The following correction is therefore safe. */
406
407   if (itval.it_value.tv_usec < 0)
408     {
409     itval.it_value.tv_usec += 1000000;
410     itval.it_value.tv_sec -= 1;
411     }
412
413   DEBUG(D_transport|D_receive)
414     {
415     if (!running_in_test_harness)
416       {
417       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
418         then_tv->tv_sec, (long) then_tv->tv_usec,
419         now_tv.tv_sec, (long) now_tv.tv_usec);
420       debug_printf("waiting " TIME_T_FMT ".%06lu\n",
421         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
422       }
423     }
424
425   milliwait(&itval);
426   }
427 }
428
429
430
431
432 /*************************************************
433 *   Call fopen() with umask 777 and adjust mode  *
434 *************************************************/
435
436 /* Exim runs with umask(0) so that files created with open() have the mode that
437 is specified in the open() call. However, there are some files, typically in
438 the spool directory, that are created with fopen(). They end up world-writeable
439 if no precautions are taken. Although the spool directory is not accessible to
440 the world, this is an untidiness. So this is a wrapper function for fopen()
441 that sorts out the mode of the created file.
442
443 Arguments:
444    filename       the file name
445    options        the fopen() options
446    mode           the required mode
447
448 Returns:          the fopened FILE or NULL
449 */
450
451 FILE *
452 modefopen(const uschar *filename, const char *options, mode_t mode)
453 {
454 mode_t saved_umask = umask(0777);
455 FILE *f = Ufopen(filename, options);
456 (void)umask(saved_umask);
457 if (f != NULL) (void)fchmod(fileno(f), mode);
458 return f;
459 }
460
461
462
463
464 /*************************************************
465 *   Ensure stdin, stdout, and stderr exist       *
466 *************************************************/
467
468 /* Some operating systems grumble if an exec() happens without a standard
469 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
470 file will be opened and will use these fd values, and then some other bit of
471 code will assume, for example, that it can write error messages to stderr.
472 This function ensures that fds 0, 1, and 2 are open if they do not already
473 exist, by connecting them to /dev/null.
474
475 This function is also used to ensure that std{in,out,err} exist at all times,
476 so that if any library that Exim calls tries to use them, it doesn't crash.
477
478 Arguments:  None
479 Returns:    Nothing
480 */
481
482 void
483 exim_nullstd(void)
484 {
485 int i;
486 int devnull = -1;
487 struct stat statbuf;
488 for (i = 0; i <= 2; i++)
489   {
490   if (fstat(i, &statbuf) < 0 && errno == EBADF)
491     {
492     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
493     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
494       string_open_failed(errno, "/dev/null"));
495     if (devnull != i) (void)dup2(devnull, i);
496     }
497   }
498 if (devnull > 2) (void)close(devnull);
499 }
500
501
502
503
504 /*************************************************
505 *   Close unwanted file descriptors for delivery *
506 *************************************************/
507
508 /* This function is called from a new process that has been forked to deliver
509 an incoming message, either directly, or using exec.
510
511 We want any smtp input streams to be closed in this new process. However, it
512 has been observed that using fclose() here causes trouble. When reading in -bS
513 input, duplicate copies of messages have been seen. The files will be sharing a
514 file pointer with the parent process, and it seems that fclose() (at least on
515 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
516 least sometimes. Hence we go for closing the underlying file descriptors.
517
518 If TLS is active, we want to shut down the TLS library, but without molesting
519 the parent's SSL connection.
520
521 For delivery of a non-SMTP message, we want to close stdin and stdout (and
522 stderr unless debugging) because the calling process might have set them up as
523 pipes and be waiting for them to close before it waits for the submission
524 process to terminate. If they aren't closed, they hold up the calling process
525 until the initial delivery process finishes, which is not what we want.
526
527 Exception: We do want it for synchronous delivery!
528
529 And notwithstanding all the above, if D_resolver is set, implying resolver
530 debugging, leave stdout open, because that's where the resolver writes its
531 debugging output.
532
533 When we close stderr (which implies we've also closed stdout), we also get rid
534 of any controlling terminal.
535
536 Arguments:   None
537 Returns:     Nothing
538 */
539
540 static void
541 close_unwanted(void)
542 {
543 if (smtp_input)
544   {
545   #ifdef SUPPORT_TLS
546   tls_close(TRUE, FALSE);      /* Shut down the TLS library */
547   #endif
548   (void)close(fileno(smtp_in));
549   (void)close(fileno(smtp_out));
550   smtp_in = NULL;
551   }
552 else
553   {
554   (void)close(0);                                          /* stdin */
555   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
556   if (debug_selector == 0)                                 /* stderr */
557     {
558     if (!synchronous_delivery)
559       {
560       (void)close(2);
561       log_stderr = NULL;
562       }
563     (void)setsid();
564     }
565   }
566 }
567
568
569
570
571 /*************************************************
572 *          Set uid and gid                       *
573 *************************************************/
574
575 /* This function sets a new uid and gid permanently, optionally calling
576 initgroups() to set auxiliary groups. There are some special cases when running
577 Exim in unprivileged modes. In these situations the effective uid will not be
578 root; if we already have the right effective uid/gid, and don't need to
579 initialize any groups, leave things as they are.
580
581 Arguments:
582   uid        the uid
583   gid        the gid
584   igflag     TRUE if initgroups() wanted
585   msg        text to use in debugging output and failure log
586
587 Returns:     nothing; bombs out on failure
588 */
589
590 void
591 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, uschar *msg)
592 {
593 uid_t euid = geteuid();
594 gid_t egid = getegid();
595
596 if (euid == root_uid || euid != uid || egid != gid || igflag)
597   {
598   /* At least one OS returns +1 for initgroups failure, so just check for
599   non-zero. */
600
601   if (igflag)
602     {
603     struct passwd *pw = getpwuid(uid);
604     if (pw != NULL)
605       {
606       if (initgroups(pw->pw_name, gid) != 0)
607         log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
608           (long int)uid, strerror(errno));
609       }
610     else log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
611       "no passwd entry for uid=%ld", (long int)uid);
612     }
613
614   if (setgid(gid) < 0 || setuid(uid) < 0)
615     {
616     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
617       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
618     }
619   }
620
621 /* Debugging output included uid/gid and all groups */
622
623 DEBUG(D_uid)
624   {
625   int group_count, save_errno;
626   gid_t group_list[NGROUPS_MAX];
627   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
628     (long int)geteuid(), (long int)getegid(), (long int)getpid());
629   group_count = getgroups(NGROUPS_MAX, group_list);
630   save_errno = errno;
631   debug_printf("  auxiliary group list:");
632   if (group_count > 0)
633     {
634     int i;
635     for (i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
636     }
637   else if (group_count < 0)
638     debug_printf(" <error: %s>", strerror(save_errno));
639   else debug_printf(" <none>");
640   debug_printf("\n");
641   }
642 }
643
644
645
646
647 /*************************************************
648 *               Exit point                       *
649 *************************************************/
650
651 /* Exim exits via this function so that it always clears up any open
652 databases.
653
654 Arguments:
655   rc         return code
656
657 Returns:     does not return
658 */
659
660 void
661 exim_exit(int rc)
662 {
663 search_tidyup();
664 DEBUG(D_any)
665   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d terminating with rc=%d "
666     ">>>>>>>>>>>>>>>>\n", (int)getpid(), rc);
667 exit(rc);
668 }
669
670
671
672
673 /*************************************************
674 *         Extract port from host address         *
675 *************************************************/
676
677 /* Called to extract the port from the values given to -oMa and -oMi.
678 It also checks the syntax of the address, and terminates it before the
679 port data when a port is extracted.
680
681 Argument:
682   address   the address, with possible port on the end
683
684 Returns:    the port, or zero if there isn't one
685             bombs out on a syntax error
686 */
687
688 static int
689 check_port(uschar *address)
690 {
691 int port = host_address_extract_port(address);
692 if (string_is_ip_address(address, NULL) == 0)
693   {
694   fprintf(stderr, "exim abandoned: \"%s\" is not an IP address\n", address);
695   exit(EXIT_FAILURE);
696   }
697 return port;
698 }
699
700
701
702 /*************************************************
703 *              Test/verify an address            *
704 *************************************************/
705
706 /* This function is called by the -bv and -bt code. It extracts a working
707 address from a full RFC 822 address. This isn't really necessary per se, but it
708 has the effect of collapsing source routes.
709
710 Arguments:
711   s            the address string
712   flags        flag bits for verify_address()
713   exit_value   to be set for failures
714
715 Returns:       nothing
716 */
717
718 static void
719 test_address(uschar *s, int flags, int *exit_value)
720 {
721 int start, end, domain;
722 uschar *parse_error = NULL;
723 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
724   FALSE);
725 if (address == NULL)
726   {
727   fprintf(stdout, "syntax error: %s\n", parse_error);
728   *exit_value = 2;
729   }
730 else
731   {
732   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
733     -1, -1, NULL, NULL, NULL);
734   if (rc == FAIL) *exit_value = 2;
735     else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
736   }
737 }
738
739
740
741 /*************************************************
742 *          Show supported features               *
743 *************************************************/
744
745 /* This function is called for -bV/--version and for -d to output the optional
746 features of the current Exim binary.
747
748 Arguments:  a FILE for printing
749 Returns:    nothing
750 */
751
752 static void
753 show_whats_supported(FILE *f)
754 {
755   auth_info *authi;
756
757 #ifdef DB_VERSION_STRING
758 fprintf(f, "Berkeley DB: %s\n", DB_VERSION_STRING);
759 #elif defined(BTREEVERSION) && defined(HASHVERSION)
760   #ifdef USE_DB
761   fprintf(f, "Probably Berkeley DB version 1.8x (native mode)\n");
762   #else
763   fprintf(f, "Probably Berkeley DB version 1.8x (compatibility mode)\n");
764   #endif
765 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
766 fprintf(f, "Probably ndbm\n");
767 #elif defined(USE_TDB)
768 fprintf(f, "Using tdb\n");
769 #else
770   #ifdef USE_GDBM
771   fprintf(f, "Probably GDBM (native mode)\n");
772   #else
773   fprintf(f, "Probably GDBM (compatibility mode)\n");
774   #endif
775 #endif
776
777 fprintf(f, "Support for:");
778 #ifdef SUPPORT_CRYPTEQ
779   fprintf(f, " crypteq");
780 #endif
781 #if HAVE_ICONV
782   fprintf(f, " iconv()");
783 #endif
784 #if HAVE_IPV6
785   fprintf(f, " IPv6");
786 #endif
787 #ifdef HAVE_SETCLASSRESOURCES
788   fprintf(f, " use_setclassresources");
789 #endif
790 #ifdef SUPPORT_PAM
791   fprintf(f, " PAM");
792 #endif
793 #ifdef EXIM_PERL
794   fprintf(f, " Perl");
795 #endif
796 #ifdef EXPAND_DLFUNC
797   fprintf(f, " Expand_dlfunc");
798 #endif
799 #ifdef USE_TCP_WRAPPERS
800   fprintf(f, " TCPwrappers");
801 #endif
802 #ifdef SUPPORT_TLS
803   #ifdef USE_GNUTLS
804   fprintf(f, " GnuTLS");
805   #else
806   fprintf(f, " OpenSSL");
807   #endif
808 #endif
809 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
810   fprintf(f, " translate_ip_address");
811 #endif
812 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
813   fprintf(f, " move_frozen_messages");
814 #endif
815 #ifdef WITH_CONTENT_SCAN
816   fprintf(f, " Content_Scanning");
817 #endif
818 #ifndef DISABLE_DKIM
819   fprintf(f, " DKIM");
820 #endif
821 #ifndef DISABLE_DNSSEC
822   fprintf(f, " DNSSEC");
823 #endif
824 #ifndef DISABLE_EVENT
825   fprintf(f, " Event");
826 #endif
827 #ifdef SUPPORT_I18N
828   fprintf(f, " I18N");
829 #endif
830 #ifndef DISABLE_OCSP
831   fprintf(f, " OCSP");
832 #endif
833 #ifndef DISABLE_PRDR
834   fprintf(f, " PRDR");
835 #endif
836 #ifdef SUPPORT_PROXY
837   fprintf(f, " PROXY");
838 #endif
839 #ifdef SUPPORT_SOCKS
840   fprintf(f, " SOCKS");
841 #endif
842 #ifdef TCP_FASTOPEN
843   fprintf(f, " TCP_Fast_Open");
844 #endif
845 #ifdef EXPERIMENTAL_LMDB
846   fprintf(f, " Experimental_LMDB");
847 #endif
848 #ifdef EXPERIMENTAL_QUEUEFILE
849   fprintf(f, " Experimental_QUEUEFILE");
850 #endif
851 #ifdef EXPERIMENTAL_SPF
852   fprintf(f, " Experimental_SPF");
853 #endif
854 #ifdef EXPERIMENTAL_SRS
855   fprintf(f, " Experimental_SRS");
856 #endif
857 #ifdef EXPERIMENTAL_BRIGHTMAIL
858   fprintf(f, " Experimental_Brightmail");
859 #endif
860 #ifdef EXPERIMENTAL_DANE
861   fprintf(f, " Experimental_DANE");
862 #endif
863 #ifdef EXPERIMENTAL_DCC
864   fprintf(f, " Experimental_DCC");
865 #endif
866 #ifdef EXPERIMENTAL_DMARC
867   fprintf(f, " Experimental_DMARC");
868 #endif
869 #ifdef EXPERIMENTAL_DSN_INFO
870   fprintf(f, " Experimental_DSN_info");
871 #endif
872 fprintf(f, "\n");
873
874 fprintf(f, "Lookups (built-in):");
875 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
876   fprintf(f, " lsearch wildlsearch nwildlsearch iplsearch");
877 #endif
878 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
879   fprintf(f, " cdb");
880 #endif
881 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
882   fprintf(f, " dbm dbmjz dbmnz");
883 #endif
884 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
885   fprintf(f, " dnsdb");
886 #endif
887 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
888   fprintf(f, " dsearch");
889 #endif
890 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
891   fprintf(f, " ibase");
892 #endif
893 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
894   fprintf(f, " ldap ldapdn ldapm");
895 #endif
896 #ifdef EXPERIMENTAL_LMDB
897   fprintf(f, " lmdb");
898 #endif
899 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
900   fprintf(f, " mysql");
901 #endif
902 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
903   fprintf(f, " nis nis0");
904 #endif
905 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
906   fprintf(f, " nisplus");
907 #endif
908 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
909   fprintf(f, " oracle");
910 #endif
911 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
912   fprintf(f, " passwd");
913 #endif
914 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
915   fprintf(f, " pgsql");
916 #endif
917 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
918   fprintf(f, " redis");
919 #endif
920 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
921   fprintf(f, " sqlite");
922 #endif
923 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
924   fprintf(f, " testdb");
925 #endif
926 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
927   fprintf(f, " whoson");
928 #endif
929 fprintf(f, "\n");
930
931 fprintf(f, "Authenticators:");
932 #ifdef AUTH_CRAM_MD5
933   fprintf(f, " cram_md5");
934 #endif
935 #ifdef AUTH_CYRUS_SASL
936   fprintf(f, " cyrus_sasl");
937 #endif
938 #ifdef AUTH_DOVECOT
939   fprintf(f, " dovecot");
940 #endif
941 #ifdef AUTH_GSASL
942   fprintf(f, " gsasl");
943 #endif
944 #ifdef AUTH_HEIMDAL_GSSAPI
945   fprintf(f, " heimdal_gssapi");
946 #endif
947 #ifdef AUTH_PLAINTEXT
948   fprintf(f, " plaintext");
949 #endif
950 #ifdef AUTH_SPA
951   fprintf(f, " spa");
952 #endif
953 #ifdef AUTH_TLS
954   fprintf(f, " tls");
955 #endif
956 fprintf(f, "\n");
957
958 fprintf(f, "Routers:");
959 #ifdef ROUTER_ACCEPT
960   fprintf(f, " accept");
961 #endif
962 #ifdef ROUTER_DNSLOOKUP
963   fprintf(f, " dnslookup");
964 #endif
965 #ifdef ROUTER_IPLITERAL
966   fprintf(f, " ipliteral");
967 #endif
968 #ifdef ROUTER_IPLOOKUP
969   fprintf(f, " iplookup");
970 #endif
971 #ifdef ROUTER_MANUALROUTE
972   fprintf(f, " manualroute");
973 #endif
974 #ifdef ROUTER_QUERYPROGRAM
975   fprintf(f, " queryprogram");
976 #endif
977 #ifdef ROUTER_REDIRECT
978   fprintf(f, " redirect");
979 #endif
980 fprintf(f, "\n");
981
982 fprintf(f, "Transports:");
983 #ifdef TRANSPORT_APPENDFILE
984   fprintf(f, " appendfile");
985   #ifdef SUPPORT_MAILDIR
986     fprintf(f, "/maildir");
987   #endif
988   #ifdef SUPPORT_MAILSTORE
989     fprintf(f, "/mailstore");
990   #endif
991   #ifdef SUPPORT_MBX
992     fprintf(f, "/mbx");
993   #endif
994 #endif
995 #ifdef TRANSPORT_AUTOREPLY
996   fprintf(f, " autoreply");
997 #endif
998 #ifdef TRANSPORT_LMTP
999   fprintf(f, " lmtp");
1000 #endif
1001 #ifdef TRANSPORT_PIPE
1002   fprintf(f, " pipe");
1003 #endif
1004 #ifdef EXPERIMENTAL_QUEUEFILE
1005   fprintf(f, " queuefile");
1006 #endif
1007 #ifdef TRANSPORT_SMTP
1008   fprintf(f, " smtp");
1009 #endif
1010 fprintf(f, "\n");
1011
1012 if (fixed_never_users[0] > 0)
1013   {
1014   int i;
1015   fprintf(f, "Fixed never_users: ");
1016   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1017     fprintf(f, "%d:", (unsigned int)fixed_never_users[i]);
1018   fprintf(f, "%d\n", (unsigned int)fixed_never_users[i]);
1019   }
1020
1021 fprintf(f, "Configure owner: %d:%d\n", config_uid, config_gid);
1022
1023 fprintf(f, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1024
1025 /* Everything else is details which are only worth reporting when debugging.
1026 Perhaps the tls_version_report should move into this too. */
1027 DEBUG(D_any) do {
1028
1029   int i;
1030
1031 /* clang defines __GNUC__ (at least, for me) so test for it first */
1032 #if defined(__clang__)
1033   fprintf(f, "Compiler: CLang [%s]\n", __clang_version__);
1034 #elif defined(__GNUC__)
1035   fprintf(f, "Compiler: GCC [%s]\n",
1036 # ifdef __VERSION__
1037       __VERSION__
1038 # else
1039       "? unknown version ?"
1040 # endif
1041       );
1042 #else
1043   fprintf(f, "Compiler: <unknown>\n");
1044 #endif
1045
1046 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1047   fprintf(f, "Library version: Glibc: Compile: %d.%d\n",
1048                 __GLIBC__, __GLIBC_MINOR__);
1049   if (__GLIBC_PREREQ(2, 1))
1050     fprintf(f, "                        Runtime: %s\n",
1051                 gnu_get_libc_version());
1052 #endif
1053
1054 #ifdef SUPPORT_TLS
1055   tls_version_report(f);
1056 #endif
1057 #ifdef SUPPORT_I18N
1058   utf8_version_report(f);
1059 #endif
1060
1061   for (authi = auths_available; *authi->driver_name != '\0'; ++authi)
1062     if (authi->version_report)
1063       (*authi->version_report)(f);
1064
1065   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1066   characters; unless it's an ancient version of PCRE in which case it
1067   is not defined. */
1068 #ifndef PCRE_PRERELEASE
1069 # define PCRE_PRERELEASE
1070 #endif
1071 #define QUOTE(X) #X
1072 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1073   fprintf(f, "Library version: PCRE: Compile: %d.%d%s\n"
1074              "                       Runtime: %s\n",
1075           PCRE_MAJOR, PCRE_MINOR,
1076           EXPAND_AND_QUOTE(PCRE_PRERELEASE) "",
1077           pcre_version());
1078 #undef QUOTE
1079 #undef EXPAND_AND_QUOTE
1080
1081   init_lookup_list();
1082   for (i = 0; i < lookup_list_count; i++)
1083     if (lookup_list[i]->version_report)
1084       lookup_list[i]->version_report(f);
1085
1086 #ifdef WHITELIST_D_MACROS
1087   fprintf(f, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1088 #else
1089   fprintf(f, "WHITELIST_D_MACROS unset\n");
1090 #endif
1091 #ifdef TRUSTED_CONFIG_LIST
1092   fprintf(f, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1093 #else
1094   fprintf(f, "TRUSTED_CONFIG_LIST unset\n");
1095 #endif
1096
1097 } while (0);
1098 }
1099
1100
1101 /*************************************************
1102 *     Show auxiliary information about Exim      *
1103 *************************************************/
1104
1105 static void
1106 show_exim_information(enum commandline_info request, FILE *stream)
1107 {
1108 const uschar **pp;
1109
1110 switch(request)
1111   {
1112   case CMDINFO_NONE:
1113     fprintf(stream, "Oops, something went wrong.\n");
1114     return;
1115   case CMDINFO_HELP:
1116     fprintf(stream,
1117 "The -bI: flag takes a string indicating which information to provide.\n"
1118 "If the string is not recognised, you'll get this help (on stderr).\n"
1119 "\n"
1120 "  exim -bI:help    this information\n"
1121 "  exim -bI:dscp    dscp value keywords known\n"
1122 "  exim -bI:sieve   list of supported sieve extensions, one per line.\n"
1123 );
1124     return;
1125   case CMDINFO_SIEVE:
1126     for (pp = exim_sieve_extension_list; *pp; ++pp)
1127       fprintf(stream, "%s\n", *pp);
1128     return;
1129   case CMDINFO_DSCP:
1130     dscp_list_to_stream(stream);
1131     return;
1132   }
1133 }
1134
1135
1136 /*************************************************
1137 *               Quote a local part               *
1138 *************************************************/
1139
1140 /* This function is used when a sender address or a From: or Sender: header
1141 line is being created from the caller's login, or from an authenticated_id. It
1142 applies appropriate quoting rules for a local part.
1143
1144 Argument:    the local part
1145 Returns:     the local part, quoted if necessary
1146 */
1147
1148 uschar *
1149 local_part_quote(uschar *lpart)
1150 {
1151 BOOL needs_quote = FALSE;
1152 gstring * g;
1153 uschar *t;
1154
1155 for (t = lpart; !needs_quote && *t != 0; t++)
1156   {
1157   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1158     (*t != '.' || t == lpart || t[1] == 0);
1159   }
1160
1161 if (!needs_quote) return lpart;
1162
1163 g = string_catn(NULL, US"\"", 1);
1164
1165 for (;;)
1166   {
1167   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1168   if (nq == NULL)
1169     {
1170     g = string_cat(g, lpart);
1171     break;
1172     }
1173   g = string_catn(g, lpart, nq - lpart);
1174   g = string_catn(g, US"\\", 1);
1175   g = string_catn(g, nq, 1);
1176   lpart = nq + 1;
1177   }
1178
1179 g = string_catn(g, US"\"", 1);
1180 return string_from_gstring(g);
1181 }
1182
1183
1184
1185 #ifdef USE_READLINE
1186 /*************************************************
1187 *         Load readline() functions              *
1188 *************************************************/
1189
1190 /* This function is called from testing executions that read data from stdin,
1191 but only when running as the calling user. Currently, only -be does this. The
1192 function loads the readline() function library and passes back the functions.
1193 On some systems, it needs the curses library, so load that too, but try without
1194 it if loading fails. All this functionality has to be requested at build time.
1195
1196 Arguments:
1197   fn_readline_ptr   pointer to where to put the readline pointer
1198   fn_addhist_ptr    pointer to where to put the addhistory function
1199
1200 Returns:            the dlopen handle or NULL on failure
1201 */
1202
1203 static void *
1204 set_readline(char * (**fn_readline_ptr)(const char *),
1205              void   (**fn_addhist_ptr)(const char *))
1206 {
1207 void *dlhandle;
1208 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1209
1210 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1211 if (dlhandle_curses != NULL) dlclose(dlhandle_curses);
1212
1213 if (dlhandle != NULL)
1214   {
1215   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1216    *   char * readline (const char *prompt);
1217    *   void add_history (const char *string);
1218    */
1219   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1220   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1221   }
1222 else
1223   {
1224   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1225   }
1226
1227 return dlhandle;
1228 }
1229 #endif
1230
1231
1232
1233 /*************************************************
1234 *    Get a line from stdin for testing things    *
1235 *************************************************/
1236
1237 /* This function is called when running tests that can take a number of lines
1238 of input (for example, -be and -bt). It handles continuations and trailing
1239 spaces. And prompting and a blank line output on eof. If readline() is in use,
1240 the arguments are non-NULL and provide the relevant functions.
1241
1242 Arguments:
1243   fn_readline   readline function or NULL
1244   fn_addhist    addhist function or NULL
1245
1246 Returns:        pointer to dynamic memory, or NULL at end of file
1247 */
1248
1249 static uschar *
1250 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1251 {
1252 int i;
1253 gstring * g = NULL;
1254
1255 if (!fn_readline) { printf("> "); fflush(stdout); }
1256
1257 for (i = 0;; i++)
1258   {
1259   uschar buffer[1024];
1260   uschar *p, *ss;
1261
1262   #ifdef USE_READLINE
1263   char *readline_line = NULL;
1264   if (fn_readline != NULL)
1265     {
1266     if ((readline_line = fn_readline((i > 0)? "":"> ")) == NULL) break;
1267     if (*readline_line != 0 && fn_addhist != NULL) fn_addhist(readline_line);
1268     p = US readline_line;
1269     }
1270   else
1271   #endif
1272
1273   /* readline() not in use */
1274
1275     {
1276     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;
1277     p = buffer;
1278     }
1279
1280   /* Handle the line */
1281
1282   ss = p + (int)Ustrlen(p);
1283   while (ss > p && isspace(ss[-1])) ss--;
1284
1285   if (i > 0)
1286     {
1287     while (p < ss && isspace(*p)) p++;   /* leading space after cont */
1288     }
1289
1290   g = string_catn(g, p, ss - p);
1291
1292   #ifdef USE_READLINE
1293   if (fn_readline) free(readline_line);
1294   #endif
1295
1296   /* g can only be NULL if ss==p */
1297   if (ss == p || g->s[g->ptr-1] != '\\')
1298     break;
1299
1300   --g->ptr;
1301   (void) string_from_gstring(g);
1302   }
1303
1304 if (!g) printf("\n");
1305 return string_from_gstring(g);
1306 }
1307
1308
1309
1310 /*************************************************
1311 *    Output usage information for the program    *
1312 *************************************************/
1313
1314 /* This function is called when there are no recipients
1315    or a specific --help argument was added.
1316
1317 Arguments:
1318   progname      information on what name we were called by
1319
1320 Returns:        DOES NOT RETURN
1321 */
1322
1323 static void
1324 exim_usage(uschar *progname)
1325 {
1326
1327 /* Handle specific program invocation variants */
1328 if (Ustrcmp(progname, US"-mailq") == 0)
1329   {
1330   fprintf(stderr,
1331     "mailq - list the contents of the mail queue\n\n"
1332     "For a list of options, see the Exim documentation.\n");
1333   exit(EXIT_FAILURE);
1334   }
1335
1336 /* Generic usage - we output this whatever happens */
1337 fprintf(stderr,
1338   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1339   "not directly from a shell command line. Options and/or arguments control\n"
1340   "what it does when called. For a list of options, see the Exim documentation.\n");
1341
1342 exit(EXIT_FAILURE);
1343 }
1344
1345
1346
1347 /*************************************************
1348 *    Validate that the macros given are okay     *
1349 *************************************************/
1350
1351 /* Typically, Exim will drop privileges if macros are supplied.  In some
1352 cases, we want to not do so.
1353
1354 Arguments:    opt_D_used - true if the commandline had a "-D" option
1355 Returns:      true if trusted, false otherwise
1356 */
1357
1358 static BOOL
1359 macros_trusted(BOOL opt_D_used)
1360 {
1361 #ifdef WHITELIST_D_MACROS
1362 macro_item *m;
1363 uschar *whitelisted, *end, *p, **whites, **w;
1364 int white_count, i, n;
1365 size_t len;
1366 BOOL prev_char_item, found;
1367 #endif
1368
1369 if (!opt_D_used)
1370   return TRUE;
1371 #ifndef WHITELIST_D_MACROS
1372 return FALSE;
1373 #else
1374
1375 /* We only trust -D overrides for some invoking users:
1376 root, the exim run-time user, the optional config owner user.
1377 I don't know why config-owner would be needed, but since they can own the
1378 config files anyway, there's no security risk to letting them override -D. */
1379 if ( ! ((real_uid == root_uid)
1380      || (real_uid == exim_uid)
1381 #ifdef CONFIGURE_OWNER
1382      || (real_uid == config_uid)
1383 #endif
1384    ))
1385   {
1386   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1387   return FALSE;
1388   }
1389
1390 /* Get a list of macros which are whitelisted */
1391 whitelisted = string_copy_malloc(US WHITELIST_D_MACROS);
1392 prev_char_item = FALSE;
1393 white_count = 0;
1394 for (p = whitelisted; *p != '\0'; ++p)
1395   {
1396   if (*p == ':' || isspace(*p))
1397     {
1398     *p = '\0';
1399     if (prev_char_item)
1400       ++white_count;
1401     prev_char_item = FALSE;
1402     continue;
1403     }
1404   if (!prev_char_item)
1405     prev_char_item = TRUE;
1406   }
1407 end = p;
1408 if (prev_char_item)
1409   ++white_count;
1410 if (!white_count)
1411   return FALSE;
1412 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1413 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1414   {
1415   if (*p != '\0')
1416     {
1417     whites[i++] = p;
1418     if (i == white_count)
1419       break;
1420     while (*p != '\0' && p < end)
1421       ++p;
1422     }
1423   }
1424 whites[i] = NULL;
1425
1426 /* The list of commandline macros should be very short.
1427 Accept the N*M complexity. */
1428 for (m = macros; m; m = m->next) if (m->command_line)
1429   {
1430   found = FALSE;
1431   for (w = whites; *w; ++w)
1432     if (Ustrcmp(*w, m->name) == 0)
1433       {
1434       found = TRUE;
1435       break;
1436       }
1437   if (!found)
1438     return FALSE;
1439   if (!m->replacement)
1440     continue;
1441   if ((len = m->replen) == 0)
1442     continue;
1443   n = pcre_exec(regex_whitelisted_macro, NULL, CS m->replacement, len,
1444    0, PCRE_EOPT, NULL, 0);
1445   if (n < 0)
1446     {
1447     if (n != PCRE_ERROR_NOMATCH)
1448       debug_printf("macros_trusted checking %s returned %d\n", m->name, n);
1449     return FALSE;
1450     }
1451   }
1452 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1453 return TRUE;
1454 #endif
1455 }
1456
1457
1458 /*************************************************
1459 *          Entry point and high-level code       *
1460 *************************************************/
1461
1462 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1463 the appropriate action. All the necessary functions are present in the one
1464 binary. I originally thought one should split it up, but it turns out that so
1465 much of the apparatus is needed in each chunk that one might as well just have
1466 it all available all the time, which then makes the coding easier as well.
1467
1468 Arguments:
1469   argc      count of entries in argv
1470   argv      argument strings, with argv[0] being the program name
1471
1472 Returns:    EXIT_SUCCESS if terminated successfully
1473             EXIT_FAILURE otherwise, except when a message has been sent
1474               to the sender, and -oee was given
1475 */
1476
1477 int
1478 main(int argc, char **cargv)
1479 {
1480 uschar **argv = USS cargv;
1481 int  arg_receive_timeout = -1;
1482 int  arg_smtp_receive_timeout = -1;
1483 int  arg_error_handling = error_handling;
1484 int  filter_sfd = -1;
1485 int  filter_ufd = -1;
1486 int  group_count;
1487 int  i, rv;
1488 int  list_queue_option = 0;
1489 int  msg_action = 0;
1490 int  msg_action_arg = -1;
1491 int  namelen = (argv[0] == NULL)? 0 : Ustrlen(argv[0]);
1492 int  queue_only_reason = 0;
1493 #ifdef EXIM_PERL
1494 int  perl_start_option = 0;
1495 #endif
1496 int  recipients_arg = argc;
1497 int  sender_address_domain = 0;
1498 int  test_retry_arg = -1;
1499 int  test_rewrite_arg = -1;
1500 BOOL arg_queue_only = FALSE;
1501 BOOL bi_option = FALSE;
1502 BOOL checking = FALSE;
1503 BOOL count_queue = FALSE;
1504 BOOL expansion_test = FALSE;
1505 BOOL extract_recipients = FALSE;
1506 BOOL flag_G = FALSE;
1507 BOOL flag_n = FALSE;
1508 BOOL forced_delivery = FALSE;
1509 BOOL f_end_dot = FALSE;
1510 BOOL deliver_give_up = FALSE;
1511 BOOL list_queue = FALSE;
1512 BOOL list_options = FALSE;
1513 BOOL list_config = FALSE;
1514 BOOL local_queue_only;
1515 BOOL more = TRUE;
1516 BOOL one_msg_action = FALSE;
1517 BOOL opt_D_used = FALSE;
1518 BOOL queue_only_set = FALSE;
1519 BOOL receiving_message = TRUE;
1520 BOOL sender_ident_set = FALSE;
1521 BOOL session_local_queue_only;
1522 BOOL unprivileged;
1523 BOOL removed_privilege = FALSE;
1524 BOOL usage_wanted = FALSE;
1525 BOOL verify_address_mode = FALSE;
1526 BOOL verify_as_sender = FALSE;
1527 BOOL version_printed = FALSE;
1528 uschar *alias_arg = NULL;
1529 uschar *called_as = US"";
1530 uschar *cmdline_syslog_name = NULL;
1531 uschar *start_queue_run_id = NULL;
1532 uschar *stop_queue_run_id = NULL;
1533 uschar *expansion_test_message = NULL;
1534 uschar *ftest_domain = NULL;
1535 uschar *ftest_localpart = NULL;
1536 uschar *ftest_prefix = NULL;
1537 uschar *ftest_suffix = NULL;
1538 uschar *log_oneline = NULL;
1539 uschar *malware_test_file = NULL;
1540 uschar *real_sender_address;
1541 uschar *originator_home = US"/";
1542 size_t sz;
1543 void *reset_point;
1544
1545 struct passwd *pw;
1546 struct stat statbuf;
1547 pid_t passed_qr_pid = (pid_t)0;
1548 int passed_qr_pipe = -1;
1549 gid_t group_list[NGROUPS_MAX];
1550
1551 /* For the -bI: flag */
1552 enum commandline_info info_flag = CMDINFO_NONE;
1553 BOOL info_stdout = FALSE;
1554
1555 /* Possible options for -R and -S */
1556
1557 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1558
1559 /* Need to define this in case we need to change the environment in order
1560 to get rid of a bogus time zone. We have to make it char rather than uschar
1561 because some OS define it in /usr/include/unistd.h. */
1562
1563 extern char **environ;
1564
1565 /* If the Exim user and/or group and/or the configuration file owner/group were
1566 defined by ref:name at build time, we must now find the actual uid/gid values.
1567 This is a feature to make the lives of binary distributors easier. */
1568
1569 #ifdef EXIM_USERNAME
1570 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1571   {
1572   if (exim_uid == 0)
1573     {
1574     fprintf(stderr, "exim: refusing to run with uid 0 for \"%s\"\n",
1575       EXIM_USERNAME);
1576     exit(EXIT_FAILURE);
1577     }
1578   /* If ref:name uses a number as the name, route_finduser() returns
1579   TRUE with exim_uid set and pw coerced to NULL. */
1580   if (pw)
1581     exim_gid = pw->pw_gid;
1582 #ifndef EXIM_GROUPNAME
1583   else
1584     {
1585     fprintf(stderr,
1586         "exim: ref:name should specify a usercode, not a group.\n"
1587         "exim: can't let you get away with it unless you also specify a group.\n");
1588     exit(EXIT_FAILURE);
1589     }
1590 #endif
1591   }
1592 else
1593   {
1594   fprintf(stderr, "exim: failed to find uid for user name \"%s\"\n",
1595     EXIM_USERNAME);
1596   exit(EXIT_FAILURE);
1597   }
1598 #endif
1599
1600 #ifdef EXIM_GROUPNAME
1601 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1602   {
1603   fprintf(stderr, "exim: failed to find gid for group name \"%s\"\n",
1604     EXIM_GROUPNAME);
1605   exit(EXIT_FAILURE);
1606   }
1607 #endif
1608
1609 #ifdef CONFIGURE_OWNERNAME
1610 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1611   {
1612   fprintf(stderr, "exim: failed to find uid for user name \"%s\"\n",
1613     CONFIGURE_OWNERNAME);
1614   exit(EXIT_FAILURE);
1615   }
1616 #endif
1617
1618 /* We default the system_filter_user to be the Exim run-time user, as a
1619 sane non-root value. */
1620 system_filter_uid = exim_uid;
1621
1622 #ifdef CONFIGURE_GROUPNAME
1623 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1624   {
1625   fprintf(stderr, "exim: failed to find gid for group name \"%s\"\n",
1626     CONFIGURE_GROUPNAME);
1627   exit(EXIT_FAILURE);
1628   }
1629 #endif
1630
1631 /* In the Cygwin environment, some initialization used to need doing.
1632 It was fudged in by means of this macro; now no longer but we'll leave
1633 it in case of others. */
1634
1635 #ifdef OS_INIT
1636 OS_INIT
1637 #endif
1638
1639 /* Check a field which is patched when we are running Exim within its
1640 testing harness; do a fast initial check, and then the whole thing. */
1641
1642 running_in_test_harness =
1643   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1644
1645 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1646 at the start of a program; however, it seems that some environments do not
1647 follow this. A "strange" locale can affect the formatting of timestamps, so we
1648 make quite sure. */
1649
1650 setlocale(LC_ALL, "C");
1651
1652 /* Set up the default handler for timing using alarm(). */
1653
1654 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1655
1656 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1657 because store_malloc writes a log entry on failure. */
1658
1659 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1660   {
1661   fprintf(stderr, "exim: failed to get store for log buffer\n");
1662   exit(EXIT_FAILURE);
1663   }
1664
1665 /* Initialize the default log options. */
1666
1667 bits_set(log_selector, log_selector_size, log_default);
1668
1669 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1670 NULL when the daemon is run and the file is closed. We have to use this
1671 indirection, because some systems don't allow writing to the variable "stderr".
1672 */
1673
1674 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1675
1676 /* Arrange for the PCRE regex library to use our store functions. Note that
1677 the normal calls are actually macros that add additional arguments for
1678 debugging purposes so we have to assign specially constructed functions here.
1679 The default is to use store in the stacking pool, but this is overridden in the
1680 regex_must_compile() function. */
1681
1682 pcre_malloc = function_store_get;
1683 pcre_free = function_dummy_free;
1684
1685 /* Ensure there is a big buffer for temporary use in several places. It is put
1686 in malloc store so that it can be freed for enlargement if necessary. */
1687
1688 big_buffer = store_malloc(big_buffer_size);
1689
1690 /* Set up the handler for the data request signal, and set the initial
1691 descriptive text. */
1692
1693 set_process_info("initializing");
1694 os_restarting_signal(SIGUSR1, usr1_handler);
1695
1696 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1697 in the daemon code. For the rest of Exim's uses, we ignore it. */
1698
1699 signal(SIGHUP, SIG_IGN);
1700
1701 /* We don't want to die on pipe errors as the code is written to handle
1702 the write error instead. */
1703
1704 signal(SIGPIPE, SIG_IGN);
1705
1706 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1707 set to SIG_IGN. This causes subprocesses that complete before the parent
1708 process waits for them not to hang around, so when Exim calls wait(), nothing
1709 is there. The wait() code has been made robust against this, but let's ensure
1710 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1711 ending status. We use sigaction rather than plain signal() on those OS where
1712 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1713 problem on AIX with this.) */
1714
1715 #ifdef SA_NOCLDWAIT
1716   {
1717   struct sigaction act;
1718   act.sa_handler = SIG_DFL;
1719   sigemptyset(&(act.sa_mask));
1720   act.sa_flags = 0;
1721   sigaction(SIGCHLD, &act, NULL);
1722   }
1723 #else
1724 signal(SIGCHLD, SIG_DFL);
1725 #endif
1726
1727 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1728 SIGHUP. */
1729
1730 sighup_argv = argv;
1731
1732 /* Set up the version number. Set up the leading 'E' for the external form of
1733 message ids, set the pointer to the internal form, and initialize it to
1734 indicate no message being processed. */
1735
1736 version_init();
1737 message_id_option[0] = '-';
1738 message_id_external = message_id_option + 1;
1739 message_id_external[0] = 'E';
1740 message_id = message_id_external + 1;
1741 message_id[0] = 0;
1742
1743 /* Set the umask to zero so that any files Exim creates using open() are
1744 created with the modes that it specifies. NOTE: Files created with fopen() have
1745 a problem, which was not recognized till rather late (February 2006). With this
1746 umask, such files will be world writeable. (They are all content scanning files
1747 in the spool directory, which isn't world-accessible, so this is not a
1748 disaster, but it's untidy.) I don't want to change this overall setting,
1749 however, because it will interact badly with the open() calls. Instead, there's
1750 now a function called modefopen() that fiddles with the umask while calling
1751 fopen(). */
1752
1753 (void)umask(0);
1754
1755 /* Precompile the regular expression for matching a message id. Keep this in
1756 step with the code that generates ids in the accept.c module. We need to do
1757 this here, because the -M options check their arguments for syntactic validity
1758 using mac_ismsgid, which uses this. */
1759
1760 regex_ismsgid =
1761   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
1762
1763 /* Precompile the regular expression that is used for matching an SMTP error
1764 code, possibly extended, at the start of an error message. Note that the
1765 terminating whitespace character is included. */
1766
1767 regex_smtp_code =
1768   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
1769     FALSE, TRUE);
1770
1771 #ifdef WHITELIST_D_MACROS
1772 /* Precompile the regular expression used to filter the content of macros
1773 given to -D for permissibility. */
1774
1775 regex_whitelisted_macro =
1776   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
1777 #endif
1778
1779 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
1780
1781 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
1782 this seems to be a generally accepted convention, since one finds symbolic
1783 links called "mailq" in standard OS configurations. */
1784
1785 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
1786     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
1787   {
1788   list_queue = TRUE;
1789   receiving_message = FALSE;
1790   called_as = US"-mailq";
1791   }
1792
1793 /* If the program is called as "rmail" treat it as equivalent to
1794 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
1795 i.e. preventing a single dot on a line from terminating the message, and
1796 returning with zero return code, even in cases of error (provided an error
1797 message has been sent). */
1798
1799 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
1800     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
1801   {
1802   dot_ends = FALSE;
1803   called_as = US"-rmail";
1804   errors_sender_rc = EXIT_SUCCESS;
1805   }
1806
1807 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
1808 this is a smail convention. */
1809
1810 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
1811     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
1812   {
1813   smtp_input = smtp_batched_input = TRUE;
1814   called_as = US"-rsmtp";
1815   }
1816
1817 /* If the program is called as "runq" treat it as equivalent to "exim -q";
1818 this is a smail convention. */
1819
1820 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
1821     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
1822   {
1823   queue_interval = 0;
1824   receiving_message = FALSE;
1825   called_as = US"-runq";
1826   }
1827
1828 /* If the program is called as "newaliases" treat it as equivalent to
1829 "exim -bi"; this is a sendmail convention. */
1830
1831 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
1832     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
1833   {
1834   bi_option = TRUE;
1835   receiving_message = FALSE;
1836   called_as = US"-newaliases";
1837   }
1838
1839 /* Save the original effective uid for a couple of uses later. It should
1840 normally be root, but in some esoteric environments it may not be. */
1841
1842 original_euid = geteuid();
1843
1844 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
1845 to be the same as the real ones. This makes a difference only if Exim is setuid
1846 (or setgid) to something other than root, which could be the case in some
1847 special configurations. */
1848
1849 real_uid = getuid();
1850 real_gid = getgid();
1851
1852 if (real_uid == root_uid)
1853   {
1854   rv = setgid(real_gid);
1855   if (rv)
1856     {
1857     fprintf(stderr, "exim: setgid(%ld) failed: %s\n",
1858         (long int)real_gid, strerror(errno));
1859     exit(EXIT_FAILURE);
1860     }
1861   rv = setuid(real_uid);
1862   if (rv)
1863     {
1864     fprintf(stderr, "exim: setuid(%ld) failed: %s\n",
1865         (long int)real_uid, strerror(errno));
1866     exit(EXIT_FAILURE);
1867     }
1868   }
1869
1870 /* If neither the original real uid nor the original euid was root, Exim is
1871 running in an unprivileged state. */
1872
1873 unprivileged = (real_uid != root_uid && original_euid != root_uid);
1874
1875 /* Scan the program's arguments. Some can be dealt with right away; others are
1876 simply recorded for checking and handling afterwards. Do a high-level switch
1877 on the second character (the one after '-'), to save some effort. */
1878
1879 for (i = 1; i < argc; i++)
1880   {
1881   BOOL badarg = FALSE;
1882   uschar *arg = argv[i];
1883   uschar *argrest;
1884   int switchchar;
1885
1886   /* An argument not starting with '-' is the start of a recipients list;
1887   break out of the options-scanning loop. */
1888
1889   if (arg[0] != '-')
1890     {
1891     recipients_arg = i;
1892     break;
1893     }
1894
1895   /* An option consisting of -- terminates the options */
1896
1897   if (Ustrcmp(arg, "--") == 0)
1898     {
1899     recipients_arg = i + 1;
1900     break;
1901     }
1902
1903   /* Handle flagged options */
1904
1905   switchchar = arg[1];
1906   argrest = arg+2;
1907
1908   /* Make all -ex options synonymous with -oex arguments, since that
1909   is assumed by various callers. Also make -qR options synonymous with -R
1910   options, as that seems to be required as well. Allow for -qqR too, and
1911   the same for -S options. */
1912
1913   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
1914       Ustrncmp(arg+1, "qR", 2) == 0 ||
1915       Ustrncmp(arg+1, "qS", 2) == 0)
1916     {
1917     switchchar = arg[2];
1918     argrest++;
1919     }
1920   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
1921     {
1922     switchchar = arg[3];
1923     argrest += 2;
1924     queue_2stage = TRUE;
1925     }
1926
1927   /* Make -r synonymous with -f, since it is a documented alias */
1928
1929   else if (arg[1] == 'r') switchchar = 'f';
1930
1931   /* Make -ov synonymous with -v */
1932
1933   else if (Ustrcmp(arg, "-ov") == 0)
1934     {
1935     switchchar = 'v';
1936     argrest++;
1937     }
1938
1939   /* deal with --option_aliases */
1940   else if (switchchar == '-')
1941     {
1942     if (Ustrcmp(argrest, "help") == 0)
1943       {
1944       usage_wanted = TRUE;
1945       break;
1946       }
1947     else if (Ustrcmp(argrest, "version") == 0)
1948       {
1949       switchchar = 'b';
1950       argrest = US"V";
1951       }
1952     }
1953
1954   /* High-level switch on active initial letter */
1955
1956   switch(switchchar)
1957     {
1958
1959     /* sendmail uses -Ac and -Am to control which .cf file is used;
1960     we ignore them. */
1961     case 'A':
1962     if (*argrest == '\0') { badarg = TRUE; break; }
1963     else
1964       {
1965       BOOL ignore = FALSE;
1966       switch (*argrest)
1967         {
1968         case 'c':
1969         case 'm':
1970           if (*(argrest + 1) == '\0')
1971             ignore = TRUE;
1972           break;
1973         }
1974       if (!ignore) { badarg = TRUE; break; }
1975       }
1976     break;
1977
1978     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
1979     so has no need of it. */
1980
1981     case 'B':
1982     if (*argrest == 0) i++;       /* Skip over the type */
1983     break;
1984
1985
1986     case 'b':
1987     receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
1988
1989     /* -bd:  Run in daemon mode, awaiting SMTP connections.
1990        -bdf: Ditto, but in the foreground.
1991     */
1992
1993     if (*argrest == 'd')
1994       {
1995       daemon_listen = TRUE;
1996       if (*(++argrest) == 'f') background_daemon = FALSE;
1997         else if (*argrest != 0) { badarg = TRUE; break; }
1998       }
1999
2000     /* -be:  Run in expansion test mode
2001        -bem: Ditto, but read a message from a file first
2002     */
2003
2004     else if (*argrest == 'e')
2005       {
2006       expansion_test = checking = TRUE;
2007       if (argrest[1] == 'm')
2008         {
2009         if (++i >= argc) { badarg = TRUE; break; }
2010         expansion_test_message = argv[i];
2011         argrest++;
2012         }
2013       if (argrest[1] != 0) { badarg = TRUE; break; }
2014       }
2015
2016     /* -bF:  Run system filter test */
2017
2018     else if (*argrest == 'F')
2019       {
2020       filter_test |= checking = FTEST_SYSTEM;
2021       if (*(++argrest) != 0) { badarg = TRUE; break; }
2022       if (++i < argc) filter_test_sfile = argv[i]; else
2023         {
2024         fprintf(stderr, "exim: file name expected after %s\n", argv[i-1]);
2025         exit(EXIT_FAILURE);
2026         }
2027       }
2028
2029     /* -bf:  Run user filter test
2030        -bfd: Set domain for filter testing
2031        -bfl: Set local part for filter testing
2032        -bfp: Set prefix for filter testing
2033        -bfs: Set suffix for filter testing
2034     */
2035
2036     else if (*argrest == 'f')
2037       {
2038       if (*(++argrest) == 0)
2039         {
2040         filter_test |= checking = FTEST_USER;
2041         if (++i < argc) filter_test_ufile = argv[i]; else
2042           {
2043           fprintf(stderr, "exim: file name expected after %s\n", argv[i-1]);
2044           exit(EXIT_FAILURE);
2045           }
2046         }
2047       else
2048         {
2049         if (++i >= argc)
2050           {
2051           fprintf(stderr, "exim: string expected after %s\n", arg);
2052           exit(EXIT_FAILURE);
2053           }
2054         if (Ustrcmp(argrest, "d") == 0) ftest_domain = argv[i];
2055         else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = argv[i];
2056         else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = argv[i];
2057         else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = argv[i];
2058         else { badarg = TRUE; break; }
2059         }
2060       }
2061
2062     /* -bh: Host checking - an IP address must follow. */
2063
2064     else if (Ustrcmp(argrest, "h") == 0 || Ustrcmp(argrest, "hc") == 0)
2065       {
2066       if (++i >= argc) { badarg = TRUE; break; }
2067       sender_host_address = argv[i];
2068       host_checking = checking = log_testing_mode = TRUE;
2069       host_checking_callout = argrest[1] == 'c';
2070       message_logs = FALSE;
2071       }
2072
2073     /* -bi: This option is used by sendmail to initialize *the* alias file,
2074     though it has the -oA option to specify a different file. Exim has no
2075     concept of *the* alias file, but since Sun's YP make script calls
2076     sendmail this way, some support must be provided. */
2077
2078     else if (Ustrcmp(argrest, "i") == 0) bi_option = TRUE;
2079
2080     /* -bI: provide information, of the type to follow after a colon.
2081     This is an Exim flag. */
2082
2083     else if (argrest[0] == 'I' && Ustrlen(argrest) >= 2 && argrest[1] == ':')
2084       {
2085       uschar *p = &argrest[2];
2086       info_flag = CMDINFO_HELP;
2087       if (Ustrlen(p))
2088         {
2089         if (strcmpic(p, CUS"sieve") == 0)
2090           {
2091           info_flag = CMDINFO_SIEVE;
2092           info_stdout = TRUE;
2093           }
2094         else if (strcmpic(p, CUS"dscp") == 0)
2095           {
2096           info_flag = CMDINFO_DSCP;
2097           info_stdout = TRUE;
2098           }
2099         else if (strcmpic(p, CUS"help") == 0)
2100           {
2101           info_stdout = TRUE;
2102           }
2103         }
2104       }
2105
2106     /* -bm: Accept and deliver message - the default option. Reinstate
2107     receiving_message, which got turned off for all -b options. */
2108
2109     else if (Ustrcmp(argrest, "m") == 0) receiving_message = TRUE;
2110
2111     /* -bmalware: test the filename given for malware */
2112
2113     else if (Ustrcmp(argrest, "malware") == 0)
2114       {
2115       if (++i >= argc) { badarg = TRUE; break; }
2116       checking = TRUE;
2117       malware_test_file = argv[i];
2118       }
2119
2120     /* -bnq: For locally originating messages, do not qualify unqualified
2121     addresses. In the envelope, this causes errors; in header lines they
2122     just get left. */
2123
2124     else if (Ustrcmp(argrest, "nq") == 0)
2125       {
2126       allow_unqualified_sender = FALSE;
2127       allow_unqualified_recipient = FALSE;
2128       }
2129
2130     /* -bpxx: List the contents of the mail queue, in various forms. If
2131     the option is -bpc, just a queue count is needed. Otherwise, if the
2132     first letter after p is r, then order is random. */
2133
2134     else if (*argrest == 'p')
2135       {
2136       if (*(++argrest) == 'c')
2137         {
2138         count_queue = TRUE;
2139         if (*(++argrest) != 0) badarg = TRUE;
2140         break;
2141         }
2142
2143       if (*argrest == 'r')
2144         {
2145         list_queue_option = 8;
2146         argrest++;
2147         }
2148       else list_queue_option = 0;
2149
2150       list_queue = TRUE;
2151
2152       /* -bp: List the contents of the mail queue, top-level only */
2153
2154       if (*argrest == 0) {}
2155
2156       /* -bpu: List the contents of the mail queue, top-level undelivered */
2157
2158       else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2159
2160       /* -bpa: List the contents of the mail queue, including all delivered */
2161
2162       else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2163
2164       /* Unknown after -bp[r] */
2165
2166       else
2167         {
2168         badarg = TRUE;
2169         break;
2170         }
2171       }
2172
2173
2174     /* -bP: List the configuration variables given as the address list.
2175     Force -v, so configuration errors get displayed. */
2176
2177     else if (Ustrcmp(argrest, "P") == 0)
2178       {
2179       /* -bP config: we need to setup here, because later,
2180        * when list_options is checked, the config is read already */
2181       if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2182         {
2183         list_config = TRUE;
2184         readconf_save_config(version_string);
2185         }
2186       else
2187         {
2188         list_options = TRUE;
2189         debug_selector |= D_v;
2190         debug_file = stderr;
2191         }
2192       }
2193
2194     /* -brt: Test retry configuration lookup */
2195
2196     else if (Ustrcmp(argrest, "rt") == 0)
2197       {
2198       checking = TRUE;
2199       test_retry_arg = i + 1;
2200       goto END_ARG;
2201       }
2202
2203     /* -brw: Test rewrite configuration */
2204
2205     else if (Ustrcmp(argrest, "rw") == 0)
2206       {
2207       checking = TRUE;
2208       test_rewrite_arg = i + 1;
2209       goto END_ARG;
2210       }
2211
2212     /* -bS: Read SMTP commands on standard input, but produce no replies -
2213     all errors are reported by sending messages. */
2214
2215     else if (Ustrcmp(argrest, "S") == 0)
2216       smtp_input = smtp_batched_input = receiving_message = TRUE;
2217
2218     /* -bs: Read SMTP commands on standard input and produce SMTP replies
2219     on standard output. */
2220
2221     else if (Ustrcmp(argrest, "s") == 0) smtp_input = receiving_message = TRUE;
2222
2223     /* -bt: address testing mode */
2224
2225     else if (Ustrcmp(argrest, "t") == 0)
2226       address_test_mode = checking = log_testing_mode = TRUE;
2227
2228     /* -bv: verify addresses */
2229
2230     else if (Ustrcmp(argrest, "v") == 0)
2231       verify_address_mode = checking = log_testing_mode = TRUE;
2232
2233     /* -bvs: verify sender addresses */
2234
2235     else if (Ustrcmp(argrest, "vs") == 0)
2236       {
2237       verify_address_mode = checking = log_testing_mode = TRUE;
2238       verify_as_sender = TRUE;
2239       }
2240
2241     /* -bV: Print version string and support details */
2242
2243     else if (Ustrcmp(argrest, "V") == 0)
2244       {
2245       printf("Exim version %s #%s built %s\n", version_string,
2246         version_cnumber, version_date);
2247       printf("%s\n", CS version_copyright);
2248       version_printed = TRUE;
2249       show_whats_supported(stdout);
2250       log_testing_mode = TRUE;
2251       }
2252
2253     /* -bw: inetd wait mode, accept a listening socket as stdin */
2254
2255     else if (*argrest == 'w')
2256       {
2257       inetd_wait_mode = TRUE;
2258       background_daemon = FALSE;
2259       daemon_listen = TRUE;
2260       if (*(++argrest) != '\0')
2261         {
2262         inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE);
2263         if (inetd_wait_timeout <= 0)
2264           {
2265           fprintf(stderr, "exim: bad time value %s: abandoned\n", argv[i]);
2266           exit(EXIT_FAILURE);
2267           }
2268         }
2269       }
2270
2271     else badarg = TRUE;
2272     break;
2273
2274
2275     /* -C: change configuration file list; ignore if it isn't really
2276     a change! Enforce a prefix check if required. */
2277
2278     case 'C':
2279     if (*argrest == 0)
2280       {
2281       if(++i < argc) argrest = argv[i]; else
2282         { badarg = TRUE; break; }
2283       }
2284     if (Ustrcmp(config_main_filelist, argrest) != 0)
2285       {
2286       #ifdef ALT_CONFIG_PREFIX
2287       int sep = 0;
2288       int len = Ustrlen(ALT_CONFIG_PREFIX);
2289       const uschar *list = argrest;
2290       uschar *filename;
2291       while((filename = string_nextinlist(&list, &sep, big_buffer,
2292              big_buffer_size)) != NULL)
2293         {
2294         if ((Ustrlen(filename) < len ||
2295              Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0 ||
2296              Ustrstr(filename, "/../") != NULL) &&
2297              (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid))
2298           {
2299           fprintf(stderr, "-C Permission denied\n");
2300           exit(EXIT_FAILURE);
2301           }
2302         }
2303       #endif
2304       if (real_uid != root_uid)
2305         {
2306         #ifdef TRUSTED_CONFIG_LIST
2307
2308         if (real_uid != exim_uid
2309             #ifdef CONFIGURE_OWNER
2310             && real_uid != config_uid
2311             #endif
2312             )
2313           trusted_config = FALSE;
2314         else
2315           {
2316           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2317           if (trust_list)
2318             {
2319             struct stat statbuf;
2320
2321             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2322                 (statbuf.st_uid != root_uid        /* owner not root */
2323                  #ifdef CONFIGURE_OWNER
2324                  && statbuf.st_uid != config_uid   /* owner not the special one */
2325                  #endif
2326                    ) ||                            /* or */
2327                 (statbuf.st_gid != root_gid        /* group not root */
2328                  #ifdef CONFIGURE_GROUP
2329                  && statbuf.st_gid != config_gid   /* group not the special one */
2330                  #endif
2331                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2332                    ) ||                            /* or */
2333                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2334               {
2335               trusted_config = FALSE;
2336               fclose(trust_list);
2337               }
2338             else
2339               {
2340               /* Well, the trust list at least is up to scratch... */
2341               void *reset_point = store_get(0);
2342               uschar *trusted_configs[32];
2343               int nr_configs = 0;
2344               int i = 0;
2345
2346               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2347                 {
2348                 uschar *start = big_buffer, *nl;
2349                 while (*start && isspace(*start))
2350                 start++;
2351                 if (*start != '/')
2352                   continue;
2353                 nl = Ustrchr(start, '\n');
2354                 if (nl)
2355                   *nl = 0;
2356                 trusted_configs[nr_configs++] = string_copy(start);
2357                 if (nr_configs == 32)
2358                   break;
2359                 }
2360               fclose(trust_list);
2361
2362               if (nr_configs)
2363                 {
2364                 int sep = 0;
2365                 const uschar *list = argrest;
2366                 uschar *filename;
2367                 while (trusted_config && (filename = string_nextinlist(&list,
2368                         &sep, big_buffer, big_buffer_size)) != NULL)
2369                   {
2370                   for (i=0; i < nr_configs; i++)
2371                     {
2372                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2373                       break;
2374                     }
2375                   if (i == nr_configs)
2376                     {
2377                     trusted_config = FALSE;
2378                     break;
2379                     }
2380                   }
2381                 store_reset(reset_point);
2382                 }
2383               else
2384                 {
2385                 /* No valid prefixes found in trust_list file. */
2386                 trusted_config = FALSE;
2387                 }
2388               }
2389             }
2390           else
2391             {
2392             /* Could not open trust_list file. */
2393             trusted_config = FALSE;
2394             }
2395           }
2396       #else
2397         /* Not root; don't trust config */
2398         trusted_config = FALSE;
2399       #endif
2400         }
2401
2402       config_main_filelist = argrest;
2403       config_changed = TRUE;
2404       }
2405     break;
2406
2407
2408     /* -D: set up a macro definition */
2409
2410     case 'D':
2411     #ifdef DISABLE_D_OPTION
2412     fprintf(stderr, "exim: -D is not available in this Exim binary\n");
2413     exit(EXIT_FAILURE);
2414     #else
2415       {
2416       int ptr = 0;
2417       macro_item *m;
2418       uschar name[24];
2419       uschar *s = argrest;
2420
2421       opt_D_used = TRUE;
2422       while (isspace(*s)) s++;
2423
2424       if (*s < 'A' || *s > 'Z')
2425         {
2426         fprintf(stderr, "exim: macro name set by -D must start with "
2427           "an upper case letter\n");
2428         exit(EXIT_FAILURE);
2429         }
2430
2431       while (isalnum(*s) || *s == '_')
2432         {
2433         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2434         s++;
2435         }
2436       name[ptr] = 0;
2437       if (ptr == 0) { badarg = TRUE; break; }
2438       while (isspace(*s)) s++;
2439       if (*s != 0)
2440         {
2441         if (*s++ != '=') { badarg = TRUE; break; }
2442         while (isspace(*s)) s++;
2443         }
2444
2445       for (m = macros; m; m = m->next)
2446         if (Ustrcmp(m->name, name) == 0)
2447           {
2448           fprintf(stderr, "exim: duplicated -D in command line\n");
2449           exit(EXIT_FAILURE);
2450           }
2451
2452       m = macro_create(string_copy(name), string_copy(s), TRUE);
2453
2454       if (clmacro_count >= MAX_CLMACROS)
2455         {
2456         fprintf(stderr, "exim: too many -D options on command line\n");
2457         exit(EXIT_FAILURE);
2458         }
2459       clmacros[clmacro_count++] = string_sprintf("-D%s=%s", m->name,
2460         m->replacement);
2461       }
2462     #endif
2463     break;
2464
2465     /* -d: Set debug level (see also -v below) or set the drop_cr option.
2466     The latter is now a no-op, retained for compatibility only. If -dd is used,
2467     debugging subprocesses of the daemon is disabled. */
2468
2469     case 'd':
2470     if (Ustrcmp(argrest, "ropcr") == 0)
2471       {
2472       /* drop_cr = TRUE; */
2473       }
2474
2475     /* Use an intermediate variable so that we don't set debugging while
2476     decoding the debugging bits. */
2477
2478     else
2479       {
2480       unsigned int selector = D_default;
2481       debug_selector = 0;
2482       debug_file = NULL;
2483       if (*argrest == 'd')
2484         {
2485         debug_daemon = TRUE;
2486         argrest++;
2487         }
2488       if (*argrest != 0)
2489         decode_bits(&selector, 1, debug_notall, argrest,
2490           debug_options, debug_options_count, US"debug", 0);
2491       debug_selector = selector;
2492       }
2493     break;
2494
2495
2496     /* -E: This is a local error message. This option is not intended for
2497     external use at all, but is not restricted to trusted callers because it
2498     does no harm (just suppresses certain error messages) and if Exim is run
2499     not setuid root it won't always be trusted when it generates error
2500     messages using this option. If there is a message id following -E, point
2501     message_reference at it, for logging. */
2502
2503     case 'E':
2504     local_error_message = TRUE;
2505     if (mac_ismsgid(argrest)) message_reference = argrest;
2506     break;
2507
2508
2509     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2510     option, so it looks as if historically the -oex options are also callable
2511     without the leading -o. So we have to accept them. Before the switch,
2512     anything starting -oe has been converted to -e. Exim does not support all
2513     of the sendmail error options. */
2514
2515     case 'e':
2516     if (Ustrcmp(argrest, "e") == 0)
2517       {
2518       arg_error_handling = ERRORS_SENDER;
2519       errors_sender_rc = EXIT_SUCCESS;
2520       }
2521     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2522     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2523     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2524     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2525     else badarg = TRUE;
2526     break;
2527
2528
2529     /* -F: Set sender's full name, used instead of the gecos entry from
2530     the password file. Since users can usually alter their gecos entries,
2531     there's no security involved in using this instead. The data can follow
2532     the -F or be in the next argument. */
2533
2534     case 'F':
2535     if (*argrest == 0)
2536       {
2537       if(++i < argc) argrest = argv[i]; else
2538         { badarg = TRUE; break; }
2539       }
2540     originator_name = argrest;
2541     sender_name_forced = TRUE;
2542     break;
2543
2544
2545     /* -f: Set sender's address - this value is only actually used if Exim is
2546     run by a trusted user, or if untrusted_set_sender is set and matches the
2547     address, except that the null address can always be set by any user. The
2548     test for this happens later, when the value given here is ignored when not
2549     permitted. For an untrusted user, the actual sender is still put in Sender:
2550     if it doesn't match the From: header (unless no_local_from_check is set).
2551     The data can follow the -f or be in the next argument. The -r switch is an
2552     obsolete form of -f but since there appear to be programs out there that
2553     use anything that sendmail has ever supported, better accept it - the
2554     synonymizing is done before the switch above.
2555
2556     At this stage, we must allow domain literal addresses, because we don't
2557     know what the setting of allow_domain_literals is yet. Ditto for trailing
2558     dots and strip_trailing_dot. */
2559
2560     case 'f':
2561       {
2562       int dummy_start, dummy_end;
2563       uschar *errmess;
2564       if (*argrest == 0)
2565         {
2566         if (i+1 < argc) argrest = argv[++i]; else
2567           { badarg = TRUE; break; }
2568         }
2569       if (*argrest == 0)
2570         sender_address = string_sprintf("");  /* Ensure writeable memory */
2571       else
2572         {
2573         uschar *temp = argrest + Ustrlen(argrest) - 1;
2574         while (temp >= argrest && isspace(*temp)) temp--;
2575         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2576         allow_domain_literals = TRUE;
2577         strip_trailing_dot = TRUE;
2578 #ifdef SUPPORT_I18N
2579         allow_utf8_domains = TRUE;
2580 #endif
2581         sender_address = parse_extract_address(argrest, &errmess,
2582           &dummy_start, &dummy_end, &sender_address_domain, TRUE);
2583 #ifdef SUPPORT_I18N
2584         message_smtputf8 =  string_is_utf8(sender_address);
2585         allow_utf8_domains = FALSE;
2586 #endif
2587         allow_domain_literals = FALSE;
2588         strip_trailing_dot = FALSE;
2589         if (sender_address == NULL)
2590           {
2591           fprintf(stderr, "exim: bad -f address \"%s\": %s\n", argrest, errmess);
2592           return EXIT_FAILURE;
2593           }
2594         }
2595       sender_address_forced = TRUE;
2596       }
2597     break;
2598
2599     /* -G: sendmail invocation to specify that it's a gateway submission and
2600     sendmail may complain about problems instead of fixing them.
2601     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2602     not at this time complain about problems. */
2603
2604     case 'G':
2605     flag_G = TRUE;
2606     break;
2607
2608     /* -h: Set the hop count for an incoming message. Exim does not currently
2609     support this; it always computes it by counting the Received: headers.
2610     To put it in will require a change to the spool header file format. */
2611
2612     case 'h':
2613     if (*argrest == 0)
2614       {
2615       if(++i < argc) argrest = argv[i]; else
2616         { badarg = TRUE; break; }
2617       }
2618     if (!isdigit(*argrest)) badarg = TRUE;
2619     break;
2620
2621
2622     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2623     not to be documented for sendmail but mailx (at least) uses it) */
2624
2625     case 'i':
2626     if (*argrest == 0) dot_ends = FALSE; else badarg = TRUE;
2627     break;
2628
2629
2630     /* -L: set the identifier used for syslog; equivalent to setting
2631     syslog_processname in the config file, but needs to be an admin option. */
2632
2633     case 'L':
2634     if (*argrest == '\0')
2635       {
2636       if(++i < argc) argrest = argv[i]; else
2637         { badarg = TRUE; break; }
2638       }
2639     sz = Ustrlen(argrest);
2640     if (sz > 32)
2641       {
2642       fprintf(stderr, "exim: the -L syslog name is too long: \"%s\"\n", argrest);
2643       return EXIT_FAILURE;
2644       }
2645     if (sz < 1)
2646       {
2647       fprintf(stderr, "exim: the -L syslog name is too short\n");
2648       return EXIT_FAILURE;
2649       }
2650     cmdline_syslog_name = argrest;
2651     break;
2652
2653     case 'M':
2654     receiving_message = FALSE;
2655
2656     /* -MC:  continue delivery of another message via an existing open
2657     file descriptor. This option is used for an internal call by the
2658     smtp transport when there is a pending message waiting to go to an
2659     address to which it has got a connection. Five subsequent arguments are
2660     required: transport name, host name, IP address, sequence number, and
2661     message_id. Transports may decline to create new processes if the sequence
2662     number gets too big. The channel is stdin. This (-MC) must be the last
2663     argument. There's a subsequent check that the real-uid is privileged.
2664
2665     If we are running in the test harness. delay for a bit, to let the process
2666     that set this one up complete. This makes for repeatability of the logging,
2667     etc. output. */
2668
2669     if (Ustrcmp(argrest, "C") == 0)
2670       {
2671       union sockaddr_46 interface_sock;
2672       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2673
2674       if (argc != i + 6)
2675         {
2676         fprintf(stderr, "exim: too many or too few arguments after -MC\n");
2677         return EXIT_FAILURE;
2678         }
2679
2680       if (msg_action_arg >= 0)
2681         {
2682         fprintf(stderr, "exim: incompatible arguments\n");
2683         return EXIT_FAILURE;
2684         }
2685
2686       continue_transport = argv[++i];
2687       continue_hostname = argv[++i];
2688       continue_host_address = argv[++i];
2689       continue_sequence = Uatoi(argv[++i]);
2690       msg_action = MSG_DELIVER;
2691       msg_action_arg = ++i;
2692       forced_delivery = TRUE;
2693       queue_run_pid = passed_qr_pid;
2694       queue_run_pipe = passed_qr_pipe;
2695
2696       if (!mac_ismsgid(argv[i]))
2697         {
2698         fprintf(stderr, "exim: malformed message id %s after -MC option\n",
2699           argv[i]);
2700         return EXIT_FAILURE;
2701         }
2702
2703       /* Set up $sending_ip_address and $sending_port, unless proxied */
2704
2705       if (!continue_proxy_cipher)
2706         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2707             &size) == 0)
2708           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2709             &sending_port);
2710         else
2711           {
2712           fprintf(stderr, "exim: getsockname() failed after -MC option: %s\n",
2713             strerror(errno));
2714           return EXIT_FAILURE;
2715           }
2716
2717       if (running_in_test_harness) millisleep(500);
2718       break;
2719       }
2720
2721     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2722       {
2723       switch(argrest[1])
2724         {
2725     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2726     precedes -MC (see above). The flag indicates that the host to which
2727     Exim is connected has accepted an AUTH sequence. */
2728
2729         case 'A': smtp_authenticated = TRUE; break;
2730
2731     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2732        that exim is connected to supports the esmtp extension DSN */
2733
2734         case 'D': smtp_peer_options |= OPTION_DSN; break;
2735
2736     /* -MCG: set the queue name, to a non-default value */
2737
2738         case 'G': if (++i < argc) queue_name = string_copy(argv[i]);
2739                   else badarg = TRUE;
2740                   break;
2741
2742     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2743
2744         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2745
2746     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2747     it preceded -MC (see above) */
2748
2749         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2750
2751     /* -MCQ: pass on the pid of the queue-running process that started
2752     this chain of deliveries and the fd of its synchronizing pipe; this
2753     is useful only when it precedes -MC (see above) */
2754
2755         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
2756                   else badarg = TRUE;
2757                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
2758                   else badarg = TRUE;
2759                   break;
2760
2761     /* -MCS: set the smtp_use_size flag; this is useful only when it
2762     precedes -MC (see above) */
2763
2764         case 'S': smtp_peer_options |= OPTION_SIZE; break;
2765
2766 #ifdef SUPPORT_TLS
2767     /* -MCt: similar to -MCT below but the connection is still open
2768     via a proxy proces which handles the TLS context and coding.
2769     Require three arguments for the proxied local address and port,
2770     and the TLS cipher.  */
2771
2772         case 't': if (++i < argc) sending_ip_address = argv[i];
2773                   else badarg = TRUE;
2774                   if (++i < argc) sending_port = (int)(Uatol(argv[i]));
2775                   else badarg = TRUE;
2776                   if (++i < argc) continue_proxy_cipher = argv[i];
2777                   else badarg = TRUE;
2778                   /*FALLTHROUGH*/
2779
2780     /* -MCT: set the tls_offered flag; this is useful only when it
2781     precedes -MC (see above). The flag indicates that the host to which
2782     Exim is connected has offered TLS support. */
2783
2784         case 'T': smtp_peer_options |= OPTION_TLS; break;
2785 #endif
2786
2787         default:  badarg = TRUE; break;
2788         }
2789         break;
2790       }
2791
2792     /* -M[x]: various operations on the following list of message ids:
2793        -M    deliver the messages, ignoring next retry times and thawing
2794        -Mc   deliver the messages, checking next retry times, no thawing
2795        -Mf   freeze the messages
2796        -Mg   give up on the messages
2797        -Mt   thaw the messages
2798        -Mrm  remove the messages
2799     In the above cases, this must be the last option. There are also the
2800     following options which are followed by a single message id, and which
2801     act on that message. Some of them use the "recipient" addresses as well.
2802        -Mar  add recipient(s)
2803        -Mmad mark all recipients delivered
2804        -Mmd  mark recipients(s) delivered
2805        -Mes  edit sender
2806        -Mset load a message for use with -be
2807        -Mvb  show body
2808        -Mvc  show copy (of whole message, in RFC 2822 format)
2809        -Mvh  show header
2810        -Mvl  show log
2811     */
2812
2813     else if (*argrest == 0)
2814       {
2815       msg_action = MSG_DELIVER;
2816       forced_delivery = deliver_force_thaw = TRUE;
2817       }
2818     else if (Ustrcmp(argrest, "ar") == 0)
2819       {
2820       msg_action = MSG_ADD_RECIPIENT;
2821       one_msg_action = TRUE;
2822       }
2823     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
2824     else if (Ustrcmp(argrest, "es") == 0)
2825       {
2826       msg_action = MSG_EDIT_SENDER;
2827       one_msg_action = TRUE;
2828       }
2829     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
2830     else if (Ustrcmp(argrest, "g") == 0)
2831       {
2832       msg_action = MSG_DELIVER;
2833       deliver_give_up = TRUE;
2834       }
2835     else if (Ustrcmp(argrest, "mad") == 0)
2836       {
2837       msg_action = MSG_MARK_ALL_DELIVERED;
2838       }
2839     else if (Ustrcmp(argrest, "md") == 0)
2840       {
2841       msg_action = MSG_MARK_DELIVERED;
2842       one_msg_action = TRUE;
2843       }
2844     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
2845     else if (Ustrcmp(argrest, "set") == 0)
2846       {
2847       msg_action = MSG_LOAD;
2848       one_msg_action = TRUE;
2849       }
2850     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
2851     else if (Ustrcmp(argrest, "vb") == 0)
2852       {
2853       msg_action = MSG_SHOW_BODY;
2854       one_msg_action = TRUE;
2855       }
2856     else if (Ustrcmp(argrest, "vc") == 0)
2857       {
2858       msg_action = MSG_SHOW_COPY;
2859       one_msg_action = TRUE;
2860       }
2861     else if (Ustrcmp(argrest, "vh") == 0)
2862       {
2863       msg_action = MSG_SHOW_HEADER;
2864       one_msg_action = TRUE;
2865       }
2866     else if (Ustrcmp(argrest, "vl") == 0)
2867       {
2868       msg_action = MSG_SHOW_LOG;
2869       one_msg_action = TRUE;
2870       }
2871     else { badarg = TRUE; break; }
2872
2873     /* All the -Mxx options require at least one message id. */
2874
2875     msg_action_arg = i + 1;
2876     if (msg_action_arg >= argc)
2877       {
2878       fprintf(stderr, "exim: no message ids given after %s option\n", arg);
2879       return EXIT_FAILURE;
2880       }
2881
2882     /* Some require only message ids to follow */
2883
2884     if (!one_msg_action)
2885       {
2886       int j;
2887       for (j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
2888         {
2889         fprintf(stderr, "exim: malformed message id %s after %s option\n",
2890           argv[j], arg);
2891         return EXIT_FAILURE;
2892         }
2893       goto END_ARG;   /* Remaining args are ids */
2894       }
2895
2896     /* Others require only one message id, possibly followed by addresses,
2897     which will be handled as normal arguments. */
2898
2899     else
2900       {
2901       if (!mac_ismsgid(argv[msg_action_arg]))
2902         {
2903         fprintf(stderr, "exim: malformed message id %s after %s option\n",
2904           argv[msg_action_arg], arg);
2905         return EXIT_FAILURE;
2906         }
2907       i++;
2908       }
2909     break;
2910
2911
2912     /* Some programs seem to call the -om option without the leading o;
2913     for sendmail it askes for "me too". Exim always does this. */
2914
2915     case 'm':
2916     if (*argrest != 0) badarg = TRUE;
2917     break;
2918
2919
2920     /* -N: don't do delivery - a debugging option that stops transports doing
2921     their thing. It implies debugging at the D_v level. */
2922
2923     case 'N':
2924     if (*argrest == 0)
2925       {
2926       dont_deliver = TRUE;
2927       debug_selector |= D_v;
2928       debug_file = stderr;
2929       }
2930     else badarg = TRUE;
2931     break;
2932
2933
2934     /* -n: This means "don't alias" in sendmail, apparently.
2935     For normal invocations, it has no effect.
2936     It may affect some other options. */
2937
2938     case 'n':
2939     flag_n = TRUE;
2940     break;
2941
2942     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
2943     option to the specified value. This form uses long names. We need to handle
2944     -O option=value and -Ooption=value. */
2945
2946     case 'O':
2947     if (*argrest == 0)
2948       {
2949       if (++i >= argc)
2950         {
2951         fprintf(stderr, "exim: string expected after -O\n");
2952         exit(EXIT_FAILURE);
2953         }
2954       }
2955     break;
2956
2957     case 'o':
2958
2959     /* -oA: Set an argument for the bi command (sendmail's "alternate alias
2960     file" option). */
2961
2962     if (*argrest == 'A')
2963       {
2964       alias_arg = argrest + 1;
2965       if (alias_arg[0] == 0)
2966         {
2967         if (i+1 < argc) alias_arg = argv[++i]; else
2968           {
2969           fprintf(stderr, "exim: string expected after -oA\n");
2970           exit(EXIT_FAILURE);
2971           }
2972         }
2973       }
2974
2975     /* -oB: Set a connection message max value for remote deliveries */
2976
2977     else if (*argrest == 'B')
2978       {
2979       uschar *p = argrest + 1;
2980       if (p[0] == 0)
2981         {
2982         if (i+1 < argc && isdigit((argv[i+1][0]))) p = argv[++i]; else
2983           {
2984           connection_max_messages = 1;
2985           p = NULL;
2986           }
2987         }
2988
2989       if (p != NULL)
2990         {
2991         if (!isdigit(*p))
2992           {
2993           fprintf(stderr, "exim: number expected after -oB\n");
2994           exit(EXIT_FAILURE);
2995           }
2996         connection_max_messages = Uatoi(p);
2997         }
2998       }
2999
3000     /* -odb: background delivery */
3001
3002     else if (Ustrcmp(argrest, "db") == 0)
3003       {
3004       synchronous_delivery = FALSE;
3005       arg_queue_only = FALSE;
3006       queue_only_set = TRUE;
3007       }
3008
3009     /* -odf: foreground delivery (smail-compatible option); same effect as
3010        -odi: interactive (synchronous) delivery (sendmail-compatible option)
3011     */
3012
3013     else if (Ustrcmp(argrest, "df") == 0 || Ustrcmp(argrest, "di") == 0)
3014       {
3015       synchronous_delivery = TRUE;
3016       arg_queue_only = FALSE;
3017       queue_only_set = TRUE;
3018       }
3019
3020     /* -odq: queue only */
3021
3022     else if (Ustrcmp(argrest, "dq") == 0)
3023       {
3024       synchronous_delivery = FALSE;
3025       arg_queue_only = TRUE;
3026       queue_only_set = TRUE;
3027       }
3028
3029     /* -odqs: queue SMTP only - do local deliveries and remote routing,
3030     but no remote delivery */
3031
3032     else if (Ustrcmp(argrest, "dqs") == 0)
3033       {
3034       queue_smtp = TRUE;
3035       arg_queue_only = FALSE;
3036       queue_only_set = TRUE;
3037       }
3038
3039     /* -oex: Sendmail error flags. As these are also accepted without the
3040     leading -o prefix, for compatibility with vacation and other callers,
3041     they are handled with -e above. */
3042
3043     /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3044        -oitrue: Another sendmail syntax for the same */
3045
3046     else if (Ustrcmp(argrest, "i") == 0 ||
3047              Ustrcmp(argrest, "itrue") == 0)
3048       dot_ends = FALSE;
3049
3050     /* -oM*: Set various characteristics for an incoming message; actually
3051     acted on for trusted callers only. */
3052
3053     else if (*argrest == 'M')
3054       {
3055       if (i+1 >= argc)
3056         {
3057         fprintf(stderr, "exim: data expected after -o%s\n", argrest);
3058         exit(EXIT_FAILURE);
3059         }
3060
3061       /* -oMa: Set sender host address */
3062
3063       if (Ustrcmp(argrest, "Ma") == 0) sender_host_address = argv[++i];
3064
3065       /* -oMaa: Set authenticator name */
3066
3067       else if (Ustrcmp(argrest, "Maa") == 0)
3068         sender_host_authenticated = argv[++i];
3069
3070       /* -oMas: setting authenticated sender */
3071
3072       else if (Ustrcmp(argrest, "Mas") == 0) authenticated_sender = argv[++i];
3073
3074       /* -oMai: setting authenticated id */
3075
3076       else if (Ustrcmp(argrest, "Mai") == 0) authenticated_id = argv[++i];
3077
3078       /* -oMi: Set incoming interface address */
3079
3080       else if (Ustrcmp(argrest, "Mi") == 0) interface_address = argv[++i];
3081
3082       /* -oMm: Message reference */
3083
3084       else if (Ustrcmp(argrest, "Mm") == 0)
3085         {
3086         if (!mac_ismsgid(argv[i+1]))
3087           {
3088             fprintf(stderr,"-oMm must be a valid message ID\n");
3089             exit(EXIT_FAILURE);
3090           }
3091         if (!trusted_config)
3092           {
3093             fprintf(stderr,"-oMm must be called by a trusted user/config\n");
3094             exit(EXIT_FAILURE);
3095           }
3096           message_reference = argv[++i];
3097         }
3098
3099       /* -oMr: Received protocol */
3100
3101       else if (Ustrcmp(argrest, "Mr") == 0)
3102
3103         if (received_protocol)
3104           {
3105           fprintf(stderr, "received_protocol is set already\n");
3106           exit(EXIT_FAILURE);
3107           }
3108         else received_protocol = argv[++i];
3109
3110       /* -oMs: Set sender host name */
3111
3112       else if (Ustrcmp(argrest, "Ms") == 0) sender_host_name = argv[++i];
3113
3114       /* -oMt: Set sender ident */
3115
3116       else if (Ustrcmp(argrest, "Mt") == 0)
3117         {
3118         sender_ident_set = TRUE;
3119         sender_ident = argv[++i];
3120         }
3121
3122       /* Else a bad argument */
3123
3124       else
3125         {
3126         badarg = TRUE;
3127         break;
3128         }
3129       }
3130
3131     /* -om: Me-too flag for aliases. Exim always does this. Some programs
3132     seem to call this as -m (undocumented), so that is also accepted (see
3133     above). */
3134
3135     else if (Ustrcmp(argrest, "m") == 0) {}
3136
3137     /* -oo: An ancient flag for old-style addresses which still seems to
3138     crop up in some calls (see in SCO). */
3139
3140     else if (Ustrcmp(argrest, "o") == 0) {}
3141
3142     /* -oP <name>: set pid file path for daemon */
3143
3144     else if (Ustrcmp(argrest, "P") == 0)
3145       override_pid_file_path = argv[++i];
3146
3147     /* -or <n>: set timeout for non-SMTP acceptance
3148        -os <n>: set timeout for SMTP acceptance */
3149
3150     else if (*argrest == 'r' || *argrest == 's')
3151       {
3152       int *tp = (*argrest == 'r')?
3153         &arg_receive_timeout : &arg_smtp_receive_timeout;
3154       if (argrest[1] == 0)
3155         {
3156         if (i+1 < argc) *tp= readconf_readtime(argv[++i], 0, FALSE);
3157         }
3158       else *tp = readconf_readtime(argrest + 1, 0, FALSE);
3159       if (*tp < 0)
3160         {
3161         fprintf(stderr, "exim: bad time value %s: abandoned\n", argv[i]);
3162         exit(EXIT_FAILURE);
3163         }
3164       }
3165
3166     /* -oX <list>: Override local_interfaces and/or default daemon ports */
3167
3168     else if (Ustrcmp(argrest, "X") == 0)
3169       override_local_interfaces = argv[++i];
3170
3171     /* Unknown -o argument */
3172
3173     else badarg = TRUE;
3174     break;
3175
3176
3177     /* -ps: force Perl startup; -pd force delayed Perl startup */
3178
3179     case 'p':
3180     #ifdef EXIM_PERL
3181     if (*argrest == 's' && argrest[1] == 0)
3182       {
3183       perl_start_option = 1;
3184       break;
3185       }
3186     if (*argrest == 'd' && argrest[1] == 0)
3187       {
3188       perl_start_option = -1;
3189       break;
3190       }
3191     #endif
3192
3193     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3194     which sets the host protocol and host name */
3195
3196     if (*argrest == 0)
3197       {
3198       if (i+1 < argc) argrest = argv[++i]; else
3199         { badarg = TRUE; break; }
3200       }
3201
3202     if (*argrest != 0)
3203       {
3204       uschar *hn;
3205
3206       if (received_protocol)
3207         {
3208         fprintf(stderr, "received_protocol is set already\n");
3209         exit(EXIT_FAILURE);
3210         }
3211
3212       hn = Ustrchr(argrest, ':');
3213       if (hn == NULL)
3214         {
3215         received_protocol = argrest;
3216         }
3217       else
3218         {
3219         int old_pool = store_pool;
3220         store_pool = POOL_PERM;
3221         received_protocol = string_copyn(argrest, hn - argrest);
3222         store_pool = old_pool;
3223         sender_host_name = hn + 1;
3224         }
3225       }
3226     break;
3227
3228
3229     case 'q':
3230     receiving_message = FALSE;
3231     if (queue_interval >= 0)
3232       {
3233       fprintf(stderr, "exim: -q specified more than once\n");
3234       exit(EXIT_FAILURE);
3235       }
3236
3237     /* -qq...: Do queue runs in a 2-stage manner */
3238
3239     if (*argrest == 'q')
3240       {
3241       queue_2stage = TRUE;
3242       argrest++;
3243       }
3244
3245     /* -qi...: Do only first (initial) deliveries */
3246
3247     if (*argrest == 'i')
3248       {
3249       queue_run_first_delivery = TRUE;
3250       argrest++;
3251       }
3252
3253     /* -qf...: Run the queue, forcing deliveries
3254        -qff..: Ditto, forcing thawing as well */
3255
3256     if (*argrest == 'f')
3257       {
3258       queue_run_force = TRUE;
3259       if (*++argrest == 'f')
3260         {
3261         deliver_force_thaw = TRUE;
3262         argrest++;
3263         }
3264       }
3265
3266     /* -q[f][f]l...: Run the queue only on local deliveries */
3267
3268     if (*argrest == 'l')
3269       {
3270       queue_run_local = TRUE;
3271       argrest++;
3272       }
3273
3274     /* -q[f][f][l][G<name>]... Work on the named queue */
3275
3276     if (*argrest == 'G')
3277       {
3278       int i;
3279       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3280       queue_name = string_copyn(argrest, i);
3281       argrest += i;
3282       if (*argrest == '/') argrest++;
3283       }
3284
3285     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3286     only, optionally named, optionally starting from a given message id. */
3287
3288     if (*argrest == 0 &&
3289         (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3290       {
3291       queue_interval = 0;
3292       if (i+1 < argc && mac_ismsgid(argv[i+1]))
3293         start_queue_run_id = argv[++i];
3294       if (i+1 < argc && mac_ismsgid(argv[i+1]))
3295         stop_queue_run_id = argv[++i];
3296       }
3297
3298     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3299     forced, optionally local only, optionally named. */
3300
3301     else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3302                                                 0, FALSE)) <= 0)
3303       {
3304       fprintf(stderr, "exim: bad time value %s: abandoned\n", argv[i]);
3305       exit(EXIT_FAILURE);
3306       }
3307     break;
3308
3309
3310     case 'R':   /* Synonymous with -qR... */
3311     receiving_message = FALSE;
3312
3313     /* -Rf:   As -R (below) but force all deliveries,
3314        -Rff:  Ditto, but also thaw all frozen messages,
3315        -Rr:   String is regex
3316        -Rrf:  Regex and force
3317        -Rrff: Regex and force and thaw
3318
3319     in all cases provided there are no further characters in this
3320     argument. */
3321
3322     if (*argrest != 0)
3323       {
3324       int i;
3325       for (i = 0; i < nelem(rsopts); i++)
3326         if (Ustrcmp(argrest, rsopts[i]) == 0)
3327           {
3328           if (i != 2) queue_run_force = TRUE;
3329           if (i >= 2) deliver_selectstring_regex = TRUE;
3330           if (i == 1 || i == 4) deliver_force_thaw = TRUE;
3331           argrest += Ustrlen(rsopts[i]);
3332           }
3333       }
3334
3335     /* -R: Set string to match in addresses for forced queue run to
3336     pick out particular messages. */
3337
3338     if (*argrest)
3339       deliver_selectstring = argrest;
3340     else if (i+1 < argc)
3341       deliver_selectstring = argv[++i];
3342     else
3343       {
3344       fprintf(stderr, "exim: string expected after -R\n");
3345       exit(EXIT_FAILURE);
3346       }
3347     break;
3348
3349
3350     /* -r: an obsolete synonym for -f (see above) */
3351
3352
3353     /* -S: Like -R but works on sender. */
3354
3355     case 'S':   /* Synonymous with -qS... */
3356     receiving_message = FALSE;
3357
3358     /* -Sf:   As -S (below) but force all deliveries,
3359        -Sff:  Ditto, but also thaw all frozen messages,
3360        -Sr:   String is regex
3361        -Srf:  Regex and force
3362        -Srff: Regex and force and thaw
3363
3364     in all cases provided there are no further characters in this
3365     argument. */
3366
3367     if (*argrest)
3368       {
3369       int i;
3370       for (i = 0; i < nelem(rsopts); i++)
3371         if (Ustrcmp(argrest, rsopts[i]) == 0)
3372           {
3373           if (i != 2) queue_run_force = TRUE;
3374           if (i >= 2) deliver_selectstring_sender_regex = TRUE;
3375           if (i == 1 || i == 4) deliver_force_thaw = TRUE;
3376           argrest += Ustrlen(rsopts[i]);
3377           }
3378       }
3379
3380     /* -S: Set string to match in addresses for forced queue run to
3381     pick out particular messages. */
3382
3383     if (*argrest)
3384       deliver_selectstring_sender = argrest;
3385     else if (i+1 < argc)
3386       deliver_selectstring_sender = argv[++i];
3387     else
3388       {
3389       fprintf(stderr, "exim: string expected after -S\n");
3390       exit(EXIT_FAILURE);
3391       }
3392     break;
3393
3394     /* -Tqt is an option that is exclusively for use by the testing suite.
3395     It is not recognized in other circumstances. It allows for the setting up
3396     of explicit "queue times" so that various warning/retry things can be
3397     tested. Otherwise variability of clock ticks etc. cause problems. */
3398
3399     case 'T':
3400     if (running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3401       fudged_queue_times = argv[++i];
3402     else badarg = TRUE;
3403     break;
3404
3405
3406     /* -t: Set flag to extract recipients from body of message. */
3407
3408     case 't':
3409     if (*argrest == 0) extract_recipients = TRUE;
3410
3411     /* -ti: Set flag to extract recipients from body of message, and also
3412     specify that dot does not end the message. */
3413
3414     else if (Ustrcmp(argrest, "i") == 0)
3415       {
3416       extract_recipients = TRUE;
3417       dot_ends = FALSE;
3418       }
3419
3420     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3421
3422     #ifdef SUPPORT_TLS
3423     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3424     #endif
3425
3426     else badarg = TRUE;
3427     break;
3428
3429
3430     /* -U: This means "initial user submission" in sendmail, apparently. The
3431     doc claims that in future sendmail may refuse syntactically invalid
3432     messages instead of fixing them. For the moment, we just ignore it. */
3433
3434     case 'U':
3435     break;
3436
3437
3438     /* -v: verify things - this is a very low-level debugging */
3439
3440     case 'v':
3441     if (*argrest == 0)
3442       {
3443       debug_selector |= D_v;
3444       debug_file = stderr;
3445       }
3446     else badarg = TRUE;
3447     break;
3448
3449
3450     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3451
3452       The -x flag tells the sendmail command that mail from a local
3453       mail program has National Language Support (NLS) extended characters
3454       in the body of the mail item. The sendmail command can send mail with
3455       extended NLS characters across networks that normally corrupts these
3456       8-bit characters.
3457
3458     As Exim is 8-bit clean, it just ignores this flag. */
3459
3460     case 'x':
3461     if (*argrest != 0) badarg = TRUE;
3462     break;
3463
3464     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3465     logs to that file.  We swallow the parameter and otherwise ignore it. */
3466
3467     case 'X':
3468     if (*argrest == '\0')
3469       if (++i >= argc)
3470         {
3471         fprintf(stderr, "exim: string expected after -X\n");
3472         exit(EXIT_FAILURE);
3473         }
3474     break;
3475
3476     case 'z':
3477     if (*argrest == '\0')
3478       if (++i < argc) log_oneline = argv[i]; else
3479         {
3480         fprintf(stderr, "exim: file name expected after %s\n", argv[i-1]);
3481         exit(EXIT_FAILURE);
3482         }
3483     break;
3484
3485     /* All other initial characters are errors */
3486
3487     default:
3488     badarg = TRUE;
3489     break;
3490     }         /* End of high-level switch statement */
3491
3492   /* Failed to recognize the option, or syntax error */
3493
3494   if (badarg)
3495     {
3496     fprintf(stderr, "exim abandoned: unknown, malformed, or incomplete "
3497       "option %s\n", arg);
3498     exit(EXIT_FAILURE);
3499     }
3500   }
3501
3502
3503 /* If -R or -S have been specified without -q, assume a single queue run. */
3504
3505 if (  (deliver_selectstring || deliver_selectstring_sender)
3506    && queue_interval < 0)
3507     queue_interval = 0;
3508
3509
3510 END_ARG:
3511 /* If usage_wanted is set we call the usage function - which never returns */
3512 if (usage_wanted) exim_usage(called_as);
3513
3514 /* Arguments have been processed. Check for incompatibilities. */
3515 if ((
3516     (smtp_input || extract_recipients || recipients_arg < argc) &&
3517     (daemon_listen || queue_interval >= 0 || bi_option ||
3518       test_retry_arg >= 0 || test_rewrite_arg >= 0 ||
3519       filter_test != FTEST_NONE || (msg_action_arg > 0 && !one_msg_action))
3520     ) ||
3521     (
3522     msg_action_arg > 0 &&
3523     (daemon_listen || queue_interval > 0 || list_options ||
3524       (checking && msg_action != MSG_LOAD) ||
3525       bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0)
3526     ) ||
3527     (
3528     (daemon_listen || queue_interval > 0) &&
3529     (sender_address != NULL || list_options || list_queue || checking ||
3530       bi_option)
3531     ) ||
3532     (
3533     daemon_listen && queue_interval == 0
3534     ) ||
3535     (
3536     inetd_wait_mode && queue_interval >= 0
3537     ) ||
3538     (
3539     list_options &&
3540     (checking || smtp_input || extract_recipients ||
3541       filter_test != FTEST_NONE || bi_option)
3542     ) ||
3543     (
3544     verify_address_mode &&
3545     (address_test_mode || smtp_input || extract_recipients ||
3546       filter_test != FTEST_NONE || bi_option)
3547     ) ||
3548     (
3549     address_test_mode && (smtp_input || extract_recipients ||
3550       filter_test != FTEST_NONE || bi_option)
3551     ) ||
3552     (
3553     smtp_input && (sender_address != NULL || filter_test != FTEST_NONE ||
3554       extract_recipients)
3555     ) ||
3556     (
3557     deliver_selectstring != NULL && queue_interval < 0
3558     ) ||
3559     (
3560     msg_action == MSG_LOAD &&
3561       (!expansion_test || expansion_test_message != NULL)
3562     )
3563    )
3564   {
3565   fprintf(stderr, "exim: incompatible command-line options or arguments\n");
3566   exit(EXIT_FAILURE);
3567   }
3568
3569 /* If debugging is set up, set the file and the file descriptor to pass on to
3570 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3571 to run in the foreground. */
3572
3573 if (debug_selector != 0)
3574   {
3575   debug_file = stderr;
3576   debug_fd = fileno(debug_file);
3577   background_daemon = FALSE;
3578   if (running_in_test_harness) millisleep(100);   /* lets caller finish */
3579   if (debug_selector != D_v)    /* -v only doesn't show this */
3580     {
3581     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3582       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3583       debug_selector);
3584     if (!version_printed)
3585       show_whats_supported(stderr);
3586     }
3587   }
3588
3589 /* When started with root privilege, ensure that the limits on the number of
3590 open files and the number of processes (where that is accessible) are
3591 sufficiently large, or are unset, in case Exim has been called from an
3592 environment where the limits are screwed down. Not all OS have the ability to
3593 change some of these limits. */
3594
3595 if (unprivileged)
3596   {
3597   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3598   }
3599 else
3600   {
3601   struct rlimit rlp;
3602
3603   #ifdef RLIMIT_NOFILE
3604   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3605     {
3606     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3607       strerror(errno));
3608     rlp.rlim_cur = rlp.rlim_max = 0;
3609     }
3610
3611   /* I originally chose 1000 as a nice big number that was unlikely to
3612   be exceeded. It turns out that some older OS have a fixed upper limit of
3613   256. */
3614
3615   if (rlp.rlim_cur < 1000)
3616     {
3617     rlp.rlim_cur = rlp.rlim_max = 1000;
3618     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3619       {
3620       rlp.rlim_cur = rlp.rlim_max = 256;
3621       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3622         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3623           strerror(errno));
3624       }
3625     }
3626   #endif
3627
3628   #ifdef RLIMIT_NPROC
3629   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3630     {
3631     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3632       strerror(errno));
3633     rlp.rlim_cur = rlp.rlim_max = 0;
3634     }
3635
3636   #ifdef RLIM_INFINITY
3637   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3638     {
3639     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3640   #else
3641   if (rlp.rlim_cur < 1000)
3642     {
3643     rlp.rlim_cur = rlp.rlim_max = 1000;
3644   #endif
3645     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3646       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3647         strerror(errno));
3648     }
3649   #endif
3650   }
3651
3652 /* Exim is normally entered as root (but some special configurations are
3653 possible that don't do this). However, it always spins off sub-processes that
3654 set their uid and gid as required for local delivery. We don't want to pass on
3655 any extra groups that root may belong to, so we want to get rid of them all at
3656 this point.
3657
3658 We need to obey setgroups() at this stage, before possibly giving up root
3659 privilege for a changed configuration file, but later on we might need to
3660 check on the additional groups for the admin user privilege - can't do that
3661 till after reading the config, which might specify the exim gid. Therefore,
3662 save the group list here first. */
3663
3664 group_count = getgroups(NGROUPS_MAX, group_list);
3665 if (group_count < 0)
3666   {
3667   fprintf(stderr, "exim: getgroups() failed: %s\n", strerror(errno));
3668   exit(EXIT_FAILURE);
3669   }
3670
3671 /* There is a fundamental difference in some BSD systems in the matter of
3672 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3673 known not to be different. On the "different" systems there is a single group
3674 list, and the first entry in it is the current group. On all other versions of
3675 Unix there is a supplementary group list, which is in *addition* to the current
3676 group. Consequently, to get rid of all extraneous groups on a "standard" system
3677 you pass over 0 groups to setgroups(), while on a "different" system you pass
3678 over a single group - the current group, which is always the first group in the
3679 list. Calling setgroups() with zero groups on a "different" system results in
3680 an error return. The following code should cope with both types of system.
3681
3682 However, if this process isn't running as root, setgroups() can't be used
3683 since you have to be root to run it, even if throwing away groups. Not being
3684 root here happens only in some unusual configurations. We just ignore the
3685 error. */
3686
3687 if (setgroups(0, NULL) != 0)
3688   {
3689   if (setgroups(1, group_list) != 0 && !unprivileged)
3690     {
3691     fprintf(stderr, "exim: setgroups() failed: %s\n", strerror(errno));
3692     exit(EXIT_FAILURE);
3693     }
3694   }
3695
3696 /* If the configuration file name has been altered by an argument on the
3697 command line (either a new file name or a macro definition) and the caller is
3698 not root, or if this is a filter testing run, remove any setuid privilege the
3699 program has and run as the underlying user.
3700
3701 The exim user is locked out of this, which severely restricts the use of -C
3702 for some purposes.
3703
3704 Otherwise, set the real ids to the effective values (should be root unless run
3705 from inetd, which it can either be root or the exim uid, if one is configured).
3706
3707 There is a private mechanism for bypassing some of this, in order to make it
3708 possible to test lots of configurations automatically, without having either to
3709 recompile each time, or to patch in an actual configuration file name and other
3710 values (such as the path name). If running in the test harness, pretend that
3711 configuration file changes and macro definitions haven't happened. */
3712
3713 if ((                                            /* EITHER */
3714     (!trusted_config ||                          /* Config changed, or */
3715      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
3716     real_uid != root_uid &&                      /* Not root, and */
3717     !running_in_test_harness                     /* Not fudged */
3718     ) ||                                         /*   OR   */
3719     expansion_test                               /* expansion testing */
3720     ||                                           /*   OR   */
3721     filter_test != FTEST_NONE)                   /* Filter testing */
3722   {
3723   setgroups(group_count, group_list);
3724   exim_setugid(real_uid, real_gid, FALSE,
3725     US"-C, -D, -be or -bf forces real uid");
3726   removed_privilege = TRUE;
3727
3728   /* In the normal case when Exim is called like this, stderr is available
3729   and should be used for any logging information because attempts to write
3730   to the log will usually fail. To arrange this, we unset really_exim. However,
3731   if no stderr is available there is no point - we might as well have a go
3732   at the log (if it fails, syslog will be written).
3733
3734   Note that if the invoker is Exim, the logs remain available. Messing with
3735   this causes unlogged successful deliveries.  */
3736
3737   if ((log_stderr != NULL) && (real_uid != exim_uid))
3738     really_exim = FALSE;
3739   }
3740
3741 /* Privilege is to be retained for the moment. It may be dropped later,
3742 depending on the job that this Exim process has been asked to do. For now, set
3743 the real uid to the effective so that subsequent re-execs of Exim are done by a
3744 privileged user. */
3745
3746 else exim_setugid(geteuid(), getegid(), FALSE, US"forcing real = effective");
3747
3748 /* If testing a filter, open the file(s) now, before wasting time doing other
3749 setups and reading the message. */
3750
3751 if ((filter_test & FTEST_SYSTEM) != 0)
3752   {
3753   filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0);
3754   if (filter_sfd < 0)
3755     {
3756     fprintf(stderr, "exim: failed to open %s: %s\n", filter_test_sfile,
3757       strerror(errno));
3758     return EXIT_FAILURE;
3759     }
3760   }
3761
3762 if ((filter_test & FTEST_USER) != 0)
3763   {
3764   filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0);
3765   if (filter_ufd < 0)
3766     {
3767     fprintf(stderr, "exim: failed to open %s: %s\n", filter_test_ufile,
3768       strerror(errno));
3769     return EXIT_FAILURE;
3770     }
3771   }
3772
3773 /* Initialise lookup_list
3774 If debugging, already called above via version reporting.
3775 In either case, we initialise the list of available lookups while running
3776 as root.  All dynamically modules are loaded from a directory which is
3777 hard-coded into the binary and is code which, if not a module, would be
3778 part of Exim already.  Ability to modify the content of the directory
3779 is equivalent to the ability to modify a setuid binary!
3780
3781 This needs to happen before we read the main configuration. */
3782 init_lookup_list();
3783
3784 #ifdef SUPPORT_I18N
3785 if (running_in_test_harness) smtputf8_advertise_hosts = NULL;
3786 #endif
3787
3788 /* Read the main runtime configuration data; this gives up if there
3789 is a failure. It leaves the configuration file open so that the subsequent
3790 configuration data for delivery can be read if needed.
3791
3792 NOTE: immediatly after opening the configuration file we change the working
3793 directory to "/"! Later we change to $spool_directory. We do it there, because
3794 during readconf_main() some expansion takes place already. */
3795
3796 /* Store the initial cwd before we change directories */
3797 if ((initial_cwd = os_getcwd(NULL, 0)) == NULL)
3798   {
3799   perror("exim: can't get the current working directory");
3800   exit(EXIT_FAILURE);
3801   }
3802
3803 /* checking:
3804     -be[m] expansion test        -
3805     -b[fF] filter test           new
3806     -bh[c] host test             -
3807     -bmalware malware_test_file  new
3808     -brt   retry test            new
3809     -brw   rewrite test          new
3810     -bt    address test          -
3811     -bv[s] address verify        -
3812    list_options:
3813     -bP <option> (except -bP config, which sets list_config)
3814
3815 If any of these options is set, we suppress warnings about configuration
3816 issues (currently about tls_advertise_hosts and keep_environment not being
3817 defined) */
3818
3819 readconf_main(checking || list_options);
3820
3821 if (builtin_macros_create_trigger) DEBUG(D_any)
3822   debug_printf("Builtin macros created (expensive) due to config line '%.*s'\n",
3823     Ustrlen(builtin_macros_create_trigger)-1, builtin_macros_create_trigger);
3824
3825 /* Now in directory "/" */
3826
3827 if (cleanup_environment() == FALSE)
3828   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
3829
3830
3831 /* If an action on specific messages is requested, or if a daemon or queue
3832 runner is being started, we need to know if Exim was called by an admin user.
3833 This is the case if the real user is root or exim, or if the real group is
3834 exim, or if one of the supplementary groups is exim or a group listed in
3835 admin_groups. We don't fail all message actions immediately if not admin_user,
3836 since some actions can be performed by non-admin users. Instead, set admin_user
3837 for later interrogation. */
3838
3839 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
3840   admin_user = TRUE;
3841 else
3842   {
3843   int i, j;
3844   for (i = 0; i < group_count && !admin_user; i++)
3845     if (group_list[i] == exim_gid)
3846       admin_user = TRUE;
3847     else if (admin_groups)
3848       for (j = 1; j <= (int)admin_groups[0] && !admin_user; j++)
3849         if (admin_groups[j] == group_list[i])
3850           admin_user = TRUE;
3851   }
3852
3853 /* Another group of privileged users are the trusted users. These are root,
3854 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
3855 are permitted to specify sender_addresses with -f on the command line, and
3856 other message parameters as well. */
3857
3858 if (real_uid == root_uid || real_uid == exim_uid)
3859   trusted_caller = TRUE;
3860 else
3861   {
3862   int i, j;
3863
3864   if (trusted_users)
3865     for (i = 1; i <= (int)trusted_users[0] && !trusted_caller; i++)
3866       if (trusted_users[i] == real_uid)
3867         trusted_caller = TRUE;
3868
3869   if (trusted_groups)
3870     for (i = 1; i <= (int)trusted_groups[0] && !trusted_caller; i++)
3871       if (trusted_groups[i] == real_gid)
3872         trusted_caller = TRUE;
3873       else for (j = 0; j < group_count && !trusted_caller; j++)
3874         if (trusted_groups[i] == group_list[j])
3875           trusted_caller = TRUE;
3876   }
3877
3878 /* At this point, we know if the user is privileged and some command-line
3879 options become possibly imperssible, depending upon the configuration file. */
3880
3881 if (checking && commandline_checks_require_admin && !admin_user) {
3882   fprintf(stderr, "exim: those command-line flags are set to require admin\n");
3883   exit(EXIT_FAILURE);
3884 }
3885
3886 /* Handle the decoding of logging options. */
3887
3888 decode_bits(log_selector, log_selector_size, log_notall,
3889   log_selector_string, log_options, log_options_count, US"log", 0);
3890
3891 DEBUG(D_any)
3892   {
3893   int i;
3894   debug_printf("configuration file is %s\n", config_main_filename);
3895   debug_printf("log selectors =");
3896   for (i = 0; i < log_selector_size; i++)
3897     debug_printf(" %08x", log_selector[i]);
3898   debug_printf("\n");
3899   }
3900
3901 /* If domain literals are not allowed, check the sender address that was
3902 supplied with -f. Ditto for a stripped trailing dot. */
3903
3904 if (sender_address != NULL)
3905   {
3906   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
3907     {
3908     fprintf(stderr, "exim: bad -f address \"%s\": domain literals not "
3909       "allowed\n", sender_address);
3910     return EXIT_FAILURE;
3911     }
3912   if (f_end_dot && !strip_trailing_dot)
3913     {
3914     fprintf(stderr, "exim: bad -f address \"%s.\": domain is malformed "
3915       "(trailing dot not allowed)\n", sender_address);
3916     return EXIT_FAILURE;
3917     }
3918   }
3919
3920 /* See if an admin user overrode our logging. */
3921
3922 if (cmdline_syslog_name != NULL)
3923   {
3924   if (admin_user)
3925     {
3926     syslog_processname = cmdline_syslog_name;
3927     log_file_path = string_copy(CUS"syslog");
3928     }
3929   else
3930     {
3931     /* not a panic, non-privileged users should not be able to spam paniclog */
3932     fprintf(stderr,
3933         "exim: you lack sufficient privilege to specify syslog process name\n");
3934     return EXIT_FAILURE;
3935     }
3936   }
3937
3938 /* Paranoia check of maximum lengths of certain strings. There is a check
3939 on the length of the log file path in log.c, which will come into effect
3940 if there are any calls to write the log earlier than this. However, if we
3941 get this far but the string is very long, it is better to stop now than to
3942 carry on and (e.g.) receive a message and then have to collapse. The call to
3943 log_write() from here will cause the ultimate panic collapse if the complete
3944 file name exceeds the buffer length. */
3945
3946 if (Ustrlen(log_file_path) > 200)
3947   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3948     "log_file_path is longer than 200 chars: aborting");
3949
3950 if (Ustrlen(pid_file_path) > 200)
3951   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3952     "pid_file_path is longer than 200 chars: aborting");
3953
3954 if (Ustrlen(spool_directory) > 200)
3955   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3956     "spool_directory is longer than 200 chars: aborting");
3957
3958 /* Length check on the process name given to syslog for its TAG field,
3959 which is only permitted to be 32 characters or less. See RFC 3164. */
3960
3961 if (Ustrlen(syslog_processname) > 32)
3962   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
3963     "syslog_processname is longer than 32 chars: aborting");
3964
3965 if (log_oneline)
3966   if (admin_user)
3967     {
3968     log_write(0, LOG_MAIN, "%s", log_oneline);
3969     return EXIT_SUCCESS;
3970     }
3971   else
3972     return EXIT_FAILURE;
3973
3974 /* In some operating systems, the environment variable TMPDIR controls where
3975 temporary files are created; Exim doesn't use these (apart from when delivering
3976 to MBX mailboxes), but called libraries such as DBM libraries may require them.
3977 If TMPDIR is found in the environment, reset it to the value defined in the
3978 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
3979 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
3980 EXIM_TMPDIR by the build scripts.
3981 */
3982
3983 #ifdef EXIM_TMPDIR
3984   {
3985   uschar **p;
3986   if (environ) for (p = USS environ; *p; p++)
3987     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
3988       {
3989       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
3990       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
3991       *p = newp;
3992       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
3993       }
3994   }
3995 #endif
3996
3997 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
3998 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
3999 we may need to get rid of a bogus timezone setting. This can arise when Exim is
4000 called by a user who has set the TZ variable. This then affects the timestamps
4001 in log files and in Received: headers, and any created Date: header lines. The
4002 required timezone is settable in the configuration file, so nothing can be done
4003 about this earlier - but hopefully nothing will normally be logged earlier than
4004 this. We have to make a new environment if TZ is wrong, but don't bother if
4005 timestamps_utc is set, because then all times are in UTC anyway. */
4006
4007 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
4008   timestamps_utc = TRUE;
4009 else
4010   {
4011   uschar *envtz = US getenv("TZ");
4012   if (envtz
4013       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
4014       : timezone_string != NULL
4015      )
4016     {
4017     uschar **p = USS environ;
4018     uschar **new;
4019     uschar **newp;
4020     int count = 0;
4021     if (environ) while (*p++) count++;
4022     if (!envtz) count++;
4023     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4024     if (environ) for (p = USS environ; *p; p++)
4025       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4026     if (timezone_string)
4027       {
4028       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4029       sprintf(CS *newp++, "TZ=%s", timezone_string);
4030       }
4031     *newp = NULL;
4032     environ = CSS new;
4033     tzset();
4034     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4035       tod_stamp(tod_log));
4036     }
4037   }
4038
4039 /* Handle the case when we have removed the setuid privilege because of -C or
4040 -D. This means that the caller of Exim was not root.
4041
4042 There is a problem if we were running as the Exim user. The sysadmin may
4043 expect this case to retain privilege because "the binary was called by the
4044 Exim user", but it hasn't, because either the -D option set macros, or the
4045 -C option set a non-trusted configuration file. There are two possibilities:
4046
4047   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4048       to do message deliveries. Thus, the fact that it is running as a
4049       non-privileged user is plausible, and might be wanted in some special
4050       configurations. However, really_exim will have been set false when
4051       privilege was dropped, to stop Exim trying to write to its normal log
4052       files. Therefore, re-enable normal log processing, assuming the sysadmin
4053       has set up the log directory correctly.
4054
4055   (2) If deliver_drop_privilege is not set, the configuration won't work as
4056       apparently intended, and so we log a panic message. In order to retain
4057       root for -C or -D, the caller must either be root or be invoking a
4058       trusted configuration file (when deliver_drop_privilege is false). */
4059
4060 if (  removed_privilege
4061    && (!trusted_config || opt_D_used)
4062    && real_uid == exim_uid)
4063   if (deliver_drop_privilege)
4064     really_exim = TRUE; /* let logging work normally */
4065   else
4066     log_write(0, LOG_MAIN|LOG_PANIC,
4067       "exim user lost privilege for using %s option",
4068       trusted_config? "-D" : "-C");
4069
4070 /* Start up Perl interpreter if Perl support is configured and there is a
4071 perl_startup option, and the configuration or the command line specifies
4072 initializing starting. Note that the global variables are actually called
4073 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4074
4075 #ifdef EXIM_PERL
4076 if (perl_start_option != 0)
4077   opt_perl_at_start = (perl_start_option > 0);
4078 if (opt_perl_at_start && opt_perl_startup != NULL)
4079   {
4080   uschar *errstr;
4081   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4082   errstr = init_perl(opt_perl_startup);
4083   if (errstr != NULL)
4084     {
4085     fprintf(stderr, "exim: error in perl_startup code: %s\n", errstr);
4086     return EXIT_FAILURE;
4087     }
4088   opt_perl_started = TRUE;
4089   }
4090 #endif /* EXIM_PERL */
4091
4092 /* Log the arguments of the call if the configuration file said so. This is
4093 a debugging feature for finding out what arguments certain MUAs actually use.
4094 Don't attempt it if logging is disabled, or if listing variables or if
4095 verifying/testing addresses or expansions. */
4096
4097 if (((debug_selector & D_any) != 0 || LOGGING(arguments))
4098       && really_exim && !list_options && !checking)
4099   {
4100   int i;
4101   uschar *p = big_buffer;
4102   Ustrcpy(p, "cwd= (failed)");
4103
4104   Ustrncpy(p + 4, initial_cwd, big_buffer_size-5);
4105
4106   while (*p) p++;
4107   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4108   while (*p) p++;
4109   for (i = 0; i < argc; i++)
4110     {
4111     int len = Ustrlen(argv[i]);
4112     const uschar *printing;
4113     uschar *quote;
4114     if (p + len + 8 >= big_buffer + big_buffer_size)
4115       {
4116       Ustrcpy(p, " ...");
4117       log_write(0, LOG_MAIN, "%s", big_buffer);
4118       Ustrcpy(big_buffer, "...");
4119       p = big_buffer + 3;
4120       }
4121     printing = string_printing(argv[i]);
4122     if (printing[0] == 0) quote = US"\""; else
4123       {
4124       const uschar *pp = printing;
4125       quote = US"";
4126       while (*pp != 0) if (isspace(*pp++)) { quote = US"\""; break; }
4127       }
4128     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4129       (p - big_buffer) - 4), printing, quote);
4130     }
4131
4132   if (LOGGING(arguments))
4133     log_write(0, LOG_MAIN, "%s", big_buffer);
4134   else
4135     debug_printf("%s\n", big_buffer);
4136   }
4137
4138 /* Set the working directory to be the top-level spool directory. We don't rely
4139 on this in the code, which always uses fully qualified names, but it's useful
4140 for core dumps etc. Don't complain if it fails - the spool directory might not
4141 be generally accessible and calls with the -C option (and others) have lost
4142 privilege by now. Before the chdir, we try to ensure that the directory exists.
4143 */
4144
4145 if (Uchdir(spool_directory) != 0)
4146   {
4147   int dummy;
4148   (void)directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4149   dummy = /* quieten compiler */ Uchdir(spool_directory);
4150   dummy = dummy;        /* yet more compiler quietening, sigh */
4151   }
4152
4153 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4154 alias file. Exim doesn't have such a concept, but this call is screwed into
4155 Sun's YP makefiles. Handle this by calling a configured script, as the real
4156 user who called Exim. The -oA option can be used to pass an argument to the
4157 script. */
4158
4159 if (bi_option)
4160   {
4161   (void)fclose(config_file);
4162   if (bi_command != NULL)
4163     {
4164     int i = 0;
4165     uschar *argv[3];
4166     argv[i++] = bi_command;
4167     if (alias_arg != NULL) argv[i++] = alias_arg;
4168     argv[i++] = NULL;
4169
4170     setgroups(group_count, group_list);
4171     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4172
4173     DEBUG(D_exec) debug_printf("exec %.256s %.256s\n", argv[0],
4174       (argv[1] == NULL)? US"" : argv[1]);
4175
4176     execv(CS argv[0], (char *const *)argv);
4177     fprintf(stderr, "exim: exec failed: %s\n", strerror(errno));
4178     exit(EXIT_FAILURE);
4179     }
4180   else
4181     {
4182     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4183     exit(EXIT_SUCCESS);
4184     }
4185   }
4186
4187 /* We moved the admin/trusted check to be immediately after reading the
4188 configuration file.  We leave these prints here to ensure that syslog setup,
4189 logfile setup, and so on has already happened. */
4190
4191 if (trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4192 if (admin_user) DEBUG(D_any) debug_printf("admin user\n");
4193
4194 /* Only an admin user may start the daemon or force a queue run in the default
4195 configuration, but the queue run restriction can be relaxed. Only an admin
4196 user may request that a message be returned to its sender forthwith. Only an
4197 admin user may specify a debug level greater than D_v (because it might show
4198 passwords, etc. in lookup queries). Only an admin user may request a queue
4199 count. Only an admin user can use the test interface to scan for email
4200 (because Exim will be in the spool dir and able to look at mails). */
4201
4202 if (!admin_user)
4203   {
4204   BOOL debugset = (debug_selector & ~D_v) != 0;
4205   if (deliver_give_up || daemon_listen || malware_test_file ||
4206      (count_queue && queue_list_requires_admin) ||
4207      (list_queue && queue_list_requires_admin) ||
4208      (queue_interval >= 0 && prod_requires_admin) ||
4209      (debugset && !running_in_test_harness))
4210     {
4211     fprintf(stderr, "exim:%s permission denied\n", debugset? " debugging" : "");
4212     exit(EXIT_FAILURE);
4213     }
4214   }
4215
4216 /* If the real user is not root or the exim uid, the argument for passing
4217 in an open TCP/IP connection for another message is not permitted, nor is
4218 running with the -N option for any delivery action, unless this call to exim is
4219 one that supplied an input message, or we are using a patched exim for
4220 regression testing. */
4221
4222 if (real_uid != root_uid && real_uid != exim_uid &&
4223      (continue_hostname != NULL ||
4224        (dont_deliver &&
4225          (queue_interval >= 0 || daemon_listen || msg_action_arg > 0)
4226        )) && !running_in_test_harness)
4227   {
4228   fprintf(stderr, "exim: Permission denied\n");
4229   return EXIT_FAILURE;
4230   }
4231
4232 /* If the caller is not trusted, certain arguments are ignored when running for
4233 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4234 Note that authority for performing certain actions on messages is tested in the
4235 queue_action() function. */
4236
4237 if (!trusted_caller && !checking)
4238   {
4239   sender_host_name = sender_host_address = interface_address =
4240     sender_ident = received_protocol = NULL;
4241   sender_host_port = interface_port = 0;
4242   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4243   }
4244
4245 /* If a sender host address is set, extract the optional port number off the
4246 end of it and check its syntax. Do the same thing for the interface address.
4247 Exim exits if the syntax is bad. */
4248
4249 else
4250   {
4251   if (sender_host_address != NULL)
4252     sender_host_port = check_port(sender_host_address);
4253   if (interface_address != NULL)
4254     interface_port = check_port(interface_address);
4255   }
4256
4257 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4258 if (flag_G)
4259   {
4260   if (trusted_caller)
4261     {
4262     suppress_local_fixups = suppress_local_fixups_default = TRUE;
4263     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4264     }
4265   else
4266     {
4267     fprintf(stderr, "exim: permission denied (-G requires a trusted user)\n");
4268     return EXIT_FAILURE;
4269     }
4270   }
4271
4272 /* If an SMTP message is being received check to see if the standard input is a
4273 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4274 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4275 barf. */
4276
4277 if (smtp_input)
4278   {
4279   union sockaddr_46 inetd_sock;
4280   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4281   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4282     {
4283     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4284     if (family == AF_INET || family == AF_INET6)
4285       {
4286       union sockaddr_46 interface_sock;
4287       size = sizeof(interface_sock);
4288
4289       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4290         interface_address = host_ntoa(-1, &interface_sock, NULL,
4291           &interface_port);
4292
4293       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4294
4295       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4296         {
4297         is_inetd = TRUE;
4298         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4299           NULL, &sender_host_port);
4300         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4301           "inetd is not supported when mua_wrapper is set");
4302         }
4303       else
4304         {
4305         fprintf(stderr,
4306           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4307         return EXIT_FAILURE;
4308         }
4309       }
4310     }
4311   }
4312
4313 /* If the load average is going to be needed while receiving a message, get it
4314 now for those OS that require the first call to os_getloadavg() to be done as
4315 root. There will be further calls later for each message received. */
4316
4317 #ifdef LOAD_AVG_NEEDS_ROOT
4318 if (receiving_message &&
4319       (queue_only_load >= 0 ||
4320         (is_inetd && smtp_load_reserve >= 0)
4321       ))
4322   {
4323   load_average = OS_GETLOADAVG();
4324   }
4325 #endif
4326
4327 /* The queue_only configuration option can be overridden by -odx on the command
4328 line, except that if queue_only_override is false, queue_only cannot be unset
4329 from the command line. */
4330
4331 if (queue_only_set && (queue_only_override || arg_queue_only))
4332   queue_only = arg_queue_only;
4333
4334 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4335 -or and -os. */
4336
4337 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4338 if (arg_smtp_receive_timeout >= 0)
4339   smtp_receive_timeout = arg_smtp_receive_timeout;
4340
4341 /* If Exim was started with root privilege, unless we have already removed the
4342 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4343 except when starting the daemon or doing some kind of delivery or address
4344 testing (-bt). These are the only cases when root need to be retained. We run
4345 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4346 retained only for starting the daemon. We always do the initgroups() in this
4347 situation (controlled by the TRUE below), in order to be as close as possible
4348 to the state Exim usually runs in. */
4349
4350 if (!unprivileged &&                      /* originally had root AND */
4351     !removed_privilege &&                 /* still got root AND      */
4352     !daemon_listen &&                     /* not starting the daemon */
4353     queue_interval <= 0 &&                /* (either kind of daemon) */
4354       (                                   /*    AND EITHER           */
4355       deliver_drop_privilege ||           /* requested unprivileged  */
4356         (                                 /*       OR                */
4357         queue_interval < 0 &&             /* not running the queue   */
4358         (msg_action_arg < 0 ||            /*       and               */
4359           msg_action != MSG_DELIVER) &&   /* not delivering and      */
4360         (!checking || !address_test_mode) /* not address checking    */
4361    )  ) )
4362   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4363
4364 /* When we are retaining a privileged uid, we still change to the exim gid. */
4365
4366 else
4367   {
4368   int rv;
4369   rv = setgid(exim_gid);
4370   /* Impact of failure is that some stuff might end up with an incorrect group.
4371   We track this for failures from root, since any attempt to change privilege
4372   by root should succeed and failures should be examined.  For non-root,
4373   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4374   no need to complain then. */
4375   if (rv == -1)
4376     if (!(unprivileged || removed_privilege))
4377       {
4378       fprintf(stderr,
4379           "exim: changing group failed: %s\n", strerror(errno));
4380       exit(EXIT_FAILURE);
4381       }
4382     else
4383       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4384           (long int)exim_gid, strerror(errno));
4385   }
4386
4387 /* Handle a request to scan a file for malware */
4388 if (malware_test_file)
4389   {
4390 #ifdef WITH_CONTENT_SCAN
4391   int result;
4392   set_process_info("scanning file for malware");
4393   result = malware_in_file(malware_test_file);
4394   if (result == FAIL)
4395     {
4396     printf("No malware found.\n");
4397     exit(EXIT_SUCCESS);
4398     }
4399   if (result != OK)
4400     {
4401     printf("Malware lookup returned non-okay/fail: %d\n", result);
4402     exit(EXIT_FAILURE);
4403     }
4404   if (malware_name)
4405     printf("Malware found: %s\n", malware_name);
4406   else
4407     printf("Malware scan detected malware of unknown name.\n");
4408 #else
4409   printf("Malware scanning not enabled at compile time.\n");
4410 #endif
4411   exit(EXIT_FAILURE);
4412   }
4413
4414 /* Handle a request to list the delivery queue */
4415
4416 if (list_queue)
4417   {
4418   set_process_info("listing the queue");
4419   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4420   exit(EXIT_SUCCESS);
4421   }
4422
4423 /* Handle a request to count the delivery queue */
4424
4425 if (count_queue)
4426   {
4427   set_process_info("counting the queue");
4428   queue_count();
4429   exit(EXIT_SUCCESS);
4430   }
4431
4432 /* Handle actions on specific messages, except for the force delivery and
4433 message load actions, which are done below. Some actions take a whole list of
4434 message ids, which are known to continue up to the end of the arguments. Others
4435 take a single message id and then operate on the recipients list. */
4436
4437 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4438   {
4439   int yield = EXIT_SUCCESS;
4440   set_process_info("acting on specified messages");
4441
4442   if (!one_msg_action)
4443     {
4444     for (i = msg_action_arg; i < argc; i++)
4445       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4446         yield = EXIT_FAILURE;
4447     }
4448
4449   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4450     recipients_arg)) yield = EXIT_FAILURE;
4451   exit(yield);
4452   }
4453
4454 /* We used to set up here to skip reading the ACL section, on
4455  (msg_action_arg > 0 || (queue_interval == 0 && !daemon_listen)
4456 Now, since the intro of the ${acl } expansion, ACL definitions may be
4457 needed in transports so we lost the optimisation. */
4458
4459 readconf_rest();
4460
4461 /* The configuration data will have been read into POOL_PERM because we won't
4462 ever want to reset back past it. Change the current pool to POOL_MAIN. In fact,
4463 this is just a bit of pedantic tidiness. It wouldn't really matter if the
4464 configuration were read into POOL_MAIN, because we don't do any resets till
4465 later on. However, it seems right, and it does ensure that both pools get used.
4466 */
4467
4468 store_pool = POOL_MAIN;
4469
4470 /* Handle the -brt option. This is for checking out retry configurations.
4471 The next three arguments are a domain name or a complete address, and
4472 optionally two error numbers. All it does is to call the function that
4473 scans the retry configuration data. */
4474
4475 if (test_retry_arg >= 0)
4476   {
4477   retry_config *yield;
4478   int basic_errno = 0;
4479   int more_errno = 0;
4480   uschar *s1, *s2;
4481
4482   if (test_retry_arg >= argc)
4483     {
4484     printf("-brt needs a domain or address argument\n");
4485     exim_exit(EXIT_FAILURE);
4486     }
4487   s1 = argv[test_retry_arg++];
4488   s2 = NULL;
4489
4490   /* If the first argument contains no @ and no . it might be a local user
4491   or it might be a single-component name. Treat as a domain. */
4492
4493   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4494     {
4495     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4496       "being \ntreated as a one-component domain, not as a local part.\n\n",
4497       s1);
4498     }
4499
4500   /* There may be an optional second domain arg. */
4501
4502   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4503     s2 = argv[test_retry_arg++];
4504
4505   /* The final arg is an error name */
4506
4507   if (test_retry_arg < argc)
4508     {
4509     uschar *ss = argv[test_retry_arg];
4510     uschar *error =
4511       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4512     if (error != NULL)
4513       {
4514       printf("%s\n", CS error);
4515       return EXIT_FAILURE;
4516       }
4517
4518     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4519     code > 100 as an error is for matching codes to the decade. Turn them into
4520     a real error code, off the decade. */
4521
4522     if (basic_errno == ERRNO_MAIL4XX ||
4523         basic_errno == ERRNO_RCPT4XX ||
4524         basic_errno == ERRNO_DATA4XX)
4525       {
4526       int code = (more_errno >> 8) & 255;
4527       if (code == 255)
4528         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4529       else if (code > 100)
4530         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4531       }
4532     }
4533
4534   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4535     printf("No retry information found\n");
4536   else
4537     {
4538     retry_rule *r;
4539     more_errno = yield->more_errno;
4540     printf("Retry rule: %s  ", yield->pattern);
4541
4542     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4543       {
4544       printf("quota%s%s  ",
4545         (more_errno > 0)? "_" : "",
4546         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4547       }
4548     else if (yield->basic_errno == ECONNREFUSED)
4549       {
4550       printf("refused%s%s  ",
4551         (more_errno > 0)? "_" : "",
4552         (more_errno == 'M')? "MX" :
4553         (more_errno == 'A')? "A" : "");
4554       }
4555     else if (yield->basic_errno == ETIMEDOUT)
4556       {
4557       printf("timeout");
4558       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4559       more_errno &= 255;
4560       if (more_errno != 0) printf("_%s",
4561         (more_errno == 'M')? "MX" : "A");
4562       printf("  ");
4563       }
4564     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4565       printf("auth_failed  ");
4566     else printf("*  ");
4567
4568     for (r = yield->rules; r; r = r->next)
4569       {
4570       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4571       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4572       if (r->rule == 'G')
4573         {
4574         int x = r->p2;
4575         int f = x % 1000;
4576         int d = 100;
4577         printf(",%d.", x/1000);
4578         do
4579           {
4580           printf("%d", f/d);
4581           f %= d;
4582           d /= 10;
4583           }
4584         while (f != 0);
4585         }
4586       printf("; ");
4587       }
4588
4589     printf("\n");
4590     }
4591   exim_exit(EXIT_SUCCESS);
4592   }
4593
4594 /* Handle a request to list one or more configuration options */
4595 /* If -n was set, we suppress some information */
4596
4597 if (list_options)
4598   {
4599   set_process_info("listing variables");
4600   if (recipients_arg >= argc) readconf_print(US"all", NULL, flag_n);
4601     else for (i = recipients_arg; i < argc; i++)
4602       {
4603       if (i < argc - 1 &&
4604           (Ustrcmp(argv[i], "router") == 0 ||
4605            Ustrcmp(argv[i], "transport") == 0 ||
4606            Ustrcmp(argv[i], "authenticator") == 0 ||
4607            Ustrcmp(argv[i], "macro") == 0 ||
4608            Ustrcmp(argv[i], "environment") == 0))
4609         {
4610         readconf_print(argv[i+1], argv[i], flag_n);
4611         i++;
4612         }
4613       else readconf_print(argv[i], NULL, flag_n);
4614       }
4615   exim_exit(EXIT_SUCCESS);
4616   }
4617
4618 if (list_config)
4619   {
4620   set_process_info("listing config");
4621   readconf_print(US"config", NULL, flag_n);
4622   exim_exit(EXIT_SUCCESS);
4623   }
4624
4625
4626 /* Initialise subsystems as required */
4627 #ifndef DISABLE_DKIM
4628 dkim_exim_init();
4629 #endif
4630 deliver_init();
4631
4632
4633 /* Handle a request to deliver one or more messages that are already on the
4634 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4635 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4636
4637 Delivery of specific messages is typically used for a small number when
4638 prodding by hand (when the option forced_delivery will be set) or when
4639 re-execing to regain root privilege. Each message delivery must happen in a
4640 separate process, so we fork a process for each one, and run them sequentially
4641 so that debugging output doesn't get intertwined, and to avoid spawning too
4642 many processes if a long list is given. However, don't fork for the last one;
4643 this saves a process in the common case when Exim is called to deliver just one
4644 message. */
4645
4646 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4647   {
4648   if (prod_requires_admin && !admin_user)
4649     {
4650     fprintf(stderr, "exim: Permission denied\n");
4651     exim_exit(EXIT_FAILURE);
4652     }
4653   set_process_info("delivering specified messages");
4654   if (deliver_give_up) forced_delivery = deliver_force_thaw = TRUE;
4655   for (i = msg_action_arg; i < argc; i++)
4656     {
4657     int status;
4658     pid_t pid;
4659     if (i == argc - 1)
4660       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4661     else if ((pid = fork()) == 0)
4662       {
4663       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4664       _exit(EXIT_SUCCESS);
4665       }
4666     else if (pid < 0)
4667       {
4668       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4669         strerror(errno));
4670       exim_exit(EXIT_FAILURE);
4671       }
4672     else wait(&status);
4673     }
4674   exim_exit(EXIT_SUCCESS);
4675   }
4676
4677
4678 /* If only a single queue run is requested, without SMTP listening, we can just
4679 turn into a queue runner, with an optional starting message id. */
4680
4681 if (queue_interval == 0 && !daemon_listen)
4682   {
4683   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4684     (start_queue_run_id == NULL)? US"" : US" starting at ",
4685     (start_queue_run_id == NULL)? US"" : start_queue_run_id,
4686     (stop_queue_run_id == NULL)?  US"" : US" stopping at ",
4687     (stop_queue_run_id == NULL)?  US"" : stop_queue_run_id);
4688   if (*queue_name)
4689     set_process_info("running the '%s' queue (single queue run)", queue_name);
4690   else
4691     set_process_info("running the queue (single queue run)");
4692   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4693   exim_exit(EXIT_SUCCESS);
4694   }
4695
4696
4697 /* Find the login name of the real user running this process. This is always
4698 needed when receiving a message, because it is written into the spool file. It
4699 may also be used to construct a from: or a sender: header, and in this case we
4700 need the user's full name as well, so save a copy of it, checked for RFC822
4701 syntax and munged if necessary, if it hasn't previously been set by the -F
4702 argument. We may try to get the passwd entry more than once, in case NIS or
4703 other delays are in evidence. Save the home directory for use in filter testing
4704 (only). */
4705
4706 for (i = 0;;)
4707   {
4708   if ((pw = getpwuid(real_uid)) != NULL)
4709     {
4710     originator_login = string_copy(US pw->pw_name);
4711     originator_home = string_copy(US pw->pw_dir);
4712
4713     /* If user name has not been set by -F, set it from the passwd entry
4714     unless -f has been used to set the sender address by a trusted user. */
4715
4716     if (originator_name == NULL)
4717       {
4718       if (sender_address == NULL ||
4719            (!trusted_caller && filter_test == FTEST_NONE))
4720         {
4721         uschar *name = US pw->pw_gecos;
4722         uschar *amp = Ustrchr(name, '&');
4723         uschar buffer[256];
4724
4725         /* Most Unix specify that a '&' character in the gecos field is
4726         replaced by a copy of the login name, and some even specify that
4727         the first character should be upper cased, so that's what we do. */
4728
4729         if (amp != NULL)
4730           {
4731           int loffset;
4732           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
4733             amp - name, name, &loffset, originator_login, amp + 1);
4734           buffer[loffset] = toupper(buffer[loffset]);
4735           name = buffer;
4736           }
4737
4738         /* If a pattern for matching the gecos field was supplied, apply
4739         it and then expand the name string. */
4740
4741         if (gecos_pattern != NULL && gecos_name != NULL)
4742           {
4743           const pcre *re;
4744           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
4745
4746           if (regex_match_and_setup(re, name, 0, -1))
4747             {
4748             uschar *new_name = expand_string(gecos_name);
4749             expand_nmax = -1;
4750             if (new_name != NULL)
4751               {
4752               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
4753                 "gecos field \"%s\"\n", new_name, name);
4754               name = new_name;
4755               }
4756             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
4757               "\"%s\": %s\n", gecos_name, expand_string_message);
4758             }
4759           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
4760             "gecos field \"%s\"\n", gecos_pattern, name);
4761           store_free((void *)re);
4762           }
4763         originator_name = string_copy(name);
4764         }
4765
4766       /* A trusted caller has used -f but not -F */
4767
4768       else originator_name = US"";
4769       }
4770
4771     /* Break the retry loop */
4772
4773     break;
4774     }
4775
4776   if (++i > finduser_retries) break;
4777   sleep(1);
4778   }
4779
4780 /* If we cannot get a user login, log the incident and give up, unless the
4781 configuration specifies something to use. When running in the test harness,
4782 any setting of unknown_login overrides the actual name. */
4783
4784 if (originator_login == NULL || running_in_test_harness)
4785   {
4786   if (unknown_login != NULL)
4787     {
4788     originator_login = expand_string(unknown_login);
4789     if (originator_name == NULL && unknown_username != NULL)
4790       originator_name = expand_string(unknown_username);
4791     if (originator_name == NULL) originator_name = US"";
4792     }
4793   if (originator_login == NULL)
4794     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
4795       (int)real_uid);
4796   }
4797
4798 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
4799 RFC822 address.*/
4800
4801 originator_name = string_copy(parse_fix_phrase(originator_name,
4802   Ustrlen(originator_name), big_buffer, big_buffer_size));
4803
4804 /* If a message is created by this call of Exim, the uid/gid of its originator
4805 are those of the caller. These values are overridden if an existing message is
4806 read in from the spool. */
4807
4808 originator_uid = real_uid;
4809 originator_gid = real_gid;
4810
4811 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
4812   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
4813
4814 /* Run in daemon and/or queue-running mode. The function daemon_go() never
4815 returns. We leave this till here so that the originator_ fields are available
4816 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
4817 mode. */
4818
4819 if (daemon_listen || inetd_wait_mode || queue_interval > 0)
4820   {
4821   if (mua_wrapper)
4822     {
4823     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
4824     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
4825       "mua_wrapper is set");
4826     }
4827   daemon_go();
4828   }
4829
4830 /* If the sender ident has not been set (by a trusted caller) set it to
4831 the caller. This will get overwritten below for an inetd call. If a trusted
4832 caller has set it empty, unset it. */
4833
4834 if (sender_ident == NULL) sender_ident = originator_login;
4835   else if (sender_ident[0] == 0) sender_ident = NULL;
4836
4837 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
4838 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
4839 originator_* variables set. */
4840
4841 if (test_rewrite_arg >= 0)
4842   {
4843   really_exim = FALSE;
4844   if (test_rewrite_arg >= argc)
4845     {
4846     printf("-brw needs an address argument\n");
4847     exim_exit(EXIT_FAILURE);
4848     }
4849   rewrite_test(argv[test_rewrite_arg]);
4850   exim_exit(EXIT_SUCCESS);
4851   }
4852
4853 /* A locally-supplied message is considered to be coming from a local user
4854 unless a trusted caller supplies a sender address with -f, or is passing in the
4855 message via SMTP (inetd invocation or otherwise). */
4856
4857 if ((sender_address == NULL && !smtp_input) ||
4858     (!trusted_caller && filter_test == FTEST_NONE))
4859   {
4860   sender_local = TRUE;
4861
4862   /* A trusted caller can supply authenticated_sender and authenticated_id
4863   via -oMas and -oMai and if so, they will already be set. Otherwise, force
4864   defaults except when host checking. */
4865
4866   if (authenticated_sender == NULL && !host_checking)
4867     authenticated_sender = string_sprintf("%s@%s", originator_login,
4868       qualify_domain_sender);
4869   if (authenticated_id == NULL && !host_checking)
4870     authenticated_id = originator_login;
4871   }
4872
4873 /* Trusted callers are always permitted to specify the sender address.
4874 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
4875 is specified is the empty address. However, if a trusted caller does not
4876 specify a sender address for SMTP input, we leave sender_address unset. This
4877 causes the MAIL commands to be honoured. */
4878
4879 if ((!smtp_input && sender_address == NULL) ||
4880     !receive_check_set_sender(sender_address))
4881   {
4882   /* Either the caller is not permitted to set a general sender, or this is
4883   non-SMTP input and the trusted caller has not set a sender. If there is no
4884   sender, or if a sender other than <> is set, override with the originator's
4885   login (which will get qualified below), except when checking things. */
4886
4887   if (sender_address == NULL             /* No sender_address set */
4888        ||                                /*         OR            */
4889        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
4890        !checking))                       /* Not running tests, including filter tests */
4891     {
4892     sender_address = originator_login;
4893     sender_address_forced = FALSE;
4894     sender_address_domain = 0;
4895     }
4896   }
4897
4898 /* Remember whether an untrusted caller set the sender address */
4899
4900 sender_set_untrusted = sender_address != originator_login && !trusted_caller;
4901
4902 /* Ensure that the sender address is fully qualified unless it is the empty
4903 address, which indicates an error message, or doesn't exist (root caller, smtp
4904 interface, no -f argument). */
4905
4906 if (sender_address != NULL && sender_address[0] != 0 &&
4907     sender_address_domain == 0)
4908   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
4909     qualify_domain_sender);
4910
4911 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
4912
4913 /* Handle a request to verify a list of addresses, or test them for delivery.
4914 This must follow the setting of the sender address, since routers can be
4915 predicated upon the sender. If no arguments are given, read addresses from
4916 stdin. Set debug_level to at least D_v to get full output for address testing.
4917 */
4918
4919 if (verify_address_mode || address_test_mode)
4920   {
4921   int exit_value = 0;
4922   int flags = vopt_qualify;
4923
4924   if (verify_address_mode)
4925     {
4926     if (!verify_as_sender) flags |= vopt_is_recipient;
4927     DEBUG(D_verify) debug_print_ids(US"Verifying:");
4928     }
4929
4930   else
4931     {
4932     flags |= vopt_is_recipient;
4933     debug_selector |= D_v;
4934     debug_file = stderr;
4935     debug_fd = fileno(debug_file);
4936     DEBUG(D_verify) debug_print_ids(US"Address testing:");
4937     }
4938
4939   if (recipients_arg < argc)
4940     {
4941     while (recipients_arg < argc)
4942       {
4943       uschar *s = argv[recipients_arg++];
4944       while (*s != 0)
4945         {
4946         BOOL finished = FALSE;
4947         uschar *ss = parse_find_address_end(s, FALSE);
4948         if (*ss == ',') *ss = 0; else finished = TRUE;
4949         test_address(s, flags, &exit_value);
4950         s = ss;
4951         if (!finished)
4952           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
4953         }
4954       }
4955     }
4956
4957   else for (;;)
4958     {
4959     uschar *s = get_stdinput(NULL, NULL);
4960     if (s == NULL) break;
4961     test_address(s, flags, &exit_value);
4962     }
4963
4964   route_tidyup();
4965   exim_exit(exit_value);
4966   }
4967
4968 /* Handle expansion checking. Either expand items on the command line, or read
4969 from stdin if there aren't any. If -Mset was specified, load the message so
4970 that its variables can be used, but restrict this facility to admin users.
4971 Otherwise, if -bem was used, read a message from stdin. */
4972
4973 if (expansion_test)
4974   {
4975   dns_init(FALSE, FALSE, FALSE);
4976   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
4977     {
4978     uschar spoolname[256];  /* Not big_buffer; used in spool_read_header() */
4979     if (!admin_user)
4980       {
4981       fprintf(stderr, "exim: permission denied\n");
4982       exit(EXIT_FAILURE);
4983       }
4984     message_id = argv[msg_action_arg];
4985     (void)string_format(spoolname, sizeof(spoolname), "%s-H", message_id);
4986     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
4987       printf ("Failed to load message datafile %s\n", message_id);
4988     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
4989       printf ("Failed to load message %s\n", message_id);
4990     }
4991
4992   /* Read a test message from a file. We fudge it up to be on stdin, saving
4993   stdin itself for later reading of expansion strings. */
4994
4995   else if (expansion_test_message != NULL)
4996     {
4997     int save_stdin = dup(0);
4998     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
4999     if (fd < 0)
5000       {
5001       fprintf(stderr, "exim: failed to open %s: %s\n", expansion_test_message,
5002         strerror(errno));
5003       return EXIT_FAILURE;
5004       }
5005     (void) dup2(fd, 0);
5006     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5007     message_ended = END_NOTENDED;
5008     read_message_body(receive_msg(extract_recipients));
5009     message_linecount += body_linecount;
5010     (void)dup2(save_stdin, 0);
5011     (void)close(save_stdin);
5012     clearerr(stdin);               /* Required by Darwin */
5013     }
5014
5015   /* Allow $recipients for this testing */
5016
5017   enable_dollar_recipients = TRUE;
5018
5019   /* Expand command line items */
5020
5021   if (recipients_arg < argc)
5022     {
5023     while (recipients_arg < argc)
5024       {
5025       uschar *s = argv[recipients_arg++];
5026       uschar *ss = expand_string(s);
5027       if (ss == NULL) printf ("Failed: %s\n", expand_string_message);
5028       else printf("%s\n", CS ss);
5029       }
5030     }
5031
5032   /* Read stdin */
5033
5034   else
5035     {
5036     char *(*fn_readline)(const char *) = NULL;
5037     void (*fn_addhist)(const char *) = NULL;
5038
5039     #ifdef USE_READLINE
5040     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5041     #endif
5042
5043     for (;;)
5044       {
5045       uschar *ss;
5046       uschar *source = get_stdinput(fn_readline, fn_addhist);
5047       if (source == NULL) break;
5048       ss = expand_string(source);
5049       if (ss == NULL)
5050         printf ("Failed: %s\n", expand_string_message);
5051       else printf("%s\n", CS ss);
5052       }
5053
5054     #ifdef USE_READLINE
5055     if (dlhandle != NULL) dlclose(dlhandle);
5056     #endif
5057     }
5058
5059   /* The data file will be open after -Mset */
5060
5061   if (deliver_datafile >= 0)
5062     {
5063     (void)close(deliver_datafile);
5064     deliver_datafile = -1;
5065     }
5066
5067   exim_exit(EXIT_SUCCESS);
5068   }
5069
5070
5071 /* The active host name is normally the primary host name, but it can be varied
5072 for hosts that want to play several parts at once. We need to ensure that it is
5073 set for host checking, and for receiving messages. */
5074
5075 smtp_active_hostname = primary_hostname;
5076 if (raw_active_hostname != NULL)
5077   {
5078   uschar *nah = expand_string(raw_active_hostname);
5079   if (nah == NULL)
5080     {
5081     if (!expand_string_forcedfail)
5082       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5083         "(smtp_active_hostname): %s", raw_active_hostname,
5084         expand_string_message);
5085     }
5086   else if (nah[0] != 0) smtp_active_hostname = nah;
5087   }
5088
5089 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5090 given IP address so that the blocking and relay configuration can be tested.
5091 Unless a sender_ident was set by -oMt, we discard it (the default is the
5092 caller's login name). An RFC 1413 call is made only if we are running in the
5093 test harness and an incoming interface and both ports are specified, because
5094 there is no TCP/IP call to find the ident for. */
5095
5096 if (host_checking)
5097   {
5098   int x[4];
5099   int size;
5100
5101   if (!sender_ident_set)
5102     {
5103     sender_ident = NULL;
5104     if (running_in_test_harness && sender_host_port != 0 &&
5105         interface_address != NULL && interface_port != 0)
5106       verify_get_ident(1413);
5107     }
5108
5109   /* In case the given address is a non-canonical IPv6 address, canonicalize
5110   it. The code works for both IPv4 and IPv6, as it happens. */
5111
5112   size = host_aton(sender_host_address, x);
5113   sender_host_address = store_get(48);  /* large enough for full IPv6 */
5114   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5115
5116   /* Now set up for testing */
5117
5118   host_build_sender_fullhost();
5119   smtp_input = TRUE;
5120   smtp_in = stdin;
5121   smtp_out = stdout;
5122   sender_local = FALSE;
5123   sender_host_notsocket = TRUE;
5124   debug_file = stderr;
5125   debug_fd = fileno(debug_file);
5126   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5127     "**** but without any ident (RFC 1413) callback.\n"
5128     "**** This is not for real!\n\n",
5129       sender_host_address);
5130
5131   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5132   if (verify_check_host(&hosts_connection_nolog) == OK)
5133     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5134   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5135
5136   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5137   because a log line has already been written for all its failure exists
5138   (usually "connection refused: <reason>") and writing another one is
5139   unnecessary clutter. */
5140
5141   if (smtp_start_session())
5142     {
5143     for (reset_point = store_get(0); ; store_reset(reset_point))
5144       {
5145       if (smtp_setup_msg() <= 0) break;
5146       if (!receive_msg(FALSE)) break;
5147
5148       return_path = sender_address = NULL;
5149       dnslist_domain = dnslist_matched = NULL;
5150 #ifndef DISABLE_DKIM
5151       dkim_cur_signer = NULL;
5152 #endif
5153       acl_var_m = NULL;
5154       deliver_localpart_orig = NULL;
5155       deliver_domain_orig = NULL;
5156       callout_address = sending_ip_address = NULL;
5157       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5158       }
5159     smtp_log_no_mail();
5160     }
5161   exim_exit(EXIT_SUCCESS);
5162   }
5163
5164
5165 /* Arrange for message reception if recipients or SMTP were specified;
5166 otherwise complain unless a version print (-bV) happened or this is a filter
5167 verification test or info dump.
5168 In the former case, show the configuration file name. */
5169
5170 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5171   {
5172   if (version_printed)
5173     {
5174     printf("Configuration file is %s\n", config_main_filename);
5175     return EXIT_SUCCESS;
5176     }
5177
5178   if (info_flag != CMDINFO_NONE)
5179     {
5180     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5181     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5182     }
5183
5184   if (filter_test == FTEST_NONE)
5185     exim_usage(called_as);
5186   }
5187
5188
5189 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5190 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5191 that we are not called from inetd, because that is rejected above. The
5192 following configuration settings are forced here:
5193
5194   (1) Synchronous delivery (-odi)
5195   (2) Errors to stderr (-oep == -oeq)
5196   (3) No parallel remote delivery
5197   (4) Unprivileged delivery
5198
5199 We don't force overall queueing options because there are several of them;
5200 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5201 to override any SMTP queueing. */
5202
5203 if (mua_wrapper)
5204   {
5205   synchronous_delivery = TRUE;
5206   arg_error_handling = ERRORS_STDERR;
5207   remote_max_parallel = 1;
5208   deliver_drop_privilege = TRUE;
5209   queue_smtp = FALSE;
5210   queue_smtp_domains = NULL;
5211 #ifdef SUPPORT_I18N
5212   message_utf8_downconvert = -1;        /* convert-if-needed */
5213 #endif
5214   }
5215
5216
5217 /* Prepare to accept one or more new messages on the standard input. When a
5218 message has been read, its id is returned in message_id[]. If doing immediate
5219 delivery, we fork a delivery process for each received message, except for the
5220 last one, where we can save a process switch.
5221
5222 It is only in non-smtp mode that error_handling is allowed to be changed from
5223 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5224 sendmail error modes other than -oem ever actually used? Later: yes.) */
5225
5226 if (!smtp_input) error_handling = arg_error_handling;
5227
5228 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5229 logging being sent down the socket and make an identd call to get the
5230 sender_ident. */
5231
5232 else if (is_inetd)
5233   {
5234   (void)fclose(stderr);
5235   exim_nullstd();                       /* Re-open to /dev/null */
5236   verify_get_ident(IDENT_PORT);
5237   host_build_sender_fullhost();
5238   set_process_info("handling incoming connection from %s via inetd",
5239     sender_fullhost);
5240   }
5241
5242 /* If the sender host address has been set, build sender_fullhost if it hasn't
5243 already been done (which it will have been for inetd). This caters for the
5244 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5245 so that the test for IP options is skipped for -bs input. */
5246
5247 if (sender_host_address != NULL && sender_fullhost == NULL)
5248   {
5249   host_build_sender_fullhost();
5250   set_process_info("handling incoming connection from %s via -oMa",
5251     sender_fullhost);
5252   sender_host_notsocket = TRUE;
5253   }
5254
5255 /* Otherwise, set the sender host as unknown except for inetd calls. This
5256 prevents host checking in the case of -bs not from inetd and also for -bS. */
5257
5258 else if (!is_inetd) sender_host_unknown = TRUE;
5259
5260 /* If stdout does not exist, then dup stdin to stdout. This can happen
5261 if exim is started from inetd. In this case fd 0 will be set to the socket,
5262 but fd 1 will not be set. This also happens for passed SMTP channels. */
5263
5264 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5265
5266 /* Set up the incoming protocol name and the state of the program. Root is
5267 allowed to force received protocol via the -oMr option above. If we have come
5268 via inetd, the process info has already been set up. We don't set
5269 received_protocol here for smtp input, as it varies according to
5270 batch/HELO/EHLO/AUTH/TLS. */
5271
5272 if (smtp_input)
5273   {
5274   if (!is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5275     smtp_batched_input? "batched " : "",
5276     (sender_address!= NULL)? sender_address : originator_login);
5277   }
5278 else
5279   {
5280   int old_pool = store_pool;
5281   store_pool = POOL_PERM;
5282   if (!received_protocol)
5283     received_protocol = string_sprintf("local%s", called_as);
5284   store_pool = old_pool;
5285   set_process_info("accepting a local non-SMTP message from <%s>",
5286     sender_address);
5287   }
5288
5289 /* Initialize the session_local_queue-only flag (this will be ignored if
5290 mua_wrapper is set) */
5291
5292 queue_check_only();
5293 session_local_queue_only = queue_only;
5294
5295 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5296 the spool if so configured. On failure, we must not attempt to send an error
5297 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5298 error code is given.) */
5299
5300 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5301   {
5302   fprintf(stderr, "exim: insufficient disk space\n");
5303   return EXIT_FAILURE;
5304   }
5305
5306 /* If this is smtp input of any kind, real or batched, handle the start of the
5307 SMTP session.
5308
5309 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5310 because a log line has already been written for all its failure exists
5311 (usually "connection refused: <reason>") and writing another one is
5312 unnecessary clutter. */
5313
5314 if (smtp_input)
5315   {
5316   smtp_in = stdin;
5317   smtp_out = stdout;
5318   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5319   if (verify_check_host(&hosts_connection_nolog) == OK)
5320     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5321   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5322   if (!smtp_start_session())
5323     {
5324     mac_smtp_fflush();
5325     exim_exit(EXIT_SUCCESS);
5326     }
5327   }
5328
5329 /* Otherwise, set up the input size limit here. */
5330
5331 else
5332   {
5333   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5334   if (expand_string_message)
5335     if (thismessage_size_limit == -1)
5336       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5337         "message_size_limit: %s", expand_string_message);
5338     else
5339       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5340         "message_size_limit: %s", expand_string_message);
5341   }
5342
5343 /* Loop for several messages when reading SMTP input. If we fork any child
5344 processes, we don't want to wait for them unless synchronous delivery is
5345 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5346 same as SIG_DFL, despite the fact that documentation often lists the default as
5347 "ignore". This is a confusing area. This is what I know:
5348
5349 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5350 processes that complete simply to go away without ever becoming defunct. You
5351 can't then wait for them - but we don't want to wait for them in the
5352 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5353 happen for all OS (e.g. *BSD is different).
5354
5355 But that's not the end of the story. Some (many? all?) systems have the
5356 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5357 has by default, so it seems that the difference is merely one of default
5358 (compare restarting vs non-restarting signals).
5359
5360 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5361 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5362 of the loop below. Paranoia rules.
5363
5364 February 2003: That's *still* not the end of the story. There are now versions
5365 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5366 process then calls waitpid(), a grumble is written to the system log, because
5367 this is logically inconsistent. In other words, it doesn't like the paranoia.
5368 As a consequence of this, the waitpid() below is now excluded if we are sure
5369 that SIG_IGN works. */
5370
5371 if (!synchronous_delivery)
5372   {
5373   #ifdef SA_NOCLDWAIT
5374   struct sigaction act;
5375   act.sa_handler = SIG_IGN;
5376   sigemptyset(&(act.sa_mask));
5377   act.sa_flags = SA_NOCLDWAIT;
5378   sigaction(SIGCHLD, &act, NULL);
5379   #else
5380   signal(SIGCHLD, SIG_IGN);
5381   #endif
5382   }
5383
5384 /* Save the current store pool point, for resetting at the start of
5385 each message, and save the real sender address, if any. */
5386
5387 reset_point = store_get(0);
5388 real_sender_address = sender_address;
5389
5390 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5391 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5392 collapsed). */
5393
5394 while (more)
5395   {
5396   message_id[0] = 0;
5397
5398   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5399   input and build the recipients list, before calling receive_msg() to read the
5400   message proper. Whatever sender address is given in the SMTP transaction is
5401   often ignored for local senders - we use the actual sender, which is normally
5402   either the underlying user running this process or a -f argument provided by
5403   a trusted caller. It is saved in real_sender_address. The test for whether to
5404   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5405
5406   if (smtp_input)
5407     {
5408     int rc;
5409     if ((rc = smtp_setup_msg()) > 0)
5410       {
5411       if (real_sender_address != NULL &&
5412           !receive_check_set_sender(sender_address))
5413         {
5414         sender_address = raw_sender = real_sender_address;
5415         sender_address_unrewritten = NULL;
5416         }
5417
5418       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5419       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5420       the very end. The result of the ACL is ignored (as for other non-SMTP
5421       messages). It is run for its potential side effects. */
5422
5423       if (smtp_batched_input && acl_not_smtp_start != NULL)
5424         {
5425         uschar *user_msg, *log_msg;
5426         enable_dollar_recipients = TRUE;
5427         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5428           &user_msg, &log_msg);
5429         enable_dollar_recipients = FALSE;
5430         }
5431
5432       /* Now get the data for the message */
5433
5434       more = receive_msg(extract_recipients);
5435       if (message_id[0] == 0)
5436         {
5437         cancel_cutthrough_connection(TRUE, US"receive dropped");
5438         if (more) goto moreloop;
5439         smtp_log_no_mail();               /* Log no mail if configured */
5440         exim_exit(EXIT_FAILURE);
5441         }
5442       }
5443     else
5444       {
5445       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5446       smtp_log_no_mail();               /* Log no mail if configured */
5447       exim_exit((rc == 0)? EXIT_SUCCESS : EXIT_FAILURE);
5448       }
5449     }
5450
5451   /* In the non-SMTP case, we have all the information from the command
5452   line, but must process it in case it is in the more general RFC822
5453   format, and in any case, to detect syntax errors. Also, it appears that
5454   the use of comma-separated lists as single arguments is common, so we
5455   had better support them. */
5456
5457   else
5458     {
5459     int i;
5460     int rcount = 0;
5461     int count = argc - recipients_arg;
5462     uschar **list = argv + recipients_arg;
5463
5464     /* These options cannot be changed dynamically for non-SMTP messages */
5465
5466     active_local_sender_retain = local_sender_retain;
5467     active_local_from_check = local_from_check;
5468
5469     /* Save before any rewriting */
5470
5471     raw_sender = string_copy(sender_address);
5472
5473     /* Loop for each argument */
5474
5475     for (i = 0; i < count; i++)
5476       {
5477       int start, end, domain;
5478       uschar *errmess;
5479       uschar *s = list[i];
5480
5481       /* Loop for each comma-separated address */
5482
5483       while (*s != 0)
5484         {
5485         BOOL finished = FALSE;
5486         uschar *recipient;
5487         uschar *ss = parse_find_address_end(s, FALSE);
5488
5489         if (*ss == ',') *ss = 0; else finished = TRUE;
5490
5491         /* Check max recipients - if -t was used, these aren't recipients */
5492
5493         if (recipients_max > 0 && ++rcount > recipients_max &&
5494             !extract_recipients)
5495           if (error_handling == ERRORS_STDERR)
5496             {
5497             fprintf(stderr, "exim: too many recipients\n");
5498             exim_exit(EXIT_FAILURE);
5499             }
5500           else
5501             {
5502             return
5503               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5504                 errors_sender_rc : EXIT_FAILURE;
5505             }
5506
5507 #ifdef SUPPORT_I18N
5508         {
5509         BOOL b = allow_utf8_domains;
5510         allow_utf8_domains = TRUE;
5511 #endif
5512         recipient =
5513           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5514
5515 #ifdef SUPPORT_I18N
5516         if (string_is_utf8(recipient))
5517           message_smtputf8 = TRUE;
5518         else
5519           allow_utf8_domains = b;
5520         }
5521 #endif
5522         if (domain == 0 && !allow_unqualified_recipient)
5523           {
5524           recipient = NULL;
5525           errmess = US"unqualified recipient address not allowed";
5526           }
5527
5528         if (recipient == NULL)
5529           {
5530           if (error_handling == ERRORS_STDERR)
5531             {
5532             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5533               string_printing(list[i]), errmess);
5534             exim_exit(EXIT_FAILURE);
5535             }
5536           else
5537             {
5538             error_block eblock;
5539             eblock.next = NULL;
5540             eblock.text1 = string_printing(list[i]);
5541             eblock.text2 = errmess;
5542             return
5543               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5544                 errors_sender_rc : EXIT_FAILURE;
5545             }
5546           }
5547
5548         receive_add_recipient(recipient, -1);
5549         s = ss;
5550         if (!finished)
5551           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5552         }
5553       }
5554
5555     /* Show the recipients when debugging */
5556
5557     DEBUG(D_receive)
5558       {
5559       int i;
5560       if (sender_address != NULL) debug_printf("Sender: %s\n", sender_address);
5561       if (recipients_list != NULL)
5562         {
5563         debug_printf("Recipients:\n");
5564         for (i = 0; i < recipients_count; i++)
5565           debug_printf("  %s\n", recipients_list[i].address);
5566         }
5567       }
5568
5569     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5570     ignored; rejecting here would just add complication, and it can just as
5571     well be done later. Allow $recipients to be visible in the ACL. */
5572
5573     if (acl_not_smtp_start)
5574       {
5575       uschar *user_msg, *log_msg;
5576       enable_dollar_recipients = TRUE;
5577       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5578         &user_msg, &log_msg);
5579       enable_dollar_recipients = FALSE;
5580       }
5581
5582     /* Pause for a while waiting for input.  If none received in that time,
5583     close the logfile, if we had one open; then if we wait for a long-running
5584     datasource (months, in one use-case) log rotation will not leave us holding
5585     the file copy. */
5586
5587     if (!receive_timeout)
5588       {
5589       struct timeval t = { .tv_sec = 30*60, .tv_usec = 0 };     /* 30 minutes */
5590       fd_set r;
5591
5592       FD_ZERO(&r); FD_SET(0, &r);
5593       if (select(1, &r, NULL, NULL, &t) == 0) mainlog_close();
5594       }
5595
5596     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5597     will just read the headers for the message, and not write anything onto the
5598     spool. */
5599
5600     message_ended = END_NOTENDED;
5601     more = receive_msg(extract_recipients);
5602
5603     /* more is always FALSE here (not SMTP message) when reading a message
5604     for real; when reading the headers of a message for filter testing,
5605     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5606
5607     if (message_id[0] == 0) exim_exit(EXIT_FAILURE);
5608     }  /* Non-SMTP message reception */
5609
5610   /* If this is a filter testing run, there are headers in store, but
5611   no message on the spool. Run the filtering code in testing mode, setting
5612   the domain to the qualify domain and the local part to the current user,
5613   unless they have been set by options. The prefix and suffix are left unset
5614   unless specified. The the return path is set to to the sender unless it has
5615   already been set from a return-path header in the message. */
5616
5617   if (filter_test != FTEST_NONE)
5618     {
5619     deliver_domain = (ftest_domain != NULL)?
5620       ftest_domain : qualify_domain_recipient;
5621     deliver_domain_orig = deliver_domain;
5622     deliver_localpart = (ftest_localpart != NULL)?
5623       ftest_localpart : originator_login;
5624     deliver_localpart_orig = deliver_localpart;
5625     deliver_localpart_prefix = ftest_prefix;
5626     deliver_localpart_suffix = ftest_suffix;
5627     deliver_home = originator_home;
5628
5629     if (return_path == NULL)
5630       {
5631       printf("Return-path copied from sender\n");
5632       return_path = string_copy(sender_address);
5633       }
5634     else
5635       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5636     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5637
5638     receive_add_recipient(
5639       string_sprintf("%s%s%s@%s",
5640         (ftest_prefix == NULL)? US"" : ftest_prefix,
5641         deliver_localpart,
5642         (ftest_suffix == NULL)? US"" : ftest_suffix,
5643         deliver_domain), -1);
5644
5645     printf("Recipient   = %s\n", recipients_list[0].address);
5646     if (ftest_prefix != NULL) printf("Prefix    = %s\n", ftest_prefix);
5647     if (ftest_suffix != NULL) printf("Suffix    = %s\n", ftest_suffix);
5648
5649     if (chdir("/"))   /* Get away from wherever the user is running this from */
5650       {
5651       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5652       exim_exit(EXIT_FAILURE);
5653       }
5654
5655     /* Now we run either a system filter test, or a user filter test, or both.
5656     In the latter case, headers added by the system filter will persist and be
5657     available to the user filter. We need to copy the filter variables
5658     explicitly. */
5659
5660     if ((filter_test & FTEST_SYSTEM) != 0)
5661       {
5662       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5663         exim_exit(EXIT_FAILURE);
5664       }
5665
5666     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5667
5668     if ((filter_test & FTEST_USER) != 0)
5669       {
5670       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5671         exim_exit(EXIT_FAILURE);
5672       }
5673
5674     exim_exit(EXIT_SUCCESS);
5675     }
5676
5677   /* Else act on the result of message reception. We should not get here unless
5678   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5679   will be TRUE. If it is not, check on the number of messages received in this
5680   connection. */
5681
5682   if (!session_local_queue_only &&
5683       smtp_accept_queue_per_connection > 0 &&
5684       receive_messagecount > smtp_accept_queue_per_connection)
5685     {
5686     session_local_queue_only = TRUE;
5687     queue_only_reason = 2;
5688     }
5689
5690   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5691   and queue_only_load is set, check that the load average is below it. If it is
5692   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5693   default), we put the whole session into queue_only mode. It then remains this
5694   way for any subsequent messages on the same SMTP connection. This is a
5695   deliberate choice; even though the load average may fall, it doesn't seem
5696   right to deliver later messages on the same call when not delivering earlier
5697   ones. However, there are odd cases where this is not wanted, so this can be
5698   changed by setting queue_only_load_latch false. */
5699
5700   local_queue_only = session_local_queue_only;
5701   if (!local_queue_only && queue_only_load >= 0)
5702     {
5703     local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load;
5704     if (local_queue_only)
5705       {
5706       queue_only_reason = 3;
5707       if (queue_only_load_latch) session_local_queue_only = TRUE;
5708       }
5709     }
5710
5711   /* If running as an MUA wrapper, all queueing options and freezing options
5712   are ignored. */
5713
5714   if (mua_wrapper)
5715     local_queue_only = queue_only_policy = deliver_freeze = FALSE;
5716
5717   /* Log the queueing here, when it will get a message id attached, but
5718   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
5719   connections). */
5720
5721   if (local_queue_only)
5722     {
5723     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5724     switch(queue_only_reason)
5725       {
5726       case 2:
5727         log_write(L_delay_delivery,
5728                 LOG_MAIN, "no immediate delivery: more than %d messages "
5729           "received in one connection", smtp_accept_queue_per_connection);
5730         break;
5731
5732       case 3:
5733         log_write(L_delay_delivery,
5734                 LOG_MAIN, "no immediate delivery: load average %.2f",
5735                 (double)load_average/1000.0);
5736       break;
5737       }
5738     }
5739
5740   else if (queue_only_policy || deliver_freeze)
5741     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
5742
5743   /* Else do the delivery unless the ACL or local_scan() called for queue only
5744   or froze the message. Always deliver in a separate process. A fork failure is
5745   not a disaster, as the delivery will eventually happen on a subsequent queue
5746   run. The search cache must be tidied before the fork, as the parent will
5747   do it before exiting. The child will trigger a lookup failure and
5748   thereby defer the delivery if it tries to use (for example) a cached ldap
5749   connection that the parent has called unbind on. */
5750
5751   else
5752     {
5753     pid_t pid;
5754     search_tidyup();
5755
5756     if ((pid = fork()) == 0)
5757       {
5758       int rc;
5759       close_unwanted();      /* Close unwanted file descriptors and TLS */
5760       exim_nullstd();        /* Ensure std{in,out,err} exist */
5761
5762       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
5763       mode, deliver_drop_privilege is forced TRUE). */
5764
5765       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
5766         {
5767         delivery_re_exec(CEE_EXEC_EXIT);
5768         /* Control does not return here. */
5769         }
5770
5771       /* No need to re-exec */
5772
5773       rc = deliver_message(message_id, FALSE, FALSE);
5774       search_tidyup();
5775       _exit((!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED)?
5776         EXIT_SUCCESS : EXIT_FAILURE);
5777       }
5778
5779     if (pid < 0)
5780       {
5781       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
5782       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
5783         "process: %s", strerror(errno));
5784       }
5785     else
5786       {
5787       release_cutthrough_connection(US"msg passed for delivery");
5788
5789       /* In the parent, wait if synchronous delivery is required. This will
5790       always be the case in MUA wrapper mode. */
5791
5792       if (synchronous_delivery)
5793         {
5794         int status;
5795         while (wait(&status) != pid);
5796         if ((status & 0x00ff) != 0)
5797           log_write(0, LOG_MAIN|LOG_PANIC,
5798             "process %d crashed with signal %d while delivering %s",
5799             (int)pid, status & 0x00ff, message_id);
5800         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
5801         }
5802       }
5803     }
5804
5805   /* The loop will repeat if more is TRUE. If we do not know know that the OS
5806   automatically reaps children (see comments above the loop), clear away any
5807   finished subprocesses here, in case there are lots of messages coming in
5808   from the same source. */
5809
5810   #ifndef SIG_IGN_WORKS
5811   while (waitpid(-1, NULL, WNOHANG) > 0);
5812   #endif
5813
5814 moreloop:
5815   return_path = sender_address = NULL;
5816   authenticated_sender = NULL;
5817   deliver_localpart_orig = NULL;
5818   deliver_domain_orig = NULL;
5819   deliver_host = deliver_host_address = NULL;
5820   dnslist_domain = dnslist_matched = NULL;
5821 #ifdef WITH_CONTENT_SCAN
5822   malware_name = NULL;
5823 #endif
5824   callout_address = NULL;
5825   sending_ip_address = NULL;
5826   acl_var_m = NULL;
5827   { int i; for(i=0; i<REGEX_VARS; i++) regex_vars[i] = NULL; }
5828
5829   store_reset(reset_point);
5830   }
5831
5832 exim_exit(EXIT_SUCCESS);   /* Never returns */
5833 return 0;                  /* To stop compiler warning */
5834 }
5835
5836 /*************************************************
5837 *          read as much as requested             *
5838 *************************************************/
5839
5840 /* The syscall read(2) doesn't always returns as much as we want. For
5841 several reasons it might get less. (Not talking about signals, as syscalls
5842 are restartable). When reading from a network or pipe connection the sender
5843 might send in smaller chunks, with delays between these chunks. The read(2)
5844 may return such a chunk.
5845
5846 The more the writer writes and the smaller the pipe between write and read is,
5847 the more we get the chance of reading leass than requested. (See bug 2130)
5848
5849 This function read(2)s until we got all the data we *requested*.
5850
5851 Note: This function may block. Use it only if you're sure about the
5852 amount of data you will get.
5853
5854 Argument:
5855   fd          the file descriptor to read from
5856   buffer      pointer to a buffer of size len
5857   len         the requested(!) amount of bytes
5858
5859 Returns:      the amount of bytes read
5860 */
5861 ssize_t
5862 readn(int fd, void *buffer, size_t len)
5863 {
5864   void *next = buffer;
5865   void *end = buffer + len;
5866
5867   while (next < end)
5868     {
5869     ssize_t got = read(fd, next, end - next);
5870
5871     /* I'm not sure if there are signals that can interrupt us,
5872     for now I assume the worst */
5873     if (got == -1 && errno == EINTR) continue;
5874     if (got <= 0) return next - buffer;
5875     next += got;
5876     }
5877
5878   return len;
5879 }
5880
5881
5882 /* End of exim.c */