src/src/exim.c

   1 /*************************************************
   2 *     Exim - an Internet mail transport agent    *
   3 *************************************************/
   4
   5 /* Copyright (c) The Exim Maintainers 2020 - 2022 */
   6 /* Copyright (c) University of Cambridge 1995 - 2018 */
   7 /* See the file NOTICE for conditions of use and distribution. */
   8
   9
  10 /* The main function: entry point, initialization, and high-level control.
  11 Also a few functions that don't naturally fit elsewhere. */
  12
  13
  14 #include "exim.h"
  15
  16 #if defined(__GLIBC__) && !defined(__UCLIBC__)
  17 # include <gnu/libc-version.h>
  18 #endif
  19
  20 #ifndef _TIME_H
  21 # include <time.h>
  22 #endif
  23 #ifndef NO_EXECINFO
  24 # include <execinfo.h>
  25 #endif
  26
  27 #ifdef USE_GNUTLS
  28 # include <gnutls/gnutls.h>
  29 # if GNUTLS_VERSION_NUMBER < 0x030103 && !defined(DISABLE_OCSP)
  30 #  define DISABLE_OCSP
  31 # endif
  32 #endif
  33
  34 extern void init_lookup_list(void);
  35
  36
  37
  38 /*************************************************
  39 *      Function interface to store functions     *
  40 *************************************************/
  41
  42 /* We need some real functions to pass to the PCRE regular expression library
  43 for store allocation via Exim's store manager. The normal calls are actually
  44 macros that pass over location information to make tracing easier. These
  45 functions just interface to the standard macro calls. A good compiler will
  46 optimize out the tail recursion and so not make them too expensive. */
  47
  48 static void *
  49 function_store_malloc(PCRE2_SIZE size, void * tag)
  50 {
  51 return store_malloc((int)size);
  52 }
  53
  54 static void
  55 function_store_free(void * block, void * tag)
  56 {
  57 /* At least some version of pcre2 pass a null pointer */
  58 if (block) store_free(block);
  59 }
  60
  61
  62
  63
  64 /*************************************************
  65 *         Enums for cmdline interface            *
  66 *************************************************/
  67
  68 enum commandline_info { CMDINFO_NONE=0,
  69   CMDINFO_HELP, CMDINFO_SIEVE, CMDINFO_DSCP };
  70
  71
  72
  73
  74 /*************************************************
  75 *  Compile regular expression and panic on fail  *
  76 *************************************************/
  77
  78 /* This function is called when failure to compile a regular expression leads
  79 to a panic exit. In other cases, pcre_compile() is called directly. In many
  80 cases where this function is used, the results of the compilation are to be
  81 placed in long-lived store, so we temporarily reset the store management
  82 functions that PCRE uses if the use_malloc flag is set.
  83
  84 Argument:
  85   pattern     the pattern to compile
  86   caseless    TRUE if caseless matching is required
  87   use_malloc  TRUE if compile into malloc store
  88
  89 Returns:      pointer to the compiled pattern
  90 */
  91
  92 const pcre2_code *
  93 regex_must_compile(const uschar * pattern, BOOL caseless, BOOL use_malloc)
  94 {
  95 size_t offset;
  96 int options = caseless ? PCRE_COPT|PCRE2_CASELESS : PCRE_COPT;
  97 const pcre2_code * yield;
  98 int err;
  99 pcre2_general_context * gctx;
 100 pcre2_compile_context * cctx;
 101
 102 if (use_malloc)
 103   {
 104   gctx = pcre2_general_context_create(function_store_malloc, function_store_free, NULL);
 105   cctx = pcre2_compile_context_create(gctx);
 106   }
 107 else
 108   cctx = pcre_cmp_ctx;
 109
 110 if (!(yield = pcre2_compile((PCRE2_SPTR)pattern, PCRE2_ZERO_TERMINATED, options,
 111   &err, &offset, cctx)))
 112   {
 113   uschar errbuf[128];
 114   pcre2_get_error_message(err, errbuf, sizeof(errbuf));
 115   log_write(0, LOG_MAIN|LOG_PANIC_DIE, "regular expression error: "
 116     "%s at offset %ld while compiling %s", errbuf, (long)offset, pattern);
 117   }
 118
 119 if (use_malloc)
 120   {
 121   pcre2_compile_context_free(cctx);
 122   pcre2_general_context_free(gctx);
 123   }
 124 return yield;
 125 }
 126
 127
 128 static void
 129 pcre_init(void)
 130 {
 131 pcre_gen_ctx = pcre2_general_context_create(function_store_malloc, function_store_free, NULL);
 132 pcre_cmp_ctx = pcre2_compile_context_create(pcre_gen_ctx);
 133 pcre_mtc_ctx = pcre2_match_context_create(pcre_gen_ctx);
 134 }
 135
 136
 137
 138
 139 /*************************************************
 140 *   Execute regular expression and set strings   *
 141 *************************************************/
 142
 143 /* This function runs a regular expression match, and sets up the pointers to
 144 the matched substrings.  The matched strings are copied so the lifetime of
 145 the subject is not a problem.
 146
 147 Arguments:
 148   re          the compiled expression
 149   subject     the subject string
 150   options     additional PCRE options
 151   setup       if < 0 do full setup
 152               if >= 0 setup from setup+1 onwards,
 153                 excluding the full matched string
 154
 155 Returns:      TRUE if matched, or FALSE
 156 */
 157
 158 BOOL
 159 regex_match_and_setup(const pcre2_code * re, const uschar * subject, int options, int setup)
 160 {
 161 pcre2_match_data * md = pcre2_match_data_create_from_pattern(re, pcre_gen_ctx);
 162 int res = pcre2_match(re, (PCRE2_SPTR)subject, PCRE2_ZERO_TERMINATED, 0,
 163                         PCRE_EOPT | options, md, pcre_mtc_ctx);
 164 BOOL yield;
 165
 166 if ((yield = (res >= 0)))
 167   {
 168   res = pcre2_get_ovector_count(md);
 169   expand_nmax = setup < 0 ? 0 : setup + 1;
 170   for (int matchnum = setup < 0 ? 0 : 1; matchnum < res; matchnum++)
 171     {
 172     PCRE2_SIZE len;
 173     pcre2_substring_get_bynumber(md, matchnum,
 174       (PCRE2_UCHAR **)&expand_nstring[expand_nmax], &len);
 175     expand_nlength[expand_nmax++] = (int)len;
 176     }
 177   expand_nmax--;
 178   }
 179 else if (res != PCRE2_ERROR_NOMATCH) DEBUG(D_any)
 180   {
 181   uschar errbuf[128];
 182   pcre2_get_error_message(res, errbuf, sizeof(errbuf));
 183   debug_printf_indent("pcre2: %s\n", errbuf);
 184   }
 185 pcre2_match_data_free(md);
 186 return yield;
 187 }
 188
 189
 190 /* Check just for match with regex.  Uses the common memory-handling.
 191
 192 Arguments:
 193         re      compiled regex
 194         subject string to be checked
 195         slen    length of subject; -1 for nul-terminated
 196         rptr    pointer for matched string, copied, or NULL
 197
 198 Return: TRUE for a match.
 199 */
 200
 201 BOOL
 202 regex_match(const pcre2_code * re, const uschar * subject, int slen, uschar ** rptr)
 203 {
 204 pcre2_match_data * md = pcre2_match_data_create(1, pcre_gen_ctx);
 205 int rc = pcre2_match(re, (PCRE2_SPTR)subject,
 206                       slen >= 0 ? slen : PCRE2_ZERO_TERMINATED,
 207                       0, PCRE_EOPT, md, pcre_mtc_ctx);
 208 PCRE2_SIZE * ovec = pcre2_get_ovector_pointer(md);
 209 if (rc < 0)
 210   return FALSE;
 211 if (rptr)
 212   *rptr = string_copyn(subject + ovec[0], ovec[1] - ovec[0]);
 213 return TRUE;
 214 }
 215
 216
 217
 218 /*************************************************
 219 *            Set up processing details           *
 220 *************************************************/
 221
 222 /* Save a text string for dumping when SIGUSR1 is received.
 223 Do checks for overruns.
 224
 225 Arguments: format and arguments, as for printf()
 226 Returns:   nothing
 227 */
 228
 229 void
 230 set_process_info(const char *format, ...)
 231 {
 232 gstring gs = { .size = PROCESS_INFO_SIZE - 2, .ptr = 0, .s = process_info };
 233 gstring * g;
 234 int len;
 235 va_list ap;
 236
 237 g = string_fmt_append(&gs, "%5d ", (int)getpid());
 238 len = g->ptr;
 239 va_start(ap, format);
 240 if (!string_vformat(g, 0, format, ap))
 241   {
 242   gs.ptr = len;
 243   g = string_cat(&gs, US"**** string overflowed buffer ****");
 244   }
 245 g = string_catn(g, US"\n", 1);
 246 string_from_gstring(g);
 247 process_info_len = g->ptr;
 248 DEBUG(D_process_info) debug_printf("set_process_info: %s", process_info);
 249 va_end(ap);
 250 }
 251
 252 /***********************************************
 253 *            Handler for SIGTERM               *
 254 ***********************************************/
 255
 256 static void
 257 term_handler(int sig)
 258 {
 259 exit(1);
 260 }
 261
 262
 263 /***********************************************
 264 *            Handler for SIGSEGV               *
 265 ***********************************************/
 266
 267 #define STACKDUMP_MAX 24
 268 void
 269 stackdump(ucontext_t * ucontext)
 270 {
 271 #ifndef NO_EXECINFO
 272 void * buf[STACKDUMP_MAX];
 273 char ** ss;
 274 int nptrs = backtrace(buf, STACKDUMP_MAX);
 275
 276 log_write(0, LOG_MAIN|LOG_PANIC, "backtrace\n");
 277 log_write(0, LOG_MAIN|LOG_PANIC, "---\n");
 278 if ((ss = backtrace_symbols(buf, nptrs)))
 279   {
 280   for (int i = 0; i < nptrs; i++)
 281     log_write(0, LOG_MAIN|LOG_PANIC, "\t%s\n", ss[i]);
 282   free(ss);
 283   }
 284 else
 285   log_write(0, LOG_MAIN|LOG_PANIC, "backtrace_symbols: %s\n", strerror(errno));
 286 log_write(0, LOG_MAIN|LOG_PANIC, "---\n");
 287 #endif
 288 }
 289 #undef STACKDUMP_MAX
 290
 291
 292 static void
 293 #ifdef SA_SIGINFO
 294 segv_handler(int sig, siginfo_t * info, void * uctx)
 295 {
 296 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (fault address: %p)", info->si_addr);
 297 # if defined(SEGV_MAPERR) && defined(SEGV_ACCERR) && defined(SEGV_BNDERR) && defined(SEGV_PKUERR)
 298 switch (info->si_code)
 299   {
 300   case SEGV_MAPERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_MAPERR"); break;
 301   case SEGV_ACCERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_ACCERR"); break;
 302   case SEGV_BNDERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_BNDERR"); break;
 303   case SEGV_PKUERR: log_write(0, LOG_MAIN|LOG_PANIC, "SEGV_PKUERR"); break;
 304   }
 305 # endif
 306 if (US info->si_addr < US 4096)
 307   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (null pointer indirection)");
 308 else
 309   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
 310 if (process_info_len > 0)
 311   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
 312 stackdump(uctx);
 313 signal(SIGSEGV, SIG_DFL);
 314 kill(getpid(), sig);
 315 }
 316
 317 #else
 318 segv_handler(int sig)
 319 {
 320 log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (maybe attempt to write to immutable memory)");
 321 if (process_info_len > 0)
 322   log_write(0, LOG_MAIN|LOG_PANIC, "SIGSEGV (%.*s)", process_info_len, process_info);
 323 stackdump();
 324 signal(SIGSEGV, SIG_DFL);
 325 kill(getpid(), sig);
 326 }
 327 #endif
 328
 329
 330 /*************************************************
 331 *             Handler for SIGUSR1                *
 332 *************************************************/
 333
 334 /* SIGUSR1 causes any exim process to write to the process log details of
 335 what it is currently doing. It will only be used if the OS is capable of
 336 setting up a handler that causes automatic restarting of any system call
 337 that is in progress at the time.
 338
 339 This function takes care to be signal-safe.
 340
 341 Argument: the signal number (SIGUSR1)
 342 Returns:  nothing
 343 */
 344
 345 static void
 346 usr1_handler(int sig)
 347 {
 348 int fd;
 349
 350 os_restarting_signal(sig, usr1_handler);
 351
 352 if (!process_log_path) return;
 353 fd = log_open_as_exim(process_log_path);
 354
 355 /* If we are neither exim nor root, or if we failed to create the log file,
 356 give up. There is not much useful we can do with errors, since we don't want
 357 to disrupt whatever is going on outside the signal handler. */
 358
 359 if (fd < 0) return;
 360
 361 (void)write(fd, process_info, process_info_len);
 362 (void)close(fd);
 363 }
 364
 365
 366
 367 /*************************************************
 368 *             Timeout handler                    *
 369 *************************************************/
 370
 371 /* This handler is enabled most of the time that Exim is running. The handler
 372 doesn't actually get used unless alarm() has been called to set a timer, to
 373 place a time limit on a system call of some kind. When the handler is run, it
 374 re-enables itself.
 375
 376 There are some other SIGALRM handlers that are used in special cases when more
 377 than just a flag setting is required; for example, when reading a message's
 378 input. These are normally set up in the code module that uses them, and the
 379 SIGALRM handler is reset to this one afterwards.
 380
 381 Argument: the signal value (SIGALRM)
 382 Returns:  nothing
 383 */
 384
 385 void
 386 sigalrm_handler(int sig)
 387 {
 388 sigalrm_seen = TRUE;
 389 os_non_restarting_signal(SIGALRM, sigalrm_handler);
 390 }
 391
 392
 393
 394 /*************************************************
 395 *      Sleep for a fractional time interval      *
 396 *************************************************/
 397
 398 /* This function is called by millisleep() and exim_wait_tick() to wait for a
 399 period of time that may include a fraction of a second. The coding is somewhat
 400 tedious. We do not expect setitimer() ever to fail, but if it does, the process
 401 will wait for ever, so we panic in this instance. (There was a case of this
 402 when a bug in a function that calls milliwait() caused it to pass invalid data.
 403 That's when I added the check. :-)
 404
 405 We assume it to be not worth sleeping for under 50us; this value will
 406 require revisiting as hardware advances.  This avoids the issue of
 407 a zero-valued timer setting meaning "never fire".
 408
 409 Argument:  an itimerval structure containing the interval
 410 Returns:   nothing
 411 */
 412
 413 static void
 414 milliwait(struct itimerval *itval)
 415 {
 416 sigset_t sigmask;
 417 sigset_t old_sigmask;
 418 int save_errno = errno;
 419
 420 if (itval->it_value.tv_usec < 50 && itval->it_value.tv_sec == 0)
 421   return;
 422 (void)sigemptyset(&sigmask);                           /* Empty mask */
 423 (void)sigaddset(&sigmask, SIGALRM);                    /* Add SIGALRM */
 424 (void)sigprocmask(SIG_BLOCK, &sigmask, &old_sigmask);  /* Block SIGALRM */
 425 if (setitimer(ITIMER_REAL, itval, NULL) < 0)           /* Start timer */
 426   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
 427     "setitimer() failed: %s", strerror(errno));
 428 (void)sigfillset(&sigmask);                            /* All signals */
 429 (void)sigdelset(&sigmask, SIGALRM);                    /* Remove SIGALRM */
 430 (void)sigsuspend(&sigmask);                            /* Until SIGALRM */
 431 (void)sigprocmask(SIG_SETMASK, &old_sigmask, NULL);    /* Restore mask */
 432 errno = save_errno;
 433 sigalrm_seen = FALSE;
 434 }
 435
 436
 437
 438
 439 /*************************************************
 440 *         Millisecond sleep function             *
 441 *************************************************/
 442
 443 /* The basic sleep() function has a granularity of 1 second, which is too rough
 444 in some cases - for example, when using an increasing delay to slow down
 445 spammers.
 446
 447 Argument:    number of millseconds
 448 Returns:     nothing
 449 */
 450
 451 void
 452 millisleep(int msec)
 453 {
 454 struct itimerval itval = {.it_interval = {.tv_sec = 0, .tv_usec = 0},
 455                           .it_value = {.tv_sec = msec/1000,
 456                                        .tv_usec = (msec % 1000) * 1000}};
 457 milliwait(&itval);
 458 }
 459
 460
 461
 462 /*************************************************
 463 *         Compare microsecond times              *
 464 *************************************************/
 465
 466 /*
 467 Arguments:
 468   tv1         the first time
 469   tv2         the second time
 470
 471 Returns:      -1, 0, or +1
 472 */
 473
 474 static int
 475 exim_tvcmp(struct timeval *t1, struct timeval *t2)
 476 {
 477 if (t1->tv_sec > t2->tv_sec) return +1;
 478 if (t1->tv_sec < t2->tv_sec) return -1;
 479 if (t1->tv_usec > t2->tv_usec) return +1;
 480 if (t1->tv_usec < t2->tv_usec) return -1;
 481 return 0;
 482 }
 483
 484
 485
 486
 487 /*************************************************
 488 *          Clock tick wait function              *
 489 *************************************************/
 490
 491 #ifdef _POSIX_MONOTONIC_CLOCK
 492 # ifdef CLOCK_BOOTTIME
 493 #  define EXIM_CLOCKTYPE CLOCK_BOOTTIME
 494 # else
 495 #  define EXIM_CLOCKTYPE CLOCK_MONOTONIC
 496 # endif
 497
 498 /* Amount EXIM_CLOCK is behind realtime, at startup. */
 499 static struct timespec offset_ts;
 500
 501 static void
 502 exim_clock_init(void)
 503 {
 504 struct timeval tv;
 505 if (clock_gettime(EXIM_CLOCKTYPE, &offset_ts) != 0) return;
 506 (void)gettimeofday(&tv, NULL);
 507 offset_ts.tv_sec = tv.tv_sec - offset_ts.tv_sec;
 508 offset_ts.tv_nsec = tv.tv_usec * 1000 - offset_ts.tv_nsec;
 509 if (offset_ts.tv_nsec >= 0) return;
 510 offset_ts.tv_sec--;
 511 offset_ts.tv_nsec += 1000*1000*1000;
 512 }
 513 #endif
 514
 515
 516 void
 517 exim_gettime(struct timeval * tv)
 518 {
 519 #ifdef _POSIX_MONOTONIC_CLOCK
 520 struct timespec now_ts;
 521
 522 if (clock_gettime(EXIM_CLOCKTYPE, &now_ts) == 0)
 523   {
 524   now_ts.tv_sec += offset_ts.tv_sec;
 525   if ((now_ts.tv_nsec += offset_ts.tv_nsec) >= 1000*1000*1000)
 526     {
 527     now_ts.tv_sec++;
 528     now_ts.tv_nsec -= 1000*1000*1000;
 529     }
 530   tv->tv_sec = now_ts.tv_sec;
 531   tv->tv_usec = now_ts.tv_nsec / 1000;
 532   }
 533 else
 534 #endif
 535   (void)gettimeofday(tv, NULL);
 536 }
 537
 538
 539 /* Exim uses a time + a pid to generate a unique identifier in two places: its
 540 message IDs, and in file names for maildir deliveries. Because some OS now
 541 re-use pids within the same second, sub-second times are now being used.
 542 However, for absolute certainty, we must ensure the clock has ticked before
 543 allowing the relevant process to complete. At the time of implementation of
 544 this code (February 2003), the speed of processors is such that the clock will
 545 invariably have ticked already by the time a process has done its job. This
 546 function prepares for the time when things are faster - and it also copes with
 547 clocks that go backwards.
 548
 549 Arguments:
 550   prev_tv      A timeval which was used to create uniqueness; its usec field
 551                  has been rounded down to the value of the resolution.
 552                  We want to be sure the current time is greater than this.
 553                  On return, updated to current (rounded down).
 554   resolution   The resolution that was used to divide the microseconds
 555                  (1 for maildir, larger for message ids)
 556
 557 Returns:       nothing
 558 */
 559
 560 void
 561 exim_wait_tick(struct timeval * prev_tv, int resolution)
 562 {
 563 struct timeval now_tv;
 564 long int now_true_usec;
 565
 566 exim_gettime(&now_tv);
 567 now_true_usec = now_tv.tv_usec;
 568 now_tv.tv_usec = (now_true_usec/resolution) * resolution;
 569
 570 while (exim_tvcmp(&now_tv, prev_tv) <= 0)
 571   {
 572   struct itimerval itval;
 573   itval.it_interval.tv_sec = 0;
 574   itval.it_interval.tv_usec = 0;
 575   itval.it_value.tv_sec = prev_tv->tv_sec - now_tv.tv_sec;
 576   itval.it_value.tv_usec = prev_tv->tv_usec + resolution - now_true_usec;
 577
 578   /* We know that, overall, "now" is less than or equal to "then". Therefore, a
 579   negative value for the microseconds is possible only in the case when "now"
 580   is more than a second less than "tgt". That means that itval.it_value.tv_sec
 581   is greater than zero. The following correction is therefore safe. */
 582
 583   if (itval.it_value.tv_usec < 0)
 584     {
 585     itval.it_value.tv_usec += 1000000;
 586     itval.it_value.tv_sec -= 1;
 587     }
 588
 589   DEBUG(D_transport|D_receive)
 590     {
 591     if (!f.running_in_test_harness)
 592       {
 593       debug_printf("tick check: " TIME_T_FMT ".%06lu " TIME_T_FMT ".%06lu\n",
 594         prev_tv->tv_sec, (long) prev_tv->tv_usec,
 595         now_tv.tv_sec, (long) now_tv.tv_usec);
 596       debug_printf("waiting " TIME_T_FMT ".%06lu sec\n",
 597         itval.it_value.tv_sec, (long) itval.it_value.tv_usec);
 598       }
 599     }
 600
 601   milliwait(&itval);
 602
 603   /* Be prapared to go around if the kernel does not implement subtick
 604   granularity (GNU Hurd) */
 605
 606   exim_gettime(&now_tv);
 607   now_true_usec = now_tv.tv_usec;
 608   now_tv.tv_usec = (now_true_usec/resolution) * resolution;
 609   }
 610 *prev_tv = now_tv;
 611 }
 612
 613
 614
 615
 616 /*************************************************
 617 *   Call fopen() with umask 777 and adjust mode  *
 618 *************************************************/
 619
 620 /* Exim runs with umask(0) so that files created with open() have the mode that
 621 is specified in the open() call. However, there are some files, typically in
 622 the spool directory, that are created with fopen(). They end up world-writeable
 623 if no precautions are taken. Although the spool directory is not accessible to
 624 the world, this is an untidiness. So this is a wrapper function for fopen()
 625 that sorts out the mode of the created file.
 626
 627 Arguments:
 628    filename       the file name
 629    options        the fopen() options
 630    mode           the required mode
 631
 632 Returns:          the fopened FILE or NULL
 633 */
 634
 635 FILE *
 636 modefopen(const uschar *filename, const char *options, mode_t mode)
 637 {
 638 mode_t saved_umask = umask(0777);
 639 FILE *f = Ufopen(filename, options);
 640 (void)umask(saved_umask);
 641 if (f != NULL) (void)fchmod(fileno(f), mode);
 642 return f;
 643 }
 644
 645
 646 /*************************************************
 647 *   Ensure stdin, stdout, and stderr exist       *
 648 *************************************************/
 649
 650 /* Some operating systems grumble if an exec() happens without a standard
 651 input, output, and error (fds 0, 1, 2) being defined. The worry is that some
 652 file will be opened and will use these fd values, and then some other bit of
 653 code will assume, for example, that it can write error messages to stderr.
 654 This function ensures that fds 0, 1, and 2 are open if they do not already
 655 exist, by connecting them to /dev/null.
 656
 657 This function is also used to ensure that std{in,out,err} exist at all times,
 658 so that if any library that Exim calls tries to use them, it doesn't crash.
 659
 660 Arguments:  None
 661 Returns:    Nothing
 662 */
 663
 664 void
 665 exim_nullstd(void)
 666 {
 667 int devnull = -1;
 668 struct stat statbuf;
 669 for (int i = 0; i <= 2; i++)
 670   {
 671   if (fstat(i, &statbuf) < 0 && errno == EBADF)
 672     {
 673     if (devnull < 0) devnull = open("/dev/null", O_RDWR);
 674     if (devnull < 0) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "%s",
 675       string_open_failed("/dev/null", NULL));
 676     if (devnull != i) (void)dup2(devnull, i);
 677     }
 678   }
 679 if (devnull > 2) (void)close(devnull);
 680 }
 681
 682
 683
 684
 685 /*************************************************
 686 *   Close unwanted file descriptors for delivery *
 687 *************************************************/
 688
 689 /* This function is called from a new process that has been forked to deliver
 690 an incoming message, either directly, or using exec.
 691
 692 We want any smtp input streams to be closed in this new process. However, it
 693 has been observed that using fclose() here causes trouble. When reading in -bS
 694 input, duplicate copies of messages have been seen. The files will be sharing a
 695 file pointer with the parent process, and it seems that fclose() (at least on
 696 some systems - I saw this on Solaris 2.5.1) messes with that file pointer, at
 697 least sometimes. Hence we go for closing the underlying file descriptors.
 698
 699 If TLS is active, we want to shut down the TLS library, but without molesting
 700 the parent's SSL connection.
 701
 702 For delivery of a non-SMTP message, we want to close stdin and stdout (and
 703 stderr unless debugging) because the calling process might have set them up as
 704 pipes and be waiting for them to close before it waits for the submission
 705 process to terminate. If they aren't closed, they hold up the calling process
 706 until the initial delivery process finishes, which is not what we want.
 707
 708 Exception: We do want it for synchronous delivery!
 709
 710 And notwithstanding all the above, if D_resolver is set, implying resolver
 711 debugging, leave stdout open, because that's where the resolver writes its
 712 debugging output.
 713
 714 When we close stderr (which implies we've also closed stdout), we also get rid
 715 of any controlling terminal.
 716
 717 Arguments:   None
 718 Returns:     Nothing
 719 */
 720
 721 static void
 722 close_unwanted(void)
 723 {
 724 if (smtp_input)
 725   {
 726 #ifndef DISABLE_TLS
 727   tls_close(NULL, TLS_NO_SHUTDOWN);      /* Shut down the TLS library */
 728 #endif
 729   (void)close(fileno(smtp_in));
 730   (void)close(fileno(smtp_out));
 731   smtp_in = NULL;
 732   }
 733 else
 734   {
 735   (void)close(0);                                          /* stdin */
 736   if ((debug_selector & D_resolver) == 0) (void)close(1);  /* stdout */
 737   if (debug_selector == 0)                                 /* stderr */
 738     {
 739     if (!f.synchronous_delivery)
 740       {
 741       (void)close(2);
 742       log_stderr = NULL;
 743       }
 744     (void)setsid();
 745     }
 746   }
 747 }
 748
 749
 750
 751
 752 /*************************************************
 753 *          Set uid and gid                       *
 754 *************************************************/
 755
 756 /* This function sets a new uid and gid permanently, optionally calling
 757 initgroups() to set auxiliary groups. There are some special cases when running
 758 Exim in unprivileged modes. In these situations the effective uid will not be
 759 root; if we already have the right effective uid/gid, and don't need to
 760 initialize any groups, leave things as they are.
 761
 762 Arguments:
 763   uid        the uid
 764   gid        the gid
 765   igflag     TRUE if initgroups() wanted
 766   msg        text to use in debugging output and failure log
 767
 768 Returns:     nothing; bombs out on failure
 769 */
 770
 771 void
 772 exim_setugid(uid_t uid, gid_t gid, BOOL igflag, const uschar * msg)
 773 {
 774 uid_t euid = geteuid();
 775 gid_t egid = getegid();
 776
 777 if (euid == root_uid || euid != uid || egid != gid || igflag)
 778   {
 779   /* At least one OS returns +1 for initgroups failure, so just check for
 780   non-zero. */
 781
 782   if (igflag)
 783     {
 784     struct passwd *pw = getpwuid(uid);
 785     if (!pw)
 786       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "cannot run initgroups(): "
 787         "no passwd entry for uid=%ld", (long int)uid);
 788
 789     if (initgroups(pw->pw_name, gid) != 0)
 790       log_write(0,LOG_MAIN|LOG_PANIC_DIE,"initgroups failed for uid=%ld: %s",
 791         (long int)uid, strerror(errno));
 792     }
 793
 794   if (setgid(gid) < 0 || setuid(uid) < 0)
 795     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "unable to set gid=%ld or uid=%ld "
 796       "(euid=%ld): %s", (long int)gid, (long int)uid, (long int)euid, msg);
 797   }
 798
 799 /* Debugging output included uid/gid and all groups */
 800
 801 DEBUG(D_uid)
 802   {
 803   int group_count, save_errno;
 804   gid_t group_list[EXIM_GROUPLIST_SIZE];
 805   debug_printf("changed uid/gid: %s\n  uid=%ld gid=%ld pid=%ld\n", msg,
 806     (long int)geteuid(), (long int)getegid(), (long int)getpid());
 807   group_count = getgroups(nelem(group_list), group_list);
 808   save_errno = errno;
 809   debug_printf("  auxiliary group list:");
 810   if (group_count > 0)
 811     for (int i = 0; i < group_count; i++) debug_printf(" %d", (int)group_list[i]);
 812   else if (group_count < 0)
 813     debug_printf(" <error: %s>", strerror(save_errno));
 814   else debug_printf(" <none>");
 815   debug_printf("\n");
 816   }
 817 }
 818
 819
 820
 821
 822 /*************************************************
 823 *               Exit point                       *
 824 *************************************************/
 825
 826 /* Exim exits via this function so that it always clears up any open
 827 databases.
 828
 829 Arguments:
 830   rc         return code
 831
 832 Returns:     does not return
 833 */
 834
 835 void
 836 exim_exit(int rc)
 837 {
 838 search_tidyup();
 839 store_exit();
 840 DEBUG(D_any)
 841   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
 842     ">>>>>>>>>>>>>>>>\n",
 843     (int)getpid(), process_purpose, rc);
 844 exit(rc);
 845 }
 846
 847
 848 void
 849 exim_underbar_exit(int rc)
 850 {
 851 store_exit();
 852 DEBUG(D_any)
 853   debug_printf(">>>>>>>>>>>>>>>> Exim pid=%d (%s) terminating with rc=%d "
 854     ">>>>>>>>>>>>>>>>\n",
 855     (int)getpid(), process_purpose, rc);
 856 _exit(rc);
 857 }
 858
 859
 860
 861 /* Print error string, then die */
 862 static void
 863 exim_fail(const char * fmt, ...)
 864 {
 865 va_list ap;
 866 va_start(ap, fmt);
 867 vfprintf(stderr, fmt, ap);
 868 exit(EXIT_FAILURE);
 869 }
 870
 871 /* fail if a length is too long */
 872 static inline void
 873 exim_len_fail_toolong(int itemlen, int maxlen, const char *description)
 874 {
 875 if (itemlen <= maxlen)
 876   return;
 877 fprintf(stderr, "exim: length limit exceeded (%d > %d) for: %s\n",
 878         itemlen, maxlen, description);
 879 exit(EXIT_FAILURE);
 880 }
 881
 882 /* only pass through the string item back to the caller if it's short enough */
 883 static inline const uschar *
 884 exim_str_fail_toolong(const uschar *item, int maxlen, const char *description)
 885 {
 886 exim_len_fail_toolong(Ustrlen(item), maxlen, description);
 887 return item;
 888 }
 889
 890 /* exim_chown_failure() called from exim_chown()/exim_fchown() on failure
 891 of chown()/fchown().  See src/functions.h for more explanation */
 892 int
 893 exim_chown_failure(int fd, const uschar *name, uid_t owner, gid_t group)
 894 {
 895 int saved_errno = errno;  /* from the preceeding chown call */
 896 #if 1
 897 log_write(0, LOG_MAIN|LOG_PANIC,
 898   __FILE__ ":%d: chown(%s, %d:%d) failed (%s)."
 899   " Please contact the authors and refer to https://bugs.exim.org/show_bug.cgi?id=2391",
 900   __LINE__, name?name:US"<unknown>", owner, group, strerror(errno));
 901 #else
 902 /* I leave this here, commented, in case the "bug"(?) comes up again.
 903    It is not an Exim bug, but we can provide a workaround.
 904    See Bug 2391
 905    HS 2019-04-18 */
 906
 907 struct stat buf;
 908
 909 if (0 == (fd < 0 ? stat(name, &buf) : fstat(fd, &buf)))
 910 {
 911   if (buf.st_uid == owner && buf.st_gid == group) return 0;
 912   log_write(0, LOG_MAIN|LOG_PANIC, "Wrong ownership on %s", name);
 913 }
 914 else log_write(0, LOG_MAIN|LOG_PANIC, "Stat failed on %s: %s", name, strerror(errno));
 915
 916 #endif
 917 errno = saved_errno;
 918 return -1;
 919 }
 920
 921
 922 /*************************************************
 923 *         Extract port from host address         *
 924 *************************************************/
 925
 926 /* Called to extract the port from the values given to -oMa and -oMi.
 927 It also checks the syntax of the address, and terminates it before the
 928 port data when a port is extracted.
 929
 930 Argument:
 931   address   the address, with possible port on the end
 932
 933 Returns:    the port, or zero if there isn't one
 934             bombs out on a syntax error
 935 */
 936
 937 static int
 938 check_port(uschar *address)
 939 {
 940 int port = host_address_extract_port(address);
 941 if (string_is_ip_address(address, NULL) == 0)
 942   exim_fail("exim abandoned: \"%s\" is not an IP address\n", address);
 943 return port;
 944 }
 945
 946
 947
 948 /*************************************************
 949 *              Test/verify an address            *
 950 *************************************************/
 951
 952 /* This function is called by the -bv and -bt code. It extracts a working
 953 address from a full RFC 822 address. This isn't really necessary per se, but it
 954 has the effect of collapsing source routes.
 955
 956 Arguments:
 957   s            the address string
 958   flags        flag bits for verify_address()
 959   exit_value   to be set for failures
 960
 961 Returns:       nothing
 962 */
 963
 964 static void
 965 test_address(uschar *s, int flags, int *exit_value)
 966 {
 967 int start, end, domain;
 968 uschar *parse_error = NULL;
 969 uschar *address = parse_extract_address(s, &parse_error, &start, &end, &domain,
 970   FALSE);
 971 if (!address)
 972   {
 973   fprintf(stdout, "syntax error: %s\n", parse_error);
 974   *exit_value = 2;
 975   }
 976 else
 977   {
 978   int rc = verify_address(deliver_make_addr(address,TRUE), stdout, flags, -1,
 979     -1, -1, NULL, NULL, NULL);
 980   if (rc == FAIL) *exit_value = 2;
 981   else if (rc == DEFER && *exit_value == 0) *exit_value = 1;
 982   }
 983 }
 984
 985
 986
 987 /*************************************************
 988 *          Show supported features               *
 989 *************************************************/
 990
 991 static void
 992 show_string(BOOL is_stdout, gstring * g)
 993 {
 994 const uschar * s = string_from_gstring(g);
 995 if (s)
 996   if (is_stdout) fputs(CCS s, stdout);
 997   else debug_printf("%s", s);
 998 }
 999
1000
1001 static gstring *
1002 show_db_version(gstring * g)
1003 {
1004 #ifdef DB_VERSION_STRING
1005 DEBUG(D_any)
1006   {
1007   g = string_fmt_append(g, "Library version: BDB: Compile: %s\n", DB_VERSION_STRING);
1008   g = string_fmt_append(g, "                      Runtime: %s\n",
1009     db_version(NULL, NULL, NULL));
1010   }
1011 else
1012   g = string_fmt_append(g, "Berkeley DB: %s\n", DB_VERSION_STRING);
1013
1014 #elif defined(BTREEVERSION) && defined(HASHVERSION)
1015 # ifdef USE_DB
1016   g = string_cat(g, US"Probably Berkeley DB version 1.8x (native mode)\n");
1017 # else
1018   g = string_cat(g, US"Probably Berkeley DB version 1.8x (compatibility mode)\n");
1019 # endif
1020
1021 #elif defined(_DBM_RDONLY) || defined(dbm_dirfno)
1022 g = string_cat(g, US"Probably ndbm\n");
1023 #elif defined(USE_TDB)
1024 g = string_cat(g, US"Using tdb\n");
1025 #else
1026 # ifdef USE_GDBM
1027   g = string_cat(g, US"Probably GDBM (native mode)\n");
1028 # else
1029   g = string_cat(g, US"Probably GDBM (compatibility mode)\n");
1030 # endif
1031 #endif
1032 return g;
1033 }
1034
1035
1036 /* This function is called for -bV/--version and for -d to output the optional
1037 features of the current Exim binary.
1038
1039 Arguments:  BOOL, true for stdout else debug channel
1040 Returns:    nothing
1041 */
1042
1043 static void
1044 show_whats_supported(BOOL is_stdout)
1045 {
1046 rmark reset_point = store_mark();
1047 gstring * g = NULL;
1048
1049 DEBUG(D_any) {} else g = show_db_version(g);
1050
1051 g = string_cat(g, US"Support for:");
1052 #ifdef SUPPORT_CRYPTEQ
1053   g = string_cat(g, US" crypteq");
1054 #endif
1055 #if HAVE_ICONV
1056   g = string_cat(g, US" iconv()");
1057 #endif
1058 #if HAVE_IPV6
1059   g = string_cat(g, US" IPv6");
1060 #endif
1061 #ifdef HAVE_SETCLASSRESOURCES
1062   g = string_cat(g, US" use_setclassresources");
1063 #endif
1064 #ifdef SUPPORT_PAM
1065   g = string_cat(g, US" PAM");
1066 #endif
1067 #ifdef EXIM_PERL
1068   g = string_cat(g, US" Perl");
1069 #endif
1070 #ifdef EXPAND_DLFUNC
1071   g = string_cat(g, US" Expand_dlfunc");
1072 #endif
1073 #ifdef USE_TCP_WRAPPERS
1074   g = string_cat(g, US" TCPwrappers");
1075 #endif
1076 #ifdef USE_GNUTLS
1077   g = string_cat(g, US" GnuTLS");
1078 #endif
1079 #ifdef USE_OPENSSL
1080   g = string_cat(g, US" OpenSSL");
1081 #endif
1082 #ifndef DISABLE_TLS_RESUME
1083   g = string_cat(g, US" TLS_resume");
1084 #endif
1085 #ifdef SUPPORT_TRANSLATE_IP_ADDRESS
1086   g = string_cat(g, US" translate_ip_address");
1087 #endif
1088 #ifdef SUPPORT_MOVE_FROZEN_MESSAGES
1089   g = string_cat(g, US" move_frozen_messages");
1090 #endif
1091 #ifdef WITH_CONTENT_SCAN
1092   g = string_cat(g, US" Content_Scanning");
1093 #endif
1094 #ifdef SUPPORT_DANE
1095   g = string_cat(g, US" DANE");
1096 #endif
1097 #ifndef DISABLE_DKIM
1098   g = string_cat(g, US" DKIM");
1099 #endif
1100 #ifdef SUPPORT_DMARC
1101   g = string_cat(g, US" DMARC");
1102 #endif
1103 #ifndef DISABLE_DNSSEC
1104   g = string_cat(g, US" DNSSEC");
1105 #endif
1106 #ifndef DISABLE_EVENT
1107   g = string_cat(g, US" Event");
1108 #endif
1109 #ifdef SUPPORT_I18N
1110   g = string_cat(g, US" I18N");
1111 #endif
1112 #ifndef DISABLE_OCSP
1113   g = string_cat(g, US" OCSP");
1114 #endif
1115 #ifndef DISABLE_PIPE_CONNECT
1116   g = string_cat(g, US" PIPECONNECT");
1117 #endif
1118 #ifndef DISABLE_PRDR
1119   g = string_cat(g, US" PRDR");
1120 #endif
1121 #ifdef SUPPORT_PROXY
1122   g = string_cat(g, US" PROXY");
1123 #endif
1124 #ifndef DISABLE_QUEUE_RAMP
1125   g = string_cat(g, US" Queue_Ramp");
1126 #endif
1127 #ifdef SUPPORT_SOCKS
1128   g = string_cat(g, US" SOCKS");
1129 #endif
1130 #ifdef SUPPORT_SPF
1131   g = string_cat(g, US" SPF");
1132 #endif
1133 #if defined(SUPPORT_SRS)
1134   g = string_cat(g, US" SRS");
1135 #endif
1136 #ifdef TCP_FASTOPEN
1137   tcp_init();
1138   if (f.tcp_fastopen_ok) g = string_cat(g, US" TCP_Fast_Open");
1139 #endif
1140 #ifdef EXPERIMENTAL_ARC
1141   g = string_cat(g, US" Experimental_ARC");
1142 #endif
1143 #ifdef EXPERIMENTAL_BRIGHTMAIL
1144   g = string_cat(g, US" Experimental_Brightmail");
1145 #endif
1146 #ifdef EXPERIMENTAL_DCC
1147   g = string_cat(g, US" Experimental_DCC");
1148 #endif
1149 #ifdef EXPERIMENTAL_DSN_INFO
1150   g = string_cat(g, US" Experimental_DSN_info");
1151 #endif
1152 #ifdef EXPERIMENTAL_ESMTP_LIMITS
1153   g = string_cat(g, US" Experimental_ESMTP_Limits");
1154 #endif
1155 #ifdef EXPERIMENTAL_QUEUEFILE
1156   g = string_cat(g, US" Experimental_QUEUEFILE");
1157 #endif
1158 g = string_cat(g, US"\n");
1159
1160 g = string_cat(g, US"Lookups (built-in):");
1161 #if defined(LOOKUP_LSEARCH) && LOOKUP_LSEARCH!=2
1162   g = string_cat(g, US" lsearch wildlsearch nwildlsearch iplsearch");
1163 #endif
1164 #if defined(LOOKUP_CDB) && LOOKUP_CDB!=2
1165   g = string_cat(g, US" cdb");
1166 #endif
1167 #if defined(LOOKUP_DBM) && LOOKUP_DBM!=2
1168   g = string_cat(g, US" dbm dbmjz dbmnz");
1169 #endif
1170 #if defined(LOOKUP_DNSDB) && LOOKUP_DNSDB!=2
1171   g = string_cat(g, US" dnsdb");
1172 #endif
1173 #if defined(LOOKUP_DSEARCH) && LOOKUP_DSEARCH!=2
1174   g = string_cat(g, US" dsearch");
1175 #endif
1176 #if defined(LOOKUP_IBASE) && LOOKUP_IBASE!=2
1177   g = string_cat(g, US" ibase");
1178 #endif
1179 #if defined(LOOKUP_JSON) && LOOKUP_JSON!=2
1180   g = string_cat(g, US" json");
1181 #endif
1182 #if defined(LOOKUP_LDAP) && LOOKUP_LDAP!=2
1183   g = string_cat(g, US" ldap ldapdn ldapm");
1184 #endif
1185 #ifdef LOOKUP_LMDB
1186   g = string_cat(g, US" lmdb");
1187 #endif
1188 #if defined(LOOKUP_MYSQL) && LOOKUP_MYSQL!=2
1189   g = string_cat(g, US" mysql");
1190 #endif
1191 #if defined(LOOKUP_NIS) && LOOKUP_NIS!=2
1192   g = string_cat(g, US" nis nis0");
1193 #endif
1194 #if defined(LOOKUP_NISPLUS) && LOOKUP_NISPLUS!=2
1195   g = string_cat(g, US" nisplus");
1196 #endif
1197 #if defined(LOOKUP_ORACLE) && LOOKUP_ORACLE!=2
1198   g = string_cat(g, US" oracle");
1199 #endif
1200 #if defined(LOOKUP_PASSWD) && LOOKUP_PASSWD!=2
1201   g = string_cat(g, US" passwd");
1202 #endif
1203 #if defined(LOOKUP_PGSQL) && LOOKUP_PGSQL!=2
1204   g = string_cat(g, US" pgsql");
1205 #endif
1206 #if defined(LOOKUP_REDIS) && LOOKUP_REDIS!=2
1207   g = string_cat(g, US" redis");
1208 #endif
1209 #if defined(LOOKUP_SQLITE) && LOOKUP_SQLITE!=2
1210   g = string_cat(g, US" sqlite");
1211 #endif
1212 #if defined(LOOKUP_TESTDB) && LOOKUP_TESTDB!=2
1213   g = string_cat(g, US" testdb");
1214 #endif
1215 #if defined(LOOKUP_WHOSON) && LOOKUP_WHOSON!=2
1216   g = string_cat(g, US" whoson");
1217 #endif
1218 g = string_cat(g, US"\n");
1219
1220 g = auth_show_supported(g);
1221 g = route_show_supported(g);
1222 g = transport_show_supported(g);
1223
1224 #ifdef WITH_CONTENT_SCAN
1225 g = malware_show_supported(g);
1226 #endif
1227 show_string(is_stdout, g); g = NULL;
1228
1229 if (fixed_never_users[0] > 0)
1230   {
1231   int i;
1232   g = string_cat(g, US"Fixed never_users: ");
1233   for (i = 1; i <= (int)fixed_never_users[0] - 1; i++)
1234     string_fmt_append(g, "%u:", (unsigned)fixed_never_users[i]);
1235   g = string_fmt_append(g, "%u\n", (unsigned)fixed_never_users[i]);
1236   }
1237
1238 g = string_fmt_append(g, "Configure owner: %d:%d\n", config_uid, config_gid);
1239
1240 g = string_fmt_append(g, "Size of off_t: " SIZE_T_FMT "\n", sizeof(off_t));
1241
1242 /* Everything else is details which are only worth reporting when debugging.
1243 Perhaps the tls_version_report should move into this too. */
1244 DEBUG(D_any)
1245   {
1246
1247 /* clang defines __GNUC__ (at least, for me) so test for it first */
1248 #if defined(__clang__)
1249   g = string_fmt_append(g, "Compiler: CLang [%s]\n", __clang_version__);
1250 #elif defined(__GNUC__)
1251   g = string_fmt_append(g, "Compiler: GCC [%s]\n",
1252 # ifdef __VERSION__
1253       __VERSION__
1254 # else
1255       "? unknown version ?"
1256 # endif
1257       );
1258 #else
1259   g = string_cat(g, US"Compiler: <unknown>\n");
1260 #endif
1261
1262 #if defined(__GLIBC__) && !defined(__UCLIBC__)
1263   g = string_fmt_append(g, "Library version: Glibc: Compile: %d.%d\n",
1264                 __GLIBC__, __GLIBC_MINOR__);
1265   if (__GLIBC_PREREQ(2, 1))
1266     g = string_fmt_append(g, "                        Runtime: %s\n",
1267                 gnu_get_libc_version());
1268 #endif
1269
1270 g = show_db_version(g);
1271
1272 #ifndef DISABLE_TLS
1273   g = tls_version_report(g);
1274 #endif
1275 #ifdef SUPPORT_I18N
1276   g = utf8_version_report(g);
1277 #endif
1278 #ifdef SUPPORT_DMARC
1279   g = dmarc_version_report(g);
1280 #endif
1281 #ifdef SUPPORT_SPF
1282   g = spf_lib_version_report(g);
1283 #endif
1284
1285 show_string(is_stdout, g);
1286 g = NULL;
1287
1288 for (auth_info * authi = auths_available; *authi->driver_name != '\0'; ++authi)
1289   if (authi->version_report)
1290     g = (*authi->version_report)(g);
1291
1292   /* PCRE_PRERELEASE is either defined and empty or a bare sequence of
1293   characters; unless it's an ancient version of PCRE in which case it
1294   is not defined. */
1295 #ifndef PCRE_PRERELEASE
1296 # define PCRE_PRERELEASE
1297 #endif
1298 #define QUOTE(X) #X
1299 #define EXPAND_AND_QUOTE(X) QUOTE(X)
1300   {
1301   uschar buf[24];
1302   pcre2_config(PCRE2_CONFIG_VERSION, buf);
1303   g = string_fmt_append(g, "Library version: PCRE2: Compile: %d.%d%s\n"
1304               "                        Runtime: %s\n",
1305           PCRE2_MAJOR, PCRE2_MINOR,
1306           EXPAND_AND_QUOTE(PCRE2_PRERELEASE) "",
1307           buf);
1308   }
1309 #undef QUOTE
1310 #undef EXPAND_AND_QUOTE
1311
1312 show_string(is_stdout, g);
1313 g = NULL;
1314
1315 init_lookup_list();
1316 for (int i = 0; i < lookup_list_count; i++)
1317   if (lookup_list[i]->version_report)
1318     g = lookup_list[i]->version_report(g);
1319 show_string(is_stdout, g);
1320 g = NULL;
1321
1322 #ifdef WHITELIST_D_MACROS
1323   g = string_fmt_append(g, "WHITELIST_D_MACROS: \"%s\"\n", WHITELIST_D_MACROS);
1324 #else
1325   g = string_cat(g, US"WHITELIST_D_MACROS unset\n");
1326 #endif
1327 #ifdef TRUSTED_CONFIG_LIST
1328   g = string_fmt_append(g, "TRUSTED_CONFIG_LIST: \"%s\"\n", TRUSTED_CONFIG_LIST);
1329 #else
1330   g = string_cat(g, US"TRUSTED_CONFIG_LIST unset\n");
1331 #endif
1332   }
1333
1334 show_string(is_stdout, g);
1335 store_reset(reset_point);
1336 }
1337
1338
1339 /*************************************************
1340 *     Show auxiliary information about Exim      *
1341 *************************************************/
1342
1343 static void
1344 show_exim_information(enum commandline_info request, FILE *stream)
1345 {
1346 switch(request)
1347   {
1348   case CMDINFO_NONE:
1349     fprintf(stream, "Oops, something went wrong.\n");
1350     return;
1351   case CMDINFO_HELP:
1352     fprintf(stream,
1353 "The -bI: flag takes a string indicating which information to provide.\n"
1354 "If the string is not recognised, you'll get this help (on stderr).\n"
1355 "\n"
1356 "  exim -bI:help    this information\n"
1357 "  exim -bI:dscp    list of known dscp value keywords\n"
1358 "  exim -bI:sieve   list of supported sieve extensions\n"
1359 );
1360     return;
1361   case CMDINFO_SIEVE:
1362     for (const uschar ** pp = exim_sieve_extension_list; *pp; ++pp)
1363       fprintf(stream, "%s\n", *pp);
1364     return;
1365   case CMDINFO_DSCP:
1366     dscp_list_to_stream(stream);
1367     return;
1368   }
1369 }
1370
1371
1372 /*************************************************
1373 *               Quote a local part               *
1374 *************************************************/
1375
1376 /* This function is used when a sender address or a From: or Sender: header
1377 line is being created from the caller's login, or from an authenticated_id. It
1378 applies appropriate quoting rules for a local part.
1379
1380 Argument:    the local part
1381 Returns:     the local part, quoted if necessary
1382 */
1383
1384 uschar *
1385 local_part_quote(uschar *lpart)
1386 {
1387 BOOL needs_quote = FALSE;
1388 gstring * g;
1389
1390 for (uschar * t = lpart; !needs_quote && *t != 0; t++)
1391   {
1392   needs_quote = !isalnum(*t) && strchr("!#$%&'*+-/=?^_`{|}~", *t) == NULL &&
1393     (*t != '.' || t == lpart || t[1] == 0);
1394   }
1395
1396 if (!needs_quote) return lpart;
1397
1398 g = string_catn(NULL, US"\"", 1);
1399
1400 for (;;)
1401   {
1402   uschar *nq = US Ustrpbrk(lpart, "\\\"");
1403   if (nq == NULL)
1404     {
1405     g = string_cat(g, lpart);
1406     break;
1407     }
1408   g = string_catn(g, lpart, nq - lpart);
1409   g = string_catn(g, US"\\", 1);
1410   g = string_catn(g, nq, 1);
1411   lpart = nq + 1;
1412   }
1413
1414 g = string_catn(g, US"\"", 1);
1415 return string_from_gstring(g);
1416 }
1417
1418
1419
1420 #ifdef USE_READLINE
1421 /*************************************************
1422 *         Load readline() functions              *
1423 *************************************************/
1424
1425 /* This function is called from testing executions that read data from stdin,
1426 but only when running as the calling user. Currently, only -be does this. The
1427 function loads the readline() function library and passes back the functions.
1428 On some systems, it needs the curses library, so load that too, but try without
1429 it if loading fails. All this functionality has to be requested at build time.
1430
1431 Arguments:
1432   fn_readline_ptr   pointer to where to put the readline pointer
1433   fn_addhist_ptr    pointer to where to put the addhistory function
1434
1435 Returns:            the dlopen handle or NULL on failure
1436 */
1437
1438 static void *
1439 set_readline(char * (**fn_readline_ptr)(const char *),
1440              void   (**fn_addhist_ptr)(const char *))
1441 {
1442 void *dlhandle;
1443 void *dlhandle_curses = dlopen("libcurses." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_LAZY);
1444
1445 dlhandle = dlopen("libreadline." DYNLIB_FN_EXT, RTLD_GLOBAL|RTLD_NOW);
1446 if (dlhandle_curses) dlclose(dlhandle_curses);
1447
1448 if (dlhandle)
1449   {
1450   /* Checked manual pages; at least in GNU Readline 6.1, the prototypes are:
1451    *   char * readline (const char *prompt);
1452    *   void add_history (const char *string);
1453    */
1454   *fn_readline_ptr = (char *(*)(const char*))dlsym(dlhandle, "readline");
1455   *fn_addhist_ptr = (void(*)(const char*))dlsym(dlhandle, "add_history");
1456   }
1457 else
1458   DEBUG(D_any) debug_printf("failed to load readline: %s\n", dlerror());
1459
1460 return dlhandle;
1461 }
1462 #endif
1463
1464
1465
1466 /*************************************************
1467 *    Get a line from stdin for testing things    *
1468 *************************************************/
1469
1470 /* This function is called when running tests that can take a number of lines
1471 of input (for example, -be and -bt). It handles continuations and trailing
1472 spaces. And prompting and a blank line output on eof. If readline() is in use,
1473 the arguments are non-NULL and provide the relevant functions.
1474
1475 Arguments:
1476   fn_readline   readline function or NULL
1477   fn_addhist    addhist function or NULL
1478
1479 Returns:        pointer to dynamic memory, or NULL at end of file
1480 */
1481
1482 static uschar *
1483 get_stdinput(char *(*fn_readline)(const char *), void(*fn_addhist)(const char *))
1484 {
1485 gstring * g = NULL;
1486 BOOL had_input = FALSE;
1487
1488 if (!fn_readline) { printf("> "); fflush(stdout); }
1489
1490 for (int i = 0;; i++)
1491   {
1492   uschar buffer[1024];
1493   uschar * p, * ss;
1494
1495 #ifdef USE_READLINE
1496   char *readline_line = NULL;
1497   if (fn_readline)
1498     {
1499     if (!(readline_line = fn_readline((i > 0)? "":"> "))) break;
1500     if (*readline_line && fn_addhist) fn_addhist(readline_line);
1501     p = US readline_line;
1502     }
1503   else
1504 #endif
1505
1506   /* readline() not in use */
1507
1508     {
1509     if (Ufgets(buffer, sizeof(buffer), stdin) == NULL) break;   /*EOF*/
1510     p = buffer;
1511     }
1512
1513   /* Handle the line */
1514
1515   had_input = TRUE;
1516   ss = p + Ustrlen(p);
1517   while (ss > p && isspace(ss[-1])) ss--; /* strip trailing newline (and spaces) */
1518
1519   if (i > 0)
1520     while (p < ss && isspace(*p)) p++;   /* strip leading space after cont */
1521
1522   g = string_catn(g, p, ss - p);
1523
1524 #ifdef USE_READLINE
1525   if (fn_readline) free(readline_line);
1526 #endif
1527
1528   /* g can only be NULL if ss==p */
1529   if (ss == p || g->s[g->ptr-1] != '\\') /* not continuation; done */
1530     break;
1531
1532   --g->ptr;                             /* drop the \ */
1533   }
1534
1535 if (had_input) return g ? string_from_gstring(g) : US"";
1536 printf("\n");
1537 return NULL;
1538 }
1539
1540
1541
1542 /*************************************************
1543 *    Output usage information for the program    *
1544 *************************************************/
1545
1546 /* This function is called when there are no recipients
1547    or a specific --help argument was added.
1548
1549 Arguments:
1550   progname      information on what name we were called by
1551
1552 Returns:        DOES NOT RETURN
1553 */
1554
1555 static void
1556 exim_usage(uschar *progname)
1557 {
1558
1559 /* Handle specific program invocation variants */
1560 if (Ustrcmp(progname, US"-mailq") == 0)
1561   exim_fail(
1562     "mailq - list the contents of the mail queue\n\n"
1563     "For a list of options, see the Exim documentation.\n");
1564
1565 /* Generic usage - we output this whatever happens */
1566 exim_fail(
1567   "Exim is a Mail Transfer Agent. It is normally called by Mail User Agents,\n"
1568   "not directly from a shell command line. Options and/or arguments control\n"
1569   "what it does when called. For a list of options, see the Exim documentation.\n");
1570 }
1571
1572
1573
1574 /*************************************************
1575 *    Validate that the macros given are okay     *
1576 *************************************************/
1577
1578 /* Typically, Exim will drop privileges if macros are supplied.  In some
1579 cases, we want to not do so.
1580
1581 Arguments:    opt_D_used - true if the commandline had a "-D" option
1582 Returns:      true if trusted, false otherwise
1583 */
1584
1585 static BOOL
1586 macros_trusted(BOOL opt_D_used)
1587 {
1588 #ifdef WHITELIST_D_MACROS
1589 uschar *whitelisted, *end, *p, **whites;
1590 int white_count, i, n;
1591 size_t len;
1592 BOOL prev_char_item, found;
1593 #endif
1594
1595 if (!opt_D_used)
1596   return TRUE;
1597 #ifndef WHITELIST_D_MACROS
1598 return FALSE;
1599 #else
1600
1601 /* We only trust -D overrides for some invoking users:
1602 root, the exim run-time user, the optional config owner user.
1603 I don't know why config-owner would be needed, but since they can own the
1604 config files anyway, there's no security risk to letting them override -D. */
1605 if ( ! ((real_uid == root_uid)
1606      || (real_uid == exim_uid)
1607 #ifdef CONFIGURE_OWNER
1608      || (real_uid == config_uid)
1609 #endif
1610    ))
1611   {
1612   debug_printf("macros_trusted rejecting macros for uid %d\n", (int) real_uid);
1613   return FALSE;
1614   }
1615
1616 /* Get a list of macros which are whitelisted */
1617 whitelisted = string_copy_perm(US WHITELIST_D_MACROS, FALSE);
1618 prev_char_item = FALSE;
1619 white_count = 0;
1620 for (p = whitelisted; *p != '\0'; ++p)
1621   {
1622   if (*p == ':' || isspace(*p))
1623     {
1624     *p = '\0';
1625     if (prev_char_item)
1626       ++white_count;
1627     prev_char_item = FALSE;
1628     continue;
1629     }
1630   if (!prev_char_item)
1631     prev_char_item = TRUE;
1632   }
1633 end = p;
1634 if (prev_char_item)
1635   ++white_count;
1636 if (!white_count)
1637   return FALSE;
1638 whites = store_malloc(sizeof(uschar *) * (white_count+1));
1639 for (p = whitelisted, i = 0; (p != end) && (i < white_count); ++p)
1640   {
1641   if (*p != '\0')
1642     {
1643     whites[i++] = p;
1644     if (i == white_count)
1645       break;
1646     while (*p != '\0' && p < end)
1647       ++p;
1648     }
1649   }
1650 whites[i] = NULL;
1651
1652 /* The list of commandline macros should be very short.
1653 Accept the N*M complexity. */
1654 for (macro_item * m = macros_user; m; m = m->next) if (m->command_line)
1655   {
1656   found = FALSE;
1657   for (uschar ** w = whites; *w; ++w)
1658     if (Ustrcmp(*w, m->name) == 0)
1659       {
1660       found = TRUE;
1661       break;
1662       }
1663   if (!found)
1664     return FALSE;
1665   if (!m->replacement)
1666     continue;
1667   if ((len = m->replen) == 0)
1668     continue;
1669   if (!regex_match(regex_whitelisted_macro, m->replacement, len, NULL))
1670     return FALSE;
1671   }
1672 DEBUG(D_any) debug_printf("macros_trusted overridden to true by whitelisting\n");
1673 return TRUE;
1674 #endif
1675 }
1676
1677
1678 /*************************************************
1679 *          Expansion testing                     *
1680 *************************************************/
1681
1682 /* Expand and print one item, doing macro-processing.
1683
1684 Arguments:
1685   item          line for expansion
1686 */
1687
1688 static void
1689 expansion_test_line(const uschar * line)
1690 {
1691 int len;
1692 BOOL dummy_macexp;
1693 uschar * s;
1694
1695 Ustrncpy(big_buffer, line, big_buffer_size);
1696 big_buffer[big_buffer_size-1] = '\0';
1697 len = Ustrlen(big_buffer);
1698
1699 (void) macros_expand(0, &len, &dummy_macexp);
1700
1701 if (isupper(big_buffer[0]))
1702   {
1703   if (macro_read_assignment(big_buffer))
1704     printf("Defined macro '%s'\n", mlast->name);
1705   }
1706 else
1707   if ((s = expand_string(big_buffer))) printf("%s\n", CS s);
1708   else printf("Failed: %s\n", expand_string_message);
1709 }
1710
1711
1712
1713 /*************************************************
1714 *          Entry point and high-level code       *
1715 *************************************************/
1716
1717 /* Entry point for the Exim mailer. Analyse the arguments and arrange to take
1718 the appropriate action. All the necessary functions are present in the one
1719 binary. I originally thought one should split it up, but it turns out that so
1720 much of the apparatus is needed in each chunk that one might as well just have
1721 it all available all the time, which then makes the coding easier as well.
1722
1723 Arguments:
1724   argc      count of entries in argv
1725   argv      argument strings, with argv[0] being the program name
1726
1727 Returns:    EXIT_SUCCESS if terminated successfully
1728             EXIT_FAILURE otherwise, except when a message has been sent
1729               to the sender, and -oee was given
1730 */
1731
1732 int
1733 main(int argc, char **cargv)
1734 {
1735 uschar **argv = USS cargv;
1736 int  arg_receive_timeout = -1;
1737 int  arg_smtp_receive_timeout = -1;
1738 int  arg_error_handling = error_handling;
1739 int  filter_sfd = -1;
1740 int  filter_ufd = -1;
1741 int  group_count;
1742 int  i, rv;
1743 int  list_queue_option = 0;
1744 int  msg_action = 0;
1745 int  msg_action_arg = -1;
1746 int  namelen = argv[0] ? Ustrlen(argv[0]) : 0;
1747 int  queue_only_reason = 0;
1748 #ifdef EXIM_PERL
1749 int  perl_start_option = 0;
1750 #endif
1751 int  recipients_arg = argc;
1752 int  sender_address_domain = 0;
1753 int  test_retry_arg = -1;
1754 int  test_rewrite_arg = -1;
1755 gid_t original_egid;
1756 BOOL arg_queue_only = FALSE;
1757 BOOL bi_option = FALSE;
1758 BOOL checking = FALSE;
1759 BOOL count_queue = FALSE;
1760 BOOL expansion_test = FALSE;
1761 BOOL extract_recipients = FALSE;
1762 BOOL flag_G = FALSE;
1763 BOOL flag_n = FALSE;
1764 BOOL forced_delivery = FALSE;
1765 BOOL f_end_dot = FALSE;
1766 BOOL deliver_give_up = FALSE;
1767 BOOL list_queue = FALSE;
1768 BOOL list_options = FALSE;
1769 BOOL list_config = FALSE;
1770 BOOL local_queue_only;
1771 BOOL one_msg_action = FALSE;
1772 BOOL opt_D_used = FALSE;
1773 BOOL queue_only_set = FALSE;
1774 BOOL receiving_message = TRUE;
1775 BOOL sender_ident_set = FALSE;
1776 BOOL session_local_queue_only;
1777 BOOL unprivileged;
1778 BOOL removed_privilege = FALSE;
1779 BOOL usage_wanted = FALSE;
1780 BOOL verify_address_mode = FALSE;
1781 BOOL verify_as_sender = FALSE;
1782 BOOL rcpt_verify_quota = FALSE;
1783 BOOL version_printed = FALSE;
1784 uschar *alias_arg = NULL;
1785 uschar *called_as = US"";
1786 uschar *cmdline_syslog_name = NULL;
1787 uschar *start_queue_run_id = NULL;
1788 uschar *stop_queue_run_id = NULL;
1789 uschar *expansion_test_message = NULL;
1790 const uschar *ftest_domain = NULL;
1791 const uschar *ftest_localpart = NULL;
1792 const uschar *ftest_prefix = NULL;
1793 const uschar *ftest_suffix = NULL;
1794 uschar *log_oneline = NULL;
1795 uschar *malware_test_file = NULL;
1796 uschar *real_sender_address;
1797 uschar *originator_home = US"/";
1798 size_t sz;
1799
1800 struct passwd *pw;
1801 struct stat statbuf;
1802 pid_t passed_qr_pid = (pid_t)0;
1803 int passed_qr_pipe = -1;
1804 gid_t group_list[EXIM_GROUPLIST_SIZE];
1805
1806 /* For the -bI: flag */
1807 enum commandline_info info_flag = CMDINFO_NONE;
1808 BOOL info_stdout = FALSE;
1809
1810 /* Possible options for -R and -S */
1811
1812 static uschar *rsopts[] = { US"f", US"ff", US"r", US"rf", US"rff" };
1813
1814 /* Need to define this in case we need to change the environment in order
1815 to get rid of a bogus time zone. We have to make it char rather than uschar
1816 because some OS define it in /usr/include/unistd.h. */
1817
1818 extern char **environ;
1819
1820 #ifdef MEASURE_TIMING
1821 (void)gettimeofday(&timestamp_startup, NULL);
1822 #endif
1823
1824 store_init();   /* Initialise the memory allocation susbsystem */
1825 pcre_init();    /* Set up memory handling for pcre */
1826
1827 /* If the Exim user and/or group and/or the configuration file owner/group were
1828 defined by ref:name at build time, we must now find the actual uid/gid values.
1829 This is a feature to make the lives of binary distributors easier. */
1830
1831 #ifdef EXIM_USERNAME
1832 if (route_finduser(US EXIM_USERNAME, &pw, &exim_uid))
1833   {
1834   if (exim_uid == 0)
1835     exim_fail("exim: refusing to run with uid 0 for \"%s\"\n", EXIM_USERNAME);
1836
1837   /* If ref:name uses a number as the name, route_finduser() returns
1838   TRUE with exim_uid set and pw coerced to NULL. */
1839   if (pw)
1840     exim_gid = pw->pw_gid;
1841 #ifndef EXIM_GROUPNAME
1842   else
1843     exim_fail(
1844         "exim: ref:name should specify a usercode, not a group.\n"
1845         "exim: can't let you get away with it unless you also specify a group.\n");
1846 #endif
1847   }
1848 else
1849   exim_fail("exim: failed to find uid for user name \"%s\"\n", EXIM_USERNAME);
1850 #endif
1851
1852 #ifdef EXIM_GROUPNAME
1853 if (!route_findgroup(US EXIM_GROUPNAME, &exim_gid))
1854   exim_fail("exim: failed to find gid for group name \"%s\"\n", EXIM_GROUPNAME);
1855 #endif
1856
1857 #ifdef CONFIGURE_OWNERNAME
1858 if (!route_finduser(US CONFIGURE_OWNERNAME, NULL, &config_uid))
1859   exim_fail("exim: failed to find uid for user name \"%s\"\n",
1860     CONFIGURE_OWNERNAME);
1861 #endif
1862
1863 /* We default the system_filter_user to be the Exim run-time user, as a
1864 sane non-root value. */
1865 system_filter_uid = exim_uid;
1866
1867 #ifdef CONFIGURE_GROUPNAME
1868 if (!route_findgroup(US CONFIGURE_GROUPNAME, &config_gid))
1869   exim_fail("exim: failed to find gid for group name \"%s\"\n",
1870     CONFIGURE_GROUPNAME);
1871 #endif
1872
1873 /* In the Cygwin environment, some initialization used to need doing.
1874 It was fudged in by means of this macro; now no longer but we'll leave
1875 it in case of others. */
1876
1877 #ifdef OS_INIT
1878 OS_INIT
1879 #endif
1880
1881 /* Check a field which is patched when we are running Exim within its
1882 testing harness; do a fast initial check, and then the whole thing. */
1883
1884 f.running_in_test_harness =
1885   *running_status == '<' && Ustrcmp(running_status, "<<<testing>>>") == 0;
1886 if (f.running_in_test_harness)
1887   debug_store = TRUE;
1888
1889 /* Protect against abusive argv[0] */
1890 if (!argv[0] || !argc) exim_fail("exim: executable name required\n");
1891 exim_str_fail_toolong(argv[0], PATH_MAX, "argv[0]");
1892
1893 /* The C standard says that the equivalent of setlocale(LC_ALL, "C") is obeyed
1894 at the start of a program; however, it seems that some environments do not
1895 follow this. A "strange" locale can affect the formatting of timestamps, so we
1896 make quite sure. */
1897
1898 setlocale(LC_ALL, "C");
1899
1900 /* Get the offset between CLOCK_MONOTONIC/CLOCK_BOOTTIME and wallclock */
1901
1902 #ifdef _POSIX_MONOTONIC_CLOCK
1903 exim_clock_init();
1904 #endif
1905
1906 /* Set up the default handler for timing using alarm(). */
1907
1908 os_non_restarting_signal(SIGALRM, sigalrm_handler);
1909
1910 /* Ensure we have a buffer for constructing log entries. Use malloc directly,
1911 because store_malloc writes a log entry on failure. */
1912
1913 if (!(log_buffer = US malloc(LOG_BUFFER_SIZE)))
1914   exim_fail("exim: failed to get store for log buffer\n");
1915
1916 /* Initialize the default log options. */
1917
1918 bits_set(log_selector, log_selector_size, log_default);
1919
1920 /* Set log_stderr to stderr, provided that stderr exists. This gets reset to
1921 NULL when the daemon is run and the file is closed. We have to use this
1922 indirection, because some systems don't allow writing to the variable "stderr".
1923 */
1924
1925 if (fstat(fileno(stderr), &statbuf) >= 0) log_stderr = stderr;
1926
1927 /* Ensure there is a big buffer for temporary use in several places. It is put
1928 in malloc store so that it can be freed for enlargement if necessary. */
1929
1930 big_buffer = store_malloc(big_buffer_size);
1931
1932 /* Set up the handler for the data request signal, and set the initial
1933 descriptive text. */
1934
1935 process_info = store_get(PROCESS_INFO_SIZE, GET_TAINTED);
1936 set_process_info("initializing");
1937 os_restarting_signal(SIGUSR1, usr1_handler);            /* exiwhat */
1938 #ifdef SA_SIGINFO
1939   {
1940   struct sigaction act = { .sa_sigaction = segv_handler, .sa_flags = SA_RESETHAND | SA_SIGINFO };
1941   sigaction(SIGSEGV, &act, NULL);
1942   }
1943 #else
1944 signal(SIGSEGV, segv_handler);                          /* log faults */
1945 #endif
1946
1947 /* If running in a dockerized environment, the TERM signal is only
1948 delegated to the PID 1 if we request it by setting an signal handler */
1949 if (getpid() == 1) signal(SIGTERM, term_handler);
1950
1951 /* SIGHUP is used to get the daemon to reconfigure. It gets set as appropriate
1952 in the daemon code. For the rest of Exim's uses, we ignore it. */
1953
1954 signal(SIGHUP, SIG_IGN);
1955
1956 /* We don't want to die on pipe errors as the code is written to handle
1957 the write error instead. */
1958
1959 signal(SIGPIPE, SIG_IGN);
1960
1961 /* Under some circumstance on some OS, Exim can get called with SIGCHLD
1962 set to SIG_IGN. This causes subprocesses that complete before the parent
1963 process waits for them not to hang around, so when Exim calls wait(), nothing
1964 is there. The wait() code has been made robust against this, but let's ensure
1965 that SIGCHLD is set to SIG_DFL, because it's tidier to wait and get a process
1966 ending status. We use sigaction rather than plain signal() on those OS where
1967 SA_NOCLDWAIT exists, because we want to be sure it is turned off. (There was a
1968 problem on AIX with this.) */
1969
1970 #ifdef SA_NOCLDWAIT
1971   {
1972   struct sigaction act;
1973   act.sa_handler = SIG_DFL;
1974   sigemptyset(&(act.sa_mask));
1975   act.sa_flags = 0;
1976   sigaction(SIGCHLD, &act, NULL);
1977   }
1978 #else
1979 signal(SIGCHLD, SIG_DFL);
1980 #endif
1981
1982 /* Save the arguments for use if we re-exec exim as a daemon after receiving
1983 SIGHUP. */
1984
1985 sighup_argv = argv;
1986
1987 /* Set up the version number. Set up the leading 'E' for the external form of
1988 message ids, set the pointer to the internal form, and initialize it to
1989 indicate no message being processed. */
1990
1991 version_init();
1992 message_id_option[0] = '-';
1993 message_id_external = message_id_option + 1;
1994 message_id_external[0] = 'E';
1995 message_id = message_id_external + 1;
1996 message_id[0] = 0;
1997
1998 /* Set the umask to zero so that any files Exim creates using open() are
1999 created with the modes that it specifies. NOTE: Files created with fopen() have
2000 a problem, which was not recognized till rather late (February 2006). With this
2001 umask, such files will be world writeable. (They are all content scanning files
2002 in the spool directory, which isn't world-accessible, so this is not a
2003 disaster, but it's untidy.) I don't want to change this overall setting,
2004 however, because it will interact badly with the open() calls. Instead, there's
2005 now a function called modefopen() that fiddles with the umask while calling
2006 fopen(). */
2007
2008 (void)umask(0);
2009
2010 /* Precompile the regular expression for matching a message id. Keep this in
2011 step with the code that generates ids in the accept.c module. We need to do
2012 this here, because the -M options check their arguments for syntactic validity
2013 using mac_ismsgid, which uses this. */
2014
2015 regex_ismsgid =
2016   regex_must_compile(US"^(?:[^\\W_]{6}-){2}[^\\W_]{2}$", FALSE, TRUE);
2017
2018 /* Precompile the regular expression that is used for matching an SMTP error
2019 code, possibly extended, at the start of an error message. Note that the
2020 terminating whitespace character is included. */
2021
2022 regex_smtp_code =
2023   regex_must_compile(US"^\\d\\d\\d\\s(?:\\d\\.\\d\\d?\\d?\\.\\d\\d?\\d?\\s)?",
2024     FALSE, TRUE);
2025
2026 #ifdef WHITELIST_D_MACROS
2027 /* Precompile the regular expression used to filter the content of macros
2028 given to -D for permissibility. */
2029
2030 regex_whitelisted_macro =
2031   regex_must_compile(US"^[A-Za-z0-9_/.-]*$", FALSE, TRUE);
2032 #endif
2033
2034 for (i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
2035
2036 /* If the program is called as "mailq" treat it as equivalent to "exim -bp";
2037 this seems to be a generally accepted convention, since one finds symbolic
2038 links called "mailq" in standard OS configurations. */
2039
2040 if ((namelen == 5 && Ustrcmp(argv[0], "mailq") == 0) ||
2041     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/mailq", 6) == 0))
2042   {
2043   list_queue = TRUE;
2044   receiving_message = FALSE;
2045   called_as = US"-mailq";
2046   }
2047
2048 /* If the program is called as "rmail" treat it as equivalent to
2049 "exim -i -oee", thus allowing UUCP messages to be input using non-SMTP mode,
2050 i.e. preventing a single dot on a line from terminating the message, and
2051 returning with zero return code, even in cases of error (provided an error
2052 message has been sent). */
2053
2054 if ((namelen == 5 && Ustrcmp(argv[0], "rmail") == 0) ||
2055     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rmail", 6) == 0))
2056   {
2057   f.dot_ends = FALSE;
2058   called_as = US"-rmail";
2059   errors_sender_rc = EXIT_SUCCESS;
2060   }
2061
2062 /* If the program is called as "rsmtp" treat it as equivalent to "exim -bS";
2063 this is a smail convention. */
2064
2065 if ((namelen == 5 && Ustrcmp(argv[0], "rsmtp") == 0) ||
2066     (namelen  > 5 && Ustrncmp(argv[0] + namelen - 6, "/rsmtp", 6) == 0))
2067   {
2068   smtp_input = smtp_batched_input = TRUE;
2069   called_as = US"-rsmtp";
2070   }
2071
2072 /* If the program is called as "runq" treat it as equivalent to "exim -q";
2073 this is a smail convention. */
2074
2075 if ((namelen == 4 && Ustrcmp(argv[0], "runq") == 0) ||
2076     (namelen  > 4 && Ustrncmp(argv[0] + namelen - 5, "/runq", 5) == 0))
2077   {
2078   queue_interval = 0;
2079   receiving_message = FALSE;
2080   called_as = US"-runq";
2081   }
2082
2083 /* If the program is called as "newaliases" treat it as equivalent to
2084 "exim -bi"; this is a sendmail convention. */
2085
2086 if ((namelen == 10 && Ustrcmp(argv[0], "newaliases") == 0) ||
2087     (namelen  > 10 && Ustrncmp(argv[0] + namelen - 11, "/newaliases", 11) == 0))
2088   {
2089   bi_option = TRUE;
2090   receiving_message = FALSE;
2091   called_as = US"-newaliases";
2092   }
2093
2094 /* Save the original effective uid for a couple of uses later. It should
2095 normally be root, but in some esoteric environments it may not be. */
2096
2097 original_euid = geteuid();
2098 original_egid = getegid();
2099
2100 /* Get the real uid and gid. If the caller is root, force the effective uid/gid
2101 to be the same as the real ones. This makes a difference only if Exim is setuid
2102 (or setgid) to something other than root, which could be the case in some
2103 special configurations. */
2104
2105 real_uid = getuid();
2106 real_gid = getgid();
2107
2108 if (real_uid == root_uid)
2109   {
2110   if ((rv = setgid(real_gid)))
2111     exim_fail("exim: setgid(%ld) failed: %s\n",
2112         (long int)real_gid, strerror(errno));
2113   if ((rv = setuid(real_uid)))
2114     exim_fail("exim: setuid(%ld) failed: %s\n",
2115         (long int)real_uid, strerror(errno));
2116   }
2117
2118 /* If neither the original real uid nor the original euid was root, Exim is
2119 running in an unprivileged state. */
2120
2121 unprivileged = (real_uid != root_uid && original_euid != root_uid);
2122
2123 /* For most of the args-parsing we need to use permanent pool memory */
2124  {
2125  int old_pool = store_pool;
2126  store_pool = POOL_PERM;
2127
2128 /* Scan the program's arguments. Some can be dealt with right away; others are
2129 simply recorded for checking and handling afterwards. Do a high-level switch
2130 on the second character (the one after '-'), to save some effort. */
2131
2132  for (i = 1; i < argc; i++)
2133   {
2134   BOOL badarg = FALSE;
2135   uschar * arg = argv[i];
2136   uschar * argrest;
2137   int switchchar;
2138
2139   /* An argument not starting with '-' is the start of a recipients list;
2140   break out of the options-scanning loop. */
2141
2142   if (arg[0] != '-')
2143     {
2144     recipients_arg = i;
2145     break;
2146     }
2147
2148   /* An option consisting of -- terminates the options */
2149
2150   if (Ustrcmp(arg, "--") == 0)
2151     {
2152     recipients_arg = i + 1;
2153     break;
2154     }
2155
2156   /* Handle flagged options */
2157
2158   switchchar = arg[1];
2159   argrest = arg+2;
2160
2161   /* Make all -ex options synonymous with -oex arguments, since that
2162   is assumed by various callers. Also make -qR options synonymous with -R
2163   options, as that seems to be required as well. Allow for -qqR too, and
2164   the same for -S options. */
2165
2166   if (Ustrncmp(arg+1, "oe", 2) == 0 ||
2167       Ustrncmp(arg+1, "qR", 2) == 0 ||
2168       Ustrncmp(arg+1, "qS", 2) == 0)
2169     {
2170     switchchar = arg[2];
2171     argrest++;
2172     }
2173   else if (Ustrncmp(arg+1, "qqR", 3) == 0 || Ustrncmp(arg+1, "qqS", 3) == 0)
2174     {
2175     switchchar = arg[3];
2176     argrest += 2;
2177     f.queue_2stage = TRUE;
2178     }
2179
2180   /* Make -r synonymous with -f, since it is a documented alias */
2181
2182   else if (arg[1] == 'r') switchchar = 'f';
2183
2184   /* Make -ov synonymous with -v */
2185
2186   else if (Ustrcmp(arg, "-ov") == 0)
2187     {
2188     switchchar = 'v';
2189     argrest++;
2190     }
2191
2192   /* deal with --option_aliases */
2193   else if (switchchar == '-')
2194     {
2195     if (Ustrcmp(argrest, "help") == 0)
2196       {
2197       usage_wanted = TRUE;
2198       break;
2199       }
2200     else if (Ustrcmp(argrest, "version") == 0)
2201       {
2202       switchchar = 'b';
2203       argrest = US"V";
2204       }
2205     }
2206
2207   /* High-level switch on active initial letter */
2208
2209   switch(switchchar)
2210     {
2211
2212     /* sendmail uses -Ac and -Am to control which .cf file is used;
2213     we ignore them. */
2214     case 'A':
2215     if (!*argrest) { badarg = TRUE; break; }
2216     else
2217       {
2218       BOOL ignore = FALSE;
2219       switch (*argrest)
2220         {
2221         case 'c':
2222         case 'm':
2223           if (*(argrest + 1) == '\0')
2224             ignore = TRUE;
2225           break;
2226         }
2227       if (!ignore) badarg = TRUE;
2228       }
2229     break;
2230
2231     /* -Btype is a sendmail option for 7bit/8bit setting. Exim is 8-bit clean
2232     so has no need of it. */
2233
2234     case 'B':
2235     if (!*argrest) i++;       /* Skip over the type */
2236     break;
2237
2238
2239     case 'b':
2240       {
2241       receiving_message = FALSE;    /* Reset TRUE for -bm, -bS, -bs below */
2242
2243       switch (*argrest++)
2244         {
2245         /* -bd:  Run in daemon mode, awaiting SMTP connections.
2246            -bdf: Ditto, but in the foreground.
2247         */
2248         case 'd':
2249           f.daemon_listen = TRUE;
2250           if (*argrest == 'f') f.background_daemon = FALSE;
2251           else if (*argrest) badarg = TRUE;
2252           break;
2253
2254         /* -be:  Run in expansion test mode
2255            -bem: Ditto, but read a message from a file first
2256         */
2257         case 'e':
2258           expansion_test = checking = TRUE;
2259           if (*argrest == 'm')
2260             {
2261             if (++i >= argc) { badarg = TRUE; break; }
2262             expansion_test_message = argv[i];
2263             argrest++;
2264             }
2265           if (*argrest) badarg = TRUE;
2266           break;
2267
2268         /* -bF:  Run system filter test */
2269         case 'F':
2270           filter_test |= checking = FTEST_SYSTEM;
2271           if (*argrest) badarg = TRUE;
2272           else if (++i < argc) filter_test_sfile = argv[i];
2273           else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2274           break;
2275
2276         /* -bf:  Run user filter test
2277            -bfd: Set domain for filter testing
2278            -bfl: Set local part for filter testing
2279            -bfp: Set prefix for filter testing
2280            -bfs: Set suffix for filter testing
2281         */
2282         case 'f':
2283           if (!*argrest)
2284             {
2285             filter_test |= checking = FTEST_USER;
2286             if (++i < argc) filter_test_ufile = argv[i];
2287             else exim_fail("exim: file name expected after %s\n", argv[i-1]);
2288             }
2289           else
2290             {
2291             if (++i >= argc)
2292               exim_fail("exim: string expected after %s\n", arg);
2293             if (Ustrcmp(argrest, "d") == 0) ftest_domain = exim_str_fail_toolong(argv[i], EXIM_DOMAINNAME_MAX, "-bfd");
2294             else if (Ustrcmp(argrest, "l") == 0) ftest_localpart = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfl");
2295             else if (Ustrcmp(argrest, "p") == 0) ftest_prefix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfp");
2296             else if (Ustrcmp(argrest, "s") == 0) ftest_suffix = exim_str_fail_toolong(argv[i], EXIM_LOCALPART_MAX, "-bfs");
2297             else badarg = TRUE;
2298             }
2299           break;
2300
2301         /* -bh: Host checking - an IP address must follow. */
2302         case 'h':
2303           if (!*argrest || Ustrcmp(argrest, "c") == 0)
2304             {
2305             if (++i >= argc) { badarg = TRUE; break; }
2306             sender_host_address = string_copy_taint(
2307                   exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-bh"),
2308                   GET_TAINTED);
2309             host_checking = checking = f.log_testing_mode = TRUE;
2310             f.host_checking_callout = *argrest == 'c';
2311             message_logs = FALSE;
2312             }
2313           else badarg = TRUE;
2314           break;
2315
2316         /* -bi: This option is used by sendmail to initialize *the* alias file,
2317         though it has the -oA option to specify a different file. Exim has no
2318         concept of *the* alias file, but since Sun's YP make script calls
2319         sendmail this way, some support must be provided. */
2320         case 'i':
2321           if (!*argrest) bi_option = TRUE;
2322           else badarg = TRUE;
2323           break;
2324
2325         /* -bI: provide information, of the type to follow after a colon.
2326         This is an Exim flag. */
2327         case 'I':
2328           if (Ustrlen(argrest) >= 1 && *argrest == ':')
2329             {
2330             uschar *p = argrest+1;
2331             info_flag = CMDINFO_HELP;
2332             if (Ustrlen(p))
2333               if (strcmpic(p, CUS"sieve") == 0)
2334                 {
2335                 info_flag = CMDINFO_SIEVE;
2336                 info_stdout = TRUE;
2337                 }
2338               else if (strcmpic(p, CUS"dscp") == 0)
2339                 {
2340                 info_flag = CMDINFO_DSCP;
2341                 info_stdout = TRUE;
2342                 }
2343               else if (strcmpic(p, CUS"help") == 0)
2344                 info_stdout = TRUE;
2345             }
2346           else badarg = TRUE;
2347           break;
2348
2349         /* -bm: Accept and deliver message - the default option. Reinstate
2350         receiving_message, which got turned off for all -b options.
2351            -bmalware: test the filename given for malware */
2352         case 'm':
2353           if (!*argrest) receiving_message = TRUE;
2354           else if (Ustrcmp(argrest, "alware") == 0)
2355             {
2356             if (++i >= argc) { badarg = TRUE; break; }
2357             checking = TRUE;
2358             malware_test_file = argv[i];
2359             }
2360           else badarg = TRUE;
2361           break;
2362
2363         /* -bnq: For locally originating messages, do not qualify unqualified
2364         addresses. In the envelope, this causes errors; in header lines they
2365         just get left. */
2366         case 'n':
2367           if (Ustrcmp(argrest, "q") == 0)
2368             {
2369             f.allow_unqualified_sender = FALSE;
2370             f.allow_unqualified_recipient = FALSE;
2371             }
2372           else badarg = TRUE;
2373           break;
2374
2375         /* -bpxx: List the contents of the mail queue, in various forms. If
2376         the option is -bpc, just a queue count is needed. Otherwise, if the
2377         first letter after p is r, then order is random. */
2378         case 'p':
2379           if (*argrest == 'c')
2380             {
2381             count_queue = TRUE;
2382             if (*++argrest) badarg = TRUE;
2383             break;
2384             }
2385
2386           if (*argrest == 'r')
2387             {
2388             list_queue_option = 8;
2389             argrest++;
2390             }
2391           else list_queue_option = 0;
2392
2393           list_queue = TRUE;
2394
2395           /* -bp: List the contents of the mail queue, top-level only */
2396
2397           if (!*argrest) {}
2398
2399           /* -bpu: List the contents of the mail queue, top-level undelivered */
2400
2401           else if (Ustrcmp(argrest, "u") == 0) list_queue_option += 1;
2402
2403           /* -bpa: List the contents of the mail queue, including all delivered */
2404
2405           else if (Ustrcmp(argrest, "a") == 0) list_queue_option += 2;
2406
2407           /* Unknown after -bp[r] */
2408
2409           else badarg = TRUE;
2410           break;
2411
2412
2413         /* -bP: List the configuration variables given as the address list.
2414         Force -v, so configuration errors get displayed. */
2415         case 'P':
2416
2417           /* -bP config: we need to setup here, because later,
2418           when list_options is checked, the config is read already */
2419           if (*argrest)
2420             badarg = TRUE;
2421           else if (argv[i+1] && Ustrcmp(argv[i+1], "config") == 0)
2422             {
2423             list_config = TRUE;
2424             readconf_save_config(version_string);
2425             }
2426           else
2427             {
2428             list_options = TRUE;
2429             debug_selector |= D_v;
2430             debug_file = stderr;
2431             }
2432           break;
2433
2434         /* -brt: Test retry configuration lookup */
2435         case 'r':
2436           if (Ustrcmp(argrest, "t") == 0)
2437             {
2438             checking = TRUE;
2439             test_retry_arg = i + 1;
2440             goto END_ARG;
2441             }
2442
2443           /* -brw: Test rewrite configuration */
2444
2445           else if (Ustrcmp(argrest, "w") == 0)
2446             {
2447             checking = TRUE;
2448             test_rewrite_arg = i + 1;
2449             goto END_ARG;
2450             }
2451           else badarg = TRUE;
2452           break;
2453
2454         /* -bS: Read SMTP commands on standard input, but produce no replies -
2455         all errors are reported by sending messages. */
2456         case 'S':
2457           if (!*argrest)
2458             smtp_input = smtp_batched_input = receiving_message = TRUE;
2459           else badarg = TRUE;
2460           break;
2461
2462         /* -bs: Read SMTP commands on standard input and produce SMTP replies
2463         on standard output. */
2464         case 's':
2465           if (!*argrest) smtp_input = receiving_message = TRUE;
2466           else badarg = TRUE;
2467           break;
2468
2469         /* -bt: address testing mode */
2470         case 't':
2471           if (!*argrest)
2472             f.address_test_mode = checking = f.log_testing_mode = TRUE;
2473           else badarg = TRUE;
2474           break;
2475
2476         /* -bv: verify addresses */
2477         case 'v':
2478           if (!*argrest)
2479             verify_address_mode = checking = f.log_testing_mode = TRUE;
2480
2481         /* -bvs: verify sender addresses */
2482
2483           else if (Ustrcmp(argrest, "s") == 0)
2484             {
2485             verify_address_mode = checking = f.log_testing_mode = TRUE;
2486             verify_as_sender = TRUE;
2487             }
2488           else badarg = TRUE;
2489           break;
2490
2491         /* -bV: Print version string and support details */
2492         case 'V':
2493           if (!*argrest)
2494             {
2495             printf("Exim version %s #%s built %s\n", version_string,
2496               version_cnumber, version_date);
2497             printf("%s\n", CS version_copyright);
2498             version_printed = TRUE;
2499             show_whats_supported(TRUE);
2500             f.log_testing_mode = TRUE;
2501             }
2502           else badarg = TRUE;
2503           break;
2504
2505         /* -bw: inetd wait mode, accept a listening socket as stdin */
2506         case 'w':
2507           f.inetd_wait_mode = TRUE;
2508           f.background_daemon = FALSE;
2509           f.daemon_listen = TRUE;
2510           if (*argrest)
2511             if ((inetd_wait_timeout = readconf_readtime(argrest, 0, FALSE)) <= 0)
2512               exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
2513           break;
2514
2515         default:
2516           badarg = TRUE;
2517           break;
2518         }
2519       break;
2520       }
2521
2522
2523     /* -C: change configuration file list; ignore if it isn't really
2524     a change! Enforce a prefix check if required. */
2525
2526     case 'C':
2527     if (!*argrest)
2528       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2529     if (Ustrcmp(config_main_filelist, argrest) != 0)
2530       {
2531       #ifdef ALT_CONFIG_PREFIX
2532       int sep = 0;
2533       int len = Ustrlen(ALT_CONFIG_PREFIX);
2534       const uschar *list = argrest;
2535       uschar *filename;
2536       /* The argv is untainted, so big_buffer (also untainted) is ok to use */
2537       while((filename = string_nextinlist(&list, &sep, big_buffer,
2538              big_buffer_size)))
2539         if (  (  Ustrlen(filename) < len
2540               || Ustrncmp(filename, ALT_CONFIG_PREFIX, len) != 0
2541               || Ustrstr(filename, "/../") != NULL
2542               )
2543            && (Ustrcmp(filename, "/dev/null") != 0 || real_uid != root_uid)
2544            )
2545           exim_fail("-C Permission denied\n");
2546       #endif
2547       if (real_uid != root_uid)
2548         {
2549         #ifdef TRUSTED_CONFIG_LIST
2550
2551         if (real_uid != exim_uid
2552             #ifdef CONFIGURE_OWNER
2553             && real_uid != config_uid
2554             #endif
2555             )
2556           f.trusted_config = FALSE;
2557         else
2558           {
2559           FILE *trust_list = Ufopen(TRUSTED_CONFIG_LIST, "rb");
2560           if (trust_list)
2561             {
2562             struct stat statbuf;
2563
2564             if (fstat(fileno(trust_list), &statbuf) != 0 ||
2565                 (statbuf.st_uid != root_uid        /* owner not root */
2566                  #ifdef CONFIGURE_OWNER
2567                  && statbuf.st_uid != config_uid   /* owner not the special one */
2568                  #endif
2569                    ) ||                            /* or */
2570                 (statbuf.st_gid != root_gid        /* group not root */
2571                  #ifdef CONFIGURE_GROUP
2572                  && statbuf.st_gid != config_gid   /* group not the special one */
2573                  #endif
2574                  && (statbuf.st_mode & 020) != 0   /* group writeable */
2575                    ) ||                            /* or */
2576                 (statbuf.st_mode & 2) != 0)        /* world writeable */
2577               {
2578               f.trusted_config = FALSE;
2579               fclose(trust_list);
2580               }
2581             else
2582               {
2583               /* Well, the trust list at least is up to scratch... */
2584               rmark reset_point;
2585               uschar *trusted_configs[32];
2586               int nr_configs = 0;
2587               int i = 0;
2588               int old_pool = store_pool;
2589               store_pool = POOL_MAIN;
2590
2591               reset_point = store_mark();
2592               while (Ufgets(big_buffer, big_buffer_size, trust_list))
2593                 {
2594                 uschar *start = big_buffer, *nl;
2595                 while (*start && isspace(*start))
2596                 start++;
2597                 if (*start != '/')
2598                   continue;
2599                 nl = Ustrchr(start, '\n');
2600                 if (nl)
2601                   *nl = 0;
2602                 trusted_configs[nr_configs++] = string_copy(start);
2603                 if (nr_configs == nelem(trusted_configs))
2604                   break;
2605                 }
2606               fclose(trust_list);
2607
2608               if (nr_configs)
2609                 {
2610                 int sep = 0;
2611                 const uschar *list = argrest;
2612                 uschar *filename;
2613                 while (f.trusted_config && (filename = string_nextinlist(&list,
2614                         &sep, big_buffer, big_buffer_size)))
2615                   {
2616                   for (i=0; i < nr_configs; i++)
2617                     if (Ustrcmp(filename, trusted_configs[i]) == 0)
2618                       break;
2619                   if (i == nr_configs)
2620                     {
2621                     f.trusted_config = FALSE;
2622                     break;
2623                     }
2624                   }
2625                 }
2626               else      /* No valid prefixes found in trust_list file. */
2627                 f.trusted_config = FALSE;
2628               store_reset(reset_point);
2629               store_pool = old_pool;
2630               }
2631             }
2632           else          /* Could not open trust_list file. */
2633             f.trusted_config = FALSE;
2634           }
2635       #else
2636         /* Not root; don't trust config */
2637         f.trusted_config = FALSE;
2638       #endif
2639         }
2640
2641       config_main_filelist = argrest;
2642       f.config_changed = TRUE;
2643       }
2644     break;
2645
2646
2647     /* -D: set up a macro definition */
2648
2649     case 'D':
2650 #ifdef DISABLE_D_OPTION
2651       exim_fail("exim: -D is not available in this Exim binary\n");
2652 #else
2653       {
2654       int ptr = 0;
2655       macro_item *m;
2656       uschar name[24];
2657       uschar *s = argrest;
2658
2659       opt_D_used = TRUE;
2660       while (isspace(*s)) s++;
2661
2662       if (*s < 'A' || *s > 'Z')
2663         exim_fail("exim: macro name set by -D must start with "
2664           "an upper case letter\n");
2665
2666       while (isalnum(*s) || *s == '_')
2667         {
2668         if (ptr < sizeof(name)-1) name[ptr++] = *s;
2669         s++;
2670         }
2671       name[ptr] = 0;
2672       if (ptr == 0) { badarg = TRUE; break; }
2673       while (isspace(*s)) s++;
2674       if (*s != 0)
2675         {
2676         if (*s++ != '=') { badarg = TRUE; break; }
2677         while (isspace(*s)) s++;
2678         }
2679
2680       for (m = macros_user; m; m = m->next)
2681         if (Ustrcmp(m->name, name) == 0)
2682           exim_fail("exim: duplicated -D in command line\n");
2683
2684       m = macro_create(name, s, TRUE);
2685
2686       if (clmacro_count >= MAX_CLMACROS)
2687         exim_fail("exim: too many -D options on command line\n");
2688       clmacros[clmacro_count++] =
2689         string_sprintf("-D%s=%s", m->name, m->replacement);
2690       }
2691     #endif
2692     break;
2693
2694     case 'd':
2695
2696     /* -dropcr: Set this option.  Now a no-op, retained for compatibility only. */
2697
2698     if (Ustrcmp(argrest, "ropcr") == 0)
2699       {
2700       /* drop_cr = TRUE; */
2701       }
2702
2703     /* -dp: Set up a debug pretrigger buffer with given size. */
2704
2705     else if (Ustrcmp(argrest, "p") == 0)
2706       if (++i >= argc)
2707         badarg = TRUE;
2708       else
2709         debug_pretrigger_setup(argv[i]);
2710
2711     /* -dt: Set a debug trigger selector */
2712
2713     else if (Ustrncmp(argrest, "t=", 2) == 0)
2714       dtrigger_selector = (unsigned int) Ustrtol(argrest + 2, NULL, 0);
2715
2716     /* -d: Set debug level (see also -v below).
2717     If -dd is used, debugging subprocesses of the daemon is disabled. */
2718
2719     else
2720       {
2721       /* Use an intermediate variable so that we don't set debugging while
2722       decoding the debugging bits. */
2723
2724       unsigned int selector = D_default;
2725       debug_selector = 0;
2726       debug_file = NULL;
2727       if (*argrest == 'd')
2728         {
2729         f.debug_daemon = TRUE;
2730         argrest++;
2731         }
2732       if (*argrest)
2733         decode_bits(&selector, 1, debug_notall, argrest,
2734           debug_options, debug_options_count, US"debug", 0);
2735       debug_selector = selector;
2736       }
2737     break;
2738
2739
2740     /* -E: This is a local error message. This option is not intended for
2741     external use at all, but is not restricted to trusted callers because it
2742     does no harm (just suppresses certain error messages) and if Exim is run
2743     not setuid root it won't always be trusted when it generates error
2744     messages using this option. If there is a message id following -E, point
2745     message_reference at it, for logging. */
2746
2747     case 'E':
2748     f.local_error_message = TRUE;
2749     if (mac_ismsgid(argrest)) message_reference = argrest;
2750     break;
2751
2752
2753     /* -ex: The vacation program calls sendmail with the undocumented "-eq"
2754     option, so it looks as if historically the -oex options are also callable
2755     without the leading -o. So we have to accept them. Before the switch,
2756     anything starting -oe has been converted to -e. Exim does not support all
2757     of the sendmail error options. */
2758
2759     case 'e':
2760     if (Ustrcmp(argrest, "e") == 0)
2761       {
2762       arg_error_handling = ERRORS_SENDER;
2763       errors_sender_rc = EXIT_SUCCESS;
2764       }
2765     else if (Ustrcmp(argrest, "m") == 0) arg_error_handling = ERRORS_SENDER;
2766     else if (Ustrcmp(argrest, "p") == 0) arg_error_handling = ERRORS_STDERR;
2767     else if (Ustrcmp(argrest, "q") == 0) arg_error_handling = ERRORS_STDERR;
2768     else if (Ustrcmp(argrest, "w") == 0) arg_error_handling = ERRORS_SENDER;
2769     else badarg = TRUE;
2770     break;
2771
2772
2773     /* -F: Set sender's full name, used instead of the gecos entry from
2774     the password file. Since users can usually alter their gecos entries,
2775     there's no security involved in using this instead. The data can follow
2776     the -F or be in the next argument. */
2777
2778     case 'F':
2779     if (!*argrest)
2780       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2781     originator_name = string_copy_taint(
2782                   exim_str_fail_toolong(argrest, EXIM_HUMANNAME_MAX, "-F"),
2783                   GET_TAINTED);
2784     f.sender_name_forced = TRUE;
2785     break;
2786
2787
2788     /* -f: Set sender's address - this value is only actually used if Exim is
2789     run by a trusted user, or if untrusted_set_sender is set and matches the
2790     address, except that the null address can always be set by any user. The
2791     test for this happens later, when the value given here is ignored when not
2792     permitted. For an untrusted user, the actual sender is still put in Sender:
2793     if it doesn't match the From: header (unless no_local_from_check is set).
2794     The data can follow the -f or be in the next argument. The -r switch is an
2795     obsolete form of -f but since there appear to be programs out there that
2796     use anything that sendmail has ever supported, better accept it - the
2797     synonymizing is done before the switch above.
2798
2799     At this stage, we must allow domain literal addresses, because we don't
2800     know what the setting of allow_domain_literals is yet. Ditto for trailing
2801     dots and strip_trailing_dot. */
2802
2803     case 'f':
2804       {
2805       int dummy_start, dummy_end;
2806       uschar *errmess;
2807       if (!*argrest)
2808         if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
2809       (void) exim_str_fail_toolong(argrest, EXIM_DISPLAYMAIL_MAX, "-f");
2810       if (!*argrest)
2811         *(sender_address = store_get(1, GET_UNTAINTED)) = '\0';  /* Ensure writeable memory */
2812       else
2813         {
2814         uschar * temp = argrest + Ustrlen(argrest) - 1;
2815         while (temp >= argrest && isspace(*temp)) temp--;
2816         if (temp >= argrest && *temp == '.') f_end_dot = TRUE;
2817         allow_domain_literals = TRUE;
2818         strip_trailing_dot = TRUE;
2819 #ifdef SUPPORT_I18N
2820         allow_utf8_domains = TRUE;
2821 #endif
2822         if (!(sender_address = parse_extract_address(argrest, &errmess,
2823                   &dummy_start, &dummy_end, &sender_address_domain, TRUE)))
2824           exim_fail("exim: bad -f address \"%s\": %s\n", argrest, errmess);
2825
2826         sender_address = string_copy_taint(sender_address, GET_TAINTED);
2827 #ifdef SUPPORT_I18N
2828         message_smtputf8 =  string_is_utf8(sender_address);
2829         allow_utf8_domains = FALSE;
2830 #endif
2831         allow_domain_literals = FALSE;
2832         strip_trailing_dot = FALSE;
2833         }
2834       f.sender_address_forced = TRUE;
2835       }
2836     break;
2837
2838     /* -G: sendmail invocation to specify that it's a gateway submission and
2839     sendmail may complain about problems instead of fixing them.
2840     We make it equivalent to an ACL "control = suppress_local_fixups" and do
2841     not at this time complain about problems. */
2842
2843     case 'G':
2844     flag_G = TRUE;
2845     break;
2846
2847     /* -h: Set the hop count for an incoming message. Exim does not currently
2848     support this; it always computes it by counting the Received: headers.
2849     To put it in will require a change to the spool header file format. */
2850
2851     case 'h':
2852     if (!*argrest)
2853       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2854     if (!isdigit(*argrest)) badarg = TRUE;
2855     break;
2856
2857
2858     /* -i: Set flag so dot doesn't end non-SMTP input (same as -oi, seems
2859     not to be documented for sendmail but mailx (at least) uses it) */
2860
2861     case 'i':
2862     if (!*argrest) f.dot_ends = FALSE; else badarg = TRUE;
2863     break;
2864
2865
2866     /* -L: set the identifier used for syslog; equivalent to setting
2867     syslog_processname in the config file, but needs to be an admin option. */
2868
2869     case 'L':
2870     if (!*argrest)
2871       if (++i < argc) argrest = argv[i]; else { badarg = TRUE; break; }
2872     if ((sz = Ustrlen(argrest)) > 32)
2873       exim_fail("exim: the -L syslog name is too long: \"%s\"\n", argrest);
2874     if (sz < 1)
2875       exim_fail("exim: the -L syslog name is too short\n");
2876     cmdline_syslog_name = string_copy_taint(argrest, GET_TAINTED);
2877     break;
2878
2879     case 'M':
2880     receiving_message = FALSE;
2881
2882     /* -MC:  continue delivery of another message via an existing open
2883     file descriptor. This option is used for an internal call by the
2884     smtp transport when there is a pending message waiting to go to an
2885     address to which it has got a connection. Five subsequent arguments are
2886     required: transport name, host name, IP address, sequence number, and
2887     message_id. Transports may decline to create new processes if the sequence
2888     number gets too big. The channel is stdin. This (-MC) must be the last
2889     argument. There's a subsequent check that the real-uid is privileged.
2890
2891     If we are running in the test harness. delay for a bit, to let the process
2892     that set this one up complete. This makes for repeatability of the logging,
2893     etc. output. */
2894
2895     if (Ustrcmp(argrest, "C") == 0)
2896       {
2897       union sockaddr_46 interface_sock;
2898       EXIM_SOCKLEN_T size = sizeof(interface_sock);
2899
2900       if (argc != i + 6)
2901         exim_fail("exim: too many or too few arguments after -MC\n");
2902
2903       if (msg_action_arg >= 0)
2904         exim_fail("exim: incompatible arguments\n");
2905
2906       continue_transport = string_copy_taint(
2907         exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-C internal transport"),
2908         GET_TAINTED);
2909       continue_hostname = string_copy_taint(
2910         exim_str_fail_toolong(argv[++i], EXIM_HOSTNAME_MAX, "-C internal hostname"),
2911         GET_TAINTED);
2912       continue_host_address = string_copy_taint(
2913         exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-C internal hostaddr"),
2914         GET_TAINTED);
2915       continue_sequence = Uatoi(argv[++i]);
2916       msg_action = MSG_DELIVER;
2917       msg_action_arg = ++i;
2918       forced_delivery = TRUE;
2919       queue_run_pid = passed_qr_pid;
2920       queue_run_pipe = passed_qr_pipe;
2921
2922       if (!mac_ismsgid(argv[i]))
2923         exim_fail("exim: malformed message id %s after -MC option\n",
2924           argv[i]);
2925
2926       /* Set up $sending_ip_address and $sending_port, unless proxied */
2927
2928       if (!continue_proxy_cipher)
2929         if (getsockname(fileno(stdin), (struct sockaddr *)(&interface_sock),
2930             &size) == 0)
2931           sending_ip_address = host_ntoa(-1, &interface_sock, NULL,
2932             &sending_port);
2933         else
2934           exim_fail("exim: getsockname() failed after -MC option: %s\n",
2935             strerror(errno));
2936
2937       testharness_pause_ms(500);
2938       break;
2939       }
2940
2941     else if (*argrest == 'C' && argrest[1] && !argrest[2])
2942       {
2943       switch(argrest[1])
2944         {
2945     /* -MCA: set the smtp_authenticated flag; this is useful only when it
2946     precedes -MC (see above). The flag indicates that the host to which
2947     Exim is connected has accepted an AUTH sequence. */
2948
2949         case 'A': f.smtp_authenticated = TRUE; break;
2950
2951     /* -MCD: set the smtp_use_dsn flag; this indicates that the host
2952        that exim is connected to supports the esmtp extension DSN */
2953
2954         case 'D': smtp_peer_options |= OPTION_DSN; break;
2955
2956     /* -MCd: for debug, set a process-purpose string */
2957
2958         case 'd': if (++i < argc)
2959                     process_purpose = string_copy_taint(
2960                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCd"),
2961                       GET_TAINTED);
2962                   else badarg = TRUE;
2963                   break;
2964
2965     /* -MCG: set the queue name, to a non-default value. Arguably, anything
2966        from the commandline should be tainted - but we will need an untainted
2967        value for the spoolfile when doing a -odi delivery process. */
2968
2969         case 'G': if (++i < argc) queue_name = string_copy_taint(
2970                       exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-MCG"),
2971                       GET_UNTAINTED);
2972                   else badarg = TRUE;
2973                   break;
2974
2975     /* -MCK: the peer offered CHUNKING.  Must precede -MC */
2976
2977         case 'K': smtp_peer_options |= OPTION_CHUNKING; break;
2978
2979 #ifdef EXPERIMENTAL_ESMTP_LIMITS
2980     /* -MCL: peer used LIMITS RCPTMAX and/or RCPTDOMAINMAX */
2981         case 'L': if (++i < argc) continue_limit_mail = Uatoi(argv[i]);
2982                   else badarg = TRUE;
2983                   if (++i < argc) continue_limit_rcpt = Uatoi(argv[i]);
2984                   else badarg = TRUE;
2985                   if (++i < argc) continue_limit_rcptdom = Uatoi(argv[i]);
2986                   else badarg = TRUE;
2987                   break;
2988 #endif
2989
2990     /* -MCP: set the smtp_use_pipelining flag; this is useful only when
2991     it preceded -MC (see above) */
2992
2993         case 'P': smtp_peer_options |= OPTION_PIPE; break;
2994
2995 #ifdef SUPPORT_SOCKS
2996     /* -MCp: Socks proxy in use; nearside IP, port, external IP, port */
2997         case 'p': proxy_session = TRUE;
2998                   if (++i < argc)
2999                     {
3000                     proxy_local_address = string_copy_taint(argv[i], GET_TAINTED);
3001                     if (++i < argc)
3002                       {
3003                       proxy_local_port = Uatoi(argv[i]);
3004                       if (++i < argc)
3005                         {
3006                         proxy_external_address = string_copy_taint(argv[i], GET_TAINTED);
3007                         if (++i < argc)
3008                           {
3009                           proxy_external_port = Uatoi(argv[i]);
3010                           break;
3011                     } } } }
3012                   badarg = TRUE;
3013                   break;
3014 #endif
3015     /* -MCQ: pass on the pid of the queue-running process that started
3016     this chain of deliveries and the fd of its synchronizing pipe; this
3017     is useful only when it precedes -MC (see above) */
3018
3019         case 'Q': if (++i < argc) passed_qr_pid = (pid_t)(Uatol(argv[i]));
3020                   else badarg = TRUE;
3021                   if (++i < argc) passed_qr_pipe = (int)(Uatol(argv[i]));
3022                   else badarg = TRUE;
3023                   break;
3024
3025     /* -MCq: do a quota check on the given recipient for the given size
3026     of message.  Separate from -MC. */
3027         case 'q': rcpt_verify_quota = TRUE;
3028                   if (++i < argc) message_size = Uatoi(argv[i]);
3029                   else badarg = TRUE;
3030                   break;
3031
3032     /* -MCS: set the smtp_use_size flag; this is useful only when it
3033     precedes -MC (see above) */
3034
3035         case 'S': smtp_peer_options |= OPTION_SIZE; break;
3036
3037 #ifndef DISABLE_TLS
3038     /* -MCs: used with -MCt; SNI was sent */
3039     /* -MCr: ditto, DANE */
3040
3041         case 'r':
3042         case 's': if (++i < argc)
3043                     {
3044                     continue_proxy_sni = string_copy_taint(
3045                       exim_str_fail_toolong(argv[i], EXIM_HOSTNAME_MAX, "-MCr/-MCs"),
3046                       GET_TAINTED);
3047                     if (argrest[1] == 'r') continue_proxy_dane = TRUE;
3048                     }
3049                   else badarg = TRUE;
3050                   break;
3051
3052     /* -MCt: similar to -MCT below but the connection is still open
3053     via a proxy process which handles the TLS context and coding.
3054     Require three arguments for the proxied local address and port,
3055     and the TLS cipher. */
3056
3057         case 't': if (++i < argc)
3058                     sending_ip_address = string_copy_taint(
3059                       exim_str_fail_toolong(argv[i], EXIM_IPADDR_MAX, "-MCt IP"),
3060                       GET_TAINTED);
3061                   else badarg = TRUE;
3062                   if (++i < argc)
3063                     sending_port = (int)(Uatol(argv[i]));
3064                   else badarg = TRUE;
3065                   if (++i < argc)
3066                     continue_proxy_cipher = string_copy_taint(
3067                       exim_str_fail_toolong(argv[i], EXIM_CIPHERNAME_MAX, "-MCt cipher"),
3068                       GET_TAINTED);
3069                   else badarg = TRUE;
3070                   /*FALLTHROUGH*/
3071
3072     /* -MCT: set the tls_offered flag; this is useful only when it
3073     precedes -MC (see above). The flag indicates that the host to which
3074     Exim is connected has offered TLS support. */
3075
3076         case 'T': smtp_peer_options |= OPTION_TLS; break;
3077 #endif
3078
3079         default:  badarg = TRUE; break;
3080         }
3081       break;
3082       }
3083
3084     /* -M[x]: various operations on the following list of message ids:
3085        -M    deliver the messages, ignoring next retry times and thawing
3086        -Mc   deliver the messages, checking next retry times, no thawing
3087        -Mf   freeze the messages
3088        -Mg   give up on the messages
3089        -Mt   thaw the messages
3090        -Mrm  remove the messages
3091     In the above cases, this must be the last option. There are also the
3092     following options which are followed by a single message id, and which
3093     act on that message. Some of them use the "recipient" addresses as well.
3094        -Mar  add recipient(s)
3095        -MG   move to a different queue
3096        -Mmad mark all recipients delivered
3097        -Mmd  mark recipients(s) delivered
3098        -Mes  edit sender
3099        -Mset load a message for use with -be
3100        -Mvb  show body
3101        -Mvc  show copy (of whole message, in RFC 2822 format)
3102        -Mvh  show header
3103        -Mvl  show log
3104     */
3105
3106     else if (!*argrest)
3107       {
3108       msg_action = MSG_DELIVER;
3109       forced_delivery = f.deliver_force_thaw = TRUE;
3110       }
3111     else if (Ustrcmp(argrest, "ar") == 0)
3112       {
3113       msg_action = MSG_ADD_RECIPIENT;
3114       one_msg_action = TRUE;
3115       }
3116     else if (Ustrcmp(argrest, "c") == 0)  msg_action = MSG_DELIVER;
3117     else if (Ustrcmp(argrest, "es") == 0)
3118       {
3119       msg_action = MSG_EDIT_SENDER;
3120       one_msg_action = TRUE;
3121       }
3122     else if (Ustrcmp(argrest, "f") == 0)  msg_action = MSG_FREEZE;
3123     else if (Ustrcmp(argrest, "g") == 0)
3124       {
3125       msg_action = MSG_DELIVER;
3126       deliver_give_up = TRUE;
3127       }
3128    else if (Ustrcmp(argrest, "G") == 0)
3129       {
3130       msg_action = MSG_SETQUEUE;
3131       queue_name_dest = string_copy_taint(
3132         exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-MG"),
3133         GET_TAINTED);
3134       }
3135     else if (Ustrcmp(argrest, "mad") == 0) msg_action = MSG_MARK_ALL_DELIVERED;
3136     else if (Ustrcmp(argrest, "md") == 0)
3137       {
3138       msg_action = MSG_MARK_DELIVERED;
3139       one_msg_action = TRUE;
3140       }
3141     else if (Ustrcmp(argrest, "rm") == 0) msg_action = MSG_REMOVE;
3142     else if (Ustrcmp(argrest, "set") == 0)
3143       {
3144       msg_action = MSG_LOAD;
3145       one_msg_action = TRUE;
3146       }
3147     else if (Ustrcmp(argrest, "t") == 0)  msg_action = MSG_THAW;
3148     else if (Ustrcmp(argrest, "vb") == 0)
3149       {
3150       msg_action = MSG_SHOW_BODY;
3151       one_msg_action = TRUE;
3152       }
3153     else if (Ustrcmp(argrest, "vc") == 0)
3154       {
3155       msg_action = MSG_SHOW_COPY;
3156       one_msg_action = TRUE;
3157       }
3158     else if (Ustrcmp(argrest, "vh") == 0)
3159       {
3160       msg_action = MSG_SHOW_HEADER;
3161       one_msg_action = TRUE;
3162       }
3163     else if (Ustrcmp(argrest, "vl") == 0)
3164       {
3165       msg_action = MSG_SHOW_LOG;
3166       one_msg_action = TRUE;
3167       }
3168     else { badarg = TRUE; break; }
3169
3170     /* All the -Mxx options require at least one message id. */
3171
3172     msg_action_arg = i + 1;
3173     if (msg_action_arg >= argc)
3174       exim_fail("exim: no message ids given after %s option\n", arg);
3175
3176     /* Some require only message ids to follow */
3177
3178     if (!one_msg_action)
3179       {
3180       for (int j = msg_action_arg; j < argc; j++) if (!mac_ismsgid(argv[j]))
3181         exim_fail("exim: malformed message id %s after %s option\n",
3182           argv[j], arg);
3183       goto END_ARG;   /* Remaining args are ids */
3184       }
3185
3186     /* Others require only one message id, possibly followed by addresses,
3187     which will be handled as normal arguments. */
3188
3189     else
3190       {
3191       if (!mac_ismsgid(argv[msg_action_arg]))
3192         exim_fail("exim: malformed message id %s after %s option\n",
3193           argv[msg_action_arg], arg);
3194       i++;
3195       }
3196     break;
3197
3198
3199     /* Some programs seem to call the -om option without the leading o;
3200     for sendmail it askes for "me too". Exim always does this. */
3201
3202     case 'm':
3203     if (*argrest) badarg = TRUE;
3204     break;
3205
3206
3207     /* -N: don't do delivery - a debugging option that stops transports doing
3208     their thing. It implies debugging at the D_v level. */
3209
3210     case 'N':
3211     if (!*argrest)
3212       {
3213       f.dont_deliver = TRUE;
3214       debug_selector |= D_v;
3215       debug_file = stderr;
3216       }
3217     else badarg = TRUE;
3218     break;
3219
3220
3221     /* -n: This means "don't alias" in sendmail, apparently.
3222     For normal invocations, it has no effect.
3223     It may affect some other options. */
3224
3225     case 'n':
3226     flag_n = TRUE;
3227     break;
3228
3229     /* -O: Just ignore it. In sendmail, apparently -O option=value means set
3230     option to the specified value. This form uses long names. We need to handle
3231     -O option=value and -Ooption=value. */
3232
3233     case 'O':
3234     if (!*argrest)
3235       if (++i >= argc)
3236         exim_fail("exim: string expected after -O\n");
3237     break;
3238
3239     case 'o':
3240     switch (*argrest++)
3241       {
3242       /* -oA: Set an argument for the bi command (sendmail's "alternate alias
3243       file" option). */
3244       case 'A':
3245         if (!*(alias_arg = argrest))
3246           if (i+1 < argc) alias_arg = argv[++i];
3247           else exim_fail("exim: string expected after -oA\n");
3248         break;
3249
3250       /* -oB: Set a connection message max value for remote deliveries */
3251       case 'B':
3252         {
3253         uschar * p = argrest;
3254         if (!*p)
3255           if (i+1 < argc && isdigit((argv[i+1][0])))
3256             p = argv[++i];
3257           else
3258             {
3259             connection_max_messages = 1;
3260             p = NULL;
3261             }
3262
3263         if (p)
3264           {
3265           if (!isdigit(*p))
3266             exim_fail("exim: number expected after -oB\n");
3267           connection_max_messages = Uatoi(p);
3268           }
3269         }
3270         break;
3271
3272       /* -odb: background delivery */
3273
3274       case 'd':
3275         if (Ustrcmp(argrest, "b") == 0)
3276           {
3277           f.synchronous_delivery = FALSE;
3278           arg_queue_only = FALSE;
3279           queue_only_set = TRUE;
3280           }
3281
3282       /* -odd: testsuite-only: add no inter-process delays */
3283
3284         else if (Ustrcmp(argrest, "d") == 0)
3285           f.testsuite_delays = FALSE;
3286
3287       /* -odf: foreground delivery (smail-compatible option); same effect as
3288          -odi: interactive (synchronous) delivery (sendmail-compatible option)
3289       */
3290
3291         else if (Ustrcmp(argrest, "f") == 0 || Ustrcmp(argrest, "i") == 0)
3292           {
3293           f.synchronous_delivery = TRUE;
3294           arg_queue_only = FALSE;
3295           queue_only_set = TRUE;
3296           }
3297
3298       /* -odq: queue only */
3299
3300         else if (Ustrcmp(argrest, "q") == 0)
3301           {
3302           f.synchronous_delivery = FALSE;
3303           arg_queue_only = TRUE;
3304           queue_only_set = TRUE;
3305           }
3306
3307       /* -odqs: queue SMTP only - do local deliveries and remote routing,
3308       but no remote delivery */
3309
3310         else if (Ustrcmp(argrest, "qs") == 0)
3311           {
3312           f.queue_smtp = TRUE;
3313           arg_queue_only = FALSE;
3314           queue_only_set = TRUE;
3315           }
3316         else badarg = TRUE;
3317         break;
3318
3319       /* -oex: Sendmail error flags. As these are also accepted without the
3320       leading -o prefix, for compatibility with vacation and other callers,
3321       they are handled with -e above. */
3322
3323       /* -oi:     Set flag so dot doesn't end non-SMTP input (same as -i)
3324          -oitrue: Another sendmail syntax for the same */
3325
3326       case 'i':
3327         if (!*argrest || Ustrcmp(argrest, "true") == 0)
3328           f.dot_ends = FALSE;
3329         else badarg = TRUE;
3330         break;
3331
3332     /* -oM*: Set various characteristics for an incoming message; actually
3333     acted on for trusted callers only. */
3334
3335       case 'M':
3336         {
3337         if (i+1 >= argc)
3338           exim_fail("exim: data expected after -oM%s\n", argrest);
3339
3340         /* -oMa: Set sender host address */
3341
3342         if (Ustrcmp(argrest, "a") == 0)
3343           sender_host_address = string_copy_taint(
3344             exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-oMa"),
3345             GET_TAINTED);
3346
3347         /* -oMaa: Set authenticator name */
3348
3349         else if (Ustrcmp(argrest, "aa") == 0)
3350           sender_host_authenticated = string_copy_taint(
3351             exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-oMaa"),
3352             GET_TAINTED);
3353
3354         /* -oMas: setting authenticated sender */
3355
3356         else if (Ustrcmp(argrest, "as") == 0)
3357           authenticated_sender = string_copy_taint(
3358             exim_str_fail_toolong(argv[++i], EXIM_EMAILADDR_MAX, "-oMas"),
3359             GET_TAINTED);
3360
3361         /* -oMai: setting authenticated id */
3362
3363         else if (Ustrcmp(argrest, "ai") == 0)
3364           authenticated_id = string_copy_taint(
3365             exim_str_fail_toolong(argv[++i], EXIM_EMAILADDR_MAX, "-oMas"),
3366             GET_TAINTED);
3367
3368         /* -oMi: Set incoming interface address */
3369
3370         else if (Ustrcmp(argrest, "i") == 0)
3371           interface_address = string_copy_taint(
3372             exim_str_fail_toolong(argv[++i], EXIM_IPADDR_MAX, "-oMi"),
3373             GET_TAINTED);
3374
3375         /* -oMm: Message reference */
3376
3377         else if (Ustrcmp(argrest, "m") == 0)
3378           {
3379           if (!mac_ismsgid(argv[i+1]))
3380               exim_fail("-oMm must be a valid message ID\n");
3381           if (!f.trusted_config)
3382               exim_fail("-oMm must be called by a trusted user/config\n");
3383             message_reference = argv[++i];
3384           }
3385
3386         /* -oMr: Received protocol */
3387
3388         else if (Ustrcmp(argrest, "r") == 0)
3389
3390           if (received_protocol)
3391             exim_fail("received_protocol is set already\n");
3392           else
3393             received_protocol = string_copy_taint(
3394               exim_str_fail_toolong(argv[++i], EXIM_DRIVERNAME_MAX, "-oMr"),
3395               GET_TAINTED);
3396
3397         /* -oMs: Set sender host name */
3398
3399         else if (Ustrcmp(argrest, "s") == 0)
3400           sender_host_name = string_copy_taint(
3401             exim_str_fail_toolong(argv[++i], EXIM_HOSTNAME_MAX, "-oMs"),
3402             GET_TAINTED);
3403
3404         /* -oMt: Set sender ident */
3405
3406         else if (Ustrcmp(argrest, "t") == 0)
3407           {
3408           sender_ident_set = TRUE;
3409           sender_ident = string_copy_taint(
3410             exim_str_fail_toolong(argv[++i], EXIM_IDENTUSER_MAX, "-oMt"),
3411             GET_TAINTED);
3412           }
3413
3414         /* Else a bad argument */
3415
3416         else
3417           badarg = TRUE;
3418         }
3419         break;
3420
3421       /* -om: Me-too flag for aliases. Exim always does this. Some programs
3422       seem to call this as -m (undocumented), so that is also accepted (see
3423       above). */
3424       /* -oo: An ancient flag for old-style addresses which still seems to
3425       crop up in some calls (see in SCO). */
3426
3427       case 'm':
3428       case 'o':
3429         if (*argrest) badarg = TRUE;
3430         break;
3431
3432       /* -oP <name>: set pid file path for daemon
3433          -oPX:       delete pid file of daemon */
3434
3435       case 'P':
3436         if (!f.running_in_test_harness && real_uid != root_uid && real_uid != exim_uid)
3437           exim_fail("exim: only uid=%d or uid=%d can use -oP and -oPX "
3438                     "(uid=%d euid=%d | %d)\n",
3439                     root_uid, exim_uid, getuid(), geteuid(), real_uid);
3440         if (!*argrest) override_pid_file_path = argv[++i];
3441         else if (Ustrcmp(argrest, "X") == 0) delete_pid_file();
3442         else badarg = TRUE;
3443         break;
3444
3445
3446       /* -or <n>: set timeout for non-SMTP acceptance
3447          -os <n>: set timeout for SMTP acceptance */
3448
3449       case 'r':
3450       case 's':
3451         {
3452         int * tp = argrest[-1] == 'r'
3453           ? &arg_receive_timeout : &arg_smtp_receive_timeout;
3454         if (*argrest)
3455           *tp = readconf_readtime(argrest, 0, FALSE);
3456         else if (i+1 < argc)
3457           *tp = readconf_readtime(argv[++i], 0, FALSE);
3458
3459         if (*tp < 0)
3460           exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3461         }
3462         break;
3463
3464       /* -oX <list>: Override local_interfaces and/or default daemon ports */
3465       /* Limits: Is there a real limit we want here?  1024 is very arbitrary. */
3466
3467       case 'X':
3468         if (*argrest) badarg = TRUE;
3469         else override_local_interfaces = string_copy_taint(
3470           exim_str_fail_toolong(argv[++i], 1024, "-oX"),
3471           GET_TAINTED);
3472         break;
3473
3474       /* -oY: Override creation of daemon notifier socket */
3475
3476       case 'Y':
3477         if (*argrest) badarg = TRUE;
3478         else notifier_socket = NULL;
3479         break;
3480
3481       /* Unknown -o argument */
3482
3483       default:
3484         badarg = TRUE;
3485       }
3486     break;
3487
3488
3489     /* -ps: force Perl startup; -pd force delayed Perl startup */
3490
3491     case 'p':
3492     #ifdef EXIM_PERL
3493     if (*argrest == 's' && argrest[1] == 0)
3494       {
3495       perl_start_option = 1;
3496       break;
3497       }
3498     if (*argrest == 'd' && argrest[1] == 0)
3499       {
3500       perl_start_option = -1;
3501       break;
3502       }
3503     #endif
3504
3505     /* -panythingelse is taken as the Sendmail-compatible argument -prval:sval,
3506     which sets the host protocol and host name */
3507
3508     if (!*argrest)
3509       if (i+1 < argc) argrest = argv[++i]; else { badarg = TRUE; break; }
3510
3511     if (*argrest)
3512       {
3513       uschar * hn = Ustrchr(argrest, ':');
3514
3515       if (received_protocol)
3516         exim_fail("received_protocol is set already\n");
3517
3518       if (!hn)
3519         received_protocol = string_copy_taint(
3520           exim_str_fail_toolong(argrest, EXIM_DRIVERNAME_MAX, "-p<protocol>"),
3521           GET_TAINTED);
3522       else
3523         {
3524         (void) exim_str_fail_toolong(argrest, (EXIM_DRIVERNAME_MAX+1+EXIM_HOSTNAME_MAX), "-p<protocol>:<host>");
3525         received_protocol = string_copyn_taint(argrest, hn - argrest, GET_TAINTED);
3526         sender_host_name = string_copy_taint(hn + 1, GET_TAINTED);
3527         }
3528       }
3529     break;
3530
3531
3532     case 'q':
3533     receiving_message = FALSE;
3534     if (queue_interval >= 0)
3535       exim_fail("exim: -q specified more than once\n");
3536
3537     /* -qq...: Do queue runs in a 2-stage manner */
3538
3539     if (*argrest == 'q')
3540       {
3541       f.queue_2stage = TRUE;
3542       argrest++;
3543       }
3544
3545     /* -qi...: Do only first (initial) deliveries */
3546
3547     if (*argrest == 'i')
3548       {
3549       f.queue_run_first_delivery = TRUE;
3550       argrest++;
3551       }
3552
3553     /* -qf...: Run the queue, forcing deliveries
3554        -qff..: Ditto, forcing thawing as well */
3555
3556     if (*argrest == 'f')
3557       {
3558       f.queue_run_force = TRUE;
3559       if (*++argrest == 'f')
3560         {
3561         f.deliver_force_thaw = TRUE;
3562         argrest++;
3563         }
3564       }
3565
3566     /* -q[f][f]l...: Run the queue only on local deliveries */
3567
3568     if (*argrest == 'l')
3569       {
3570       f.queue_run_local = TRUE;
3571       argrest++;
3572       }
3573
3574     /* -q[f][f][l][G<name>]... Work on the named queue */
3575
3576     if (*argrest == 'G')
3577       {
3578       int i;
3579       for (argrest++, i = 0; argrest[i] && argrest[i] != '/'; ) i++;
3580       exim_len_fail_toolong(i, EXIM_DRIVERNAME_MAX, "-q*G<name>");
3581       queue_name = string_copyn(argrest, i);
3582       argrest += i;
3583       if (*argrest == '/') argrest++;
3584       }
3585
3586     /* -q[f][f][l][G<name>]: Run the queue, optionally forced, optionally local
3587     only, optionally named, optionally starting from a given message id. */
3588
3589     if (!(list_queue || count_queue))
3590       if (  !*argrest
3591          && (i + 1 >= argc || argv[i+1][0] == '-' || mac_ismsgid(argv[i+1])))
3592         {
3593         queue_interval = 0;
3594         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3595           start_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3596         if (i+1 < argc && mac_ismsgid(argv[i+1]))
3597           stop_queue_run_id = string_copy_taint(argv[++i], GET_TAINTED);
3598         }
3599
3600     /* -q[f][f][l][G<name>/]<n>: Run the queue at regular intervals, optionally
3601     forced, optionally local only, optionally named. */
3602
3603       else if ((queue_interval = readconf_readtime(*argrest ? argrest : argv[++i],
3604                                                   0, FALSE)) <= 0)
3605         exim_fail("exim: bad time value %s: abandoned\n", argv[i]);
3606     break;
3607
3608
3609     case 'R':   /* Synonymous with -qR... */
3610       {
3611       const uschar *tainted_selectstr;
3612
3613       receiving_message = FALSE;
3614
3615     /* -Rf:   As -R (below) but force all deliveries,
3616        -Rff:  Ditto, but also thaw all frozen messages,
3617        -Rr:   String is regex
3618        -Rrf:  Regex and force
3619        -Rrff: Regex and force and thaw
3620
3621     in all cases provided there are no further characters in this
3622     argument. */
3623
3624       if (*argrest)
3625         for (int i = 0; i < nelem(rsopts); i++)
3626           if (Ustrcmp(argrest, rsopts[i]) == 0)
3627             {
3628             if (i != 2) f.queue_run_force = TRUE;
3629             if (i >= 2) f.deliver_selectstring_regex = TRUE;
3630             if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3631             argrest += Ustrlen(rsopts[i]);
3632             }
3633
3634     /* -R: Set string to match in addresses for forced queue run to
3635     pick out particular messages. */
3636
3637       /* Avoid attacks from people providing very long strings, and do so before
3638       we make copies. */
3639       if (*argrest)
3640         tainted_selectstr = argrest;
3641       else if (i+1 < argc)
3642         tainted_selectstr = argv[++i];
3643       else
3644         exim_fail("exim: string expected after -R\n");
3645       deliver_selectstring = string_copy_taint(
3646         exim_str_fail_toolong(tainted_selectstr, EXIM_EMAILADDR_MAX, "-R"),
3647         GET_TAINTED);
3648       }
3649     break;
3650
3651     /* -r: an obsolete synonym for -f (see above) */
3652
3653
3654     /* -S: Like -R but works on sender. */
3655
3656     case 'S':   /* Synonymous with -qS... */
3657       {
3658       const uschar *tainted_selectstr;
3659
3660       receiving_message = FALSE;
3661
3662     /* -Sf:   As -S (below) but force all deliveries,
3663        -Sff:  Ditto, but also thaw all frozen messages,
3664        -Sr:   String is regex
3665        -Srf:  Regex and force
3666        -Srff: Regex and force and thaw
3667
3668     in all cases provided there are no further characters in this
3669     argument. */
3670
3671       if (*argrest)
3672         for (int i = 0; i < nelem(rsopts); i++)
3673           if (Ustrcmp(argrest, rsopts[i]) == 0)
3674             {
3675             if (i != 2) f.queue_run_force = TRUE;
3676             if (i >= 2) f.deliver_selectstring_sender_regex = TRUE;
3677             if (i == 1 || i == 4) f.deliver_force_thaw = TRUE;
3678             argrest += Ustrlen(rsopts[i]);
3679             }
3680
3681     /* -S: Set string to match in addresses for forced queue run to
3682     pick out particular messages. */
3683
3684       if (*argrest)
3685         tainted_selectstr = argrest;
3686       else if (i+1 < argc)
3687         tainted_selectstr = argv[++i];
3688       else
3689         exim_fail("exim: string expected after -S\n");
3690       deliver_selectstring_sender = string_copy_taint(
3691         exim_str_fail_toolong(tainted_selectstr, EXIM_EMAILADDR_MAX, "-S"),
3692         GET_TAINTED);
3693       }
3694     break;
3695
3696     /* -Tqt is an option that is exclusively for use by the testing suite.
3697     It is not recognized in other circumstances. It allows for the setting up
3698     of explicit "queue times" so that various warning/retry things can be
3699     tested. Otherwise variability of clock ticks etc. cause problems. */
3700
3701     case 'T':
3702     if (f.running_in_test_harness && Ustrcmp(argrest, "qt") == 0)
3703       fudged_queue_times = string_copy_taint(argv[++i], GET_TAINTED);
3704     else badarg = TRUE;
3705     break;
3706
3707
3708     /* -t: Set flag to extract recipients from body of message. */
3709
3710     case 't':
3711     if (!*argrest) extract_recipients = TRUE;
3712
3713     /* -ti: Set flag to extract recipients from body of message, and also
3714     specify that dot does not end the message. */
3715
3716     else if (Ustrcmp(argrest, "i") == 0)
3717       {
3718       extract_recipients = TRUE;
3719       f.dot_ends = FALSE;
3720       }
3721
3722     /* -tls-on-connect: don't wait for STARTTLS (for old clients) */
3723
3724     #ifndef DISABLE_TLS
3725     else if (Ustrcmp(argrest, "ls-on-connect") == 0) tls_in.on_connect = TRUE;
3726     #endif
3727
3728     else badarg = TRUE;
3729     break;
3730
3731
3732     /* -U: This means "initial user submission" in sendmail, apparently. The
3733     doc claims that in future sendmail may refuse syntactically invalid
3734     messages instead of fixing them. For the moment, we just ignore it. */
3735
3736     case 'U':
3737     break;
3738
3739
3740     /* -v: verify things - this is a very low-level debugging */
3741
3742     case 'v':
3743     if (!*argrest)
3744       {
3745       debug_selector |= D_v;
3746       debug_file = stderr;
3747       }
3748     else badarg = TRUE;
3749     break;
3750
3751
3752     /* -x: AIX uses this to indicate some fancy 8-bit character stuff:
3753
3754       The -x flag tells the sendmail command that mail from a local
3755       mail program has National Language Support (NLS) extended characters
3756       in the body of the mail item. The sendmail command can send mail with
3757       extended NLS characters across networks that normally corrupts these
3758       8-bit characters.
3759
3760     As Exim is 8-bit clean, it just ignores this flag. */
3761
3762     case 'x':
3763     if (*argrest) badarg = TRUE;
3764     break;
3765
3766     /* -X: in sendmail: takes one parameter, logfile, and sends debugging
3767     logs to that file.  We swallow the parameter and otherwise ignore it. */
3768
3769     case 'X':
3770     if (!*argrest)
3771       if (++i >= argc)
3772         exim_fail("exim: string expected after -X\n");
3773     break;
3774
3775     /* -z: a line of text to log */
3776
3777     case 'z':
3778     if (!*argrest)
3779       if (++i < argc)
3780         log_oneline = string_copy_taint(
3781           exim_str_fail_toolong(argv[i], 2048, "-z logtext"),
3782           GET_TAINTED);
3783       else
3784         exim_fail("exim: file name expected after %s\n", argv[i-1]);
3785     break;
3786
3787     /* All other initial characters are errors */
3788
3789     default:
3790     badarg = TRUE;
3791     break;
3792     }         /* End of high-level switch statement */
3793
3794   /* Failed to recognize the option, or syntax error */
3795
3796   if (badarg)
3797     exim_fail("exim abandoned: unknown, malformed, or incomplete "
3798       "option %s\n", arg);
3799   }
3800
3801
3802 /* If -R or -S have been specified without -q, assume a single queue run. */
3803
3804  if (  (deliver_selectstring || deliver_selectstring_sender)
3805     && queue_interval < 0)
3806   queue_interval = 0;
3807
3808
3809 END_ARG:
3810  store_pool = old_pool;
3811  }
3812
3813 /* If usage_wanted is set we call the usage function - which never returns */
3814 if (usage_wanted) exim_usage(called_as);
3815
3816 /* Arguments have been processed. Check for incompatibilities. */
3817 if (  (  (smtp_input || extract_recipients || recipients_arg < argc)
3818       && (  f.daemon_listen || queue_interval >= 0 || bi_option
3819          || test_retry_arg >= 0 || test_rewrite_arg >= 0
3820          || filter_test != FTEST_NONE
3821          || msg_action_arg > 0 && !one_msg_action
3822       )  )
3823    || (  msg_action_arg > 0
3824       && (  f.daemon_listen || queue_interval > 0 || list_options
3825          || checking && msg_action != MSG_LOAD
3826          || bi_option || test_retry_arg >= 0 || test_rewrite_arg >= 0
3827       )  )
3828    || (  (f.daemon_listen || queue_interval > 0)
3829       && (  sender_address || list_options || list_queue || checking
3830          || bi_option
3831       )  )
3832    || f.daemon_listen && queue_interval == 0
3833    || f.inetd_wait_mode && queue_interval >= 0
3834    || (  list_options
3835       && (  checking || smtp_input || extract_recipients
3836          || filter_test != FTEST_NONE || bi_option
3837       )  )
3838    || (  verify_address_mode
3839       && (  f.address_test_mode || smtp_input || extract_recipients
3840          || filter_test != FTEST_NONE || bi_option
3841       )  )
3842    || (  f.address_test_mode
3843       && (  smtp_input || extract_recipients || filter_test != FTEST_NONE
3844          || bi_option
3845       )  )
3846    || (  smtp_input
3847       && (sender_address || filter_test != FTEST_NONE || extract_recipients)
3848       )
3849    || deliver_selectstring && queue_interval < 0
3850    || msg_action == MSG_LOAD && (!expansion_test || expansion_test_message)
3851    )
3852   exim_fail("exim: incompatible command-line options or arguments\n");
3853
3854 /* If debugging is set up, set the file and the file descriptor to pass on to
3855 child processes. It should, of course, be 2 for stderr. Also, force the daemon
3856 to run in the foreground. */
3857
3858 if (debug_selector != 0)
3859   {
3860   debug_file = stderr;
3861   debug_fd = fileno(debug_file);
3862   f.background_daemon = FALSE;
3863   testharness_pause_ms(100);   /* lets caller finish */
3864   if (debug_selector != D_v)    /* -v only doesn't show this */
3865     {
3866     debug_printf("Exim version %s uid=%ld gid=%ld pid=%d D=%x\n",
3867       version_string, (long int)real_uid, (long int)real_gid, (int)getpid(),
3868       debug_selector);
3869     if (!version_printed)
3870       show_whats_supported(FALSE);
3871     }
3872   }
3873
3874 /* When started with root privilege, ensure that the limits on the number of
3875 open files and the number of processes (where that is accessible) are
3876 sufficiently large, or are unset, in case Exim has been called from an
3877 environment where the limits are screwed down. Not all OS have the ability to
3878 change some of these limits. */
3879
3880 if (unprivileged)
3881   {
3882   DEBUG(D_any) debug_print_ids(US"Exim has no root privilege:");
3883   }
3884 else
3885   {
3886   struct rlimit rlp;
3887
3888 #ifdef RLIMIT_NOFILE
3889   if (getrlimit(RLIMIT_NOFILE, &rlp) < 0)
3890     {
3891     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NOFILE) failed: %s",
3892       strerror(errno));
3893     rlp.rlim_cur = rlp.rlim_max = 0;
3894     }
3895
3896   /* I originally chose 1000 as a nice big number that was unlikely to
3897   be exceeded. It turns out that some older OS have a fixed upper limit of
3898   256. */
3899
3900   if (rlp.rlim_cur < 1000)
3901     {
3902     rlp.rlim_cur = rlp.rlim_max = 1000;
3903     if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3904       {
3905       rlp.rlim_cur = rlp.rlim_max = 256;
3906       if (setrlimit(RLIMIT_NOFILE, &rlp) < 0)
3907         log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NOFILE) failed: %s",
3908           strerror(errno));
3909       }
3910     }
3911 #endif
3912
3913 #ifdef RLIMIT_NPROC
3914   if (getrlimit(RLIMIT_NPROC, &rlp) < 0)
3915     {
3916     log_write(0, LOG_MAIN|LOG_PANIC, "getrlimit(RLIMIT_NPROC) failed: %s",
3917       strerror(errno));
3918     rlp.rlim_cur = rlp.rlim_max = 0;
3919     }
3920
3921 # ifdef RLIM_INFINITY
3922   if (rlp.rlim_cur != RLIM_INFINITY && rlp.rlim_cur < 1000)
3923     {
3924     rlp.rlim_cur = rlp.rlim_max = RLIM_INFINITY;
3925 # else
3926   if (rlp.rlim_cur < 1000)
3927     {
3928     rlp.rlim_cur = rlp.rlim_max = 1000;
3929 # endif
3930     if (setrlimit(RLIMIT_NPROC, &rlp) < 0)
3931       log_write(0, LOG_MAIN|LOG_PANIC, "setrlimit(RLIMIT_NPROC) failed: %s",
3932         strerror(errno));
3933     }
3934 #endif
3935   }
3936
3937 /* Exim is normally entered as root (but some special configurations are
3938 possible that don't do this). However, it always spins off sub-processes that
3939 set their uid and gid as required for local delivery. We don't want to pass on
3940 any extra groups that root may belong to, so we want to get rid of them all at
3941 this point.
3942
3943 We need to obey setgroups() at this stage, before possibly giving up root
3944 privilege for a changed configuration file, but later on we might need to
3945 check on the additional groups for the admin user privilege - can't do that
3946 till after reading the config, which might specify the exim gid. Therefore,
3947 save the group list here first. */
3948
3949 if ((group_count = getgroups(nelem(group_list), group_list)) < 0)
3950   exim_fail("exim: getgroups() failed: %s\n", strerror(errno));
3951
3952 /* There is a fundamental difference in some BSD systems in the matter of
3953 groups. FreeBSD and BSDI are known to be different; NetBSD and OpenBSD are
3954 known not to be different. On the "different" systems there is a single group
3955 list, and the first entry in it is the current group. On all other versions of
3956 Unix there is a supplementary group list, which is in *addition* to the current
3957 group. Consequently, to get rid of all extraneous groups on a "standard" system
3958 you pass over 0 groups to setgroups(), while on a "different" system you pass
3959 over a single group - the current group, which is always the first group in the
3960 list. Calling setgroups() with zero groups on a "different" system results in
3961 an error return. The following code should cope with both types of system.
3962
3963  Unfortunately, recent MacOS, which should be a FreeBSD, "helpfully" succeeds
3964  the "setgroups() with zero groups" - and changes the egid.
3965  Thanks to that we had to stash the original_egid above, for use below
3966  in the call to exim_setugid().
3967
3968 However, if this process isn't running as root, setgroups() can't be used
3969 since you have to be root to run it, even if throwing away groups.
3970 Except, sigh, for Hurd - where you can.
3971 Not being root here happens only in some unusual configurations. */
3972
3973 if (  !unprivileged
3974 #ifndef OS_SETGROUPS_ZERO_DROPS_ALL
3975    && setgroups(0, NULL) != 0
3976 #endif
3977    && setgroups(1, group_list) != 0)
3978   exim_fail("exim: setgroups() failed: %s\n", strerror(errno));
3979
3980 /* If the configuration file name has been altered by an argument on the
3981 command line (either a new file name or a macro definition) and the caller is
3982 not root, or if this is a filter testing run, remove any setuid privilege the
3983 program has and run as the underlying user.
3984
3985 The exim user is locked out of this, which severely restricts the use of -C
3986 for some purposes.
3987
3988 Otherwise, set the real ids to the effective values (should be root unless run
3989 from inetd, which it can either be root or the exim uid, if one is configured).
3990
3991 There is a private mechanism for bypassing some of this, in order to make it
3992 possible to test lots of configurations automatically, without having either to
3993 recompile each time, or to patch in an actual configuration file name and other
3994 values (such as the path name). If running in the test harness, pretend that
3995 configuration file changes and macro definitions haven't happened. */
3996
3997 if ((                                            /* EITHER */
3998     (!f.trusted_config ||                          /* Config changed, or */
3999      !macros_trusted(opt_D_used)) &&             /*  impermissible macros and */
4000     real_uid != root_uid &&                      /* Not root, and */
4001     !f.running_in_test_harness                     /* Not fudged */
4002     ) ||                                         /*   OR   */
4003     expansion_test                               /* expansion testing */
4004     ||                                           /*   OR   */
4005     filter_test != FTEST_NONE)                   /* Filter testing */
4006   {
4007   setgroups(group_count, group_list);
4008   exim_setugid(real_uid, real_gid, FALSE,
4009     US"-C, -D, -be or -bf forces real uid");
4010   removed_privilege = TRUE;
4011
4012   /* In the normal case when Exim is called like this, stderr is available
4013   and should be used for any logging information because attempts to write
4014   to the log will usually fail. To arrange this, we unset really_exim. However,
4015   if no stderr is available there is no point - we might as well have a go
4016   at the log (if it fails, syslog will be written).
4017
4018   Note that if the invoker is Exim, the logs remain available. Messing with
4019   this causes unlogged successful deliveries.  */
4020
4021   if (log_stderr && real_uid != exim_uid)
4022     f.really_exim = FALSE;
4023   }
4024
4025 /* Privilege is to be retained for the moment. It may be dropped later,
4026 depending on the job that this Exim process has been asked to do. For now, set
4027 the real uid to the effective so that subsequent re-execs of Exim are done by a
4028 privileged user. */
4029
4030 else
4031   exim_setugid(geteuid(), original_egid, FALSE, US"forcing real = effective");
4032
4033 /* If testing a filter, open the file(s) now, before wasting time doing other
4034 setups and reading the message. */
4035
4036 if (filter_test & FTEST_SYSTEM)
4037   if ((filter_sfd = Uopen(filter_test_sfile, O_RDONLY, 0)) < 0)
4038     exim_fail("exim: failed to open %s: %s\n", filter_test_sfile,
4039       strerror(errno));
4040
4041 if (filter_test & FTEST_USER)
4042   if ((filter_ufd = Uopen(filter_test_ufile, O_RDONLY, 0)) < 0)
4043     exim_fail("exim: failed to open %s: %s\n", filter_test_ufile,
4044       strerror(errno));
4045
4046 /* Initialise lookup_list
4047 If debugging, already called above via version reporting.
4048 In either case, we initialise the list of available lookups while running
4049 as root.  All dynamically modules are loaded from a directory which is
4050 hard-coded into the binary and is code which, if not a module, would be
4051 part of Exim already.  Ability to modify the content of the directory
4052 is equivalent to the ability to modify a setuid binary!
4053
4054 This needs to happen before we read the main configuration. */
4055 init_lookup_list();
4056
4057 /*XXX this excrescence could move to the testsuite standard config setup file */
4058 #ifdef SUPPORT_I18N
4059 if (f.running_in_test_harness) smtputf8_advertise_hosts = NULL;
4060 #endif
4061
4062 /* Read the main runtime configuration data; this gives up if there
4063 is a failure. It leaves the configuration file open so that the subsequent
4064 configuration data for delivery can be read if needed.
4065
4066 NOTE: immediately after opening the configuration file we change the working
4067 directory to "/"! Later we change to $spool_directory. We do it there, because
4068 during readconf_main() some expansion takes place already. */
4069
4070 /* Store the initial cwd before we change directories.  Can be NULL if the
4071 dir has already been unlinked. */
4072 initial_cwd = os_getcwd(NULL, 0);
4073 if (!initial_cwd && errno)
4074   exim_fail("exim: getting initial cwd failed: %s\n", strerror(errno));
4075
4076 if (initial_cwd && (strlen(CCS initial_cwd) >= BIG_BUFFER_SIZE))
4077   exim_fail("exim: initial cwd is far too long (%d)\n", Ustrlen(CCS initial_cwd));
4078
4079 /* checking:
4080     -be[m] expansion test        -
4081     -b[fF] filter test           new
4082     -bh[c] host test             -
4083     -bmalware malware_test_file  new
4084     -brt   retry test            new
4085     -brw   rewrite test          new
4086     -bt    address test          -
4087     -bv[s] address verify        -
4088    list_options:
4089     -bP <option> (except -bP config, which sets list_config)
4090
4091 If any of these options is set, we suppress warnings about configuration
4092 issues (currently about tls_advertise_hosts and keep_environment not being
4093 defined) */
4094
4095   {
4096   int old_pool = store_pool;
4097 #ifdef MEASURE_TIMING
4098   struct timeval t0, diff;
4099   (void)gettimeofday(&t0, NULL);
4100 #endif
4101
4102   store_pool = POOL_CONFIG;
4103   readconf_main(checking || list_options);
4104   store_pool = old_pool;
4105
4106 #ifdef MEASURE_TIMING
4107   report_time_since(&t0, US"readconf_main (delta)");
4108 #endif
4109   }
4110
4111 /* Now in directory "/" */
4112
4113 if (cleanup_environment() == FALSE)
4114   log_write(0, LOG_PANIC_DIE, "Can't cleanup environment");
4115
4116
4117 /* If an action on specific messages is requested, or if a daemon or queue
4118 runner is being started, we need to know if Exim was called by an admin user.
4119 This is the case if the real user is root or exim, or if the real group is
4120 exim, or if one of the supplementary groups is exim or a group listed in
4121 admin_groups. We don't fail all message actions immediately if not admin_user,
4122 since some actions can be performed by non-admin users. Instead, set admin_user
4123 for later interrogation. */
4124
4125 if (real_uid == root_uid || real_uid == exim_uid || real_gid == exim_gid)
4126   f.admin_user = TRUE;
4127 else
4128   for (int i = 0; i < group_count && !f.admin_user; i++)
4129     if (group_list[i] == exim_gid)
4130       f.admin_user = TRUE;
4131     else if (admin_groups)
4132       for (int j = 1; j <= (int)admin_groups[0] && !f.admin_user; j++)
4133         if (admin_groups[j] == group_list[i])
4134           f.admin_user = TRUE;
4135
4136 /* Another group of privileged users are the trusted users. These are root,
4137 exim, and any caller matching trusted_users or trusted_groups. Trusted callers
4138 are permitted to specify sender_addresses with -f on the command line, and
4139 other message parameters as well. */
4140
4141 if (real_uid == root_uid || real_uid == exim_uid)
4142   f.trusted_caller = TRUE;
4143 else
4144   {
4145   if (trusted_users)
4146     for (int i = 1; i <= (int)trusted_users[0] && !f.trusted_caller; i++)
4147       if (trusted_users[i] == real_uid)
4148         f.trusted_caller = TRUE;
4149
4150   if (trusted_groups)
4151     for (int i = 1; i <= (int)trusted_groups[0] && !f.trusted_caller; i++)
4152       if (trusted_groups[i] == real_gid)
4153         f.trusted_caller = TRUE;
4154       else for (int j = 0; j < group_count && !f.trusted_caller; j++)
4155         if (trusted_groups[i] == group_list[j])
4156           f.trusted_caller = TRUE;
4157   }
4158
4159 /* At this point, we know if the user is privileged and some command-line
4160 options become possibly impermissible, depending upon the configuration file. */
4161
4162 if (checking && commandline_checks_require_admin && !f.admin_user)
4163   exim_fail("exim: those command-line flags are set to require admin\n");
4164
4165 /* Handle the decoding of logging options. */
4166
4167 decode_bits(log_selector, log_selector_size, log_notall,
4168   log_selector_string, log_options, log_options_count, US"log", 0);
4169
4170 DEBUG(D_any)
4171   {
4172   debug_printf("configuration file is %s\n", config_main_filename);
4173   debug_printf("log selectors =");
4174   for (int i = 0; i < log_selector_size; i++)
4175     debug_printf(" %08x", log_selector[i]);
4176   debug_printf("\n");
4177   }
4178
4179 /* If domain literals are not allowed, check the sender address that was
4180 supplied with -f. Ditto for a stripped trailing dot. */
4181
4182 if (sender_address)
4183   {
4184   if (sender_address[sender_address_domain] == '[' && !allow_domain_literals)
4185     exim_fail("exim: bad -f address \"%s\": domain literals not "
4186       "allowed\n", sender_address);
4187   if (f_end_dot && !strip_trailing_dot)
4188     exim_fail("exim: bad -f address \"%s.\": domain is malformed "
4189       "(trailing dot not allowed)\n", sender_address);
4190   }
4191
4192 /* See if an admin user overrode our logging. */
4193
4194 if (cmdline_syslog_name)
4195   if (f.admin_user)
4196     {
4197     syslog_processname = cmdline_syslog_name;
4198     log_file_path = string_copy(CUS"syslog");
4199     }
4200   else
4201     /* not a panic, non-privileged users should not be able to spam paniclog */
4202     exim_fail(
4203         "exim: you lack sufficient privilege to specify syslog process name\n");
4204
4205 /* Paranoia check of maximum lengths of certain strings. There is a check
4206 on the length of the log file path in log.c, which will come into effect
4207 if there are any calls to write the log earlier than this. However, if we
4208 get this far but the string is very long, it is better to stop now than to
4209 carry on and (e.g.) receive a message and then have to collapse. The call to
4210 log_write() from here will cause the ultimate panic collapse if the complete
4211 file name exceeds the buffer length. */
4212
4213 if (Ustrlen(log_file_path) > 200)
4214   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4215     "log_file_path is longer than 200 chars: aborting");
4216
4217 if (Ustrlen(pid_file_path) > 200)
4218   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4219     "pid_file_path is longer than 200 chars: aborting");
4220
4221 if (Ustrlen(spool_directory) > 200)
4222   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4223     "spool_directory is longer than 200 chars: aborting");
4224
4225 /* Length check on the process name given to syslog for its TAG field,
4226 which is only permitted to be 32 characters or less. See RFC 3164. */
4227
4228 if (Ustrlen(syslog_processname) > 32)
4229   log_write(0, LOG_MAIN|LOG_PANIC_DIE,
4230     "syslog_processname is longer than 32 chars: aborting");
4231
4232 if (log_oneline)
4233   if (f.admin_user)
4234     {
4235     log_write(0, LOG_MAIN, "%s", log_oneline);
4236     return EXIT_SUCCESS;
4237     }
4238   else
4239     return EXIT_FAILURE;
4240
4241 /* In some operating systems, the environment variable TMPDIR controls where
4242 temporary files are created; Exim doesn't use these (apart from when delivering
4243 to MBX mailboxes), but called libraries such as DBM libraries may require them.
4244 If TMPDIR is found in the environment, reset it to the value defined in the
4245 EXIM_TMPDIR macro, if this macro is defined.  For backward compatibility this
4246 macro may be called TMPDIR in old "Local/Makefile"s. It's converted to
4247 EXIM_TMPDIR by the build scripts.
4248 */
4249
4250 #ifdef EXIM_TMPDIR
4251   if (environ) for (uschar ** p = USS environ; *p; p++)
4252     if (Ustrncmp(*p, "TMPDIR=", 7) == 0 && Ustrcmp(*p+7, EXIM_TMPDIR) != 0)
4253       {
4254       uschar * newp = store_malloc(Ustrlen(EXIM_TMPDIR) + 8);
4255       sprintf(CS newp, "TMPDIR=%s", EXIM_TMPDIR);
4256       *p = newp;
4257       DEBUG(D_any) debug_printf("reset TMPDIR=%s in environment\n", EXIM_TMPDIR);
4258       }
4259 #endif
4260
4261 /* Timezone handling. If timezone_string is "utc", set a flag to cause all
4262 timestamps to be in UTC (gmtime() is used instead of localtime()). Otherwise,
4263 we may need to get rid of a bogus timezone setting. This can arise when Exim is
4264 called by a user who has set the TZ variable. This then affects the timestamps
4265 in log files and in Received: headers, and any created Date: header lines. The
4266 required timezone is settable in the configuration file, so nothing can be done
4267 about this earlier - but hopefully nothing will normally be logged earlier than
4268 this. We have to make a new environment if TZ is wrong, but don't bother if
4269 timestamps_utc is set, because then all times are in UTC anyway. */
4270
4271 if (timezone_string && strcmpic(timezone_string, US"UTC") == 0)
4272   f.timestamps_utc = TRUE;
4273 else
4274   {
4275   uschar *envtz = US getenv("TZ");
4276   if (envtz
4277       ? !timezone_string || Ustrcmp(timezone_string, envtz) != 0
4278       : timezone_string != NULL
4279      )
4280     {
4281     uschar **p = USS environ;
4282     uschar **new;
4283     uschar **newp;
4284     int count = 0;
4285     if (environ) while (*p++) count++;
4286     if (!envtz) count++;
4287     newp = new = store_malloc(sizeof(uschar *) * (count + 1));
4288     if (environ) for (p = USS environ; *p; p++)
4289       if (Ustrncmp(*p, "TZ=", 3) != 0) *newp++ = *p;
4290     if (timezone_string)
4291       {
4292       *newp = store_malloc(Ustrlen(timezone_string) + 4);
4293       sprintf(CS *newp++, "TZ=%s", timezone_string);
4294       }
4295     *newp = NULL;
4296     environ = CSS new;
4297     tzset();
4298     DEBUG(D_any) debug_printf("Reset TZ to %s: time is %s\n", timezone_string,
4299       tod_stamp(tod_log));
4300     }
4301   }
4302
4303 /* Handle the case when we have removed the setuid privilege because of -C or
4304 -D. This means that the caller of Exim was not root.
4305
4306 There is a problem if we were running as the Exim user. The sysadmin may
4307 expect this case to retain privilege because "the binary was called by the
4308 Exim user", but it hasn't, because either the -D option set macros, or the
4309 -C option set a non-trusted configuration file. There are two possibilities:
4310
4311   (1) If deliver_drop_privilege is set, Exim is not going to re-exec in order
4312       to do message deliveries. Thus, the fact that it is running as a
4313       non-privileged user is plausible, and might be wanted in some special
4314       configurations. However, really_exim will have been set false when
4315       privilege was dropped, to stop Exim trying to write to its normal log
4316       files. Therefore, re-enable normal log processing, assuming the sysadmin
4317       has set up the log directory correctly.
4318
4319   (2) If deliver_drop_privilege is not set, the configuration won't work as
4320       apparently intended, and so we log a panic message. In order to retain
4321       root for -C or -D, the caller must either be root or be invoking a
4322       trusted configuration file (when deliver_drop_privilege is false). */
4323
4324 if (  removed_privilege
4325    && (!f.trusted_config || opt_D_used)
4326    && real_uid == exim_uid)
4327   if (deliver_drop_privilege)
4328     f.really_exim = TRUE; /* let logging work normally */
4329   else
4330     log_write(0, LOG_MAIN|LOG_PANIC,
4331       "exim user lost privilege for using %s option",
4332       f.trusted_config? "-D" : "-C");
4333
4334 /* Start up Perl interpreter if Perl support is configured and there is a
4335 perl_startup option, and the configuration or the command line specifies
4336 initializing starting. Note that the global variables are actually called
4337 opt_perl_xxx to avoid clashing with perl's namespace (perl_*). */
4338
4339 #ifdef EXIM_PERL
4340 if (perl_start_option != 0)
4341   opt_perl_at_start = (perl_start_option > 0);
4342 if (opt_perl_at_start && opt_perl_startup != NULL)
4343   {
4344   uschar *errstr;
4345   DEBUG(D_any) debug_printf("Starting Perl interpreter\n");
4346   if ((errstr = init_perl(opt_perl_startup)))
4347     exim_fail("exim: error in perl_startup code: %s\n", errstr);
4348   opt_perl_started = TRUE;
4349   }
4350 #endif /* EXIM_PERL */
4351
4352 /* Log the arguments of the call if the configuration file said so. This is
4353 a debugging feature for finding out what arguments certain MUAs actually use.
4354 Don't attempt it if logging is disabled, or if listing variables or if
4355 verifying/testing addresses or expansions. */
4356
4357 if (  (debug_selector & D_any  ||  LOGGING(arguments))
4358    && f.really_exim && !list_options && !checking)
4359   {
4360   uschar *p = big_buffer;
4361   Ustrcpy(p, US"cwd= (failed)");
4362
4363   if (!initial_cwd)
4364     p += 13;
4365   else
4366     {
4367     p += 4;
4368     snprintf(CS p, big_buffer_size - (p - big_buffer), "%s", CCS initial_cwd);
4369     p += Ustrlen(CCS p);
4370     }
4371
4372   (void)string_format(p, big_buffer_size - (p - big_buffer), " %d args:", argc);
4373   while (*p) p++;
4374   for (int i = 0; i < argc; i++)
4375     {
4376     int len = Ustrlen(argv[i]);
4377     const uschar *printing;
4378     uschar *quote;
4379     if (p + len + 8 >= big_buffer + big_buffer_size)
4380       {
4381       Ustrcpy(p, US" ...");
4382       log_write(0, LOG_MAIN, "%s", big_buffer);
4383       Ustrcpy(big_buffer, US"...");
4384       p = big_buffer + 3;
4385       }
4386     printing = string_printing(argv[i]);
4387     if (!*printing) quote = US"\"";
4388     else
4389       {
4390       const uschar *pp = printing;
4391       quote = US"";
4392       while (*pp) if (isspace(*pp++)) { quote = US"\""; break; }
4393       }
4394     p += sprintf(CS p, " %s%.*s%s", quote, (int)(big_buffer_size -
4395       (p - big_buffer) - 4), printing, quote);
4396     }
4397
4398   if (LOGGING(arguments))
4399     log_write(0, LOG_MAIN, "%s", big_buffer);
4400   else
4401     debug_printf("%s\n", big_buffer);
4402   }
4403
4404 /* Set the working directory to be the top-level spool directory. We don't rely
4405 on this in the code, which always uses fully qualified names, but it's useful
4406 for core dumps etc. Don't complain if it fails - the spool directory might not
4407 be generally accessible and calls with the -C option (and others) have lost
4408 privilege by now. Before the chdir, we try to ensure that the directory exists.
4409 */
4410
4411 if (Uchdir(spool_directory) != 0)
4412   {
4413   (void) directory_make(spool_directory, US"", SPOOL_DIRECTORY_MODE, FALSE);
4414   (void) Uchdir(spool_directory);
4415   }
4416
4417 /* Handle calls with the -bi option. This is a sendmail option to rebuild *the*
4418 alias file. Exim doesn't have such a concept, but this call is screwed into
4419 Sun's YP makefiles. Handle this by calling a configured script, as the real
4420 user who called Exim. The -oA option can be used to pass an argument to the
4421 script. */
4422
4423 if (bi_option)
4424   {
4425   (void) fclose(config_file);
4426   if (bi_command && *bi_command)
4427     {
4428     int i = 0;
4429     uschar *argv[3];
4430     argv[i++] = bi_command;     /* nonexpanded option so assume untainted */
4431     if (alias_arg) argv[i++] = alias_arg;
4432     argv[i++] = NULL;
4433
4434     setgroups(group_count, group_list);
4435     exim_setugid(real_uid, real_gid, FALSE, US"running bi_command");
4436
4437     DEBUG(D_exec) debug_printf("exec '%.256s' %s%.256s%s\n", argv[0],
4438       argv[1] ? "'" : "", argv[1] ? argv[1] : US"", argv[1] ? "'" : "");
4439
4440     execv(CS argv[0], (char *const *)argv);
4441     exim_fail("exim: exec '%s' failed: %s\n", argv[0], strerror(errno));
4442     }
4443   else
4444     {
4445     DEBUG(D_any) debug_printf("-bi used but bi_command not set; exiting\n");
4446     exit(EXIT_SUCCESS);
4447     }
4448   }
4449
4450 /* We moved the admin/trusted check to be immediately after reading the
4451 configuration file.  We leave these prints here to ensure that syslog setup,
4452 logfile setup, and so on has already happened. */
4453
4454 if (f.trusted_caller) DEBUG(D_any) debug_printf("trusted user\n");
4455 if (f.admin_user) DEBUG(D_any) debug_printf("admin user\n");
4456
4457 /* Only an admin user may start the daemon or force a queue run in the default
4458 configuration, but the queue run restriction can be relaxed. Only an admin
4459 user may request that a message be returned to its sender forthwith. Only an
4460 admin user may specify a debug level greater than D_v (because it might show
4461 passwords, etc. in lookup queries). Only an admin user may request a queue
4462 count. Only an admin user can use the test interface to scan for email
4463 (because Exim will be in the spool dir and able to look at mails). */
4464
4465 if (!f.admin_user)
4466   {
4467   BOOL debugset = (debug_selector & ~D_v) != 0;
4468   if (  deliver_give_up || f.daemon_listen || malware_test_file
4469      || count_queue && queue_list_requires_admin
4470      || list_queue && queue_list_requires_admin
4471      || queue_interval >= 0 && prod_requires_admin
4472      || queue_name_dest && prod_requires_admin
4473      || debugset && !f.running_in_test_harness
4474      )
4475     exim_fail("exim:%s permission denied\n", debugset ? " debugging" : "");
4476   }
4477
4478 /* If the real user is not root or the exim uid, the argument for passing
4479 in an open TCP/IP connection for another message is not permitted, nor is
4480 running with the -N option for any delivery action, unless this call to exim is
4481 one that supplied an input message, or we are using a patched exim for
4482 regression testing. */
4483
4484 if (  real_uid != root_uid && real_uid != exim_uid
4485    && (  continue_hostname
4486       || (  f.dont_deliver
4487          && (queue_interval >= 0 || f.daemon_listen || msg_action_arg > 0)
4488       )  )
4489    && !f.running_in_test_harness
4490    )
4491   exim_fail("exim: Permission denied\n");
4492
4493 /* If the caller is not trusted, certain arguments are ignored when running for
4494 real, but are permitted when checking things (-be, -bv, -bt, -bh, -bf, -bF).
4495 Note that authority for performing certain actions on messages is tested in the
4496 queue_action() function. */
4497
4498 if (!f.trusted_caller && !checking)
4499   {
4500   sender_host_name = sender_host_address = interface_address =
4501     sender_ident = received_protocol = NULL;
4502   sender_host_port = interface_port = 0;
4503   sender_host_authenticated = authenticated_sender = authenticated_id = NULL;
4504   }
4505
4506 /* If a sender host address is set, extract the optional port number off the
4507 end of it and check its syntax. Do the same thing for the interface address.
4508 Exim exits if the syntax is bad. */
4509
4510 else
4511   {
4512   if (sender_host_address)
4513     sender_host_port = check_port(sender_host_address);
4514   if (interface_address)
4515     interface_port = check_port(interface_address);
4516   }
4517
4518 /* If the caller is trusted, then they can use -G to suppress_local_fixups. */
4519 if (flag_G)
4520   {
4521   if (f.trusted_caller)
4522     {
4523     f.suppress_local_fixups = f.suppress_local_fixups_default = TRUE;
4524     DEBUG(D_acl) debug_printf("suppress_local_fixups forced on by -G\n");
4525     }
4526   else
4527     exim_fail("exim: permission denied (-G requires a trusted user)\n");
4528   }
4529
4530 /* If an SMTP message is being received check to see if the standard input is a
4531 TCP/IP socket. If it is, we assume that Exim was called from inetd if the
4532 caller is root or the Exim user, or if the port is a privileged one. Otherwise,
4533 barf. */
4534
4535 if (smtp_input)
4536   {
4537   union sockaddr_46 inetd_sock;
4538   EXIM_SOCKLEN_T size = sizeof(inetd_sock);
4539   if (getpeername(0, (struct sockaddr *)(&inetd_sock), &size) == 0)
4540     {
4541     int family = ((struct sockaddr *)(&inetd_sock))->sa_family;
4542     if (family == AF_INET || family == AF_INET6)
4543       {
4544       union sockaddr_46 interface_sock;
4545       size = sizeof(interface_sock);
4546
4547       if (getsockname(0, (struct sockaddr *)(&interface_sock), &size) == 0)
4548         interface_address = host_ntoa(-1, &interface_sock, NULL,
4549           &interface_port);
4550
4551       if (host_is_tls_on_connect_port(interface_port)) tls_in.on_connect = TRUE;
4552
4553       if (real_uid == root_uid || real_uid == exim_uid || interface_port < 1024)
4554         {
4555         f.is_inetd = TRUE;
4556         sender_host_address = host_ntoa(-1, (struct sockaddr *)(&inetd_sock),
4557           NULL, &sender_host_port);
4558         if (mua_wrapper) log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Input from "
4559           "inetd is not supported when mua_wrapper is set");
4560         }
4561       else
4562         exim_fail(
4563           "exim: Permission denied (unprivileged user, unprivileged port)\n");
4564       }
4565     }
4566   }
4567
4568 /* If the load average is going to be needed while receiving a message, get it
4569 now for those OS that require the first call to os_getloadavg() to be done as
4570 root. There will be further calls later for each message received. */
4571
4572 #ifdef LOAD_AVG_NEEDS_ROOT
4573 if (  receiving_message
4574    && (queue_only_load >= 0 || (f.is_inetd && smtp_load_reserve >= 0)))
4575   load_average = OS_GETLOADAVG();
4576 #endif
4577
4578 /* The queue_only configuration option can be overridden by -odx on the command
4579 line, except that if queue_only_override is false, queue_only cannot be unset
4580 from the command line. */
4581
4582 if (queue_only_set && (queue_only_override || arg_queue_only))
4583   queue_only = arg_queue_only;
4584
4585 /* The receive_timeout and smtp_receive_timeout options can be overridden by
4586 -or and -os. */
4587
4588 if (arg_receive_timeout >= 0) receive_timeout = arg_receive_timeout;
4589 if (arg_smtp_receive_timeout >= 0)
4590   smtp_receive_timeout = arg_smtp_receive_timeout;
4591
4592 /* If Exim was started with root privilege, unless we have already removed the
4593 root privilege above as a result of -C, -D, -be, -bf or -bF, remove it now
4594 except when starting the daemon or doing some kind of delivery or address
4595 testing (-bt). These are the only cases when root need to be retained. We run
4596 as exim for -bv and -bh. However, if deliver_drop_privilege is set, root is
4597 retained only for starting the daemon. We always do the initgroups() in this
4598 situation (controlled by the TRUE below), in order to be as close as possible
4599 to the state Exim usually runs in. */
4600
4601 if (  !unprivileged                             /* originally had root AND */
4602    && !removed_privilege                        /* still got root AND      */
4603    && !f.daemon_listen                          /* not starting the daemon */
4604    && queue_interval <= 0                       /* (either kind of daemon) */
4605    && (                                         /*    AND EITHER           */
4606          deliver_drop_privilege                 /* requested unprivileged  */
4607       || (                                      /*       OR                */
4608             queue_interval < 0                  /* not running the queue   */
4609          && (  msg_action_arg < 0               /*       and               */
4610             || msg_action != MSG_DELIVER        /* not delivering          */
4611             )                                   /*       and               */
4612          && (!checking || !f.address_test_mode) /* not address checking    */
4613          && !rcpt_verify_quota                  /* and not quota checking  */
4614    )  )  )
4615   exim_setugid(exim_uid, exim_gid, TRUE, US"privilege not needed");
4616
4617 /* When we are retaining a privileged uid, we still change to the exim gid. */
4618
4619 else
4620   {
4621   int rv;
4622   DEBUG(D_any) debug_printf("dropping to exim gid; retaining priv uid\n");
4623   rv = setgid(exim_gid);
4624   /* Impact of failure is that some stuff might end up with an incorrect group.
4625   We track this for failures from root, since any attempt to change privilege
4626   by root should succeed and failures should be examined.  For non-root,
4627   there's no security risk.  For me, it's { exim -bV } on a just-built binary,
4628   no need to complain then. */
4629   if (rv == -1)
4630     if (!(unprivileged || removed_privilege))
4631       exim_fail("exim: changing group failed: %s\n", strerror(errno));
4632     else
4633       {
4634       DEBUG(D_any) debug_printf("changing group to %ld failed: %s\n",
4635           (long int)exim_gid, strerror(errno));
4636       }
4637   }
4638
4639 /* Handle a request to scan a file for malware */
4640 if (malware_test_file)
4641   {
4642 #ifdef WITH_CONTENT_SCAN
4643   int result;
4644   set_process_info("scanning file for malware");
4645   if ((result = malware_in_file(malware_test_file)) == FAIL)
4646     {
4647     printf("No malware found.\n");
4648     exit(EXIT_SUCCESS);
4649     }
4650   if (result != OK)
4651     {
4652     printf("Malware lookup returned non-okay/fail: %d\n", result);
4653     exit(EXIT_FAILURE);
4654     }
4655   if (malware_name)
4656     printf("Malware found: %s\n", malware_name);
4657   else
4658     printf("Malware scan detected malware of unknown name.\n");
4659 #else
4660   printf("Malware scanning not enabled at compile time.\n");
4661 #endif
4662   exit(EXIT_FAILURE);
4663   }
4664
4665 /* Handle a request to list the delivery queue */
4666
4667 if (list_queue)
4668   {
4669   set_process_info("listing the queue");
4670   queue_list(list_queue_option, argv + recipients_arg, argc - recipients_arg);
4671   exit(EXIT_SUCCESS);
4672   }
4673
4674 /* Handle a request to count the delivery queue */
4675
4676 if (count_queue)
4677   {
4678   set_process_info("counting the queue");
4679   fprintf(stdout, "%u\n", queue_count());
4680   exit(EXIT_SUCCESS);
4681   }
4682
4683 /* Handle actions on specific messages, except for the force delivery and
4684 message load actions, which are done below. Some actions take a whole list of
4685 message ids, which are known to continue up to the end of the arguments. Others
4686 take a single message id and then operate on the recipients list. */
4687
4688 if (msg_action_arg > 0 && msg_action != MSG_DELIVER && msg_action != MSG_LOAD)
4689   {
4690   int yield = EXIT_SUCCESS;
4691   set_process_info("acting on specified messages");
4692
4693   /* ACL definitions may be needed when removing a message (-Mrm) because
4694   event_action gets expanded */
4695
4696   if (msg_action == MSG_REMOVE)
4697     {
4698     int old_pool = store_pool;
4699     store_pool = POOL_CONFIG;
4700     readconf_rest();
4701     store_pool = old_pool;
4702     store_writeprotect(POOL_CONFIG);
4703     }
4704
4705   if (!one_msg_action)
4706     {
4707     for (i = msg_action_arg; i < argc; i++)
4708       if (!queue_action(argv[i], msg_action, NULL, 0, 0))
4709         yield = EXIT_FAILURE;
4710     switch (msg_action)
4711       {
4712       case MSG_REMOVE: case MSG_FREEZE: case MSG_THAW: break;
4713       default: printf("\n"); break;
4714       }
4715     }
4716
4717   else if (!queue_action(argv[msg_action_arg], msg_action, argv, argc,
4718     recipients_arg)) yield = EXIT_FAILURE;
4719   exit(yield);
4720   }
4721
4722 /* We used to set up here to skip reading the ACL section, on
4723  (msg_action_arg > 0 || (queue_interval == 0 && !f.daemon_listen)
4724 Now, since the intro of the ${acl } expansion, ACL definitions may be
4725 needed in transports so we lost the optimisation. */
4726
4727   {
4728   int old_pool = store_pool;
4729 #ifdef MEASURE_TIMING
4730   struct timeval t0, diff;
4731   (void)gettimeofday(&t0, NULL);
4732 #endif
4733
4734   store_pool = POOL_CONFIG;
4735   readconf_rest();
4736   store_pool = old_pool;
4737
4738   /* -be can add macro definitions, needing to link to the macro structure
4739   chain.  Otherwise, make the memory used for config data readonly. */
4740
4741   if (!expansion_test)
4742     store_writeprotect(POOL_CONFIG);
4743
4744 #ifdef MEASURE_TIMING
4745   report_time_since(&t0, US"readconf_rest (delta)");
4746 #endif
4747   }
4748
4749 /* Handle a request to check quota */
4750 if (rcpt_verify_quota)
4751   if (real_uid != root_uid && real_uid != exim_uid)
4752     exim_fail("exim: Permission denied\n");
4753   else if (recipients_arg >= argc)
4754     exim_fail("exim: missing recipient for quota check\n");
4755   else
4756     {
4757     verify_quota(argv[recipients_arg]);
4758     exim_exit(EXIT_SUCCESS);
4759     }
4760
4761 /* Handle the -brt option. This is for checking out retry configurations.
4762 The next three arguments are a domain name or a complete address, and
4763 optionally two error numbers. All it does is to call the function that
4764 scans the retry configuration data. */
4765
4766 if (test_retry_arg >= 0)
4767   {
4768   retry_config *yield;
4769   int basic_errno = 0;
4770   int more_errno = 0;
4771   const uschar *s1, *s2;
4772
4773   if (test_retry_arg >= argc)
4774     {
4775     printf("-brt needs a domain or address argument\n");
4776     exim_exit(EXIT_FAILURE);
4777     }
4778   s1 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_EMAILADDR_MAX, "-brt");
4779   s2 = NULL;
4780
4781   /* If the first argument contains no @ and no . it might be a local user
4782   or it might be a single-component name. Treat as a domain. */
4783
4784   if (Ustrchr(s1, '@') == NULL && Ustrchr(s1, '.') == NULL)
4785     {
4786     printf("Warning: \"%s\" contains no '@' and no '.' characters. It is "
4787       "being \ntreated as a one-component domain, not as a local part.\n\n",
4788       s1);
4789     }
4790
4791   /* There may be an optional second domain arg. */
4792
4793   if (test_retry_arg < argc && Ustrchr(argv[test_retry_arg], '.') != NULL)
4794     s2 = exim_str_fail_toolong(argv[test_retry_arg++], EXIM_DOMAINNAME_MAX, "-brt 2nd");
4795
4796   /* The final arg is an error name */
4797
4798   if (test_retry_arg < argc)
4799     {
4800     const uschar *ss = exim_str_fail_toolong(argv[test_retry_arg], EXIM_DRIVERNAME_MAX, "-brt 3rd");
4801     uschar *error =
4802       readconf_retry_error(ss, ss + Ustrlen(ss), &basic_errno, &more_errno);
4803     if (error != NULL)
4804       {
4805       printf("%s\n", CS error);
4806       return EXIT_FAILURE;
4807       }
4808
4809     /* For the {MAIL,RCPT,DATA}_4xx errors, a value of 255 means "any", and a
4810     code > 100 as an error is for matching codes to the decade. Turn them into
4811     a real error code, off the decade. */
4812
4813     if (basic_errno == ERRNO_MAIL4XX ||
4814         basic_errno == ERRNO_RCPT4XX ||
4815         basic_errno == ERRNO_DATA4XX)
4816       {
4817       int code = (more_errno >> 8) & 255;
4818       if (code == 255)
4819         more_errno = (more_errno & 0xffff00ff) | (21 << 8);
4820       else if (code > 100)
4821         more_errno = (more_errno & 0xffff00ff) | ((code - 96) << 8);
4822       }
4823     }
4824
4825   if (!(yield = retry_find_config(s1, s2, basic_errno, more_errno)))
4826     printf("No retry information found\n");
4827   else
4828     {
4829     more_errno = yield->more_errno;
4830     printf("Retry rule: %s  ", yield->pattern);
4831
4832     if (yield->basic_errno == ERRNO_EXIMQUOTA)
4833       {
4834       printf("quota%s%s  ",
4835         (more_errno > 0)? "_" : "",
4836         (more_errno > 0)? readconf_printtime(more_errno) : US"");
4837       }
4838     else if (yield->basic_errno == ECONNREFUSED)
4839       {
4840       printf("refused%s%s  ",
4841         (more_errno > 0)? "_" : "",
4842         (more_errno == 'M')? "MX" :
4843         (more_errno == 'A')? "A" : "");
4844       }
4845     else if (yield->basic_errno == ETIMEDOUT)
4846       {
4847       printf("timeout");
4848       if ((more_errno & RTEF_CTOUT) != 0) printf("_connect");
4849       more_errno &= 255;
4850       if (more_errno != 0) printf("_%s",
4851         (more_errno == 'M')? "MX" : "A");
4852       printf("  ");
4853       }
4854     else if (yield->basic_errno == ERRNO_AUTHFAIL)
4855       printf("auth_failed  ");
4856     else printf("*  ");
4857
4858     for (retry_rule * r = yield->rules; r; r = r->next)
4859       {
4860       printf("%c,%s", r->rule, readconf_printtime(r->timeout)); /* Do not */
4861       printf(",%s", readconf_printtime(r->p1));                 /* amalgamate */
4862       if (r->rule == 'G')
4863         {
4864         int x = r->p2;
4865         int f = x % 1000;
4866         int d = 100;
4867         printf(",%d.", x/1000);
4868         do
4869           {
4870           printf("%d", f/d);
4871           f %= d;
4872           d /= 10;
4873           }
4874         while (f != 0);
4875         }
4876       printf("; ");
4877       }
4878
4879     printf("\n");
4880     }
4881   exim_exit(EXIT_SUCCESS);
4882   }
4883
4884 /* Handle a request to list one or more configuration options */
4885 /* If -n was set, we suppress some information */
4886
4887 if (list_options)
4888   {
4889   BOOL fail = FALSE;
4890   set_process_info("listing variables");
4891   if (recipients_arg >= argc)
4892     fail = !readconf_print(US"all", NULL, flag_n);
4893   else for (i = recipients_arg; i < argc; i++)
4894     {
4895     if (i < argc - 1 &&
4896         (Ustrcmp(argv[i], "router") == 0 ||
4897          Ustrcmp(argv[i], "transport") == 0 ||
4898          Ustrcmp(argv[i], "authenticator") == 0 ||
4899          Ustrcmp(argv[i], "macro") == 0 ||
4900          Ustrcmp(argv[i], "environment") == 0))
4901       {
4902       fail |= !readconf_print(exim_str_fail_toolong(argv[i+1], EXIM_DRIVERNAME_MAX, "-bP name"), argv[i], flag_n);
4903       i++;
4904       }
4905     else
4906       fail = !readconf_print(exim_str_fail_toolong(argv[i], EXIM_DRIVERNAME_MAX, "-bP item"), NULL, flag_n);
4907     }
4908   exim_exit(fail ? EXIT_FAILURE : EXIT_SUCCESS);
4909   }
4910
4911 if (list_config)
4912   {
4913   set_process_info("listing config");
4914   exim_exit(readconf_print(US"config", NULL, flag_n)
4915                 ? EXIT_SUCCESS : EXIT_FAILURE);
4916   }
4917
4918
4919 /* Initialise subsystems as required. */
4920
4921 tcp_init();
4922
4923 /* Handle a request to deliver one or more messages that are already on the
4924 queue. Values of msg_action other than MSG_DELIVER and MSG_LOAD are dealt with
4925 above. MSG_LOAD is handled with -be (which is the only time it applies) below.
4926
4927 Delivery of specific messages is typically used for a small number when
4928 prodding by hand (when the option forced_delivery will be set) or when
4929 re-execing to regain root privilege. Each message delivery must happen in a
4930 separate process, so we fork a process for each one, and run them sequentially
4931 so that debugging output doesn't get intertwined, and to avoid spawning too
4932 many processes if a long list is given. However, don't fork for the last one;
4933 this saves a process in the common case when Exim is called to deliver just one
4934 message. */
4935
4936 if (msg_action_arg > 0 && msg_action != MSG_LOAD)
4937   {
4938   if (prod_requires_admin && !f.admin_user)
4939     {
4940     fprintf(stderr, "exim: Permission denied\n");
4941     exim_exit(EXIT_FAILURE);
4942     }
4943   set_process_info("delivering specified messages");
4944   if (deliver_give_up) forced_delivery = f.deliver_force_thaw = TRUE;
4945   for (i = msg_action_arg; i < argc; i++)
4946     {
4947     int status;
4948     pid_t pid;
4949     /*XXX This use of argv[i] for msg_id should really be tainted, but doing
4950     that runs into a later copy into the untainted global message_id[] */
4951     /*XXX Do we need a length limit check here? */
4952     if (i == argc - 1)
4953       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4954     else if ((pid = exim_fork(US"cmdline-delivery")) == 0)
4955       {
4956       (void)deliver_message(argv[i], forced_delivery, deliver_give_up);
4957       exim_underbar_exit(EXIT_SUCCESS);
4958       }
4959     else if (pid < 0)
4960       {
4961       fprintf(stderr, "failed to fork delivery process for %s: %s\n", argv[i],
4962         strerror(errno));
4963       exim_exit(EXIT_FAILURE);
4964       }
4965     else wait(&status);
4966     }
4967   exim_exit(EXIT_SUCCESS);
4968   }
4969
4970
4971 /* If only a single queue run is requested, without SMTP listening, we can just
4972 turn into a queue runner, with an optional starting message id. */
4973
4974 if (queue_interval == 0 && !f.daemon_listen)
4975   {
4976   DEBUG(D_queue_run) debug_printf("Single queue run%s%s%s%s\n",
4977     start_queue_run_id ? US" starting at " : US"",
4978     start_queue_run_id ? start_queue_run_id: US"",
4979     stop_queue_run_id ?  US" stopping at " : US"",
4980     stop_queue_run_id ?  stop_queue_run_id : US"");
4981   if (*queue_name)
4982     set_process_info("running the '%s' queue (single queue run)", queue_name);
4983   else
4984     set_process_info("running the queue (single queue run)");
4985   queue_run(start_queue_run_id, stop_queue_run_id, FALSE);
4986   exim_exit(EXIT_SUCCESS);
4987   }
4988
4989
4990 /* Find the login name of the real user running this process. This is always
4991 needed when receiving a message, because it is written into the spool file. It
4992 may also be used to construct a from: or a sender: header, and in this case we
4993 need the user's full name as well, so save a copy of it, checked for RFC822
4994 syntax and munged if necessary, if it hasn't previously been set by the -F
4995 argument. We may try to get the passwd entry more than once, in case NIS or
4996 other delays are in evidence. Save the home directory for use in filter testing
4997 (only). */
4998
4999 for (i = 0;;)
5000   {
5001   if ((pw = getpwuid(real_uid)) != NULL)
5002     {
5003     originator_login = string_copy(US pw->pw_name);
5004     originator_home = string_copy(US pw->pw_dir);
5005
5006     /* If user name has not been set by -F, set it from the passwd entry
5007     unless -f has been used to set the sender address by a trusted user. */
5008
5009     if (!originator_name)
5010       {
5011       if (!sender_address || (!f.trusted_caller && filter_test == FTEST_NONE))
5012         {
5013         uschar *name = US pw->pw_gecos;
5014         uschar *amp = Ustrchr(name, '&');
5015         uschar buffer[256];
5016
5017         /* Most Unix specify that a '&' character in the gecos field is
5018         replaced by a copy of the login name, and some even specify that
5019         the first character should be upper cased, so that's what we do. */
5020
5021         if (amp)
5022           {
5023           int loffset;
5024           string_format(buffer, sizeof(buffer), "%.*s%n%s%s",
5025             (int)(amp - name), name, &loffset, originator_login, amp + 1);
5026           buffer[loffset] = toupper(buffer[loffset]);
5027           name = buffer;
5028           }
5029
5030         /* If a pattern for matching the gecos field was supplied, apply
5031         it and then expand the name string. */
5032
5033         if (gecos_pattern && gecos_name)
5034           {
5035           const pcre2_code *re;
5036           re = regex_must_compile(gecos_pattern, FALSE, TRUE); /* Use malloc */
5037
5038           if (regex_match_and_setup(re, name, 0, -1))
5039             {
5040             uschar *new_name = expand_string(gecos_name);
5041             expand_nmax = -1;
5042             if (new_name)
5043               {
5044               DEBUG(D_receive) debug_printf("user name \"%s\" extracted from "
5045                 "gecos field \"%s\"\n", new_name, name);
5046               name = new_name;
5047               }
5048             else DEBUG(D_receive) debug_printf("failed to expand gecos_name string "
5049               "\"%s\": %s\n", gecos_name, expand_string_message);
5050             }
5051           else DEBUG(D_receive) debug_printf("gecos_pattern \"%s\" did not match "
5052             "gecos field \"%s\"\n", gecos_pattern, name);
5053           store_free((void *)re);
5054           }
5055         originator_name = string_copy(name);
5056         }
5057
5058       /* A trusted caller has used -f but not -F */
5059
5060       else originator_name = US"";
5061       }
5062
5063     /* Break the retry loop */
5064
5065     break;
5066     }
5067
5068   if (++i > finduser_retries) break;
5069   sleep(1);
5070   }
5071
5072 /* If we cannot get a user login, log the incident and give up, unless the
5073 configuration specifies something to use. When running in the test harness,
5074 any setting of unknown_login overrides the actual name. */
5075
5076 if (!originator_login || f.running_in_test_harness)
5077   {
5078   if (unknown_login)
5079     {
5080     originator_login = expand_string(unknown_login);
5081     if (!originator_name && unknown_username)
5082       originator_name = expand_string(unknown_username);
5083     if (!originator_name) originator_name = US"";
5084     }
5085   if (!originator_login)
5086     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Failed to get user name for uid %d",
5087       (int)real_uid);
5088   }
5089
5090 /* Ensure that the user name is in a suitable form for use as a "phrase" in an
5091 RFC822 address.*/
5092
5093 originator_name = US parse_fix_phrase(originator_name, Ustrlen(originator_name));
5094
5095 /* If a message is created by this call of Exim, the uid/gid of its originator
5096 are those of the caller. These values are overridden if an existing message is
5097 read in from the spool. */
5098
5099 originator_uid = real_uid;
5100 originator_gid = real_gid;
5101
5102 DEBUG(D_receive) debug_printf("originator: uid=%d gid=%d login=%s name=%s\n",
5103   (int)originator_uid, (int)originator_gid, originator_login, originator_name);
5104
5105 /* Run in daemon and/or queue-running mode. The function daemon_go() never
5106 returns. We leave this till here so that the originator_ fields are available
5107 for incoming messages via the daemon. The daemon cannot be run in mua_wrapper
5108 mode. */
5109
5110 if (f.daemon_listen || f.inetd_wait_mode || queue_interval > 0)
5111   {
5112   if (mua_wrapper)
5113     {
5114     fprintf(stderr, "Daemon cannot be run when mua_wrapper is set\n");
5115     log_write(0, LOG_MAIN|LOG_PANIC_DIE, "Daemon cannot be run when "
5116       "mua_wrapper is set");
5117     }
5118
5119 # ifndef DISABLE_TLS
5120   /* This also checks that the library linkage is working and we can call
5121   routines in it, so call even if tls_require_ciphers is unset */
5122     {
5123 # ifdef MEASURE_TIMING
5124     struct timeval t0, diff;
5125     (void)gettimeofday(&t0, NULL);
5126 # endif
5127     if (!tls_dropprivs_validate_require_cipher(FALSE))
5128       exit(1);
5129 # ifdef MEASURE_TIMING
5130     report_time_since(&t0, US"validate_ciphers (delta)");
5131 # endif
5132     }
5133 #endif
5134
5135   daemon_go();
5136   }
5137
5138 /* If the sender ident has not been set (by a trusted caller) set it to
5139 the caller. This will get overwritten below for an inetd call. If a trusted
5140 caller has set it empty, unset it. */
5141
5142 if (!sender_ident) sender_ident = originator_login;
5143 else if (!*sender_ident) sender_ident = NULL;
5144
5145 /* Handle the -brw option, which is for checking out rewriting rules. Cause log
5146 writes (on errors) to go to stderr instead. Can't do this earlier, as want the
5147 originator_* variables set. */
5148
5149 if (test_rewrite_arg >= 0)
5150   {
5151   f.really_exim = FALSE;
5152   if (test_rewrite_arg >= argc)
5153     {
5154     printf("-brw needs an address argument\n");
5155     exim_exit(EXIT_FAILURE);
5156     }
5157   rewrite_test(exim_str_fail_toolong(argv[test_rewrite_arg], EXIM_EMAILADDR_MAX, "-brw"));
5158   exim_exit(EXIT_SUCCESS);
5159   }
5160
5161 /* A locally-supplied message is considered to be coming from a local user
5162 unless a trusted caller supplies a sender address with -f, or is passing in the
5163 message via SMTP (inetd invocation or otherwise). */
5164
5165 if (  !sender_address && !smtp_input
5166    || !f.trusted_caller && filter_test == FTEST_NONE)
5167   {
5168   f.sender_local = TRUE;
5169
5170   /* A trusted caller can supply authenticated_sender and authenticated_id
5171   via -oMas and -oMai and if so, they will already be set. Otherwise, force
5172   defaults except when host checking. */
5173
5174   if (!authenticated_sender && !host_checking)
5175     authenticated_sender = string_sprintf("%s@%s", originator_login,
5176       qualify_domain_sender);
5177   if (!authenticated_id && !host_checking)
5178     authenticated_id = originator_login;
5179   }
5180
5181 /* Trusted callers are always permitted to specify the sender address.
5182 Untrusted callers may specify it if it matches untrusted_set_sender, or if what
5183 is specified is the empty address. However, if a trusted caller does not
5184 specify a sender address for SMTP input, we leave sender_address unset. This
5185 causes the MAIL commands to be honoured. */
5186
5187 if (  !smtp_input && !sender_address
5188    || !receive_check_set_sender(sender_address))
5189   {
5190   /* Either the caller is not permitted to set a general sender, or this is
5191   non-SMTP input and the trusted caller has not set a sender. If there is no
5192   sender, or if a sender other than <> is set, override with the originator's
5193   login (which will get qualified below), except when checking things. */
5194
5195   if (  !sender_address                  /* No sender_address set */
5196      ||                                  /*         OR            */
5197        (sender_address[0] != 0 &&        /* Non-empty sender address, AND */
5198        !checking))                       /* Not running tests, including filter tests */
5199     {
5200     sender_address = originator_login;
5201     f.sender_address_forced = FALSE;
5202     sender_address_domain = 0;
5203     }
5204   }
5205
5206 /* Remember whether an untrusted caller set the sender address */
5207
5208 f.sender_set_untrusted = sender_address != originator_login && !f.trusted_caller;
5209
5210 /* Ensure that the sender address is fully qualified unless it is the empty
5211 address, which indicates an error message, or doesn't exist (root caller, smtp
5212 interface, no -f argument). */
5213
5214 if (sender_address && *sender_address && sender_address_domain == 0)
5215   sender_address = string_sprintf("%s@%s", local_part_quote(sender_address),
5216     qualify_domain_sender);
5217
5218 DEBUG(D_receive) debug_printf("sender address = %s\n", sender_address);
5219
5220 /* Handle a request to verify a list of addresses, or test them for delivery.
5221 This must follow the setting of the sender address, since routers can be
5222 predicated upon the sender. If no arguments are given, read addresses from
5223 stdin. Set debug_level to at least D_v to get full output for address testing.
5224 */
5225
5226 if (verify_address_mode || f.address_test_mode)
5227   {
5228   int exit_value = 0;
5229   int flags = vopt_qualify;
5230
5231   if (verify_address_mode)
5232     {
5233     if (!verify_as_sender) flags |= vopt_is_recipient;
5234     DEBUG(D_verify) debug_print_ids(US"Verifying:");
5235     }
5236
5237   else
5238     {
5239     flags |= vopt_is_recipient;
5240     debug_selector |= D_v;
5241     debug_file = stderr;
5242     debug_fd = fileno(debug_file);
5243     DEBUG(D_verify) debug_print_ids(US"Address testing:");
5244     }
5245
5246   if (recipients_arg < argc)
5247     while (recipients_arg < argc)
5248       {
5249       /* Supplied addresses are tainted since they come from a user */
5250       uschar * s = string_copy_taint(
5251         exim_str_fail_toolong(argv[recipients_arg++], EXIM_DISPLAYMAIL_MAX, "address verification"),
5252         GET_TAINTED);
5253       while (*s)
5254         {
5255         BOOL finished = FALSE;
5256         uschar *ss = parse_find_address_end(s, FALSE);
5257         if (*ss == ',') *ss = 0; else finished = TRUE;
5258         test_address(s, flags, &exit_value);
5259         s = ss;
5260         if (!finished)
5261           while (*++s == ',' || isspace(*s)) ;
5262         }
5263       }
5264
5265   else for (;;)
5266     {
5267     uschar * s = get_stdinput(NULL, NULL);
5268     if (!s) break;
5269     test_address(string_copy_taint(
5270         exim_str_fail_toolong(s, EXIM_DISPLAYMAIL_MAX, "address verification (stdin)"),
5271         GET_TAINTED),
5272       flags, &exit_value);
5273     }
5274
5275   route_tidyup();
5276   exim_exit(exit_value);
5277   }
5278
5279 /* Handle expansion checking. Either expand items on the command line, or read
5280 from stdin if there aren't any. If -Mset was specified, load the message so
5281 that its variables can be used, but restrict this facility to admin users.
5282 Otherwise, if -bem was used, read a message from stdin. */
5283
5284 if (expansion_test)
5285   {
5286   dns_init(FALSE, FALSE, FALSE);
5287   if (msg_action_arg > 0 && msg_action == MSG_LOAD)
5288     {
5289     uschar * spoolname;
5290     if (!f.admin_user)
5291       exim_fail("exim: permission denied\n");
5292     message_id = US exim_str_fail_toolong(argv[msg_action_arg], MESSAGE_ID_LENGTH, "message-id");
5293     /* Checking the length of the ID is sufficient to validate it.
5294     Get an untainted version so file opens can be done. */
5295     message_id = string_copy_taint(message_id, GET_UNTAINTED);
5296
5297     spoolname = string_sprintf("%s-H", message_id);
5298     if ((deliver_datafile = spool_open_datafile(message_id)) < 0)
5299       printf ("Failed to load message datafile %s\n", message_id);
5300     if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
5301       printf ("Failed to load message %s\n", message_id);
5302     }
5303
5304   /* Read a test message from a file. We fudge it up to be on stdin, saving
5305   stdin itself for later reading of expansion strings. */
5306
5307   else if (expansion_test_message)
5308     {
5309     int save_stdin = dup(0);
5310     int fd = Uopen(expansion_test_message, O_RDONLY, 0);
5311     if (fd < 0)
5312       exim_fail("exim: failed to open %s: %s\n", expansion_test_message,
5313         strerror(errno));
5314     (void) dup2(fd, 0);
5315     filter_test = FTEST_USER;      /* Fudge to make it look like filter test */
5316     message_ended = END_NOTENDED;
5317     read_message_body(receive_msg(extract_recipients));
5318     message_linecount += body_linecount;
5319     (void)dup2(save_stdin, 0);
5320     (void)close(save_stdin);
5321     clearerr(stdin);               /* Required by Darwin */
5322     }
5323
5324   /* Only admin users may see config-file macros this way */
5325
5326   if (!f.admin_user) macros_user = macros = mlast = NULL;
5327
5328   /* Allow $recipients for this testing */
5329
5330   f.enable_dollar_recipients = TRUE;
5331
5332   /* Expand command line items */
5333
5334   if (recipients_arg < argc)
5335     while (recipients_arg < argc)
5336       expansion_test_line(exim_str_fail_toolong(argv[recipients_arg++], EXIM_EMAILADDR_MAX, "recipient"));
5337
5338   /* Read stdin */
5339
5340   else
5341     {
5342     char *(*fn_readline)(const char *) = NULL;
5343     void (*fn_addhist)(const char *) = NULL;
5344     uschar * s;
5345
5346 #ifdef USE_READLINE
5347     void *dlhandle = set_readline(&fn_readline, &fn_addhist);
5348 #endif
5349
5350     while (s = get_stdinput(fn_readline, fn_addhist))
5351       expansion_test_line(s);
5352
5353 #ifdef USE_READLINE
5354     if (dlhandle) dlclose(dlhandle);
5355 #endif
5356     }
5357
5358   /* The data file will be open after -Mset */
5359
5360   if (deliver_datafile >= 0)
5361     {
5362     (void)close(deliver_datafile);
5363     deliver_datafile = -1;
5364     }
5365
5366   exim_exit(EXIT_SUCCESS);
5367   }
5368
5369
5370 /* The active host name is normally the primary host name, but it can be varied
5371 for hosts that want to play several parts at once. We need to ensure that it is
5372 set for host checking, and for receiving messages. */
5373
5374 smtp_active_hostname = primary_hostname;
5375 if (raw_active_hostname != NULL)
5376   {
5377   uschar *nah = expand_string(raw_active_hostname);
5378   if (nah == NULL)
5379     {
5380     if (!f.expand_string_forcedfail)
5381       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand \"%s\" "
5382         "(smtp_active_hostname): %s", raw_active_hostname,
5383         expand_string_message);
5384     }
5385   else if (nah[0] != 0) smtp_active_hostname = nah;
5386   }
5387
5388 /* Handle host checking: this facility mocks up an incoming SMTP call from a
5389 given IP address so that the blocking and relay configuration can be tested.
5390 Unless a sender_ident was set by -oMt, we discard it (the default is the
5391 caller's login name). An RFC 1413 call is made only if we are running in the
5392 test harness and an incoming interface and both ports are specified, because
5393 there is no TCP/IP call to find the ident for. */
5394
5395 if (host_checking)
5396   {
5397   int x[4];
5398   int size;
5399
5400   if (!sender_ident_set)
5401     {
5402     sender_ident = NULL;
5403     if (f.running_in_test_harness && sender_host_port
5404        && interface_address && interface_port)
5405       verify_get_ident(1223);           /* note hardwired port number */
5406     }
5407
5408   /* In case the given address is a non-canonical IPv6 address, canonicalize
5409   it. The code works for both IPv4 and IPv6, as it happens. */
5410
5411   size = host_aton(sender_host_address, x);
5412   sender_host_address = store_get(48, GET_UNTAINTED);  /* large enough for full IPv6 */
5413   (void)host_nmtoa(size, x, -1, sender_host_address, ':');
5414
5415   /* Now set up for testing */
5416
5417   host_build_sender_fullhost();
5418   smtp_input = TRUE;
5419   smtp_in = stdin;
5420   smtp_out = stdout;
5421   f.sender_local = FALSE;
5422   f.sender_host_notsocket = TRUE;
5423   debug_file = stderr;
5424   debug_fd = fileno(debug_file);
5425   fprintf(stdout, "\n**** SMTP testing session as if from host %s\n"
5426     "**** but without any ident (RFC 1413) callback.\n"
5427     "**** This is not for real!\n\n",
5428       sender_host_address);
5429
5430   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5431   if (verify_check_host(&hosts_connection_nolog) == OK)
5432     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5433   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5434
5435   /* NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5436   because a log line has already been written for all its failure exists
5437   (usually "connection refused: <reason>") and writing another one is
5438   unnecessary clutter. */
5439
5440   if (smtp_start_session())
5441     {
5442     rmark reset_point;
5443     for (; (reset_point = store_mark()); store_reset(reset_point))
5444       {
5445       if (smtp_setup_msg() <= 0) break;
5446       if (!receive_msg(FALSE)) break;
5447
5448       return_path = sender_address = NULL;
5449       dnslist_domain = dnslist_matched = NULL;
5450 #ifndef DISABLE_DKIM
5451       dkim_cur_signer = NULL;
5452 #endif
5453       acl_var_m = NULL;
5454       deliver_localpart_orig = NULL;
5455       deliver_domain_orig = NULL;
5456       callout_address = sending_ip_address = NULL;
5457       deliver_localpart_data = deliver_domain_data =
5458       recipient_data = sender_data = NULL;
5459       sender_rate = sender_rate_limit = sender_rate_period = NULL;
5460       }
5461     smtp_log_no_mail();
5462     }
5463   exim_exit(EXIT_SUCCESS);
5464   }
5465
5466
5467 /* Arrange for message reception if recipients or SMTP were specified;
5468 otherwise complain unless a version print (-bV) happened or this is a filter
5469 verification test or info dump.
5470 In the former case, show the configuration file name. */
5471
5472 if (recipients_arg >= argc && !extract_recipients && !smtp_input)
5473   {
5474   if (version_printed)
5475     {
5476     if (Ustrchr(config_main_filelist, ':'))
5477       printf("Configuration file search path is %s\n", config_main_filelist);
5478     printf("Configuration file is %s\n", config_main_filename);
5479     return EXIT_SUCCESS;
5480     }
5481
5482   if (info_flag != CMDINFO_NONE)
5483     {
5484     show_exim_information(info_flag, info_stdout ? stdout : stderr);
5485     return info_stdout ? EXIT_SUCCESS : EXIT_FAILURE;
5486     }
5487
5488   if (filter_test == FTEST_NONE)
5489     exim_usage(called_as);
5490   }
5491
5492
5493 /* If mua_wrapper is set, Exim is being used to turn an MUA that submits on the
5494 standard input into an MUA that submits to a smarthost over TCP/IP. We know
5495 that we are not called from inetd, because that is rejected above. The
5496 following configuration settings are forced here:
5497
5498   (1) Synchronous delivery (-odi)
5499   (2) Errors to stderr (-oep == -oeq)
5500   (3) No parallel remote delivery
5501   (4) Unprivileged delivery
5502
5503 We don't force overall queueing options because there are several of them;
5504 instead, queueing is avoided below when mua_wrapper is set. However, we do need
5505 to override any SMTP queueing. */
5506
5507 if (mua_wrapper)
5508   {
5509   f.synchronous_delivery = TRUE;
5510   arg_error_handling = ERRORS_STDERR;
5511   remote_max_parallel = 1;
5512   deliver_drop_privilege = TRUE;
5513   f.queue_smtp = FALSE;
5514   queue_smtp_domains = NULL;
5515 #ifdef SUPPORT_I18N
5516   message_utf8_downconvert = -1;        /* convert-if-needed */
5517 #endif
5518   }
5519
5520
5521 /* Prepare to accept one or more new messages on the standard input. When a
5522 message has been read, its id is returned in message_id[]. If doing immediate
5523 delivery, we fork a delivery process for each received message, except for the
5524 last one, where we can save a process switch.
5525
5526 It is only in non-smtp mode that error_handling is allowed to be changed from
5527 its default of ERRORS_SENDER by argument. (Idle thought: are any of the
5528 sendmail error modes other than -oem ever actually used? Later: yes.) */
5529
5530 if (!smtp_input) error_handling = arg_error_handling;
5531
5532 /* If this is an inetd call, ensure that stderr is closed to prevent panic
5533 logging being sent down the socket and make an identd call to get the
5534 sender_ident. */
5535
5536 else if (f.is_inetd)
5537   {
5538   (void)fclose(stderr);
5539   exim_nullstd();                       /* Re-open to /dev/null */
5540   verify_get_ident(IDENT_PORT);
5541   host_build_sender_fullhost();
5542   set_process_info("handling incoming connection from %s via inetd",
5543     sender_fullhost);
5544   }
5545
5546 /* If the sender host address has been set, build sender_fullhost if it hasn't
5547 already been done (which it will have been for inetd). This caters for the
5548 case when it is forced by -oMa. However, we must flag that it isn't a socket,
5549 so that the test for IP options is skipped for -bs input. */
5550
5551 if (sender_host_address && !sender_fullhost)
5552   {
5553   host_build_sender_fullhost();
5554   set_process_info("handling incoming connection from %s via -oMa",
5555     sender_fullhost);
5556   f.sender_host_notsocket = TRUE;
5557   }
5558
5559 /* Otherwise, set the sender host as unknown except for inetd calls. This
5560 prevents host checking in the case of -bs not from inetd and also for -bS. */
5561
5562 else if (!f.is_inetd) f.sender_host_unknown = TRUE;
5563
5564 /* If stdout does not exist, then dup stdin to stdout. This can happen
5565 if exim is started from inetd. In this case fd 0 will be set to the socket,
5566 but fd 1 will not be set. This also happens for passed SMTP channels. */
5567
5568 if (fstat(1, &statbuf) < 0) (void)dup2(0, 1);
5569
5570 /* Set up the incoming protocol name and the state of the program. Root is
5571 allowed to force received protocol via the -oMr option above. If we have come
5572 via inetd, the process info has already been set up. We don't set
5573 received_protocol here for smtp input, as it varies according to
5574 batch/HELO/EHLO/AUTH/TLS. */
5575
5576 if (smtp_input)
5577   {
5578   if (!f.is_inetd) set_process_info("accepting a local %sSMTP message from <%s>",
5579     smtp_batched_input? "batched " : "",
5580     sender_address ? sender_address : originator_login);
5581   }
5582 else
5583   {
5584   int old_pool = store_pool;
5585   store_pool = POOL_PERM;
5586   if (!received_protocol)
5587     received_protocol = string_sprintf("local%s", called_as);
5588   store_pool = old_pool;
5589   set_process_info("accepting a local non-SMTP message from <%s>",
5590     sender_address);
5591   }
5592
5593 /* Initialize the session_local_queue-only flag (this will be ignored if
5594 mua_wrapper is set) */
5595
5596 queue_check_only();
5597 session_local_queue_only = queue_only;
5598
5599 /* For non-SMTP and for batched SMTP input, check that there is enough space on
5600 the spool if so configured. On failure, we must not attempt to send an error
5601 message! (For interactive SMTP, the check happens at MAIL FROM and an SMTP
5602 error code is given.) */
5603
5604 if ((!smtp_input || smtp_batched_input) && !receive_check_fs(0))
5605   exim_fail("exim: insufficient disk space\n");
5606
5607 /* If this is smtp input of any kind, real or batched, handle the start of the
5608 SMTP session.
5609
5610 NOTE: We do *not* call smtp_log_no_mail() if smtp_start_session() fails,
5611 because a log line has already been written for all its failure exists
5612 (usually "connection refused: <reason>") and writing another one is
5613 unnecessary clutter. */
5614
5615 if (smtp_input)
5616   {
5617   smtp_in = stdin;
5618   smtp_out = stdout;
5619   memset(sender_host_cache, 0, sizeof(sender_host_cache));
5620   if (verify_check_host(&hosts_connection_nolog) == OK)
5621     BIT_CLEAR(log_selector, log_selector_size, Li_smtp_connection);
5622   log_write(L_smtp_connection, LOG_MAIN, "%s", smtp_get_connection_info());
5623   if (!smtp_start_session())
5624     {
5625     mac_smtp_fflush();
5626     exim_exit(EXIT_SUCCESS);
5627     }
5628   }
5629
5630 /* Otherwise, set up the input size limit here and set no stdin stdio buffer
5631 (we handle buferring so as to have visibility of fill level). */
5632
5633 else
5634   {
5635   thismessage_size_limit = expand_string_integer(message_size_limit, TRUE);
5636   if (expand_string_message)
5637     if (thismessage_size_limit == -1)
5638       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to expand "
5639         "message_size_limit: %s", expand_string_message);
5640     else
5641       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "invalid value for "
5642         "message_size_limit: %s", expand_string_message);
5643
5644   setvbuf(stdin, NULL, _IONBF, 0);
5645   }
5646
5647 /* Loop for several messages when reading SMTP input. If we fork any child
5648 processes, we don't want to wait for them unless synchronous delivery is
5649 requested, so set SIGCHLD to SIG_IGN in that case. This is not necessarily the
5650 same as SIG_DFL, despite the fact that documentation often lists the default as
5651 "ignore". This is a confusing area. This is what I know:
5652
5653 At least on some systems (e.g. Solaris), just setting SIG_IGN causes child
5654 processes that complete simply to go away without ever becoming defunct. You
5655 can't then wait for them - but we don't want to wait for them in the
5656 non-synchronous delivery case. However, this behaviour of SIG_IGN doesn't
5657 happen for all OS (e.g. *BSD is different).
5658
5659 But that's not the end of the story. Some (many? all?) systems have the
5660 SA_NOCLDWAIT option for sigaction(). This requests the behaviour that Solaris
5661 has by default, so it seems that the difference is merely one of default
5662 (compare restarting vs non-restarting signals).
5663
5664 To cover all cases, Exim sets SIG_IGN with SA_NOCLDWAIT here if it can. If not,
5665 it just sets SIG_IGN. To be on the safe side it also calls waitpid() at the end
5666 of the loop below. Paranoia rules.
5667
5668 February 2003: That's *still* not the end of the story. There are now versions
5669 of Linux (where SIG_IGN does work) that are picky. If, having set SIG_IGN, a
5670 process then calls waitpid(), a grumble is written to the system log, because
5671 this is logically inconsistent. In other words, it doesn't like the paranoia.
5672 As a consequence of this, the waitpid() below is now excluded if we are sure
5673 that SIG_IGN works. */
5674
5675 if (!f.synchronous_delivery)
5676   {
5677 #ifdef SA_NOCLDWAIT
5678   struct sigaction act;
5679   act.sa_handler = SIG_IGN;
5680   sigemptyset(&(act.sa_mask));
5681   act.sa_flags = SA_NOCLDWAIT;
5682   sigaction(SIGCHLD, &act, NULL);
5683 #else
5684   signal(SIGCHLD, SIG_IGN);
5685 #endif
5686   }
5687
5688 /* Save the current store pool point, for resetting at the start of
5689 each message, and save the real sender address, if any. */
5690
5691 real_sender_address = sender_address;
5692
5693 /* Loop to receive messages; receive_msg() returns TRUE if there are more
5694 messages to be read (SMTP input), or FALSE otherwise (not SMTP, or SMTP channel
5695 collapsed). */
5696
5697 for (BOOL more = TRUE; more; )
5698   {
5699   rmark reset_point = store_mark();
5700   message_id[0] = 0;
5701
5702   /* Handle the SMTP case; call smtp_setup_mst() to deal with the initial SMTP
5703   input and build the recipients list, before calling receive_msg() to read the
5704   message proper. Whatever sender address is given in the SMTP transaction is
5705   often ignored for local senders - we use the actual sender, which is normally
5706   either the underlying user running this process or a -f argument provided by
5707   a trusted caller. It is saved in real_sender_address. The test for whether to
5708   accept the SMTP sender is encapsulated in receive_check_set_sender(). */
5709
5710   if (smtp_input)
5711     {
5712     int rc;
5713     if ((rc = smtp_setup_msg()) > 0)
5714       {
5715       if (real_sender_address != NULL &&
5716           !receive_check_set_sender(sender_address))
5717         {
5718         sender_address = raw_sender = real_sender_address;
5719         sender_address_unrewritten = NULL;
5720         }
5721
5722       /* For batched SMTP, we have to run the acl_not_smtp_start ACL, since it
5723       isn't really SMTP, so no other ACL will run until the acl_not_smtp one at
5724       the very end. The result of the ACL is ignored (as for other non-SMTP
5725       messages). It is run for its potential side effects. */
5726
5727       if (smtp_batched_input && acl_not_smtp_start != NULL)
5728         {
5729         uschar *user_msg, *log_msg;
5730         f.enable_dollar_recipients = TRUE;
5731         (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5732           &user_msg, &log_msg);
5733         f.enable_dollar_recipients = FALSE;
5734         }
5735
5736       /* Now get the data for the message */
5737
5738       more = receive_msg(extract_recipients);
5739       if (!message_id[0])
5740         {
5741         cancel_cutthrough_connection(TRUE, US"receive dropped");
5742         if (more) goto MORELOOP;
5743         smtp_log_no_mail();               /* Log no mail if configured */
5744         exim_exit(EXIT_FAILURE);
5745         }
5746       }
5747     else
5748       {
5749       cancel_cutthrough_connection(TRUE, US"message setup dropped");
5750       smtp_log_no_mail();               /* Log no mail if configured */
5751       exim_exit(rc ? EXIT_FAILURE : EXIT_SUCCESS);
5752       }
5753     }
5754
5755   /* In the non-SMTP case, we have all the information from the command
5756   line, but must process it in case it is in the more general RFC822
5757   format, and in any case, to detect syntax errors. Also, it appears that
5758   the use of comma-separated lists as single arguments is common, so we
5759   had better support them. */
5760
5761   else
5762     {
5763     int rcount = 0;
5764     int count = argc - recipients_arg;
5765     uschar **list = argv + recipients_arg;
5766
5767     /* These options cannot be changed dynamically for non-SMTP messages */
5768
5769     f.active_local_sender_retain = local_sender_retain;
5770     f.active_local_from_check = local_from_check;
5771
5772     /* Save before any rewriting */
5773
5774     raw_sender = string_copy(sender_address);
5775
5776     /* Loop for each argument (supplied by user hence tainted) */
5777
5778     for (int i = 0; i < count; i++)
5779       {
5780       int start, end, domain;
5781       uschar * errmess;
5782       /* There can be multiple addresses, so EXIM_DISPLAYMAIL_MAX (tuned for 1) is too short.
5783        * We'll still want to cap it to something, just in case. */
5784       uschar * s = string_copy_taint(
5785         exim_str_fail_toolong(list[i], BIG_BUFFER_SIZE, "address argument"),
5786         GET_TAINTED);
5787
5788       /* Loop for each comma-separated address */
5789
5790       while (*s)
5791         {
5792         BOOL finished = FALSE;
5793         uschar *recipient;
5794         uschar *ss = parse_find_address_end(s, FALSE);
5795
5796         if (*ss == ',') *ss = 0; else finished = TRUE;
5797
5798         /* Check max recipients - if -t was used, these aren't recipients */
5799
5800         if (recipients_max > 0 && ++rcount > recipients_max &&
5801             !extract_recipients)
5802           if (error_handling == ERRORS_STDERR)
5803             {
5804             fprintf(stderr, "exim: too many recipients\n");
5805             exim_exit(EXIT_FAILURE);
5806             }
5807           else
5808             return
5809               moan_to_sender(ERRMESS_TOOMANYRECIP, NULL, NULL, stdin, TRUE)?
5810                 errors_sender_rc : EXIT_FAILURE;
5811
5812 #ifdef SUPPORT_I18N
5813         {
5814         BOOL b = allow_utf8_domains;
5815         allow_utf8_domains = TRUE;
5816 #endif
5817         recipient =
5818           parse_extract_address(s, &errmess, &start, &end, &domain, FALSE);
5819
5820 #ifdef SUPPORT_I18N
5821         if (recipient)
5822           if (string_is_utf8(recipient)) message_smtputf8 = TRUE;
5823           else allow_utf8_domains = b;
5824         }
5825 #else
5826         ;
5827 #endif
5828         if (domain == 0 && !f.allow_unqualified_recipient)
5829           {
5830           recipient = NULL;
5831           errmess = US"unqualified recipient address not allowed";
5832           }
5833
5834         if (!recipient)
5835           if (error_handling == ERRORS_STDERR)
5836             {
5837             fprintf(stderr, "exim: bad recipient address \"%s\": %s\n",
5838               string_printing(list[i]), errmess);
5839             exim_exit(EXIT_FAILURE);
5840             }
5841           else
5842             {
5843             error_block eblock;
5844             eblock.next = NULL;
5845             eblock.text1 = string_printing(list[i]);
5846             eblock.text2 = errmess;
5847             return
5848               moan_to_sender(ERRMESS_BADARGADDRESS, &eblock, NULL, stdin, TRUE)?
5849                 errors_sender_rc : EXIT_FAILURE;
5850             }
5851
5852         receive_add_recipient(string_copy_taint(recipient, GET_TAINTED), -1);
5853         s = ss;
5854         if (!finished)
5855           while (*(++s) != 0 && (*s == ',' || isspace(*s)));
5856         }
5857       }
5858
5859     /* Show the recipients when debugging */
5860
5861     DEBUG(D_receive)
5862       {
5863       if (sender_address) debug_printf("Sender: %s\n", sender_address);
5864       if (recipients_list)
5865         {
5866         debug_printf("Recipients:\n");
5867         for (int i = 0; i < recipients_count; i++)
5868           debug_printf("  %s\n", recipients_list[i].address);
5869         }
5870       }
5871
5872     /* Run the acl_not_smtp_start ACL if required. The result of the ACL is
5873     ignored; rejecting here would just add complication, and it can just as
5874     well be done later. Allow $recipients to be visible in the ACL. */
5875
5876     if (acl_not_smtp_start)
5877       {
5878       uschar *user_msg, *log_msg;
5879       f.enable_dollar_recipients = TRUE;
5880       (void)acl_check(ACL_WHERE_NOTSMTP_START, NULL, acl_not_smtp_start,
5881         &user_msg, &log_msg);
5882       f.enable_dollar_recipients = FALSE;
5883       }
5884
5885     /* Pause for a while waiting for input.  If none received in that time,
5886     close the logfile, if we had one open; then if we wait for a long-running
5887     datasource (months, in one use-case) log rotation will not leave us holding
5888     the file copy. */
5889
5890     if (!receive_timeout)
5891       if (poll_one_fd(0, POLLIN, 30*60*1000) == 0)      /* 30 minutes */
5892         mainlog_close();
5893
5894     /* Read the data for the message. If filter_test is not FTEST_NONE, this
5895     will just read the headers for the message, and not write anything onto the
5896     spool. */
5897
5898     message_ended = END_NOTENDED;
5899     more = receive_msg(extract_recipients);
5900
5901     /* more is always FALSE here (not SMTP message) when reading a message
5902     for real; when reading the headers of a message for filter testing,
5903     it is TRUE if the headers were terminated by '.' and FALSE otherwise. */
5904
5905     if (!message_id[0]) exim_exit(EXIT_FAILURE);
5906     }  /* Non-SMTP message reception */
5907
5908   /* If this is a filter testing run, there are headers in store, but
5909   no message on the spool. Run the filtering code in testing mode, setting
5910   the domain to the qualify domain and the local part to the current user,
5911   unless they have been set by options. The prefix and suffix are left unset
5912   unless specified. The the return path is set to to the sender unless it has
5913   already been set from a return-path header in the message. */
5914
5915   if (filter_test != FTEST_NONE)
5916     {
5917     deliver_domain = ftest_domain ? ftest_domain : qualify_domain_recipient;
5918     deliver_domain_orig = deliver_domain;
5919     deliver_localpart = ftest_localpart ? US ftest_localpart : originator_login;
5920     deliver_localpart_orig = deliver_localpart;
5921     deliver_localpart_prefix = US ftest_prefix;
5922     deliver_localpart_suffix = US ftest_suffix;
5923     deliver_home = originator_home;
5924
5925     if (!return_path)
5926       {
5927       printf("Return-path copied from sender\n");
5928       return_path = string_copy(sender_address);
5929       }
5930     else
5931       printf("Return-path = %s\n", (return_path[0] == 0)? US"<>" : return_path);
5932     printf("Sender      = %s\n", (sender_address[0] == 0)? US"<>" : sender_address);
5933
5934     receive_add_recipient(
5935       string_sprintf("%s%s%s@%s",
5936         ftest_prefix ? ftest_prefix : US"",
5937         deliver_localpart,
5938         ftest_suffix ? ftest_suffix : US"",
5939         deliver_domain), -1);
5940
5941     printf("Recipient   = %s\n", recipients_list[0].address);
5942     if (ftest_prefix) printf("Prefix    = %s\n", ftest_prefix);
5943     if (ftest_suffix) printf("Suffix    = %s\n", ftest_suffix);
5944
5945     if (chdir("/"))   /* Get away from wherever the user is running this from */
5946       {
5947       DEBUG(D_receive) debug_printf("chdir(\"/\") failed\n");
5948       exim_exit(EXIT_FAILURE);
5949       }
5950
5951     /* Now we run either a system filter test, or a user filter test, or both.
5952     In the latter case, headers added by the system filter will persist and be
5953     available to the user filter. We need to copy the filter variables
5954     explicitly. */
5955
5956     if (filter_test & FTEST_SYSTEM)
5957       if (!filter_runtest(filter_sfd, filter_test_sfile, TRUE, more))
5958         exim_exit(EXIT_FAILURE);
5959
5960     memcpy(filter_sn, filter_n, sizeof(filter_sn));
5961
5962     if (filter_test & FTEST_USER)
5963       if (!filter_runtest(filter_ufd, filter_test_ufile, FALSE, more))
5964         exim_exit(EXIT_FAILURE);
5965
5966     exim_exit(EXIT_SUCCESS);
5967     }
5968
5969   /* Else act on the result of message reception. We should not get here unless
5970   message_id[0] is non-zero. If queue_only is set, session_local_queue_only
5971   will be TRUE. If it is not, check on the number of messages received in this
5972   connection. */
5973
5974   if (  !session_local_queue_only
5975      && smtp_accept_queue_per_connection > 0
5976      && receive_messagecount > smtp_accept_queue_per_connection)
5977     {
5978     session_local_queue_only = TRUE;
5979     queue_only_reason = 2;
5980     }
5981
5982   /* Initialize local_queue_only from session_local_queue_only. If it is false,
5983   and queue_only_load is set, check that the load average is below it. If it is
5984   not, set local_queue_only TRUE. If queue_only_load_latch is true (the
5985   default), we put the whole session into queue_only mode. It then remains this
5986   way for any subsequent messages on the same SMTP connection. This is a
5987   deliberate choice; even though the load average may fall, it doesn't seem
5988   right to deliver later messages on the same call when not delivering earlier
5989   ones. However, there are odd cases where this is not wanted, so this can be
5990   changed by setting queue_only_load_latch false. */
5991
5992   if (!(local_queue_only = session_local_queue_only) && queue_only_load >= 0)
5993     if ((local_queue_only = (load_average = OS_GETLOADAVG()) > queue_only_load))
5994       {
5995       queue_only_reason = 3;
5996       if (queue_only_load_latch) session_local_queue_only = TRUE;
5997       }
5998
5999   /* If running as an MUA wrapper, all queueing options and freezing options
6000   are ignored. */
6001
6002   if (mua_wrapper)
6003     local_queue_only = f.queue_only_policy = f.deliver_freeze = FALSE;
6004
6005   /* Log the queueing here, when it will get a message id attached, but
6006   not if queue_only is set (case 0). Case 1 doesn't happen here (too many
6007   connections). */
6008
6009   if (local_queue_only)
6010     {
6011     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6012     switch(queue_only_reason)
6013       {
6014       case 2:
6015         log_write(L_delay_delivery,
6016                 LOG_MAIN, "no immediate delivery: more than %d messages "
6017           "received in one connection", smtp_accept_queue_per_connection);
6018         break;
6019
6020       case 3:
6021         log_write(L_delay_delivery,
6022                 LOG_MAIN, "no immediate delivery: load average %.2f",
6023                 (double)load_average/1000.0);
6024       break;
6025       }
6026     }
6027
6028   else if (f.queue_only_policy || f.deliver_freeze)
6029     cancel_cutthrough_connection(TRUE, US"no delivery; queueing");
6030
6031   /* Else do the delivery unless the ACL or local_scan() called for queue only
6032   or froze the message. Always deliver in a separate process. A fork failure is
6033   not a disaster, as the delivery will eventually happen on a subsequent queue
6034   run. The search cache must be tidied before the fork, as the parent will
6035   do it before exiting. The child will trigger a lookup failure and
6036   thereby defer the delivery if it tries to use (for example) a cached ldap
6037   connection that the parent has called unbind on. */
6038
6039   else
6040     {
6041     pid_t pid;
6042     search_tidyup();
6043
6044     if ((pid = exim_fork(US"local-accept-delivery")) == 0)
6045       {
6046       int rc;
6047       close_unwanted();      /* Close unwanted file descriptors and TLS */
6048       exim_nullstd();        /* Ensure std{in,out,err} exist */
6049
6050       /* Re-exec Exim if we need to regain privilege (note: in mua_wrapper
6051       mode, deliver_drop_privilege is forced TRUE). */
6052
6053       if (geteuid() != root_uid && !deliver_drop_privilege && !unprivileged)
6054         {
6055         delivery_re_exec(CEE_EXEC_EXIT);
6056         /* Control does not return here. */
6057         }
6058
6059       /* No need to re-exec */
6060
6061       rc = deliver_message(message_id, FALSE, FALSE);
6062       search_tidyup();
6063       exim_underbar_exit(!mua_wrapper || rc == DELIVER_MUA_SUCCEEDED
6064         ? EXIT_SUCCESS : EXIT_FAILURE);
6065       }
6066
6067     if (pid < 0)
6068       {
6069       cancel_cutthrough_connection(TRUE, US"delivery fork failed");
6070       log_write(0, LOG_MAIN|LOG_PANIC, "failed to fork automatic delivery "
6071         "process: %s", strerror(errno));
6072       }
6073     else
6074       {
6075       release_cutthrough_connection(US"msg passed for delivery");
6076
6077       /* In the parent, wait if synchronous delivery is required. This will
6078       always be the case in MUA wrapper mode. */
6079
6080       if (f.synchronous_delivery)
6081         {
6082         int status;
6083         while (wait(&status) != pid);
6084         if ((status & 0x00ff) != 0)
6085           log_write(0, LOG_MAIN|LOG_PANIC,
6086             "process %d crashed with signal %d while delivering %s",
6087             (int)pid, status & 0x00ff, message_id);
6088         if (mua_wrapper && (status & 0xffff) != 0) exim_exit(EXIT_FAILURE);
6089         }
6090       }
6091     }
6092
6093   /* The loop will repeat if more is TRUE. If we do not know know that the OS
6094   automatically reaps children (see comments above the loop), clear away any
6095   finished subprocesses here, in case there are lots of messages coming in
6096   from the same source. */
6097
6098 #ifndef SIG_IGN_WORKS
6099   while (waitpid(-1, NULL, WNOHANG) > 0);
6100 #endif
6101
6102 MORELOOP:
6103   return_path = sender_address = NULL;
6104   authenticated_sender = NULL;
6105   deliver_localpart_orig = NULL;
6106   deliver_domain_orig = NULL;
6107   deliver_host = deliver_host_address = NULL;
6108   dnslist_domain = dnslist_matched = NULL;
6109 #ifdef WITH_CONTENT_SCAN
6110   malware_name = NULL;
6111 #endif
6112   callout_address = NULL;
6113   sending_ip_address = NULL;
6114   deliver_localpart_data = deliver_domain_data =
6115   recipient_data = sender_data = NULL;
6116   acl_var_m = NULL;
6117   for(int i = 0; i < REGEX_VARS; i++) regex_vars[i] = NULL;
6118
6119   store_reset(reset_point);
6120   }
6121
6122 exim_exit(EXIT_SUCCESS);   /* Never returns */
6123 return 0;                  /* To stop compiler warning */
6124 }
6125
6126
6127 /* End of exim.c */