src/src/queue.c

   1 /*************************************************
   2 *     Exim - an Internet mail transport agent    *
   3 *************************************************/
   4
   5 /* Copyright (c) University of Cambridge 1995 - 2018 */
   6 /* Copyright (c) The Exim Maintainers 2020 */
   7 /* See the file NOTICE for conditions of use and distribution. */
   8
   9 /* Functions that operate on the input queue. */
  10
  11
  12 #include "exim.h"
  13
  14
  15
  16
  17
  18
  19
  20 #ifndef COMPILE_UTILITY
  21
  22 /* The number of nodes to use for the bottom-up merge sort when a list of queue
  23 items is to be ordered. The code for this sort was contributed as a patch by
  24 Michael Haardt. */
  25
  26 #define LOG2_MAXNODES 32
  27
  28
  29 #ifndef DISABLE_TLS
  30 static BOOL queue_tls_init = FALSE;
  31 #endif
  32
  33 /*************************************************
  34 *  Helper sort function for queue_get_spool_list *
  35 *************************************************/
  36
  37 /* This function is used when sorting the queue list in the function
  38 queue_get_spool_list() below.
  39
  40 Arguments:
  41   a            points to an ordered list of queue_filename items
  42   b            points to another ordered list
  43
  44 Returns:       a pointer to a merged ordered list
  45 */
  46
  47 static queue_filename *
  48 merge_queue_lists(queue_filename *a, queue_filename *b)
  49 {
  50 queue_filename *first = NULL;
  51 queue_filename **append = &first;
  52
  53 while (a && b)
  54   {
  55   int d;
  56   if ((d = Ustrncmp(a->text, b->text, 6)) == 0)
  57     d = Ustrcmp(a->text + 14, b->text + 14);
  58   if (d < 0)
  59     {
  60     *append = a;
  61     append= &a->next;
  62     a = a->next;
  63     }
  64   else
  65     {
  66     *append = b;
  67     append= &b->next;
  68     b = b->next;
  69     }
  70   }
  71
  72 *append = a ? a : b;
  73 return first;
  74 }
  75
  76
  77
  78
  79
  80 /*************************************************
  81 *             Get list of spool files            *
  82 *************************************************/
  83
  84 /* Scan the spool directory and return a list of the relevant file names
  85 therein. Single-character sub-directories are handled as follows:
  86
  87   If the first argument is > 0, a sub-directory is scanned; the letter is
  88   taken from the nth entry in subdirs.
  89
  90   If the first argument is 0, sub-directories are not scanned. However, a
  91   list of them is returned.
  92
  93   If the first argument is < 0, sub-directories are scanned for messages,
  94   and a single, unified list is created. The returned data blocks contain the
  95   identifying character of the subdirectory, if any. The subdirs vector is
  96   still required as an argument.
  97
  98 If the randomize argument is TRUE, messages are returned in "randomized" order.
  99 Actually, the order is anything but random, but the algorithm is cheap, and the
 100 point is simply to ensure that the same order doesn't occur every time, in case
 101 a particular message is causing a remote MTA to barf - we would like to try
 102 other messages to that MTA first.
 103
 104 If the randomize argument is FALSE, sort the list according to the file name.
 105 This should give the order in which the messages arrived. It is normally used
 106 only for presentation to humans, in which case the (possibly expensive) sort
 107 that it does is not part of the normal operational code. However, if
 108 queue_run_in_order is set, sorting has to take place for queue runs as well.
 109 When randomize is FALSE, the first argument is normally -1, so all messages are
 110 included.
 111
 112 Arguments:
 113   subdiroffset   sub-directory character offset, or 0 or -1 (see above)
 114   subdirs        vector to store list of subdirchars
 115   subcount       pointer to int in which to store count of subdirs
 116   randomize      TRUE if the order of the list is to be unpredictable
 117   pcount         If not NULL, fill in with count of files and do not return list
 118
 119 Returns:         pointer to a chain of queue name items
 120 */
 121
 122 static queue_filename *
 123 queue_get_spool_list(int subdiroffset, uschar *subdirs, int *subcount,
 124   BOOL randomize, unsigned * pcount)
 125 {
 126 int i;
 127 int flags = 0;
 128 int resetflags = -1;
 129 int subptr;
 130 queue_filename *yield = NULL;
 131 queue_filename *last = NULL;
 132 uschar buffer[256];
 133 queue_filename *root[LOG2_MAXNODES];
 134
 135 /* When randomizing, the file names are added to the start or end of the list
 136 according to the bits of the flags variable. Get a collection of bits from the
 137 current time. Use the bottom 16 and just keep re-using them if necessary. When
 138 not randomizing, initialize the sublists for the bottom-up merge sort. */
 139
 140 if (pcount)
 141   *pcount = 0;
 142 else if (randomize)
 143   resetflags = time(NULL) & 0xFFFF;
 144 else
 145    for (i = 0; i < LOG2_MAXNODES; i++)
 146      root[i] = NULL;
 147
 148 /* If processing the full queue, or just the top-level, start at the base
 149 directory, and initialize the first subdirectory name (as none). Otherwise,
 150 start at the sub-directory offset. */
 151
 152 if (subdiroffset <= 0)
 153   {
 154   i = 0;
 155   subdirs[0] = 0;
 156   *subcount = 0;
 157   }
 158 else
 159   i = subdiroffset;
 160
 161 /* Set up prototype for the directory name. */
 162
 163 spool_pname_buf(buffer, sizeof(buffer));
 164 buffer[sizeof(buffer) - 3] = 0;
 165 subptr = Ustrlen(buffer);
 166 buffer[subptr+2] = 0;               /* terminator for lengthened name */
 167
 168 /* This loop runs at least once, for the main or given directory, and then as
 169 many times as necessary to scan any subdirectories encountered in the main
 170 directory, if they are to be scanned at this time. */
 171
 172 for (; i <= *subcount; i++)
 173   {
 174   int count = 0;
 175   int subdirchar = subdirs[i];      /* 0 for main directory */
 176   DIR *dd;
 177
 178   if (subdirchar != 0)
 179     {
 180     buffer[subptr] = '/';
 181     buffer[subptr+1] = subdirchar;
 182     }
 183
 184   DEBUG(D_queue_run) debug_printf("looking in %s\n", buffer);
 185   if (!(dd = exim_opendir(buffer)))
 186     continue;
 187
 188   /* Now scan the directory. */
 189
 190   for (struct dirent *ent; ent = readdir(dd); )
 191     {
 192     uschar *name = US ent->d_name;
 193     int len = Ustrlen(name);
 194
 195     /* Count entries */
 196
 197     count++;
 198
 199     /* If we find a single alphameric sub-directory in the base directory,
 200     add it to the list for subsequent scans. */
 201
 202     if (i == 0 && len == 1 && isalnum(*name))
 203       {
 204       *subcount = *subcount + 1;
 205       subdirs[*subcount] = *name;
 206       continue;
 207       }
 208
 209     /* Otherwise, if it is a header spool file, add it to the list */
 210
 211     if (len == SPOOL_NAME_LENGTH &&
 212         Ustrcmp(name + SPOOL_NAME_LENGTH - 2, "-H") == 0)
 213       if (pcount)
 214         (*pcount)++;
 215       else
 216         {
 217         queue_filename *next =
 218           store_get(sizeof(queue_filename) + Ustrlen(name), is_tainted(name));
 219         Ustrcpy(next->text, name);
 220         next->dir_uschar = subdirchar;
 221
 222         /* Handle the creation of a randomized list. The first item becomes both
 223         the top and bottom of the list. Subsequent items are inserted either at
 224         the top or the bottom, randomly. This is, I argue, faster than doing a
 225         sort by allocating a random number to each item, and it also saves having
 226         to store the number with each item. */
 227
 228         if (randomize)
 229           if (!yield)
 230             {
 231             next->next = NULL;
 232             yield = last = next;
 233             }
 234           else
 235             {
 236             if (flags == 0)
 237               flags = resetflags;
 238             if ((flags & 1) == 0)
 239               {
 240               next->next = yield;
 241               yield = next;
 242               }
 243             else
 244               {
 245               next->next = NULL;
 246               last->next = next;
 247               last = next;
 248               }
 249             flags = flags >> 1;
 250             }
 251
 252         /* Otherwise do a bottom-up merge sort based on the name. */
 253
 254         else
 255           {
 256           next->next = NULL;
 257           for (int j = 0; j < LOG2_MAXNODES; j++)
 258             if (root[j])
 259               {
 260               next = merge_queue_lists(next, root[j]);
 261               root[j] = j == LOG2_MAXNODES - 1 ? next : NULL;
 262               }
 263             else
 264               {
 265               root[j] = next;
 266               break;
 267               }
 268           }
 269         }
 270     }
 271
 272   /* Finished with this directory */
 273
 274   closedir(dd);
 275
 276   /* If we have just scanned a sub-directory, and it was empty (count == 2
 277   implies just "." and ".." entries), and Exim is no longer configured to
 278   use sub-directories, attempt to get rid of it. At the same time, try to
 279   get rid of any corresponding msglog subdirectory. These are just cosmetic
 280   tidying actions, so just ignore failures. If we are scanning just a single
 281   sub-directory, break the loop. */
 282
 283   if (i != 0)
 284     {
 285     if (!split_spool_directory && count <= 2)
 286       {
 287       uschar subdir[2];
 288
 289       rmdir(CS buffer);
 290       subdir[0] = subdirchar; subdir[1] = 0;
 291       rmdir(CS spool_dname(US"msglog", subdir));
 292       }
 293     if (subdiroffset > 0) break;    /* Single sub-directory */
 294     }
 295
 296   /* If we have just scanned the base directory, and subdiroffset is 0,
 297   we do not want to continue scanning the sub-directories. */
 298
 299   else if (subdiroffset == 0)
 300     break;
 301   }    /* Loop for multiple subdirectories */
 302
 303 /* When using a bottom-up merge sort, do the final merging of the sublists.
 304 Then pass back the final list of file items. */
 305
 306 if (!pcount && !randomize)
 307   for (i = 0; i < LOG2_MAXNODES; ++i)
 308     yield = merge_queue_lists(yield, root[i]);
 309
 310 return yield;
 311 }
 312
 313
 314
 315
 316 /*************************************************
 317 *              Perform a queue run               *
 318 *************************************************/
 319
 320 /* The arguments give the messages to start and stop at; NULL means start at
 321 the beginning or stop at the end. If the given start message doesn't exist, we
 322 start at the next lexically greater one, and likewise we stop at the after the
 323 previous lexically lesser one if the given stop message doesn't exist. Because
 324 a queue run can take some time, stat each file before forking, in case it has
 325 been delivered in the meantime by some other means.
 326
 327 The global variables queue_run_force and queue_run_local may be set to cause
 328 forced deliveries or local-only deliveries, respectively.
 329
 330 If deliver_selectstring[_sender] is not NULL, skip messages whose recipients do
 331 not contain the string. As this option is typically used when a machine comes
 332 back online, we want to ensure that at least one delivery attempt takes place,
 333 so force the first one. The selecting string can optionally be a regex, or
 334 refer to the sender instead of recipients.
 335
 336 If queue_2stage is set, the queue is scanned twice. The first time, queue_smtp
 337 is set so that routing is done for all messages. Thus in the second run those
 338 that are routed to the same host should go down the same SMTP connection.
 339
 340 Arguments:
 341   start_id   message id to start at, or NULL for all
 342   stop_id    message id to end at, or NULL for all
 343   recurse    TRUE if recursing for 2-stage run
 344
 345 Returns:     nothing
 346 */
 347
 348 void
 349 queue_run(uschar *start_id, uschar *stop_id, BOOL recurse)
 350 {
 351 BOOL force_delivery = f.queue_run_force || deliver_selectstring != NULL ||
 352   deliver_selectstring_sender != NULL;
 353 const pcre *selectstring_regex = NULL;
 354 const pcre *selectstring_regex_sender = NULL;
 355 uschar *log_detail = NULL;
 356 int subcount = 0;
 357 uschar subdirs[64];
 358 pid_t qpid[4] = {0};    /* Parallelism factor for q2stage 1st phase */
 359 BOOL single_id = FALSE;
 360
 361 #ifdef MEASURE_TIMING
 362 report_time_since(&timestamp_startup, US"queue_run start");
 363 #endif
 364
 365 /* Cancel any specific queue domains. Turn off the flag that causes SMTP
 366 deliveries not to happen, unless doing a 2-stage queue run, when the SMTP flag
 367 gets set. Save the queue_runner's pid and the flag that indicates any
 368 deliveries run directly from this process. Deliveries that are run by handing
 369 on TCP/IP channels have queue_run_pid set, but not queue_running. */
 370
 371 queue_domains = NULL;
 372 queue_smtp_domains = NULL;
 373 f.queue_smtp = f.queue_2stage;
 374
 375 queue_run_pid = getpid();
 376 f.queue_running = TRUE;
 377
 378 /* Log the true start of a queue run, and fancy options */
 379
 380 if (!recurse)
 381   {
 382   uschar extras[8];
 383   uschar *p = extras;
 384
 385   if (f.queue_2stage) *p++ = 'q';
 386   if (f.queue_run_first_delivery) *p++ = 'i';
 387   if (f.queue_run_force) *p++ = 'f';
 388   if (f.deliver_force_thaw) *p++ = 'f';
 389   if (f.queue_run_local) *p++ = 'l';
 390   *p = 0;
 391
 392   p = big_buffer;
 393   p += sprintf(CS p, "pid=%d", (int)queue_run_pid);
 394
 395   if (extras[0] != 0)
 396     p += sprintf(CS p, " -q%s", extras);
 397
 398   if (deliver_selectstring)
 399     {
 400     snprintf(CS p, big_buffer_size - (p - big_buffer), " -R%s %s",
 401       f.deliver_selectstring_regex? "r" : "", deliver_selectstring);
 402     p += Ustrlen(CCS p);
 403     }
 404
 405   if (deliver_selectstring_sender)
 406     {
 407     snprintf(CS p, big_buffer_size - (p - big_buffer), " -S%s %s",
 408       f.deliver_selectstring_sender_regex? "r" : "", deliver_selectstring_sender);
 409     p += Ustrlen(CCS p);
 410     }
 411
 412   log_detail = string_copy(big_buffer);
 413   if (*queue_name)
 414     log_write(L_queue_run, LOG_MAIN, "Start '%s' queue run: %s",
 415       queue_name, log_detail);
 416   else
 417     log_write(L_queue_run, LOG_MAIN, "Start queue run: %s", log_detail);
 418
 419   single_id = start_id && stop_id && !f.queue_2stage
 420               && Ustrcmp(start_id, stop_id) == 0;
 421   }
 422
 423 /* If deliver_selectstring is a regex, compile it. */
 424
 425 if (deliver_selectstring && f.deliver_selectstring_regex)
 426   selectstring_regex = regex_must_compile(deliver_selectstring, TRUE, FALSE);
 427
 428 if (deliver_selectstring_sender && f.deliver_selectstring_sender_regex)
 429   selectstring_regex_sender =
 430     regex_must_compile(deliver_selectstring_sender, TRUE, FALSE);
 431
 432 /* If the spool is split into subdirectories, we want to process it one
 433 directory at a time, so as to spread out the directory scanning and the
 434 delivering when there are lots of messages involved, except when
 435 queue_run_in_order is set.
 436
 437 In the random order case, this loop runs once for the main directory (handling
 438 any messages therein), and then repeats for any subdirectories that were found.
 439 When the first argument of queue_get_spool_list() is 0, it scans the top
 440 directory, fills in subdirs, and sets subcount. The order of the directories is
 441 then randomized after the first time through, before they are scanned in
 442 subsequent iterations.
 443
 444 When the first argument of queue_get_spool_list() is -1 (for queue_run_in_
 445 order), it scans all directories and makes a single message list. */
 446
 447 for (int i = queue_run_in_order ? -1 : 0;
 448      i <= (queue_run_in_order ? -1 : subcount);
 449      i++)
 450   {
 451   rmark reset_point1 = store_mark();
 452
 453   DEBUG(D_queue_run)
 454     {
 455     if (i == 0)
 456       debug_printf("queue running main directory\n");
 457     else if (i == -1)
 458       debug_printf("queue running combined directories\n");
 459     else
 460       debug_printf("queue running subdirectory '%c'\n", subdirs[i]);
 461     }
 462
 463   for (queue_filename * fq = queue_get_spool_list(i, subdirs, &subcount,
 464                                              !queue_run_in_order, NULL);
 465        fq; fq = fq->next)
 466     {
 467     pid_t pid;
 468     int status;
 469     int pfd[2];
 470     struct stat statbuf;
 471     uschar buffer[256];
 472
 473     /* Unless deliveries are forced, if deliver_queue_load_max is non-negative,
 474     check that the load average is low enough to permit deliveries. */
 475
 476     if (!f.queue_run_force && deliver_queue_load_max >= 0)
 477       if ((load_average = os_getloadavg()) > deliver_queue_load_max)
 478         {
 479         log_write(L_queue_run, LOG_MAIN, "Abandon queue run: %s (load %.2f, max %.2f)",
 480           log_detail,
 481           (double)load_average/1000.0,
 482           (double)deliver_queue_load_max/1000.0);
 483         i = subcount;                 /* Don't process other directories */
 484         break;
 485         }
 486       else
 487         DEBUG(D_load) debug_printf("load average = %.2f max = %.2f\n",
 488           (double)load_average/1000.0,
 489           (double)deliver_queue_load_max/1000.0);
 490
 491     /* If initial of a 2-phase run, maintain a set of child procs
 492     to get disk parallelism */
 493
 494     if (f.queue_2stage && !queue_run_in_order)
 495       {
 496       int i;
 497       if (qpid[f.running_in_test_harness ? 0 : nelem(qpid) - 1])
 498         {
 499         DEBUG(D_queue_run) debug_printf("q2stage waiting for child %d\n", (int)qpid[0]);
 500         waitpid(qpid[0], NULL, 0);
 501         DEBUG(D_queue_run) debug_printf("q2stage reaped child %d\n", (int)qpid[0]);
 502         if (f.running_in_test_harness) i = 0;
 503         else for (i = 0; i < nelem(qpid) - 1; i++) qpid[i] = qpid[i+1];
 504         qpid[i] = 0;
 505         }
 506       else
 507         for (i = 0; qpid[i]; ) i++;
 508       if ((qpid[i] = exim_fork(US"qrun-phase-one")))
 509         continue;       /* parent loops around */
 510       }
 511
 512     /* Skip this message unless it's within the ID limits */
 513
 514     if (stop_id && Ustrncmp(fq->text, stop_id, MESSAGE_ID_LENGTH) > 0)
 515       goto go_around;
 516     if (start_id && Ustrncmp(fq->text, start_id, MESSAGE_ID_LENGTH) < 0)
 517       goto go_around;
 518
 519     /* Check that the message still exists */
 520
 521     message_subdir[0] = fq->dir_uschar;
 522     if (Ustat(spool_fname(US"input", message_subdir, fq->text, US""), &statbuf) < 0)
 523       goto go_around;
 524
 525     /* There are some tests that require the reading of the header file. Ensure
 526     the store used is scavenged afterwards so that this process doesn't keep
 527     growing its store. We have to read the header file again when actually
 528     delivering, but it's cheaper than forking a delivery process for each
 529     message when many are not going to be delivered. */
 530
 531     if (deliver_selectstring || deliver_selectstring_sender ||
 532         f.queue_run_first_delivery)
 533       {
 534       BOOL wanted = TRUE;
 535       BOOL orig_dont_deliver = f.dont_deliver;
 536       rmark reset_point2 = store_mark();
 537
 538       /* Restore the original setting of dont_deliver after reading the header,
 539       so that a setting for a particular message doesn't force it for any that
 540       follow. If the message is chosen for delivery, the header is read again
 541       in the deliver_message() function, in a subprocess. */
 542
 543       if (spool_read_header(fq->text, FALSE, TRUE) != spool_read_OK) goto go_around;
 544       f.dont_deliver = orig_dont_deliver;
 545
 546       /* Now decide if we want to deliver this message. As we have read the
 547       header file, we might as well do the freeze test now, and save forking
 548       another process. */
 549
 550       if (f.deliver_freeze && !f.deliver_force_thaw)
 551         {
 552         log_write(L_skip_delivery, LOG_MAIN, "Message is frozen");
 553         wanted = FALSE;
 554         }
 555
 556       /* Check first_delivery in the case when there are no message logs. */
 557
 558       else if (f.queue_run_first_delivery && !f.deliver_firsttime)
 559         {
 560         DEBUG(D_queue_run) debug_printf("%s: not first delivery\n", fq->text);
 561         wanted = FALSE;
 562         }
 563
 564       /* Check for a matching address if deliver_selectstring[_sender] is set.
 565       If so, we do a fully delivery - don't want to omit other addresses since
 566       their routing might trigger re-writing etc. */
 567
 568       /* Sender matching */
 569
 570       else if (  deliver_selectstring_sender
 571               && !(f.deliver_selectstring_sender_regex
 572                   ? (pcre_exec(selectstring_regex_sender, NULL,
 573                       CS sender_address, Ustrlen(sender_address), 0, PCRE_EOPT,
 574                       NULL, 0) >= 0)
 575                   : (strstric(sender_address, deliver_selectstring_sender, FALSE)
 576                       != NULL)
 577               )   )
 578         {
 579         DEBUG(D_queue_run) debug_printf("%s: sender address did not match %s\n",
 580           fq->text, deliver_selectstring_sender);
 581         wanted = FALSE;
 582         }
 583
 584       /* Recipient matching */
 585
 586       else if (deliver_selectstring)
 587         {
 588         int i;
 589         for (i = 0; i < recipients_count; i++)
 590           {
 591           uschar *address = recipients_list[i].address;
 592           if (  (f.deliver_selectstring_regex
 593                 ? (pcre_exec(selectstring_regex, NULL, CS address,
 594                      Ustrlen(address), 0, PCRE_EOPT, NULL, 0) >= 0)
 595                 : (strstric(address, deliver_selectstring, FALSE) != NULL)
 596                 )
 597              && tree_search(tree_nonrecipients, address) == NULL
 598              )
 599             break;
 600           }
 601
 602         if (i >= recipients_count)
 603           {
 604           DEBUG(D_queue_run)
 605             debug_printf("%s: no recipient address matched %s\n",
 606               fq->text, deliver_selectstring);
 607           wanted = FALSE;
 608           }
 609         }
 610
 611       /* Recover store used when reading the header */
 612
 613       spool_clear_header_globals();
 614       store_reset(reset_point2);
 615       if (!wanted) goto go_around;      /* With next message */
 616       }
 617
 618     /* OK, got a message we want to deliver. Create a pipe which will
 619     serve as a means of detecting when all the processes created by the
 620     delivery process are finished. This is relevant when the delivery
 621     process passes one or more SMTP channels on to its own children. The
 622     pipe gets passed down; by reading on it here we detect when the last
 623     descendent dies by the unblocking of the read. It's a pity that for
 624     most of the time the pipe isn't used, but creating a pipe should be
 625     pretty cheap. */
 626
 627     if (pipe(pfd) < 0)
 628       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to create pipe in queue "
 629         "runner process %d: %s", queue_run_pid, strerror(errno));
 630     queue_run_pipe = pfd[pipe_write];  /* To ensure it gets passed on. */
 631
 632     /* Make sure it isn't stdin. This seems unlikely, but just to be on the
 633     safe side... */
 634
 635     if (queue_run_pipe == 0)
 636       {
 637       queue_run_pipe = dup(queue_run_pipe);
 638       (void)close(0);
 639       }
 640
 641     /* Before forking to deliver the message, ensure any open and cached
 642     lookup files or databases are closed. Otherwise, closing in the subprocess
 643     can make the next subprocess have problems. There won't often be anything
 644     open here, but it is possible (e.g. if spool_directory is an expanded
 645     string). A single call before this loop would probably suffice, but just in
 646     case expansions get inserted at some point, I've taken the heavy-handed
 647     approach. When nothing is open, the call should be cheap. */
 648
 649     search_tidyup();
 650
 651     /* Now deliver the message; get the id by cutting the -H off the file
 652     name. The return of the process is zero if a delivery was attempted. */
 653
 654     set_process_info("running queue: %s", fq->text);
 655     fq->text[SPOOL_NAME_LENGTH-2] = 0;
 656 #ifdef MEASURE_TIMING
 657     report_time_since(&timestamp_startup, US"queue msg selected");
 658 #endif
 659
 660 #ifndef DISABLE_TLS
 661     if (!queue_tls_init)
 662       {
 663       queue_tls_init = TRUE;
 664       /* Preload TLS library info for smtp transports.  Once, and only if we
 665       have a delivery to do. */
 666       tls_client_creds_reload(FALSE);
 667       }
 668 #endif
 669
 670 single_item_retry:
 671     if ((pid = exim_fork(US"qrun-delivery")) == 0)
 672       {
 673       int rc;
 674       (void)close(pfd[pipe_read]);
 675       rc = deliver_message(fq->text, force_delivery, FALSE);
 676       exim_underbar_exit(rc == DELIVER_NOT_ATTEMPTED
 677                 ? EXIT_FAILURE : EXIT_SUCCESS);
 678       }
 679     if (pid < 0)
 680       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "fork of delivery process from "
 681         "queue runner %d failed\n", queue_run_pid);
 682
 683     /* Close the writing end of the synchronizing pipe in this process,
 684     then wait for the first level process to terminate. */
 685
 686     (void)close(pfd[pipe_write]);
 687     set_process_info("running queue: waiting for %s (%d)", fq->text, pid);
 688     while (wait(&status) != pid);
 689
 690     /* A zero return means a delivery was attempted; turn off the force flag
 691     for any subsequent calls unless queue_force is set. */
 692
 693     if (!(status & 0xffff)) force_delivery = f.queue_run_force;
 694
 695     /* If the process crashed, tell somebody */
 696
 697     else if (status & 0x00ff)
 698       log_write(0, LOG_MAIN|LOG_PANIC,
 699         "queue run: process %d crashed with signal %d while delivering %s",
 700         (int)pid, status & 0x00ff, fq->text);
 701
 702     /* If single-item delivery was untried (likely due to locking)
 703     retry once after a delay */
 704
 705     if (status & 0xff00 && single_id)
 706       {
 707       single_id = FALSE;
 708       DEBUG(D_queue_run) debug_printf("qrun single-item pause before retry\n");
 709       millisleep(500);
 710       DEBUG(D_queue_run) debug_printf("qrun single-item retry after pause\n");
 711       goto single_item_retry;
 712       }
 713
 714     /* Before continuing, wait till the pipe gets closed at the far end. This
 715     tells us that any children created by the delivery to re-use any SMTP
 716     channels have all finished. Since no process actually writes to the pipe,
 717     the mere fact that read() unblocks is enough. */
 718
 719     set_process_info("running queue: waiting for children of %d", pid);
 720     if ((status = read(pfd[pipe_read], buffer, sizeof(buffer))) != 0)
 721       log_write(0, LOG_MAIN|LOG_PANIC, status > 0 ?
 722         "queue run: unexpected data on pipe" : "queue run: error on pipe: %s",
 723         strerror(errno));
 724     (void)close(pfd[pipe_read]);
 725     set_process_info("running queue");
 726
 727     /* If initial of a 2-phase run, we are a child - so just exit */
 728     if (f.queue_2stage && !queue_run_in_order)
 729       exim_exit(EXIT_SUCCESS);
 730
 731     /* If we are in the test harness, and this is not the first of a 2-stage
 732     queue run, update fudged queue times. */
 733
 734     if (f.running_in_test_harness && !f.queue_2stage)
 735       {
 736       uschar * fqtnext = Ustrchr(fudged_queue_times, '/');
 737       if (fqtnext) fudged_queue_times = fqtnext + 1;
 738       }
 739
 740
 741     continue;
 742
 743   go_around:
 744     /* If initial of a 2-phase run, we are a child - so just exit */
 745     if (f.queue_2stage && !queue_run_in_order)
 746       exim_exit(EXIT_SUCCESS);
 747     }                                  /* End loop for list of messages */
 748
 749   tree_nonrecipients = NULL;
 750   store_reset(reset_point1);           /* Scavenge list of messages */
 751
 752   /* If this was the first time through for random order processing, and
 753   sub-directories have been found, randomize their order if necessary. */
 754
 755   if (i == 0 && subcount > 1 && !queue_run_in_order)
 756     for (int j = 1; j <= subcount; j++)
 757       {
 758       int r;
 759       if ((r = random_number(100)) >= 50)
 760         {
 761         int k = (r % subcount) + 1;
 762         int x = subdirs[j];
 763         subdirs[j] = subdirs[k];
 764         subdirs[k] = x;
 765         }
 766       }
 767   }                                    /* End loop for multiple directories */
 768
 769 /* If queue_2stage is true, we do it all again, with the 2stage flag
 770 turned off. */
 771
 772 if (f.queue_2stage)
 773   {
 774
 775   /* wait for last children */
 776   for (int i = 0; i < nelem(qpid); i++)
 777     if (qpid[i])
 778       {
 779       DEBUG(D_queue_run) debug_printf("q2stage reaped child %d\n", (int)qpid[i]);
 780       waitpid(qpid[i], NULL, 0);
 781       }
 782     else break;
 783
 784 #ifdef MEASURE_TIMING
 785   report_time_since(&timestamp_startup, US"queue_run 1st phase done");
 786 #endif
 787   f.queue_2stage = FALSE;
 788   queue_run(start_id, stop_id, TRUE);
 789   }
 790
 791 /* At top level, log the end of the run. */
 792
 793 if (!recurse)
 794   if (*queue_name)
 795     log_write(L_queue_run, LOG_MAIN, "End '%s' queue run: %s",
 796       queue_name, log_detail);
 797   else
 798     log_write(L_queue_run, LOG_MAIN, "End queue run: %s", log_detail);
 799 }
 800
 801
 802
 803
 804 /************************************************
 805 *         Count messages on the queue           *
 806 ************************************************/
 807
 808 /* Called as a result of -bpc
 809
 810 Arguments:  none
 811 Returns:    count
 812 */
 813
 814 unsigned
 815 queue_count(void)
 816 {
 817 int subcount;
 818 unsigned count = 0;
 819 uschar subdirs[64];
 820
 821 (void) queue_get_spool_list(-1,         /* entire queue */
 822                         subdirs,        /* for holding sub list */
 823                         &subcount,      /* for subcount */
 824                         FALSE,          /* not random */
 825                         &count);        /* just get the count */
 826 return count;
 827 }
 828
 829
 830 #define QUEUE_SIZE_AGE 60       /* update rate for queue_size */
 831
 832 unsigned
 833 queue_count_cached(void)
 834 {
 835 time_t now;
 836 if ((now = time(NULL)) >= queue_size_next)
 837   {
 838   queue_size = queue_count();
 839   queue_size_next = now + (f.running_in_test_harness ? 3 : QUEUE_SIZE_AGE);
 840   }
 841 return queue_size;
 842 }
 843
 844 /************************************************
 845 *          List extra deliveries                *
 846 ************************************************/
 847
 848 /* This is called from queue_list below to print out all addresses that
 849 have received a message but which were not primary addresses. That is, all
 850 the addresses in the tree of non-recipients that are not primary addresses.
 851 The tree has been scanned and the data field filled in for those that are
 852 primary addresses.
 853
 854 Argument:    points to the tree node
 855 Returns:     nothing
 856 */
 857
 858 static void
 859 queue_list_extras(tree_node *p)
 860 {
 861 if (p->left) queue_list_extras(p->left);
 862 if (!p->data.val) printf("       +D %s\n", p->name);
 863 if (p->right) queue_list_extras(p->right);
 864 }
 865
 866
 867
 868 /************************************************
 869 *          List messages on the queue           *
 870 ************************************************/
 871
 872 /* Or a given list of messages. In the "all" case, we get a list of file names
 873 as quickly as possible, then scan each one for information to output. If any
 874 disappear while we are processing, just leave them out, but give an error if an
 875 explicit list was given. This function is a top-level function that is obeyed
 876 as a result of the -bp argument. As there may be a lot of messages on the
 877 queue, we must tidy up the store after reading the headers for each one.
 878
 879 Arguments:
 880    option     0 => list top-level recipients, with "D" for those delivered
 881               1 => list only undelivered top-level recipients
 882               2 => as 0, plus any generated delivered recipients
 883               If 8 is added to any of these values, the queue is listed in
 884                 random order.
 885    list       => first of any message ids to list
 886    count      count of message ids; 0 => all
 887
 888 Returns:      nothing
 889 */
 890
 891 void
 892 queue_list(int option, uschar **list, int count)
 893 {
 894 int subcount;
 895 int now = (int)time(NULL);
 896 rmark reset_point;
 897 queue_filename * qf = NULL;
 898 uschar subdirs[64];
 899
 900 /* If given a list of messages, build a chain containing their ids. */
 901
 902 if (count > 0)
 903   {
 904   queue_filename *last = NULL;
 905   for (int i = 0; i < count; i++)
 906     {
 907     queue_filename *next =
 908       store_get(sizeof(queue_filename) + Ustrlen(list[i]) + 2, is_tainted(list[i]));
 909     sprintf(CS next->text, "%s-H", list[i]);
 910     next->dir_uschar = '*';
 911     next->next = NULL;
 912     if (i == 0) qf = next; else last->next = next;
 913     last = next;
 914     }
 915   }
 916
 917 /* Otherwise get a list of the entire queue, in order if necessary. */
 918
 919 else
 920   qf = queue_get_spool_list(
 921           -1,             /* entire queue */
 922           subdirs,        /* for holding sub list */
 923           &subcount,      /* for subcount */
 924           option >= 8,    /* randomize if required */
 925           NULL);          /* don't just count */
 926
 927 if (option >= 8) option -= 8;
 928
 929 /* Now scan the chain and print information, resetting store used
 930 each time. */
 931
 932 for (;
 933     qf && (reset_point = store_mark());
 934     spool_clear_header_globals(), store_reset(reset_point), qf = qf->next
 935     )
 936   {
 937   int rc, save_errno;
 938   int size = 0;
 939   BOOL env_read;
 940
 941   message_size = 0;
 942   message_subdir[0] = qf->dir_uschar;
 943   rc = spool_read_header(qf->text, FALSE, count <= 0);
 944   if (rc == spool_read_notopen && errno == ENOENT && count <= 0)
 945     continue;
 946   save_errno = errno;
 947
 948   env_read = (rc == spool_read_OK || rc == spool_read_hdrerror);
 949
 950   if (env_read)
 951     {
 952     int i, ptr;
 953     FILE *jread;
 954     struct stat statbuf;
 955     uschar * fname = spool_fname(US"input", message_subdir, qf->text, US"");
 956
 957     ptr = Ustrlen(fname)-1;
 958     fname[ptr] = 'D';
 959
 960     /* Add the data size to the header size; don't count the file name
 961     at the start of the data file, but add one for the notional blank line
 962     that precedes the data. */
 963
 964     if (Ustat(fname, &statbuf) == 0)
 965       size = message_size + statbuf.st_size - SPOOL_DATA_START_OFFSET + 1;
 966     i = (now - received_time.tv_sec)/60;  /* minutes on queue */
 967     if (i > 90)
 968       {
 969       i = (i + 30)/60;
 970       if (i > 72) printf("%2dd ", (i + 12)/24); else printf("%2dh ", i);
 971       }
 972     else printf("%2dm ", i);
 973
 974     /* Collect delivered addresses from any J file */
 975
 976     fname[ptr] = 'J';
 977     if ((jread = Ufopen(fname, "rb")))
 978       {
 979       while (Ufgets(big_buffer, big_buffer_size, jread) != NULL)
 980         {
 981         int n = Ustrlen(big_buffer);
 982         big_buffer[n-1] = 0;
 983         tree_add_nonrecipient(big_buffer);
 984         }
 985       (void)fclose(jread);
 986       }
 987     }
 988
 989   fprintf(stdout, "%s ", string_format_size(size, big_buffer));
 990   for (int i = 0; i < 16; i++) fputc(qf->text[i], stdout);
 991
 992   if (env_read && sender_address)
 993     {
 994     printf(" <%s>", sender_address);
 995     if (f.sender_set_untrusted) printf(" (%s)", originator_login);
 996     }
 997
 998   if (rc != spool_read_OK)
 999     {
1000     printf("\n    ");
1001     if (save_errno == ERRNO_SPOOLFORMAT)
1002       {
1003       struct stat statbuf;
1004       uschar * fname = spool_fname(US"input", message_subdir, qf->text, US"");
1005
1006       if (Ustat(fname, &statbuf) == 0)
1007         printf("*** spool format error: size=" OFF_T_FMT " ***",
1008           statbuf.st_size);
1009       else printf("*** spool format error ***");
1010       }
1011     else printf("*** spool read error: %s ***", strerror(save_errno));
1012     if (rc != spool_read_hdrerror)
1013       {
1014       printf("\n\n");
1015       continue;
1016       }
1017     }
1018
1019   if (f.deliver_freeze) printf(" *** frozen ***");
1020
1021   printf("\n");
1022
1023   if (recipients_list)
1024     {
1025     for (int i = 0; i < recipients_count; i++)
1026       {
1027       tree_node *delivered =
1028         tree_search(tree_nonrecipients, recipients_list[i].address);
1029       if (!delivered || option != 1)
1030         printf("        %s %s\n",
1031           delivered ? "D" : " ", recipients_list[i].address);
1032       if (delivered) delivered->data.val = TRUE;
1033       }
1034     if (option == 2 && tree_nonrecipients)
1035       queue_list_extras(tree_nonrecipients);
1036     printf("\n");
1037     }
1038   }
1039 }
1040
1041
1042
1043 /*************************************************
1044 *             Act on a specific message          *
1045 *************************************************/
1046
1047 /* Actions that require a list of addresses make use of argv/argc/
1048 recipients_arg. Other actions do not. This function does its own
1049 authority checking.
1050
1051 Arguments:
1052   id              id of the message to work on
1053   action          which action is required (MSG_xxx)
1054   argv            the original argv for Exim
1055   argc            the original argc for Exim
1056   recipients_arg  offset to the list of recipients in argv
1057
1058 Returns:          FALSE if there was any problem
1059 */
1060
1061 BOOL
1062 queue_action(uschar *id, int action, uschar **argv, int argc, int recipients_arg)
1063 {
1064 BOOL yield = TRUE;
1065 BOOL removed = FALSE;
1066 struct passwd *pw;
1067 uschar *doing = NULL;
1068 uschar *username;
1069 uschar *errmsg;
1070 uschar spoolname[32];
1071
1072 /* Set the global message_id variable, used when re-writing spool files. This
1073 also causes message ids to be added to log messages. */
1074
1075 Ustrcpy(message_id, id);
1076
1077 /* The "actions" that just list the files do not require any locking to be
1078 done. Only admin users may read the spool files. */
1079
1080 if (action >= MSG_SHOW_BODY)
1081   {
1082   int fd, rc;
1083   uschar *subdirectory, *suffix;
1084
1085   if (!f.admin_user)
1086     {
1087     printf("Permission denied\n");
1088     return FALSE;
1089     }
1090
1091   if (recipients_arg < argc)
1092     {
1093     printf("*** Only one message can be listed at once\n");
1094     return FALSE;
1095     }
1096
1097   if (action == MSG_SHOW_BODY)
1098     {
1099     subdirectory = US"input";
1100     suffix = US"-D";
1101     }
1102   else if (action == MSG_SHOW_HEADER)
1103     {
1104     subdirectory = US"input";
1105     suffix = US"-H";
1106     }
1107   else
1108     {
1109     subdirectory = US"msglog";
1110     suffix = US"";
1111     }
1112
1113   for (int i = 0; i < 2; i++)
1114     {
1115     set_subdir_str(message_subdir, id, i);
1116     if ((fd = Uopen(spool_fname(subdirectory, message_subdir, id, suffix),
1117                     O_RDONLY, 0)) >= 0)
1118       break;
1119     if (i == 0)
1120       continue;
1121
1122     printf("Failed to open %s file for %s%s: %s\n", subdirectory, id, suffix,
1123       strerror(errno));
1124     if (action == MSG_SHOW_LOG && !message_logs)
1125       printf("(No message logs are being created because the message_logs "
1126         "option is false.)\n");
1127     return FALSE;
1128     }
1129
1130   while((rc = read(fd, big_buffer, big_buffer_size)) > 0)
1131     rc = write(fileno(stdout), big_buffer, rc);
1132
1133   (void)close(fd);
1134   return TRUE;
1135   }
1136
1137 /* For actions that actually act, open and lock the data file to ensure that no
1138 other process is working on this message. If the file does not exist, continue
1139 only if the action is remove and the user is an admin user, to allow for
1140 tidying up broken states. */
1141
1142 if ((deliver_datafile = spool_open_datafile(id)) < 0)
1143   if (errno == ENOENT)
1144     {
1145     yield = FALSE;
1146     printf("Spool data file for %s does not exist\n", id);
1147     if (action != MSG_REMOVE || !f.admin_user) return FALSE;
1148     printf("Continuing, to ensure all files removed\n");
1149     }
1150   else
1151     {
1152     if (errno == 0) printf("Message %s is locked\n", id);
1153       else printf("Couldn't open spool file for %s: %s\n", id,
1154         strerror(errno));
1155     return FALSE;
1156     }
1157
1158 /* Read the spool header file for the message. Again, continue after an
1159 error only in the case of deleting by an administrator. Setting the third
1160 argument false causes it to look both in the main spool directory and in
1161 the appropriate subdirectory, and set message_subdir according to where it
1162 found the message. */
1163
1164 sprintf(CS spoolname, "%s-H", id);
1165 if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
1166   {
1167   yield = FALSE;
1168   if (errno != ERRNO_SPOOLFORMAT)
1169     printf("Spool read error for %s: %s\n", spoolname, strerror(errno));
1170   else
1171     printf("Spool format error for %s\n", spoolname);
1172   if (action != MSG_REMOVE || !f.admin_user)
1173     {
1174     (void)close(deliver_datafile);
1175     deliver_datafile = -1;
1176     return FALSE;
1177     }
1178   printf("Continuing to ensure all files removed\n");
1179   }
1180
1181 /* Check that the user running this process is entitled to operate on this
1182 message. Only admin users may freeze/thaw, add/cancel recipients, or otherwise
1183 mess about, but the original sender is permitted to remove a message. That's
1184 why we leave this check until after the headers are read. */
1185
1186 if (!f.admin_user && (action != MSG_REMOVE || real_uid != originator_uid))
1187   {
1188   printf("Permission denied\n");
1189   (void)close(deliver_datafile);
1190   deliver_datafile = -1;
1191   return FALSE;
1192   }
1193
1194 /* Set up the user name for logging. */
1195
1196 pw = getpwuid(real_uid);
1197 username = (pw != NULL)?
1198   US pw->pw_name : string_sprintf("uid %ld", (long int)real_uid);
1199
1200 /* Take the necessary action. */
1201
1202 if (action != MSG_SHOW_COPY) printf("Message %s ", id);
1203
1204 switch(action)
1205   {
1206   case MSG_SHOW_COPY:
1207     {
1208     transport_ctx tctx = {{0}};
1209     deliver_in_buffer = store_malloc(DELIVER_IN_BUFFER_SIZE);
1210     deliver_out_buffer = store_malloc(DELIVER_OUT_BUFFER_SIZE);
1211     tctx.u.fd = 1;
1212     (void) transport_write_message(&tctx, 0);
1213     break;
1214     }
1215
1216
1217   case MSG_FREEZE:
1218   if (f.deliver_freeze)
1219     {
1220     yield = FALSE;
1221     printf("is already frozen\n");
1222     }
1223   else
1224     {
1225     f.deliver_freeze = TRUE;
1226     f.deliver_manual_thaw = FALSE;
1227     deliver_frozen_at = time(NULL);
1228     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1229       {
1230       printf("is now frozen\n");
1231       log_write(0, LOG_MAIN, "frozen by %s", username);
1232       }
1233     else
1234       {
1235       yield = FALSE;
1236       printf("could not be frozen: %s\n", errmsg);
1237       }
1238     }
1239   break;
1240
1241
1242   case MSG_THAW:
1243   if (!f.deliver_freeze)
1244     {
1245     yield = FALSE;
1246     printf("is not frozen\n");
1247     }
1248   else
1249     {
1250     f.deliver_freeze = FALSE;
1251     f.deliver_manual_thaw = TRUE;
1252     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1253       {
1254       printf("is no longer frozen\n");
1255       log_write(0, LOG_MAIN, "unfrozen by %s", username);
1256       }
1257     else
1258       {
1259       yield = FALSE;
1260       printf("could not be unfrozen: %s\n", errmsg);
1261       }
1262     }
1263   break;
1264
1265
1266   /* We must ensure all files are removed from both the input directory
1267   and the appropriate subdirectory, to clean up cases when there are odd
1268   files left lying around in odd places. In the normal case message_subdir
1269   will have been set correctly by spool_read_header, but as this is a rare
1270   operation, just run everything twice. */
1271
1272   case MSG_REMOVE:
1273     {
1274     uschar suffix[3];
1275
1276     suffix[0] = '-';
1277     suffix[2] = 0;
1278     message_subdir[0] = id[5];
1279
1280     for (int j = 0; j < 2; message_subdir[0] = 0, j++)
1281       {
1282       uschar * fname = spool_fname(US"msglog", message_subdir, id, US"");
1283
1284       DEBUG(D_any) debug_printf(" removing %s", fname);
1285       if (Uunlink(fname) < 0)
1286         {
1287         if (errno != ENOENT)
1288           {
1289           yield = FALSE;
1290           printf("Error while removing %s: %s\n", fname, strerror(errno));
1291           }
1292         else DEBUG(D_any) debug_printf(" (no file)\n");
1293         }
1294       else
1295         {
1296         removed = TRUE;
1297         DEBUG(D_any) debug_printf(" (ok)\n");
1298         }
1299
1300       for (int i = 0; i < 3; i++)
1301         {
1302         uschar * fname;
1303
1304         suffix[1] = (US"DHJ")[i];
1305         fname = spool_fname(US"input", message_subdir, id, suffix);
1306
1307         DEBUG(D_any) debug_printf(" removing %s", fname);
1308         if (Uunlink(fname) < 0)
1309           {
1310           if (errno != ENOENT)
1311             {
1312             yield = FALSE;
1313             printf("Error while removing %s: %s\n", fname, strerror(errno));
1314             }
1315           else DEBUG(D_any) debug_printf(" (no file)\n");
1316           }
1317         else
1318           {
1319           removed = TRUE;
1320           DEBUG(D_any) debug_printf(" (done)\n");
1321           }
1322         }
1323       }
1324
1325     /* In the common case, the datafile is open (and locked), so give the
1326     obvious message. Otherwise be more specific. */
1327
1328     if (deliver_datafile >= 0) printf("has been removed\n");
1329       else printf("has been removed or did not exist\n");
1330     if (removed)
1331       {
1332 #ifndef DISABLE_EVENT
1333       if (event_action) for (int i = 0; i < recipients_count; i++)
1334         {
1335         tree_node *delivered =
1336           tree_search(tree_nonrecipients, recipients_list[i].address);
1337         if (!delivered)
1338           {
1339           uschar * save_local = deliver_localpart;
1340           const uschar * save_domain = deliver_domain;
1341           uschar * addr = recipients_list[i].address, * errmsg = NULL;
1342           int start, end, dom;
1343
1344           if (!parse_extract_address(addr, &errmsg, &start, &end, &dom, TRUE))
1345             log_write(0, LOG_MAIN|LOG_PANIC,
1346               "failed to parse address '%.100s'\n: %s", addr, errmsg);
1347           else
1348             {
1349             deliver_localpart =
1350               string_copyn(addr+start, dom ? (dom-1) - start : end - start);
1351             deliver_domain = dom
1352               ? CUS string_copyn(addr+dom, end - dom) : CUS"";
1353
1354             event_raise(event_action, US"msg:fail:internal",
1355               string_sprintf("message removed by %s", username));
1356
1357             deliver_localpart = save_local;
1358             deliver_domain = save_domain;
1359             }
1360           }
1361         }
1362       (void) event_raise(event_action, US"msg:complete", NULL);
1363 #endif
1364       log_write(0, LOG_MAIN, "removed by %s", username);
1365       log_write(0, LOG_MAIN, "Completed");
1366       }
1367     break;
1368     }
1369
1370
1371   case MSG_SETQUEUE:
1372     /* The global "queue_name_dest" is used as destination, "queue_name"
1373     as source */
1374
1375     spool_move_message(id, message_subdir, US"", US"");
1376     break;
1377
1378
1379   case MSG_MARK_ALL_DELIVERED:
1380   for (int i = 0; i < recipients_count; i++)
1381     tree_add_nonrecipient(recipients_list[i].address);
1382
1383   if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1384     {
1385     printf("has been modified\n");
1386     for (int i = 0; i < recipients_count; i++)
1387       log_write(0, LOG_MAIN, "address <%s> marked delivered by %s",
1388         recipients_list[i].address, username);
1389     }
1390   else
1391     {
1392     yield = FALSE;
1393     printf("- could not mark all delivered: %s\n", errmsg);
1394     }
1395   break;
1396
1397
1398   case MSG_EDIT_SENDER:
1399   if (recipients_arg < argc - 1)
1400     {
1401     yield = FALSE;
1402     printf("- only one sender address can be specified\n");
1403     break;
1404     }
1405   doing = US"editing sender";
1406   /* Fall through */
1407
1408   case MSG_ADD_RECIPIENT:
1409   if (doing == NULL) doing = US"adding recipient";
1410   /* Fall through */
1411
1412   case MSG_MARK_DELIVERED:
1413   if (doing == NULL) doing = US"marking as delivered";
1414
1415   /* Common code for EDIT_SENDER, ADD_RECIPIENT, & MARK_DELIVERED */
1416
1417   if (recipients_arg >= argc)
1418     {
1419     yield = FALSE;
1420     printf("- error while %s: no address given\n", doing);
1421     break;
1422     }
1423
1424   for (; recipients_arg < argc; recipients_arg++)
1425     {
1426     int start, end, domain;
1427     uschar *errmess;
1428     uschar *recipient =
1429       parse_extract_address(argv[recipients_arg], &errmess, &start, &end,
1430         &domain, (action == MSG_EDIT_SENDER));
1431
1432     if (!recipient)
1433       {
1434       yield = FALSE;
1435       printf("- error while %s:\n  bad address %s: %s\n",
1436         doing, argv[recipients_arg], errmess);
1437       }
1438     else if (*recipient && domain == 0)
1439       {
1440       yield = FALSE;
1441       printf("- error while %s:\n  bad address %s: "
1442         "domain missing\n", doing, argv[recipients_arg]);
1443       }
1444     else
1445       {
1446       if (action == MSG_ADD_RECIPIENT)
1447         {
1448 #ifdef SUPPORT_I18N
1449         if (string_is_utf8(recipient)) allow_utf8_domains = message_smtputf8 = TRUE;
1450 #endif
1451         receive_add_recipient(recipient, -1);
1452         log_write(0, LOG_MAIN, "recipient <%s> added by %s",
1453           recipient, username);
1454         }
1455       else if (action == MSG_MARK_DELIVERED)
1456         {
1457         int i;
1458         for (i = 0; i < recipients_count; i++)
1459           if (Ustrcmp(recipients_list[i].address, recipient) == 0) break;
1460         if (i >= recipients_count)
1461           {
1462           printf("- error while %s:\n  %s is not a recipient:"
1463             " message not updated\n", doing, recipient);
1464           yield = FALSE;
1465           }
1466         else
1467           {
1468           tree_add_nonrecipient(recipients_list[i].address);
1469           log_write(0, LOG_MAIN, "address <%s> marked delivered by %s",
1470             recipient, username);
1471           }
1472         }
1473       else  /* MSG_EDIT_SENDER */
1474         {
1475 #ifdef SUPPORT_I18N
1476         if (string_is_utf8(recipient)) allow_utf8_domains = message_smtputf8 = TRUE;
1477 #endif
1478         sender_address = recipient;
1479         log_write(0, LOG_MAIN, "sender address changed to <%s> by %s",
1480           recipient, username);
1481         }
1482       }
1483     }
1484
1485   if (yield)
1486     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1487       printf("has been modified\n");
1488     else
1489       {
1490       yield = FALSE;
1491       printf("- while %s: %s\n", doing, errmsg);
1492       }
1493
1494   break;
1495   }
1496
1497 /* Closing the datafile releases the lock and permits other processes
1498 to operate on the message (if it still exists). */
1499
1500 if (deliver_datafile >= 0)
1501   {
1502   (void)close(deliver_datafile);
1503   deliver_datafile = -1;
1504   }
1505 return yield;
1506 }
1507
1508
1509
1510 /*************************************************
1511 *       Check the queue_only_file condition      *
1512 *************************************************/
1513
1514 /* The queue_only_file option forces certain kinds of queueing if a given file
1515 exists.
1516
1517 Arguments:  none
1518 Returns:    nothing
1519 */
1520
1521 void
1522 queue_check_only(void)
1523 {
1524 int sep = 0;
1525 struct stat statbuf;
1526 const uschar * s = queue_only_file;
1527 uschar * ss;
1528
1529 if (s)
1530   while ((ss = string_nextinlist(&s, &sep, NULL, 0)))
1531     if (Ustrncmp(ss, "smtp", 4) == 0)
1532       {
1533       ss += 4;
1534       if (Ustat(ss, &statbuf) == 0)
1535         {
1536         f.queue_smtp = TRUE;
1537         DEBUG(D_receive) debug_printf("queue_smtp set because %s exists\n", ss);
1538         }
1539       }
1540     else
1541       if (Ustat(ss, &statbuf) == 0)
1542         {
1543         queue_only = TRUE;
1544         DEBUG(D_receive) debug_printf("queue_only set because %s exists\n", ss);
1545         }
1546 }
1547
1548
1549
1550 /******************************************************************************/
1551 /******************************************************************************/
1552
1553 #ifndef DISABLE_QUEUE_RAMP
1554 void
1555 queue_notify_daemon(const uschar * msgid)
1556 {
1557 uschar buf[MESSAGE_ID_LENGTH + 2];
1558 int fd;
1559
1560 DEBUG(D_queue_run) debug_printf("%s: %s\n", __FUNCTION__, msgid);
1561
1562 buf[0] = NOTIFY_MSG_QRUN;
1563 memcpy(buf+1, msgid, MESSAGE_ID_LENGTH+1);
1564
1565 if ((fd = socket(AF_UNIX, SOCK_DGRAM, 0)) >= 0)
1566   {
1567   struct sockaddr_un sa_un = {.sun_family = AF_UNIX};
1568
1569 #ifdef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1570   int len = offsetof(struct sockaddr_un, sun_path) + 1
1571     + snprintf(sa_un.sun_path+1, sizeof(sa_un.sun_path)-1, "%s",
1572                 expand_string(notifier_socket));
1573   sa_un.sun_path[0] = 0;
1574 #else
1575   int len = offsetof(struct sockaddr_un, sun_path)
1576     + snprintf(sa_un.sun_path, sizeof(sa_un.sun_path), "%s",
1577                 expand_string(notifier_socket));
1578 #endif
1579
1580   if (sendto(fd, buf, sizeof(buf), 0, (struct sockaddr *)&sa_un, len) < 0)
1581     DEBUG(D_queue_run)
1582       debug_printf("%s: sendto %s\n", __FUNCTION__, strerror(errno));
1583   close(fd);
1584   }
1585 else DEBUG(D_queue_run) debug_printf(" socket: %s\n", strerror(errno));
1586 }
1587 #endif
1588
1589 #endif /*!COMPILE_UTILITY*/
1590
1591 /* End of queue.c */