src/src/queue.c

   1 /*************************************************
   2 *     Exim - an Internet mail transport agent    *
   3 *************************************************/
   4
   5 /* Copyright (c) University of Cambridge 1995 - 2018 */
   6 /* Copyright (c) The Exim Maintainers 2020 */
   7 /* See the file NOTICE for conditions of use and distribution. */
   8
   9 /* Functions that operate on the input queue. */
  10
  11
  12 #include "exim.h"
  13
  14
  15
  16
  17
  18
  19
  20 #ifndef COMPILE_UTILITY
  21
  22 /* The number of nodes to use for the bottom-up merge sort when a list of queue
  23 items is to be ordered. The code for this sort was contributed as a patch by
  24 Michael Haardt. */
  25
  26 #define LOG2_MAXNODES 32
  27
  28
  29 #ifndef DISABLE_TLS
  30 static BOOL queue_tls_init = FALSE;
  31 #endif
  32
  33 /*************************************************
  34 *  Helper sort function for queue_get_spool_list *
  35 *************************************************/
  36
  37 /* This function is used when sorting the queue list in the function
  38 queue_get_spool_list() below.
  39
  40 Arguments:
  41   a            points to an ordered list of queue_filename items
  42   b            points to another ordered list
  43
  44 Returns:       a pointer to a merged ordered list
  45 */
  46
  47 static queue_filename *
  48 merge_queue_lists(queue_filename *a, queue_filename *b)
  49 {
  50 queue_filename *first = NULL;
  51 queue_filename **append = &first;
  52
  53 while (a && b)
  54   {
  55   int d;
  56   if ((d = Ustrncmp(a->text, b->text, 6)) == 0)
  57     d = Ustrcmp(a->text + 14, b->text + 14);
  58   if (d < 0)
  59     {
  60     *append = a;
  61     append= &a->next;
  62     a = a->next;
  63     }
  64   else
  65     {
  66     *append = b;
  67     append= &b->next;
  68     b = b->next;
  69     }
  70   }
  71
  72 *append = a ? a : b;
  73 return first;
  74 }
  75
  76
  77
  78
  79
  80 /*************************************************
  81 *             Get list of spool files            *
  82 *************************************************/
  83
  84 /* Scan the spool directory and return a list of the relevant file names
  85 therein. Single-character sub-directories are handled as follows:
  86
  87   If the first argument is > 0, a sub-directory is scanned; the letter is
  88   taken from the nth entry in subdirs.
  89
  90   If the first argument is 0, sub-directories are not scanned. However, a
  91   list of them is returned.
  92
  93   If the first argument is < 0, sub-directories are scanned for messages,
  94   and a single, unified list is created. The returned data blocks contain the
  95   identifying character of the subdirectory, if any. The subdirs vector is
  96   still required as an argument.
  97
  98 If the randomize argument is TRUE, messages are returned in "randomized" order.
  99 Actually, the order is anything but random, but the algorithm is cheap, and the
 100 point is simply to ensure that the same order doesn't occur every time, in case
 101 a particular message is causing a remote MTA to barf - we would like to try
 102 other messages to that MTA first.
 103
 104 If the randomize argument is FALSE, sort the list according to the file name.
 105 This should give the order in which the messages arrived. It is normally used
 106 only for presentation to humans, in which case the (possibly expensive) sort
 107 that it does is not part of the normal operational code. However, if
 108 queue_run_in_order is set, sorting has to take place for queue runs as well.
 109 When randomize is FALSE, the first argument is normally -1, so all messages are
 110 included.
 111
 112 Arguments:
 113   subdiroffset   sub-directory character offset, or 0 or -1 (see above)
 114   subdirs        vector to store list of subdirchars
 115   subcount       pointer to int in which to store count of subdirs
 116   randomize      TRUE if the order of the list is to be unpredictable
 117   pcount         If not NULL, fill in with count of files and do not return list
 118
 119 Returns:         pointer to a chain of queue name items
 120 */
 121
 122 static queue_filename *
 123 queue_get_spool_list(int subdiroffset, uschar *subdirs, int *subcount,
 124   BOOL randomize, unsigned * pcount)
 125 {
 126 int i;
 127 int flags = 0;
 128 int resetflags = -1;
 129 int subptr;
 130 queue_filename *yield = NULL;
 131 queue_filename *last = NULL;
 132 uschar buffer[256];
 133 queue_filename *root[LOG2_MAXNODES];
 134
 135 /* When randomizing, the file names are added to the start or end of the list
 136 according to the bits of the flags variable. Get a collection of bits from the
 137 current time. Use the bottom 16 and just keep re-using them if necessary. When
 138 not randomizing, initialize the sublists for the bottom-up merge sort. */
 139
 140 if (pcount)
 141   *pcount = 0;
 142 else if (randomize)
 143   resetflags = time(NULL) & 0xFFFF;
 144 else
 145    for (i = 0; i < LOG2_MAXNODES; i++)
 146      root[i] = NULL;
 147
 148 /* If processing the full queue, or just the top-level, start at the base
 149 directory, and initialize the first subdirectory name (as none). Otherwise,
 150 start at the sub-directory offset. */
 151
 152 if (subdiroffset <= 0)
 153   {
 154   i = 0;
 155   subdirs[0] = 0;
 156   *subcount = 0;
 157   }
 158 else
 159   i = subdiroffset;
 160
 161 /* Set up prototype for the directory name. */
 162
 163 spool_pname_buf(buffer, sizeof(buffer));
 164 buffer[sizeof(buffer) - 3] = 0;
 165 subptr = Ustrlen(buffer);
 166 buffer[subptr+2] = 0;               /* terminator for lengthened name */
 167
 168 /* This loop runs at least once, for the main or given directory, and then as
 169 many times as necessary to scan any subdirectories encountered in the main
 170 directory, if they are to be scanned at this time. */
 171
 172 for (; i <= *subcount; i++)
 173   {
 174   int count = 0;
 175   int subdirchar = subdirs[i];      /* 0 for main directory */
 176   DIR *dd;
 177
 178   if (subdirchar != 0)
 179     {
 180     buffer[subptr] = '/';
 181     buffer[subptr+1] = subdirchar;
 182     }
 183
 184   DEBUG(D_queue_run) debug_printf("looking in %s\n", buffer);
 185   if (!(dd = exim_opendir(buffer)))
 186     continue;
 187
 188   /* Now scan the directory. */
 189
 190   for (struct dirent *ent; ent = readdir(dd); )
 191     {
 192     uschar *name = US ent->d_name;
 193     int len = Ustrlen(name);
 194
 195     /* Count entries */
 196
 197     count++;
 198
 199     /* If we find a single alphameric sub-directory in the base directory,
 200     add it to the list for subsequent scans. */
 201
 202     if (i == 0 && len == 1 && isalnum(*name))
 203       {
 204       *subcount = *subcount + 1;
 205       subdirs[*subcount] = *name;
 206       continue;
 207       }
 208
 209     /* Otherwise, if it is a header spool file, add it to the list */
 210
 211     if (len == SPOOL_NAME_LENGTH &&
 212         Ustrcmp(name + SPOOL_NAME_LENGTH - 2, "-H") == 0)
 213       if (pcount)
 214         (*pcount)++;
 215       else
 216         {
 217         queue_filename *next =
 218           store_get(sizeof(queue_filename) + Ustrlen(name), is_tainted(name));
 219         Ustrcpy(next->text, name);
 220         next->dir_uschar = subdirchar;
 221
 222         /* Handle the creation of a randomized list. The first item becomes both
 223         the top and bottom of the list. Subsequent items are inserted either at
 224         the top or the bottom, randomly. This is, I argue, faster than doing a
 225         sort by allocating a random number to each item, and it also saves having
 226         to store the number with each item. */
 227
 228         if (randomize)
 229           if (!yield)
 230             {
 231             next->next = NULL;
 232             yield = last = next;
 233             }
 234           else
 235             {
 236             if (flags == 0)
 237               flags = resetflags;
 238             if ((flags & 1) == 0)
 239               {
 240               next->next = yield;
 241               yield = next;
 242               }
 243             else
 244               {
 245               next->next = NULL;
 246               last->next = next;
 247               last = next;
 248               }
 249             flags = flags >> 1;
 250             }
 251
 252         /* Otherwise do a bottom-up merge sort based on the name. */
 253
 254         else
 255           {
 256           next->next = NULL;
 257           for (int j = 0; j < LOG2_MAXNODES; j++)
 258             if (root[j])
 259               {
 260               next = merge_queue_lists(next, root[j]);
 261               root[j] = j == LOG2_MAXNODES - 1 ? next : NULL;
 262               }
 263             else
 264               {
 265               root[j] = next;
 266               break;
 267               }
 268           }
 269         }
 270     }
 271
 272   /* Finished with this directory */
 273
 274   closedir(dd);
 275
 276   /* If we have just scanned a sub-directory, and it was empty (count == 2
 277   implies just "." and ".." entries), and Exim is no longer configured to
 278   use sub-directories, attempt to get rid of it. At the same time, try to
 279   get rid of any corresponding msglog subdirectory. These are just cosmetic
 280   tidying actions, so just ignore failures. If we are scanning just a single
 281   sub-directory, break the loop. */
 282
 283   if (i != 0)
 284     {
 285     if (!split_spool_directory && count <= 2)
 286       {
 287       uschar subdir[2];
 288
 289       rmdir(CS buffer);
 290       subdir[0] = subdirchar; subdir[1] = 0;
 291       rmdir(CS spool_dname(US"msglog", subdir));
 292       }
 293     if (subdiroffset > 0) break;    /* Single sub-directory */
 294     }
 295
 296   /* If we have just scanned the base directory, and subdiroffset is 0,
 297   we do not want to continue scanning the sub-directories. */
 298
 299   else if (subdiroffset == 0)
 300     break;
 301   }    /* Loop for multiple subdirectories */
 302
 303 /* When using a bottom-up merge sort, do the final merging of the sublists.
 304 Then pass back the final list of file items. */
 305
 306 if (!pcount && !randomize)
 307   for (i = 0; i < LOG2_MAXNODES; ++i)
 308     yield = merge_queue_lists(yield, root[i]);
 309
 310 return yield;
 311 }
 312
 313
 314
 315
 316 /*************************************************
 317 *              Perform a queue run               *
 318 *************************************************/
 319
 320 /* The arguments give the messages to start and stop at; NULL means start at
 321 the beginning or stop at the end. If the given start message doesn't exist, we
 322 start at the next lexically greater one, and likewise we stop at the after the
 323 previous lexically lesser one if the given stop message doesn't exist. Because
 324 a queue run can take some time, stat each file before forking, in case it has
 325 been delivered in the meantime by some other means.
 326
 327 The global variables queue_run_force and queue_run_local may be set to cause
 328 forced deliveries or local-only deliveries, respectively.
 329
 330 If deliver_selectstring[_sender] is not NULL, skip messages whose recipients do
 331 not contain the string. As this option is typically used when a machine comes
 332 back online, we want to ensure that at least one delivery attempt takes place,
 333 so force the first one. The selecting string can optionally be a regex, or
 334 refer to the sender instead of recipients.
 335
 336 If queue_2stage is set, the queue is scanned twice. The first time, queue_smtp
 337 is set so that routing is done for all messages. Thus in the second run those
 338 that are routed to the same host should go down the same SMTP connection.
 339
 340 Arguments:
 341   start_id   message id to start at, or NULL for all
 342   stop_id    message id to end at, or NULL for all
 343   recurse    TRUE if recursing for 2-stage run
 344
 345 Returns:     nothing
 346 */
 347
 348 void
 349 queue_run(uschar *start_id, uschar *stop_id, BOOL recurse)
 350 {
 351 BOOL force_delivery = f.queue_run_force || deliver_selectstring != NULL ||
 352   deliver_selectstring_sender != NULL;
 353 const pcre *selectstring_regex = NULL;
 354 const pcre *selectstring_regex_sender = NULL;
 355 uschar *log_detail = NULL;
 356 int subcount = 0;
 357 uschar subdirs[64];
 358 pid_t qpid[4] = {0};    /* Parallelism factor for q2stage 1st phase */
 359 BOOL single_id = FALSE;
 360
 361 #ifdef MEASURE_TIMING
 362 report_time_since(&timestamp_startup, US"queue_run start");
 363 #endif
 364
 365 /* Cancel any specific queue domains. Turn off the flag that causes SMTP
 366 deliveries not to happen, unless doing a 2-stage queue run, when the SMTP flag
 367 gets set. Save the queue_runner's pid and the flag that indicates any
 368 deliveries run directly from this process. Deliveries that are run by handing
 369 on TCP/IP channels have queue_run_pid set, but not queue_running. */
 370
 371 queue_domains = NULL;
 372 queue_smtp_domains = NULL;
 373 f.queue_smtp = f.queue_2stage;
 374
 375 queue_run_pid = getpid();
 376 f.queue_running = TRUE;
 377
 378 /* Log the true start of a queue run, and fancy options */
 379
 380 if (!recurse)
 381   {
 382   uschar extras[8];
 383   uschar *p = extras;
 384
 385   if (f.queue_2stage) *p++ = 'q';
 386   if (f.queue_run_first_delivery) *p++ = 'i';
 387   if (f.queue_run_force) *p++ = 'f';
 388   if (f.deliver_force_thaw) *p++ = 'f';
 389   if (f.queue_run_local) *p++ = 'l';
 390   *p = 0;
 391
 392   p = big_buffer;
 393   p += sprintf(CS p, "pid=%d", (int)queue_run_pid);
 394
 395   if (extras[0] != 0)
 396     p += sprintf(CS p, " -q%s", extras);
 397
 398   if (deliver_selectstring)
 399     p += sprintf(CS p, " -R%s %s", f.deliver_selectstring_regex? "r" : "",
 400       deliver_selectstring);
 401
 402   if (deliver_selectstring_sender)
 403     p += sprintf(CS p, " -S%s %s", f.deliver_selectstring_sender_regex? "r" : "",
 404       deliver_selectstring_sender);
 405
 406   log_detail = string_copy(big_buffer);
 407   if (*queue_name)
 408     log_write(L_queue_run, LOG_MAIN, "Start '%s' queue run: %s",
 409       queue_name, log_detail);
 410   else
 411     log_write(L_queue_run, LOG_MAIN, "Start queue run: %s", log_detail);
 412
 413   single_id = start_id && stop_id && !f.queue_2stage
 414               && Ustrcmp(start_id, stop_id) == 0;
 415   }
 416
 417 /* If deliver_selectstring is a regex, compile it. */
 418
 419 if (deliver_selectstring && f.deliver_selectstring_regex)
 420   selectstring_regex = regex_must_compile(deliver_selectstring, TRUE, FALSE);
 421
 422 if (deliver_selectstring_sender && f.deliver_selectstring_sender_regex)
 423   selectstring_regex_sender =
 424     regex_must_compile(deliver_selectstring_sender, TRUE, FALSE);
 425
 426 /* If the spool is split into subdirectories, we want to process it one
 427 directory at a time, so as to spread out the directory scanning and the
 428 delivering when there are lots of messages involved, except when
 429 queue_run_in_order is set.
 430
 431 In the random order case, this loop runs once for the main directory (handling
 432 any messages therein), and then repeats for any subdirectories that were found.
 433 When the first argument of queue_get_spool_list() is 0, it scans the top
 434 directory, fills in subdirs, and sets subcount. The order of the directories is
 435 then randomized after the first time through, before they are scanned in
 436 subsequent iterations.
 437
 438 When the first argument of queue_get_spool_list() is -1 (for queue_run_in_
 439 order), it scans all directories and makes a single message list. */
 440
 441 for (int i = queue_run_in_order ? -1 : 0;
 442      i <= (queue_run_in_order ? -1 : subcount);
 443      i++)
 444   {
 445   rmark reset_point1 = store_mark();
 446
 447   DEBUG(D_queue_run)
 448     {
 449     if (i == 0)
 450       debug_printf("queue running main directory\n");
 451     else if (i == -1)
 452       debug_printf("queue running combined directories\n");
 453     else
 454       debug_printf("queue running subdirectory '%c'\n", subdirs[i]);
 455     }
 456
 457   for (queue_filename * fq = queue_get_spool_list(i, subdirs, &subcount,
 458                                              !queue_run_in_order, NULL);
 459        fq; fq = fq->next)
 460     {
 461     pid_t pid;
 462     int status;
 463     int pfd[2];
 464     struct stat statbuf;
 465     uschar buffer[256];
 466
 467     /* Unless deliveries are forced, if deliver_queue_load_max is non-negative,
 468     check that the load average is low enough to permit deliveries. */
 469
 470     if (!f.queue_run_force && deliver_queue_load_max >= 0)
 471       if ((load_average = os_getloadavg()) > deliver_queue_load_max)
 472         {
 473         log_write(L_queue_run, LOG_MAIN, "Abandon queue run: %s (load %.2f, max %.2f)",
 474           log_detail,
 475           (double)load_average/1000.0,
 476           (double)deliver_queue_load_max/1000.0);
 477         i = subcount;                 /* Don't process other directories */
 478         break;
 479         }
 480       else
 481         DEBUG(D_load) debug_printf("load average = %.2f max = %.2f\n",
 482           (double)load_average/1000.0,
 483           (double)deliver_queue_load_max/1000.0);
 484
 485     /* If initial of a 2-phase run, maintain a set of child procs
 486     to get disk parallelism */
 487
 488     if (f.queue_2stage && !queue_run_in_order)
 489       {
 490       int i;
 491       if (qpid[f.running_in_test_harness ? 0 : nelem(qpid) - 1])
 492         {
 493         DEBUG(D_queue_run) debug_printf("q2stage waiting for child %d\n", (int)qpid[0]);
 494         waitpid(qpid[0], NULL, 0);
 495         DEBUG(D_queue_run) debug_printf("q2stage reaped child %d\n", (int)qpid[0]);
 496         if (f.running_in_test_harness) i = 0;
 497         else for (i = 0; i < nelem(qpid) - 1; i++) qpid[i] = qpid[i+1];
 498         qpid[i] = 0;
 499         }
 500       else
 501         for (i = 0; qpid[i]; ) i++;
 502       if ((qpid[i] = exim_fork(US"qrun-phase-one")))
 503         continue;       /* parent loops around */
 504       }
 505
 506     /* Skip this message unless it's within the ID limits */
 507
 508     if (stop_id && Ustrncmp(fq->text, stop_id, MESSAGE_ID_LENGTH) > 0)
 509       goto go_around;
 510     if (start_id && Ustrncmp(fq->text, start_id, MESSAGE_ID_LENGTH) < 0)
 511       goto go_around;
 512
 513     /* Check that the message still exists */
 514
 515     message_subdir[0] = fq->dir_uschar;
 516     if (Ustat(spool_fname(US"input", message_subdir, fq->text, US""), &statbuf) < 0)
 517       goto go_around;
 518
 519     /* There are some tests that require the reading of the header file. Ensure
 520     the store used is scavenged afterwards so that this process doesn't keep
 521     growing its store. We have to read the header file again when actually
 522     delivering, but it's cheaper than forking a delivery process for each
 523     message when many are not going to be delivered. */
 524
 525     if (deliver_selectstring || deliver_selectstring_sender ||
 526         f.queue_run_first_delivery)
 527       {
 528       BOOL wanted = TRUE;
 529       BOOL orig_dont_deliver = f.dont_deliver;
 530       rmark reset_point2 = store_mark();
 531
 532       /* Restore the original setting of dont_deliver after reading the header,
 533       so that a setting for a particular message doesn't force it for any that
 534       follow. If the message is chosen for delivery, the header is read again
 535       in the deliver_message() function, in a subprocess. */
 536
 537       if (spool_read_header(fq->text, FALSE, TRUE) != spool_read_OK) goto go_around;
 538       f.dont_deliver = orig_dont_deliver;
 539
 540       /* Now decide if we want to deliver this message. As we have read the
 541       header file, we might as well do the freeze test now, and save forking
 542       another process. */
 543
 544       if (f.deliver_freeze && !f.deliver_force_thaw)
 545         {
 546         log_write(L_skip_delivery, LOG_MAIN, "Message is frozen");
 547         wanted = FALSE;
 548         }
 549
 550       /* Check first_delivery in the case when there are no message logs. */
 551
 552       else if (f.queue_run_first_delivery && !f.deliver_firsttime)
 553         {
 554         DEBUG(D_queue_run) debug_printf("%s: not first delivery\n", fq->text);
 555         wanted = FALSE;
 556         }
 557
 558       /* Check for a matching address if deliver_selectstring[_sender] is set.
 559       If so, we do a fully delivery - don't want to omit other addresses since
 560       their routing might trigger re-writing etc. */
 561
 562       /* Sender matching */
 563
 564       else if (  deliver_selectstring_sender
 565               && !(f.deliver_selectstring_sender_regex
 566                   ? (pcre_exec(selectstring_regex_sender, NULL,
 567                       CS sender_address, Ustrlen(sender_address), 0, PCRE_EOPT,
 568                       NULL, 0) >= 0)
 569                   : (strstric(sender_address, deliver_selectstring_sender, FALSE)
 570                       != NULL)
 571               )   )
 572         {
 573         DEBUG(D_queue_run) debug_printf("%s: sender address did not match %s\n",
 574           fq->text, deliver_selectstring_sender);
 575         wanted = FALSE;
 576         }
 577
 578       /* Recipient matching */
 579
 580       else if (deliver_selectstring)
 581         {
 582         int i;
 583         for (i = 0; i < recipients_count; i++)
 584           {
 585           uschar *address = recipients_list[i].address;
 586           if (  (f.deliver_selectstring_regex
 587                 ? (pcre_exec(selectstring_regex, NULL, CS address,
 588                      Ustrlen(address), 0, PCRE_EOPT, NULL, 0) >= 0)
 589                 : (strstric(address, deliver_selectstring, FALSE) != NULL)
 590                 )
 591              && tree_search(tree_nonrecipients, address) == NULL
 592              )
 593             break;
 594           }
 595
 596         if (i >= recipients_count)
 597           {
 598           DEBUG(D_queue_run)
 599             debug_printf("%s: no recipient address matched %s\n",
 600               fq->text, deliver_selectstring);
 601           wanted = FALSE;
 602           }
 603         }
 604
 605       /* Recover store used when reading the header */
 606
 607       spool_clear_header_globals();
 608       store_reset(reset_point2);
 609       if (!wanted) goto go_around;      /* With next message */
 610       }
 611
 612     /* OK, got a message we want to deliver. Create a pipe which will
 613     serve as a means of detecting when all the processes created by the
 614     delivery process are finished. This is relevant when the delivery
 615     process passes one or more SMTP channels on to its own children. The
 616     pipe gets passed down; by reading on it here we detect when the last
 617     descendent dies by the unblocking of the read. It's a pity that for
 618     most of the time the pipe isn't used, but creating a pipe should be
 619     pretty cheap. */
 620
 621     if (pipe(pfd) < 0)
 622       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to create pipe in queue "
 623         "runner process %d: %s", queue_run_pid, strerror(errno));
 624     queue_run_pipe = pfd[pipe_write];  /* To ensure it gets passed on. */
 625
 626     /* Make sure it isn't stdin. This seems unlikely, but just to be on the
 627     safe side... */
 628
 629     if (queue_run_pipe == 0)
 630       {
 631       queue_run_pipe = dup(queue_run_pipe);
 632       (void)close(0);
 633       }
 634
 635     /* Before forking to deliver the message, ensure any open and cached
 636     lookup files or databases are closed. Otherwise, closing in the subprocess
 637     can make the next subprocess have problems. There won't often be anything
 638     open here, but it is possible (e.g. if spool_directory is an expanded
 639     string). A single call before this loop would probably suffice, but just in
 640     case expansions get inserted at some point, I've taken the heavy-handed
 641     approach. When nothing is open, the call should be cheap. */
 642
 643     search_tidyup();
 644
 645     /* Now deliver the message; get the id by cutting the -H off the file
 646     name. The return of the process is zero if a delivery was attempted. */
 647
 648     set_process_info("running queue: %s", fq->text);
 649     fq->text[SPOOL_NAME_LENGTH-2] = 0;
 650 #ifdef MEASURE_TIMING
 651     report_time_since(&timestamp_startup, US"queue msg selected");
 652 #endif
 653
 654 #ifndef DISABLE_TLS
 655     if (!queue_tls_init)
 656       {
 657       queue_tls_init = TRUE;
 658       /* Preload TLS library info for smtp transports.  Once, and only if we
 659       have a delivery to do. */
 660       tls_client_creds_reload(FALSE);
 661       }
 662 #endif
 663
 664 single_item_retry:
 665     if ((pid = exim_fork(US"qrun-delivery")) == 0)
 666       {
 667       int rc;
 668       (void)close(pfd[pipe_read]);
 669       rc = deliver_message(fq->text, force_delivery, FALSE);
 670       exim_underbar_exit(rc == DELIVER_NOT_ATTEMPTED
 671                 ? EXIT_FAILURE : EXIT_SUCCESS);
 672       }
 673     if (pid < 0)
 674       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "fork of delivery process from "
 675         "queue runner %d failed\n", queue_run_pid);
 676
 677     /* Close the writing end of the synchronizing pipe in this process,
 678     then wait for the first level process to terminate. */
 679
 680     (void)close(pfd[pipe_write]);
 681     set_process_info("running queue: waiting for %s (%d)", fq->text, pid);
 682     while (wait(&status) != pid);
 683
 684     /* A zero return means a delivery was attempted; turn off the force flag
 685     for any subsequent calls unless queue_force is set. */
 686
 687     if (!(status & 0xffff)) force_delivery = f.queue_run_force;
 688
 689     /* If the process crashed, tell somebody */
 690
 691     else if (status & 0x00ff)
 692       log_write(0, LOG_MAIN|LOG_PANIC,
 693         "queue run: process %d crashed with signal %d while delivering %s",
 694         (int)pid, status & 0x00ff, fq->text);
 695
 696     /* If single-item delivery was untried (likely due to locking)
 697     retry once after a delay */
 698
 699     if (status & 0xff00 && single_id)
 700       {
 701       single_id = FALSE;
 702       DEBUG(D_queue_run) debug_printf("qrun single-item pause before retry\n");
 703       millisleep(500);
 704       DEBUG(D_queue_run) debug_printf("qrun single-item retry after pause\n");
 705       goto single_item_retry;
 706       }
 707
 708     /* Before continuing, wait till the pipe gets closed at the far end. This
 709     tells us that any children created by the delivery to re-use any SMTP
 710     channels have all finished. Since no process actually writes to the pipe,
 711     the mere fact that read() unblocks is enough. */
 712
 713     set_process_info("running queue: waiting for children of %d", pid);
 714     if ((status = read(pfd[pipe_read], buffer, sizeof(buffer))) != 0)
 715       log_write(0, LOG_MAIN|LOG_PANIC, status > 0 ?
 716         "queue run: unexpected data on pipe" : "queue run: error on pipe: %s",
 717         strerror(errno));
 718     (void)close(pfd[pipe_read]);
 719     set_process_info("running queue");
 720
 721     /* If initial of a 2-phase run, we are a child - so just exit */
 722     if (f.queue_2stage && !queue_run_in_order)
 723       exim_exit(EXIT_SUCCESS);
 724
 725     /* If we are in the test harness, and this is not the first of a 2-stage
 726     queue run, update fudged queue times. */
 727
 728     if (f.running_in_test_harness && !f.queue_2stage)
 729       {
 730       uschar * fqtnext = Ustrchr(fudged_queue_times, '/');
 731       if (fqtnext) fudged_queue_times = fqtnext + 1;
 732       }
 733
 734
 735     continue;
 736
 737   go_around:
 738     /* If initial of a 2-phase run, we are a child - so just exit */
 739     if (f.queue_2stage && !queue_run_in_order)
 740       exim_exit(EXIT_SUCCESS);
 741     }                                  /* End loop for list of messages */
 742
 743   tree_nonrecipients = NULL;
 744   store_reset(reset_point1);           /* Scavenge list of messages */
 745
 746   /* If this was the first time through for random order processing, and
 747   sub-directories have been found, randomize their order if necessary. */
 748
 749   if (i == 0 && subcount > 1 && !queue_run_in_order)
 750     for (int j = 1; j <= subcount; j++)
 751       {
 752       int r;
 753       if ((r = random_number(100)) >= 50)
 754         {
 755         int k = (r % subcount) + 1;
 756         int x = subdirs[j];
 757         subdirs[j] = subdirs[k];
 758         subdirs[k] = x;
 759         }
 760       }
 761   }                                    /* End loop for multiple directories */
 762
 763 /* If queue_2stage is true, we do it all again, with the 2stage flag
 764 turned off. */
 765
 766 if (f.queue_2stage)
 767   {
 768
 769   /* wait for last children */
 770   for (int i = 0; i < nelem(qpid); i++)
 771     if (qpid[i])
 772       {
 773       DEBUG(D_queue_run) debug_printf("q2stage reaped child %d\n", (int)qpid[i]);
 774       waitpid(qpid[i], NULL, 0);
 775       }
 776     else break;
 777
 778 #ifdef MEASURE_TIMING
 779   report_time_since(&timestamp_startup, US"queue_run 1st phase done");
 780 #endif
 781   f.queue_2stage = FALSE;
 782   queue_run(start_id, stop_id, TRUE);
 783   }
 784
 785 /* At top level, log the end of the run. */
 786
 787 if (!recurse)
 788   if (*queue_name)
 789     log_write(L_queue_run, LOG_MAIN, "End '%s' queue run: %s",
 790       queue_name, log_detail);
 791   else
 792     log_write(L_queue_run, LOG_MAIN, "End queue run: %s", log_detail);
 793 }
 794
 795
 796
 797
 798 /************************************************
 799 *         Count messages on the queue           *
 800 ************************************************/
 801
 802 /* Called as a result of -bpc
 803
 804 Arguments:  none
 805 Returns:    count
 806 */
 807
 808 unsigned
 809 queue_count(void)
 810 {
 811 int subcount;
 812 unsigned count = 0;
 813 uschar subdirs[64];
 814
 815 (void) queue_get_spool_list(-1,         /* entire queue */
 816                         subdirs,        /* for holding sub list */
 817                         &subcount,      /* for subcount */
 818                         FALSE,          /* not random */
 819                         &count);        /* just get the count */
 820 return count;
 821 }
 822
 823
 824 #define QUEUE_SIZE_AGE 60       /* update rate for queue_size */
 825
 826 unsigned
 827 queue_count_cached(void)
 828 {
 829 time_t now;
 830 if ((now = time(NULL)) >= queue_size_next)
 831   {
 832   queue_size = queue_count();
 833   queue_size_next = now + (f.running_in_test_harness ? 3 : QUEUE_SIZE_AGE);
 834   }
 835 return queue_size;
 836 }
 837
 838 /************************************************
 839 *          List extra deliveries                *
 840 ************************************************/
 841
 842 /* This is called from queue_list below to print out all addresses that
 843 have received a message but which were not primary addresses. That is, all
 844 the addresses in the tree of non-recipients that are not primary addresses.
 845 The tree has been scanned and the data field filled in for those that are
 846 primary addresses.
 847
 848 Argument:    points to the tree node
 849 Returns:     nothing
 850 */
 851
 852 static void
 853 queue_list_extras(tree_node *p)
 854 {
 855 if (p->left) queue_list_extras(p->left);
 856 if (!p->data.val) printf("       +D %s\n", p->name);
 857 if (p->right) queue_list_extras(p->right);
 858 }
 859
 860
 861
 862 /************************************************
 863 *          List messages on the queue           *
 864 ************************************************/
 865
 866 /* Or a given list of messages. In the "all" case, we get a list of file names
 867 as quickly as possible, then scan each one for information to output. If any
 868 disappear while we are processing, just leave them out, but give an error if an
 869 explicit list was given. This function is a top-level function that is obeyed
 870 as a result of the -bp argument. As there may be a lot of messages on the
 871 queue, we must tidy up the store after reading the headers for each one.
 872
 873 Arguments:
 874    option     0 => list top-level recipients, with "D" for those delivered
 875               1 => list only undelivered top-level recipients
 876               2 => as 0, plus any generated delivered recipients
 877               If 8 is added to any of these values, the queue is listed in
 878                 random order.
 879    list       => first of any message ids to list
 880    count      count of message ids; 0 => all
 881
 882 Returns:      nothing
 883 */
 884
 885 void
 886 queue_list(int option, uschar **list, int count)
 887 {
 888 int subcount;
 889 int now = (int)time(NULL);
 890 rmark reset_point;
 891 queue_filename * qf = NULL;
 892 uschar subdirs[64];
 893
 894 /* If given a list of messages, build a chain containing their ids. */
 895
 896 if (count > 0)
 897   {
 898   queue_filename *last = NULL;
 899   for (int i = 0; i < count; i++)
 900     {
 901     queue_filename *next =
 902       store_get(sizeof(queue_filename) + Ustrlen(list[i]) + 2, is_tainted(list[i]));
 903     sprintf(CS next->text, "%s-H", list[i]);
 904     next->dir_uschar = '*';
 905     next->next = NULL;
 906     if (i == 0) qf = next; else last->next = next;
 907     last = next;
 908     }
 909   }
 910
 911 /* Otherwise get a list of the entire queue, in order if necessary. */
 912
 913 else
 914   qf = queue_get_spool_list(
 915           -1,             /* entire queue */
 916           subdirs,        /* for holding sub list */
 917           &subcount,      /* for subcount */
 918           option >= 8,    /* randomize if required */
 919           NULL);          /* don't just count */
 920
 921 if (option >= 8) option -= 8;
 922
 923 /* Now scan the chain and print information, resetting store used
 924 each time. */
 925
 926 for (;
 927     qf && (reset_point = store_mark());
 928     spool_clear_header_globals(), store_reset(reset_point), qf = qf->next
 929     )
 930   {
 931   int rc, save_errno;
 932   int size = 0;
 933   BOOL env_read;
 934
 935   message_size = 0;
 936   message_subdir[0] = qf->dir_uschar;
 937   rc = spool_read_header(qf->text, FALSE, count <= 0);
 938   if (rc == spool_read_notopen && errno == ENOENT && count <= 0)
 939     continue;
 940   save_errno = errno;
 941
 942   env_read = (rc == spool_read_OK || rc == spool_read_hdrerror);
 943
 944   if (env_read)
 945     {
 946     int i, ptr;
 947     FILE *jread;
 948     struct stat statbuf;
 949     uschar * fname = spool_fname(US"input", message_subdir, qf->text, US"");
 950
 951     ptr = Ustrlen(fname)-1;
 952     fname[ptr] = 'D';
 953
 954     /* Add the data size to the header size; don't count the file name
 955     at the start of the data file, but add one for the notional blank line
 956     that precedes the data. */
 957
 958     if (Ustat(fname, &statbuf) == 0)
 959       size = message_size + statbuf.st_size - SPOOL_DATA_START_OFFSET + 1;
 960     i = (now - received_time.tv_sec)/60;  /* minutes on queue */
 961     if (i > 90)
 962       {
 963       i = (i + 30)/60;
 964       if (i > 72) printf("%2dd ", (i + 12)/24); else printf("%2dh ", i);
 965       }
 966     else printf("%2dm ", i);
 967
 968     /* Collect delivered addresses from any J file */
 969
 970     fname[ptr] = 'J';
 971     if ((jread = Ufopen(fname, "rb")))
 972       {
 973       while (Ufgets(big_buffer, big_buffer_size, jread) != NULL)
 974         {
 975         int n = Ustrlen(big_buffer);
 976         big_buffer[n-1] = 0;
 977         tree_add_nonrecipient(big_buffer);
 978         }
 979       (void)fclose(jread);
 980       }
 981     }
 982
 983   fprintf(stdout, "%s ", string_format_size(size, big_buffer));
 984   for (int i = 0; i < 16; i++) fputc(qf->text[i], stdout);
 985
 986   if (env_read && sender_address)
 987     {
 988     printf(" <%s>", sender_address);
 989     if (f.sender_set_untrusted) printf(" (%s)", originator_login);
 990     }
 991
 992   if (rc != spool_read_OK)
 993     {
 994     printf("\n    ");
 995     if (save_errno == ERRNO_SPOOLFORMAT)
 996       {
 997       struct stat statbuf;
 998       uschar * fname = spool_fname(US"input", message_subdir, qf->text, US"");
 999
1000       if (Ustat(fname, &statbuf) == 0)
1001         printf("*** spool format error: size=" OFF_T_FMT " ***",
1002           statbuf.st_size);
1003       else printf("*** spool format error ***");
1004       }
1005     else printf("*** spool read error: %s ***", strerror(save_errno));
1006     if (rc != spool_read_hdrerror)
1007       {
1008       printf("\n\n");
1009       continue;
1010       }
1011     }
1012
1013   if (f.deliver_freeze) printf(" *** frozen ***");
1014
1015   printf("\n");
1016
1017   if (recipients_list)
1018     {
1019     for (int i = 0; i < recipients_count; i++)
1020       {
1021       tree_node *delivered =
1022         tree_search(tree_nonrecipients, recipients_list[i].address);
1023       if (!delivered || option != 1)
1024         printf("        %s %s\n",
1025           delivered ? "D" : " ", recipients_list[i].address);
1026       if (delivered) delivered->data.val = TRUE;
1027       }
1028     if (option == 2 && tree_nonrecipients)
1029       queue_list_extras(tree_nonrecipients);
1030     printf("\n");
1031     }
1032   }
1033 }
1034
1035
1036
1037 /*************************************************
1038 *             Act on a specific message          *
1039 *************************************************/
1040
1041 /* Actions that require a list of addresses make use of argv/argc/
1042 recipients_arg. Other actions do not. This function does its own
1043 authority checking.
1044
1045 Arguments:
1046   id              id of the message to work on
1047   action          which action is required (MSG_xxx)
1048   argv            the original argv for Exim
1049   argc            the original argc for Exim
1050   recipients_arg  offset to the list of recipients in argv
1051
1052 Returns:          FALSE if there was any problem
1053 */
1054
1055 BOOL
1056 queue_action(uschar *id, int action, uschar **argv, int argc, int recipients_arg)
1057 {
1058 BOOL yield = TRUE;
1059 BOOL removed = FALSE;
1060 struct passwd *pw;
1061 uschar *doing = NULL;
1062 uschar *username;
1063 uschar *errmsg;
1064 uschar spoolname[32];
1065
1066 /* Set the global message_id variable, used when re-writing spool files. This
1067 also causes message ids to be added to log messages. */
1068
1069 Ustrcpy(message_id, id);
1070
1071 /* The "actions" that just list the files do not require any locking to be
1072 done. Only admin users may read the spool files. */
1073
1074 if (action >= MSG_SHOW_BODY)
1075   {
1076   int fd, rc;
1077   uschar *subdirectory, *suffix;
1078
1079   if (!f.admin_user)
1080     {
1081     printf("Permission denied\n");
1082     return FALSE;
1083     }
1084
1085   if (recipients_arg < argc)
1086     {
1087     printf("*** Only one message can be listed at once\n");
1088     return FALSE;
1089     }
1090
1091   if (action == MSG_SHOW_BODY)
1092     {
1093     subdirectory = US"input";
1094     suffix = US"-D";
1095     }
1096   else if (action == MSG_SHOW_HEADER)
1097     {
1098     subdirectory = US"input";
1099     suffix = US"-H";
1100     }
1101   else
1102     {
1103     subdirectory = US"msglog";
1104     suffix = US"";
1105     }
1106
1107   for (int i = 0; i < 2; i++)
1108     {
1109     set_subdir_str(message_subdir, id, i);
1110     if ((fd = Uopen(spool_fname(subdirectory, message_subdir, id, suffix),
1111                     O_RDONLY, 0)) >= 0)
1112       break;
1113     if (i == 0)
1114       continue;
1115
1116     printf("Failed to open %s file for %s%s: %s\n", subdirectory, id, suffix,
1117       strerror(errno));
1118     if (action == MSG_SHOW_LOG && !message_logs)
1119       printf("(No message logs are being created because the message_logs "
1120         "option is false.)\n");
1121     return FALSE;
1122     }
1123
1124   while((rc = read(fd, big_buffer, big_buffer_size)) > 0)
1125     rc = write(fileno(stdout), big_buffer, rc);
1126
1127   (void)close(fd);
1128   return TRUE;
1129   }
1130
1131 /* For actions that actually act, open and lock the data file to ensure that no
1132 other process is working on this message. If the file does not exist, continue
1133 only if the action is remove and the user is an admin user, to allow for
1134 tidying up broken states. */
1135
1136 if ((deliver_datafile = spool_open_datafile(id)) < 0)
1137   if (errno == ENOENT)
1138     {
1139     yield = FALSE;
1140     printf("Spool data file for %s does not exist\n", id);
1141     if (action != MSG_REMOVE || !f.admin_user) return FALSE;
1142     printf("Continuing, to ensure all files removed\n");
1143     }
1144   else
1145     {
1146     if (errno == 0) printf("Message %s is locked\n", id);
1147       else printf("Couldn't open spool file for %s: %s\n", id,
1148         strerror(errno));
1149     return FALSE;
1150     }
1151
1152 /* Read the spool header file for the message. Again, continue after an
1153 error only in the case of deleting by an administrator. Setting the third
1154 argument false causes it to look both in the main spool directory and in
1155 the appropriate subdirectory, and set message_subdir according to where it
1156 found the message. */
1157
1158 sprintf(CS spoolname, "%s-H", id);
1159 if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
1160   {
1161   yield = FALSE;
1162   if (errno != ERRNO_SPOOLFORMAT)
1163     printf("Spool read error for %s: %s\n", spoolname, strerror(errno));
1164   else
1165     printf("Spool format error for %s\n", spoolname);
1166   if (action != MSG_REMOVE || !f.admin_user)
1167     {
1168     (void)close(deliver_datafile);
1169     deliver_datafile = -1;
1170     return FALSE;
1171     }
1172   printf("Continuing to ensure all files removed\n");
1173   }
1174
1175 /* Check that the user running this process is entitled to operate on this
1176 message. Only admin users may freeze/thaw, add/cancel recipients, or otherwise
1177 mess about, but the original sender is permitted to remove a message. That's
1178 why we leave this check until after the headers are read. */
1179
1180 if (!f.admin_user && (action != MSG_REMOVE || real_uid != originator_uid))
1181   {
1182   printf("Permission denied\n");
1183   (void)close(deliver_datafile);
1184   deliver_datafile = -1;
1185   return FALSE;
1186   }
1187
1188 /* Set up the user name for logging. */
1189
1190 pw = getpwuid(real_uid);
1191 username = (pw != NULL)?
1192   US pw->pw_name : string_sprintf("uid %ld", (long int)real_uid);
1193
1194 /* Take the necessary action. */
1195
1196 if (action != MSG_SHOW_COPY) printf("Message %s ", id);
1197
1198 switch(action)
1199   {
1200   case MSG_SHOW_COPY:
1201     {
1202     transport_ctx tctx = {{0}};
1203     deliver_in_buffer = store_malloc(DELIVER_IN_BUFFER_SIZE);
1204     deliver_out_buffer = store_malloc(DELIVER_OUT_BUFFER_SIZE);
1205     tctx.u.fd = 1;
1206     (void) transport_write_message(&tctx, 0);
1207     break;
1208     }
1209
1210
1211   case MSG_FREEZE:
1212   if (f.deliver_freeze)
1213     {
1214     yield = FALSE;
1215     printf("is already frozen\n");
1216     }
1217   else
1218     {
1219     f.deliver_freeze = TRUE;
1220     f.deliver_manual_thaw = FALSE;
1221     deliver_frozen_at = time(NULL);
1222     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1223       {
1224       printf("is now frozen\n");
1225       log_write(0, LOG_MAIN, "frozen by %s", username);
1226       }
1227     else
1228       {
1229       yield = FALSE;
1230       printf("could not be frozen: %s\n", errmsg);
1231       }
1232     }
1233   break;
1234
1235
1236   case MSG_THAW:
1237   if (!f.deliver_freeze)
1238     {
1239     yield = FALSE;
1240     printf("is not frozen\n");
1241     }
1242   else
1243     {
1244     f.deliver_freeze = FALSE;
1245     f.deliver_manual_thaw = TRUE;
1246     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1247       {
1248       printf("is no longer frozen\n");
1249       log_write(0, LOG_MAIN, "unfrozen by %s", username);
1250       }
1251     else
1252       {
1253       yield = FALSE;
1254       printf("could not be unfrozen: %s\n", errmsg);
1255       }
1256     }
1257   break;
1258
1259
1260   /* We must ensure all files are removed from both the input directory
1261   and the appropriate subdirectory, to clean up cases when there are odd
1262   files left lying around in odd places. In the normal case message_subdir
1263   will have been set correctly by spool_read_header, but as this is a rare
1264   operation, just run everything twice. */
1265
1266   case MSG_REMOVE:
1267     {
1268     uschar suffix[3];
1269
1270     suffix[0] = '-';
1271     suffix[2] = 0;
1272     message_subdir[0] = id[5];
1273
1274     for (int j = 0; j < 2; message_subdir[0] = 0, j++)
1275       {
1276       uschar * fname = spool_fname(US"msglog", message_subdir, id, US"");
1277
1278       DEBUG(D_any) debug_printf(" removing %s", fname);
1279       if (Uunlink(fname) < 0)
1280         {
1281         if (errno != ENOENT)
1282           {
1283           yield = FALSE;
1284           printf("Error while removing %s: %s\n", fname, strerror(errno));
1285           }
1286         else DEBUG(D_any) debug_printf(" (no file)\n");
1287         }
1288       else
1289         {
1290         removed = TRUE;
1291         DEBUG(D_any) debug_printf(" (ok)\n");
1292         }
1293
1294       for (int i = 0; i < 3; i++)
1295         {
1296         uschar * fname;
1297
1298         suffix[1] = (US"DHJ")[i];
1299         fname = spool_fname(US"input", message_subdir, id, suffix);
1300
1301         DEBUG(D_any) debug_printf(" removing %s", fname);
1302         if (Uunlink(fname) < 0)
1303           {
1304           if (errno != ENOENT)
1305             {
1306             yield = FALSE;
1307             printf("Error while removing %s: %s\n", fname, strerror(errno));
1308             }
1309           else DEBUG(D_any) debug_printf(" (no file)\n");
1310           }
1311         else
1312           {
1313           removed = TRUE;
1314           DEBUG(D_any) debug_printf(" (done)\n");
1315           }
1316         }
1317       }
1318
1319     /* In the common case, the datafile is open (and locked), so give the
1320     obvious message. Otherwise be more specific. */
1321
1322     if (deliver_datafile >= 0) printf("has been removed\n");
1323       else printf("has been removed or did not exist\n");
1324     if (removed)
1325       {
1326 #ifndef DISABLE_EVENT
1327       if (event_action) for (int i = 0; i < recipients_count; i++)
1328         {
1329         tree_node *delivered =
1330           tree_search(tree_nonrecipients, recipients_list[i].address);
1331         if (!delivered)
1332           {
1333           uschar * save_local = deliver_localpart;
1334           const uschar * save_domain = deliver_domain;
1335           uschar * addr = recipients_list[i].address, * errmsg = NULL;
1336           int start, end, dom;
1337
1338           if (!parse_extract_address(addr, &errmsg, &start, &end, &dom, TRUE))
1339             log_write(0, LOG_MAIN|LOG_PANIC,
1340               "failed to parse address '%.100s'\n: %s", addr, errmsg);
1341           else
1342             {
1343             deliver_localpart =
1344               string_copyn(addr+start, dom ? (dom-1) - start : end - start);
1345             deliver_domain = dom
1346               ? CUS string_copyn(addr+dom, end - dom) : CUS"";
1347
1348             event_raise(event_action, US"msg:fail:internal",
1349               string_sprintf("message removed by %s", username));
1350
1351             deliver_localpart = save_local;
1352             deliver_domain = save_domain;
1353             }
1354           }
1355         }
1356       (void) event_raise(event_action, US"msg:complete", NULL);
1357 #endif
1358       log_write(0, LOG_MAIN, "removed by %s", username);
1359       log_write(0, LOG_MAIN, "Completed");
1360       }
1361     break;
1362     }
1363
1364
1365   case MSG_SETQUEUE:
1366     /* The global "queue_name_dest" is used as destination, "queue_name"
1367     as source */
1368
1369     spool_move_message(id, message_subdir, US"", US"");
1370     break;
1371
1372
1373   case MSG_MARK_ALL_DELIVERED:
1374   for (int i = 0; i < recipients_count; i++)
1375     tree_add_nonrecipient(recipients_list[i].address);
1376
1377   if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1378     {
1379     printf("has been modified\n");
1380     for (int i = 0; i < recipients_count; i++)
1381       log_write(0, LOG_MAIN, "address <%s> marked delivered by %s",
1382         recipients_list[i].address, username);
1383     }
1384   else
1385     {
1386     yield = FALSE;
1387     printf("- could not mark all delivered: %s\n", errmsg);
1388     }
1389   break;
1390
1391
1392   case MSG_EDIT_SENDER:
1393   if (recipients_arg < argc - 1)
1394     {
1395     yield = FALSE;
1396     printf("- only one sender address can be specified\n");
1397     break;
1398     }
1399   doing = US"editing sender";
1400   /* Fall through */
1401
1402   case MSG_ADD_RECIPIENT:
1403   if (doing == NULL) doing = US"adding recipient";
1404   /* Fall through */
1405
1406   case MSG_MARK_DELIVERED:
1407   if (doing == NULL) doing = US"marking as delivered";
1408
1409   /* Common code for EDIT_SENDER, ADD_RECIPIENT, & MARK_DELIVERED */
1410
1411   if (recipients_arg >= argc)
1412     {
1413     yield = FALSE;
1414     printf("- error while %s: no address given\n", doing);
1415     break;
1416     }
1417
1418   for (; recipients_arg < argc; recipients_arg++)
1419     {
1420     int start, end, domain;
1421     uschar *errmess;
1422     uschar *recipient =
1423       parse_extract_address(argv[recipients_arg], &errmess, &start, &end,
1424         &domain, (action == MSG_EDIT_SENDER));
1425
1426     if (!recipient)
1427       {
1428       yield = FALSE;
1429       printf("- error while %s:\n  bad address %s: %s\n",
1430         doing, argv[recipients_arg], errmess);
1431       }
1432     else if (*recipient && domain == 0)
1433       {
1434       yield = FALSE;
1435       printf("- error while %s:\n  bad address %s: "
1436         "domain missing\n", doing, argv[recipients_arg]);
1437       }
1438     else
1439       {
1440       if (action == MSG_ADD_RECIPIENT)
1441         {
1442 #ifdef SUPPORT_I18N
1443         if (string_is_utf8(recipient)) allow_utf8_domains = message_smtputf8 = TRUE;
1444 #endif
1445         receive_add_recipient(recipient, -1);
1446         log_write(0, LOG_MAIN, "recipient <%s> added by %s",
1447           recipient, username);
1448         }
1449       else if (action == MSG_MARK_DELIVERED)
1450         {
1451         int i;
1452         for (i = 0; i < recipients_count; i++)
1453           if (Ustrcmp(recipients_list[i].address, recipient) == 0) break;
1454         if (i >= recipients_count)
1455           {
1456           printf("- error while %s:\n  %s is not a recipient:"
1457             " message not updated\n", doing, recipient);
1458           yield = FALSE;
1459           }
1460         else
1461           {
1462           tree_add_nonrecipient(recipients_list[i].address);
1463           log_write(0, LOG_MAIN, "address <%s> marked delivered by %s",
1464             recipient, username);
1465           }
1466         }
1467       else  /* MSG_EDIT_SENDER */
1468         {
1469 #ifdef SUPPORT_I18N
1470         if (string_is_utf8(recipient)) allow_utf8_domains = message_smtputf8 = TRUE;
1471 #endif
1472         sender_address = recipient;
1473         log_write(0, LOG_MAIN, "sender address changed to <%s> by %s",
1474           recipient, username);
1475         }
1476       }
1477     }
1478
1479   if (yield)
1480     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1481       printf("has been modified\n");
1482     else
1483       {
1484       yield = FALSE;
1485       printf("- while %s: %s\n", doing, errmsg);
1486       }
1487
1488   break;
1489   }
1490
1491 /* Closing the datafile releases the lock and permits other processes
1492 to operate on the message (if it still exists). */
1493
1494 if (deliver_datafile >= 0)
1495   {
1496   (void)close(deliver_datafile);
1497   deliver_datafile = -1;
1498   }
1499 return yield;
1500 }
1501
1502
1503
1504 /*************************************************
1505 *       Check the queue_only_file condition      *
1506 *************************************************/
1507
1508 /* The queue_only_file option forces certain kinds of queueing if a given file
1509 exists.
1510
1511 Arguments:  none
1512 Returns:    nothing
1513 */
1514
1515 void
1516 queue_check_only(void)
1517 {
1518 int sep = 0;
1519 struct stat statbuf;
1520 const uschar * s = queue_only_file;
1521 uschar * ss;
1522
1523 if (s)
1524   while ((ss = string_nextinlist(&s, &sep, NULL, 0)))
1525     if (Ustrncmp(ss, "smtp", 4) == 0)
1526       {
1527       ss += 4;
1528       if (Ustat(ss, &statbuf) == 0)
1529         {
1530         f.queue_smtp = TRUE;
1531         DEBUG(D_receive) debug_printf("queue_smtp set because %s exists\n", ss);
1532         }
1533       }
1534     else
1535       if (Ustat(ss, &statbuf) == 0)
1536         {
1537         queue_only = TRUE;
1538         DEBUG(D_receive) debug_printf("queue_only set because %s exists\n", ss);
1539         }
1540 }
1541
1542
1543
1544 /******************************************************************************/
1545 /******************************************************************************/
1546
1547 #ifndef DISABLE_QUEUE_RAMP
1548 void
1549 queue_notify_daemon(const uschar * msgid)
1550 {
1551 uschar buf[MESSAGE_ID_LENGTH + 2];
1552 int fd;
1553
1554 DEBUG(D_queue_run) debug_printf("%s: %s\n", __FUNCTION__, msgid);
1555
1556 buf[0] = NOTIFY_MSG_QRUN;
1557 memcpy(buf+1, msgid, MESSAGE_ID_LENGTH+1);
1558
1559 if ((fd = socket(AF_UNIX, SOCK_DGRAM, 0)) >= 0)
1560   {
1561   struct sockaddr_un sa_un = {.sun_family = AF_UNIX};
1562
1563 #ifdef EXIM_HAVE_ABSTRACT_UNIX_SOCKETS
1564   int len = offsetof(struct sockaddr_un, sun_path) + 1
1565     + snprintf(sa_un.sun_path+1, sizeof(sa_un.sun_path)-1, "%s",
1566                 expand_string(notifier_socket));
1567   sa_un.sun_path[0] = 0;
1568 #else
1569   int len = offsetof(struct sockaddr_un, sun_path)
1570     + snprintf(sa_un.sun_path, sizeof(sa_un.sun_path), "%s",
1571                 expand_string(notifier_socket));
1572 #endif
1573
1574   if (sendto(fd, buf, sizeof(buf), 0, (struct sockaddr *)&sa_un, len) < 0)
1575     DEBUG(D_queue_run)
1576       debug_printf("%s: sendto %s\n", __FUNCTION__, strerror(errno));
1577   close(fd);
1578   }
1579 else DEBUG(D_queue_run) debug_printf(" socket: %s\n", strerror(errno));
1580 }
1581 #endif
1582
1583 #endif /*!COMPILE_UTILITY*/
1584
1585 /* End of queue.c */