c0a1cd18222d0b2cc4300511c1b288dd481c66e3
[exim.git] / src / src / queue.c
1 /*************************************************
2 *     Exim - an Internet mail transport agent    *
3 *************************************************/
4
5 /* Copyright (c) The Exim Maintainers 2020 - 2022 */
6 /* Copyright (c) University of Cambridge 1995 - 2018 */
7 /* See the file NOTICE for conditions of use and distribution. */
8
9 /* Functions that operate on the input queue. */
10
11
12 #include "exim.h"
13
14
15
16
17
18
19
20 #ifndef COMPILE_UTILITY
21
22 /* The number of nodes to use for the bottom-up merge sort when a list of queue
23 items is to be ordered. The code for this sort was contributed as a patch by
24 Michael Haardt. */
25
26 #define LOG2_MAXNODES 32
27
28
29 #ifndef DISABLE_TLS
30 static BOOL queue_tls_init = FALSE;
31 #endif
32
33 /*************************************************
34 *  Helper sort function for queue_get_spool_list *
35 *************************************************/
36
37 /* This function is used when sorting the queue list in the function
38 queue_get_spool_list() below.
39
40 Arguments:
41   a            points to an ordered list of queue_filename items
42   b            points to another ordered list
43
44 Returns:       a pointer to a merged ordered list
45 */
46
47 static queue_filename *
48 merge_queue_lists(queue_filename *a, queue_filename *b)
49 {
50 queue_filename *first = NULL;
51 queue_filename **append = &first;
52
53 while (a && b)
54   {
55   int d;
56   if ((d = Ustrncmp(a->text, b->text, 6)) == 0)
57     d = Ustrcmp(a->text + 14, b->text + 14);
58   if (d < 0)
59     {
60     *append = a;
61     append= &a->next;
62     a = a->next;
63     }
64   else
65     {
66     *append = b;
67     append= &b->next;
68     b = b->next;
69     }
70   }
71
72 *append = a ? a : b;
73 return first;
74 }
75
76
77
78
79
80 /*************************************************
81 *             Get list of spool files            *
82 *************************************************/
83
84 /* Scan the spool directory and return a list of the relevant file names
85 therein. Single-character sub-directories are handled as follows:
86
87   If the first argument is > 0, a sub-directory is scanned; the letter is
88   taken from the nth entry in subdirs.
89
90   If the first argument is 0, sub-directories are not scanned. However, a
91   list of them is returned.
92
93   If the first argument is < 0, sub-directories are scanned for messages,
94   and a single, unified list is created. The returned data blocks contain the
95   identifying character of the subdirectory, if any. The subdirs vector is
96   still required as an argument.
97
98 If the randomize argument is TRUE, messages are returned in "randomized" order.
99 Actually, the order is anything but random, but the algorithm is cheap, and the
100 point is simply to ensure that the same order doesn't occur every time, in case
101 a particular message is causing a remote MTA to barf - we would like to try
102 other messages to that MTA first.
103
104 If the randomize argument is FALSE, sort the list according to the file name.
105 This should give the order in which the messages arrived. It is normally used
106 only for presentation to humans, in which case the (possibly expensive) sort
107 that it does is not part of the normal operational code. However, if
108 queue_run_in_order is set, sorting has to take place for queue runs as well.
109 When randomize is FALSE, the first argument is normally -1, so all messages are
110 included.
111
112 Arguments:
113   subdiroffset   sub-directory character offset, or 0 or -1 (see above)
114   subdirs        vector to store list of subdirchars
115   subcount       pointer to int in which to store count of subdirs
116   randomize      TRUE if the order of the list is to be unpredictable
117   pcount         If not NULL, fill in with count of files and do not return list
118
119 Returns:         pointer to a chain of queue name items
120 */
121
122 static queue_filename *
123 queue_get_spool_list(int subdiroffset, uschar *subdirs, int *subcount,
124   BOOL randomize, unsigned * pcount)
125 {
126 int i;
127 int flags = 0;
128 int resetflags = -1;
129 int subptr;
130 queue_filename *yield = NULL;
131 queue_filename *last = NULL;
132 uschar buffer[256];
133 queue_filename *root[LOG2_MAXNODES];
134
135 /* When randomizing, the file names are added to the start or end of the list
136 according to the bits of the flags variable. Get a collection of bits from the
137 current time. Use the bottom 16 and just keep re-using them if necessary. When
138 not randomizing, initialize the sublists for the bottom-up merge sort. */
139
140 if (pcount)
141   *pcount = 0;
142 else if (randomize)
143   resetflags = time(NULL) & 0xFFFF;
144 else
145    for (i = 0; i < LOG2_MAXNODES; i++)
146      root[i] = NULL;
147
148 /* If processing the full queue, or just the top-level, start at the base
149 directory, and initialize the first subdirectory name (as none). Otherwise,
150 start at the sub-directory offset. */
151
152 if (subdiroffset <= 0)
153   {
154   i = 0;
155   subdirs[0] = 0;
156   *subcount = 0;
157   }
158 else
159   i = subdiroffset;
160
161 /* Set up prototype for the directory name. */
162
163 spool_pname_buf(buffer, sizeof(buffer));
164 buffer[sizeof(buffer) - 3] = 0;
165 subptr = Ustrlen(buffer);
166 buffer[subptr+2] = 0;               /* terminator for lengthened name */
167
168 /* This loop runs at least once, for the main or given directory, and then as
169 many times as necessary to scan any subdirectories encountered in the main
170 directory, if they are to be scanned at this time. */
171
172 for (; i <= *subcount; i++)
173   {
174   int count = 0;
175   int subdirchar = subdirs[i];      /* 0 for main directory */
176   DIR *dd;
177
178   if (subdirchar != 0)
179     {
180     buffer[subptr] = '/';
181     buffer[subptr+1] = subdirchar;
182     }
183
184   DEBUG(D_queue_run) debug_printf("looking in %s\n", buffer);
185   if (!(dd = exim_opendir(buffer)))
186     continue;
187
188   /* Now scan the directory. */
189
190   for (struct dirent *ent; ent = readdir(dd); )
191     {
192     uschar *name = US ent->d_name;
193     int len = Ustrlen(name);
194
195     /* Count entries */
196
197     count++;
198
199     /* If we find a single alphameric sub-directory in the base directory,
200     add it to the list for subsequent scans. */
201
202     if (i == 0 && len == 1 && isalnum(*name))
203       {
204       *subcount = *subcount + 1;
205       subdirs[*subcount] = *name;
206       continue;
207       }
208
209     /* Otherwise, if it is a header spool file, add it to the list */
210
211     if (len == SPOOL_NAME_LENGTH &&
212         Ustrcmp(name + SPOOL_NAME_LENGTH - 2, "-H") == 0)
213       if (pcount)
214         (*pcount)++;
215       else
216         {
217         queue_filename * next =
218           store_get(sizeof(queue_filename) + Ustrlen(name), name);
219         Ustrcpy(next->text, name);
220         next->dir_uschar = subdirchar;
221
222         /* Handle the creation of a randomized list. The first item becomes both
223         the top and bottom of the list. Subsequent items are inserted either at
224         the top or the bottom, randomly. This is, I argue, faster than doing a
225         sort by allocating a random number to each item, and it also saves having
226         to store the number with each item. */
227
228         if (randomize)
229           if (!yield)
230             {
231             next->next = NULL;
232             yield = last = next;
233             }
234           else
235             {
236             if (flags == 0)
237               flags = resetflags;
238             if ((flags & 1) == 0)
239               {
240               next->next = yield;
241               yield = next;
242               }
243             else
244               {
245               next->next = NULL;
246               last->next = next;
247               last = next;
248               }
249             flags = flags >> 1;
250             }
251
252         /* Otherwise do a bottom-up merge sort based on the name. */
253
254         else
255           {
256           next->next = NULL;
257           for (int j = 0; j < LOG2_MAXNODES; j++)
258             if (root[j])
259               {
260               next = merge_queue_lists(next, root[j]);
261               root[j] = j == LOG2_MAXNODES - 1 ? next : NULL;
262               }
263             else
264               {
265               root[j] = next;
266               break;
267               }
268           }
269         }
270     }
271
272   /* Finished with this directory */
273
274   closedir(dd);
275
276   /* If we have just scanned a sub-directory, and it was empty (count == 2
277   implies just "." and ".." entries), and Exim is no longer configured to
278   use sub-directories, attempt to get rid of it. At the same time, try to
279   get rid of any corresponding msglog subdirectory. These are just cosmetic
280   tidying actions, so just ignore failures. If we are scanning just a single
281   sub-directory, break the loop. */
282
283   if (i != 0)
284     {
285     if (!split_spool_directory && count <= 2)
286       {
287       uschar subdir[2];
288
289       rmdir(CS buffer);
290       subdir[0] = subdirchar; subdir[1] = 0;
291       rmdir(CS spool_dname(US"msglog", subdir));
292       }
293     if (subdiroffset > 0) break;    /* Single sub-directory */
294     }
295
296   /* If we have just scanned the base directory, and subdiroffset is 0,
297   we do not want to continue scanning the sub-directories. */
298
299   else if (subdiroffset == 0)
300     break;
301   }    /* Loop for multiple subdirectories */
302
303 /* When using a bottom-up merge sort, do the final merging of the sublists.
304 Then pass back the final list of file items. */
305
306 if (!pcount && !randomize)
307   for (i = 0; i < LOG2_MAXNODES; ++i)
308     yield = merge_queue_lists(yield, root[i]);
309
310 return yield;
311 }
312
313
314
315
316 /*************************************************
317 *              Perform a queue run               *
318 *************************************************/
319
320 /* The arguments give the messages to start and stop at; NULL means start at
321 the beginning or stop at the end. If the given start message doesn't exist, we
322 start at the next lexically greater one, and likewise we stop at the after the
323 previous lexically lesser one if the given stop message doesn't exist. Because
324 a queue run can take some time, stat each file before forking, in case it has
325 been delivered in the meantime by some other means.
326
327 The global variables queue_run_force and queue_run_local may be set to cause
328 forced deliveries or local-only deliveries, respectively.
329
330 If deliver_selectstring[_sender] is not NULL, skip messages whose recipients do
331 not contain the string. As this option is typically used when a machine comes
332 back online, we want to ensure that at least one delivery attempt takes place,
333 so force the first one. The selecting string can optionally be a regex, or
334 refer to the sender instead of recipients.
335
336 If queue_2stage is set, the queue is scanned twice. The first time, queue_smtp
337 is set so that routing is done for all messages. Thus in the second run those
338 that are routed to the same host should go down the same SMTP connection.
339
340 Arguments:
341   start_id   message id to start at, or NULL for all
342   stop_id    message id to end at, or NULL for all
343   recurse    TRUE if recursing for 2-stage run
344
345 Returns:     nothing
346 */
347
348 void
349 queue_run(uschar *start_id, uschar *stop_id, BOOL recurse)
350 {
351 BOOL force_delivery = f.queue_run_force || deliver_selectstring != NULL ||
352   deliver_selectstring_sender != NULL;
353 const pcre2_code *selectstring_regex = NULL;
354 const pcre2_code *selectstring_regex_sender = NULL;
355 uschar *log_detail = NULL;
356 int subcount = 0;
357 uschar subdirs[64];
358 pid_t qpid[4] = {0};    /* Parallelism factor for q2stage 1st phase */
359 BOOL single_id = FALSE;
360
361 #ifdef MEASURE_TIMING
362 report_time_since(&timestamp_startup, US"queue_run start");
363 #endif
364
365 /* Cancel any specific queue domains. Turn off the flag that causes SMTP
366 deliveries not to happen, unless doing a 2-stage queue run, when the SMTP flag
367 gets set. Save the queue_runner's pid and the flag that indicates any
368 deliveries run directly from this process. Deliveries that are run by handing
369 on TCP/IP channels have queue_run_pid set, but not queue_running. */
370
371 queue_domains = NULL;
372 queue_smtp_domains = NULL;
373 f.queue_smtp = f.queue_2stage;
374
375 queue_run_pid = getpid();
376 f.queue_running = TRUE;
377
378 /* Log the true start of a queue run, and fancy options */
379
380 if (!recurse)
381   {
382   uschar extras[8];
383   uschar *p = extras;
384
385   if (f.queue_2stage) *p++ = 'q';
386   if (f.queue_run_first_delivery) *p++ = 'i';
387   if (f.queue_run_force) *p++ = 'f';
388   if (f.deliver_force_thaw) *p++ = 'f';
389   if (f.queue_run_local) *p++ = 'l';
390   *p = 0;
391
392   p = big_buffer;
393   p += sprintf(CS p, "pid=%d", (int)queue_run_pid);
394
395   if (extras[0] != 0)
396     p += sprintf(CS p, " -q%s", extras);
397
398   if (deliver_selectstring)
399     {
400     snprintf(CS p, big_buffer_size - (p - big_buffer), " -R%s %s",
401       f.deliver_selectstring_regex? "r" : "", deliver_selectstring);
402     p += Ustrlen(CCS p);
403     }
404
405   if (deliver_selectstring_sender)
406     {
407     snprintf(CS p, big_buffer_size - (p - big_buffer), " -S%s %s",
408       f.deliver_selectstring_sender_regex? "r" : "", deliver_selectstring_sender);
409     p += Ustrlen(CCS p);
410     }
411
412   log_detail = string_copy(big_buffer);
413   if (*queue_name)
414     log_write(L_queue_run, LOG_MAIN, "Start '%s' queue run: %s",
415       queue_name, log_detail);
416   else
417     log_write(L_queue_run, LOG_MAIN, "Start queue run: %s", log_detail);
418
419   single_id = start_id && stop_id && !f.queue_2stage
420               && Ustrcmp(start_id, stop_id) == 0;
421   }
422
423 /* If deliver_selectstring is a regex, compile it. */
424
425 if (deliver_selectstring && f.deliver_selectstring_regex)
426   selectstring_regex = regex_must_compile(deliver_selectstring, TRUE, FALSE);
427
428 if (deliver_selectstring_sender && f.deliver_selectstring_sender_regex)
429   selectstring_regex_sender =
430     regex_must_compile(deliver_selectstring_sender, TRUE, FALSE);
431
432 /* If the spool is split into subdirectories, we want to process it one
433 directory at a time, so as to spread out the directory scanning and the
434 delivering when there are lots of messages involved, except when
435 queue_run_in_order is set.
436
437 In the random order case, this loop runs once for the main directory (handling
438 any messages therein), and then repeats for any subdirectories that were found.
439 When the first argument of queue_get_spool_list() is 0, it scans the top
440 directory, fills in subdirs, and sets subcount. The order of the directories is
441 then randomized after the first time through, before they are scanned in
442 subsequent iterations.
443
444 When the first argument of queue_get_spool_list() is -1 (for queue_run_in_
445 order), it scans all directories and makes a single message list. */
446
447 for (int i = queue_run_in_order ? -1 : 0;
448      i <= (queue_run_in_order ? -1 : subcount);
449      i++)
450   {
451   rmark reset_point1 = store_mark();
452
453   DEBUG(D_queue_run)
454     {
455     if (i == 0)
456       debug_printf("queue running main directory\n");
457     else if (i == -1)
458       debug_printf("queue running combined directories\n");
459     else
460       debug_printf("queue running subdirectory '%c'\n", subdirs[i]);
461     }
462
463   for (queue_filename * fq = queue_get_spool_list(i, subdirs, &subcount,
464                                              !queue_run_in_order, NULL);
465        fq; fq = fq->next)
466     {
467     pid_t pid;
468     int status;
469     int pfd[2];
470     struct stat statbuf;
471     uschar buffer[256];
472
473     /* Unless deliveries are forced, if deliver_queue_load_max is non-negative,
474     check that the load average is low enough to permit deliveries. */
475
476     if (!f.queue_run_force && deliver_queue_load_max >= 0)
477       if ((load_average = os_getloadavg()) > deliver_queue_load_max)
478         {
479         log_write(L_queue_run, LOG_MAIN, "Abandon queue run: %s (load %.2f, max %.2f)",
480           log_detail,
481           (double)load_average/1000.0,
482           (double)deliver_queue_load_max/1000.0);
483         i = subcount;                 /* Don't process other directories */
484         break;
485         }
486       else
487         DEBUG(D_load) debug_printf("load average = %.2f max = %.2f\n",
488           (double)load_average/1000.0,
489           (double)deliver_queue_load_max/1000.0);
490
491     /* If initial of a 2-phase run, maintain a set of child procs
492     to get disk parallelism */
493
494     if (f.queue_2stage && !queue_run_in_order)
495       {
496       int i;
497       if (qpid[f.running_in_test_harness ? 0 : nelem(qpid) - 1])
498         {
499         DEBUG(D_queue_run) debug_printf("q2stage waiting for child %d\n", (int)qpid[0]);
500         waitpid(qpid[0], NULL, 0);
501         DEBUG(D_queue_run) debug_printf("q2stage reaped child %d\n", (int)qpid[0]);
502         if (f.running_in_test_harness) i = 0;
503         else for (i = 0; i < nelem(qpid) - 1; i++) qpid[i] = qpid[i+1];
504         qpid[i] = 0;
505         }
506       else
507         for (i = 0; qpid[i]; ) i++;
508       if ((qpid[i] = exim_fork(US"qrun-phase-one")))
509         continue;       /* parent loops around */
510       }
511
512     /* Skip this message unless it's within the ID limits */
513
514     if (stop_id && Ustrncmp(fq->text, stop_id, MESSAGE_ID_LENGTH) > 0)
515       goto go_around;
516     if (start_id && Ustrncmp(fq->text, start_id, MESSAGE_ID_LENGTH) < 0)
517       goto go_around;
518
519     /* Check that the message still exists */
520
521     message_subdir[0] = fq->dir_uschar;
522     if (Ustat(spool_fname(US"input", message_subdir, fq->text, US""), &statbuf) < 0)
523       goto go_around;
524
525     /* There are some tests that require the reading of the header file. Ensure
526     the store used is scavenged afterwards so that this process doesn't keep
527     growing its store. We have to read the header file again when actually
528     delivering, but it's cheaper than forking a delivery process for each
529     message when many are not going to be delivered. */
530
531     if (deliver_selectstring || deliver_selectstring_sender ||
532         f.queue_run_first_delivery)
533       {
534       BOOL wanted = TRUE;
535       BOOL orig_dont_deliver = f.dont_deliver;
536       rmark reset_point2 = store_mark();
537
538       /* Restore the original setting of dont_deliver after reading the header,
539       so that a setting for a particular message doesn't force it for any that
540       follow. If the message is chosen for delivery, the header is read again
541       in the deliver_message() function, in a subprocess. */
542
543       if (spool_read_header(fq->text, FALSE, TRUE) != spool_read_OK) goto go_around;
544       f.dont_deliver = orig_dont_deliver;
545
546       /* Now decide if we want to deliver this message. As we have read the
547       header file, we might as well do the freeze test now, and save forking
548       another process. */
549
550       if (f.deliver_freeze && !f.deliver_force_thaw)
551         {
552         log_write(L_skip_delivery, LOG_MAIN, "Message is frozen");
553         wanted = FALSE;
554         }
555
556       /* Check first_delivery in the case when there are no message logs. */
557
558       else if (f.queue_run_first_delivery && !f.deliver_firsttime)
559         {
560         DEBUG(D_queue_run) debug_printf("%s: not first delivery\n", fq->text);
561         wanted = FALSE;
562         }
563
564       /* Check for a matching address if deliver_selectstring[_sender] is set.
565       If so, we do a fully delivery - don't want to omit other addresses since
566       their routing might trigger re-writing etc. */
567
568       /* Sender matching */
569
570       else if (  deliver_selectstring_sender
571               && !(f.deliver_selectstring_sender_regex
572                   ? regex_match(selectstring_regex_sender, sender_address, -1, NULL)
573                   : (strstric(sender_address, deliver_selectstring_sender, FALSE)
574                       != NULL)
575               )   )
576         {
577         DEBUG(D_queue_run) debug_printf("%s: sender address did not match %s\n",
578           fq->text, deliver_selectstring_sender);
579         wanted = FALSE;
580         }
581
582       /* Recipient matching */
583
584       else if (deliver_selectstring)
585         {
586         int i;
587         for (i = 0; i < recipients_count; i++)
588           {
589           uschar *address = recipients_list[i].address;
590           if (  (f.deliver_selectstring_regex
591                 ? regex_match(selectstring_regex, address, -1, NULL)
592                 : (strstric(address, deliver_selectstring, FALSE) != NULL)
593                 )
594              && tree_search(tree_nonrecipients, address) == NULL
595              )
596             break;
597           }
598
599         if (i >= recipients_count)
600           {
601           DEBUG(D_queue_run)
602             debug_printf("%s: no recipient address matched %s\n",
603               fq->text, deliver_selectstring);
604           wanted = FALSE;
605           }
606         }
607
608       /* Recover store used when reading the header */
609
610       spool_clear_header_globals();
611       store_reset(reset_point2);
612       if (!wanted) goto go_around;      /* With next message */
613       }
614
615     /* OK, got a message we want to deliver. Create a pipe which will
616     serve as a means of detecting when all the processes created by the
617     delivery process are finished. This is relevant when the delivery
618     process passes one or more SMTP channels on to its own children. The
619     pipe gets passed down; by reading on it here we detect when the last
620     descendent dies by the unblocking of the read. It's a pity that for
621     most of the time the pipe isn't used, but creating a pipe should be
622     pretty cheap. */
623
624     if (pipe(pfd) < 0)
625       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "failed to create pipe in queue "
626         "runner process %d: %s", queue_run_pid, strerror(errno));
627     queue_run_pipe = pfd[pipe_write];  /* To ensure it gets passed on. */
628
629     /* Make sure it isn't stdin. This seems unlikely, but just to be on the
630     safe side... */
631
632     if (queue_run_pipe == 0)
633       {
634       queue_run_pipe = dup(queue_run_pipe);
635       (void)close(0);
636       }
637
638     /* Before forking to deliver the message, ensure any open and cached
639     lookup files or databases are closed. Otherwise, closing in the subprocess
640     can make the next subprocess have problems. There won't often be anything
641     open here, but it is possible (e.g. if spool_directory is an expanded
642     string). A single call before this loop would probably suffice, but just in
643     case expansions get inserted at some point, I've taken the heavy-handed
644     approach. When nothing is open, the call should be cheap. */
645
646     search_tidyup();
647
648     /* Now deliver the message; get the id by cutting the -H off the file
649     name. The return of the process is zero if a delivery was attempted. */
650
651     set_process_info("running queue: %s", fq->text);
652     fq->text[SPOOL_NAME_LENGTH-2] = 0;
653 #ifdef MEASURE_TIMING
654     report_time_since(&timestamp_startup, US"queue msg selected");
655 #endif
656
657 #ifndef DISABLE_TLS
658     if (!queue_tls_init)
659       {
660       queue_tls_init = TRUE;
661       /* Preload TLS library info for smtp transports.  Once, and only if we
662       have a delivery to do. */
663       tls_client_creds_reload(FALSE);
664       }
665 #endif
666
667 single_item_retry:
668     if ((pid = exim_fork(US"qrun-delivery")) == 0)
669       {
670       int rc;
671       (void)close(pfd[pipe_read]);
672       rc = deliver_message(fq->text, force_delivery, FALSE);
673       exim_underbar_exit(rc == DELIVER_NOT_ATTEMPTED
674                 ? EXIT_FAILURE : EXIT_SUCCESS);
675       }
676     if (pid < 0)
677       log_write(0, LOG_MAIN|LOG_PANIC_DIE, "fork of delivery process from "
678         "queue runner %d failed\n", queue_run_pid);
679
680     /* Close the writing end of the synchronizing pipe in this process,
681     then wait for the first level process to terminate. */
682
683     (void)close(pfd[pipe_write]);
684     set_process_info("running queue: waiting for %s (%d)", fq->text, pid);
685     while (wait(&status) != pid);
686
687     /* A zero return means a delivery was attempted; turn off the force flag
688     for any subsequent calls unless queue_force is set. */
689
690     if (!(status & 0xffff)) force_delivery = f.queue_run_force;
691
692     /* If the process crashed, tell somebody */
693
694     else if (status & 0x00ff)
695       log_write(0, LOG_MAIN|LOG_PANIC,
696         "queue run: process %d crashed with signal %d while delivering %s",
697         (int)pid, status & 0x00ff, fq->text);
698
699     /* If single-item delivery was untried (likely due to locking)
700     retry once after a delay */
701
702     if (status & 0xff00 && single_id)
703       {
704       single_id = FALSE;
705       DEBUG(D_queue_run) debug_printf("qrun single-item pause before retry\n");
706       millisleep(500);
707       DEBUG(D_queue_run) debug_printf("qrun single-item retry after pause\n");
708       goto single_item_retry;
709       }
710
711     /* Before continuing, wait till the pipe gets closed at the far end. This
712     tells us that any children created by the delivery to re-use any SMTP
713     channels have all finished. Since no process actually writes to the pipe,
714     the mere fact that read() unblocks is enough. */
715
716     set_process_info("running queue: waiting for children of %d", pid);
717     if ((status = read(pfd[pipe_read], buffer, sizeof(buffer))) != 0)
718       log_write(0, LOG_MAIN|LOG_PANIC, status > 0 ?
719         "queue run: unexpected data on pipe" : "queue run: error on pipe: %s",
720         strerror(errno));
721     (void)close(pfd[pipe_read]);
722     set_process_info("running queue");
723
724     /* If initial of a 2-phase run, we are a child - so just exit */
725     if (f.queue_2stage && !queue_run_in_order)
726       exim_exit(EXIT_SUCCESS);
727
728     /* If we are in the test harness, and this is not the first of a 2-stage
729     queue run, update fudged queue times. */
730
731     if (f.running_in_test_harness && !f.queue_2stage)
732       {
733       uschar * fqtnext = Ustrchr(fudged_queue_times, '/');
734       if (fqtnext) fudged_queue_times = fqtnext + 1;
735       }
736
737
738     continue;
739
740   go_around:
741     /* If initial of a 2-phase run, we are a child - so just exit */
742     if (f.queue_2stage && !queue_run_in_order)
743       exim_exit(EXIT_SUCCESS);
744     }                                  /* End loop for list of messages */
745
746   tree_nonrecipients = NULL;
747   store_reset(reset_point1);           /* Scavenge list of messages */
748
749   /* If this was the first time through for random order processing, and
750   sub-directories have been found, randomize their order if necessary. */
751
752   if (i == 0 && subcount > 1 && !queue_run_in_order)
753     for (int j = 1; j <= subcount; j++)
754       {
755       int r;
756       if ((r = random_number(100)) >= 50)
757         {
758         int k = (r % subcount) + 1;
759         int x = subdirs[j];
760         subdirs[j] = subdirs[k];
761         subdirs[k] = x;
762         }
763       }
764   }                                    /* End loop for multiple directories */
765
766 /* If queue_2stage is true, we do it all again, with the 2stage flag
767 turned off. */
768
769 if (f.queue_2stage)
770   {
771
772   /* wait for last children */
773   for (int i = 0; i < nelem(qpid); i++)
774     if (qpid[i])
775       {
776       DEBUG(D_queue_run) debug_printf("q2stage reaped child %d\n", (int)qpid[i]);
777       waitpid(qpid[i], NULL, 0);
778       }
779     else break;
780
781 #ifdef MEASURE_TIMING
782   report_time_since(&timestamp_startup, US"queue_run 1st phase done");
783 #endif
784   f.queue_2stage = FALSE;
785   queue_run(start_id, stop_id, TRUE);
786   }
787
788 /* At top level, log the end of the run. */
789
790 if (!recurse)
791   if (*queue_name)
792     log_write(L_queue_run, LOG_MAIN, "End '%s' queue run: %s",
793       queue_name, log_detail);
794   else
795     log_write(L_queue_run, LOG_MAIN, "End queue run: %s", log_detail);
796 }
797
798
799
800
801 /************************************************
802 *         Count messages on the queue           *
803 ************************************************/
804
805 /* Called as a result of -bpc
806
807 Arguments:  none
808 Returns:    count
809 */
810
811 unsigned
812 queue_count(void)
813 {
814 int subcount;
815 unsigned count = 0;
816 uschar subdirs[64];
817
818 (void) queue_get_spool_list(-1,         /* entire queue */
819                         subdirs,        /* for holding sub list */
820                         &subcount,      /* for subcount */
821                         FALSE,          /* not random */
822                         &count);        /* just get the count */
823 return count;
824 }
825
826
827 #define QUEUE_SIZE_AGE 60       /* update rate for queue_size */
828
829 unsigned
830 queue_count_cached(void)
831 {
832 time_t now;
833 if ((now = time(NULL)) >= queue_size_next)
834   {
835   queue_size = queue_count();
836   queue_size_next = now + (f.running_in_test_harness ? 3 : QUEUE_SIZE_AGE);
837   }
838 return queue_size;
839 }
840
841 /************************************************
842 *          List extra deliveries                *
843 ************************************************/
844
845 /* This is called from queue_list below to print out all addresses that
846 have received a message but which were not primary addresses. That is, all
847 the addresses in the tree of non-recipients that are not primary addresses.
848 The tree has been scanned and the data field filled in for those that are
849 primary addresses.
850
851 Argument:    points to the tree node
852 Returns:     nothing
853 */
854
855 static void
856 queue_list_extras(tree_node *p)
857 {
858 if (p->left) queue_list_extras(p->left);
859 if (!p->data.val) printf("       +D %s\n", p->name);
860 if (p->right) queue_list_extras(p->right);
861 }
862
863
864
865 /************************************************
866 *          List messages on the queue           *
867 ************************************************/
868
869 /* Or a given list of messages. In the "all" case, we get a list of file names
870 as quickly as possible, then scan each one for information to output. If any
871 disappear while we are processing, just leave them out, but give an error if an
872 explicit list was given. This function is a top-level function that is obeyed
873 as a result of the -bp argument. As there may be a lot of messages on the
874 queue, we must tidy up the store after reading the headers for each one.
875
876 Arguments:
877    option     0 => list top-level recipients, with "D" for those delivered
878               1 => list only undelivered top-level recipients
879               2 => as 0, plus any generated delivered recipients
880               If 8 is added to any of these values, the queue is listed in
881                 random order.
882    list       => first of any message ids to list
883    count      count of message ids; 0 => all
884
885 Returns:      nothing
886 */
887
888 void
889 queue_list(int option, uschar **list, int count)
890 {
891 int subcount;
892 int now = (int)time(NULL);
893 rmark reset_point;
894 queue_filename * qf = NULL;
895 uschar subdirs[64];
896
897 /* If given a list of messages, build a chain containing their ids. */
898
899 if (count > 0)
900   {
901   queue_filename *last = NULL;
902   for (int i = 0; i < count; i++)
903     {
904     queue_filename * next =
905       store_get(sizeof(queue_filename) + Ustrlen(list[i]) + 2, list[i]);
906     sprintf(CS next->text, "%s-H", list[i]);
907     next->dir_uschar = '*';
908     next->next = NULL;
909     if (i == 0) qf = next; else last->next = next;
910     last = next;
911     }
912   }
913
914 /* Otherwise get a list of the entire queue, in order if necessary. */
915
916 else
917   qf = queue_get_spool_list(
918           -1,             /* entire queue */
919           subdirs,        /* for holding sub list */
920           &subcount,      /* for subcount */
921           option >= 8,    /* randomize if required */
922           NULL);          /* don't just count */
923
924 if (option >= 8) option -= 8;
925
926 /* Now scan the chain and print information, resetting store used
927 each time. */
928
929 for (;
930     qf && (reset_point = store_mark());
931     spool_clear_header_globals(), store_reset(reset_point), qf = qf->next
932     )
933   {
934   int rc, save_errno;
935   int size = 0;
936   BOOL env_read;
937
938   message_size = 0;
939   message_subdir[0] = qf->dir_uschar;
940   rc = spool_read_header(qf->text, FALSE, count <= 0);
941   if (rc == spool_read_notopen && errno == ENOENT && count <= 0)
942     continue;
943   save_errno = errno;
944
945   env_read = (rc == spool_read_OK || rc == spool_read_hdrerror);
946
947   if (env_read)
948     {
949     int i, ptr;
950     FILE *jread;
951     struct stat statbuf;
952     uschar * fname = spool_fname(US"input", message_subdir, qf->text, US"");
953
954     ptr = Ustrlen(fname)-1;
955     fname[ptr] = 'D';
956
957     /* Add the data size to the header size; don't count the file name
958     at the start of the data file, but add one for the notional blank line
959     that precedes the data. */
960
961     if (Ustat(fname, &statbuf) == 0)
962       size = message_size + statbuf.st_size - SPOOL_DATA_START_OFFSET + 1;
963     i = (now - received_time.tv_sec)/60;  /* minutes on queue */
964     if (i > 90)
965       {
966       i = (i + 30)/60;
967       if (i > 72) printf("%2dd ", (i + 12)/24); else printf("%2dh ", i);
968       }
969     else printf("%2dm ", i);
970
971     /* Collect delivered addresses from any J file */
972
973     fname[ptr] = 'J';
974     if ((jread = Ufopen(fname, "rb")))
975       {
976       while (Ufgets(big_buffer, big_buffer_size, jread) != NULL)
977         {
978         int n = Ustrlen(big_buffer);
979         big_buffer[n-1] = 0;
980         tree_add_nonrecipient(big_buffer);
981         }
982       (void)fclose(jread);
983       }
984     }
985
986   fprintf(stdout, "%s ", string_format_size(size, big_buffer));
987   for (int i = 0; i < 16; i++) fputc(qf->text[i], stdout);
988
989   if (env_read && sender_address)
990     {
991     printf(" <%s>", sender_address);
992     if (f.sender_set_untrusted) printf(" (%s)", originator_login);
993     }
994
995   if (rc != spool_read_OK)
996     {
997     printf("\n    ");
998     if (save_errno == ERRNO_SPOOLFORMAT)
999       {
1000       struct stat statbuf;
1001       uschar * fname = spool_fname(US"input", message_subdir, qf->text, US"");
1002
1003       if (Ustat(fname, &statbuf) == 0)
1004         printf("*** spool format error: size=" OFF_T_FMT " ***",
1005           statbuf.st_size);
1006       else printf("*** spool format error ***");
1007       }
1008     else printf("*** spool read error: %s ***", strerror(save_errno));
1009     if (rc != spool_read_hdrerror)
1010       {
1011       printf("\n\n");
1012       continue;
1013       }
1014     }
1015
1016   if (f.deliver_freeze) printf(" *** frozen ***");
1017
1018   printf("\n");
1019
1020   if (recipients_list)
1021     {
1022     for (int i = 0; i < recipients_count; i++)
1023       {
1024       tree_node *delivered =
1025         tree_search(tree_nonrecipients, recipients_list[i].address);
1026       if (!delivered || option != 1)
1027         printf("        %s %s\n",
1028           delivered ? "D" : " ", recipients_list[i].address);
1029       if (delivered) delivered->data.val = TRUE;
1030       }
1031     if (option == 2 && tree_nonrecipients)
1032       queue_list_extras(tree_nonrecipients);
1033     printf("\n");
1034     }
1035   }
1036 }
1037
1038
1039
1040 /*************************************************
1041 *             Act on a specific message          *
1042 *************************************************/
1043
1044 /* Actions that require a list of addresses make use of argv/argc/
1045 recipients_arg. Other actions do not. This function does its own
1046 authority checking.
1047
1048 Arguments:
1049   id              id of the message to work on
1050   action          which action is required (MSG_xxx)
1051   argv            the original argv for Exim
1052   argc            the original argc for Exim
1053   recipients_arg  offset to the list of recipients in argv
1054
1055 Returns:          FALSE if there was any problem
1056 */
1057
1058 BOOL
1059 queue_action(uschar *id, int action, uschar **argv, int argc, int recipients_arg)
1060 {
1061 BOOL yield = TRUE;
1062 BOOL removed = FALSE;
1063 struct passwd *pw;
1064 uschar *doing = NULL;
1065 uschar *username;
1066 uschar *errmsg;
1067 uschar spoolname[32];
1068
1069 /* Set the global message_id variable, used when re-writing spool files. This
1070 also causes message ids to be added to log messages. */
1071
1072 Ustrcpy(message_id, id);
1073
1074 /* The "actions" that just list the files do not require any locking to be
1075 done. Only admin users may read the spool files. */
1076
1077 if (action >= MSG_SHOW_BODY)
1078   {
1079   int fd, rc;
1080   uschar *subdirectory, *suffix;
1081
1082   if (!f.admin_user)
1083     {
1084     printf("Permission denied\n");
1085     return FALSE;
1086     }
1087
1088   if (recipients_arg < argc)
1089     {
1090     printf("*** Only one message can be listed at once\n");
1091     return FALSE;
1092     }
1093
1094   if (action == MSG_SHOW_BODY)
1095     {
1096     subdirectory = US"input";
1097     suffix = US"-D";
1098     }
1099   else if (action == MSG_SHOW_HEADER)
1100     {
1101     subdirectory = US"input";
1102     suffix = US"-H";
1103     }
1104   else
1105     {
1106     subdirectory = US"msglog";
1107     suffix = US"";
1108     }
1109
1110   for (int i = 0; i < 2; i++)
1111     {
1112     set_subdir_str(message_subdir, id, i);
1113     if ((fd = Uopen(spool_fname(subdirectory, message_subdir, id, suffix),
1114                     O_RDONLY, 0)) >= 0)
1115       break;
1116     if (i == 0)
1117       continue;
1118
1119     printf("Failed to open %s file for %s%s: %s\n", subdirectory, id, suffix,
1120       strerror(errno));
1121     if (action == MSG_SHOW_LOG && !message_logs)
1122       printf("(No message logs are being created because the message_logs "
1123         "option is false.)\n");
1124     return FALSE;
1125     }
1126
1127   while((rc = read(fd, big_buffer, big_buffer_size)) > 0)
1128     rc = write(fileno(stdout), big_buffer, rc);
1129
1130   (void)close(fd);
1131   return TRUE;
1132   }
1133
1134 /* For actions that actually act, open and lock the data file to ensure that no
1135 other process is working on this message. If the file does not exist, continue
1136 only if the action is remove and the user is an admin user, to allow for
1137 tidying up broken states. */
1138
1139 if ((deliver_datafile = spool_open_datafile(id)) < 0)
1140   if (errno == ENOENT)
1141     {
1142     yield = FALSE;
1143     printf("Spool data file for %s does not exist\n", id);
1144     if (action != MSG_REMOVE || !f.admin_user) return FALSE;
1145     printf("Continuing, to ensure all files removed\n");
1146     }
1147   else
1148     {
1149     if (errno == 0) printf("Message %s is locked\n", id);
1150       else printf("Couldn't open spool file for %s: %s\n", id,
1151         strerror(errno));
1152     return FALSE;
1153     }
1154
1155 /* Read the spool header file for the message. Again, continue after an
1156 error only in the case of deleting by an administrator. Setting the third
1157 argument false causes it to look both in the main spool directory and in
1158 the appropriate subdirectory, and set message_subdir according to where it
1159 found the message. */
1160
1161 sprintf(CS spoolname, "%s-H", id);
1162 if (spool_read_header(spoolname, TRUE, FALSE) != spool_read_OK)
1163   {
1164   yield = FALSE;
1165   if (errno != ERRNO_SPOOLFORMAT)
1166     printf("Spool read error for %s: %s\n", spoolname, strerror(errno));
1167   else
1168     printf("Spool format error for %s\n", spoolname);
1169   if (action != MSG_REMOVE || !f.admin_user)
1170     {
1171     (void)close(deliver_datafile);
1172     deliver_datafile = -1;
1173     return FALSE;
1174     }
1175   printf("Continuing to ensure all files removed\n");
1176   }
1177
1178 /* Check that the user running this process is entitled to operate on this
1179 message. Only admin users may freeze/thaw, add/cancel recipients, or otherwise
1180 mess about, but the original sender is permitted to remove a message. That's
1181 why we leave this check until after the headers are read. */
1182
1183 if (!f.admin_user && (action != MSG_REMOVE || real_uid != originator_uid))
1184   {
1185   printf("Permission denied\n");
1186   (void)close(deliver_datafile);
1187   deliver_datafile = -1;
1188   return FALSE;
1189   }
1190
1191 /* Set up the user name for logging. */
1192
1193 pw = getpwuid(real_uid);
1194 username = (pw != NULL)?
1195   US pw->pw_name : string_sprintf("uid %ld", (long int)real_uid);
1196
1197 /* Take the necessary action. */
1198
1199 if (action != MSG_SHOW_COPY) printf("Message %s ", id);
1200
1201 switch(action)
1202   {
1203   case MSG_SHOW_COPY:
1204     {
1205     transport_ctx tctx = {{0}};
1206     deliver_in_buffer = store_malloc(DELIVER_IN_BUFFER_SIZE);
1207     deliver_out_buffer = store_malloc(DELIVER_OUT_BUFFER_SIZE);
1208     tctx.u.fd = 1;
1209     (void) transport_write_message(&tctx, 0);
1210     break;
1211     }
1212
1213
1214   case MSG_FREEZE:
1215   if (f.deliver_freeze)
1216     {
1217     yield = FALSE;
1218     printf("is already frozen\n");
1219     }
1220   else
1221     {
1222     f.deliver_freeze = TRUE;
1223     f.deliver_manual_thaw = FALSE;
1224     deliver_frozen_at = time(NULL);
1225     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1226       {
1227       printf("is now frozen\n");
1228       log_write(0, LOG_MAIN, "frozen by %s", username);
1229       }
1230     else
1231       {
1232       yield = FALSE;
1233       printf("could not be frozen: %s\n", errmsg);
1234       }
1235     }
1236   break;
1237
1238
1239   case MSG_THAW:
1240   if (!f.deliver_freeze)
1241     {
1242     yield = FALSE;
1243     printf("is not frozen\n");
1244     }
1245   else
1246     {
1247     f.deliver_freeze = FALSE;
1248     f.deliver_manual_thaw = TRUE;
1249     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1250       {
1251       printf("is no longer frozen\n");
1252       log_write(0, LOG_MAIN, "unfrozen by %s", username);
1253       }
1254     else
1255       {
1256       yield = FALSE;
1257       printf("could not be unfrozen: %s\n", errmsg);
1258       }
1259     }
1260   break;
1261
1262
1263   /* We must ensure all files are removed from both the input directory
1264   and the appropriate subdirectory, to clean up cases when there are odd
1265   files left lying around in odd places. In the normal case message_subdir
1266   will have been set correctly by spool_read_header, but as this is a rare
1267   operation, just run everything twice. */
1268
1269   case MSG_REMOVE:
1270     {
1271     uschar suffix[3];
1272
1273     suffix[0] = '-';
1274     suffix[2] = 0;
1275     message_subdir[0] = id[5];
1276
1277     for (int j = 0; j < 2; message_subdir[0] = 0, j++)
1278       {
1279       uschar * fname = spool_fname(US"msglog", message_subdir, id, US"");
1280
1281       DEBUG(D_any) debug_printf(" removing %s", fname);
1282       if (Uunlink(fname) < 0)
1283         {
1284         if (errno != ENOENT)
1285           {
1286           yield = FALSE;
1287           printf("Error while removing %s: %s\n", fname, strerror(errno));
1288           }
1289         else DEBUG(D_any) debug_printf(" (no file)\n");
1290         }
1291       else
1292         {
1293         removed = TRUE;
1294         DEBUG(D_any) debug_printf(" (ok)\n");
1295         }
1296
1297       for (int i = 0; i < 3; i++)
1298         {
1299         uschar * fname;
1300
1301         suffix[1] = (US"DHJ")[i];
1302         fname = spool_fname(US"input", message_subdir, id, suffix);
1303
1304         DEBUG(D_any) debug_printf(" removing %s", fname);
1305         if (Uunlink(fname) < 0)
1306           {
1307           if (errno != ENOENT)
1308             {
1309             yield = FALSE;
1310             printf("Error while removing %s: %s\n", fname, strerror(errno));
1311             }
1312           else DEBUG(D_any) debug_printf(" (no file)\n");
1313           }
1314         else
1315           {
1316           removed = TRUE;
1317           DEBUG(D_any) debug_printf(" (done)\n");
1318           }
1319         }
1320       }
1321
1322     /* In the common case, the datafile is open (and locked), so give the
1323     obvious message. Otherwise be more specific. */
1324
1325     if (deliver_datafile >= 0) printf("has been removed\n");
1326       else printf("has been removed or did not exist\n");
1327     if (removed)
1328       {
1329 #ifndef DISABLE_EVENT
1330       if (event_action) for (int i = 0; i < recipients_count; i++)
1331         {
1332         tree_node *delivered =
1333           tree_search(tree_nonrecipients, recipients_list[i].address);
1334         if (!delivered)
1335           {
1336           uschar * save_local = deliver_localpart;
1337           const uschar * save_domain = deliver_domain;
1338           uschar * addr = recipients_list[i].address, * errmsg = NULL;
1339           int start, end, dom;
1340
1341           if (!parse_extract_address(addr, &errmsg, &start, &end, &dom, TRUE))
1342             log_write(0, LOG_MAIN|LOG_PANIC,
1343               "failed to parse address '%.100s'\n: %s", addr, errmsg);
1344           else
1345             {
1346             deliver_localpart =
1347               string_copyn(addr+start, dom ? (dom-1) - start : end - start);
1348             deliver_domain = dom
1349               ? CUS string_copyn(addr+dom, end - dom) : CUS"";
1350
1351             (void) event_raise(event_action, US"msg:fail:internal",
1352               string_sprintf("message removed by %s", username), NULL);
1353
1354             deliver_localpart = save_local;
1355             deliver_domain = save_domain;
1356             }
1357           }
1358         }
1359       (void) event_raise(event_action, US"msg:complete", NULL, NULL);
1360 #endif
1361       log_write(0, LOG_MAIN, "removed by %s", username);
1362       log_write(0, LOG_MAIN, "Completed");
1363       }
1364     break;
1365     }
1366
1367
1368   case MSG_SETQUEUE:
1369     /* The global "queue_name_dest" is used as destination, "queue_name"
1370     as source */
1371
1372     spool_move_message(id, message_subdir, US"", US"");
1373     break;
1374
1375
1376   case MSG_MARK_ALL_DELIVERED:
1377   for (int i = 0; i < recipients_count; i++)
1378     tree_add_nonrecipient(recipients_list[i].address);
1379
1380   if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1381     {
1382     printf("has been modified\n");
1383     for (int i = 0; i < recipients_count; i++)
1384       log_write(0, LOG_MAIN, "address <%s> marked delivered by %s",
1385         recipients_list[i].address, username);
1386     }
1387   else
1388     {
1389     yield = FALSE;
1390     printf("- could not mark all delivered: %s\n", errmsg);
1391     }
1392   break;
1393
1394
1395   case MSG_EDIT_SENDER:
1396   if (recipients_arg < argc - 1)
1397     {
1398     yield = FALSE;
1399     printf("- only one sender address can be specified\n");
1400     break;
1401     }
1402   doing = US"editing sender";
1403   /* Fall through */
1404
1405   case MSG_ADD_RECIPIENT:
1406   if (doing == NULL) doing = US"adding recipient";
1407   /* Fall through */
1408
1409   case MSG_MARK_DELIVERED:
1410   if (doing == NULL) doing = US"marking as delivered";
1411
1412   /* Common code for EDIT_SENDER, ADD_RECIPIENT, & MARK_DELIVERED */
1413
1414   if (recipients_arg >= argc)
1415     {
1416     yield = FALSE;
1417     printf("- error while %s: no address given\n", doing);
1418     break;
1419     }
1420
1421   for (; recipients_arg < argc; recipients_arg++)
1422     {
1423     int start, end, domain;
1424     uschar *errmess;
1425     uschar *recipient =
1426       parse_extract_address(argv[recipients_arg], &errmess, &start, &end,
1427         &domain, (action == MSG_EDIT_SENDER));
1428
1429     if (!recipient)
1430       {
1431       yield = FALSE;
1432       printf("- error while %s:\n  bad address %s: %s\n",
1433         doing, argv[recipients_arg], errmess);
1434       }
1435     else if (*recipient && domain == 0)
1436       {
1437       yield = FALSE;
1438       printf("- error while %s:\n  bad address %s: "
1439         "domain missing\n", doing, argv[recipients_arg]);
1440       }
1441     else
1442       {
1443       if (action == MSG_ADD_RECIPIENT)
1444         {
1445 #ifdef SUPPORT_I18N
1446         if (string_is_utf8(recipient)) allow_utf8_domains = message_smtputf8 = TRUE;
1447 #endif
1448         receive_add_recipient(recipient, -1);
1449         log_write(0, LOG_MAIN, "recipient <%s> added by %s",
1450           recipient, username);
1451         }
1452       else if (action == MSG_MARK_DELIVERED)
1453         {
1454         int i;
1455         for (i = 0; i < recipients_count; i++)
1456           if (Ustrcmp(recipients_list[i].address, recipient) == 0) break;
1457         if (i >= recipients_count)
1458           {
1459           printf("- error while %s:\n  %s is not a recipient:"
1460             " message not updated\n", doing, recipient);
1461           yield = FALSE;
1462           }
1463         else
1464           {
1465           tree_add_nonrecipient(recipients_list[i].address);
1466           log_write(0, LOG_MAIN, "address <%s> marked delivered by %s",
1467             recipient, username);
1468           }
1469         }
1470       else  /* MSG_EDIT_SENDER */
1471         {
1472 #ifdef SUPPORT_I18N
1473         if (string_is_utf8(recipient)) allow_utf8_domains = message_smtputf8 = TRUE;
1474 #endif
1475         sender_address = recipient;
1476         log_write(0, LOG_MAIN, "sender address changed to <%s> by %s",
1477           recipient, username);
1478         }
1479       }
1480     }
1481
1482   if (yield)
1483     if (spool_write_header(id, SW_MODIFYING, &errmsg) >= 0)
1484       printf("has been modified\n");
1485     else
1486       {
1487       yield = FALSE;
1488       printf("- while %s: %s\n", doing, errmsg);
1489       }
1490
1491   break;
1492   }
1493
1494 /* Closing the datafile releases the lock and permits other processes
1495 to operate on the message (if it still exists). */
1496
1497 if (deliver_datafile >= 0)
1498   {
1499   (void)close(deliver_datafile);
1500   deliver_datafile = -1;
1501   }
1502 return yield;
1503 }
1504
1505
1506
1507 /*************************************************
1508 *       Check the queue_only_file condition      *
1509 *************************************************/
1510
1511 /* The queue_only_file option forces certain kinds of queueing if a given file
1512 exists.
1513
1514 Arguments:  none
1515 Returns:    nothing
1516 */
1517
1518 void
1519 queue_check_only(void)
1520 {
1521 int sep = 0;
1522 struct stat statbuf;
1523 const uschar * s = queue_only_file;
1524 uschar * ss;
1525
1526 if (s)
1527   while ((ss = string_nextinlist(&s, &sep, NULL, 0)))
1528     if (Ustrncmp(ss, "smtp", 4) == 0)
1529       {
1530       ss += 4;
1531       if (Ustat(ss, &statbuf) == 0)
1532         {
1533         f.queue_smtp = TRUE;
1534         DEBUG(D_receive) debug_printf("queue_smtp set because %s exists\n", ss);
1535         }
1536       }
1537     else
1538       if (Ustat(ss, &statbuf) == 0)
1539         {
1540         queue_only = TRUE;
1541         DEBUG(D_receive) debug_printf("queue_only set because %s exists\n", ss);
1542         }
1543 }
1544
1545
1546
1547 /******************************************************************************/
1548 /******************************************************************************/
1549
1550 #ifndef DISABLE_QUEUE_RAMP
1551 void
1552 queue_notify_daemon(const uschar * msgid)
1553 {
1554 uschar buf[MESSAGE_ID_LENGTH + 2];
1555 int fd;
1556
1557 DEBUG(D_queue_run) debug_printf("%s: %s\n", __FUNCTION__, msgid);
1558
1559 buf[0] = NOTIFY_MSG_QRUN;
1560 memcpy(buf+1, msgid, MESSAGE_ID_LENGTH+1);
1561
1562 if ((fd = socket(AF_UNIX, SOCK_DGRAM, 0)) >= 0)
1563   {
1564   struct sockaddr_un sa_un = {.sun_family = AF_UNIX};
1565   ssize_t len = daemon_notifier_sockname(&sa_un);
1566
1567   if (sendto(fd, buf, sizeof(buf), 0, (struct sockaddr *)&sa_un, (socklen_t)len) < 0)
1568     DEBUG(D_queue_run)
1569       debug_printf("%s: sendto %s\n", __FUNCTION__, strerror(errno));
1570   close(fd);
1571   }
1572 else DEBUG(D_queue_run) debug_printf(" socket: %s\n", strerror(errno));
1573 }
1574 #endif
1575
1576 #endif /*!COMPILE_UTILITY*/
1577
1578 /* End of queue.c */