Added $max_received_linelength.
[exim.git] / doc / doc-txt / NewStuff
1 $Cambridge: exim/doc/doc-txt/NewStuff,v 1.152 2007/06/22 14:38:58 ph10 Exp $
2
3 New Features in Exim
4 --------------------
5
6 This file contains descriptions of new features that have been added to Exim.
7 Before a formal release, there may be quite a lot of detail so that people can
8 test from the snapshots or the CVS before the documentation is updated. Once
9 the documentation is updated, this file is reduced to a short list.
10
11 Version 4.68
12 ------------
13
14  1. The body_linecount and body_zerocount C variables are now exported in the
15     local_scan API.
16
17  2. When a dnslists lookup succeeds, the key that was looked up is now placed
18     in $dnslist_matched. When the key is an IP address, it is not reversed in
19     this variable (though it is, of course, in the actual lookup). In simple
20     cases, for example:
21
22       deny dnslists = spamhaus.example
23
24     the key is also available in another variable (in this case,
25     $sender_host_address). In more complicated cases, however, this is not
26     true. For example, using a data lookup might generate a dnslists lookup
27     like this:
28
29       deny dnslists = spamhaus.example/<|192.168.1.2|192.168.6.7|...
30
31     If this condition succeeds, the value in $dnslist_matched might be
32     192.168.6.7 (for example).
33
34  3. Authenticators now have a client_condition option. When Exim is running as
35     a client, it skips an authenticator whose client_condition expansion yields
36     "0", "no", or "false". This can be used, for example, to skip plain text
37     authenticators when the connection is not encrypted by a setting such as:
38
39       client_condition = ${if !eq{$tls_cipher}{}}
40
41     Note that the 4.67 documentation states that $tls_cipher contains the
42     cipher used for incoming messages. In fact, during SMTP delivery, it
43     contains the cipher used for the delivery. The same is true for
44     $tls_peerdn.
45
46  4. There is now a -Mvc <message-id> option, which outputs a copy of the
47     message to the standard output, in RFC 2822 format. The option can be used
48     only by an admin user.
49
50  5. There is now a /noupdate option for the ratelimit ACL condition. It
51     computes the rate and checks the limit as normal, but it does not update
52     the saved data. This means that, in relevant ACLs, it is possible to lookup
53     the existence of a specified (or auto-generated) ratelimit key without
54     incrementing the ratelimit counter for that key.
55
56     In order for this to be useful, another ACL entry must set the rate
57     for the same key somewhere (otherwise it will always be zero).
58
59     Example:
60
61     acl_check_connect:
62       # Read the rate; if it doesn't exist or is below the maximum
63       # we update it below
64       deny ratelimit = 100 / 5m / strict / noupdate
65            log_message = RATE: $sender_rate / $sender_rate_period \
66                          (max $sender_rate_limit)
67
68       [... some other logic and tests...]
69
70       warn ratelimit = 100 / 5m / strict / per_cmd
71            log_message = RATE UPDATE: $sender_rate / $sender_rate_period \
72                          (max $sender_rate_limit)
73            condition = ${if le{$sender_rate}{$sender_rate_limit}}
74
75       accept
76
77  6. The variable $max_received_linelength contains the number of bytes in the
78     longest line that was received as part of the message, not counting the
79     line termination character(s).
80
81
82 Version 4.67
83 ------------
84
85  1. There is a new log selector called smtp_no_mail, which is not included in
86     the default setting. When it is set, a line is written to the main log
87     whenever an accepted SMTP connection terminates without having issued a
88     MAIL command.
89
90  2. When an item in a dnslists list is followed by = and & and a list of IP
91     addresses, the behaviour was not clear when the lookup returned more than
92     one IP address. This has been solved by the addition of == and =& for "all"
93     rather than the default "any" matching.
94
95  3. Up till now, the only control over which cipher suites GnuTLS uses has been
96     for the cipher algorithms. New options have been added to allow some of the
97     other parameters to be varied.
98
99  4. There is a new compile-time option called ENABLE_DISABLE_FSYNC. When it is
100     set, Exim compiles a runtime option called disable_fsync.
101
102  5. There is a new variable called $smtp_count_at_connection_start.
103
104  6. There's a new control called no_pipelining.
105
106  7. There are two new variables called $sending_ip_address and $sending_port.
107     These are set whenever an SMTP connection to another host has been set up.
108
109  8. The expansion of the helo_data option in the smtp transport now happens
110     after the connection to the server has been made.
111
112  9. There is a new expansion operator ${rfc2047d: that decodes strings that
113     are encoded as per RFC 2047.
114
115 10. There is a new log selector called "pid", which causes the current process
116     id to be added to every log line, in square brackets, immediately after the
117     time and date.
118
119 11. Exim has been modified so that it flushes SMTP output before implementing
120     a delay in an ACL. It also flushes the output before performing a callout,
121     as this can take a substantial time. These behaviours can be disabled by
122     obeying control = no_delay_flush or control = no_callout_flush,
123     respectively, at some earlier stage of the connection.
124
125 12. There are two new expansion conditions that iterate over a list. They are
126     called forany and forall.
127
128 13. There's a new global option called dsn_from that can be used to vary the
129     contents of From: lines in bounces and other automatically generated
130     messages ("delivery status notifications" - hence the name of the option).
131
132 14. The smtp transport has a new option called hosts_avoid_pipelining.
133
134 15. By default, exigrep does case-insensitive matches. There is now a -I option
135     that makes it case-sensitive.
136
137 16. A number of new features ("addresses", "map", "filter", and "reduce") have
138     been added to string expansions to make it easier to process lists of
139     items, typically addresses.
140
141 17. There's a new ACL modifier called "continue". It does nothing of itself,
142     and processing of the ACL always continues with the next condition or
143     modifier. It is provided so that the side effects of expanding its argument
144     can be used.
145
146 18. It is now possible to use newline and other control characters (those with
147     values less than 32, plus DEL) as separators in lists.
148
149 19. The exigrep utility now has a -v option, which inverts the matching
150     condition.
151
152 20. The host_find_failed option in the manualroute router can now be set to
153     "ignore".
154
155
156 Version 4.66
157 ------------
158
159 No new features were added to 4.66.
160
161
162 Version 4.65
163 ------------
164
165 No new features were added to 4.65.
166
167
168 Version 4.64
169 ------------
170
171  1. ACL variables can now be given arbitrary names, as long as they start with
172     "acl_c" or "acl_m" (for connection variables and message variables), are at
173     least six characters long, with the sixth character being either a digit or
174     an underscore.
175
176  2. There is a new ACL modifier called log_reject_target. It makes it possible
177     to specify which logs are used for messages about ACL rejections.
178
179  3. There is a new authenticator called "dovecot". This is an interface to the
180     authentication facility of the Dovecot POP/IMAP server, which can support a
181     number of authentication methods.
182
183  4. The variable $message_headers_raw provides a concatenation of all the
184     messages's headers without any decoding. This is in contrast to
185     $message_headers, which does RFC2047 decoding on the header contents.
186
187  5. In a DNS black list, if two domain names, comma-separated, are given, the
188     second is used first to do an initial check, making use of any IP value
189     restrictions that are set. If there is a match, the first domain is used,
190     without any IP value restrictions, to get the TXT record.
191
192  6. All authenticators now have a server_condition option.
193
194  7. There is a new command-line option called -Mset. It is useful only in
195     conjunction with -be (that is, when testing string expansions). It must be
196     followed by a message id; Exim loads the given message from its spool
197     before doing the expansions.
198
199  8. Another similar new command-line option is called -bem. It operates like
200     -be except that it must be followed by the name of a file that contains a
201     message.
202
203  9. When an address is delayed because of a 4xx response to a RCPT command, it
204     is now the combination of sender and recipient that is delayed in
205     subsequent queue runs until its retry time is reached.
206
207 10. Unary negation and the bitwise logical operators and, or, xor, not, and
208     shift, have been added to the eval: and eval10: expansion items.
209
210 11. The variables $interface_address and $interface_port have been renamed
211     as $received_ip_address and $received_port, to make it clear that they
212     relate to message reception rather than delivery. (The old names remain
213     available for compatibility.)
214
215 12. The "message" modifier can now be used on "accept" and "discard" acl verbs
216     to vary the message that is sent when an SMTP command is accepted.
217
218
219 Version 4.63
220 ------------
221
222 1. There is a new Boolean option called filter_prepend_home for the redirect
223    router.
224
225 2. There is a new acl, set by acl_not_smtp_start, which is run right at the
226    start of receiving a non-SMTP message, before any of the message has been
227    read.
228
229 3. When an SMTP error message is specified in a "message" modifier in an ACL,
230    or in a :fail: or :defer: message in a redirect router, Exim now checks the
231    start of the message for an SMTP error code.
232
233 4. There is a new parameter for LDAP lookups called "referrals", which takes
234    one of the settings "follow" (the default) or "nofollow".
235
236 5. Version 20070721.2 of exipick now included, offering these new options:
237     --reverse
238         After all other sorting options have bee processed, reverse order
239         before displaying messages (-R is synonym).
240     --random
241         Randomize order of matching messages before displaying.
242     --size
243         Instead of displaying the matching messages, display the sum
244         of their sizes.
245     --sort <variable>[,<variable>...]
246         Before displaying matching messages, sort the messages according to
247         each messages value for each variable.
248     --not
249         Negate the value for every test (returns inverse output from the
250         same criteria without --not).
251
252
253 Version 4.62
254 ------------
255
256 1. The ${readsocket expansion item now supports Internet domain sockets as well
257    as Unix domain sockets. If the first argument begins "inet:", it must be of
258    the form "inet:host:port". The port is mandatory; it may be a number or the
259    name of a TCP port in /etc/services. The host may be a name, or it may be an
260    IP address. An ip address may optionally be enclosed in square brackets.
261    This is best for IPv6 addresses. For example:
262
263      ${readsocket{inet:[::1]:1234}{<request data>}...
264
265    Only a single host name may be given, but if looking it up yield more than
266    one IP address, they are each tried in turn until a connection is made. Once
267    a connection has been made, the behaviour is as for ${readsocket with a Unix
268    domain socket.
269
270 2. If a redirect router sets up file or pipe deliveries for more than one
271    incoming address, and the relevant transport has batch_max set greater than
272    one, a batch delivery now occurs.
273
274 3. The appendfile transport has a new option called maildirfolder_create_regex.
275    Its value is a regular expression. For a maildir delivery, this is matched
276    against the maildir directory; if it matches, Exim ensures that a
277    maildirfolder file is created alongside the new, cur, and tmp directories.
278
279
280 Version 4.61
281 ------------
282
283 The documentation is up-to-date for the 4.61 release. Major new features since
284 the 4.60 release are:
285
286 . An option called disable_ipv6, to disable the use of IPv6 completely.
287
288 . An increase in the number of ACL variables to 20 of each type.
289
290 . A change to use $auth1, $auth2, and $auth3 in authenticators instead of $1,
291   $2, $3, (though those are still set) because the numeric variables get used
292   for other things in complicated expansions.
293
294 . The default for rfc1413_query_timeout has been changed from 30s to 5s.
295
296 . It is possible to use setclassresources() on some BSD OS to control the
297   resources used in pipe deliveries.
298
299 . A new ACL modifier called add_header, which can be used with any verb.
300
301 . More errors are detectable in retry rules.
302
303 There are a number of other additions too.
304
305
306 Version 4.60
307 ------------
308
309 The documentation is up-to-date for the 4.60 release. Major new features since
310 the 4.50 release are:
311
312 . Support for SQLite.
313
314 . Support for IGNOREQUOTA in LMTP.
315
316 . Extensions to the "submission mode" features.
317
318 . Support for Client SMTP Authorization (CSA).
319
320 . Support for ratelimiting hosts and users.
321
322 . New expansion items to help with the BATV "prvs" scheme.
323
324 . A "match_ip" condition, that matches an IP address against a list.
325
326 There are many more minor changes.
327
328 ****