regcomp.c: Move [] inversion optimization
[perl.git] / pod / perldelta.pod
1 =encoding utf8
2
3 =for comment
4 This has been completed up to a1fba7e, except for:
5 d9a4b459f94297889956ac3adc42707365f274c2
6 bf5522a13a381257966e7ed6b731195a873b153e
7 9cef83062267e94311e1fd8744396e440642738e
8 8e88cfee26d866223a6b3bfffce6270271de00db
9
10 =head1 NAME
11
12 [ this is a template for a new perldelta file. Any text flagged as
13 XXX needs to be processed before release. ]
14
15 perldelta - what is new for perl v5.13.8
16
17 =head1 DESCRIPTION
18
19 This document describes differences between the 5.13.8 release and
20 the 5.13.7 release.
21
22 If you are upgrading from an earlier release such as 5.13.6, first read
23 L<perl5137delta>, which describes differences between 5.13.6 and
24 5.13.7.
25
26 =head1 Notice
27
28 XXX Any important notices here
29
30 =head1 Core Enhancements
31
32 XXX New core language features go here. Summarise user-visible core language
33 enhancements. Particularly prominent performance optimisations could go
34 here, but most should go in the L</Performance Enhancements> section.
35
36 [ List each enhancement as a =head2 entry ]
37
38 =head2 C<-d:-foo> calls C<Devel::foo::unimport>
39
40 The syntax C<-dI<B<:>foo>> was extended in 5.6.1 to make C<-dI<:fooB<=bar>>>
41 equivalent to C<-MDevel::foo=bar>, which expands
42 internally to C<use Devel::foo 'bar';>.
43 F<perl> now allows prefixing the module name with C<->, with the same
44 semantics as C<-M>, I<i.e.>
45
46 =over 4
47
48 =item C<-d:-foo>
49
50 Equivalent to C<-M-Devel::foo>, expands to
51 C<no Devel::foo;>, calls C<< Devel::foo->unimport() >>
52 if the method exists.
53
54 =item C<-d:-foo=bar>
55
56 Equivalent to C<-M-Devel::foo=bar>, expands to C<no Devel::foo 'bar';>,
57 calls C<< Devel::foo->unimport('bar') >> if the method exists.
58
59 =back
60
61 This is particularly useful to suppresses the default actions of a
62 C<Devel::*> module's C<import> method whilst still loading it for debugging.
63
64 =head2 Filehandle method calls load IO::File on demand
65
66 When a method call on a filehandle would die because the method can not
67 be resolved and L<IO::File> has not been loaded, Perl now loads IO::File
68 via C<require> and attempts method resolution again:
69
70   open my $fh, ">", $file;
71   $fh->binmode(":raw");     # loads IO::File and succeeds
72
73 This also works for globs like STDOUT, STDERR and STDIN:
74
75   STDOUT->autoflush(1);
76
77 Because this on-demand load only happens if method resolution fails, the
78 legacy approach of manually loading an IO::File parent class for partial
79 method support still works as expected:
80
81   use IO::Handle;
82   open my $fh, ">", $file;
83   $fh->autoflush(1);        # IO::File not loaded
84
85 =head2 Full functionality for C<use feature 'unicode_strings'>
86
87 This release provides full functionality for C<use feature
88 'unicode_strings'>.  Under its scope, all string operations executed and
89 regular expressions compiled (even if executed outside its scope) have
90 Unicode semantics.   See L<feature>.
91
92 This feature avoids the "Unicode Bug" (See
93 L<perlunicode/The "Unicode Bug"> for details.)  If their is a
94 possibility that your code will process Unicode strings, you are
95 B<strongly> encouraged to use this subpragma to avoid nasty surprises.
96
97 =head2 Exception Handling Backcompat Hack
98
99 When an exception is thrown in an C<eval BLOCK>, C<$@> is now set before
100 unwinding, as well as being set after unwinding as the eval block exits.  This
101 early setting supports code that has historically treated C<$@> during unwinding
102 as an indicator of whether the unwinding was due to an exception.  These modules
103 had been broken by 5.13.1's change from setting C<$@> early to setting it late.
104 This double setting arrangement is a stopgap until the reason for unwinding can
105 be made properly introspectable.  C<$@> has never been a reliable indicator of
106 this.
107
108 =head1 Security
109
110 XXX Any security-related notices go here.  In particular, any security
111 vulnerabilities closed should be noted here rather than in the
112 L</Selected Bug Fixes> section.
113
114 [ List each security issue as a =head2 entry ]
115
116 =head1 Incompatible Changes
117
118 =head2 Attempting to use C<:=> as an empty attribute list is now a syntax error
119
120 Previously C<my $pi := 4;> was exactly equivalent to C<my $pi : = 4;>,
121 with the C<:> being treated as the start of an attribute list, ending before
122 the C<=>. The use of C<:=> to mean C<: => was deprecated in 5.12.0, and is now
123 a syntax error. This will allow the future use of C<:=> as a new token.
124
125 We find no Perl 5 code on CPAN using this construction, outside the core's
126 tests for it, so we believe that this change will have very little impact on
127 real-world codebases.
128
129 If it is absolutely necessary to have empty attribute lists (for example,
130 because of a code generator) then avoid the error by adding a space before
131 the C<=>.
132
133 =head2 Run-time code block in regular expressions
134
135 Code blocks in regular expressions (C<(?{...})> and C<(??{...})>) used not
136 to inherit any pragmata (strict, warnings, etc.) if the regular expression
137 was compiled at run time as happens in cases like these two:
138
139   use re 'eval';
140   $foo =~ $bar; # when $bar contains (?{...})
141   $foo =~ /$bar(?{ $finished = 1 })/;
142
143 This was a bug, which has now been fixed. But it has the potential to break
144 any code that was relying on this bug.
145
146 =head1 Deprecations
147
148 XXX Any deprecated features, syntax, modules etc. should be listed here.
149 In particular, deprecated modules should be listed here even if they are
150 listed as an updated module in the L</Modules and Pragmata> section.
151
152 [ List each deprecation as a =head2 entry ]
153
154 =head2 C<?PATTERN?> is deprecated
155
156 C<?PATTERN?> (without the initial m) has been deprecated and now produces
157 a warning.
158
159 =head2 C<sv_compile_2op> is now deprecated
160
161 The C<sv_compile_2op> is now deprecated, and will be removed. Searches suggest
162 that nothing on CPAN is using it, so this should have zero impact.
163
164 It attempted to provide an API to compile code down to an optree, but failed
165 to bind correctly to lexicals in the enclosing scope. It's not possible to
166 fix this problem within the constraints of its parameters and return value.
167
168 =head2 Tie functions on scalars holding typeglobs
169
170 Calling a tie function (C<tie>, C<tied>, C<untie>) with a scalar argument
171 acts on a file handle if the scalar happens to hold a typeglob.
172
173 This is a long-standing bug that will be removed in Perl 5.16, as
174 there is currently no way to tie the scalar itself when it holds
175 a typeglob, and no way to untie a scalar that has had a typeglob
176 assigned to it.
177
178 This bug was fixed in 5.13.7 but, because of the breakage it caused, the
179 fix has been reverted. Now there is a deprecation warning whenever a tie
180 function is used on a handle without an explicit C<*>.
181
182 =head1 Performance Enhancements
183
184 XXX Changes which enhance performance without changing behaviour go here. There
185 may well be none in a stable release.
186
187 [ List each enhancement as a =item entry ]
188
189 =over 4
190
191 =item *
192
193 XXX
194
195 =back
196
197 =head1 Modules and Pragmata
198
199 XXX All changes to installed files in F<cpan/>, F<dist/>, F<ext/> and F<lib/>
200 go here.  If Module::CoreList is updated, generate an initial draft of the
201 following sections using F<Porting/corelist-perldelta.pl>, which prints stub
202 entries to STDOUT.  Results can be pasted in place of the '=head2' entries
203 below.  A paragraph summary for important changes should then be added by hand.
204 In an ideal world, dual-life modules would have a F<Changes> file that could be
205 cribbed.
206
207 [ Within each section, list entries as a =item entry ]
208
209 =head2 New Modules and Pragmata
210
211 =over 4
212
213 =item *
214
215 XXX
216
217 =back
218
219 =head2 Updated Modules and Pragmata
220
221 =over 4
222
223 =item *
224
225 C<ExtUtils::CBuilder> has been upgraded from 0.2703 to 0.2801
226
227 =item *
228
229 C<if> has been upgraded from 0.06 to 0.0601.
230
231 =item *
232
233 C<Devel::SelfStubber> has been upgraded from version 1.03 to 1.04.
234
235 =item *
236
237 C<IPC::Cmd> has been upgraded from 0.64 to 0.66
238
239 Resolves an issue with splitting Win32 command lines
240 and documentation enhancements.
241
242 =item *
243
244 C<Locale::Codes> has been upgraded from version 3.14 to 3.15
245
246 =item *
247
248 C<Memoize> has been upgraded from version 1.01_03 to 1.02.
249
250 =item *
251
252 C<MIME::Base64> has been upgraded from 3.10 to 3.13
253
254 Now provides encode_base64url and decode_base64url functions to process
255 the base64 scheme for "URL applications".
256
257 =item *
258
259 C<mro> has been upgraded from version 1.05 to 1.06.
260
261 C<next::method> I<et al.> now take into account that every class inherits
262 from UNIVERSAL
263 L<[perl #68654]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=68654>.
264
265 =item *
266
267 C<overload> has been upgraded from 1.11 to 1.12.
268
269 =item *
270
271 C<PerlIO::scalar> has been upgraded from 0.10 to 0.11.
272
273 A C<read> after a C<seek> beyond the end of the string no longer thinks it
274 has data to read
275 L<[perl #78716]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=78716>.
276
277 =item *
278
279 C<re> has been upgraded from 0.14 to 0.15.
280
281 =item *
282
283 C<Socket> has been upgraded from 1.91 to 1.92.
284
285 It has several new functions for handling IPv6 addresses.
286
287 =item *
288
289 C<Storable> has been upgraded from 2.24 to 2.25.
290
291 This adds support for serialising code references that contain UTF-8 strings
292 correctly. The Storable minor version number changed as a result -- this means
293 Storable users that set C<$Storable::accept_future_minor> to a C<FALSE> value
294 will see errors (see L<Storable/FORWARD COMPATIBILITY> for more details).
295
296 =item *
297
298 C<Time::HiRes> has been upgraded from 1.9721 to 1.9721_01.
299
300 =item *
301
302 C<Unicode::Collate> has been upgraded from 0.67 to 0.68
303
304 =item *
305
306 C<Unicode::UCD> has been upgraded from 0.29 to 0.30.
307
308 =item *
309
310 C<version> has been upgraded from 0.82 to 0.86.
311
312 =item *
313
314 C<Win32> has been upgraded from 0.039 to 0.040.
315
316 =back
317
318 =head2 Removed Modules and Pragmata
319
320 =over 4
321
322 =item *
323
324 XXX
325
326 =back
327
328 =head1 Documentation
329
330 XXX Changes to files in F<pod/> go here.  Consider grouping entries by
331 file and be sure to link to the appropriate page, e.g. L<perlfunc>.
332
333 =head2 New Documentation
334
335 XXX Changes which create B<new> files in F<pod/> go here.
336
337 =head3 L<XXX>
338
339 XXX Description of the purpose of the new file here
340
341 =head2 Changes to Existing Documentation
342
343 XXX Changes which significantly change existing files in F<pod/> go here.
344 However, any changes to F<pod/perldiag.pod> should go in the L</Diagnostics>
345 section.
346
347 =head3 L<XXX>
348
349 =over 4
350
351 =item *
352
353 XXX Description of the change here
354
355 =back
356
357 =head1 Diagnostics
358
359 The following additions or changes have been made to diagnostic output,
360 including warnings and fatal error messages.  For the complete list of
361 diagnostic messages, see L<perldiag>.
362
363 XXX New or changed warnings emitted by the core's C<C> code go here. Also
364 include any changes in L<perldiag> that reconcile it to the C<C> code.
365
366 [ Within each section, list entries as a =item entry ]
367
368 =head2 New Diagnostics
369
370 XXX Newly added diagnostic messages go here
371
372 =over 4
373
374 =item *
375
376 There is a new "Closure prototype called" error.
377
378 =back
379
380 =head2 Changes to Existing Diagnostics
381
382 XXX Changes (i.e. rewording) of diagnostic messages go here
383
384 =over 4
385
386 =item *
387
388 The "Found = in conditional" warning that is emitted when a constant is
389 assigned to a variable in a condition is now withheld if the constant is
390 actually a subroutine or one generated by C<use constant>, since the value
391 of the constant may not be known at the time the program is written
392 L<[perl #77762]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=77762>.
393
394 =back
395
396 =head1 Utility Changes
397
398 XXX Changes to installed programs such as F<perlbug> and F<xsubpp> go
399 here. Most of these are built within the directories F<utils> and F<x2p>.
400
401 [ List utility changes as a =head3 entry for each utility and =item
402 entries for each change
403 Use L<XXX> with program names to get proper documentation linking. ]
404
405 =head3 L<XXX>
406
407 =over 4
408
409 =item *
410
411 XXX
412
413 =back
414
415 =head1 Configuration and Compilation
416
417 XXX Changes to F<Configure>, F<installperl>, F<installman>, and analogous tools
418 go here.  Any other changes to the Perl build process should be listed here.
419 However, any platform-specific changes should be listed in the
420 L</Platform Support> section, instead.
421
422 [ List changes as a =item entry ].
423
424 =over 4
425
426 =item *
427
428 XXX
429
430 =back
431
432 =head1 Testing
433
434 XXX Any significant changes to the testing of a freshly built perl should be
435 listed here.  Changes which create B<new> files in F<t/> go here as do any
436 large changes to the testing harness (e.g. when parallel testing was added).
437 Changes to existing files in F<t/> aren't worth summarising, although the bugs
438 that they represent may be covered elsewhere.
439
440 [ List each test improvement as a =item entry ]
441
442 =over 4
443
444 =item *
445
446 XXX
447
448 =back
449
450 =head1 Platform Support
451
452 XXX Any changes to platform support should be listed in the sections below.
453
454 [ Within the sections, list each platform as a =item entry with specific
455 changes as paragraphs below it. ]
456
457 =head2 New Platforms
458
459 XXX List any platforms that this version of perl compiles on, that previous
460 versions did not. These will either be enabled by new files in the F<hints/>
461 directories, or new subdirectories and F<README> files at the top level of the
462 source tree.
463
464 =over 4
465
466 =item XXX-some-platform
467
468 XXX
469
470 =back
471
472 =head2 Discontinued Platforms
473
474 XXX List any platforms that this version of perl no longer compiles on.
475
476 =over 4
477
478 =item XXX-some-platform
479
480 XXX
481
482 =back
483
484 =head2 Platform-Specific Notes
485
486 XXX List any changes for specific platforms. This could include configuration
487 and compilation changes or changes in portability/compatibility.  However,
488 changes within modules for platforms should generally be listed in the
489 L</Modules and Pragmata> section.
490
491 =over 4
492
493 =item NetBSD
494
495 The NetBSD hints file has been changed to make the system's malloc the
496 default.
497
498 =back
499
500 =head1 Internal Changes
501
502 XXX Changes which affect the interface available to C<XS> code go here.
503 Other significant internal changes for future core maintainers should
504 be noted as well.
505
506 [ List each test improvement as a =item entry ]
507
508 =over 4
509
510 =item *
511
512 C<mg_findext> and C<sv_unmagicext> have been added.
513
514 These new functions allow extension authors to find and remove magic attached to
515 scalars based on both the magic type and the magic virtual table, similar to how
516 C<sv_magicext> attaches magic of a certain type and with a given virtual table
517 to a scalar. This eliminates the need for extensions to walk the list of
518 C<MAGIC> pointers of an C<SV> to find the magic that belongs to them.
519
520 =back
521
522 =head1 Selected Bug Fixes
523
524 XXX Important bug fixes in the core language are summarised here.
525 Bug fixes in files in F<ext/> and F<lib/> are best summarised in
526 L</Modules and Pragmata>.
527
528 [ List each fix as a =item entry ]
529
530 =over 4
531
532 =item *
533
534 C<BEGIN {require 5.12.0}> now behaves as documented, rather than behaving
535 identically to C<use 5.12.0;>. Previously, C<require> in a C<BEGIN> block
536 was erroneously executing the C<use feature ':5.12.0'> and
537 C<use strict; use warnings;> behaviour, which only C<use> was documented to
538 provide
539 L<[perl #69050]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=69050>.
540
541 =item *
542
543 C<use 5.42>
544 L<[perl #69050]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=69050>,
545 C<use 6> and C<no 5> no longer leak memory.
546
547 =item *
548
549 C<eval "BEGIN{die}"> no longer leaks memory on non-threaded builds.
550
551 =item *
552
553 PerlIO no longer crashes when called recursively, e.g., from a signal
554 handler. Now it just leaks memory
555 L<[perl #75556]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=75556>.
556
557 =item *
558
559 Defining a constant with the same name as one of perl's special blocks
560 (e.g., INIT) stopped working in 5.12.0, but has now been fixed
561 L<[perl #78634]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=78634>.
562
563 =item *
564
565 A reference to a literal value used as a hash key (C<$hash{\"foo"}>) used
566 to be stringified, even if the hash was tied
567 L<[perl #79178]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=79178>.
568
569 =item *
570
571 A closure containing an C<if> statement followed by a constant or variable
572 is no longer treated as a constant
573 L<[perl #63540]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=63540>.
574
575 =item *
576
577 Calling a closure prototype (what is passed to an attribute handler for a
578 closure) now results in a "Closure prototype called" error message
579 L<[perl #68560]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=68560>.
580
581 =item *
582
583 A regular expression optimisation would sometimes cause a match with a
584 C<{n,m}> quantifier to fail when it should match
585 L<[perl #79152]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=79152>.
586
587 =item *
588
589 What has become known as the "Unicode Bug" is resolved in this release.
590 Under C<use feature 'unicode_strings'>, the internal storage format of a
591 string no longer affects the external semantics.  There are two known
592 exceptions.  User-defined case changing functions, which are planned to
593 be deprecated in 5.14, require utf8-encoded strings to function; and the
594 character C<LATIN SMALL LETTER SHARP S> in regular expression
595 case-insensitive matching has a somewhat different set of bugs depending
596 on the internal storage format.  Case-insensitive matching of all
597 characters that have multi-character matches, as this one does, is
598 problematical in Perl.
599 L<[perl #58182]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=58182>.
600
601 =item *
602
603 Mentioning a read-only lexical variable from the enclosing scope in a
604 string C<eval> would cause the variable to become writable
605 L<[perl #19135]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=19135>.
606
607 =item *
608
609 C<state> can now be used with attributes. It used to mean the same thing as
610 C<my> if attributes were present
611 L<[perl #68658]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=68658>.
612
613 =item *
614
615 Expressions like C<< @$a > 3 >> no longer cause C<$a> to be mentioned in
616 the "Use of uninitialized value in numeric gt" warning when C<$a> is
617 undefined (since it is not part of the C<E<gt>> expression, but the operand
618 of the C<@>)
619 L<[perl #72090]|http://rt.perl.org/rt3/Public/Bug/Display.html?id=72090>.
620
621 =back
622
623 =head1 Known Problems
624
625 XXX Descriptions of platform agnostic bugs we know we can't fix go here. Any
626 tests that had to be C<TODO>ed for the release would be noted here, unless
627 they were specific to a particular platform (see below).
628
629 This is a list of some significant unfixed bugs, which are regressions
630 from either 5.XXX.XXX or 5.XXX.XXX.
631
632 [ List each fix as a =item entry ]
633
634 =over 4
635
636 =item *
637
638 XXX
639
640 =back
641
642 =head1 Obituary
643
644 XXX If any significant core contributor has died, we've added a short obituary
645 here.
646
647 =head1 Acknowledgements
648
649 XXX The list of people to thank goes here.
650
651 =head1 Reporting Bugs
652
653 If you find what you think is a bug, you might check the articles
654 recently posted to the comp.lang.perl.misc newsgroup and the perl
655 bug database at http://rt.perl.org/perlbug/ .  There may also be
656 information at http://www.perl.org/ , the Perl Home Page.
657
658 If you believe you have an unreported bug, please run the L<perlbug>
659 program included with your release.  Be sure to trim your bug down
660 to a tiny but sufficient test case.  Your bug report, along with the
661 output of C<perl -V>, will be sent off to perlbug@perl.org to be
662 analysed by the Perl porting team.
663
664 If the bug you are reporting has security implications, which make it
665 inappropriate to send to a publicly archived mailing list, then please send
666 it to perl5-security-report@perl.org. This points to a closed subscription
667 unarchived mailing list, which includes all the core committers, who be able
668 to help assess the impact of issues, figure out a resolution, and help
669 co-ordinate the release of patches to mitigate or fix the problem across all
670 platforms on which Perl is supported. Please only use this address for
671 security issues in the Perl core, not for modules independently
672 distributed on CPAN.
673
674 =head1 SEE ALSO
675
676 The F<Changes> file for an explanation of how to view exhaustive details
677 on what changed.
678
679 The F<INSTALL> file for how to build Perl.
680
681 The F<README> file for general stuff.
682
683 The F<Artistic> and F<Copying> files for copyright information.
684
685 =cut