This is a live mirror of the Perl 5 development currently hosted at https://github.com/perl/perl5
perldelta: Add a reminder about Known Problems
[perl5.git] / pod / perldelta.pod
1 =encoding utf8
2
3 =head1 NAME
4
5 perldelta - what is new for perl v5.14.0
6
7 =head1 DESCRIPTION
8
9 This document describes differences between the 5.12.0 release and
10 the 5.14.0 release.
11
12 Some of the bug fixes in this release have been backported to subsequent
13 releases of 5.12.x. Those are indicated with the 5.12.x version in
14 parentheses.
15
16 XXX Go through the perl512*delta files and do that.
17
18 =head1 Notice
19
20 XXX Any important notices here
21
22 =head1 Core Enhancements
23
24 =head2 Unicode
25
26 =head3 Unicode Version 6.0 is now supported (mostly)
27
28 Perl comes with the Unicode 6.0 data base updated with
29 L<Corrigendum #8|http://www.unicode.org/versions/corrigendum8.html>,
30 with one exception noted below.
31 See L<http://unicode.org/versions/Unicode6.0.0> for details on the new
32 release.  Perl does not support any Unicode provisional properties,
33 including the new ones for this release, but their database files are
34 packaged with Perl.
35
36 Unicode 6.0 has chosen to use the name C<BELL> for the character at U+1F514,
37 which is a symbol that looks like a bell, and is used in Japanese cell
38 phones.  This conflicts with the long-standing Perl usage of having
39 C<BELL> mean the ASCII C<BEL> character, U+0007.  In Perl 5.14,
40 C<\N{BELL}> will continue to mean U+0007, but its use will generate a
41 deprecated warning message, unless such warnings are turned off.  The
42 new name for U+0007 in Perl will be C<ALERT>, which corresponds nicely
43 with the existing shorthand sequence for it, C<"\a">.  C<\N{BEL}> will
44 mean U+0007, with no warning given.  The character at U+1F514 will not
45 have a name in 5.14, but can be referred to by C<\N{U+1F514}>.  The plan
46 is that in Perl 5.16, C<\N{BELL}> will refer to U+1F514, and so all code
47 that uses C<\N{BELL}> should convert by then to using C<\N{ALERT}>,
48 C<\N{BEL}>, or C<"\a"> instead.
49
50 =head3 Full functionality for C<use feature 'unicode_strings'>
51
52 This release provides full functionality for C<use feature
53 'unicode_strings'>.  Under its scope, all string operations executed and
54 regular expressions compiled (even if executed outside its scope) have
55 Unicode semantics.  See L<feature>.
56
57 This feature avoids most forms of the "Unicode Bug" (See
58 L<perlunicode/The "Unicode Bug"> for details.)  If there is a
59 possibility that your code will process Unicode strings, you are
60 B<strongly> encouraged to use this subpragma to avoid nasty surprises.
61
62 =head3 C<\N{I<name>}> and C<charnames> enhancements
63
64 =over
65
66 =item *
67
68 C<\N{}> and C<charnames::vianame> now know about the abbreviated
69 character names listed by Unicode, such as NBSP, SHY, LRO, ZWJ, etc., all
70 the customary abbreviations for the C0 and C1 control characters (such as
71 ACK, BEL, CAN, etc.), and a few new variants of some C1 full names that
72 are in common usage.
73
74 =item *
75
76 Unicode has a number of named character sequences, in which particular sequences
77 of code points are given names.  C<\N{...}> now recognizes these.
78
79 =item *
80
81 C<\N{}>, C<charnames::vianame>, C<charnames::viacode> now know about every
82 character in Unicode.  Previously, they didn't know about the Hangul syllables
83 nor a number of CJK (Chinese/Japanese/Korean) characters.
84
85 =item *
86
87 In the past, it was ineffective to override one of Perl's abbreviations
88 with your own custom alias.  Now it works.
89
90 =item *
91
92 You can also create a custom alias of the ordinal of a
93 character, known by C<\N{...}>, C<charnames::vianame()>, and
94 C<charnames::viacode()>.  Previously, an alias had to be to an official
95 Unicode character name.  This made it impossible to create an alias for
96 a code point that had no name, such as those reserved for private
97 use.
98
99 =item *
100
101 A new function, C<charnames::string_vianame()>, has been added.
102 This function is a run-time version of C<\N{...}>, returning the string
103 of characters whose Unicode name is its parameter.  It can handle
104 Unicode named character sequences, whereas the pre-existing
105 C<charnames::vianame()> cannot, as the latter returns a single code
106 point.
107
108 =back
109
110 See L<charnames> for details on all these changes.
111
112 =head3 Any unsigned value can be encoded as a character
113
114 With this release, Perl is adopting a model that any unsigned value can
115 be treated as a code point and encoded internally (as utf8) without
116 warnings - not just the code points that are legal in Unicode.
117 However, unless utf8 warnings have been
118 explicitly lexically turned off, outputting or performing a
119 Unicode-defined operation (such as upper-casing) on such a code point
120 will generate a warning.  Attempting to input these using strict rules
121 (such as with the C<:encoding('UTF-8')> layer) will continue to fail.
122 Prior to this release the handling was very inconsistent, and incorrect
123 in places.  Also, the Unicode non-characters, some of which previously were
124 erroneously considered illegal in places by Perl, contrary to the Unicode
125 standard, are now always legal internally.  But inputting or outputting
126 them will work the same as for the non-legal Unicode code points, as the
127 Unicode standard says they are illegal for "open interchange".
128
129 =head3 New warnings categories for problematic (non-)Unicode code points.
130
131 Three new warnings subcategories of "utf8" have been added.  These
132 allow you to turn off some "utf8" warnings, while allowing
133 others warnings to remain on.  The three categories are:
134 C<surrogate> when UTF-16 surrogates are encountered;
135 C<nonchar> when Unicode non-character code points are encountered;
136 and C<non_unicode> when code points that are above the legal Unicode
137 maximum of 0x10FFFF are encountered.
138
139 =head2 Regular Expressions
140
141 =head3 C<(?^...)> construct to signify default modifiers
142
143 An ASCII caret (also called a "circumflex accent") C<"^">
144 immediately following a C<"(?"> in a regular expression
145 now means that the subexpression does not inherit the
146 surrounding modifiers such as C</i>, but reverts to the
147 Perl defaults.  Any modifiers following the caret override the defaults.
148
149 The stringification of regular expressions now uses this
150 notation.  E.g., before, C<qr/hlagh/i> would be stringified as
151 C<(?i-xsm:hlagh)>, but now it's stringified as C<(?^i:hlagh)>.
152
153 The main purpose of this is to allow tests that rely on the
154 stringification not to have to change when new modifiers are added.
155 See L<perlre/Extended Patterns>.
156
157 =head3 C</d>, C</l>, C</u>, C</a>, and C</aa> modifiers
158
159 Four new regular expression modifiers have been added. These are mutually
160 exclusive; one only can be turned on at a time.
161
162 The C</l> modifier says to compile the regular expression as if it were
163 in the scope of C<use locale>, even if it is not.
164
165 The C</u> modifier says to compile the regular expression as if it were
166 in the scope of a C<use feature "unicode_strings"> pragma.
167
168 The C</d> (default) modifier is used to override any C<use locale> and
169 C<use feature "unicode_strings"> pragmas that are in effect at the time
170 of compiling the regular expression.
171
172 The C</a> regular expression modifier restricts C<\s>, C<\d> and C<\w> and
173 the Posix (C<[[:posix:]]>) character classes to the ASCII range.  The
174 complements and C<\b> and C<\B> are correspondingly
175 affected.  Otherwise, C</a> behaves like the C</u> modifier, in that
176 case-insensitive matching uses Unicode semantics.
177
178 The C</aa> modifier is like C</a>, except that, in case-insensitive matching, no ASCII character will match a
179 non-ASCII character.  For example,
180
181     'k' =~ /\N{KELVIN SIGN}/ai
182
183 will match; it won't under C</aa>.
184
185 See L<perlre/Modifiers> for more detail.
186
187 =head3 Non-destructive substitution
188
189 The substitution (C<s///>) and transliteration
190 (C<y///>) operators now support an C</r> option that
191 copies the input variable, carries out the substitution on
192 the copy and returns the result.  The original remains unmodified.
193
194   my $old = 'cat';
195   my $new = $old =~ s/cat/dog/r;
196   # $old is 'cat' and $new is 'dog'
197
198 This is particularly useful with C<map>.  See L<perlop> for more examples.
199
200 =head3 Reentrant regular expression engine
201
202 It is now safe to use regular expressions within C<(?{...})> and
203 C<(??{...})> code blocks inside regular expressions.
204
205 These block are still experimental, however, and still have problems with
206 lexical (C<my>) variables and abnormal exiting.
207
208 =head3 C<use re '/flags';>
209
210 The C<re> pragma now has the ability to turn on regular expression flags
211 till the end of the lexical scope:
212
213     use re '/x';
214     "foo" =~ / (.+) /;  # /x implied
215
216 See L<re/"'/flags' mode"> for details.
217
218 =head3 \o{...} for octals
219
220 There is a new octal escape sequence, C<"\o">, in double-quote-like
221 contexts.  This construct allows large octal ordinals beyond the
222 current max of 0777 to be represented.  It also allows you to specify a
223 character in octal which can safely be concatenated with other regex
224 snippets and which won't be confused with being a backreference to
225 a regex capture group.  See L<perlre/Capture groups>.
226
227 =head3 Add C<\p{Titlecase}> as a synonym for C<\p{Title}>
228
229 This synonym is added for symmetry with the Unicode property names
230 C<\p{Uppercase}> and C<\p{Lowercase}>.
231
232 =head3 Regular expression debugging output improvement
233
234 Regular expression debugging output (turned on by C<use re 'debug';>) now
235 uses hexadecimal when escaping non-ASCII characters, instead of octal.
236
237 =head3 Return value of C<delete $+{...}>
238
239 Custom regular expression engines can now determine the return value of
240 C<delete> on an entry of C<%+> or C<%->.
241
242 =head2 Syntactical Enhancements
243
244 =head3 Array and hash container functions accept references
245
246 All built-in functions that operate directly on array or hash
247 containers now also accept hard references to arrays or hashes:
248
249   |----------------------------+---------------------------|
250   | Traditional syntax         | Terse syntax              |
251   |----------------------------+---------------------------|
252   | push @$arrayref, @stuff    | push $arrayref, @stuff    |
253   | unshift @$arrayref, @stuff | unshift $arrayref, @stuff |
254   | pop @$arrayref             | pop $arrayref             |
255   | shift @$arrayref           | shift $arrayref           |
256   | splice @$arrayref, 0, 2    | splice $arrayref, 0, 2    |
257   | keys %$hashref             | keys $hashref             |
258   | keys @$arrayref            | keys $arrayref            |
259   | values %$hashref           | values $hashref           |
260   | values @$arrayref          | values $arrayref          |
261   | ($k,$v) = each %$hashref   | ($k,$v) = each $hashref   |
262   | ($k,$v) = each @$arrayref  | ($k,$v) = each $arrayref  |
263   |----------------------------+---------------------------|
264
265 This allows these built-in functions to act on long dereferencing chains
266 or on the return value of subroutines without needing to wrap them in
267 C<@{}> or C<%{}>:
268
269   push @{$obj->tags}, $new_tag;  # old way
270   push $obj->tags,    $new_tag;  # new way
271
272   for ( keys %{$hoh->{genres}{artists}} ) {...} # old way 
273   for ( keys $hoh->{genres}{artists}    ) {...} # new way 
274
275 For C<push>, C<unshift> and C<splice>, the reference will auto-vivify
276 if it is not defined, just as if it were wrapped with C<@{}>.
277
278 For C<keys>, C<values>, C<each>, when overloaded dereferencing is
279 present, the overloaded dereference is used instead of dereferencing the
280 underlying reftype.  Warnings are issued about assumptions made in
281 ambiguous cases.
282
283 =head3 Single term prototype
284
285 The C<+> prototype is a special alternative to C<$> that will act like
286 C<\[@%]> when given a literal array or hash variable, but will otherwise
287 force scalar context on the argument.  See L<perlsub/Prototypes>.
288
289 =head3 C<package> block syntax
290
291 A package declaration can now contain a code block, in which case the
292 declaration is in scope only inside that block.  So C<package Foo { ... }>
293 is precisely equivalent to C<{ package Foo; ... }>.  It also works with
294 a version number in the declaration, as in C<package Foo 1.2 { ... }>.
295 See L<perlfunc>.
296
297 =head3 Statement labels can appear in more places
298
299 Statement labels can now occur before any type of statement or declaration,
300 such as C<package>.
301
302 =head3 Stacked labels
303
304 Multiple statement labels can now appear before a single statement.
305
306 =head3 Uppercase X/B allowed in hexadecimal/binary literals
307
308 Literals may now use either upper case C<0X...> or C<0B...> prefixes,
309 in addition to the already supported C<0x...> and C<0b...>
310 syntax [perl #76296].
311
312 C, Ruby, Python and PHP already supported this syntax, and it makes
313 Perl more internally consistent. A round-trip with C<eval sprintf
314 "%#X", 0x10> now returns C<16>, the way C<eval sprintf "%#x", 0x10> does.
315
316 =head3 Overridable tie functions
317
318 C<tie>, C<tied> and C<untie> can now be overridden [perl #75902].
319
320 =head2 Exception Handling
321
322 Several changes have been made to the way C<die>, C<warn>, and C<$@>
323 behave, in order to make them more reliable and consistent.
324
325 When an exception is thrown inside an C<eval>, the exception is no
326 longer at risk of being clobbered by code running during unwinding
327 (e.g., destructors).  Previously, the exception was written into C<$@>
328 early in the throwing process, and would be overwritten if C<eval> was
329 used internally in the destructor for an object that had to be freed
330 while exiting from the outer C<eval>.  Now the exception is written
331 into C<$@> last thing before exiting the outer C<eval>, so the code
332 running immediately thereafter can rely on the value in C<$@> correctly
333 corresponding to that C<eval>.  (C<$@> is still also set before exiting the
334 C<eval>, for the sake of destructors that rely on this.)
335
336 Likewise, a C<local $@> inside an C<eval> will no longer clobber any
337 exception thrown in its scope.  Previously, the restoration of C<$@> upon
338 unwinding would overwrite any exception being thrown.  Now the exception
339 gets to the C<eval> anyway.  So C<local $@> is safe before a C<die>.
340
341 Exceptions thrown from object destructors no longer modify the C<$@>
342 of the surrounding context.  (If the surrounding context was exception
343 unwinding, this used to be another way to clobber the exception being
344 thrown.)  Previously such an exception was
345 sometimes emitted as a warning, and then either was
346 string-appended to the surrounding C<$@> or completely replaced the
347 surrounding C<$@>, depending on whether that exception and the surrounding
348 C<$@> were strings or objects.  Now, an exception in this situation is
349 always emitted as a warning, leaving the surrounding C<$@> untouched.
350 In addition to object destructors, this also affects any function call
351 performed by XS code using the C<G_KEEPERR> flag.
352
353 Warnings for C<warn> can now be objects, in the same way as exceptions
354 for C<die>.  If an object-based warning gets the default handling,
355 of writing to standard error, it is stringified as
356 before, with the file and line number appended.  But
357 a C<$SIG{__WARN__}> handler will now receive an
358 object-based warning as an object, where previously it was passed the
359 result of stringifying the object.
360
361 =head2 Other Enhancements
362
363 =head3 Assignment to C<$0> sets the legacy process name with C<prctl()> on Linux
364
365 On Linux the legacy process name will be set with L<prctl(2)>, in
366 addition to altering the POSIX name via C<argv[0]> as perl has done
367 since version 4.000. Now system utilities that read the legacy process
368 name such as ps, top and killall will recognize the name you set when
369 assigning to C<$0>. The string you supply will be cut off at 16 bytes,
370 this is a limitation imposed by Linux.
371
372 =head3 C<srand()> now returns the seed
373
374 This allows programs that need to have repeatable results not to have to come
375 up with their own seed-generating mechanism.  Instead, they can use C<srand()>
376 and stash the return value for future use.  Typical is a test program which
377 has too many combinations to test comprehensively in the time available to it
378 each run.  It can test a random subset each time and, should there be a failure,
379 log the seed used for that run so that it can later be used to reproduce the
380 same results.
381
382 =head3 printf-like functions understand post-1980 size modifiers
383
384 Perl's printf and sprintf operators, and Perl's internal printf replacement
385 function, now understand the C90 size modifiers "hh" (C<char>), "z"
386 (C<size_t>), and "t" (C<ptrdiff_t>).  Also, when compiled with a C99
387 compiler, Perl now understands the size modifier "j" (C<intmax_t>).
388
389 So, for example, on any modern machine, C<sprintf('%hhd', 257)> returns '1'.
390
391 =head3 New global variable C<${^GLOBAL_PHASE}>
392
393 A new global variable, C<${^GLOBAL_PHASE}>, has been added to allow
394 introspection of the current phase of the perl interpreter. It's explained in
395 detail in L<perlvar/"${^GLOBAL_PHASE}"> and
396 L<perlmod/"BEGIN, UNITCHECK, CHECK, INIT and END">.
397
398 =head3 C<-d:-foo> calls C<Devel::foo::unimport>
399
400 The syntax C<-dI<B<:>foo>> was extended in 5.6.1 to make C<-dI<:fooB<=bar>>>
401 equivalent to C<-MDevel::foo=bar>, which expands
402 internally to C<use Devel::foo 'bar';>.
403 F<perl> now allows prefixing the module name with C<->, with the same
404 semantics as C<-M>, I<i.e.>
405
406 =over 4
407
408 =item C<-d:-foo>
409
410 Equivalent to C<-M-Devel::foo>, expands to
411 C<no Devel::foo;>, calls C<< Devel::foo->unimport() >>
412 if the method exists.
413
414 =item C<-d:-foo=bar>
415
416 Equivalent to C<-M-Devel::foo=bar>, expands to C<no Devel::foo 'bar';>,
417 calls C<< Devel::foo->unimport('bar') >> if the method exists.
418
419 =back
420
421 This is particularly useful for suppressing the default actions of a
422 C<Devel::*> module's C<import> method whilst still loading it for debugging.
423
424 =head3 Filehandle method calls load L<IO::File> on demand
425
426 When a method call on a filehandle would die because the method cannot
427 be resolved, and L<IO::File> has not been loaded, Perl now loads L<IO::File>
428 via C<require> and attempts method resolution again:
429
430   open my $fh, ">", $file;
431   $fh->binmode(":raw");     # loads IO::File and succeeds
432
433 This also works for globs like STDOUT, STDERR and STDIN:
434
435   STDOUT->autoflush(1);
436
437 Because this on-demand load only happens if method resolution fails, the
438 legacy approach of manually loading an L<IO::File> parent class for partial
439 method support still works as expected:
440
441   use IO::Handle;
442   open my $fh, ">", $file;
443   $fh->autoflush(1);        # IO::File not loaded
444
445 =head3 IPv6 support
446
447 The C<Socket> module provides new affordances for IPv6,
448 including implementations of the C<Socket::getaddrinfo()> and
449 C<Socket::getnameinfo()> functions, along with related constants, and a
450 handful of new functions.  See L<Socket>.
451
452 =head3 DTrace probes now include package name
453
454 The DTrace probes now include an additional argument (C<arg3>) which contains
455 the package the subroutine being entered or left was compiled in.
456
457 For example using the following DTrace script:
458
459   perl$target:::sub-entry
460   {
461       printf("%s::%s\n", copyinstr(arg0), copyinstr(arg3));
462   }
463
464 and then running:
465
466   perl -e'sub test { }; test'
467
468 DTrace will print:
469
470   main::test
471
472 =head2 New C APIs
473
474 See L</Internal Changes>.
475
476 =head1 Security
477
478 =head2 User-defined regular expression properties
479
480 In L<perlunicode/"User-Defined Character Properties">, it says you can
481 create custom properties by defining subroutines whose names begin with
482 "In" or "Is". However, Perl did not actually enforce that naming
483 restriction, so \p{foo::bar} could call foo::bar() if it existed. Now this
484 convention has been enforced.
485
486 Also, Perl no longer allows a tainted regular expression to invoke a
487 user-defined. It simply dies instead [perl #82616].
488
489 =head1 Incompatible Changes
490
491 Perl 5.14.0 is not binary-compatible with any previous stable release.
492
493 In addition to the sections that follow, see L</C API Changes>.
494
495 =head2 Regular Expressions and String Escapes
496
497 =head3 C<\cI<X>>
498
499 The backslash-c construct was designed as a way of specifying
500 non-printable characters, but there were no restrictions (on ASCII
501 platforms) on what the character following the C<c> could be.  Now, that
502 character must be one of the ASCII characters.
503
504 =head3 \400-\777
505
506 Use of C<\400>-C<\777> in regexes in certain circumstances has given
507 different, anomalous behavior than their use in all other
508 double-quote-like contexts.   Since 5.10.1, a deprecated warning message
509 has been raised when this happens.  Now, all double-quote-like contexts
510 have the same behavior, namely to be equivalent to C<\x{100}> -
511 C<\x{1FF}>, with no deprecation warning. Use of these values in the
512 command line option C<"-0"> retains the current meaning to slurp input
513 files whole; previously, this was documented only for C<"-0777">.  It is
514 recommended, however, because of various ambiguities, to use the new
515 C<\o{...}> construct to represent characters in octal.
516
517 =head3 Most C<\p{}> properties are now immune to case-insensitive matching
518
519 For most Unicode properties, it doesn't make sense to have them match
520 differently under C</i> case-insensitive matching than not.  And doing
521 so leads to unexpected results and potential security holes.  For
522 example
523
524  m/\p{ASCII_Hex_Digit}+/i
525
526 could previously match non-ASCII characters because of the Unicode
527 matching rules.  There were a number of bugs in this feature until an
528 earlier release in the 5.13 series.  Now this release reverts, and
529 removes the feature completely except for the few properties where
530 people have come to expect it, namely the ones where casing is an
531 integral part of their functionality, such as C<m/\p{Uppercase}/i> and
532 C<m/\p{Lowercase}/i>, both of which match the exact same code points,
533 namely those matched by C<m/\p{Cased}/i>.  Details are in
534 L<perlrecharclass/Unicode Properties>.
535
536 XXX The mention of ‘until an earlier release in the 5.13 series’ needs to
537 change, but I do not fully understand what happened here.
538
539 User-defined property handlers that need to match differently under
540 C</i> must change to read the new boolean parameter passed to it which is
541 non-zero if case-insensitive matching is in effect or 0 otherwise.  See
542 L<perluniprops/User-Defined Character Properties>.
543
544 =head3 \p{} implies Unicode semantics
545
546 Now, a Unicode property match specified in the pattern will indicate
547 that the pattern is meant for matching according to Unicode rules, the way
548 C<\x{}> does.
549
550 =head3 Regular expressions retain their localeness when interpolated
551
552 Regular expressions compiled under C<"use locale"> now retain this when
553 interpolated into a new regular expression compiled outside a
554 C<"use locale">, and vice-versa.
555
556 Previously, a regular expression interpolated into another one inherited
557 the localeness of the surrounding one, losing whatever state it
558 originally had.  This is considered a bug fix, but may trip up code that
559 has come to rely on the incorrect behavior.
560
561 =head3 Stringification of regexes has changed
562
563 Default regular expression modifiers are now notated by using
564 C<(?^...)>.  Code relying on the old stringification will fail.  The
565 purpose of this is so that when new modifiers are added, such code will
566 not have to change (after this one time), as the stringification will
567 automatically incorporate the new modifiers.
568
569 Code that needs to work properly with both old- and new-style regexes
570 can avoid the whole issue by using (for Perls since 5.9.5; see L<re>):
571
572  use re qw(regexp_pattern);
573  my ($pat, $mods) = regexp_pattern($re_ref);
574
575 If the actual stringification is important, or older Perls need to be
576 supported, you can use something like the following:
577
578     # Accept both old and new-style stringification
579     my $modifiers = (qr/foobar/ =~ /\Q(?^/) ? '^' : '-xism';
580
581 And then use C<$modifiers> instead of C<-xism>.
582
583 =head3 Run-time code blocks in regular expressions inherit pragmata
584
585 Code blocks in regular expressions (C<(?{...})> and C<(??{...})>) used not
586 to inherit any pragmata (strict, warnings, etc.) if the regular expression
587 was compiled at run time as happens in cases like these two:
588
589   use re 'eval';
590   $foo =~ $bar; # when $bar contains (?{...})
591   $foo =~ /$bar(?{ $finished = 1 })/;
592
593 This was a bug, which has now been fixed. But it has the potential to break
594 any code that was relying on it.
595
596 =head2 Stashes and Package Variables
597
598 =head3 Localised tied hashes and arrays are no longed tied
599
600 In the following:
601
602     tie @a, ...;
603     {
604         local @a;
605         # here, @a is a now a new, untied array
606     }
607     # here, @a refers again to the old, tied array
608
609 The new local array used to be made tied too, which was fairly pointless,
610 and has now been fixed. This fix could however potentially cause a change
611 in behaviour of some code.
612
613 =head3 Stashes are now always defined
614
615 C<defined %Foo::> now always returns true, even when no symbols have yet been
616 defined in that package.
617
618 This is a side effect of removing a special case kludge in the tokeniser,
619 added for 5.10.0, to hide side effects of changes to the internal storage of
620 hashes that drastically reduce their memory usage overhead.
621
622 Calling defined on a stash has been deprecated since 5.6.0, warned on
623 lexicals since 5.6.0, and warned for stashes (and other package
624 variables) since 5.12.0. C<defined %hash> has always exposed an
625 implementation detail - emptying a hash by deleting all entries from it does
626 not make C<defined %hash> false, hence C<defined %hash> is not valid code to
627 determine whether an arbitrary hash is empty. Instead, use the behaviour
628 that an empty C<%hash> always returns false in a scalar context.
629
630 =head3 Dereferencing typeglobs
631
632 If you assign a typeglob to a scalar variable:
633
634     $glob = *foo;
635
636 the glob that is copied to C<$glob> is marked with a special flag
637 indicating that the glob is just a copy. This allows subsequent assignments
638 to C<$glob> to overwrite the glob. The original glob, however, is
639 immutable.
640
641 Many Perl operators did not distinguish between these two types of globs.
642 This would result in strange behaviour in edge cases: C<untie $scalar>
643 would do nothing if the last thing assigned to the scalar was a glob
644 (because it treated it as C<untie *$scalar>, which unties a handle).
645 Assignment to a glob slot (e.g., C<*$glob = \@some_array>) would simply
646 assign C<\@some_array> to C<$glob>.
647
648 To fix this, the C<*{}> operator (including the C<*foo> and C<*$foo> forms)
649 has been modified to make a new immutable glob if its operand is a glob
650 copy.  This allows operators that make a distinction between globs and
651 scalars to be modified to treat only immutable globs as globs.  (C<tie>,
652 C<tied> and C<untie> have been left as they are for compatibility's sake,
653 but will warn. See L</Deprecations>.)
654
655 This causes an incompatible change in code that assigns a glob to the
656 return value of C<*{}> when that operator was passed a glob copy. Take the
657 following code, for instance:
658
659     $glob = *foo;
660     *$glob = *bar;
661
662 The C<*$glob> on the second line returns a new immutable glob. That new
663 glob is made an alias to C<*bar>. Then it is discarded. So the second
664 assignment has no effect.
665
666 See L<http://rt.perl.org/rt3/Public/Bug/Display.html?id=77810> for even
667 more detail.
668
669 =head3 Clearing stashes
670
671 Stash list assignment C<%foo:: = ()> used to make the stash anonymous
672 temporarily while it was being emptied. Consequently, any of its
673 subroutines referenced elsewhere would become anonymous (showing up as
674 "(unknown)" in C<caller>). Now they retain their package names, such that
675 C<caller> will return the original sub name if there is still a reference
676 to its typeglob, or "foo::__ANON__" otherwise [perl #79208].
677
678 =head3 Magic variables outside the main package
679
680 In previous versions of Perl, magic variables like C<$!>, C<%SIG>, etc. would
681 'leak' into other packages.  So C<%foo::SIG> could be used to access signals,
682 C<${"foo::!"}> (with strict mode off) to access C's C<errno>, etc.
683
684 This was a bug, or an 'unintentional' feature, which caused various ill effects,
685 such as signal handlers being wiped when modules were loaded, etc.
686
687 This has been fixed (or the feature has been removed, depending on how you see
688 it).
689
690 =head2 Changes to Syntax or to Perl Operators
691
692 =head3 C<given> return values
693
694 C<given> blocks now return the last evaluated
695 expression, or an empty list if the block was exited by C<break>. Thus you
696 can now write:
697
698     my $type = do {
699      given ($num) {
700       break     when undef;
701       'integer' when /^[+-]?[0-9]+$/;
702       'float'   when /^[+-]?[0-9]+(?:\.[0-9]+)?$/;
703       'unknown';
704      }
705     };
706
707 See L<perlsyn/Return value> for details.
708
709 =head3 Change in the parsing of certain prototypes
710
711 Functions declared with the following prototypes now behave correctly as unary
712 functions:
713
714   *
715   \$ \% \@ \* \&
716   \[...]
717   ;$ ;*
718   ;\$ ;\% etc.
719   ;\[...]
720
721 Due to this bug fix [perl #75904], functions
722 using the C<(*)>, C<(;$)> and C<(;*)> prototypes
723 are parsed with higher precedence than before. So in the following example:
724
725   sub foo($);
726   foo $a < $b;
727
728 the second line is now parsed correctly as C<< foo($a) < $b >>, rather than
729 C<< foo($a < $b) >>. This happens when one of these operators is used in
730 an unparenthesised argument:
731
732   < > <= >= lt gt le ge
733   == != <=> eq ne cmp ~~
734   &
735   | ^
736   &&
737   || //
738   .. ...
739   ?:
740   = += -= *= etc.
741
742 =head3 Smart-matching against array slices
743
744 Previously, the following code resulted in a successful match:
745
746     my @a = qw(a y0 z);
747     my @b = qw(a x0 z);
748     @a[0 .. $#b] ~~ @b;
749
750 This odd behaviour has now been fixed [perl #77468].
751
752 =head3 Negation treats strings differently from before
753
754 The unary negation operator C<-> now treats strings that look like numbers
755 as numbers [perl #57706].
756
757 =head3 Negative zero
758
759 Negative zero (-0.0), when converted to a string, now becomes "0" on all
760 platforms. It used to become "-0" on some, but "0" on others.
761
762 If you still need to determine whether a zero is negative, use
763 C<sprintf("%g", $zero) =~ /^-/> or the L<Data::Float> module on CPAN.
764
765 =head3 C<:=> is now a syntax error
766
767 Previously C<my $pi := 4;> was exactly equivalent to C<my $pi : = 4;>,
768 with the C<:> being treated as the start of an attribute list, ending before
769 the C<=>. The use of C<:=> to mean C<: => was deprecated in 5.12.0, and is now
770 a syntax error. This will allow the future use of C<:=> as a new token.
771
772 We find no Perl 5 code on CPAN using this construction, outside the core's
773 tests for it, so we believe that this change will have very little impact on
774 real-world codebases.
775
776 If it is absolutely necessary to have empty attribute lists (for example,
777 because of a code generator) then avoid the error by adding a space before
778 the C<=>.
779
780 =head2 Threads and Processes
781
782 =head3 Directory handles not copied to threads
783
784 On systems other than Windows that do not have
785 a C<fchdir> function, newly-created threads no
786 longer inherit directory handles from their parent threads. Such programs
787 would usually have crashed anyway [perl #75154].
788
789 =head3 C<close> on shared pipes
790
791 The C<close> function no longer waits for the child process to exit if the
792 underlying file descriptor is still in use by another thread, to avoid
793 deadlocks. It returns true in such cases.
794
795 =head3 fork() emulation will not wait for signalled children
796
797 On Windows parent processes would not terminate until all forked
798 childred had terminated first.  However, C<kill('KILL', ...)> is
799 inherently unstable on pseudo-processes, and C<kill('TERM', ...)>
800 might not get delivered if the child if blocked in a system call.
801
802 To avoid the deadlock and still provide a safe mechanism to terminate
803 the hosting process, Perl will now no longer wait for children that
804 have been sent a SIGTERM signal.  It is up to the parent process to
805 waitpid() for these children if child clean-up processing must be
806 allowed to finish. However, it is also the responsibility of the
807 parent then to avoid the deadlock by making sure the child process
808 can't be blocked on I/O either.
809
810 See L<perlfork> for more information about the fork() emulation on
811 Windows.
812
813 =head2 Configuration
814
815 =head3 Naming fixes in Policy_sh.SH may invalidate Policy.sh
816
817 Several long-standing typos and naming confusions in Policy_sh.SH have
818 been fixed, standardizing on the variable names used in config.sh.
819
820 This will change the behavior of Policy.sh if you happen to have been
821 accidentally relying on the Policy.sh incorrect behavior.
822
823 =head3 Perl source code is read in text mode on Windows
824
825 Perl scripts used to be read in binary mode on Windows for the benefit
826 of the ByteLoader module (which is no longer part of core Perl).  This
827 had the side effect of breaking various operations on the DATA filehandle,
828 including seek()/tell(), and even simply reading from DATA after file handles
829 have been flushed by a call to system(), backticks, fork() etc.
830
831 The default build options for Windows have been changed to read Perl source
832 code on Windows in text mode now.  Hopefully ByteLoader will be updated on
833 CPAN to automatically handle this situation [perl #28106].
834
835 =head1 Deprecations
836
837 See also L</Deprecated C APIs>.
838
839 =head2 Omitting a space between a regular expression and subsequent word
840
841 Omitting a space between a regular expression operator or
842 its modifiers and the following word is deprecated.  For
843 example, C<< m/foo/sand $bar >> will still be parsed
844 as C<< m/foo/s and $bar >> but will issue a warning.
845
846 =head2 Deprecation warning added for deprecated-in-core .pl libs
847
848 This is a mandatory warning, not obeying -X or lexical warning bits.
849 The warning is modelled on that supplied by deprecate.pm for
850 deprecated-in-core .pm libraries.  It points to the specific CPAN
851 distribution that contains the .pl libraries.  The CPAN version, of
852 course, does not generate the warning.
853
854 =head2 List assignment to C<$[>
855
856 Assignment to C<$[> was deprecated and started to give warnings in
857 Perl version 5.12.0.  This version of perl also starts to emit a warning when
858 assigning to C<$[> in list context.  This fixes an oversight in 5.12.0.
859
860 =head2 Use of qw(...) as parentheses
861
862 Historically the parser fooled itself into thinking that C<qw(...)> literals
863 were always enclosed in parentheses, and as a result you could sometimes omit
864 parentheses around them:
865
866     for $x qw(a b c) { ... }
867
868 The parser no longer lies to itself in this way.  Wrap the list literal in
869 parentheses, like this:
870
871     for $x (qw(a b c)) { ... }
872
873 =head2 C<\N{BELL}> is deprecated
874
875 This is because Unicode is using that name for a different character.
876 See L</Unicode Version 6.0 is now supported (mostly)> for more
877 explanation.
878
879 =head2 C<?PATTERN?> is deprecated
880
881 C<?PATTERN?> (without the initial m) has been deprecated and now produces
882 a warning.  This is to allow future use of C<?> in new operators.
883 The match-once functionality is still available in the form of C<m?PATTERN?>.
884
885 =head2 Tie functions on scalars holding typeglobs
886
887 Calling a tie function (C<tie>, C<tied>, C<untie>) with a scalar argument
888 acts on a file handle if the scalar happens to hold a typeglob.
889
890 This is a long-standing bug that will be removed in Perl 5.16, as
891 there is currently no way to tie the scalar itself when it holds
892 a typeglob, and no way to untie a scalar that has had a typeglob
893 assigned to it.
894
895 Now there is a deprecation warning whenever a tie
896 function is used on a handle without an explicit C<*>.
897
898 =head2 User-defined case-mapping
899
900 This feature is being deprecated due to its many issues, as documented in
901 L<perlunicode/User-Defined Case Mappings (for serious hackers only)>.
902 It is planned to remove this feature in Perl 5.16.  A CPAN module
903 providing improved functionality is being prepared for release by the
904 time 5.14 is.
905
906 XXX What module is that?
907
908 =head2 Deprecated modules
909
910 The following modules will be removed from the core distribution in a
911 future release, and should be installed from CPAN instead. Distributions
912 on CPAN which require these should add them to their prerequisites. The
913 core versions of these modules will issue a deprecation warning.
914
915 If you ship a packaged version of Perl, either alone or as part of a
916 larger system, then you should carefully consider the repercussions of
917 core module deprecations.  You may want to consider shipping your default
918 build of Perl with packages for some or all deprecated modules which
919 install into C<vendor> or C<site> perl library directories.  This will
920 inhibit the deprecation warnings.
921
922 Alternatively, you may want to consider patching F<lib/deprecate.pm>
923 to provide deprecation warnings specific to your packaging system
924 or distribution of Perl, consistent with how your packaging system
925 or distribution manages a staged transition from a release where the
926 installation of a single package provides the given functionality, to
927 a later release where the system administrator needs to know to install
928 multiple packages to get that same functionality.
929
930 You can silence these deprecation warnings by installing the modules
931 in question from CPAN.  To install the latest version of all of them,
932 just install C<Task::Deprecations::5_14>.
933
934 =over
935
936 =item L<Devel::DProf>
937
938 We strongly recommend that you install and used L<Devel::NYTProf> in
939 preference, as it offers significantly improved profiling and reporting.
940
941 =back
942
943 =head1 Performance Enhancements
944
945 =head2 "Safe signals" optimisation
946
947 Signal dispatch has been moved from the runloop into control ops. This
948 should give a few percent speed increase, and eliminates almost all of
949 the speed penalty caused by the introduction of "safe signals" in
950 5.8.0. Signals should still be dispatched within the same statement as
951 they were previously - if this is not the case, or it is possible to
952 create uninterruptible loops, this is a bug, and reports are encouraged
953 of how to recreate such issues.
954
955 =head2 Optimisation of shift; and pop; calls without arguments
956
957 Two fewer OPs are used for shift and pop calls with no argument (with
958 implicit C<@_>). This change makes C<shift;> 5% faster than C<shift @_;>
959 on non-threaded perls and 25% faster on threaded.
960
961 =head2 Optimisation of regexp engine string comparison work
962
963 The foldEQ_utf8 API function for case-insensitive comparison of strings (which
964 is used heavily by the regexp engine) was substantially refactored and
965 optimised - and its documentation much improved as a free bonus gift.
966
967 =head2 Regular expression compilation speed-up
968
969 Compiling regular expressions has been made faster for the case where upgrading
970 the regex to utf8 is necessary but that isn't known when the compilation begins.
971
972 =head2 String appending is 100 times faster
973
974 When doing a lot of string appending, perl could end up allocating a lot more
975 memory than needed in a very inefficient way, if perl was configured to use the
976 system's C<malloc> implementation instead of its own.
977
978 C<sv_grow>, which is what's being used to allocate more memory if necessary
979 when appending to a string, has now been taught how to round up the memory
980 it requests to a certain geometric progression, making it much faster on
981 certain platforms and configurations.  On Win32, it's now about 100 times
982 faster.
983
984 =head2 Eliminate C<PL_*> accessor functions under ithreads
985
986 When C<MULTIPLICITY> was first developed, and interpreter state moved into
987 an interpreter struct, thread and interpreter local C<PL_*> variables were
988 defined as macros that called accessor functions, returning the address of
989 the value, outside of the perl core.  The intent was to allow members
990 within the interpreter struct to change size without breaking binary
991 compatibility, so that bug fixes could be merged to a maintenance branch
992 that necessitated such a size change.
993
994 However, some non-core code defines C<PERL_CORE>, sometimes intentionally
995 to bypass this mechanism for speed reasons, sometimes for other reasons but
996 with the inadvertent side effect of bypassing this mechanism.  As some of
997 this code is widespread in production use, the result is that the core
998 I<can't> change the size of members of the interpreter struct, as it will
999 break such modules compiled against a previous release on that maintenance
1000 branch.  The upshot is that this mechanism is redundant, and well-behaved
1001 code is penalised by it.  Hence it can and should be removed (and has
1002 been).
1003
1004 =head2 Freeing weak references
1005
1006 When an object has many weak references to it, freeing that object
1007 can under some some circumstances take O(N^2) time to free (where N is the
1008 number of references). The number of circumstances has been reduced
1009 [perl #75254]
1010
1011 =head2 Lexical array and hash assignments
1012
1013 An earlier optimisation to speed up C<my @array = ...> and
1014 C<my %hash = ...> assignments caused a bug and was disabled in Perl 5.12.0.
1015
1016 Now we have found another way to speed up these assignments [perl #82110].
1017
1018 =head2 C<@_> uses less memory
1019
1020 Previously, C<@_> was allocated for every subroutine at compile time with
1021 enough space for four entries.  Now this allocation is done on demand when
1022 the subroutine is called [perl #72416].
1023
1024 =head2 Size optimisations to SV and HV structures
1025
1026 xhv_fill has been eliminated from struct xpvhv, saving 1 IV per hash and
1027 on some systems will cause struct xpvhv to become cache-aligned. To avoid
1028 this memory saving causing a slowdown elsewhere, boolean use of HvFILL
1029 now calls HvTOTALKEYS instead (which is equivalent) - so while the fill
1030 data when actually required are now calculated on demand, the cases when
1031 this needs to be done should be few and far between.
1032
1033 The order of structure elements in SV bodies has changed.  Effectively,
1034 the NV slot has swapped location with STASH and MAGIC.  As all access to
1035 SV members is via macros, this should be completely transparent.  This
1036 change allows the space saving for PVHVs documented above, and may reduce
1037 the memory allocation needed for PVIVs on some architectures.
1038
1039 C<XPV>, C<XPVIV>, and C<XPVNV> now only allocate the parts of the C<SV> body
1040 they actually use, saving some space.
1041
1042 Scalars containing regular expressions now only allocate the part of the C<SV>
1043 body they actually use, saving some space.
1044
1045 =head2 Memory consumption improvements to Exporter
1046
1047 The @EXPORT_FAIL AV is no longer created unless required, hence neither is
1048 the typeglob backing it.  This saves about 200 bytes for every package that
1049 uses Exporter but doesn't use this functionality.
1050
1051 =head2 Memory savings for weak references
1052
1053 For weak references, the common case of just a single weak reference per
1054 referent has been optimised to reduce the storage required. In this case it
1055 saves the equivalent of one small Perl array per referent.
1056
1057 =head2 C<%+> and C<%-> use less memory
1058
1059 The bulk of the C<Tie::Hash::NamedCapture> module used to be in the perl
1060 core.  It has now been moved to an XS module, to reduce the overhead for
1061 programs that do not use C<%+> or C<%->.
1062
1063 =head2 Multiple small improvements to threads
1064
1065 The internal structures of threading now make fewer API calls and fewer
1066 allocations, resulting in noticeably smaller object code.  Additionally,
1067 many thread context checks have been deferred so that they're only done
1068 when required (although this is only possible for non-debugging builds).
1069
1070 =head2 Adjacent pairs of nextstate opcodes are now optimized away
1071
1072 Previously, in code such as
1073
1074     use constant DEBUG => 0;
1075
1076     sub GAK {
1077         warn if DEBUG;
1078         print "stuff\n";
1079     }
1080
1081 the ops for C<warn if DEBUG;> would be folded to a C<null> op (C<ex-const>), but
1082 the C<nextstate> op would remain, resulting in a runtime op dispatch of
1083 C<nextstate>, C<nextstate>, ....
1084
1085 The execution of a sequence of C<nextstate> ops is indistinguishable from just
1086 the last C<nextstate> op so the peephole optimizer now eliminates the first of
1087 a pair of C<nextstate> ops, except where the first carries a label, since labels
1088 must not be eliminated by the optimizer and label usage isn't conclusively known
1089 at compile time.
1090
1091 =head1 Modules and Pragmata
1092
1093 =head2 New Modules and Pragmata
1094
1095 =over 4
1096
1097 =item *
1098
1099 C<CPAN::Meta::YAML> 0.003 has been added as a dual-life module.  It supports a
1100 subset of YAML sufficient for reading and writing META.yml and MYMETA.yml files
1101 included with CPAN distributions or generated by the module installation
1102 toolchain. It should not be used for any other general YAML parsing or
1103 generation task.
1104
1105 =item *
1106
1107 C<CPAN::Meta> version 2.110440 has been added as a dual-life module. It
1108 provides a standard library to read, interpret and write CPAN distribution
1109 metadata files (e.g. META.json and META.yml) which describes a
1110 distribution, its contents, and the requirements for building it and
1111 installing it. The latest CPAN distribution metadata specification is
1112 included as C<CPAN::Meta::Spec> and notes on changes in the specification
1113 over time are given in C<CPAN::Meta::History>.
1114
1115 =item *
1116
1117 C<HTTP::Tiny> 0.010 has been added as a dual-life module.  It is a very
1118 small, simple HTTP/1.1 client designed for simple GET requests and file
1119 mirroring.  It has has been added to enable CPAN.pm and CPANPLUS to
1120 "bootstrap" HTTP access to CPAN using pure Perl without relying on external
1121 binaries like F<curl> or F<wget>.
1122
1123 =item *
1124
1125 C<JSON::PP> 2.27105 has been added as a dual-life module, for the sake of
1126 reading F<META.json> files in CPAN distributions.
1127
1128 =item *
1129
1130 C<Module::Metadata> 1.000003 has been added as a dual-life module.  It gathers
1131 package and POD information from Perl module files.  It is a standalone module
1132 based on Module::Build::ModuleInfo for use by other module installation
1133 toolchain components.  Module::Build::ModuleInfo has been deprecated in
1134 favor of this module instead.
1135
1136 =item *
1137
1138 C<Perl::OSType> 1.002 has been added as a dual-life module.  It maps Perl
1139 operating system names (e.g. 'dragonfly' or 'MSWin32') to more generic types
1140 with standardized names (e.g.  "Unix" or "Windows").  It has been refactored
1141 out of Module::Build and ExtUtils::CBuilder and consolidates such mappings into
1142 a single location for easier maintenance.
1143
1144 =item *
1145
1146 The following modules were added by the C<Unicode::Collate> 
1147 upgrade. See below for details.
1148
1149 C<Unicode::Collate::CJK::Big5>
1150
1151 C<Unicode::Collate::CJK::GB2312>
1152
1153 C<Unicode::Collate::CJK::JISX0208>
1154
1155 C<Unicode::Collate::CJK::Korean>
1156
1157 C<Unicode::Collate::CJK::Pinyin>
1158
1159 C<Unicode::Collate::CJK::Stroke>
1160
1161 =item *
1162
1163 C<Version::Requirements> version 0.101020 has been added as a dual-life
1164 module.  It provides a standard library to model and manipulates module
1165 prerequisites and version constraints as defined in the L<CPAN::Meta::Spec>.
1166
1167 =back
1168
1169 =head2 Selected Module and Pragma Updates
1170
1171 =over 4
1172
1173 =item *
1174
1175 C<Archive::Extract> has been upgraded from version 0.38 to 0.48.
1176
1177 Updates since 0.38 include: a safe print method that guards
1178 Archive::Extract from changes to $\; a fix to the tests when run in core
1179 perl; support for TZ files; a modification for the lzma
1180 logic to favour IO::Uncompress::Unlzma; and a fix
1181 for an issue with NetBSD-current and its new unzip 
1182 executable.
1183
1184 =item *
1185
1186 C<Archive::Tar> has been upgraded from version 1.54 to 1.76.
1187
1188 Important changes since 1.54 include the following:
1189
1190 =over
1191
1192 =item *
1193
1194 Compatibility with busybox implementations of tar
1195
1196 =item *
1197
1198 A fix so that C<write()> and C<create_archive()>
1199 close only handles they opened
1200
1201 =item *
1202
1203 A bug was fixed regarding the exit code of extract_archive.
1204
1205 =item *
1206
1207 C<ptar> has a new option to allow safe
1208 creation of tarballs without world-writable files on Windows, allowing those
1209 archives to be uploaded to CPAN.
1210
1211 =item *
1212
1213 A new ptargrep utility for using regular expressions against 
1214 the contents of files in a tar archive.
1215
1216 =item *
1217
1218 Pax extended headers are now skipped.
1219
1220 =back
1221
1222 =item *
1223
1224 C<B> has been upgraded from version 1.23 to 1.27.
1225
1226 It no longer crashes when taking apart a C<y///> containing characters
1227 outside the octet range or compiled in a C<use utf8> scope.
1228
1229 The size of the shared object has been reduced by about 40%, with no
1230 reduction in functionality.
1231
1232 =item *
1233
1234 C<B::Concise> has been upgraded from version 0.78 to 0.82.
1235
1236 B::Concise marks rv2sv, rv2av and rv2hv ops with the new OPpDEREF flag
1237 as "DREFed".
1238
1239 It no longer produces mangled output with the C<-tree> option
1240 [perl #80632].
1241
1242 =item *
1243
1244 C<B::Deparse> has been upgraded from version 0.96 to 1.02.
1245
1246 The deparsing of a nextstate op has changed when it has both a
1247 change of package (relative to the previous nextstate), or a change of
1248 C<%^H> or other state, and a label.  Previously the label was emitted
1249 first, but now the label is emitted last.
1250
1251 The C<no 5.13.2> or similar form is now correctly handled by B::Deparse.
1252
1253 B::Deparse now properly handles the code that applies a conditional
1254 pattern match against implicit C<$_> as it was fixed in [perl #20444].
1255
1256 Deparsing of C<our> followed by a variable with funny characters
1257 (as permitted under the C<utf8> pragma) has also been fixed [perl #33752].
1258
1259 =item *
1260
1261 C<Carp> has been upgraded from version 1.18 to 1.19.
1262
1263 L<Carp> now detects incomplete L<caller()|perlfunc/"caller EXPR"> overrides and
1264 avoids using bogus C<@DB::args>. To provide backtraces, Carp relies on
1265 particular behaviour of the caller built-in. Carp now detects if other code has
1266 overridden this with an incomplete implementation, and modifies its backtrace
1267 accordingly. Previously incomplete overrides would cause incorrect values in
1268 backtraces (best case), or obscure fatal errors (worst case)
1269
1270 This fixes certain cases of C<Bizarre copy of ARRAY> caused by modules
1271 overriding C<caller()> incorrectly.
1272
1273 It now also avoids using regular expressions that cause perl to
1274 load its Unicode tables, in order to avoid the 'BEGIN not safe after
1275 errors' error that will ensue if there has been a syntax error
1276 [perl #82854].
1277
1278 =item *
1279
1280 C<CGI> has been upgraded from version 3.48 to 3.51.
1281
1282 This provides the following security fixes: the MIME boundary in 
1283 multipart_init is now random and the handling of 
1284 newlines embedded in header values has been improved.
1285
1286 =item *
1287
1288 C<Compress::Raw::Bzip2> has been upgraded from version 2.024 to 2.033.
1289
1290 It has been updated to use bzip2 1.0.6.
1291
1292 =item *
1293
1294 C<CPAN> has been upgraded from version 1.94_56 to 1.9600.-
1295
1296 Major highlights:
1297
1298 =over 4
1299
1300 =item * much less configuration dialog hassle
1301
1302 =item * support for META/MYMETA.json
1303
1304 =item * support for local::lib
1305
1306 =item * support for HTTP::Tiny to reduce the dependency on ftp sites 
1307
1308 =item * automatic mirror selection
1309
1310 =item * iron out all known bugs in configure_requires
1311
1312 =item * support for distributions compressed with bzip2
1313
1314 =item * allow Foo/Bar.pm on the commandline to mean Foo::Bar
1315
1316 =back
1317
1318 =item *
1319
1320 C<CPANPLUS> has been upgraded from version 0.90 to 0.9102.
1321
1322 A dependency on Config was not recognised as a
1323 core module dependency.  This has been fixed.
1324
1325 CPANPLUS now includes support for META.json and MYMETA.json.
1326
1327 =item *
1328
1329 C<Data::Dumper> has been upgraded from version 2.125 to 2.130_02.
1330
1331 The indentation used to be off when C<$Data::Dumper::Terse> was set. This
1332 has been fixed [perl #73604].
1333
1334 This upgrade also fixes a crash when using custom sort functions that might
1335 cause the stack to change [perl #74170].
1336
1337 C<Dumpxs> no longer crashes with globs returned by C<*$io_ref>
1338 [perl #72332].
1339
1340 =item *
1341
1342 C<Devel::DProf> has been upgraded from version 20080331.00 to 20110228.00.
1343
1344 Merely loading C<Devel::DProf> now no longer triggers profiling to start.
1345 C<use Devel::DProf> and C<perl -d:DProf ...> still behave as before and start
1346 the profiler.
1347
1348 NOTE: C<Devel::DProf> is deprecated and will be removed from a future
1349 version of Perl.  We strongly recommend that you install and use
1350 L<Devel::NYTProf> instead, as it offers significantly improved
1351 profiling and reporting.
1352
1353 =item *
1354
1355 C<diagnostics> has been upgraded from version 1.19 to 1.22.
1356
1357 It now renders pod links slightly better, and has been taught to find
1358 descriptions for messages that share their descriptions with other
1359 messages.
1360
1361 =item *
1362
1363 C<Digest::MD5> has been upgraded from version 2.39 to 2.51.
1364
1365 It is now safe to use this module in combination with threads.
1366
1367 =item *
1368
1369 C<Digest::SHA> has been upgraded from version 5.47 to 5.61.
1370
1371 C<shasum> now more closely mimics C<sha1sum>/C<md5sum>.
1372
1373 C<Addfile> accepts all POSIX filenames.
1374
1375 New SHA-512/224 and SHA-512/256 transforms (ref. NIST Draft FIPS 180-4
1376 [February 2011])
1377
1378 =item *
1379
1380 C<DynaLoader> has been upgraded from version 1.10 to 1.12.
1381
1382 It fixes a buffer overflow when passed a very long file name.
1383
1384 It no longer inherits from AutoLoader; hence it no longer
1385 produces weird error messages for unsuccessful method calls on classes that
1386 inherit from DynaLoader [perl #84358].
1387
1388 =item *
1389
1390 C<Encode> has been upgraded from version 2.39 to 2.42.
1391
1392 Now, all 66 Unicode non-characters are treated the same way U+FFFF has
1393 always been treated; in cases when it was disallowed, all 66 are
1394 disallowed; in those cases where it warned, all 66 warn.
1395
1396 =item *
1397
1398 C<Errno> has been upgraded from version 1.11 to 1.13.
1399
1400 The implementation of C<Errno> has been refactored to use about 55% less memory.
1401
1402 On some platforms with unusual header files, like Win32/gcc using mingw64
1403 headers, some constants which weren't actually error numbers have been exposed
1404 by C<Errno>.  This has been fixed [perl #77416].
1405
1406 =item *
1407
1408 C<Exporter> has been upgraded from version 5.64_01 to 5.64_03.
1409
1410 Exporter no longer overrides C<$SIG{__WARN__}> [perl #74472]
1411
1412 =item *
1413
1414 C<ExtUtils::Constant> has been upgraded from 0.22 to 0.23.
1415
1416 The C<AUTOLOAD> helper code generated by C<ExtUtils::Constant::ProxySubs>
1417 can now C<croak> for missing constants, or generate a complete C<AUTOLOAD>
1418 subroutine in XS, allowing simplification of many modules that use it
1419 (C<Fcntl>, C<File::Glob>, C<GDBM_File>, C<I18N::Langinfo>, C<POSIX>,
1420 C<Socket>).
1421
1422 C<ExtUtils::Constant::ProxySubs> can now optionally push the names of all
1423 constants onto the package's C<@EXPORT_OK>.
1424
1425 =item *
1426
1427 C<File::DosGlob> has been upgraded from version 1.01 to 1.03.
1428
1429 It allows patterns containing literal parentheses (they no longer need to
1430 be escaped).  On Windows, it no longer
1431 adds an extra F<./> to the file names
1432 returned when the pattern is a relative glob with a drive specification,
1433 like F<c:*.pl> [perl #71712].
1434
1435 =item *
1436
1437 C<File::Fetch> has been upgraded from version 0.24 to 0.32.
1438
1439 C<HTTP::Lite> is now supported for 'http' scheme.
1440
1441 The C<fetch> utility is supported on FreeBSD, NetBSD and
1442 Dragonfly BSD for the C<http> and C<ftp> schemes.
1443
1444 =item *
1445
1446 C<File::Find> has been upgraded from version 1.15 to 1.18.
1447
1448 It improves handling of backslashes on Windows, so that paths like
1449 F<c:\dir\/file> are no longer generated [perl #71710].
1450
1451 =item *
1452
1453 C<File::stat> has been upgraded from 1.02 to 1.04.
1454
1455 The C<-x> and C<-X> file test operators now work correctly under the root
1456 user.
1457
1458 =item *
1459
1460 C<GDBM_File> has been upgraded from 1.10 to 1.13.
1461
1462 This fixes a memory leak when DBM filters are used.
1463
1464 =item *
1465
1466 C<Hash::Util> has been upgraded from 0.07 to 0.10.
1467
1468 Hash::Util no longer emits spurious "uninitialized" warnings when
1469 recursively locking hashes that have undefined values [perl #74280].
1470
1471 =item *
1472
1473 C<I18N::Langinfo> has been upgraded from version 0.03 to 0.07.
1474
1475 C<langinfo()> now defaults to using C<$_> if there is no argument given, just
1476 as the documentation has always claimed.
1477
1478 =item *
1479
1480 C<IO::Select> has been upgraded from version 1.17 to 1.18.
1481
1482 It now allows IO::Handle objects (and objects in derived classes) to be
1483 removed from an IO::Select set even if the underlying file descriptor is
1484 closed or invalid.
1485
1486 =item *
1487
1488 C<IPC::Cmd> has been upgraded from version 0.54 to 0.68.
1489
1490 Resolves an issue with splitting Win32 command lines.  An argument
1491 consisting of the single character "0" used to be omitted (CPAN RT #62961).
1492
1493 =item *
1494
1495 C<IPC::Open3> has been upgraded from 1.05 to 1.08.
1496
1497 C<open3> now produces an error if the C<exec> call fails, allowing this
1498 condition to be distinguished from a child process that exited with a
1499 non-zero status [perl #72016].
1500
1501 The internal C<xclose> routine now knows how to handle file descriptors, as
1502 documented, so duplicating STDIN in a child process using its file
1503 descriptor now works [perl #76474].
1504
1505 =item *
1506
1507 C<Locale::Maketext> has been upgraded from version 1.14 to 1.17.
1508
1509 Locale::Maketext now supports external caches.
1510
1511 This upgrade also fixes an infinite loop in
1512 C<Locale::Maketext::Guts::_compile()> when
1513 working with tainted values (CPAN RT #40727).
1514
1515 C<< ->maketext >> calls will now back up and restore C<$@> so that error
1516 messages are not suppressed (CPAN RT #34182).
1517
1518 =item *
1519
1520 C<Math::BigInt> has been upgraded from version 1.89_01 to 1.994.
1521
1522 This fixes, among other things, incorrect results when computing binomial
1523 coefficients [perl #77640].
1524
1525 It also prevents C<sqrt($int)> from crashing under C<use bigrat;>
1526 [perl #73534].
1527
1528 =item *
1529
1530 C<MIME::Base64> has been upgraded from 3.08 to 3.13.
1531
1532 Includes new functions to calculate the length of encoded and decoded
1533 base64 strings.
1534
1535 Now provides C<encode_base64url> and C<decode_base64url> functions to process
1536 the base64 scheme for "URL applications".
1537
1538 =item *
1539
1540 C<Module::Build> has been upgraded from version 0.3603 to 0.3800.
1541
1542 A notable change is the deprecation of several modules.
1543 Module::Build::Version has been deprecated and Module::Build now relies
1544 directly upon L<version>.  Module::Build::ModuleInfo has been deprecated in
1545 favor of a standalone copy of it called L<Module::Metadata>.
1546 Module::Build::YAML has been deprecated in favor of L<CPAN::Meta::YAML>.
1547
1548 Module::Build now also generates META.json and MYMETA.json files
1549 in accordance with version 2 of the CPAN distribution metadata specification,
1550 L<CPAN::Meta::Spec>.  The older format META.yml and MYMETA.yml files are
1551 still generated, as well.
1552
1553 =item *
1554
1555 C<Module::CoreList> has been upgraded from version 2.29 to XXX.
1556
1557 Besides listing the updated core modules of this release, it also stops listing
1558 the C<Filespec> module.  That module never existed in core.  The scripts
1559 generating C<Module::CoreList> confused it with C<VMS::Filespec>, which actually
1560 is a core module as of perl 5.8.7.
1561
1562 =item *
1563
1564 C<NDBM_File> and C<ODBM_File> have been upgraded from 1.08 to 1.11, and
1565 from 1.08 to 1.09, respectively.
1566
1567 This fixes a memory leak when DBM filters are used.
1568
1569 =item *
1570
1571 C<overload> has been upgraded from 1.11 to 1.12.
1572
1573 C<overload::Method> can now handle subroutines that are themselves blessed
1574 into overloaded classes [perl #71998].
1575
1576 The documentation has greatly improved. See L</Documentation> below.
1577
1578 =item *
1579
1580 C<Parse::CPAN::Meta> has been upgraded from version 1.40 to 1.4401.
1581
1582 The latest Parse::CPAN::Meta can now read YAML and JSON files using
1583 L<CPAN::Meta::YAML> and L<JSON::PP>, which are now part of the Perl core.
1584
1585 =item *
1586
1587 C<PerlIO::scalar> has been upgraded from 0.07 to 0.11.
1588
1589 A C<read> after a C<seek> beyond the end of the string no longer thinks it
1590 has data to read [perl #78716].
1591
1592 =item *
1593
1594 C<POSIX> has been upgraded from 1.19 to 1.23.
1595
1596 It now includes constants for POSIX signal constants.
1597
1598 =item *
1599
1600 C<re> has been upgraded from version 0.11 to 0.17.
1601
1602 New C<use re "/flags"> pragma
1603
1604 The C<regmust> function used to crash when called on a regular expression
1605 belonging to a pluggable engine.  Now it croaks instead.
1606
1607 C<regmust> no longer leaks memory.
1608
1609 =item *
1610
1611 C<Safe> has been upgraded from version 2.25 to 2.29.
1612
1613 This fixes a possible infinite loop when looking for coderefs.
1614
1615 It adds C<&version::vxs::VCMP> to the default share.
1616
1617 =item *
1618
1619 C<SelfLoader> has been upgraded from 1.17 to 1.18.
1620
1621 It now works in taint mode [perl #72062].
1622
1623 =item *
1624
1625 C<sigtrap> has been upgraded from version 1.04 to 1.05.
1626
1627 It no longer tries to modify read-only arguments when generating a
1628 backtrace [perl #72340].
1629
1630 =item *
1631
1632 C<Socket> has been upgraded from version 1.87 to 1.94.
1633
1634 See L</IPv6 support>, above.
1635
1636 =item *
1637
1638 C<Storable> has been upgraded from version 2.22 to 2.27.
1639
1640 Includes performance improvement for overloaded classes.
1641
1642 This adds support for serialising code references that contain UTF-8 strings
1643 correctly.  The Storable minor version
1644 number changed as a result, meaning that
1645 Storable users who set C<$Storable::accept_future_minor> to a C<FALSE> value
1646 will see errors (see L<Storable/FORWARD COMPATIBILITY> for more details).
1647
1648 Freezing no longer gets confused if the Perl stack gets reallocated
1649 during freezing [perl #80074].
1650
1651 =item *
1652
1653 C<Test::Simple> has been upgraded from version 0.94 to 0.98.
1654
1655 Among many other things, subtests without a C<plan> or C<no_plan> now have an
1656 implicit C<done_testing()> added to them.
1657
1658 =item *
1659
1660 C<Thread::Semaphore> has been upgraded from version 2.09 to 2.12.
1661
1662 It provides two new methods that give more control over the decrementing of
1663 semaphores: C<down_nb> and C<down_force>.
1664
1665 =item *
1666
1667 C<Tie::Hash> has been upgraded from version 1.03 to 1.04.
1668
1669 Calling C<< Tie::Hash-E<gt>TIEHASH() >> used to loop forever.  Now it C<croak>s.
1670
1671 =item *
1672
1673 C<Unicode::Collate> has been upgraded from version 0.52_01 to 0.73.
1674
1675 Unicode::Collate has been updated to use Unicode 6.0.0.
1676
1677 Unicode::Collate::Locale now supports a plethora of new locales: ar, be,
1678 bg, de__phonebook, hu, hy, kk, mk, nso, om, tn, vi, hr, ig, ja, ko, ru, sq, 
1679 se, sr, to, uk, zh, zh__big5han, zh__gb2312han, zh__pinyin and zh__stroke.
1680
1681 The following modules have been added:
1682
1683 C<Unicode::Collate::CJK::Big5> for C<zh__big5han> which makes 
1684 tailoring of CJK Unified Ideographs in the order of CLDR's big5han ordering.
1685
1686 C<Unicode::Collate::CJK::GB2312> for C<zh__gb2312han> which makes
1687 tailoring of CJK Unified Ideographs in the order of CLDR's gb2312han ordering.
1688
1689 C<Unicode::Collate::CJK::JISX0208> which makes tailoring of 6355 kanji 
1690 (CJK Unified Ideographs) in the JIS X 0208 order.
1691
1692 C<Unicode::Collate::CJK::Korean> which makes tailoring of CJK Unified Ideographs 
1693 in the order of CLDR's Korean ordering.
1694
1695 C<Unicode::Collate::CJK::Pinyin> for C<zh__pinyin> which makes
1696 tailoring of CJK Unified Ideographs in the order of CLDR's pinyin ordering.
1697
1698 C<Unicode::Collate::CJK::Stroke> for C<zh__stroke> which makes
1699 tailoring of CJK Unified Ideographs in the order of CLDR's stroke ordering.
1700
1701 This also sees the switch from using the pure-perl version of this
1702 module to the XS version.
1703
1704 =item *
1705
1706 C<Unicode::UCD> has been upgraded from version 0.27 to 0.32.
1707
1708 A new function, C<Unicode::UCD::num()>, has been added.  This function
1709 returns the numeric value of the string passed it or C<undef> if the string
1710 in its entirety has no "safe" numeric value.  (For more detail, and for the
1711 definition of "safe", see L<Unicode::UCD/num>.)
1712
1713 This upgrade also includes a number of bug fixes:
1714
1715 =over 4
1716
1717 =item charinfo()
1718
1719 =over 4
1720
1721 =item *
1722
1723 It is now updated to Unicode Version 6 with Corrigendum #8, except,
1724 as with Perl 5.14, the code point at U+1F514 has no name.
1725
1726 =item *
1727
1728 The Hangul syllable code points have the correct names, and their
1729 decompositions are always output without requiring L<Lingua::KO::Hangul::Util>
1730 to be installed.
1731
1732 =item *
1733
1734 The CJK (Chinese-Japanese-Korean) code points U+2A700 to U+2B734
1735 and U+2B740 to U+2B81D are now properly handled.
1736
1737 =item *
1738
1739 The numeric values are now output for those CJK code points that have them.
1740
1741 =item *
1742
1743 The names that are output for code points with multiple aliases are now the
1744 corrected ones.
1745
1746 =back
1747
1748 =item charscript()
1749
1750 This now correctly returns "Unknown" instead of C<undef> for the script
1751 of a code point that hasn't been assigned another one.
1752
1753 =item charblock()
1754
1755 This now correctly returns "No_Block" instead of C<undef> for the block
1756 of a code point that hasn't been assigned to another one.
1757
1758 =back
1759
1760 =item *
1761
1762 C<version> has been upgraded from 0.82 to 0.88.
1763
1764 Due to a bug, now fixed, the C<is_strict> and C<is_lax> functions did not
1765 work when exported.
1766
1767 =item *
1768
1769 C<warnings> and C<warnings::register> have been upgraded from version 1.09
1770 to 1.11 and from version 1.01 to 1.02 respectively.
1771
1772 Calling C<use warnings> without arguments is now significantly more efficient.
1773
1774 It is now possible to register warning categories other than the names of
1775 packages using C<warnings::register>.  See L<perllexwarn> for more information.
1776
1777 =item *
1778
1779 C<VMS::DCLsym> has been upgraded from version 1.03 to 1.05.
1780
1781 Two bugs have been fixed [perl #84086]:
1782
1783 The symbol table name was lost when tying a hash, due to a thinko in
1784 C<TIEHASH>. The result was that all tied hashes interacted with the
1785 local symbol table.
1786
1787 Unless a symbol table name had been explicitly specified in the call
1788 to the constructor, querying the special key ':LOCAL' failed to
1789 identify objects connected to the local symbol table.
1790
1791 =item *
1792
1793 C<Win32> has been upgraded from version 0.39 to 0.44.
1794
1795 This release has several new functions: C<Win32::GetSystemMetrics>,
1796 C<Win32::GetProductInfo>, C<Win32::GetOSDisplayName>.
1797
1798 The names returned by C<Win32::GetOSName> and C<Win32::GetOSDisplayName>
1799 have been corrected.
1800
1801 =back
1802
1803 =head2 Removed Modules and Pragmata
1804
1805 The following modules have been removed from the core distribution, and if
1806 needed should be installed from CPAN instead.
1807
1808 =over
1809
1810 =item C<Class::ISA>
1811
1812 =item C<Pod::Plainer>
1813
1814 =item C<Switch>
1815
1816 =back
1817
1818 The removal of C<Shell> has been deferred until after 5.14, as the
1819 implementation of C<Shell> shipped with 5.12.0 did not correctly issue the
1820 warning that it was to be removed from core.
1821
1822 =head1 Documentation
1823
1824 =head2 New Documentation
1825
1826 =head3 L<perlgpl>
1827
1828 L<perlgpl> has been updated to contain GPL version 1, as is included in the
1829 F<README> distributed with perl.
1830
1831 =head3 Perl 5.12.x delta files
1832
1833 The perldelta files for Perl 5.12.1 to 5.12.3 have been added from the
1834 maintenance branch: L<perl5121delta>, L<perl5122delta>, L<perl5123delta>.
1835
1836 =head3 L<perlpodstyle>
1837
1838 New style guide for POD documentation,
1839 split mostly from the NOTES section of the pod2man man page.
1840
1841 =head3 L<perlsource>, L<perlinterp>, L<perlhacktut>, and L<perlhacktips>
1842
1843 See L</L<perlhack> and perlrepository revamp>, below.
1844
1845 =head2 Changes to Existing Documentation
1846
1847 =head3 L<perlmodlib> is now complete
1848
1849 The perlmodlib page that came with Perl 5.12.0 was missing a lot of
1850 modules, due to a bug in the script that generates the list. This has been
1851 fixed [perl #74332].
1852
1853 =head3 Replace wrong tr/// table in L<perlebcdic>
1854
1855 L<perlebcdic> contains a helpful table to use in tr/// to convert
1856 between EBCDIC and Latin1/ASCII.  Unfortunately, the table was the
1857 inverse of the one it describes, though the code that used the table
1858 worked correctly for the specific example given.
1859
1860 The table has been changed to its inverse, and the sample code changed
1861 to correspond, as this is easier for the person trying to follow the
1862 instructions since deriving the old table is somewhat more complicated.
1863
1864 The table has also been changed to hex from octal, as that is more the norm
1865 these days, and the recipes in the pod altered to print out leading
1866 zeros to make all the values the same length.
1867
1868 =head3 Tricks for user-defined casing
1869
1870 L<perlunicode> now contains an explanation of how to override, mangle
1871 and otherwise tweak the way perl handles upper-, lower- and other-case
1872 conversions on Unicode data, and how to provide scoped changes to alter
1873 one's own code's behaviour without stomping on anybody else.
1874
1875 =head3 INSTALL explicitly states the requirement for C89
1876
1877 This was already true but it's now Officially Stated For The Record.
1878
1879 =head3 Explanation of C<\xI<HH>> and C<\oI<OOO>> escapes
1880
1881 L<perlop> has been updated with more detailed explanation of these two
1882 character escapes.
1883
1884 =head3 C<-0I<NNN>> switch
1885
1886 In L<perlrun>, the behavior of the C<-0NNN> switch for C<-0400> or higher
1887 has been clarified.
1888
1889 =head3 Deprecation policy
1890
1891 L<perlpolicy> now contains the policy on compatibility and deprecation
1892 along with definitions of terms like "deprecation"
1893
1894 =head3 New descriptions in L<perldiag>
1895
1896 The following existing diagnostics are now documented:
1897
1898 =over 4
1899
1900 =item *
1901
1902 L<Ambiguous use of %c resolved as operator %c|perldiag/"Ambiguous use of %c resolved as operator %c">
1903
1904 =item *
1905
1906 L<Ambiguous use of %c{%s} resolved to %c%s|perldiag/"Ambiguous use of %c{%s} resolved to %c%s">
1907
1908 =item *
1909
1910 L<Ambiguous use of %c{%s%s} resolved to %c%s%s|perldiag/"Ambiguous use of %c{%s%s} resolved to %c%s%s">
1911
1912 =item *
1913
1914 L<Ambiguous use of -%s resolved as -&%s()|perldiag/"Ambiguous use of -%s resolved as -&%s()">
1915
1916 =item *
1917
1918 L<Invalid strict version format (%s)|perldiag/"Invalid strict version format (%s)">
1919
1920 =item *
1921
1922 L<Invalid version format (%s)|perldiag/"Invalid version format (%s)">
1923
1924 =item *
1925
1926 L<Invalid version object|perldiag/"Invalid version object">
1927
1928 =back
1929
1930 =head3 L<perlbook>
1931
1932 L<perlbook> has been expanded to cover many more popular books.
1933
1934 =head3 C<SvTRUE> macro
1935
1936 The documentation for the C<SvTRUE> macro in
1937 L<perlapi> was simply wrong in stating that
1938 get-magic is not processed. It has been corrected.
1939
1940 =head3 L<perlvar> revamp
1941
1942 L<perlvar> reorders the variables and groups them by topic.  Each variable
1943 introduced after Perl 5.000 notes the first version in which it is 
1944 available.  L<perlvar> also has a new section for deprecated variables to
1945 note when they were removed.
1946
1947 =head3 Array and hash slices in scalar context
1948
1949 These are now documented in L<perldata>.
1950
1951 =head3 C<use locale> and formats
1952
1953 L<perlform> and L<perllocale> have been corrected to state that
1954 C<use locale> affects formats.
1955
1956 =head3 L<overload>
1957
1958 L<overload>'s documentation has practically undergone a rewrite. It
1959 is now much more straightforward and clear.
1960
1961 =head3 L<perlhack> and perlrepository revamp
1962
1963 The L<perlhack> and perlrepository documents have been heavily edited and
1964 split up into several new documents.
1965
1966 The L<perlhack> document is now much shorter, and focuses on the Perl 5
1967 development process and submitting patches to Perl. The technical content has
1968 been moved to several new documents, L<perlsource>, L<perlinterp>,
1969 L<perlhacktut>, and L<perlhacktips>. This technical content has only been
1970 lightly edited.
1971
1972 The perlrepository document has been renamed to L<perlgit>. This new document
1973 is just a how-to on using git with the Perl source code. Any other content
1974 that used to be in perlrepository has been moved to perlhack.
1975
1976 =head3 Time::Piece examples
1977
1978 Examples in L<perlfaq4> have been updated to show the use of
1979 L<Time::Piece>.
1980
1981 =head1 Diagnostics
1982
1983 The following additions or changes have been made to diagnostic output,
1984 including warnings and fatal error messages.  For the complete list of
1985 diagnostic messages, see L<perldiag>.
1986
1987 =head2 New Diagnostics
1988
1989 =head3 New Errors
1990
1991 =over
1992
1993 =item Closure prototype called
1994
1995 This error occurs when a subroutine reference passed to an attribute
1996 handler is called, if the subroutine is a closure [perl #68560].
1997
1998 =item Insecure user-defined property %s
1999
2000 Perl detected tainted data when trying to compile a regular
2001 expression that contains a call to a user-defined character property
2002 function, i.e. C<\p{IsFoo}> or C<\p{InFoo}>.
2003 See L<perlunicode/User-Defined Character Properties> and L<perlsec>.
2004
2005 =item panic: gp_free failed to free glob pointer - something is repeatedly re-creating entries
2006
2007 This new error is triggered if a destructor called on an object in a
2008 typeglob that is being freed creates a new typeglob entry containing an
2009 object with a destructor that creates a new entry containing an object....
2010
2011 =item Parsing code internal error (%s)
2012
2013 This new fatal error is produced when parsing
2014 code supplied by an extension violates the
2015 parser's API in a detectable way.
2016
2017 =item refcnt: fd %d%s
2018
2019 This new error only occurs if a internal consistency check fails when a
2020 pipe is about to be closed.
2021
2022 =item Regexp modifier "/%c" may not appear twice
2023
2024 The regular expression pattern has one of the
2025 mutually exclusive modifiers repeated.
2026
2027 =item Regexp modifiers "/%c" and "/%c" are mutually exclusive
2028
2029 The regular expression pattern has more than one of the mutually
2030 exclusive modifiers.
2031
2032 =item Using !~ with %s doesn't make sense
2033
2034 This error occurs when C<!~> is used with C<s///r> or C<y///r>.
2035
2036 =back
2037
2038 =head3 New Warnings
2039
2040 =over
2041
2042 =item "\b{" is deprecated; use "\b\{" instead
2043
2044 =item "\B{" is deprecated; use "\B\{" instead
2045
2046 Use of an unescaped "{" immediately following a C<\b> or C<\B> is now
2047 deprecated so as to reserve its use for Perl itself in a future release.
2048
2049 =item Operation "%s" returns its argument for ...
2050
2051 Performing an operation requiring Unicode semantics (such as case-folding)
2052 on a Unicode surrogate or a non-Unicode character now triggers a warning:
2053 'Operation "%s" returns its argument for ...'.
2054
2055 =item Use of qw(...) as parentheses is deprecated
2056
2057 See L</"Use of qw(...) as parentheses">, above, for details.
2058
2059 =back
2060
2061 =head2 Changes to Existing Diagnostics
2062
2063 =over 4
2064
2065 =item *
2066
2067 The "Variable $foo is not imported" warning that precedes a
2068 C<strict 'vars'> error has now been assigned the "misc" category, so that
2069 C<no warnings> will suppress it [perl #73712].
2070
2071 =item *
2072
2073 C<warn> and C<die> now produce 'Wide character' warnings when fed a
2074 character outside the byte range if STDERR is a byte-sized handle.
2075
2076 =item *
2077
2078 The 'Layer does not match this perl' error message has been replaced with
2079 these more helpful messages [perl #73754]:
2080
2081 =over 4
2082
2083 =item *
2084
2085 PerlIO layer function table size (%d) does not match size expected by this
2086 perl (%d)
2087
2088 =item *
2089
2090 PerlIO layer instance size (%d) does not match size expected by this perl
2091 (%d)
2092
2093 =back
2094
2095 =item *
2096
2097 The "Found = in conditional" warning that is emitted when a constant is
2098 assigned to a variable in a condition is now withheld if the constant is
2099 actually a subroutine or one generated by C<use constant>, since the value
2100 of the constant may not be known at the time the program is written
2101 [perl #77762].
2102
2103 =item *
2104
2105 Previously, if none of the C<gethostbyaddr>, C<gethostbyname> and
2106 C<gethostent> functions were implemented on a given platform, they would
2107 all die with the message 'Unsupported socket function "gethostent" called',
2108 with analogous messages for C<getnet*> and C<getserv*>. This has been
2109 corrected.
2110
2111 =item *
2112
2113 The warning message about unrecognized regular expression escapes passed
2114 through has been changed to include any literal '{' following the
2115 two-character escape.  E.g., "\q{" is now emitted instead of "\q".
2116
2117 =back
2118
2119 =head1 Utility Changes
2120
2121 =head3 L<perlbug>
2122
2123 =over 4
2124
2125 =item *
2126
2127 L<perlbug> now looks in the EMAIL environment variable for a return address
2128 if the REPLY-TO and REPLYTO variables are empty.
2129
2130 =item *
2131
2132 L<perlbug> did not previously generate a From: header, potentially
2133 resulting in dropped mail.  Now it does include that header.
2134
2135 =item *
2136
2137 The user's address is now used as the return-path.
2138
2139 Many systems these days don't have a valid Internet domain name and
2140 perlbug@perl.org does not accept email with a return-path that does
2141 not resolve.  So the user's address is now passed to sendmail so it's
2142 less likely to get stuck in a mail queue somewhere [perl #82996].
2143
2144 =item *
2145
2146 perlbug now always permits the sender address to be changed
2147 before sending - if you were having trouble sending bug reports before
2148 now, this should fix it, we hope.
2149
2150 =back
2151
2152 =head3 L<perl5db.pl>
2153
2154 =over
2155
2156 =item *
2157
2158 The remote terminal works after forking and spawns new sessions - one
2159 for each forked process.
2160
2161 =back
2162
2163 =head3 L<ptargrep>
2164
2165 =over 4
2166
2167 =item *
2168
2169 L<ptargrep> is a new utility to apply pattern matching to the contents of
2170 files  in a tar archive.  It comes with C<Archive::Tar>.
2171
2172 =back
2173
2174 =head1 Configuration and Compilation
2175
2176 See also L</"Naming fixes in Policy_sh.SH may invalidate Policy.sh">,
2177 above.
2178
2179 =over 4
2180
2181 =item *
2182
2183 CCINCDIR and CCLIBDIR for the mingw64
2184 cross-compiler are now correctly under
2185 $(CCHOME)\mingw\include and \lib rather than immediately below $(CCHOME).
2186
2187 This means the 'incpath', 'libpth', 'ldflags', 'lddlflags' and
2188 'ldflags_nolargefiles' values in Config.pm and Config_heavy.pl are now
2189 set correctly.
2190
2191 =item *
2192
2193 'make test.valgrind' has been adjusted to account for cpan/dist/ext
2194 separation.
2195
2196 =item *
2197
2198 On compilers that support it, C<-Wwrite-strings> is now added to cflags by
2199 default.
2200
2201 =item *
2202
2203 The C<Encode> module can now (once again) be included in a static Perl
2204 build.  The special-case handling for this situation got broken in Perl
2205 5.11.0, and has now been repaired.
2206
2207 =item *
2208
2209 The previous default size of a PerlIO buffer (4096 bytes) has been increased
2210 to the larger of 8192 bytes and your local BUFSIZ.  Benchmarks show that doubling
2211 this decade-old default increases read and write performance in the neighborhood
2212 of 25% to 50% when using the default layers of perlio on top of unix.  To choose
2213 a non-default size, such as to get back the old value or to obtain an even
2214 larger value, configure with:
2215
2216      ./Configure -Accflags=-DPERLIOBUF_DEFAULT_BUFSIZ=N
2217
2218 where N is the desired size in bytes; it should probably be a multiple of
2219 your page size.
2220
2221 =back
2222
2223 =head1 Testing
2224
2225 XXX This section has not been cleaned up yet. Do we really need this
2226 section? How many people are going to find a list of new test files useful?
2227 Anyone hacking on the core can use
2228 ‘git diff v5.12.0..v5.14.0 MANIFEST|grep '^[+-]t/'’.
2229
2230 XXX Any significant changes to the testing of a freshly built perl should be
2231 listed here.  Changes which create B<new> files in F<t/> go here as do any
2232 large changes to the testing harness (e.g. when parallel testing was added).
2233 Changes to existing files in F<t/> aren't worth summarising, although the bugs
2234 that they represent may be covered elsewhere.
2235
2236 =over 4
2237
2238 =item *
2239
2240 F<t/harness> clears PERL5LIB, PERLLIB, PERL5OPT as t/TEST does (a2d3de1)
2241
2242 =item *
2243
2244 Many common testing routines were refactored into t/lib/common.pl
2245
2246 =item *
2247
2248 Several test files have been modernized to use Test::More
2249
2250 =item *
2251
2252 F<t/op/print.t> has been added to test implicit printing of C<$_>.
2253
2254 =item *
2255
2256 F<t/io/errnosig.t> has been added to test for restoration of of C<$!> when
2257 leaving signal handlers.
2258
2259 =item *
2260
2261 F<t/op/tie_fetch_count.t> has been added to see if C<FETCH> is only called once
2262 on tied variables.
2263
2264 =item *
2265
2266 F<lib/Tie/ExtraHash.t> has been added to make sure the, previously untested,
2267 L<Tie::ExtraHash> keeps working.
2268
2269 =item *
2270
2271 F<t/re/overload.t> has been added to test against string corruption in pattern
2272 matches on overloaded objects. This is a TODO test.
2273
2274 =item *
2275
2276 The new F<t/lib/universal.t> script tests the Internal::* functions and other
2277 things in F<universal.c>.
2278
2279 =item *
2280
2281 A rare race condition in F<t/op/while_readdir.t> has been fixed, stopping it
2282 from failing randomly when running tests in parallel.
2283
2284 =item *
2285
2286 The new F<t/op/leaky-magic.t> script tests that magic applied to variables in
2287 the main packages does not affect other packages.
2288
2289 =item *
2290
2291 The script F<t/op/threads-dirh.t> has been added, which tests interaction
2292 of threads and directory handles.
2293
2294 =item *
2295
2296 The new F<t/mro/isa_aliases.t> has been added, which tests that
2297 C<*Foo::ISA = *Bar::ISA> works properly.
2298
2299 =item *
2300
2301 F<t/mro/isarev.t> has been added, which tests that C<PL_isarev> (accessible
2302 at the Perl level via C<mro::get_isarev>) is updated properly.
2303
2304 =item *
2305
2306 F<t/run/switchd-78586.t> has been added, which tests that [perl #78586]
2307 has been fixed (related to line numbers in the debugger).
2308
2309 =item *
2310
2311 C<lib/File/DosGlob.t> has been modernized and now uses C<Test::More>.
2312
2313 =item *
2314
2315 A new test script, C<t/porting/filenames.t>, makes sure that filenames and
2316 paths are reasonably portable.
2317
2318 =item *
2319
2320 C<t/porting/diag.t> is now several orders of magnitude faster.
2321
2322 =item *
2323
2324 C<t/porting/buildtoc.t> now tests that the documentation TOC file is current and well-formed.
2325
2326 =item *
2327
2328 C<t/base/while.t> now tests the basics of a while loop with minimal dependencies.
2329
2330 =item *
2331
2332 C<t/cmd/while.t> now uses F<test.pl> for better maintainability.
2333
2334 =item *
2335
2336 C<t/op/split.t> now tests calls to C<split> without any pattern specified.
2337
2338 =item *
2339
2340 F<porting/FindExt.t> now skips all tests on a static (-Uusedl) build
2341 of perl.
2342
2343 =item *
2344
2345 F<porting/FindExt.t> now passes on non-Win32 platforms when some
2346 extensions are built statically.
2347
2348 =item *
2349
2350 The tests for C<split /\s/> and Unicode have been moved from
2351 F<t/op/split.t> to the new F<t/op/split_unicode.t>.
2352
2353 =item *
2354
2355 F<t/re/re.t> has been moved to F<ext/re/t/re_funcs_u.t>.
2356
2357 =item *
2358
2359 The tests for [perl #72922] have been moved from F<t/re/qr.t> to the new
2360 F<t/re/qr-72922.t>.
2361
2362 =item *
2363
2364 F<t/re/reg_unsafe.t> has been deleted and its only test moved to
2365 F<t/re/pat_advanced.t>.
2366
2367 =back
2368
2369 =head1 Platform Support
2370
2371 =head2 New Platforms
2372
2373 =over 4
2374
2375 =item AIX
2376
2377 Perl now builds on AIX 4.2.
2378
2379 =back
2380
2381 =head2 Discontinued Platforms
2382
2383 =over 4
2384
2385 =item Apollo DomainOS
2386
2387 The last vestiges of support for this platform have been excised from the
2388 Perl distribution. It was officially discontinued in version 5.12.0. It had
2389 not worked for years before that.
2390
2391 =item MacOS Classic
2392
2393 The last vestiges of support for this platform have been excised from the
2394 Perl distribution. It was officially discontinued in an earlier version.
2395
2396 =back
2397
2398 =head2 Platform-Specific Notes
2399
2400 =head3 Cygwin
2401
2402 =over 4
2403
2404 =item *
2405
2406 MakeMaker has been updated to build man pages on cygwin.
2407
2408 =item *
2409
2410 Improved rebase behaviour
2411
2412 If a dll is updated on cygwin the old imagebase address is reused.
2413 This solves most rebase errors, especially when updating on core dll's.
2414 See L<http://www.tishler.net/jason/software/rebase/rebase-2.4.2.README> for more information.
2415
2416 =item *
2417
2418 Support for the standard cygwin dll prefix, which is e.g. needed for FFI's
2419
2420 =item *
2421
2422 Updated build hints file
2423
2424 =back
2425
2426 =head3 IRIX
2427
2428 Conversion of strings to floating-point numbers is now more accurate on
2429 IRIX systems [perl #32380].
2430
2431 =head3 Mac OS X
2432
2433 Early versions of Mac OS X (Darwin) had buggy implementations of the
2434 C<setregid>, C<setreuid>, C<setrgid> and C<setruid> functions, so perl
2435 would pretend they did not exist.
2436
2437 These functions are now recognised on Mac OS 10.5 (Leopard; Darwin 9) and
2438 higher, as they have been fixed [perl #72990].
2439
2440 =head3 MirBSD
2441
2442 Previously if you built perl with a shared libperl.so on MirBSD (the
2443 default config), it would work up to the installation; however, once
2444 installed, it would be unable to find libperl.  So path handling is now
2445 treated as in the other BSD dialects.
2446
2447 =head3 NetBSD
2448
2449 The NetBSD hints file has been changed to make the system's malloc the
2450 default.
2451
2452 =head3 Recent OpenBSDs now use perl's malloc
2453
2454 OpenBSD E<gt> 3.7 has a new malloc implementation which is mmap-based
2455 and as such can release memory back to the OS; however, perl's use of
2456 this malloc causes a substantial slowdown so we now default to using
2457 perl's malloc instead [perl #75742].
2458
2459 =head3 OpenVOS
2460
2461 perl now builds again with OpenVOS (formerly known as Stratus VOS)
2462 [perl #78132].
2463
2464 =head3 Solaris
2465
2466 DTrace is now supported on Solaris. There used to be build failures, but
2467 these have been fixed [perl #73630].
2468
2469 =head3 VMS
2470
2471 =over
2472
2473 =item *
2474
2475 C<PerlIOUnix_open> now honours the default permissions on VMS.
2476
2477 When C<perlio> became the default and C<unixio> became the default bottom layer,
2478 the most common path for creating files from Perl became C<PerlIOUnix_open>,
2479 which has always explicitly used C<0666> as the permission mask.
2480
2481 To avoid this, C<0777> is now passed as the permissions to C<open()>.  In the
2482 VMS CRTL, C<0777> has a special meaning over and above intersecting with the
2483 current umask; specifically, it allows Unix syscalls to preserve native default
2484 permissions.
2485
2486 =item *
2487
2488 The shortening of symbols longer than 31 characters in the C sources is
2489 now done by the compiler rather than by xsubpp (which could only do so
2490 for generated symbols in XS code).
2491
2492 =item *
2493
2494 Record-oriented files (record format variable or variable with fixed control)
2495 opened for write by the perlio layer will now be line-buffered to prevent the
2496 introduction of spurious line breaks whenever the perlio buffer fills up.
2497
2498 =back
2499
2500 =head3 Windows
2501
2502 See also L</"fork() emulation will not wait for signalled children"> and
2503 L</"Perl source code is read in text mode on Windows">, above.
2504
2505 =over 4
2506
2507 =item *
2508
2509 Fixed build process for SDK2003SP1 compilers.
2510
2511 =item *
2512
2513 When using old 32-bit compilers, the define C<_USE_32BIT_TIME_T> will now
2514 be set in C<$Config{ccflags}>.  This improves portability when compiling
2515 XS extensions using new compilers, but for a perl compiled with old 32-bit
2516 compilers.
2517
2518 =item *
2519
2520 C<$Config{gccversion}> is now set correctly when perl is built using the
2521 mingw64 compiler from L<http://mingw64.org> [perl #73754].
2522
2523 =item *
2524
2525 The build process proceeds more smoothly with mingw and dmake when
2526 F<C:\MSYS\bin> is in the PATH, due to a C<Cwd> fix.
2527
2528 =item *
2529
2530 Support for building with Visual C++ 2010 is now underway, but is not yet
2531 complete.  See F<README.win32> or L<perlwin32> for more details.
2532
2533 =item *
2534
2535 The option to use an externally-supplied C<crypt()>, or to build with no
2536 C<crypt()> at all, has been removed.  Perl supplies its own C<crypt()>
2537 implementation for Windows, and the political situation that required
2538 this part of the distribution to sometimes be omitted is long gone.
2539
2540 =back
2541
2542 =head1 Internal Changes
2543
2544 =head2 New APIs
2545
2546 =head3 CLONE_PARAMS structure added to ease correct thread creation
2547
2548 Modules that create threads should now create C<CLONE_PARAMS> structures
2549 by calling the new function C<Perl_clone_params_new()>, and free them with
2550 C<Perl_clone_params_del()>.  This will ensure compatibility with any future
2551 changes to the internals of the C<CLONE_PARAMS> structure layout, and that
2552 it is correctly allocated and initialised.
2553
2554 =head3 New parsing functions
2555
2556 Several functions have been added for parsing statements or multiple
2557 statements:
2558
2559 =over
2560
2561 =item *
2562
2563 C<parse_fullstmt> parses a complete Perl statement.
2564
2565 =item *
2566
2567 C<parse_stmtseq> parses a sequence of statements, up
2568 to closing brace or EOF.
2569
2570 =item *
2571
2572 C<parse_block> parses a block [perl #78222].
2573
2574 =item *
2575
2576 C<parse_barestmt> parses a statement
2577 without a label.
2578
2579 =item *
2580
2581 C<parse_label> parses a statement label, separate from statements.
2582
2583 =back
2584
2585 The
2586 L<C<parse_fullexpr()>|perlapi/parse_fullexpr>,
2587 L<C<parse_listexpr()>|perlapi/parse_listexpr>,
2588 L<C<parse_termexpr()>|perlapi/parse_termexpr>, and
2589 L<C<parse_arithexpr()>|perlapi/parse_arithexpr>
2590 functions have been added to the API.  They perform
2591 recursive-descent parsing of expressions at various precedence levels.
2592 They are expected to be used by syntax plugins.
2593
2594 See L<perlapi> for details.
2595
2596 =head3 Hints hash API
2597
2598 A new C API for introspecting the hinthash C<%^H> at runtime has been
2599 added.  See C<cop_hints_2hv>, C<cop_hints_fetchpvn>, C<cop_hints_fetchpvs>,
2600 C<cop_hints_fetchsv>, and C<hv_copy_hints_hv> in L<perlapi> for details.
2601
2602 A new, experimental API has been added for accessing the internal
2603 structure that Perl uses for C<%^H>.  See the functions beginning with
2604 C<cophh_> in L<perlapi>.
2605
2606 =head3 C interface to C<caller()>
2607
2608 The C<caller_cx> function has been added as an XSUB-writer's equivalent of
2609 C<caller()>.  See L<perlapi> for details.
2610
2611 =head3 Custom per-subroutine check hooks
2612
2613 XS code in an extension module can now annotate a subroutine (whether
2614 implemented in XS or in Perl) so that nominated XS code will be called
2615 at compile time (specifically as part of op checking) to change the op
2616 tree of that subroutine.  The compile-time check function (supplied by
2617 the extension module) can implement argument processing that can't be
2618 expressed as a prototype, generate customised compile-time warnings,
2619 perform constant folding for a pure function, inline a subroutine
2620 consisting of sufficiently simple ops, replace the whole call with a
2621 custom op, and so on.  This was previously all possible by hooking the
2622 C<entersub> op checker, but the new mechanism makes it easy to tie the
2623 hook to a specific subroutine.  See L<perlapi/cv_set_call_checker>.
2624
2625 To help in writing custom check hooks, several subtasks within standard
2626 C<entersub> op checking have been separated out and exposed in the API.
2627
2628 =head3 Improved support for custom OPs
2629
2630 Custom ops can now be registered with the new C<custom_op_register> C
2631 function and the C<XOP> structure.  This will make it easier to add new
2632 properties of custom ops in the future.  Two new properties have been added
2633 already, C<xop_class> and C<xop_peep>.
2634
2635 C<xop_class> is one of the OA_*OP constants, and allows L<B> and other
2636 introspection mechanisms to work with custom ops
2637 that aren't BASEOPs.  C<xop_peep> is a pointer to
2638 a function that will be called for ops of this
2639 type from C<Perl_rpeep>.
2640
2641 See L<perlguts/Custom Operators> and L<perlapi/Custom Operators> for more
2642 detail.
2643
2644 The old C<PL_custom_op_names>/C<PL_custom_op_descs> interface is still
2645 supported but discouraged.
2646
2647 =head3 Scope hooks
2648
2649 It is now possible for XS code to hook into Perl's lexical scope
2650 mechanism at compile time, using the new C<Perl_blockhook_register>
2651 function. See L<perlguts/"Compile-time scope hooks">.
2652
2653 =head3 The recursive part of the peephole optimizer is now hookable
2654
2655 In addition to C<PL_peepp>, for hooking into the toplevel peephole optimizer, a
2656 C<PL_rpeepp> is now available to hook into the optimizer recursing into
2657 side-chains of the optree.
2658
2659 =head3 New non-magical variants of existing functions
2660
2661 The following functions/macros have been added to the API.  The C<*_nomg>
2662 macros are equivalent to their non-_nomg variants, except that they ignore
2663 get-magic.  Those ending in C<_flags> allow one to specify whether
2664 get-magic is processed.
2665
2666   sv_2bool_flags
2667   SvTRUE_nomg
2668   sv_2nv_flags
2669   SvNV_nomg
2670   sv_cmp_flags
2671   sv_cmp_locale_flags
2672   sv_eq_flags
2673   sv_collxfrm_flags
2674
2675 In some of these cases, the non-_flags functions have
2676 been replaced with wrappers around the new functions. 
2677
2678 =head3 pv/pvs/sv versions of existing functions
2679
2680 Many functions ending with pvn now have equivalent pv/pvs/sv versions.
2681
2682 =head3 List op-building functions
2683
2684 List op-building functions have been added to the
2685 API.  See L<op_append_elem|perlapi/op_append_elem>,
2686 L<op_append_list|perlapi/op_append_list>, and
2687 L<op_prepend_elem|perlapi/op_prepend_elem> in L<perlapi>.
2688
2689 =head3 C<LINKLIST>
2690
2691 The L<LINKLIST|perlapi/LINKLIST> macro, part of op building that
2692 constructs the execution-order op chain, has been added to the API.
2693
2694 =head3 Localisation functions
2695
2696 The C<save_freeop>, C<save_op>, C<save_pushi32ptr> and C<save_pushptrptr>
2697 functions have been added to the API.
2698
2699 =head3 Stash names
2700
2701 A stash can now have a list of effective names in addition to its usual
2702 name.  The first effective name can be accessed via the C<HvENAME> macro,
2703 which is now the recommended name to use in MRO linearisations (C<HvNAME>
2704 being a fallback if there is no C<HvENAME>).
2705
2706 These names are added and deleted via C<hv_ename_add> and
2707 C<hv_ename_delete>.  These two functions are I<not> part of the API.
2708
2709 =head3 New functions for finding and removing magic
2710
2711 The L<C<mg_findext()>|perlapi/mg_findext> and
2712 L<C<sv_unmagicext()>|perlapi/sv_unmagicext>
2713 functions have been added to the API.
2714 They allow extension authors to find and remove magic attached to
2715 scalars based on both the magic type and the magic virtual table, similar to how
2716 C<sv_magicext()> attaches magic of a certain type and with a given virtual table
2717 to a scalar. This eliminates the need for extensions to walk the list of
2718 C<MAGIC> pointers of an C<SV> to find the magic that belongs to them.
2719
2720 =head3 C<find_rundefsv>
2721
2722 This function returns the SV representing C<$_>, whether it's lexical
2723 or dynamic.
2724
2725 =head3 C<Perl_croak_no_modify>
2726
2727 C<Perl_croak_no_modify()> is short-hand for
2728 C<Perl_croak("%s", PL_no_modify)>.
2729
2730 =head3 C<PERL_STATIC_INLINE> define
2731
2732 The C<PERL_STATIC_INLINE> define has been added to provide the best-guess
2733 incantation to use for static inline functions, if the C compiler supports
2734 C99-style static inline.  If it doesn't, it'll give a plain C<static>.
2735
2736 C<HAS_STATIC_INLINE> can be used to check if the compiler actually supports
2737 inline functions.
2738
2739 =head3 New C<pv_escape> option for hexadecimal escapes
2740
2741 A new option, C<PERL_PV_ESCAPE_NONASCII>, has been added to C<pv_escape> to
2742 dump all characters above ASCII in hexadecimal.  Before, one could get all
2743 characters as hexadecimal or the Latin1 non-ASCII as octal.
2744
2745 =head3 C<lex_start>
2746
2747 C<lex_start> has been added to the API, but is considered experimental.
2748
2749 =head3 C<op_scope()> and C<op_lvalue()>
2750
2751 The C<op_scope()> and C<op_lvalue()> functions have been added to the API,
2752 but are considered experimental.
2753
2754 =head2 C API Changes
2755
2756 =head3 C<PERL_POLLUTE> has been removed
2757
2758 The option to define C<PERL_POLLUTE> to expose older 5.005 symbols for
2759 backwards compatibility has been removed.  It's use was always discouraged,
2760 and MakeMaker contains a more specific escape hatch:
2761
2762     perl Makefile.PL POLLUTE=1
2763
2764 This can be used for modules that have not been upgraded to 5.6 naming
2765 conventions (and really should be completely obsolete by now).
2766
2767 =head3 Check API compatibility when loading XS modules
2768
2769 When perl's API changes in incompatible ways (which usually happens between
2770 major releases), XS modules compiled for previous versions of perl will not
2771 work anymore.  They will need to be recompiled against the new perl.
2772
2773 In order to ensure that modules are recompiled, and to prevent users from
2774 accidentally loading modules compiled for old perls into newer ones, the
2775 C<XS_APIVERSION_BOOTCHECK> macro has been added.  That macro, which is
2776 called when loading every newly compiled extension, compares the API
2777 version of the running perl with the version a module has been compiled for
2778 and raises an exception if they don't match.
2779
2780 =head3 Perl_fetch_cop_label
2781
2782 The first argument of the C API function C<Perl_fetch_cop_label> has changed
2783 from C<struct refcounted he *> to C<COP *>, to insulate the user from
2784 implementation details.
2785
2786 This API function was marked as "may change", and likely isn't in use outside
2787 the core.  (Neither an unpacked CPAN, nor Google's codesearch, finds any other
2788 references to it.)
2789
2790 =head3 GvCV() and GvGP() are no longer lvalues
2791
2792 The new GvCV_set() and GvGP_set() macros are now provided to replace
2793 assignment to those two macros.
2794
2795 This allows a future commit to eliminate some backref magic between GV
2796 and CVs, which will require complete control over assignment to the
2797 gp_cv slot.
2798
2799 =head3 CvGV() is no longer an lvalue
2800
2801 Under some circumstances, the C<CvGV()> field of a CV is now
2802 reference-counted.  To ensure consistent behaviour, direct assignment to
2803 it, for example C<CvGV(cv) = gv> is now a compile-time error.  A new macro,
2804 C<CvGV_set(cv,gv)> has been introduced to perform this operation
2805 safely.  Note that modification of this field is not part of the public
2806 API, regardless of this new macro (and despite its being listed in this section).
2807
2808 =head3 CvSTASH() is no longer an lvalue
2809
2810 The C<CvSTASH()> macro can now only be used as an rvalue.  C<CvSTASH_set()>
2811 has been added to replace assignment to C<CvSTASH()>.  This is to ensure
2812 that backreferences are handled properly.  These macros are not part of the
2813 API.
2814
2815 =head3 Calling conventions for C<newFOROP> and C<newWHILEOP>
2816
2817 The way the parser handles labels has been cleaned up and refactored. As a
2818 result, the C<newFOROP()> constructor function no longer takes a parameter
2819 stating what label is to go in the state op.
2820
2821 The C<newWHILEOP()> and C<newFOROP()> functions no longer accept a line
2822 number as a parameter.
2823
2824 =head3 Flags passed to C<uvuni_to_utf8_flags> and C<utf8n_to_uvuni>
2825
2826 Some of the flags parameters to uvuni_to_utf8_flags() and
2827 utf8n_to_uvuni() have changed.  This is a result of Perl's now allowing
2828 internal storage and manipulation of code points that are problematic
2829 in some situations.  Hence, the default actions for these functions has
2830 been complemented to allow these code points.  The new flags are
2831 documented in L<perlapi>.  Code that requires the problematic code
2832 points to be rejected needs to change to use these flags.  Some flag
2833 names are retained for backward source compatibility, though they do
2834 nothing, as they are now the default.  However the flags
2835 C<UNICODE_ALLOW_FDD0>, C<UNICODE_ALLOW_FFFF>, C<UNICODE_ILLEGAL>, and
2836 C<UNICODE_IS_ILLEGAL> have been removed, as they stem from a
2837 fundamentally broken model of how the Unicode non-character code points
2838 should be handled, which is now described in
2839 L<perlunicode/Non-character code points>.  See also L</Selected Bug Fixes>.
2840
2841 XXX Which bugs in particular? Selected Bug Fixes is too long for this link
2842 to be meaningful right now.
2843
2844 =head2 Deprecated C APIs
2845
2846 =over
2847
2848 =item C<Perl_ptr_table_clear>
2849
2850 C<Perl_ptr_table_clear> is no longer part of Perl's public API.  Calling it
2851 now generates a deprecation warning, and it will be removed in a future
2852 release.
2853
2854 =item C<sv_compile_2op>
2855
2856 The C<sv_compile_2op()> API function is now deprecated.  Searches suggest
2857 that nothing on CPAN is using it, so this should have zero impact.
2858
2859 It attempted to provide an API to compile code down to an optree, but failed
2860 to bind correctly to lexicals in the enclosing scope.  It's not possible to
2861 fix this problem within the constraints of its parameters and return value.
2862
2863 =item C<find_rundefsvoffset>
2864
2865 The C<find_rundefsvoffset> function has been deprecated.  It appeared that
2866 its design was insufficient for reliably getting the lexical C<$_> at
2867 run-time.
2868
2869 Use the new C<find_rundefsv> function or the C<UNDERBAR> macro
2870 instead. They directly return the right SV representing C<$_>, whether it's
2871 lexical or dynamic.
2872
2873 =item C<CALL_FPTR> and C<CPERLscope>
2874
2875 Those are left from an old implementation of C<MULTIPLICITY> using C++ objects,
2876 which was removed in Perl 5.8.  Nowadays these macros do exactly nothing, so
2877 they shouldn't be used anymore.
2878
2879 For compatibility, they are still defined for external C<XS> code.  Only
2880 extensions defining C<PERL_CORE> must be updated now.
2881
2882 =back
2883
2884 =head2 Other Internal Changes
2885
2886 =head3 Stack unwinding
2887
2888 The protocol for unwinding the C stack at the last stage of a C<die>
2889 has changed how it identifies the target stack frame.  This now uses
2890 a separate variable C<PL_restartjmpenv>, where previously it relied on
2891 the C<blk_eval.cur_top_env> pointer in the C<eval> context frame that
2892 has nominally just been discarded.  This change means that code running
2893 during various stages of Perl-level unwinding no longer needs to take
2894 care to avoid destroying the ghost frame.
2895
2896 =head3 Scope stack entries
2897
2898 The format of entries on the scope stack has been changed, resulting in a
2899 reduction of memory usage of about 10%.  In particular, the memory used by
2900 the scope stack to record each active lexical variable has been halved.
2901
2902 =head3 Memory allocation for pointer tables
2903
2904 Memory allocation for pointer tables has been changed.  Previously
2905 C<Perl_ptr_table_store> allocated memory from the same arena system as
2906 C<SV> bodies and C<HE>s, with freed memory remaining bound to those arenas
2907 until interpreter exit.  Now it allocates memory from arenas private to the
2908 specific pointer table, and that memory is returned to the system when
2909 C<Perl_ptr_table_free> is called.  Additionally, allocation and release are
2910 both less CPU intensive.
2911
2912 =head3 C<UNDERBAR>
2913
2914 The C<UNDERBAR> macro now calls C<find_rundefsv>.  C<dUNDERBAR> is now a
2915 noop but should still be used to ensure past and future compatibility.
2916
2917 =head3 String comparison routines renamed
2918
2919 The ibcmp_* functions have been renamed and are now called foldEQ,
2920 foldEQ_locale and foldEQ_utf8.  The old names are still available as
2921 macros.
2922
2923 =head3 C<chop> and C<chomp> implementations merged
2924
2925 The opcode bodies for C<chop> and C<chomp> and for C<schop> and C<schomp>
2926 have been merged.  The implementation functions C<Perl_do_chop()> and
2927 C<Perl_do_chomp()>, never part of the public API, have been merged and
2928 moved to a static function in F<pp.c>.  This shrinks the perl binary
2929 slightly, and should not affect any code outside the core (unless it is
2930 relying on the order of side effects when C<chomp> is passed a I<list> of
2931 values).
2932
2933 =head1 Selected Bug Fixes
2934
2935 =head2 I/O
2936
2937 =over 4
2938
2939 =item *
2940
2941 Perl no longer produces this warning:
2942
2943     $ perl -we 'open my $f, ">", \my $x; binmode $f, "scalar"'
2944     Use of uninitialized value in binmode at -e line 1.
2945
2946 =item *
2947
2948 Opening a glob reference via C<< open $fh, "E<gt>", \*glob >> will no longer
2949 cause the glob to be corrupted when the filehandle is printed to.  This would
2950 cause perl to crash whenever the glob's contents were accessed
2951 [perl #77492].
2952
2953 =item *
2954
2955 PerlIO no longer crashes when called recursively, e.g., from a signal
2956 handler. Now it just leaks memory [perl #75556].
2957
2958 =item *
2959
2960 Most I/O functions were not warning for unopened handles unless the
2961 'closed' and 'unopened' warnings categories were both enabled. Now only
2962 C<use warnings 'unopened'> is necessary to trigger these warnings (as was
2963 always meant to be the case).
2964
2965 =item *
2966
2967 There have been several fixes to PerlIO layers:
2968
2969 When C<binmode FH, ":crlf"> pushes the C<:crlf> layer on top of the stack,
2970 it no longer enables crlf layers lower in the stack, to avoid unexpected
2971 results [perl #38456].
2972
2973 Opening a file in C<:raw> mode now does what it advertises to do (first
2974 open the file, then binmode it), instead of simply leaving off the top
2975 layer [perl #80764].
2976
2977 The three layers C<:pop>, C<:utf8> and C<:bytes> didn't allow stacking when
2978 opening a file.  For example
2979 this:
2980
2981     open FH, '>:pop:perlio', 'some.file' or die $!;
2982
2983 Would throw an error: "Invalid argument".  This has been fixed in this
2984 release [perl #82484].
2985
2986 =back
2987
2988 =head2 Regular Expression Bug Fixes
2989
2990 =over
2991
2992 =item *
2993
2994 The regular expression engine no longer loops when matching
2995 C<"\N{LATIN SMALL LIGATURE FF}" =~ /f+/i> and similar expressions
2996 [perl #72998].
2997
2998 =item *
2999
3000 The trie runtime code should no longer allocate massive amounts of memory,
3001 fixing #74484.
3002
3003 =item *
3004
3005 Syntax errors in C<< (?{...}) >> blocks no longer cause panic messages
3006 [perl #2353].
3007
3008 =item *
3009
3010 A pattern like C<(?:(o){2})?> no longer causes a "panic" error
3011 [perl #39233].
3012
3013 =item *
3014
3015 A fatal error in regular expressions containing C<(.*?)> when processing
3016 UTF-8 data has been fixed [perl #75680].
3017
3018 =item *
3019
3020 An erroneous regular expression engine optimisation that caused regex verbs like
3021 C<*COMMIT> sometimes to be ignored has been removed.
3022
3023 =item *
3024
3025 The regular expression bracketed character class C<[\8\9]> was effectively the
3026 same as C<[89\000]>, incorrectly matching a NULL character.  It also gave
3027 incorrect warnings that the C<8> and C<9> were ignored.  Now C<[\8\9]> is the
3028 same as C<[89]> and gives legitimate warnings that C<\8> and C<\9> are
3029 unrecognized escape sequences, passed-through.
3030
3031 =item *
3032
3033 A regular expression match in the right-hand side of a global substitution
3034 (C<s///g>) that is in the same scope will no longer cause match variables
3035 to have the wrong values on subsequent iterations. This can happen when an
3036 array or hash subscript is interpolated in the right-hand side, as in
3037 C<s|(.)|@a{ print($1), /./ }|g> [perl #19078].
3038
3039 =item *
3040
3041 Several cases in which characters in the Latin-1 non-ASCII range (0x80 to
3042 0xFF) used not to match themselves or used to match both a character class
3043 and its complement have been fixed.  For instance, U+00E2 could match both
3044 C<\w> and C<\W> [perl #78464] [perl #18281] [perl #60156].
3045
3046 =item *
3047
3048 Matching a Unicode character against an alternation containing characters
3049 that happened to match continuation bytes in the former's UTF8
3050 representation (C<qq{\x{30ab}} =~ /\xab|\xa9/>) would cause erroneous
3051 warnings [perl #70998].
3052
3053 =item *
3054
3055 The trie optimisation was not taking empty groups into account, preventing
3056 'foo' from matching C</\A(?:(?:)foo|bar|zot)\z/> [perl #78356].
3057
3058 =item *
3059
3060 A pattern containing a C<+> inside a lookahead would sometimes cause an
3061 incorrect match failure in a global match (e.g., C</(?=(\S+))/g>)
3062 [perl #68564].
3063
3064 =item *
3065
3066 A regular expression optimisation would sometimes cause a match with a
3067 C<{n,m}> quantifier to fail when it should match [perl #79152].
3068
3069 =item *
3070
3071 Case insensitive matching in regular expressions compiled under C<use
3072 locale> now works much more sanely when the pattern or
3073 target string is encoded internally in
3074 UTF8.  Previously, under these conditions the localeness
3075 was completely lost.  Now, code points above 255 are treated as Unicode,
3076 but code points between 0 and 255 are treated using the current locale
3077 rules, regardless of whether the pattern or the string is encoded in UTF8.
3078 The few case-insensitive matches that cross the 255/256 boundary are not
3079 allowed.  For example, 0xFF does not caselessly match the character at
3080 0x178, LATIN CAPITAL LETTER Y WITH DIAERESIS, because 0xFF may not be
3081 LATIN SMALL LETTER Y in the current locale, and Perl has no way of
3082 knowing if that character even exists in the locale, much less what code
3083 point it is.
3084
3085 =item *
3086
3087 The C<(?|...)> regular expression construct no longer crashes if the final
3088 branch has more sets of capturing parentheses than any other branch. This
3089 was fixed in Perl 5.10.1 for the case of a single branch, but that fix did
3090 not take multiple branches into account [perl #84746].
3091
3092 =item *
3093
3094 A bug has been fixed in the implementation of C<{...}> quantifiers in
3095 regular expressions that prevented the code block in
3096 C</((\w+)(?{ print $2 })){2}/> from seeing the C<$2> sometimes
3097 [perl #84294].
3098
3099 =back
3100
3101 =head2 Syntax/Parsing Bugs
3102
3103 =over
3104
3105 =item *
3106
3107 C<when(scalar){...}> no longer crashes, but produces a syntax error
3108 [perl #74114].
3109
3110 =item *
3111
3112 A label right before a string eval (C<foo: eval $string>) no longer causes
3113 the label to be associated also with the first statement inside the eval
3114 [perl #74290] (5.12.1).
3115
3116 =item *
3117
3118 The C<no 5.13.2;> form of C<no> no longer tries to turn on features or
3119 pragmata (i.e., strict) [perl #70075].
3120
3121 =item *
3122
3123 C<BEGIN {require 5.12.0}> now behaves as documented, rather than behaving
3124 identically to C<use 5.12.0;>.  Previously, C<require> in a C<BEGIN> block
3125 was erroneously executing the C<use feature ':5.12.0'> and
3126 C<use strict;> behaviour, which only C<use> was documented to
3127 provide [perl #69050].
3128
3129 =item *
3130
3131 A regression introduced in Perl 5.12.0, making
3132 C<< my $x = 3; $x = length(undef) >> result in C<$x> set to C<3> has been
3133 fixed.  C<$x> will now be C<undef> [perl #85508].
3134
3135 =item *
3136
3137 When strict 'refs' mode is off, C<%{...}> in rvalue context returns
3138 C<undef> if its argument is undefined.  An optimisation introduced in perl
3139 5.12.0 to make C<keys %{...}> faster when used as a boolean did not take
3140 this into account, causing C<keys %{+undef}> (and C<keys %$foo> when
3141 C<$foo> is undefined) to be an error, which it should only be in strict
3142 mode [perl #81750].
3143
3144 =item *
3145
3146 Constant-folding used to cause
3147
3148   $text =~ ( 1 ? /phoo/ : /bear/)
3149
3150 to turn into
3151
3152   $text =~ /phoo/
3153
3154 at compile time. Now it correctly matches against C<$_> [perl #20444].
3155
3156 =item *
3157
3158 Parsing Perl code (either with string C<eval> or by loading modules) from
3159 within a C<UNITCHECK> block no longer causes the interpreter to crash
3160 [perl #70614].
3161
3162 =item *
3163
3164 String evals no longer fail after 2 billion scopes have been
3165 compiled [perl #83364].
3166
3167 =item *
3168
3169 The parser no longer hangs when encountering certain Unicode characters,
3170 such as U+387 [perl #74022].
3171
3172 =item *
3173
3174 Several contexts no longer allow a Unicode character to begin a word
3175 that should never begin words, for an example an accent that must follow
3176 another character previously could precede all other characters.
3177
3178 =item *
3179
3180 Defining a constant with the same name as one of perl's special blocks
3181 (e.g., INIT) stopped working in 5.12.0, but has now been fixed
3182 [perl #78634].
3183
3184 =item *
3185
3186 A reference to a literal value used as a hash key (C<$hash{\"foo"}>) used
3187 to be stringified, even if the hash was tied [perl #79178].
3188
3189 =item *
3190
3191 A closure containing an C<if> statement followed by a constant or variable
3192 is no longer treated as a constant [perl #63540].
3193
3194 =item *
3195
3196 C<state> can now be used with attributes. It used to mean the same thing as
3197 C<my> if attributes were present [perl #68658].
3198
3199 =item *
3200
3201 Expressions like C<< @$a > 3 >> no longer cause C<$a> to be mentioned in
3202 the "Use of uninitialized value in numeric gt" warning when C<$a> is
3203 undefined (since it is not part of the C<E<gt>> expression, but the operand
3204 of the C<@>) [perl #72090].
3205
3206 =item *
3207
3208 Accessing an element of a package array with a hard-coded number (as
3209 opposed to an arbitrary expression) would crash if the array did not exist.
3210 Usually the array would be autovivified during compilation, but typeglob
3211 manipulation could remove it, as in these two cases which used to crash:
3212
3213   *d = *a;  print $d[0];
3214   undef *d; print $d[0];
3215
3216 =item *
3217
3218 The C<-C> command line option, when used on the shebang line, can now be
3219 followed by other options [perl #72434].
3220
3221 =item *
3222
3223 The C<B> module was returning C<B::OP>s instead of C<B::LOGOP>s for C<entertry> [perl #80622].
3224 This was due to a bug in the perl core, not in C<B> itself.
3225
3226 =back
3227
3228 =head2 Stashes, Globs and Method Lookup
3229
3230 Perl 5.10.0 introduced a new internal mechanism for caching MROs (method
3231 resolution orders, or lists of parent classes; aka "isa" caches) to make
3232 method lookup faster (so @ISA arrays would not have to be searched
3233 repeatedly).  Unfortunately, this brought with it quite a few bugs.  Almost
3234 all of these have been fixed now, along with a few MRO-related bugs that
3235 existed before 5.10.0:
3236
3237 =over
3238
3239 =item *
3240
3241 The following used to have erratic effects on method resolution, because
3242 the "isa" caches were not reset or otherwise ended up listing the wrong
3243 classes.  These have been fixed.
3244
3245 =over
3246
3247 =item Aliasing packages by assigning to globs [perl #77358]
3248
3249 =item Deleting packages by deleting their containing stash elements
3250
3251 =item Undefining the glob containing a package (C<undef *Foo::>)
3252
3253 =item Undefining an ISA glob (C<undef *Foo::ISA>)
3254
3255 =item Deleting an ISA stash element (C<delete $Foo::{ISA}>)
3256
3257 =item Sharing @ISA arrays between classes (via C<*Foo::ISA = \@Bar::ISA> or
3258 C<*Foo::ISA = *Bar::ISA>) [perl #77238]
3259
3260 =back
3261
3262 C<undef *Foo::ISA> would even stop a new C<@Foo::ISA> array from updating
3263 caches.
3264
3265 =item *
3266
3267 Typeglob assignments would crash if the glob's stash no longer existed, so
3268 long as the glob assigned to was named 'ISA' or the glob on either side of
3269 the assignment contained a subroutine.
3270
3271 =item *
3272
3273 C<PL_isarev>, which is accessible to Perl via C<mro::get_isarev> is now
3274 updated properly when packages are deleted or removed from the C<@ISA> of
3275 other classes. This allows many packages to be created and deleted without
3276 causing a memory leak [perl #75176].
3277
3278 =back
3279
3280 In addition, various other bugs related to typeglobs and stashes have been
3281 fixed:
3282
3283 =over 
3284
3285 =item *
3286
3287 Some work has been done on the internal pointers that link between symbol
3288 tables (stashes), typeglobs and subroutines.  This has the effect that
3289 various edge cases related to deleting stashes or stash entries (e.g.
3290 <%FOO:: = ()>), and complex typeglob or code reference aliasing, will no
3291 longer crash the interpreter.
3292
3293 =item *
3294
3295 Assigning a reference to a glob copy now assigns to a glob slot instead of
3296 overwriting the glob with a scalar [perl #1804] [perl #77508].
3297
3298 =item *
3299
3300 A bug when replacing the glob of a loop variable within the loop has been fixed
3301 [perl #21469].  This
3302 means the following code will no longer crash:
3303
3304     for $x (...) {
3305         *x = *y;
3306     }
3307
3308 =item *
3309
3310 Assigning a glob to a PVLV used to convert it to a plain string. Now it
3311 works correctly, and a PVLV can hold a glob. This would happen when a
3312 nonexistent hash or array element was passed to a subroutine:
3313
3314   sub { $_[0] = *foo }->($hash{key});
3315   # $_[0] would have been the string "*main::foo"
3316
3317 It also happened when a glob was assigned to, or returned from, an element
3318 of a tied array or hash [perl #36051].
3319
3320 =item *
3321
3322 When trying to report C<Use of uninitialized value $Foo::BAR>, crashes could
3323 occur if the glob holding the global variable in question had been detached
3324 from its original stash by, for example, C<delete $::{'Foo::'}>.  This has
3325 been fixed by disabling the reporting of variable names in those
3326 cases.
3327
3328 =item *
3329
3330 During the restoration of a localised typeglob on scope exit, any
3331 destructors called as a result would be able to see the typeglob in an
3332 inconsistent state, containing freed entries, which could result in a
3333 crash. This would affect code like this:
3334
3335   local *@;
3336   eval { die bless [] }; # puts an object in $@
3337   sub DESTROY {
3338     local $@; # boom
3339   }
3340
3341 Now the glob entries are cleared before any destructors are called. This
3342 also means that destructors can vivify entries in the glob. So perl tries
3343 again and, if the entries are re-created too many times, dies with a
3344 'panic: gp_free...' error message.
3345
3346 =back
3347
3348 =head2 Unicode
3349
3350 =over
3351
3352 =item *
3353
3354 What has become known as the "Unicode Bug" is mostly resolved in this release.
3355 Under C<use feature 'unicode_strings'>, the internal storage format of a
3356 string no longer affects the external semantics.  There are two known
3357 exceptions.  User-defined case changing functions, which are planned to
3358 be deprecated in 5.14, require utf8-encoded strings to function; and the
3359 character C<LATIN SMALL LETTER SHARP S> in regular expression
3360 case-insensitive matching has a somewhat different set of bugs depending
3361 on the internal storage format.  Case-insensitive matching of all
3362 characters that have multi-character matches, as this one does, is
3363 problematical in Perl [perl #58182].
3364
3365 =item *
3366
3367 The handling of Unicode non-characters has changed.
3368 Previously they were mostly considered illegal, except that only one of
3369 the 66 of them was known about in places.  The Unicode standard
3370 considers them legal, but forbids the "open interchange" of them.
3371 This is part of the change to allow the internal use of any code point
3372 (see L</Core Enhancements>).  Together, these changes resolve
3373 [perl #38722], [perl #51918], [perl #51936], [perl #63446].
3374
3375 =item *
3376
3377 Naming a deprecated character in \N{...} no longer leaks memory.
3378
3379 =item *
3380
3381 C<chop> now correctly handles characters above "\x{7fffffff}"
3382 [perl #73246].
3383
3384 =item *
3385
3386 Passing to C<index> an offset beyond the end of the string when the string
3387 is encoded internally in UTF8 no longer causes panics [perl #75898].
3388
3389 =item *
3390
3391 C<warn()> and C<die()> now respect utf8-encoded scalars [perl #45549].
3392
3393 =item *
3394
3395 Sometimes the UTF8 length cache would not be reset on a value
3396 returned by substr, causing C<length(substr($uni_string,...))> to give
3397 wrong answers.  With C<${^UTF8CACHE}> set to -1, it would produce a 'panic'
3398 error message, too [perl #77692].
3399
3400 =back
3401
3402 =head2 Ties, Overloading and Other Magic
3403
3404 =over
3405
3406 =item *
3407
3408 Overloading now works properly in conjunction with tied
3409 variables.  What formerly happened was that most ops checked their
3410 arguments for overloading I<before> checking for magic, so for example
3411 an overloaded object returned by a tied array access would usually be
3412 treated as not overloaded [RT #57012].
3413
3414 =item *
3415
3416 Various cases of magic (e.g., tie methods) being called on tied variables
3417 too many or too few times have been fixed:
3418
3419 =over
3420
3421 =item *
3422
3423 FETCH is no longer called on tied variables in void context.
3424
3425 =item *
3426
3427 C<$tied-E<gt>()> did not always call FETCH [perl #8438].
3428
3429 =item *
3430
3431 Filetest operators and C<y///> and C<tr///> were calling FETCH too
3432 many times.
3433
3434 =item *
3435
3436 The C<=> operator used to ignore magic on its right-hand side if the
3437 scalar happened to hold a typeglob (if a typeglob was the last thing
3438 returned from or assigned to a tied scalar) [perl #77498].
3439
3440 =item *
3441
3442 Dereference operators used to ignore magic if the argument was a
3443 reference already (e.g., from a previous FETCH) [perl #72144].
3444
3445 =item *
3446
3447 C<splice> now calls set-magic (so changes made
3448 by C<splice @ISA> are respected by method calls) [perl #78400].
3449
3450 =back
3451
3452 =item *
3453
3454 String C<eval> now detects taintedness of overloaded or tied
3455 arguments [perl #75716].
3456
3457 =item *
3458
3459 String C<eval> and regular expression matches against objects with string
3460 overloading no longer cause memory corruption or crashes [perl 77084].
3461
3462 =item *
3463
3464 L<readline|perlfunc/"readline EXPR"> now honors C<< <> >> overloading on tied
3465 arguments.
3466
3467 =item *
3468
3469 C<< E<lt>exprE<gt> >> always respects overloading now if the expression is
3470 overloaded.
3471
3472 Due to the way that 'E<lt>E<gt> as glob' was parsed differently from
3473 'E<lt>E<gt> as filehandle' from 5.6 onwards, something like C<< E<lt>$foo[0]E<gt> >> did
3474 not handle overloading, even if C<$foo[0]> was an overloaded object.  This
3475 was contrary to the documentation for overload, and meant that C<< E<lt>E<gt> >>
3476 could not be used as a general overloaded iterator operator.
3477
3478 =item *
3479
3480 The fallback behaviour of overloading on binary operators was asymmetric
3481 [perl #71286].
3482
3483 =item *
3484
3485 Magic applied to variables in the main package no longer affects other packages.
3486 See L</Magic variables outside the main package> above [perl #76138].
3487
3488 =item *
3489
3490 Sometimes magic (ties, taintedness, etc.) attached to variables could cause
3491 an object to last longer than it should, or cause a crash if a tied
3492 variable were freed from within a tie method.  These have been fixed
3493 [perl #81230].
3494
3495 =item *
3496
3497 DESTROY methods of objects implementing ties are no longer able to crash by
3498 accessing the tied variable through a weak reference [perl #86328].
3499
3500 =item *
3501
3502 Fixed a regression of kill() when a match variable is used for the
3503 process ID to kill [perl #75812].
3504
3505 =item *
3506
3507 C<$AUTOLOAD> used to remain tainted forever if it ever became tainted. Now
3508 it is correctly untainted if an autoloaded method is called and the method
3509 name was not tainted.
3510
3511 =item *
3512
3513 C<sprintf> now dies when passed a tainted scalar for the format. It did
3514 already die for arbitrary expressions, but not for simple scalars
3515 [perl #82250].
3516
3517 =back
3518
3519 =head2 The Debugger
3520
3521 =over
3522
3523 =item *
3524
3525 The Perl debugger now also works in taint mode [perl #76872].
3526
3527 =item *
3528
3529 Subroutine redefinition works once more in the debugger [perl #48332].
3530
3531 =item *
3532
3533 When C<-d> is used on the shebang (C<#!>) line, the debugger now has access
3534 to the lines of the main program.  In the past, this sometimes worked and
3535 sometimes did not, depending on what order things happened to be arranged
3536 in memory [perl #71806].
3537
3538 =item *
3539
3540 A possible memory leak when using L<caller()|perlfunc/"caller EXPR"> to set
3541 C<@DB::args> has been fixed.
3542
3543 =item *
3544
3545 Perl no longer stomps on $DB::single, $DB::trace and $DB::signal if they
3546 already have values when $^P is assigned to [perl #72422].
3547
3548 =item *
3549
3550 C<#line> directives in string evals were not properly updating the arrays
3551 of lines of code (C<< @{"_<..."} >>) that the debugger (or any debugging or
3552 profiling module) uses. In threaded builds, they were not being updated at
3553 all. In non-threaded builds, the line number was ignored, so any change to
3554 the existing line number would cause the lines to be misnumbered
3555 [perl #79442].
3556
3557 =back
3558
3559 =head2 Threads
3560
3561 =over
3562
3563 =item *
3564
3565 Perl no longer accidentally clones lexicals in scope within active stack
3566 frames in the parent when creating a child thread [perl #73086].
3567
3568 =item *
3569
3570 Several memory leaks in cloning and freeing threaded Perl interpreters have been
3571 fixed [perl #77352].
3572
3573 =item *
3574
3575 Creating a new thread when directory handles were open used to cause a
3576 crash, because the handles were not cloned, but simply passed to the new
3577 thread, resulting in a double free.
3578
3579 Now directory handles are cloned properly, on systems that have a C<fchdir>
3580 function. On other systems, new threads simply do not inherit directory
3581 handles from their parent threads [perl #75154].
3582
3583 =item *
3584
3585 The typeglob C<*,>, which holds the scalar variable C<$,> (output field
3586 separator), had the wrong reference count in child threads.
3587
3588 =item *
3589
3590 [perl #78494] When pipes are shared between threads, the C<close> function
3591 (and any implicit close, such as on thread exit) no longer blocks.
3592
3593 =item *
3594
3595 Perl now does a timely cleanup of SVs that are cloned into a new thread but
3596 then discovered to be orphaned (i.e., their owners are I<not> cloned). This
3597 eliminates several "scalars leaked" warnings when joining threads.
3598
3599 =back
3600
3601 =head2 Scoping and Subroutines
3602
3603 =over
3604
3605 =item *
3606
3607 Lvalue subroutines are again able to return copy-on-write scalars.  This
3608 had been broken since version 5.10.0 [perl #75656].
3609
3610 =item *
3611
3612 C<require> no longer causes C<caller> to return the wrong file name for
3613 the scope that called C<require> and other scopes higher up that had the
3614 same file name [perl #68712].
3615
3616 =item *
3617
3618 C<sort> with a ($$)-prototyped comparison routine used to cause the value
3619 of @_ to leak out of the sort.  Taking a reference to @_ within the
3620 sorting routine could cause a crash [perl #72334].
3621
3622 =item *
3623
3624 Match variables (e.g., C<$1>) no longer persist between calls to a sort
3625 subroutine [perl #76026].
3626
3627 =item *
3628
3629 Iterating with C<foreach> over an array returned by an lvalue sub now works
3630 [perl #23790].
3631
3632 =item *
3633
3634 C<$@> is now localised during calls to C<binmode> to prevent action at a
3635 distance [perl #78844].
3636
3637 =item *
3638
3639 Calling a closure prototype (what is passed to an attribute handler for a
3640 closure) now results in a "Closure prototype called" error message instead
3641 of a crash [perl #68560].
3642
3643 =item *
3644
3645 Mentioning a read-only lexical variable from the enclosing scope in a
3646 string C<eval> no longer causes the variable to become writable
3647 [perl #19135].
3648
3649 =back
3650
3651 =head2 Signals
3652
3653 =over
3654
3655 =item *
3656
3657 Within signal handlers, C<$!> is now implicitly localized.
3658
3659 =item *
3660
3661 CHLD signals are no longer unblocked after a signal handler is called if
3662 they were blocked before by C<POSIX::sigprocmask> [perl #82040].
3663
3664 =item *
3665
3666 A signal handler called within a signal handler could cause leaks or
3667 double-frees.  Now fixed. [perl #76248].
3668
3669 =back
3670
3671 =head2 Miscellaneous Memory Leaks
3672
3673 =over
3674
3675 =item *
3676
3677 Several VMS-specific routines dealing with filesystem access were leaking
3678 memory.
3679
3680 =item *
3681
3682 Several memory leaks when loading XS modules were fixed.
3683
3684 =item *
3685
3686 L<substr()|perlfunc/"substr EXPR,OFFSET,LENGTH,REPLACEMENT">,
3687 L<pos()|perlfunc/"index STR,SUBSTR,POSITION">, L<keys()|perlfunc/"keys HASH">,
3688 and L<vec()|perlfunc/"vec EXPR,OFFSET,BITS"> could, when used in combination
3689 with lvalues, result in leaking the scalar value they operate on, and cause its
3690 destruction to happen too late. This has now been fixed.
3691
3692 =item *
3693
3694 The postincrement and postdecrement operators, C<++> and C<-->, used to cause
3695 leaks when being used on references.  This has now been fixed.
3696
3697 =item *
3698
3699 Nested C<map> and C<grep> blocks no longer leak memory when processing
3700 large lists [perl #48004].
3701
3702 =item *
3703
3704 C<use VERSION> and C<no VERSION> no longer leak memory [perl #78436]
3705 [perl #69050].
3706
3707 =item *
3708
3709 C<.=> followed by C<< <> >> or C<readline> would leak memory if C<$/>
3710 contained characters beyond the octet range and the scalar assigned to
3711 happened to be encoded as UTF8 internally [perl #72246].
3712
3713 =item *
3714
3715 C<eval "BEGIN{die}"> no longer leaks memory on non-threaded builds.
3716
3717 =back
3718
3719 =head2 Memory Corruption and Crashes
3720
3721 =over
3722
3723 =item *
3724
3725 glob() no longer crashes when %File::Glob:: is empty and
3726 CORE::GLOBAL::glob isn't present (4984aa).
3727
3728 =item *
3729
3730 readline() has been fixed when interrupted by signals so it no longer
3731 returns the "same thing" as before or random memory.
3732
3733 =item *
3734
3735 When assigning a list with duplicated keys to a hash, the assignment used to
3736 return garbage and/or freed values:
3737
3738     @a = %h = (list with some duplicate keys);
3739
3740 This has now been fixed [perl #31865].
3741
3742 =item *
3743
3744 The mechanism for freeing objects in globs used to leave dangling
3745 pointers to freed SVs, meaning Perl users could see corrupted state
3746 during destruction.
3747
3748 Perl now only frees the affected slots of the GV, rather than freeing
3749 the GV itself.  This makes sure that there are no dangling refs or
3750 corrupted state during destruction.
3751
3752 =item *
3753
3754 The interpreter no longer crashes when freeing deeply-nested arrays of
3755 arrays.  Hashes have not been fixed yet [perl #44225].
3756
3757 =item *
3758
3759 Concatenating long strings under C<use encoding> no longer causes perl to
3760 crash [perl #78674].
3761
3762 =item *
3763
3764 Calling C<< ->import >> on a class lacking an import method could corrupt
3765 the stack, resulting in strange behaviour. For instance,
3766
3767   push @a, "foo", $b = bar->import;
3768
3769 would assign 'foo' to C<$b> [perl #63790].
3770
3771 =item *
3772
3773 The C<recv> function could crash when called with the MSG_TRUNC flag
3774 [perl #75082].
3775
3776 =item *
3777
3778 C<formline> no longer crashes when passed a tainted format picture. It also
3779 taints C<$^A> now if its arguments are tainted [perl #79138].
3780
3781 =back
3782
3783 =head2 Fixes to Various Perl Operators
3784
3785 =over
3786
3787 =item *
3788
3789 The C<&> C<|> C<^> bitwise operators no longer coerce read-only arguments
3790 [perl #20661].
3791
3792 =item *
3793
3794 Stringifying a scalar containing -0.0 no longer has the affect of turning
3795 false into true [perl #45133].
3796
3797 =item *
3798
3799 Some numeric operators were converting integers to floating point,
3800 resulting in loss of precision on 64-bit platforms [perl #77456].
3801
3802 =item *
3803
3804 C<sprintf> was ignoring locales when called with constant arguments
3805 [perl #78632].
3806
3807 =item *
3808
3809 Combining the vector (%v) flag and dynamic precision would
3810 cause sprintf to confuse the order of its arguments, making it treat the
3811 string as the precision and vice versa [perl #83194].
3812
3813 =back
3814
3815 =head2 Bugs Relating to the C API
3816
3817 =over
3818
3819 =item *
3820
3821 The C-level C<lex_stuff_pvn> function would sometimes cause a spurious
3822 syntax error on the last line of the file if it lacked a final semicolon
3823 [perl #74006].
3824
3825 =item *
3826
3827 The C<eval_sv> and C<eval_pv> C functions now set C<$@> correctly when
3828 there is a syntax error and no C<G_KEEPERR> flag, and never set it if the
3829 C<G_KEEPERR> flag is present [perl #3719].
3830
3831 =item *
3832
3833 The XS multicall API no longer causes subroutines to lose reference counts
3834 if called via the multicall interface from within those very subroutines.
3835 This affects modules like List::Util. Calling one of its functions with an
3836 active subroutine as the first argument could cause a crash [perl #78070].
3837
3838 =item *
3839
3840 The C<SvPVbyte> function available to XS modules now calls magic before
3841 downgrading the SV, to avoid warnings about wide characters [perl #72398].
3842
3843 =item *
3844
3845 The ref types in the typemap for XS bindings now support magical variables
3846 [perl #72684].
3847
3848 =item *
3849
3850 C<sv_catsv_flags> no longer calls C<mg_get> on its second argument (the
3851 source string) if the flags passed to it do not include SV_GMAGIC. So it
3852 now matches the documentation.
3853
3854 =item *
3855
3856 C<my_strftime> no longer leaks memory.  This fixes a memory leak in
3857 C<POSIX::strftime> [perl #73520].
3858
3859 =back
3860
3861 =head1 Known Problems
3862
3863 XXX Many of these have probably already been solved.  There are also
3864 unresolved BBC articles linked to #77718 that are awaiting CPAN
3865 releases.  These may need to be listed here.
3866
3867 =over 4
3868
3869 =item *
3870
3871 Bug fixes involving CvGV reference counting break Sub::Name.  A
3872 patch has been sent upstream to the maintainer
3873
3874 =item *
3875
3876 readline() returns an empty string instead of undef when it is
3877 interrupted by a signal
3878
3879 =item *
3880
3881 Test-Harness was updated from 3.17 to 3.21 for this release. A rewrite
3882 in how it handles non-Perl tests (in 3.17_01) broke argument passing to
3883 non-Perl tests with L<prove> (RT #59186), and required that non-Perl
3884 tests be run as C<prove ./test.sh> instead of C<prove test.sh> These
3885 issues are being solved upstream, but didn't make it into this release.
3886 They're expected to be fixed in time for perl v5.13.4.  (RT #59457)
3887
3888 =item *
3889
3890 C<version> now prevents object methods from being called as class methods
3891 (d808b68)
3892
3893 =item *
3894
3895 The changes in L<substr()|perlfunc/"substr EXPR,OFFSET,LENGTH,REPLACEMENT">
3896 broke C<HTML::Parser> <= 3.66. A fixed C<HTML::Parser> is available as versions
3897 3.67 on CPAN.
3898
3899 =item *
3900
3901 The changes in prototype handling break C<Switch>. A patch has been sent
3902 upstream and will hopefully appear on CPAN soon.
3903
3904 =item *
3905
3906 The upgrade to Encode-2.40 has caused some tests in the libwww-perl distribution
3907 on CPAN to fail. (Specifically, F<base/message-charset.t> tests 33-36 in version
3908 5.836 of that distribution now fail.)
3909
3910 =item *
3911
3912 The upgrade to ExtUtils-MakeMaker-6.57_05 has caused some tests in the
3913 Module-Install distribution on CPAN to fail. (Specifically, F<02_mymeta.t> tests
3914 5 and 21, F<18_all_from.t> tests 6 and 15, F<19_authors.t> tests 5, 13, 21 and
3915 29, and F<20_authors_with_special_characters.t> tests 6, 15 and 23 in version
3916 1.00 of that distribution now fail.)
3917
3918 =back
3919
3920 =head1 Errata
3921
3922 =head2 C<keys>, C<values> work on arrays
3923
3924 You can now use the C<keys>, C<values>, C<each> builtin functions on arrays
3925 (previously you could only use them on hashes).  See L<perlfunc> for details.
3926 This is actually a change introduced in perl 5.12.0, but it was missed from
3927 that release's perldelta.
3928
3929 =head1 Obituary
3930
3931 Randy Kobes, creator of the kobesearch alternative to search.cpan.org and
3932 contributor/maintainer to several core Perl toolchain modules, passed away
3933 on September 18, 2010 after a battle with lung cancer.  His contributions
3934 to the Perl community will be missed.
3935
3936 =head1 Acknowledgements
3937
3938 XXX The list of people to thank goes here.
3939
3940 =head1 Reporting Bugs
3941
3942 If you find what you think is a bug, you might check the articles
3943 recently posted to the comp.lang.perl.misc newsgroup and the perl
3944 bug database at http://rt.perl.org/perlbug/ .  There may also be
3945 information at http://www.perl.org/ , the Perl Home Page.
3946
3947 If you believe you have an unreported bug, please run the L<perlbug>
3948 program included with your release.  Be sure to trim your bug down
3949 to a tiny but sufficient test case.  Your bug report, along with the
3950 output of C<perl -V>, will be sent off to perlbug@perl.org to be
3951 analysed by the Perl porting team.
3952
3953 If the bug you are reporting has security implications, which make it
3954 inappropriate to send to a publicly archived mailing list, then please send
3955 it to perl5-security-report@perl.org. This points to a closed subscription
3956 unarchived mailing list, which includes all the core committers, who be able
3957 to help assess the impact of issues, figure out a resolution, and help
3958 co-ordinate the release of patches to mitigate or fix the problem across all
3959 platforms on which Perl is supported. Please only use this address for
3960 security issues in the Perl core, not for modules independently
3961 distributed on CPAN.
3962
3963 =head1 SEE ALSO
3964
3965 The F<Changes> file for an explanation of how to view exhaustive details
3966 on what changed.
3967
3968 The F<INSTALL> file for how to build Perl.
3969
3970 The F<README> file for general stuff.
3971
3972 The F<Artistic> and F<Copying> files for copyright information.
3973
3974 =cut