This is a live mirror of the Perl 5 development currently hosted at https://github.com/perl/perl5
Revert "Update Unicode-Collate to CPAN version 0.71"
[perl5.git] / pod / perldelta.pod
1 =encoding utf8
2
3 =head1 NAME
4
5 [ this is a template for a new perldelta file. Any text flagged as
6 XXX needs to be processed before release. ]
7
8 perldelta - what is new for perl v5.13.9
9
10 =head1 DESCRIPTION
11
12 This document describes differences between the 5.13.8 release and
13 the 5.13.9 release.
14
15 If you are upgrading from an earlier release such as 5.13.7, first read
16 L<perl5138delta>, which describes differences between 5.13.7 and
17 5.13.8.
18
19 =head1 Notice
20
21 XXX Any important notices here
22
23 =head1 Core Enhancements
24
25 XXX New core language features go here. Summarise user-visible core language
26 enhancements. Particularly prominent performance optimisations could go
27 here, but most should go in the L</Performance Enhancements> section.
28
29 [ List each enhancement as a =head2 entry ]
30
31 =head2 New regular expression modifier C</a>
32
33 The C</a> regular expression modifier restricts C<\s> to match precisely
34 the five characters C<[ \f\n\r\t]>, C<\d> to match precisely the 10
35 characters C<[0-9]>, C<\w> to match precisely the 63 characters
36 C<[A-Za-z0-9_]>, and the Posix (C<[[:posix:]]>) character classes to
37 match only the appropriate ASCII characters.  The complements, of
38 course, match everything but; and C<\b> and C<\B> are correspondingly
39 affected.  Otherwise, C</a> behaves like the C</u> modifier, in that
40 case-insensitive matching uses Unicode semantics; for example, "k" will
41 match the Unicode C<\N{KELVIN SIGN}> under C</i> matching, and code
42 points in the Latin1 range, above ASCII will have Unicode semantics when
43 it comes to case-insensitive matching.  Like its cousins (C</u>, C</l>,
44 and C</d>), and in spite of the terminology, C</a> in 5.14 will not
45 actually be able to be used as a suffix at the end of a regular
46 expression (this restriction is planned to be lifted in 5.16).  It must
47 occur either as an infix modifier, such as C<(?a:...)> or (C<(?a)...>,
48 or it can be turned on within the lexical scope of C<use re '/a'>.
49 Turning on C</a> turns off the other "character set" modifiers.
50
51 =head2 Any unsigned value can be encoded as a character
52
53 With this release, Perl is adopting a model that any unsigned value can
54 be treated as a code point and encoded internally (as utf8) without
55 warnings -- not just the code points that are legal in Unicode.
56 However, unless utf8 warnings have been
57 explicitly lexically turned off, outputting or performing a
58 Unicode-defined operation (such as upper-casing) on such a code point
59 will generate a warning.  Attempting to input these using strict rules
60 (such as with the C<:encoding('UTF-8')> layer) will continue to fail.
61 Prior to this release the handling was very inconsistent, and incorrect
62 in places.  Also, the Unicode non-characters, some of which previously were
63 erroneously considered illegal in places by Perl, contrary to the Unicode
64 standard, are now always legal internally.  But inputting or outputting
65 them will work the same as for the non-legal Unicode code points, as the
66 Unicode standard says they are illegal for "open interchange".
67
68
69 =head1 Security
70
71 XXX Any security-related notices go here.  In particular, any security
72 vulnerabilities closed should be noted here rather than in the
73 L</Selected Bug Fixes> section.
74
75 [ List each security issue as a =head2 entry ]
76
77 =head1 Incompatible Changes
78
79 XXX For a release on a stable branch, this section aspires to be:
80
81     There are no changes intentionally incompatible with 5.XXX.XXX. If any
82     exist, they are bugs and reports are welcome.
83
84 [ List each incompatible change as a =head2 entry ]
85
86 =head1 Deprecations
87
88 XXX Any deprecated features, syntax, modules etc. should be listed here.
89 In particular, deprecated modules should be listed here even if they are
90 listed as an updated module in the L</Modules and Pragmata> section.
91
92 [ List each deprecation as a =head2 entry ]
93
94 =head1 Performance Enhancements
95
96 XXX Changes which enhance performance without changing behaviour go here. There
97 may well be none in a stable release.
98
99 [ List each enhancement as a =item entry ]
100
101 =over 4
102
103 =item *
104
105 XXX
106
107 =back
108
109 =head1 Modules and Pragmata
110
111 XXX All changes to installed files in F<cpan/>, F<dist/>, F<ext/> and F<lib/>
112 go here.  If Module::CoreList is updated, generate an initial draft of the
113 following sections using F<Porting/corelist-perldelta.pl>, which prints stub
114 entries to STDOUT.  Results can be pasted in place of the '=head2' entries
115 below.  A paragraph summary for important changes should then be added by hand.
116 In an ideal world, dual-life modules would have a F<Changes> file that could be
117 cribbed.
118
119 [ Within each section, list entries as a =item entry ]
120
121 =head2 New Modules and Pragmata
122
123 =over 4
124
125 =item *
126
127 L<CPAN::Meta::YAML> 0.002 has been added as a dual-life module.  It supports a
128 subset of YAML sufficient for reading and writing META.yml and MYMETA.yml files
129 included with CPAN distributions or generated by the module installation
130 toolchain. It should not be used for any other general YAML parsing or
131 generation task.
132
133 =item *
134
135 L<HTTP::Tiny> 0.009 has been added as a dual-life module.  It is a very
136 small, simple HTTP/1.1 client designed for simple GET requests and file
137 mirroring.  It has has been added to enable CPAN.pm and CPANPLUS to
138 "bootstrap" HTTP access to CPAN using pure Perl without relying on external
139 binaries like F<curl> or F<wget>.
140
141 =item *
142
143 L<Module::Metadata> 1.000003 has been added as a dual-life module.  It gathers
144 package and POD information from Perl module files.  It is a standalone module
145 based on Module::Build::ModuleInfo for use by other module installation
146 toolchain components.  Module::Build::ModuleInfo has been deprecated in
147 favor of this module instead.
148
149 =item *
150
151 L<Perl::OSType> 1.002 has been added as a dual-life module.  It maps Perl
152 operating system names (e.g. 'dragonfly' or 'MSWin32') to more generic types
153 with standardized names (e.g.  "Unix" or "Windows").  It has been refactored
154 out of Module::Build and ExtUtils::CBuilder and consolidates such mappings into
155 a single location for easier maintenance.
156
157 =back
158
159 =head2 Updated Modules and Pragmata
160
161 =over 4
162
163 =item *
164
165 C<Archive::Extract> has been upgraded from version 0.46 to 0.48
166
167 =item *
168
169 C<Archive::Tar> has been upgraded from version 1.74 to 1.76
170
171 =item *
172
173 C<CGI> has been upgraded from version 3.50 to 3.51
174
175 =item *
176
177 C<Compress::Raw::Bzip2> has been upgraded from version 2.031 to 2.033
178
179 =item *
180
181 C<Compress::Raw::Zlib> has been upgraded from version 2.030 to 2.033
182
183 =item *
184
185 C<CPAN> has been upgraded from version 1.94_62 to 1.94_63
186
187 =item *
188
189 C<CPANPLUS> has been upgraded from version 0.9010 to 0.9011
190
191 =item *
192
193 C<CPANPLUS::Dist::Build> has been upgraded from version 0.50 to 0.52
194
195 =item *
196
197 C<DB_File> has been upgraded from version 1.820 to 1.821
198
199 =item *
200
201 C<Encode> has been upgraded from version 2.40 to 2.42.
202 Now, all 66 Unicode non-characters are treated the same way U+FFFF has
203 always been treated; if it was disallowed, all 66 are disallowed; if it
204 warned, all 66 warn.
205
206 =item *
207
208 C<File::Fetch> has been upgraded from version 0.28 to 0.32
209
210 =item *
211
212 C<IO::Compress> has been upgraded from version 2.030 to 2.033
213
214 =item *
215
216 C<IPC::Cmd> has been upgraded from version 0.66 to 0.68
217
218 =item *
219
220 C<Log::Message> has been upgraded from version 0.02 to 0.04
221
222 =item *
223
224 C<Log::Message::Simple> has been upgraded from version 0.06 to 0.08
225
226 =item *
227
228 C<Module::Load::Conditional> has been upgraded from version 0.38 to 0.40
229
230 =item *
231
232 C<Object::Accessor> has been upgraded from version 0.36 to 0.38
233
234 =item *
235
236 C<Params::Check> has been upgraded from version 0.26 to 0.28
237
238 =item *
239
240 C<Pod::LaTeX> has been upgraded from version 0.58 to 0.59
241
242 =item *
243
244 C<Term::UI> has been upgraded from version 0.20 to 0.24
245
246 =item *
247
248 C<threads> has been upgraded from version 1.81_03 to 1.82
249
250 =item *
251
252 C<threads::shared> has been upgraded from version 1.35 to 1.36
253
254 =item *
255
256 C<Time::Local> has been upgraded from version 1.1901_01 to 1.2000.
257
258 =item *
259
260 C<Unicode::Collate> has been upgraded from version 0.68 to 0.70
261
262 This also sees the switch from using the pure-perl version of this
263 module to the XS version.
264
265 =item *
266
267 C<Unicode::Normalize> has been upgraded from version 1.07 to 1.10
268
269 =back
270
271 =head2 Removed Modules and Pragmata
272
273 =over 4
274
275 =item *
276
277 XXX
278
279 =back
280
281 =head1 Documentation
282
283 XXX Changes to files in F<pod/> go here.  Consider grouping entries by
284 file and be sure to link to the appropriate page, e.g. L<perlfunc>.
285
286 =head2 New Documentation
287
288 XXX Changes which create B<new> files in F<pod/> go here.
289
290 =head3 L<XXX>
291
292 XXX Description of the purpose of the new file here
293
294 =head2 Changes to Existing Documentation
295
296 XXX Changes which significantly change existing files in F<pod/> go here.
297 However, any changes to F<pod/perldiag.pod> should go in the L</Diagnostics>
298 section.
299
300 =head3 L<XXX>
301
302 =over 4
303
304 =item *
305
306 XXX Description of the change here
307
308 =back
309
310 =head1 Diagnostics
311
312 The following additions or changes have been made to diagnostic output,
313 including warnings and fatal error messages.  For the complete list of
314 diagnostic messages, see L<perldiag>.
315
316 XXX New or changed warnings emitted by the core's C<C> code go here. Also
317 include any changes in L<perldiag> that reconcile it to the C<C> code.
318
319 [ Within each section, list entries as a =item entry ]
320
321 =head2 New Diagnostics
322
323 XXX Newly added diagnostic messages go here
324
325 =over 4
326
327 =item *
328
329 XXX
330
331 =back
332
333 =head2 Changes to Existing Diagnostics
334
335 XXX Changes (i.e. rewording) of diagnostic messages go here
336
337 =over 4
338
339 =item *
340
341 XXX
342
343 =back
344
345 =head1 Utility Changes
346
347 XXX Changes to installed programs such as F<perlbug> and F<xsubpp> go
348 here. Most of these are built within the directories F<utils> and F<x2p>.
349
350 [ List utility changes as a =head3 entry for each utility and =item
351 entries for each change
352 Use L<XXX> with program names to get proper documentation linking. ]
353
354 =head3 L<XXX>
355
356 =over 4
357
358 =item *
359
360 XXX
361
362 =back
363
364 =head1 Configuration and Compilation
365
366 XXX Changes to F<Configure>, F<installperl>, F<installman>, and analogous tools
367 go here.  Any other changes to the Perl build process should be listed here.
368 However, any platform-specific changes should be listed in the
369 L</Platform Support> section, instead.
370
371 [ List changes as a =item entry ].
372
373 =over 4
374
375 =item *
376
377 XXX
378
379 =back
380
381 =head1 Testing
382
383 XXX Any significant changes to the testing of a freshly built perl should be
384 listed here.  Changes which create B<new> files in F<t/> go here as do any
385 large changes to the testing harness (e.g. when parallel testing was added).
386 Changes to existing files in F<t/> aren't worth summarising, although the bugs
387 that they represent may be covered elsewhere.
388
389 [ List each test improvement as a =item entry ]
390
391 =over 4
392
393 =item *
394
395 XXX
396
397 =back
398
399 =head1 Platform Support
400
401 XXX Any changes to platform support should be listed in the sections below.
402
403 [ Within the sections, list each platform as a =item entry with specific
404 changes as paragraphs below it. ]
405
406 =head2 New Platforms
407
408 XXX List any platforms that this version of perl compiles on, that previous
409 versions did not. These will either be enabled by new files in the F<hints/>
410 directories, or new subdirectories and F<README> files at the top level of the
411 source tree.
412
413 =over 4
414
415 =item XXX-some-platform
416
417 XXX
418
419 =back
420
421 =head2 Discontinued Platforms
422
423 XXX List any platforms that this version of perl no longer compiles on.
424
425 =over 4
426
427 =item XXX-some-platform
428
429 XXX
430
431 =back
432
433 =head2 Platform-Specific Notes
434
435 XXX List any changes for specific platforms. This could include configuration
436 and compilation changes or changes in portability/compatibility.  However,
437 changes within modules for platforms should generally be listed in the
438 L</Modules and Pragmata> section.
439
440 =over 4
441
442 =item XXX-some-platform
443
444 XXX
445
446 =back
447
448 =head1 Internal Changes
449
450 XXX Changes which affect the interface available to C<XS> code go here.
451 Other significant internal changes for future core maintainers should
452 be noted as well.
453
454 [ List each test improvement as a =item entry ]
455
456 =over 4
457
458 =item *
459
460 The opcode bodies for C<chop> and C<chomp> and for C<schop> and C<schomp> have
461 been merged. The implementation functions C<Perl_do_chop()> and
462 C<Perl_do_chomp()>, never part of the public API, have been merged and moved to
463 a static function in F<pp.c>. This shrinks the perl binary slightly, and should
464 not affect any code outside the core (unless it is relying on the order of side
465 effects when C<chomp> is passed a I<list> of values).
466
467 =item *
468
469 Some of the flags parameters to the uvuni_to_utf8_flags() and
470 utf8n_to_uvuni() have changed.  This is a result of Perl now allowing
471 internal storage and manipulation of code points that are problematic
472 in some situations.  Hence, the default actions for these functions has
473 been complemented to allow these code points.  The new flags are
474 documented in L<perlapi>.  Code that requires the problematic code
475 points to be rejected needs to change to use these flags.  Some flag
476 names are retained for backward source compatibility, though they do
477 nothing, as they are now the default.  However the flags
478 C<UNICODE_ALLOW_FDD0>, C<UNICODE_ALLOW_FFFF>, C<UNICODE_ILLEGAL>, and
479 C<UNICODE_IS_ILLEGAL> have been removed, as they stem from a
480 fundamentally broken model of how the Unicode non-character code points
481 should be handled, which is now described in
482 L<perlunicode/Non-character code points>.  See also L</Selected Bug Fixes>.
483
484 =item *
485
486 Certain shared flags in the C<pmop.op_pmflags> and C<regexp.extflags>
487 structures have been removed.  These are: C<Rxf_Pmf_LOCALE>,
488 C<Rxf_Pmf_UNICODE>, and C<PMf_LOCALE>.  Instead there are encodes and
489 three static in-line functions for accessing the information:
490 C<get_regex_charset()>, C<set_regex_charset()>, and C<get_regex_charset_name()>,
491 which are defined in the places where the orginal flags were.
492
493 =back
494
495 =head1 Selected Bug Fixes
496
497 XXX Important bug fixes in the core language are summarised here.
498 Bug fixes in files in F<ext/> and F<lib/> are best summarised in
499 L</Modules and Pragmata>.
500
501 [ List each fix as a =item entry ]
502
503 =over 4
504
505 =item *
506
507 The handling of Unicode non-characters has changed.
508 Previously they were mostly considered illegal, except that only one of
509 the 66 of them was known about in places.  The Unicode standard
510 considers them legal, but forbids the "open interchange" of them.
511 This is part of the change to allow the internal use of any code point
512 (see L</Core Enhancements>).  Together, these changes resolve
513 L<# 38722|https://rt.perl.org/rt3/Ticket/Display.html?id=38722>,
514 L<# 51918|http://rt.perl.org/rt3/Ticket/Display.html?id=51918>,
515 L<# 51936|http://rt.perl.org/rt3/Ticket/Display.html?id=51936>,
516 L<# 63446|http://rt.perl.org/rt3/Ticket/Display.html?id=63446>
517
518 =back
519
520 =head1 Known Problems
521
522 XXX Descriptions of platform agnostic bugs we know we can't fix go here. Any
523 tests that had to be C<TODO>ed for the release would be noted here, unless
524 they were specific to a particular platform (see below).
525
526 This is a list of some significant unfixed bugs, which are regressions
527 from either 5.XXX.XXX or 5.XXX.XXX.
528
529 [ List each fix as a =item entry ]
530
531 =over 4
532
533 =item *
534
535 XXX
536
537 =back
538
539 =head1 Obituary
540
541 XXX If any significant core contributor has died, we've added a short obituary
542 here.
543
544 =head1 Acknowledgements
545
546 XXX The list of people to thank goes here.
547
548 =head1 Reporting Bugs
549
550 If you find what you think is a bug, you might check the articles
551 recently posted to the comp.lang.perl.misc newsgroup and the perl
552 bug database at http://rt.perl.org/perlbug/ .  There may also be
553 information at http://www.perl.org/ , the Perl Home Page.
554
555 If you believe you have an unreported bug, please run the L<perlbug>
556 program included with your release.  Be sure to trim your bug down
557 to a tiny but sufficient test case.  Your bug report, along with the
558 output of C<perl -V>, will be sent off to perlbug@perl.org to be
559 analysed by the Perl porting team.
560
561 If the bug you are reporting has security implications, which make it
562 inappropriate to send to a publicly archived mailing list, then please send
563 it to perl5-security-report@perl.org. This points to a closed subscription
564 unarchived mailing list, which includes all the core committers, who be able
565 to help assess the impact of issues, figure out a resolution, and help
566 co-ordinate the release of patches to mitigate or fix the problem across all
567 platforms on which Perl is supported. Please only use this address for
568 security issues in the Perl core, not for modules independently
569 distributed on CPAN.
570
571 =head1 SEE ALSO
572
573 The F<Changes> file for an explanation of how to view exhaustive details
574 on what changed.
575
576 The F<INSTALL> file for how to build Perl.
577
578 The F<README> file for general stuff.
579
580 The F<Artistic> and F<Copying> files for copyright information.
581
582 =cut