This is a live mirror of the Perl 5 development currently hosted at https://github.com/perl/perl5
Update Unicode-Collate to CPAN version 0.71
[perl5.git] / pod / perldelta.pod
1 =encoding utf8
2
3 =head1 NAME
4
5 [ this is a template for a new perldelta file. Any text flagged as
6 XXX needs to be processed before release. ]
7
8 perldelta - what is new for perl v5.13.9
9
10 =head1 DESCRIPTION
11
12 This document describes differences between the 5.13.8 release and
13 the 5.13.9 release.
14
15 If you are upgrading from an earlier release such as 5.13.7, first read
16 L<perl5138delta>, which describes differences between 5.13.7 and
17 5.13.8.
18
19 =head1 Notice
20
21 XXX Any important notices here
22
23 =head1 Core Enhancements
24
25 XXX New core language features go here. Summarise user-visible core language
26 enhancements. Particularly prominent performance optimisations could go
27 here, but most should go in the L</Performance Enhancements> section.
28
29 [ List each enhancement as a =head2 entry ]
30
31 =head2 New regular expression modifier C</a>
32
33 The C</a> regular expression modifier restricts C<\s> to match precisely
34 the five characters C<[ \f\n\r\t]>, C<\d> to match precisely the 10
35 characters C<[0-9]>, C<\w> to match precisely the 63 characters
36 C<[A-Za-z0-9_]>, and the Posix (C<[[:posix:]]>) character classes to
37 match only the appropriate ASCII characters.  The complements, of
38 course, match everything but; and C<\b> and C<\B> are correspondingly
39 affected.  Otherwise, C</a> behaves like the C</u> modifier, in that
40 case-insensitive matching uses Unicode semantics; for example, "k" will
41 match the Unicode C<\N{KELVIN SIGN}> under C</i> matching, and code
42 points in the Latin1 range, above ASCII will have Unicode semantics when
43 it comes to case-insensitive matching.  Like its cousins (C</u>, C</l>,
44 and C</d>), and in spite of the terminology, C</a> in 5.14 will not
45 actually be able to be used as a suffix at the end of a regular
46 expression (this restriction is planned to be lifted in 5.16).  It must
47 occur either as an infix modifier, such as C<(?a:...)> or (C<(?a)...>,
48 or it can be turned on within the lexical scope of C<use re '/a'>.
49 Turning on C</a> turns off the other "character set" modifiers.
50
51 =head2 Any unsigned value can be encoded as a character
52
53 With this release, Perl is adopting a model that any unsigned value can
54 be treated as a code point and encoded internally (as utf8) without
55 warnings -- not just the code points that are legal in Unicode.
56 However, unless utf8 warnings have been
57 explicitly lexically turned off, outputting or performing a
58 Unicode-defined operation (such as upper-casing) on such a code point
59 will generate a warning.  Attempting to input these using strict rules
60 (such as with the C<:encoding('UTF-8')> layer) will continue to fail.
61 Prior to this release the handling was very inconsistent, and incorrect
62 in places.  Also, the Unicode non-characters, some of which previously were
63 erroneously considered illegal in places by Perl, contrary to the Unicode
64 standard, are now always legal internally.  But inputting or outputting
65 them will work the same as for the non-legal Unicode code points, as the
66 Unicode standard says they are illegal for "open interchange".
67
68
69 =head1 Security
70
71 XXX Any security-related notices go here.  In particular, any security
72 vulnerabilities closed should be noted here rather than in the
73 L</Selected Bug Fixes> section.
74
75 [ List each security issue as a =head2 entry ]
76
77 =head1 Incompatible Changes
78
79 XXX For a release on a stable branch, this section aspires to be:
80
81     There are no changes intentionally incompatible with 5.XXX.XXX. If any
82     exist, they are bugs and reports are welcome.
83
84 [ List each incompatible change as a =head2 entry ]
85
86 =head1 Deprecations
87
88 XXX Any deprecated features, syntax, modules etc. should be listed here.
89 In particular, deprecated modules should be listed here even if they are
90 listed as an updated module in the L</Modules and Pragmata> section.
91
92 [ List each deprecation as a =head2 entry ]
93
94 =head1 Performance Enhancements
95
96 XXX Changes which enhance performance without changing behaviour go here. There
97 may well be none in a stable release.
98
99 [ List each enhancement as a =item entry ]
100
101 =over 4
102
103 =item *
104
105 XXX
106
107 =back
108
109 =head1 Modules and Pragmata
110
111 XXX All changes to installed files in F<cpan/>, F<dist/>, F<ext/> and F<lib/>
112 go here.  If Module::CoreList is updated, generate an initial draft of the
113 following sections using F<Porting/corelist-perldelta.pl>, which prints stub
114 entries to STDOUT.  Results can be pasted in place of the '=head2' entries
115 below.  A paragraph summary for important changes should then be added by hand.
116 In an ideal world, dual-life modules would have a F<Changes> file that could be
117 cribbed.
118
119 [ Within each section, list entries as a =item entry ]
120
121 =head2 New Modules and Pragmata
122
123 =over 4
124
125 =item *
126
127 L<CPAN::Meta::YAML> 0.002 has been added as a dual-life module.  It supports a
128 subset of YAML sufficient for reading and writing META.yml and MYMETA.yml files
129 included with CPAN distributions or generated by the module installation
130 toolchain. It should not be used for any other general YAML parsing or
131 generation task.
132
133 =item *
134
135 L<HTTP::Tiny> 0.009 has been added as a dual-life module.  It is a very
136 small, simple HTTP/1.1 client designed for simple GET requests and file
137 mirroring.  It has has been added to enable CPAN.pm and CPANPLUS to
138 "bootstrap" HTTP access to CPAN using pure Perl without relying on external
139 binaries like F<curl> or F<wget>.
140
141 =item *
142
143 L<Module::Metadata> 1.000003 has been added as a dual-life module.  It gathers
144 package and POD information from Perl module files.  It is a standalone module
145 based on Module::Build::ModuleInfo for use by other module installation
146 toolchain components.  Module::Build::ModuleInfo has been deprecated in
147 favor of this module instead.
148
149 =item *
150
151 L<Perl::OSType> 1.002 has been added as a dual-life module.  It maps Perl
152 operating system names (e.g. 'dragonfly' or 'MSWin32') to more generic types
153 with standardized names (e.g.  "Unix" or "Windows").  It has been refactored
154 out of Module::Build and ExtUtils::CBuilder and consolidates such mappings into
155 a single location for easier maintenance.
156
157 =back
158
159 =head2 Updated Modules and Pragmata
160
161 =over 4
162
163 =item *
164
165 C<Archive::Extract> has been upgraded from version 0.46 to 0.48
166
167 =item *
168
169 C<Archive::Tar> has been upgraded from version 1.74 to 1.76
170
171 =item *
172
173 C<CGI> has been upgraded from version 3.50 to 3.51
174
175 =item *
176
177 C<Compress::Raw::Bzip2> has been upgraded from version 2.031 to 2.033
178
179 =item *
180
181 C<Compress::Raw::Zlib> has been upgraded from version 2.030 to 2.033
182
183 =item *
184
185 C<CPAN> has been upgraded from version 1.94_62 to 1.94_63
186
187 =item *
188
189 C<CPANPLUS> has been upgraded from version 0.9010 to 0.9011
190
191 =item *
192
193 C<CPANPLUS::Dist::Build> has been upgraded from version 0.50 to 0.52
194
195 =item *
196
197 C<DB_File> has been upgraded from version 1.820 to 1.821
198
199 =item *
200
201 C<Encode> has been upgraded from version 2.40 to 2.42.
202 Now, all 66 Unicode non-characters are treated the same way U+FFFF has
203 always been treated; if it was disallowed, all 66 are disallowed; if it
204 warned, all 66 warn.
205
206 =item *
207
208 C<File::Fetch> has been upgraded from version 0.28 to 0.32
209
210 =item *
211
212 C<IO::Compress> has been upgraded from version 2.030 to 2.033
213
214 =item *
215
216 C<IPC::Cmd> has been upgraded from version 0.66 to 0.68
217
218 =item *
219
220 C<Log::Message> has been upgraded from version 0.02 to 0.04
221
222 =item *
223
224 C<Module::Load::Conditional> has been upgraded from version 0.38 to 0.40
225
226 =item *
227
228 C<Object::Accessor> has been upgraded from version 0.36 to 0.38
229
230 =item *
231
232 C<Params::Check> has been upgraded from version 0.26 to 0.28
233
234 =item *
235
236 C<Pod::LaTeX> has been upgraded from version 0.58 to 0.59
237
238 =item *
239
240 C<Term::UI> has been upgraded from version 0.20 to 0.24
241
242 =item *
243
244 C<threads> has been upgraded from version 1.81_03 to 1.82
245
246 =item *
247
248 C<threads::shared> has been upgraded from version 1.35 to 1.36
249
250 =item *
251
252 C<Time::Local> has been upgraded from version 1.1901_01 to 1.2000.
253
254 =item *
255
256 C<Unicode::Collate> has been upgraded from version 0.68 to 0.71
257
258 This also sees the switch from using the pure-perl version of this
259 module to the XS version.
260
261 =item *
262
263 C<Unicode::Normalize> has been upgraded from version 1.07 to 1.10
264
265 =back
266
267 =head2 Removed Modules and Pragmata
268
269 =over 4
270
271 =item *
272
273 XXX
274
275 =back
276
277 =head1 Documentation
278
279 XXX Changes to files in F<pod/> go here.  Consider grouping entries by
280 file and be sure to link to the appropriate page, e.g. L<perlfunc>.
281
282 =head2 New Documentation
283
284 XXX Changes which create B<new> files in F<pod/> go here.
285
286 =head3 L<XXX>
287
288 XXX Description of the purpose of the new file here
289
290 =head2 Changes to Existing Documentation
291
292 XXX Changes which significantly change existing files in F<pod/> go here.
293 However, any changes to F<pod/perldiag.pod> should go in the L</Diagnostics>
294 section.
295
296 =head3 L<XXX>
297
298 =over 4
299
300 =item *
301
302 XXX Description of the change here
303
304 =back
305
306 =head1 Diagnostics
307
308 The following additions or changes have been made to diagnostic output,
309 including warnings and fatal error messages.  For the complete list of
310 diagnostic messages, see L<perldiag>.
311
312 XXX New or changed warnings emitted by the core's C<C> code go here. Also
313 include any changes in L<perldiag> that reconcile it to the C<C> code.
314
315 [ Within each section, list entries as a =item entry ]
316
317 =head2 New Diagnostics
318
319 XXX Newly added diagnostic messages go here
320
321 =over 4
322
323 =item *
324
325 XXX
326
327 =back
328
329 =head2 Changes to Existing Diagnostics
330
331 XXX Changes (i.e. rewording) of diagnostic messages go here
332
333 =over 4
334
335 =item *
336
337 XXX
338
339 =back
340
341 =head1 Utility Changes
342
343 XXX Changes to installed programs such as F<perlbug> and F<xsubpp> go
344 here. Most of these are built within the directories F<utils> and F<x2p>.
345
346 [ List utility changes as a =head3 entry for each utility and =item
347 entries for each change
348 Use L<XXX> with program names to get proper documentation linking. ]
349
350 =head3 L<XXX>
351
352 =over 4
353
354 =item *
355
356 XXX
357
358 =back
359
360 =head1 Configuration and Compilation
361
362 XXX Changes to F<Configure>, F<installperl>, F<installman>, and analogous tools
363 go here.  Any other changes to the Perl build process should be listed here.
364 However, any platform-specific changes should be listed in the
365 L</Platform Support> section, instead.
366
367 [ List changes as a =item entry ].
368
369 =over 4
370
371 =item *
372
373 XXX
374
375 =back
376
377 =head1 Testing
378
379 XXX Any significant changes to the testing of a freshly built perl should be
380 listed here.  Changes which create B<new> files in F<t/> go here as do any
381 large changes to the testing harness (e.g. when parallel testing was added).
382 Changes to existing files in F<t/> aren't worth summarising, although the bugs
383 that they represent may be covered elsewhere.
384
385 [ List each test improvement as a =item entry ]
386
387 =over 4
388
389 =item *
390
391 XXX
392
393 =back
394
395 =head1 Platform Support
396
397 XXX Any changes to platform support should be listed in the sections below.
398
399 [ Within the sections, list each platform as a =item entry with specific
400 changes as paragraphs below it. ]
401
402 =head2 New Platforms
403
404 XXX List any platforms that this version of perl compiles on, that previous
405 versions did not. These will either be enabled by new files in the F<hints/>
406 directories, or new subdirectories and F<README> files at the top level of the
407 source tree.
408
409 =over 4
410
411 =item XXX-some-platform
412
413 XXX
414
415 =back
416
417 =head2 Discontinued Platforms
418
419 XXX List any platforms that this version of perl no longer compiles on.
420
421 =over 4
422
423 =item XXX-some-platform
424
425 XXX
426
427 =back
428
429 =head2 Platform-Specific Notes
430
431 XXX List any changes for specific platforms. This could include configuration
432 and compilation changes or changes in portability/compatibility.  However,
433 changes within modules for platforms should generally be listed in the
434 L</Modules and Pragmata> section.
435
436 =over 4
437
438 =item XXX-some-platform
439
440 XXX
441
442 =back
443
444 =head1 Internal Changes
445
446 XXX Changes which affect the interface available to C<XS> code go here.
447 Other significant internal changes for future core maintainers should
448 be noted as well.
449
450 [ List each test improvement as a =item entry ]
451
452 =over 4
453
454 =item *
455
456 The opcode bodies for C<chop> and C<chomp> and for C<schop> and C<schomp> have
457 been merged. The implementation functions C<Perl_do_chop()> and
458 C<Perl_do_chomp()>, never part of the public API, have been merged and moved to
459 a static function in F<pp.c>. This shrinks the perl binary slightly, and should
460 not affect any code outside the core (unless it is relying on the order of side
461 effects when C<chomp> is passed a I<list> of values).
462
463 =item *
464
465 Some of the flags parameters to the uvuni_to_utf8_flags() and
466 utf8n_to_uvuni() have changed.  This is a result of Perl now allowing
467 internal storage and manipulation of code points that are problematic
468 in some situations.  Hence, the default actions for these functions has
469 been complemented to allow these code points.  The new flags are
470 documented in L<perlapi>.  Code that requires the problematic code
471 points to be rejected needs to change to use these flags.  Some flag
472 names are retained for backward source compatibility, though they do
473 nothing, as they are now the default.  However the flags
474 C<UNICODE_ALLOW_FDD0>, C<UNICODE_ALLOW_FFFF>, C<UNICODE_ILLEGAL>, and
475 C<UNICODE_IS_ILLEGAL> have been removed, as they stem from a
476 fundamentally broken model of how the Unicode non-character code points
477 should be handled, which is now described in
478 L<perlunicode/Non-character code points>.  See also L</Selected Bug Fixes>.
479
480 =item *
481
482 Certain shared flags in the C<pmop.op_pmflags> and C<regexp.extflags>
483 structures have been removed.  These are: C<Rxf_Pmf_LOCALE>,
484 C<Rxf_Pmf_UNICODE>, and C<PMf_LOCALE>.  Instead there are encodes and
485 three static in-line functions for accessing the information:
486 C<get_regex_charset()>, C<set_regex_charset()>, and C<get_regex_charset_name()>,
487 which are defined in the places where the orginal flags were.
488
489 =back
490
491 =head1 Selected Bug Fixes
492
493 XXX Important bug fixes in the core language are summarised here.
494 Bug fixes in files in F<ext/> and F<lib/> are best summarised in
495 L</Modules and Pragmata>.
496
497 [ List each fix as a =item entry ]
498
499 =over 4
500
501 =item *
502
503 The handling of Unicode non-characters has changed.
504 Previously they were mostly considered illegal, except that only one of
505 the 66 of them was known about in places.  The Unicode standard
506 considers them legal, but forbids the "open interchange" of them.
507 This is part of the change to allow the internal use of any code point
508 (see L</Core Enhancements>).  Together, these changes resolve
509 L<# 38722|https://rt.perl.org/rt3/Ticket/Display.html?id=38722>,
510 L<# 51918|http://rt.perl.org/rt3/Ticket/Display.html?id=51918>,
511 L<# 51936|http://rt.perl.org/rt3/Ticket/Display.html?id=51936>,
512 L<# 63446|http://rt.perl.org/rt3/Ticket/Display.html?id=63446>
513
514 =back
515
516 =head1 Known Problems
517
518 XXX Descriptions of platform agnostic bugs we know we can't fix go here. Any
519 tests that had to be C<TODO>ed for the release would be noted here, unless
520 they were specific to a particular platform (see below).
521
522 This is a list of some significant unfixed bugs, which are regressions
523 from either 5.XXX.XXX or 5.XXX.XXX.
524
525 [ List each fix as a =item entry ]
526
527 =over 4
528
529 =item *
530
531 XXX
532
533 =back
534
535 =head1 Obituary
536
537 XXX If any significant core contributor has died, we've added a short obituary
538 here.
539
540 =head1 Acknowledgements
541
542 XXX The list of people to thank goes here.
543
544 =head1 Reporting Bugs
545
546 If you find what you think is a bug, you might check the articles
547 recently posted to the comp.lang.perl.misc newsgroup and the perl
548 bug database at http://rt.perl.org/perlbug/ .  There may also be
549 information at http://www.perl.org/ , the Perl Home Page.
550
551 If you believe you have an unreported bug, please run the L<perlbug>
552 program included with your release.  Be sure to trim your bug down
553 to a tiny but sufficient test case.  Your bug report, along with the
554 output of C<perl -V>, will be sent off to perlbug@perl.org to be
555 analysed by the Perl porting team.
556
557 If the bug you are reporting has security implications, which make it
558 inappropriate to send to a publicly archived mailing list, then please send
559 it to perl5-security-report@perl.org. This points to a closed subscription
560 unarchived mailing list, which includes all the core committers, who be able
561 to help assess the impact of issues, figure out a resolution, and help
562 co-ordinate the release of patches to mitigate or fix the problem across all
563 platforms on which Perl is supported. Please only use this address for
564 security issues in the Perl core, not for modules independently
565 distributed on CPAN.
566
567 =head1 SEE ALSO
568
569 The F<Changes> file for an explanation of how to view exhaustive details
570 on what changed.
571
572 The F<INSTALL> file for how to build Perl.
573
574 The F<README> file for general stuff.
575
576 The F<Artistic> and F<Copying> files for copyright information.
577
578 =cut