msgrcv: properly downgrade the receive buffer

If the receive buffer started with SVf_UTF8 on, the received message
SV would stay flagged, corrupting the result.

msgsnd: handle an upgraded MSG parameter correctly

perlfunc/msgsnd: the supplied MSG doesn't have a length field

The length of the message is derived from the length of the MSG
less the size of the type field.

fix UTF-8 handling for semop()

As with semctl(), the UTF-8 flag on the passed in opstring was ignored,
which meant that the upgraded version of the same string would
cause an error.

Just use SvPVbyte().

io/sem.t: eliminate warnings

This eliminates some warnings that semctl() (or other *ctl()) calls
might generate, and some warnings specific to io/sem.t:

- for IPC_STAT and GETALL, the current value of ARG is overwritten
  so making an undefined value warning for it nonsensical, so don't
  use SvPV_force().

- for other calls, ARG is either ignored, or in a behaviour
  introduced in perl 3 (along with the ops), treats the supplied
  value as an integer which is then converted to a pointer.  Rather
  than warning on an undef value which is most likely to be ignored
  we treat the undef as zero without the usual warning.

- always pass a number for SEMNUM in the test code

I didn't try to eliminate warning for non-numeric/undefined SEMNUM,
since while we know it isn't used by SETALL, GETALL, IPC_STAT and
IPC_SET, it may or may not be used by system defined *ctl() operators
such as SEM_INFO and SHM_LOCK on Linux.

fixes #17926

*ctl: test that we throw on a code point above 0xff

These functions expect a packed structure of some point
representing bytes from the structure in memory.

*ctl: test we handle the buffer as bytes

Previously this had the "unicode bug", an upgraded string would
be treated as the encoding of that string, rather than the raw
bytes.

*ctl: ensure the ARG parameter's UTF-8 flag is reset

If the SV supplied as ARG had the SVf_UTF8 flag on it would be left
on, which would effectively corrupt the returned buffer.

Only tested with shmctl(), since the other *ctl() functions only have
more complex structures with indeterminate types that would require
more effort to test.

perl - update usage data to match perlrun

John Karr is now a perl author

fix typo in comp/parser.t

3 similar tests eval a sub with a list of variables, $r is repeated at the
end of the list, but the errors that are being checked have nothing to do with
the repeated variable. This causes a warning enabled.

comp/parser.t count two lines that were being tested to see if they crashed
parser as tests (PASS if the test file is still running after the lines).

bump $Carp::VERSION

fix context of caller call in Carp

Carp's CARP_NOT variable is meant to have package names. caller in list
context returns the calling file and line in addition to the package
name.

Enforce scalar context on the call to caller to fix this.

perlapi: Document UVf, as deprecated

perlapi: Note proper rplcemnt for pad_compname_type

add a brief introduction to the IO SV type

Confine scope of SV_CONST to core

as well as the constants it uses.  This is unused in cpan

Add a usage note about the "l" modifier.

win32: remove support for disabling USE_LARGE_FILES

It was enabled by default on all compilers. I don't think it ever
makes sense to disable it.

Restrict scope/Shorten some very long macro names

The names were intended to force people to not use them outside their
intended scopes.  But by restricting those scopes in the first place, we
don't need such unwieldy names

embed.fnc: Mark reginitcolors as Core only

This is used for internal initialization, and there are no uses on cpan

perlapi: Consolidate Sv{INU]VX-ish entries

Update gitignore files to reflect files in repo

fix splittree.pl ignore to only apply to root

There is a real splittree.pl in NetWare/, which may be copied to the
root. Ignore the file in the root, but not the file in NetWare/.

remove ignore for perlvms.pod, which is a real file now

move ignore for re into its own dists gitignore

move ignore for XS-APItest into dists own gitignore

remove ignore for Test-Harness directory which no longer exists

remove ignore for dl_win32.xs, since it is a real file now

add gitignore exclusions for files in git

There are a number of files excluded using gitignore rules that are
included in the repository. This can lead to confusion if something
other than git tries to read the ignore files.

Add rules to the gitignore files so that these files won't be ignored.

sv.h: Add comments

regcharclass.h: Simplify some expressions

The regen script was improperyly collapsing two-element ranges into two
separate elements, which caused extraneous code to be generated.

Slience compiler warnings for NV, [IU]V compare

These were occurring on FreeBSD smokes.

warning: implicit conversion from 'IV' (aka 'long') to 'double' changes value from 9223372036854775807 to 9223372036854775808 [-Wimplicit-int-float-conversion]

9223372036854775807 is IV_MAX.  What needed to be done here was to use
the NV containing IV_MAX+1, a value that already exists in perl.h

In other instances, simply casting to an NV before doing the comparison
with the NV was what was needed.

This fixes #18328

perlapi: Consolidate sv_vsetpvf-ish entries

perlapi: Consolidate sv_catpv-ish entries

Document dTHXa, dTHXoa

Document isGV_with_GP

Document NUM2PTR

or at least lead people to use something better

Mark despatch_signals as core only

sv.c: Add missing pod markup

The item referred to in a L<> is in perlapi, so should be marked as
internal to the same pod.

perlapi: Consolidate sv_vcatpvf-ish entries

perlapi: Consolidate sv_catpvf-ish entries

perlapi: Consolidate sv_setpvf-ish entries

perlapi: Consolidate sv_setpviv-ish entries

Note down all future releasers for this cycle

Various COPHH macros have a non-const parameter

The pod says these are const, but they won't compile if actually called
with one.

perlapi: Consolidate newSVsv-ish entries

perlapi: Consolidate sv_inc-ish entries

fix perlfaq version in perldelta

Fix documentation grammar

Replace "Frees the all the" with "Frees all the".  The original wording
was introduced in c2217cd33590ef654 and a4395ebabc8655115.

Prepare Module::CoreList for 5.33.5

Bump version to 5.33.5

Create new perldelta for 5.33.5

Post-release tasks for 5.33.4

5.33.4 today

Finalise perldelta for 5.33.4

Update Module::CoreList for 5.33.4

perldelta: Note ongoing perlapi work

Update ExtUtils-MakeMaker to CPAN version 7.56

  [DELTA]

7.56    Thu 19 Nov 19:57:05 GMT 2020

    No changes since v7.55_01

7.55_01 Wed 18 Nov 18:23:19 GMT 2020

    Bug fixes:
    - RT#133762 Explicitly print to STDOUT in EUMM.pm

perldelta: the FAQ was updated in 09e51a95

perldelta updates

Make API some C99 typedef work-arounds

I added these some releases ago, but kept them private.  No untoward
things have happened, so I'm now making them API.

re/fold_grind.pl: Test a couple more code points

These add tests for checking that the revised folding in a future commit
works in some edge cases that previously weren't an issue.

Update Pod-Simple to CPAN version 3.42

embed.fnc: Mark 3 sighandler fcns as Core only

These appear to be for internal use, with no cpan usage found

perlapi: Document memzero

Remove PERLIO_FUNCS_CONST

As the comment said, this was temporary until vtables got to be all
const

Move regcurly to regcomp.c (from inline.h)

This function is called only at compile time; experience has shown that
compile-time operations are not time-critical.  And future commits will
lengthen it, making it not practically inlinable anyway.

perlapi: Consolidate sv_catsv-ish entries

perlapi: Consolidate sv_catpvn-ish entries

Limit the number of lines in IRC notification

irc-notifications: use GITHUB_ENV

GH #18329

::set-env is deprecated use GITHUB_ENV instead

I will release Perl 5.33.4 on Friday

pat_advanced.t: Simplify a test

I made this test to look as much as possible as the original report.
Hugo van der Sanden pointed out that the encodes and decode together
were essentially a no-op; so this commit removes them.

loc_tools.pl: Simplify an expression

Suggested by Graham Knop

pp_split: add TonyC's stack-not-refcounted-suggestion and tests

pp_split: no SWITCHSTACK in @ary = split(...) optimisation

Giovanni Tataranni is now a perl author

fix typo in pod/perlfunc.pod

Revert "op.h: Restrict scope of multiconcat symbols to core"

This reverts commit a5d5855671af6956a8d1a13e419457afdffeb416.

It turns out that CPAN modules are using these values; whether
they should be using them or not, I don't know.

embed.fnc: Add detail to u flag description

perlop: Note tr/// delimiters may be any printables

perlapi: Fix up some MRO documentation

mro_get_private_data() is core only; instead the public is supposed to
use MRO_GET_PRIVATE_DATA(), which we now indicate is documented in
perlmroapi, as well as HvMROMETA()

Update Net-Ping to CPAN version 2.74

  [DELTA]

2.74  2020-09-09 09:21:39 rurban
      Features
      - Add ICMPv6_NI_REPLY support.
      Bugfixes
      - Fix icmp payload offset to match icmpv6 (JimC Leones GH #21)
        Skip the 20 byte header to reliably find the various return types.
        This unifies icmpv6 with icmp better.
      - Fix $SOCKET::VERSION eval (Petr Pavlu, PR #22)
      META Changes
      - Fix and improve the META repository as hashref, license as arrayref
        (Tom Hukins, PR #19)
      - add TEST_REQUIRES
      - sort MANIFEST
      - add windows smokers: appveyor
      Test fixes
      - Improve the tcp test to localhost, when there is no route to localhost
        (freebsd mostly)
      - TODO a flaky 450_service.t on 127.0.0.1 on port 2 on Windows (analog to freebsd, ...)
        (Christian Walde, PR #20)
      - Skip 501_ping_icmpv6.t when icmpv6 cannot be initialized. Mostly due to missing
        icmpv6 support. (GH #15)
      - add more xt tests: t/602_kwalitee.t, t/603_meta.t, t/604_manifest.t

Update Test-Simple to CPAN version 1.302183

  [DELTA]

1.302183  2020-10-21 20:10:36-07:00 America/Los_Angeles

    - avoid closing over scalar in BEGIN block in cmp_ok eval

Update File-Fetch to CPAN version 1.00

  [DELTA]

1.00        Wed Nov 11 12:49:58 2020

* Fixed the mitigations for CVE-2016-1238
* Mentioned https support in CHANGES file

Update ExtUtils-CBuilder to CPAN version 0.280235

  [DELTA]

0.280235 - 2020-11-01

  Fix:

  - Fix compilation on darwin with XCode 12 (-Werror=implicit-function-declaration)
    Thanks to DrHyde for the patch.

PPPort version on CPAN is 3.62

IPC-SysV: Synch with CPAN release 2.09

From Changes:

* Fix GitHub #8: Comparison between signed and unsigned integer
* Merge PR #9: Fix compile warnings with -Wsign-compare
* Merge PR #11: Avoid indirect call syntax

Committer: Additional email address for contributor to keep porting
tests happy

op.h: Restrict scope of multiconcat symbols to core

These are internal only

perlop: Enhance a tr/// example

This more clearly demonstrates that the /s option squeezes based on
the result rather than the source

pod/perlfunc.pod: Correct one typo

For: https://github.com/Perl/perl5/issues/18315; thanks to valtkus.

Update ExtUtils-MakeMaker to CPAN version 7.54

  [DELTA]

7.54    Thu 12 Nov 19:23:18 GMT 2020

    No changes since v7.53_01

7.53_01 Tue 10 Nov 03:34:42 GMT 2020

    Regression fixes:
    - Fixed Darwin cflags override

    Meta fixes:
    - Updated URLs to use https

fetch magic on the first stacked filetest, not the last

fixes #18293

Document PERL_SI

Document TARG, dTARGET

perlapi: Document Perlacos and similar

Fix defns of e.g. U8_MAX/MIN

Actually trying to compile these with Devel::PPPort revealed that there
were combinations of the conditionals which led to some of the symbols
not getting defined.

perlapi: Consolidate sv_setpv-ish entries