This is a live mirror of the Perl 5 development currently hosted at https://github.com/perl/perl5
Proper fix for CvOUTSIDE weak refcounting
[perl5.git] / pod / perlapi.pod
index 7b6ad4a..65b2878 100644 (file)
@@ -17,6 +17,85 @@ unadorned names, but this support may be disabled in a future release.
 
 The listing is alphabetical, case insensitive.
 
+
+=head1 "Gimme" Values
+
+=over 8
+
+=item GIMME
+
+A backward-compatible version of C<GIMME_V> which can only return
+C<G_SCALAR> or C<G_ARRAY>; in a void context, it returns C<G_SCALAR>.
+Deprecated.  Use C<GIMME_V> instead.
+
+       U32     GIMME
+
+=for hackers
+Found in file op.h
+
+=item GIMME_V
+
+The XSUB-writer's equivalent to Perl's C<wantarray>.  Returns C<G_VOID>,
+C<G_SCALAR> or C<G_ARRAY> for void, scalar or list context,
+respectively.
+
+       U32     GIMME_V
+
+=for hackers
+Found in file op.h
+
+=item G_ARRAY
+
+Used to indicate list context.  See C<GIMME_V>, C<GIMME> and
+L<perlcall>.
+
+=for hackers
+Found in file cop.h
+
+=item G_DISCARD
+
+Indicates that arguments returned from a callback should be discarded.  See
+L<perlcall>.
+
+=for hackers
+Found in file cop.h
+
+=item G_EVAL
+
+Used to force a Perl C<eval> wrapper around a callback.  See
+L<perlcall>.
+
+=for hackers
+Found in file cop.h
+
+=item G_NOARGS
+
+Indicates that no arguments are being sent to a callback.  See
+L<perlcall>.
+
+=for hackers
+Found in file cop.h
+
+=item G_SCALAR
+
+Used to indicate scalar context.  See C<GIMME_V>, C<GIMME>, and
+L<perlcall>.
+
+=for hackers
+Found in file cop.h
+
+=item G_VOID
+
+Used to indicate void context.  See C<GIMME_V> and L<perlcall>.
+
+=for hackers
+Found in file cop.h
+
+
+=back
+
+=head1 Array Manipulation Functions
+
 =over 8
 
 =item AvFILL
@@ -182,36 +261,55 @@ must then use C<av_store> to assign values to these new elements.
 =for hackers
 Found in file av.c
 
-=item bytes_from_utf8
+=item get_av
 
-Converts a string C<s> of length C<len> from UTF8 into byte encoding.
-Unlike <utf8_to_bytes> but like C<bytes_to_utf8>, returns a pointer to
-the newly-created string, and updates C<len> to contain the new
-length.  Returns the original string if no conversion occurs, C<len>
-is unchanged. Do nothing if C<is_utf8> points to 0. Sets C<is_utf8> to
-0 if C<s> is converted or contains all 7bit characters.
+Returns the AV of the specified Perl array.  If C<create> is set and the
+Perl variable does not exist then it will be created.  If C<create> is not
+set and the variable does not exist then NULL is returned.
 
-NOTE: this function is experimental and may change or be
-removed without notice.
+NOTE: the perl_ form of this function is deprecated.
 
-       U8*     bytes_from_utf8(U8 *s, STRLEN *len, bool *is_utf8)
+       AV*     get_av(const char* name, I32 create)
 
 =for hackers
-Found in file utf8.c
+Found in file perl.c
 
-=item bytes_to_utf8
+=item newAV
 
-Converts a string C<s> of length C<len> from ASCII into UTF8 encoding.
-Returns a pointer to the newly-created string, and sets C<len> to
-reflect the new length.
+Creates a new AV.  The reference count is set to 1.
 
-NOTE: this function is experimental and may change or be
-removed without notice.
+       AV*     newAV()
+
+=for hackers
+Found in file av.c
+
+=item Nullav
+
+Null AV pointer.
 
-       U8*     bytes_to_utf8(U8 *s, STRLEN *len)
 
 =for hackers
-Found in file utf8.c
+Found in file av.h
+
+=item sortsv
+
+Sort an array. Here is an example:
+
+    sortsv(AvARRAY(av), av_len(av)+1, Perl_sv_cmp_locale);
+
+See lib/sort.pm for details about controlling the sorting algorithm.
+
+       void    sortsv(SV ** array, size_t num_elts, SVCOMPARE_t cmp)
+
+=for hackers
+Found in file pp_sort.c
+
+
+=back
+
+=head1 Callback Functions
+
+=over 8
 
 =item call_argv
 
@@ -259,203 +357,181 @@ NOTE: the perl_ form of this function is deprecated.
 =for hackers
 Found in file perl.c
 
-=item CLASS
+=item ENTER
 
-Variable which is setup by C<xsubpp> to indicate the 
-class name for a C++ XS constructor.  This is always a C<char*>.  See C<THIS>.
+Opening bracket on a callback.  See C<LEAVE> and L<perlcall>.
 
-       char*   CLASS
+               ENTER;
 
 =for hackers
-Found in file XSUB.h
+Found in file scope.h
 
-=item Copy
+=item eval_pv
 
-The XSUB-writer's interface to the C C<memcpy> function.  The C<src> is the
-source, C<dest> is the destination, C<nitems> is the number of items, and C<type> is
-the type.  May fail on overlapping copies.  See also C<Move>.
+Tells Perl to C<eval> the given string and return an SV* result.
 
-       void    Copy(void* src, void* dest, int nitems, type)
+NOTE: the perl_ form of this function is deprecated.
 
-=for hackers
-Found in file handy.h
+       SV*     eval_pv(const char* p, I32 croak_on_error)
 
-=item croak
+=for hackers
+Found in file perl.c
 
-This is the XSUB-writer's interface to Perl's C<die> function.
-Normally use this function the same way you use the C C<printf>
-function.  See C<warn>.
+=item eval_sv
 
-If you want to throw an exception object, assign the object to
-C<$@> and then pass C<Nullch> to croak():
+Tells Perl to C<eval> the string in the SV.
 
-   errsv = get_sv("@", TRUE);
-   sv_setsv(errsv, exception_object);
-   croak(Nullch);
+NOTE: the perl_ form of this function is deprecated.
 
-       void    croak(const char* pat, ...)
+       I32     eval_sv(SV* sv, I32 flags)
 
 =for hackers
-Found in file util.c
+Found in file perl.c
 
-=item CvSTASH
+=item FREETMPS
 
-Returns the stash of the CV.
+Closing bracket for temporaries on a callback.  See C<SAVETMPS> and
+L<perlcall>.
 
-       HV*     CvSTASH(CV* cv)
+               FREETMPS;
 
 =for hackers
-Found in file cv.h
-
-=item cv_const_sv
+Found in file scope.h
 
-If C<cv> is a constant sub eligible for inlining. returns the constant
-value returned by the sub.  Otherwise, returns NULL.
+=item LEAVE
 
-Constant subs can be created with C<newCONSTSUB> or as described in
-L<perlsub/"Constant Functions">.
+Closing bracket on a callback.  See C<ENTER> and L<perlcall>.
 
-       SV*     cv_const_sv(CV* cv)
+               LEAVE;
 
 =for hackers
-Found in file op.c
+Found in file scope.h
 
-=item dMARK
+=item SAVETMPS
 
-Declare a stack marker variable, C<mark>, for the XSUB.  See C<MARK> and
-C<dORIGMARK>.
+Opening bracket for temporaries on a callback.  See C<FREETMPS> and
+L<perlcall>.
 
-               dMARK;
+               SAVETMPS;
 
 =for hackers
-Found in file pp.h
+Found in file scope.h
 
-=item dORIGMARK
 
-Saves the original stack mark for the XSUB.  See C<ORIGMARK>.
+=back
 
-               dORIGMARK;
+=head1 Character classes
 
-=for hackers
-Found in file pp.h
+=over 8
 
-=item dSP
+=item isALNUM
 
-Declares a local copy of perl's stack pointer for the XSUB, available via
-the C<SP> macro.  See C<SP>.
+Returns a boolean indicating whether the C C<char> is an ASCII alphanumeric
+character (including underscore) or digit.
 
-               dSP;
+       bool    isALNUM(char ch)
 
 =for hackers
-Found in file pp.h
+Found in file handy.h
 
-=item dXSARGS
+=item isALPHA
 
-Sets up stack and mark pointers for an XSUB, calling dSP and dMARK.  This
-is usually handled automatically by C<xsubpp>.  Declares the C<items>
-variable to indicate the number of items on the stack.
+Returns a boolean indicating whether the C C<char> is an ASCII alphabetic
+character.
 
-               dXSARGS;
+       bool    isALPHA(char ch)
 
 =for hackers
-Found in file XSUB.h
+Found in file handy.h
 
-=item dXSI32
+=item isDIGIT
 
-Sets up the C<ix> variable for an XSUB which has aliases.  This is usually
-handled automatically by C<xsubpp>.
+Returns a boolean indicating whether the C C<char> is an ASCII
+digit.
 
-               dXSI32;
+       bool    isDIGIT(char ch)
 
 =for hackers
-Found in file XSUB.h
+Found in file handy.h
 
-=item ENTER
+=item isLOWER
 
-Opening bracket on a callback.  See C<LEAVE> and L<perlcall>.
+Returns a boolean indicating whether the C C<char> is a lowercase
+character.
 
-               ENTER;
+       bool    isLOWER(char ch)
 
 =for hackers
-Found in file scope.h
-
-=item eval_pv
+Found in file handy.h
 
-Tells Perl to C<eval> the given string and return an SV* result.
+=item isSPACE
 
-NOTE: the perl_ form of this function is deprecated.
+Returns a boolean indicating whether the C C<char> is whitespace.
 
-       SV*     eval_pv(const char* p, I32 croak_on_error)
+       bool    isSPACE(char ch)
 
 =for hackers
-Found in file perl.c
+Found in file handy.h
 
-=item eval_sv
+=item isUPPER
 
-Tells Perl to C<eval> the string in the SV.
+Returns a boolean indicating whether the C C<char> is an uppercase
+character.
 
-NOTE: the perl_ form of this function is deprecated.
-
-       I32     eval_sv(SV* sv, I32 flags)
+       bool    isUPPER(char ch)
 
 =for hackers
-Found in file perl.c
+Found in file handy.h
 
-=item EXTEND
+=item toLOWER
 
-Used to extend the argument stack for an XSUB's return values. Once
-used, guarantees that there is room for at least C<nitems> to be pushed
-onto the stack.
+Converts the specified character to lowercase.
 
-       void    EXTEND(SP, int nitems)
+       char    toLOWER(char ch)
 
 =for hackers
-Found in file pp.h
+Found in file handy.h
 
-=item fbm_compile
+=item toUPPER
 
-Analyses the string in order to make fast searches on it using fbm_instr()
--- the Boyer-Moore algorithm.
+Converts the specified character to uppercase.
 
-       void    fbm_compile(SV* sv, U32 flags)
+       char    toUPPER(char ch)
 
 =for hackers
-Found in file util.c
+Found in file handy.h
 
-=item fbm_instr
 
-Returns the location of the SV in the string delimited by C<str> and
-C<strend>.  It returns C<Nullch> if the string can't be found.  The C<sv>
-does not have to be fbm_compiled, but the search will not be as fast
-then.
+=back
 
-       char*   fbm_instr(unsigned char* big, unsigned char* bigend, SV* littlesv, U32 flags)
+=head1 Cloning an interpreter
 
-=for hackers
-Found in file util.c
+=over 8
 
-=item FREETMPS
+=item perl_clone
 
-Closing bracket for temporaries on a callback.  See C<SAVETMPS> and
-L<perlcall>.
+Create and return a new interpreter by cloning the current one.
 
-               FREETMPS;
+       PerlInterpreter*        perl_clone(PerlInterpreter* interp, UV flags)
 
 =for hackers
-Found in file scope.h
+Found in file sv.c
 
-=item get_av
 
-Returns the AV of the specified Perl array.  If C<create> is set and the
-Perl variable does not exist then it will be created.  If C<create> is not
-set and the variable does not exist then NULL is returned.
+=back
 
-NOTE: the perl_ form of this function is deprecated.
+=head1 CV Manipulation Functions
 
-       AV*     get_av(const char* name, I32 create)
+=over 8
+
+=item CvSTASH
+
+Returns the stash of the CV.
+
+       HV*     CvSTASH(CV* cv)
 
 =for hackers
-Found in file perl.c
+Found in file cv.h
 
 =item get_cv
 
@@ -471,53 +547,219 @@ NOTE: the perl_ form of this function is deprecated.
 =for hackers
 Found in file perl.c
 
-=item get_hv
+=item Nullcv
 
-Returns the HV of the specified Perl hash.  If C<create> is set and the
-Perl variable does not exist then it will be created.  If C<create> is not
-set and the variable does not exist then NULL is returned.
+Null CV pointer.
 
-NOTE: the perl_ form of this function is deprecated.
 
-       HV*     get_hv(const char* name, I32 create)
+=for hackers
+Found in file cv.h
+
+
+=back
+
+=head1 Embedding Functions
+
+=over 8
+
+=item cv_undef
+
+Clear out all the active components of a CV. This can happen either
+by an explicit C<undef &foo>, or by the reference count going to zero.
+In the former case, we keep the CvOUTSIDE pointer, so that any anonymous
+children can still follow the full lexical scope chain.
+
+       void    cv_undef(CV* cv)
+
+=for hackers
+Found in file op.c
+
+=item load_module
+
+Loads the module whose name is pointed to by the string part of name.
+Note that the actual module name, not its filename, should be given.
+Eg, "Foo::Bar" instead of "Foo/Bar.pm".  flags can be any of
+PERL_LOADMOD_DENY, PERL_LOADMOD_NOIMPORT, or PERL_LOADMOD_IMPORT_OPS
+(or 0 for no flags). ver, if specified, provides version semantics
+similar to C<use Foo::Bar VERSION>.  The optional trailing SV*
+arguments can be used to specify arguments to the module's import()
+method, similar to C<use Foo::Bar VERSION LIST>.
+
+       void    load_module(U32 flags, SV* name, SV* ver, ...)
+
+=for hackers
+Found in file op.c
+
+=item nothreadhook
+
+Stub that provides thread hook for perl_destruct when there are
+no threads.
+
+       int     nothreadhook()
 
 =for hackers
 Found in file perl.c
 
-=item get_sv
+=item perl_alloc
 
-Returns the SV of the specified Perl scalar.  If C<create> is set and the
-Perl variable does not exist then it will be created.  If C<create> is not
-set and the variable does not exist then NULL is returned.
+Allocates a new Perl interpreter.  See L<perlembed>.
+
+       PerlInterpreter*        perl_alloc()
+
+=for hackers
+Found in file perl.c
+
+=item perl_construct
+
+Initializes a new Perl interpreter.  See L<perlembed>.
+
+       void    perl_construct(PerlInterpreter* interp)
+
+=for hackers
+Found in file perl.c
+
+=item perl_destruct
+
+Shuts down a Perl interpreter.  See L<perlembed>.
+
+       int     perl_destruct(PerlInterpreter* interp)
+
+=for hackers
+Found in file perl.c
+
+=item perl_free
+
+Releases a Perl interpreter.  See L<perlembed>.
+
+       void    perl_free(PerlInterpreter* interp)
+
+=for hackers
+Found in file perl.c
+
+=item perl_parse
+
+Tells a Perl interpreter to parse a Perl script.  See L<perlembed>.
+
+       int     perl_parse(PerlInterpreter* interp, XSINIT_t xsinit, int argc, char** argv, char** env)
+
+=for hackers
+Found in file perl.c
+
+=item perl_run
+
+Tells a Perl interpreter to run.  See L<perlembed>.
+
+       int     perl_run(PerlInterpreter* interp)
+
+=for hackers
+Found in file perl.c
+
+=item require_pv
+
+Tells Perl to C<require> the file named by the string argument.  It is
+analogous to the Perl code C<eval "require '$file'">.  It's even
+implemented that way; consider using Perl_load_module instead.
 
 NOTE: the perl_ form of this function is deprecated.
 
-       SV*     get_sv(const char* name, I32 create)
+       void    require_pv(const char* pv)
 
 =for hackers
 Found in file perl.c
 
-=item GIMME
 
-A backward-compatible version of C<GIMME_V> which can only return
-C<G_SCALAR> or C<G_ARRAY>; in a void context, it returns C<G_SCALAR>.
-Deprecated.  Use C<GIMME_V> instead.
+=back
 
-       U32     GIMME
+=head1 Functions in file pp_pack.c
+
+
+=over 8
+
+=item pack_cat
+
+The engine implementing pack() Perl function.
+
+       void    pack_cat(SV *cat, char *pat, char *patend, SV **beglist, SV **endlist, SV ***next_in_list, U32 flags)
 
 =for hackers
-Found in file op.h
+Found in file pp_pack.c
 
-=item GIMME_V
+=item unpack_str
 
-The XSUB-writer's equivalent to Perl's C<wantarray>.  Returns C<G_VOID>,
-C<G_SCALAR> or C<G_ARRAY> for void, scalar or list context,
-respectively.
+The engine implementing unpack() Perl function.
 
-       U32     GIMME_V
+       I32     unpack_str(char *pat, char *patend, char *s, char *strbeg, char *strend, char **new_s, I32 ocnt, U32 flags)
 
 =for hackers
-Found in file op.h
+Found in file pp_pack.c
+
+
+=back
+
+=head1 Global Variables
+
+=over 8
+
+=item PL_modglobal
+
+C<PL_modglobal> is a general purpose, interpreter global HV for use by
+extensions that need to keep information on a per-interpreter basis.
+In a pinch, it can also be used as a symbol table for extensions
+to share data among each other.  It is a good idea to use keys
+prefixed by the package name of the extension that owns the data.
+
+       HV*     PL_modglobal
+
+=for hackers
+Found in file intrpvar.h
+
+=item PL_na
+
+A convenience variable which is typically used with C<SvPV> when one
+doesn't care about the length of the string.  It is usually more efficient
+to either declare a local variable and use that instead or to use the
+C<SvPV_nolen> macro.
+
+       STRLEN  PL_na
+
+=for hackers
+Found in file thrdvar.h
+
+=item PL_sv_no
+
+This is the C<false> SV.  See C<PL_sv_yes>.  Always refer to this as
+C<&PL_sv_no>.
+
+       SV      PL_sv_no
+
+=for hackers
+Found in file intrpvar.h
+
+=item PL_sv_undef
+
+This is the C<undef> SV.  Always refer to this as C<&PL_sv_undef>.
+
+       SV      PL_sv_undef
+
+=for hackers
+Found in file intrpvar.h
+
+=item PL_sv_yes
+
+This is the C<true> SV.  See C<PL_sv_no>.  Always refer to this as
+C<&PL_sv_yes>.
+
+       SV      PL_sv_yes
+
+=for hackers
+Found in file intrpvar.h
+
+
+=back
+
+=head1 GV Functions
+
+=over 8
 
 =item GvSV
 
@@ -532,7 +774,7 @@ Found in file gv.h
 
 Returns the glob with the given C<name> and a defined subroutine or
 C<NULL>.  The glob lives in the given C<stash>, or in the stashes
-accessible via @ISA and @UNIVERSAL.
+accessible via @ISA and UNIVERSAL::.
 
 The argument C<level> should be either 0 or -1.  If C<level==0>, as a
 side-effect creates a glob with the given C<name> in the given C<stash>
@@ -588,6 +830,20 @@ C<call_sv> apply equally to these functions.
 =for hackers
 Found in file gv.c
 
+=item gv_fetchmeth_autoload
+
+Same as gv_fetchmeth(), but looks for autoloaded subroutines too.
+Returns a glob for the subroutine.
+
+For an autoloaded subroutine without a GV, will create a GV even
+if C<level < 0>.  For an autoloaded subroutine without a stub, GvCV()
+of the result may be zero.
+
+       GV*     gv_fetchmeth_autoload(HV* stash, const char* name, STRLEN len, I32 level)
+
+=for hackers
+Found in file gv.c
+
 =item gv_stashpv
 
 Returns a pointer to the stash for a specified package.  C<name> should
@@ -610,61 +866,55 @@ valid UTF-8 string.  See C<gv_stashpv>.
 =for hackers
 Found in file gv.c
 
-=item G_ARRAY
 
-Used to indicate list context.  See C<GIMME_V>, C<GIMME> and
-L<perlcall>.
+=back
 
-=for hackers
-Found in file cop.h
+=head1 Handy Values
 
-=item G_DISCARD
+=over 8
 
-Indicates that arguments returned from a callback should be discarded.  See
-L<perlcall>.
+=item HEf_SVKEY
 
-=for hackers
-Found in file cop.h
+This flag, used in the length slot of hash entries and magic structures,
+specifies the structure contains an C<SV*> pointer where a C<char*> pointer
+is to be expected. (For information only--not to be used).
 
-=item G_EVAL
 
-Used to force a Perl C<eval> wrapper around a callback.  See
-L<perlcall>.
+=for hackers
+Found in file hv.h
+
+=item Nullch
 
+Null character pointer.
 =for hackers
-Found in file cop.h
+Found in file handy.h
 
-=item G_NOARGS
+=item Nullsv
 
-Indicates that no arguments are being sent to a callback.  See
-L<perlcall>.
+Null SV pointer.
 
 =for hackers
-Found in file cop.h
+Found in file handy.h
 
-=item G_SCALAR
 
-Used to indicate scalar context.  See C<GIMME_V>, C<GIMME>, and
-L<perlcall>.
+=back
 
-=for hackers
-Found in file cop.h
+=head1 Hash Manipulation Functions
 
-=item G_VOID
+=over 8
 
-Used to indicate void context.  See C<GIMME_V> and L<perlcall>.
+=item get_hv
 
-=for hackers
-Found in file cop.h
+Returns the HV of the specified Perl hash.  If C<create> is set and the
+Perl variable does not exist then it will be created.  If C<create> is not
+set and the variable does not exist then NULL is returned.
 
-=item HEf_SVKEY
+NOTE: the perl_ form of this function is deprecated.
 
-This flag, used in the length slot of hash entries and magic structures,
-specifies the structure contains a C<SV*> pointer where a C<char*> pointer
-is to be expected. (For information only--not to be used).
+       HV*     get_hv(const char* name, I32 create)
 
 =for hackers
-Found in file hv.h
+Found in file perl.c
 
 =item HeHASH
 
@@ -824,7 +1074,7 @@ Found in file hv.c
 Returns the SV which corresponds to the specified key in the hash.  The
 C<klen> is the length of the key.  If C<lval> is set then the fetch will be
 part of a store.  Check that the return value is non-null before
-dereferencing it to a C<SV*>.
+dereferencing it to an C<SV*>.
 
 See L<perlguts/"Understanding the Magic of Tied Hashes and Arrays"> for more
 information on how to use this function on tied hashes.
@@ -862,6 +1112,7 @@ NOTE: Before version 5.004_65, C<hv_iterinit> used to return the number of
 hash buckets that happen to be in use.  If you still need that esoteric
 value, you can get it through the macro C<HvFILL(tb)>.
 
+
        I32     hv_iterinit(HV* tb)
 
 =for hackers
@@ -892,6 +1143,14 @@ Found in file hv.c
 
 Returns entries from a hash iterator.  See C<hv_iterinit>.
 
+You may call C<hv_delete> or C<hv_delete_ent> on the hash entry that the
+iterator currently points to, without losing your place or invalidating your
+iterator.  Note that in this case the current entry is deleted from the hash
+with your iterator holding the last reference to it.  Your iterator is flagged
+to free the entry on the next call to C<hv_iternext>, so you must not discard
+your iterator immediately else the entry will leak - call C<hv_iternext> to
+trigger the resource deallocation.
+
        HE*     hv_iternext(HV* tb)
 
 =for hackers
@@ -907,6 +1166,26 @@ operation.
 =for hackers
 Found in file hv.c
 
+=item hv_iternext_flags
+
+Returns entries from a hash iterator.  See C<hv_iterinit> and C<hv_iternext>.
+The C<flags> value will normally be zero; if HV_ITERNEXT_WANTPLACEHOLDERS is
+set the placeholders keys (for restricted hashes) will be returned in addition
+to normal keys. By default placeholders are automatically skipped over.
+Currently a placeholder is implemented with a value that is literally
+<&Perl_sv_undef> (a regular C<undef> value is a normal read-write SV for which
+C<!SvOK> is false). Note that the implementation of placeholders and
+restricted hashes may change, and the implementation currently is
+insufficiently abstracted for any change to be tidy.
+
+NOTE: this function is experimental and may change or be
+removed without notice.
+
+       HE*     hv_iternext_flags(HV* tb, I32 flags)
+
+=for hackers
+Found in file hv.c
+
 =item hv_iterval
 
 Returns the value from the current position of the hash iterator.  See
@@ -952,7 +1231,7 @@ parameter is the precomputed hash value; if it is zero then Perl will
 compute it.  The return value is the new hash entry so created.  It will be
 NULL if the operation failed or if the value did not need to be actually
 stored within the hash (as in the case of tied hashes).  Otherwise the
-contents of the return value can be accessed using the C<He???> macros
+contents of the return value can be accessed using the C<He?> macros
 described here.  Note that the caller is responsible for suitably
 incrementing the reference count of C<val> before the call, and
 decrementing it if the function returned NULL.
@@ -974,207 +1253,197 @@ Undefines the hash.
 =for hackers
 Found in file hv.c
 
-=item isALNUM
+=item newHV
 
-Returns a boolean indicating whether the C C<char> is an ASCII alphanumeric
-character (including underscore) or digit.
+Creates a new HV.  The reference count is set to 1.
 
-       bool    isALNUM(char ch)
+       HV*     newHV()
 
 =for hackers
-Found in file handy.h
+Found in file hv.c
 
-=item isALPHA
+=item Nullhv
 
-Returns a boolean indicating whether the C C<char> is an ASCII alphabetic
-character.
+Null HV pointer.
 
-       bool    isALPHA(char ch)
 
 =for hackers
-Found in file handy.h
+Found in file hv.h
 
-=item isDIGIT
 
-Returns a boolean indicating whether the C C<char> is an ASCII
-digit.
+=back
 
-       bool    isDIGIT(char ch)
+=head1 Magical Functions
 
-=for hackers
-Found in file handy.h
+=over 8
 
-=item isLOWER
+=item mg_clear
 
-Returns a boolean indicating whether the C C<char> is a lowercase
-character.
+Clear something magical that the SV represents.  See C<sv_magic>.
 
-       bool    isLOWER(char ch)
+       int     mg_clear(SV* sv)
 
 =for hackers
-Found in file handy.h
+Found in file mg.c
 
-=item isSPACE
+=item mg_copy
 
-Returns a boolean indicating whether the C C<char> is whitespace.
+Copies the magic from one SV to another.  See C<sv_magic>.
 
-       bool    isSPACE(char ch)
+       int     mg_copy(SV* sv, SV* nsv, const char* key, I32 klen)
 
 =for hackers
-Found in file handy.h
+Found in file mg.c
 
-=item isUPPER
+=item mg_find
 
-Returns a boolean indicating whether the C C<char> is an uppercase
-character.
+Finds the magic pointer for type matching the SV.  See C<sv_magic>.
 
-       bool    isUPPER(char ch)
+       MAGIC*  mg_find(SV* sv, int type)
 
 =for hackers
-Found in file handy.h
+Found in file mg.c
 
-=item is_utf8_char
+=item mg_free
 
-Tests if some arbitrary number of bytes begins in a valid UTF-8
-character.  Note that an ASCII character is a valid UTF-8 character.
-The actual number of bytes in the UTF-8 character will be returned if
-it is valid, otherwise 0.
-       STRLEN  is_utf8_char(U8 *p)
+Free any magic storage used by the SV.  See C<sv_magic>.
+
+       int     mg_free(SV* sv)
 
 =for hackers
-Found in file utf8.c
+Found in file mg.c
 
-=item is_utf8_string
+=item mg_get
 
-Returns true if first C<len> bytes of the given string form a valid UTF8
-string, false otherwise.  Note that 'a valid UTF8 string' does not mean
-'a string that contains UTF8' because a valid ASCII string is a valid
-UTF8 string.
+Do magic after a value is retrieved from the SV.  See C<sv_magic>.
 
-       bool    is_utf8_string(U8 *s, STRLEN len)
+       int     mg_get(SV* sv)
 
 =for hackers
-Found in file utf8.c
+Found in file mg.c
 
-=item items
+=item mg_length
 
-Variable which is setup by C<xsubpp> to indicate the number of 
-items on the stack.  See L<perlxs/"Variable-length Parameter Lists">.
+Report on the SV's length.  See C<sv_magic>.
 
-       I32     items
+       U32     mg_length(SV* sv)
 
 =for hackers
-Found in file XSUB.h
+Found in file mg.c
 
-=item ix
+=item mg_magical
 
-Variable which is setup by C<xsubpp> to indicate which of an 
-XSUB's aliases was used to invoke it.  See L<perlxs/"The ALIAS: Keyword">.
+Turns on the magical status of an SV.  See C<sv_magic>.
 
-       I32     ix
+       void    mg_magical(SV* sv)
 
 =for hackers
-Found in file XSUB.h
+Found in file mg.c
 
-=item LEAVE
+=item mg_set
 
-Closing bracket on a callback.  See C<ENTER> and L<perlcall>.
+Do magic after a value is assigned to the SV.  See C<sv_magic>.
 
-               LEAVE;
+       int     mg_set(SV* sv)
 
 =for hackers
-Found in file scope.h
+Found in file mg.c
 
-=item looks_like_number
+=item SvGETMAGIC
 
-Test if an the content of an SV looks like a number (or is a
-number). C<Inf> and C<Infinity> are treated as numbers (so will not
-issue a non-numeric warning), even if your atof() doesn't grok them.
+Invokes C<mg_get> on an SV if it has 'get' magic.  This macro evaluates its
+argument more than once.
 
-       I32     looks_like_number(SV* sv)
+       void    SvGETMAGIC(SV* sv)
 
 =for hackers
-Found in file sv.c
+Found in file sv.h
 
-=item MARK
+=item SvLOCK
 
-Stack marker variable for the XSUB.  See C<dMARK>.
+Arranges for a mutual exclusion lock to be obtained on sv if a suitable module
+has been loaded.
+
+       void    SvLOCK(SV* sv)
 
 =for hackers
-Found in file pp.h
+Found in file sv.h
 
-=item mg_clear
+=item SvSETMAGIC
 
-Clear something magical that the SV represents.  See C<sv_magic>.
+Invokes C<mg_set> on an SV if it has 'set' magic.  This macro evaluates its
+argument more than once.
 
-       int     mg_clear(SV* sv)
+       void    SvSETMAGIC(SV* sv)
 
 =for hackers
-Found in file mg.c
+Found in file sv.h
 
-=item mg_copy
+=item SvSetMagicSV
 
-Copies the magic from one SV to another.  See C<sv_magic>.
+Like C<SvSetSV>, but does any set magic required afterwards.
 
-       int     mg_copy(SV* sv, SV* nsv, const char* key, I32 klen)
+       void    SvSetMagicSV(SV* dsb, SV* ssv)
 
 =for hackers
-Found in file mg.c
+Found in file sv.h
 
-=item mg_find
+=item SvSetMagicSV_nosteal
 
-Finds the magic pointer for type matching the SV.  See C<sv_magic>.
+Like C<SvSetMagicSV>, but does any set magic required afterwards.
 
-       MAGIC*  mg_find(SV* sv, int type)
+       void    SvSetMagicSV_nosteal(SV* dsv, SV* ssv)
 
 =for hackers
-Found in file mg.c
+Found in file sv.h
 
-=item mg_free
+=item SvSetSV
 
-Free any magic storage used by the SV.  See C<sv_magic>.
+Calls C<sv_setsv> if dsv is not the same as ssv.  May evaluate arguments
+more than once.
 
-       int     mg_free(SV* sv)
+       void    SvSetSV(SV* dsb, SV* ssv)
 
 =for hackers
-Found in file mg.c
+Found in file sv.h
 
-=item mg_get
+=item SvSetSV_nosteal
 
-Do magic after a value is retrieved from the SV.  See C<sv_magic>.
+Calls a non-destructive version of C<sv_setsv> if dsv is not the same as
+ssv. May evaluate arguments more than once.
 
-       int     mg_get(SV* sv)
+       void    SvSetSV_nosteal(SV* dsv, SV* ssv)
 
 =for hackers
-Found in file mg.c
+Found in file sv.h
 
-=item mg_length
+=item SvSHARE
 
-Report on the SV's length.  See C<sv_magic>.
+Arranges for sv to be shared between threads if a suitable module
+has been loaded.
 
-       U32     mg_length(SV* sv)
+       void    SvSHARE(SV* sv)
 
 =for hackers
-Found in file mg.c
+Found in file sv.h
 
-=item mg_magical
 
-Turns on the magical status of an SV.  See C<sv_magic>.
+=back
 
-       void    mg_magical(SV* sv)
+=head1 Memory Management
 
-=for hackers
-Found in file mg.c
+=over 8
 
-=item mg_set
+=item Copy
 
-Do magic after a value is assigned to the SV.  See C<sv_magic>.
+The XSUB-writer's interface to the C C<memcpy> function.  The C<src> is the
+source, C<dest> is the destination, C<nitems> is the number of items, and C<type> is
+the type.  May fail on overlapping copies.  See also C<Move>.
 
-       int     mg_set(SV* sv)
+       void    Copy(void* src, void* dest, int nitems, type)
 
 =for hackers
-Found in file mg.c
+Found in file handy.h
 
 =item Move
 
@@ -1196,15 +1465,6 @@ The XSUB-writer's interface to the C C<malloc> function.
 =for hackers
 Found in file handy.h
 
-=item newAV
-
-Creates a new AV.  The reference count is set to 1.
-
-       AV*     newAV()
-
-=for hackers
-Found in file av.c
-
 =item Newc
 
 The XSUB-writer's interface to the C C<malloc> function, with
@@ -1215,367 +1475,561 @@ cast.
 =for hackers
 Found in file handy.h
 
-=item newCONSTSUB
+=item NEWSV
 
-Creates a constant sub equivalent to Perl C<sub FOO () { 123 }> which is
-eligible for inlining at compile-time.
+Creates a new SV.  A non-zero C<len> parameter indicates the number of
+bytes of preallocated string space the SV should have.  An extra byte for a
+tailing NUL is also reserved.  (SvPOK is not set for the SV even if string
+space is allocated.)  The reference count for the new SV is set to 1.
+C<id> is an integer id between 0 and 1299 (used to identify leaks).
 
-       CV*     newCONSTSUB(HV* stash, char* name, SV* sv)
+
+       SV*     NEWSV(int id, STRLEN len)
 
 =for hackers
-Found in file op.c
+Found in file handy.h
 
-=item newHV
+=item Newz
 
-Creates a new HV.  The reference count is set to 1.
+The XSUB-writer's interface to the C C<malloc> function.  The allocated
+memory is zeroed with C<memzero>.
 
-       HV*     newHV()
+       void    Newz(int id, void* ptr, int nitems, type)
 
 =for hackers
-Found in file hv.c
+Found in file handy.h
 
-=item newRV_inc
+=item Poison
 
-Creates an RV wrapper for an SV.  The reference count for the original SV is
-incremented.
+Fill up memory with a pattern (byte 0xAB over and over again) that
+hopefully catches attempts to access uninitialized memory.
 
-       SV*     newRV_inc(SV* sv)
+       void    Poison(void* dest, int nitems, type)
 
 =for hackers
-Found in file sv.h
+Found in file handy.h
 
-=item newRV_noinc
+=item Renew
 
-Creates an RV wrapper for an SV.  The reference count for the original
-SV is B<not> incremented.
+The XSUB-writer's interface to the C C<realloc> function.
 
-       SV*     newRV_noinc(SV *sv)
+       void    Renew(void* ptr, int nitems, type)
 
 =for hackers
-Found in file sv.c
+Found in file handy.h
 
-=item NEWSV
+=item Renewc
 
-Creates a new SV.  A non-zero C<len> parameter indicates the number of
-bytes of preallocated string space the SV should have.  An extra byte for a
-tailing NUL is also reserved.  (SvPOK is not set for the SV even if string
-space is allocated.)  The reference count for the new SV is set to 1.
-C<id> is an integer id between 0 and 1299 (used to identify leaks).
+The XSUB-writer's interface to the C C<realloc> function, with
+cast.
 
-       SV*     NEWSV(int id, STRLEN len)
+       void    Renewc(void* ptr, int nitems, type, cast)
 
 =for hackers
 Found in file handy.h
 
-=item newSViv
+=item Safefree
 
-Creates a new SV and copies an integer into it.  The reference count for the
-SV is set to 1.
+The XSUB-writer's interface to the C C<free> function.
 
-       SV*     newSViv(IV i)
+       void    Safefree(void* ptr)
 
 =for hackers
-Found in file sv.c
+Found in file handy.h
 
-=item newSVnv
+=item savepv
 
-Creates a new SV and copies a floating point value into it.
-The reference count for the SV is set to 1.
+Perl's version of C<strdup()>. Returns a pointer to a newly allocated
+string which is a duplicate of C<pv>. The size of the string is
+determined by C<strlen()>. The memory allocated for the new string can
+be freed with the C<Safefree()> function.
 
-       SV*     newSVnv(NV n)
+       char*   savepv(const char* pv)
 
 =for hackers
-Found in file sv.c
+Found in file util.c
 
-=item newSVpv
+=item savepvn
 
-Creates a new SV and copies a string into it.  The reference count for the
-SV is set to 1.  If C<len> is zero, Perl will compute the length using
-strlen().  For efficiency, consider using C<newSVpvn> instead.
+Perl's version of what C<strndup()> would be if it existed. Returns a
+pointer to a newly allocated string which is a duplicate of the first
+C<len> bytes from C<pv>. The memory allocated for the new string can be
+freed with the C<Safefree()> function.
 
-       SV*     newSVpv(const char* s, STRLEN len)
+       char*   savepvn(const char* pv, I32 len)
 
 =for hackers
-Found in file sv.c
+Found in file util.c
 
-=item newSVpvf
+=item savesharedpv
 
-Creates a new SV an initialize it with the string formatted like
-C<sprintf>.
+A version of C<savepv()> which allocates the duplicate string in memory
+which is shared between threads.
 
-       SV*     newSVpvf(const char* pat, ...)
+       char*   savesharedpv(const char* pv)
 
 =for hackers
-Found in file sv.c
+Found in file util.c
 
-=item newSVpvn
+=item StructCopy
 
-Creates a new SV and copies a string into it.  The reference count for the
-SV is set to 1.  Note that if C<len> is zero, Perl will create a zero length
-string.  You are responsible for ensuring that the source string is at least
-C<len> bytes long.
+This is an architecture-independent macro to copy one structure to another.
 
-       SV*     newSVpvn(const char* s, STRLEN len)
+       void    StructCopy(type src, type dest, type)
 
 =for hackers
-Found in file sv.c
+Found in file handy.h
 
-=item newSVpvn_share
+=item Zero
 
-Creates a new SV and populates it with a string from
-the string table. Turns on READONLY and FAKE.
-The idea here is that as string table is used for shared hash
-keys these strings will have SvPVX == HeKEY and hash lookup
-will avoid string compare.
+The XSUB-writer's interface to the C C<memzero> function.  The C<dest> is the
+destination, C<nitems> is the number of items, and C<type> is the type.
 
-       SV*     newSVpvn_share(const char* s, I32 len, U32 hash)
+       void    Zero(void* dest, int nitems, type)
 
 =for hackers
-Found in file sv.c
+Found in file handy.h
 
-=item newSVrv
 
-Creates a new SV for the RV, C<rv>, to point to.  If C<rv> is not an RV then
-it will be upgraded to one.  If C<classname> is non-null then the new SV will
-be blessed in the specified package.  The new SV is returned and its
-reference count is 1.
+=back
 
-       SV*     newSVrv(SV* rv, const char* classname)
+=head1 Miscellaneous Functions
 
-=for hackers
-Found in file sv.c
+=over 8
 
-=item newSVsv
+=item fbm_compile
 
-Creates a new SV which is an exact duplicate of the original SV.
+Analyses the string in order to make fast searches on it using fbm_instr()
+-- the Boyer-Moore algorithm.
 
-       SV*     newSVsv(SV* old)
+       void    fbm_compile(SV* sv, U32 flags)
 
 =for hackers
-Found in file sv.c
+Found in file util.c
 
-=item newSVuv
+=item fbm_instr
 
-Creates a new SV and copies an unsigned integer into it.
-The reference count for the SV is set to 1.
+Returns the location of the SV in the string delimited by C<str> and
+C<strend>.  It returns C<Nullch> if the string can't be found.  The C<sv>
+does not have to be fbm_compiled, but the search will not be as fast
+then.
 
-       SV*     newSVuv(UV u)
+       char*   fbm_instr(unsigned char* big, unsigned char* bigend, SV* littlesv, U32 flags)
 
 =for hackers
-Found in file sv.c
-
-=item newXS
-
-Used by C<xsubpp> to hook up XSUBs as Perl subs.
+Found in file util.c
 
-=for hackers
-Found in file op.c
+=item form
 
-=item newXSproto
+Takes a sprintf-style format pattern and conventional
+(non-SV) arguments and returns the formatted string.
 
-Used by C<xsubpp> to hook up XSUBs as Perl subs.  Adds Perl prototypes to
-the subs.
+    (char *) Perl_form(pTHX_ const char* pat, ...)
 
-=for hackers
-Found in file XSUB.h
+can be used any place a string (char *) is required:
 
-=item Newz
+    char * s = Perl_form("%d.%d",major,minor);
 
-The XSUB-writer's interface to the C C<malloc> function.  The allocated
-memory is zeroed with C<memzero>.
+Uses a single private buffer so if you want to format several strings you
+must explicitly copy the earlier strings away (and free the copies when you
+are done).
 
-       void    Newz(int id, void* ptr, int nitems, type)
+       char*   form(const char* pat, ...)
 
 =for hackers
-Found in file handy.h
+Found in file util.c
 
-=item Nullav
+=item getcwd_sv
 
-Null AV pointer.
+Fill the sv with current working directory
+
+       int     getcwd_sv(SV* sv)
 
 =for hackers
-Found in file av.h
+Found in file util.c
 
-=item Nullch
+=item strEQ
 
-Null character pointer.
+Test two strings to see if they are equal.  Returns true or false.
+
+       bool    strEQ(char* s1, char* s2)
 
 =for hackers
 Found in file handy.h
 
-=item Nullcv
-
-Null CV pointer.
-
-=for hackers
-Found in file cv.h
+=item strGE
 
-=item Nullhv
+Test two strings to see if the first, C<s1>, is greater than or equal to
+the second, C<s2>.  Returns true or false.
 
-Null HV pointer.
+       bool    strGE(char* s1, char* s2)
 
 =for hackers
-Found in file hv.h
+Found in file handy.h
 
-=item Nullsv
+=item strGT
 
-Null SV pointer.
+Test two strings to see if the first, C<s1>, is greater than the second,
+C<s2>.  Returns true or false.
+
+       bool    strGT(char* s1, char* s2)
 
 =for hackers
 Found in file handy.h
 
-=item ORIGMARK
+=item strLE
 
-The original stack mark for the XSUB.  See C<dORIGMARK>.
+Test two strings to see if the first, C<s1>, is less than or equal to the
+second, C<s2>.  Returns true or false.
+
+       bool    strLE(char* s1, char* s2)
 
 =for hackers
-Found in file pp.h
+Found in file handy.h
 
-=item perl_alloc
+=item strLT
 
-Allocates a new Perl interpreter.  See L<perlembed>.
+Test two strings to see if the first, C<s1>, is less than the second,
+C<s2>.  Returns true or false.
 
-       PerlInterpreter*        perl_alloc()
+       bool    strLT(char* s1, char* s2)
 
 =for hackers
-Found in file perl.c
+Found in file handy.h
 
-=item perl_construct
+=item strNE
 
-Initializes a new Perl interpreter.  See L<perlembed>.
+Test two strings to see if they are different.  Returns true or
+false.
 
-       void    perl_construct(PerlInterpreter* interp)
+       bool    strNE(char* s1, char* s2)
 
 =for hackers
-Found in file perl.c
+Found in file handy.h
 
-=item perl_destruct
+=item strnEQ
 
-Shuts down a Perl interpreter.  See L<perlembed>.
+Test two strings to see if they are equal.  The C<len> parameter indicates
+the number of bytes to compare.  Returns true or false. (A wrapper for
+C<strncmp>).
 
-       void    perl_destruct(PerlInterpreter* interp)
+       bool    strnEQ(char* s1, char* s2, STRLEN len)
 
 =for hackers
-Found in file perl.c
+Found in file handy.h
 
-=item perl_free
+=item strnNE
 
-Releases a Perl interpreter.  See L<perlembed>.
+Test two strings to see if they are different.  The C<len> parameter
+indicates the number of bytes to compare.  Returns true or false. (A
+wrapper for C<strncmp>).
 
-       void    perl_free(PerlInterpreter* interp)
+       bool    strnNE(char* s1, char* s2, STRLEN len)
 
 =for hackers
-Found in file perl.c
-
-=item perl_parse
+Found in file handy.h
 
-Tells a Perl interpreter to parse a Perl script.  See L<perlembed>.
 
-       int     perl_parse(PerlInterpreter* interp, XSINIT_t xsinit, int argc, char** argv, char** env)
+=back
 
-=for hackers
-Found in file perl.c
+=head1 Numeric functions
 
-=item perl_run
+=over 8
 
-Tells a Perl interpreter to run.  See L<perlembed>.
+=item grok_bin
 
-       int     perl_run(PerlInterpreter* interp)
+converts a string representing a binary number to numeric form.
 
-=for hackers
-Found in file perl.c
+On entry I<start> and I<*len> give the string to scan, I<*flags> gives
+conversion flags, and I<result> should be NULL or a pointer to an NV.
+The scan stops at the end of the string, or the first invalid character.
+On return I<*len> is set to the length scanned string, and I<*flags> gives
+output flags.
 
-=item PL_modglobal
+If the value is <= UV_MAX it is returned as a UV, the output flags are clear,
+and nothing is written to I<*result>. If the value is > UV_MAX C<grok_bin>
+returns UV_MAX, sets C<PERL_SCAN_GREATER_THAN_UV_MAX> in the output flags,
+and writes the value to I<*result> (or the value is discarded if I<result>
+is NULL).
 
-C<PL_modglobal> is a general purpose, interpreter global HV for use by
-extensions that need to keep information on a per-interpreter basis.
-In a pinch, it can also be used as a symbol table for extensions
-to share data among each other.  It is a good idea to use keys
-prefixed by the package name of the extension that owns the data.
+The hex number may optionally be prefixed with "0b" or "b" unless
+C<PERL_SCAN_DISALLOW_PREFIX> is set in I<*flags> on entry. If
+C<PERL_SCAN_ALLOW_UNDERSCORES> is set in I<*flags> then the binary
+number may use '_' characters to separate digits.
 
-       HV*     PL_modglobal
+       UV      grok_bin(char* start, STRLEN* len, I32* flags, NV *result)
 
 =for hackers
-Found in file intrpvar.h
-
-=item PL_na
+Found in file numeric.c
 
-A convenience variable which is typically used with C<SvPV> when one
-doesn't care about the length of the string.  It is usually more efficient
-to either declare a local variable and use that instead or to use the
-C<SvPV_nolen> macro.
+=item grok_hex
 
-       STRLEN  PL_na
+converts a string representing a hex number to numeric form.
 
-=for hackers
-Found in file thrdvar.h
+On entry I<start> and I<*len> give the string to scan, I<*flags> gives
+conversion flags, and I<result> should be NULL or a pointer to an NV.
+The scan stops at the end of the string, or the first non-hex-digit character.
+On return I<*len> is set to the length scanned string, and I<*flags> gives
+output flags.
 
-=item PL_sv_no
+If the value is <= UV_MAX it is returned as a UV, the output flags are clear,
+and nothing is written to I<*result>. If the value is > UV_MAX C<grok_hex>
+returns UV_MAX, sets C<PERL_SCAN_GREATER_THAN_UV_MAX> in the output flags,
+and writes the value to I<*result> (or the value is discarded if I<result>
+is NULL).
 
-This is the C<false> SV.  See C<PL_sv_yes>.  Always refer to this as
-C<&PL_sv_no>.
+The hex number may optionally be prefixed with "0x" or "x" unless
+C<PERL_SCAN_DISALLOW_PREFIX> is set in I<*flags> on entry. If
+C<PERL_SCAN_ALLOW_UNDERSCORES> is set in I<*flags> then the hex
+number may use '_' characters to separate digits.
 
-       SV      PL_sv_no
+       UV      grok_hex(char* start, STRLEN* len, I32* flags, NV *result)
 
 =for hackers
-Found in file intrpvar.h
+Found in file numeric.c
 
-=item PL_sv_undef
+=item grok_number
 
-This is the C<undef> SV.  Always refer to this as C<&PL_sv_undef>.
+Recognise (or not) a number.  The type of the number is returned
+(0 if unrecognised), otherwise it is a bit-ORed combination of
+IS_NUMBER_IN_UV, IS_NUMBER_GREATER_THAN_UV_MAX, IS_NUMBER_NOT_INT,
+IS_NUMBER_NEG, IS_NUMBER_INFINITY, IS_NUMBER_NAN (defined in perl.h).
 
-       SV      PL_sv_undef
+If the value of the number can fit an in UV, it is returned in the *valuep
+IS_NUMBER_IN_UV will be set to indicate that *valuep is valid, IS_NUMBER_IN_UV
+will never be set unless *valuep is valid, but *valuep may have been assigned
+to during processing even though IS_NUMBER_IN_UV is not set on return.
+If valuep is NULL, IS_NUMBER_IN_UV will be set for the same cases as when
+valuep is non-NULL, but no actual assignment (or SEGV) will occur.
+
+IS_NUMBER_NOT_INT will be set with IS_NUMBER_IN_UV if trailing decimals were
+seen (in which case *valuep gives the true value truncated to an integer), and
+IS_NUMBER_NEG if the number is negative (in which case *valuep holds the
+absolute value).  IS_NUMBER_IN_UV is not set if e notation was used or the
+number is larger than a UV.
+
+       int     grok_number(const char *pv, STRLEN len, UV *valuep)
 
 =for hackers
-Found in file intrpvar.h
+Found in file numeric.c
 
-=item PL_sv_yes
+=item grok_numeric_radix
 
-This is the C<true> SV.  See C<PL_sv_no>.  Always refer to this as
-C<&PL_sv_yes>.
+Scan and skip for a numeric decimal separator (radix).
 
-       SV      PL_sv_yes
+       bool    grok_numeric_radix(const char **sp, const char *send)
 
 =for hackers
-Found in file intrpvar.h
+Found in file numeric.c
 
-=item POPi
+=item grok_oct
 
-Pops an integer off the stack.
 
-       IV      POPi
+       UV      grok_oct(char* start, STRLEN* len, I32* flags, NV *result)
 
 =for hackers
-Found in file pp.h
+Found in file numeric.c
 
-=item POPl
+=item scan_bin
 
-Pops a long off the stack.
+For backwards compatibility. Use C<grok_bin> instead.
 
-       long    POPl
+       NV      scan_bin(char* start, STRLEN len, STRLEN* retlen)
 
 =for hackers
-Found in file pp.h
+Found in file numeric.c
 
-=item POPn
+=item scan_hex
 
-Pops a double off the stack.
+For backwards compatibility. Use C<grok_hex> instead.
 
-       NV      POPn
+       NV      scan_hex(char* start, STRLEN len, STRLEN* retlen)
 
 =for hackers
-Found in file pp.h
+Found in file numeric.c
 
-=item POPp
+=item scan_oct
 
-Pops a string off the stack.
+For backwards compatibility. Use C<grok_oct> instead.
 
-       char*   POPp
+       NV      scan_oct(char* start, STRLEN len, STRLEN* retlen)
 
 =for hackers
-Found in file pp.h
+Found in file numeric.c
 
-=item POPs
+
+=back
+
+=head1 Optree Manipulation Functions
+
+=over 8
+
+=item cv_const_sv
+
+If C<cv> is a constant sub eligible for inlining. returns the constant
+value returned by the sub.  Otherwise, returns NULL.
+
+Constant subs can be created with C<newCONSTSUB> or as described in
+L<perlsub/"Constant Functions">.
+
+       SV*     cv_const_sv(CV* cv)
+
+=for hackers
+Found in file op.c
+
+=item newCONSTSUB
+
+Creates a constant sub equivalent to Perl C<sub FOO () { 123 }> which is
+eligible for inlining at compile-time.
+
+       CV*     newCONSTSUB(HV* stash, char* name, SV* sv)
+
+=for hackers
+Found in file op.c
+
+=item newXS
+
+Used by C<xsubpp> to hook up XSUBs as Perl subs.
+
+=for hackers
+Found in file op.c
+
+
+=back
+
+=head1 Pad Data Structures
+
+=over 8
+
+=item pad_sv
+
+Get the value at offset po in the current pad.
+Use macro PAD_SV instead of calling this function directly.
+
+       SV*     pad_sv(PADOFFSET po)
+
+=for hackers
+Found in file pad.c
+
+
+=back
+
+=head1 Stack Manipulation Macros
+
+=over 8
+
+=item dMARK
+
+Declare a stack marker variable, C<mark>, for the XSUB.  See C<MARK> and
+C<dORIGMARK>.
+
+               dMARK;
+
+=for hackers
+Found in file pp.h
+
+=item dORIGMARK
+
+Saves the original stack mark for the XSUB.  See C<ORIGMARK>.
+
+               dORIGMARK;
+
+=for hackers
+Found in file pp.h
+
+=item dSP
+
+Declares a local copy of perl's stack pointer for the XSUB, available via
+the C<SP> macro.  See C<SP>.
+
+               dSP;
+
+=for hackers
+Found in file pp.h
+
+=item EXTEND
+
+Used to extend the argument stack for an XSUB's return values. Once
+used, guarantees that there is room for at least C<nitems> to be pushed
+onto the stack.
+
+       void    EXTEND(SP, int nitems)
+
+=for hackers
+Found in file pp.h
+
+=item MARK
+
+Stack marker variable for the XSUB.  See C<dMARK>.
+
+=for hackers
+Found in file pp.h
+
+=item ORIGMARK
+
+The original stack mark for the XSUB.  See C<dORIGMARK>.
+
+=for hackers
+Found in file pp.h
+
+=item POPi
+
+Pops an integer off the stack.
+
+       IV      POPi
+
+=for hackers
+Found in file pp.h
+
+=item POPl
+
+Pops a long off the stack.
+
+       long    POPl
+
+=for hackers
+Found in file pp.h
+
+=item POPn
+
+Pops a double off the stack.
+
+       NV      POPn
+
+=for hackers
+Found in file pp.h
+
+=item POPp
+
+Pops a string off the stack. Deprecated. New code should provide
+a STRLEN n_a and use POPpx.
+
+       char*   POPp
+
+=for hackers
+Found in file pp.h
+
+=item POPpbytex
+
+Pops a string off the stack which must consist of bytes i.e. characters < 256.
+Requires a variable STRLEN n_a in scope.
+
+       char*   POPpbytex
+
+=for hackers
+Found in file pp.h
+
+=item POPpx
+
+Pops a string off the stack.
+Requires a variable STRLEN n_a in scope.
+
+       char*   POPpx
+
+=for hackers
+Found in file pp.h
+
+=item POPs
 
 Pops an SV off the stack.
 
@@ -1655,200 +2109,476 @@ See C<PUSHMARK> and L<perlcall> for other uses.
 =for hackers
 Found in file pp.h
 
-=item Renew
+=item SP
 
-The XSUB-writer's interface to the C C<realloc> function.
+Stack pointer.  This is usually handled by C<xsubpp>.  See C<dSP> and
+C<SPAGAIN>.
 
-       void    Renew(void* ptr, int nitems, type)
+=for hackers
+Found in file pp.h
+
+=item SPAGAIN
+
+Refetch the stack pointer.  Used after a callback.  See L<perlcall>.
+
+               SPAGAIN;
 
 =for hackers
-Found in file handy.h
+Found in file pp.h
 
-=item Renewc
+=item XPUSHi
 
-The XSUB-writer's interface to the C C<realloc> function, with
-cast.
+Push an integer onto the stack, extending the stack if necessary.  Handles
+'set' magic. See C<PUSHi>.
 
-       void    Renewc(void* ptr, int nitems, type, cast)
+       void    XPUSHi(IV iv)
 
 =for hackers
-Found in file handy.h
+Found in file pp.h
 
-=item require_pv
+=item XPUSHn
 
-Tells Perl to C<require> a module.
+Push a double onto the stack, extending the stack if necessary.  Handles
+'set' magic.  See C<PUSHn>.
 
-NOTE: the perl_ form of this function is deprecated.
+       void    XPUSHn(NV nv)
 
-       void    require_pv(const char* pv)
+=for hackers
+Found in file pp.h
+
+=item XPUSHp
+
+Push a string onto the stack, extending the stack if necessary.  The C<len>
+indicates the length of the string.  Handles 'set' magic.  See
+C<PUSHp>.
+
+       void    XPUSHp(char* str, STRLEN len)
 
 =for hackers
-Found in file perl.c
+Found in file pp.h
 
-=item RETVAL
+=item XPUSHs
 
-Variable which is setup by C<xsubpp> to hold the return value for an 
-XSUB. This is always the proper type for the XSUB. See 
-L<perlxs/"The RETVAL Variable">.
+Push an SV onto the stack, extending the stack if necessary.  Does not
+handle 'set' magic.  See C<PUSHs>.
 
-       (whatever)      RETVAL
+       void    XPUSHs(SV* sv)
+
+=for hackers
+Found in file pp.h
+
+=item XPUSHu
+
+Push an unsigned integer onto the stack, extending the stack if necessary.
+See C<PUSHu>.
+
+       void    XPUSHu(UV uv)
+
+=for hackers
+Found in file pp.h
+
+=item XSRETURN
+
+Return from XSUB, indicating number of items on the stack.  This is usually
+handled by C<xsubpp>.
+
+       void    XSRETURN(int nitems)
 
 =for hackers
 Found in file XSUB.h
 
-=item Safefree
+=item XSRETURN_IV
 
-The XSUB-writer's interface to the C C<free> function.
+Return an integer from an XSUB immediately.  Uses C<XST_mIV>.
 
-       void    Safefree(void* ptr)
+       void    XSRETURN_IV(IV iv)
 
 =for hackers
-Found in file handy.h
+Found in file XSUB.h
 
-=item savepv
+=item XSRETURN_NO
 
-Copy a string to a safe spot.  This does not use an SV.
+Return C<&PL_sv_no> from an XSUB immediately.  Uses C<XST_mNO>.
 
-       char*   savepv(const char* sv)
+               XSRETURN_NO;
 
 =for hackers
-Found in file util.c
+Found in file XSUB.h
 
-=item savepvn
+=item XSRETURN_NV
 
-Copy a string to a safe spot.  The C<len> indicates number of bytes to
-copy.  This does not use an SV.
+Return a double from an XSUB immediately.  Uses C<XST_mNV>.
 
-       char*   savepvn(const char* sv, I32 len)
+       void    XSRETURN_NV(NV nv)
 
 =for hackers
-Found in file util.c
+Found in file XSUB.h
 
-=item SAVETMPS
+=item XSRETURN_PV
 
-Opening bracket for temporaries on a callback.  See C<FREETMPS> and
-L<perlcall>.
+Return a copy of a string from an XSUB immediately.  Uses C<XST_mPV>.
 
-               SAVETMPS;
+       void    XSRETURN_PV(char* str)
 
 =for hackers
-Found in file scope.h
+Found in file XSUB.h
 
-=item SP
+=item XSRETURN_UNDEF
 
-Stack pointer.  This is usually handled by C<xsubpp>.  See C<dSP> and
-C<SPAGAIN>.
+Return C<&PL_sv_undef> from an XSUB immediately.  Uses C<XST_mUNDEF>.
+
+               XSRETURN_UNDEF;
 
 =for hackers
-Found in file pp.h
+Found in file XSUB.h
 
-=item SPAGAIN
+=item XSRETURN_YES
 
-Refetch the stack pointer.  Used after a callback.  See L<perlcall>.
+Return C<&PL_sv_yes> from an XSUB immediately.  Uses C<XST_mYES>.
 
-               SPAGAIN;
+               XSRETURN_YES;
 
 =for hackers
-Found in file pp.h
+Found in file XSUB.h
 
-=item ST
+=item XST_mIV
 
-Used to access elements on the XSUB's stack.
+Place an integer into the specified position C<pos> on the stack.  The
+value is stored in a new mortal SV.
 
-       SV*     ST(int ix)
+       void    XST_mIV(int pos, IV iv)
 
 =for hackers
 Found in file XSUB.h
 
-=item strEQ
+=item XST_mNO
 
-Test two strings to see if they are equal.  Returns true or false.
+Place C<&PL_sv_no> into the specified position C<pos> on the
+stack.
 
-       bool    strEQ(char* s1, char* s2)
+       void    XST_mNO(int pos)
+
+=for hackers
+Found in file XSUB.h
+
+=item XST_mNV
+
+Place a double into the specified position C<pos> on the stack.  The value
+is stored in a new mortal SV.
+
+       void    XST_mNV(int pos, NV nv)
+
+=for hackers
+Found in file XSUB.h
+
+=item XST_mPV
+
+Place a copy of a string into the specified position C<pos> on the stack. 
+The value is stored in a new mortal SV.
+
+       void    XST_mPV(int pos, char* str)
+
+=for hackers
+Found in file XSUB.h
+
+=item XST_mUNDEF
+
+Place C<&PL_sv_undef> into the specified position C<pos> on the
+stack.
+
+       void    XST_mUNDEF(int pos)
+
+=for hackers
+Found in file XSUB.h
+
+=item XST_mYES
+
+Place C<&PL_sv_yes> into the specified position C<pos> on the
+stack.
+
+       void    XST_mYES(int pos)
+
+=for hackers
+Found in file XSUB.h
+
+
+=back
+
+=head1 SV Flags
+
+=over 8
+
+=item svtype
+
+An enum of flags for Perl types.  These are found in the file B<sv.h>
+in the C<svtype> enum.  Test these flags with the C<SvTYPE> macro.
+
+=for hackers
+Found in file sv.h
+
+=item SVt_IV
+
+Integer type flag for scalars.  See C<svtype>.
+
+=for hackers
+Found in file sv.h
+
+=item SVt_NV
+
+Double type flag for scalars.  See C<svtype>.
+
+=for hackers
+Found in file sv.h
+
+=item SVt_PV
+
+Pointer type flag for scalars.  See C<svtype>.
+
+=for hackers
+Found in file sv.h
+
+=item SVt_PVAV
+
+Type flag for arrays.  See C<svtype>.
+
+=for hackers
+Found in file sv.h
+
+=item SVt_PVCV
+
+Type flag for code refs.  See C<svtype>.
+
+=for hackers
+Found in file sv.h
+
+=item SVt_PVHV
+
+Type flag for hashes.  See C<svtype>.
+
+=for hackers
+Found in file sv.h
+
+=item SVt_PVMG
+
+Type flag for blessed scalars.  See C<svtype>.
+
+=for hackers
+Found in file sv.h
+
+
+=back
+
+=head1 SV Manipulation Functions
+
+=over 8
+
+=item get_sv
+
+Returns the SV of the specified Perl scalar.  If C<create> is set and the
+Perl variable does not exist then it will be created.  If C<create> is not
+set and the variable does not exist then NULL is returned.
+
+NOTE: the perl_ form of this function is deprecated.
+
+       SV*     get_sv(const char* name, I32 create)
+
+=for hackers
+Found in file perl.c
+
+=item looks_like_number
+
+Test if the content of an SV looks like a number (or is a number).
+C<Inf> and C<Infinity> are treated as numbers (so will not issue a
+non-numeric warning), even if your atof() doesn't grok them.
+
+       I32     looks_like_number(SV* sv)
+
+=for hackers
+Found in file sv.c
+
+=item newRV_inc
+
+Creates an RV wrapper for an SV.  The reference count for the original SV is
+incremented.
+
+       SV*     newRV_inc(SV* sv)
+
+=for hackers
+Found in file sv.h
+
+=item newRV_noinc
+
+Creates an RV wrapper for an SV.  The reference count for the original
+SV is B<not> incremented.
+
+       SV*     newRV_noinc(SV *sv)
+
+=for hackers
+Found in file sv.c
+
+=item newSV
+
+Create a new null SV, or if len > 0, create a new empty SVt_PV type SV
+with an initial PV allocation of len+1. Normally accessed via the C<NEWSV>
+macro.
+
+       SV*     newSV(STRLEN len)
+
+=for hackers
+Found in file sv.c
+
+=item newSViv
+
+Creates a new SV and copies an integer into it.  The reference count for the
+SV is set to 1.
+
+       SV*     newSViv(IV i)
+
+=for hackers
+Found in file sv.c
+
+=item newSVnv
+
+Creates a new SV and copies a floating point value into it.
+The reference count for the SV is set to 1.
+
+       SV*     newSVnv(NV n)
+
+=for hackers
+Found in file sv.c
+
+=item newSVpv
+
+Creates a new SV and copies a string into it.  The reference count for the
+SV is set to 1.  If C<len> is zero, Perl will compute the length using
+strlen().  For efficiency, consider using C<newSVpvn> instead.
+
+       SV*     newSVpv(const char* s, STRLEN len)
+
+=for hackers
+Found in file sv.c
+
+=item newSVpvf
+
+Creates a new SV and initializes it with the string formatted like
+C<sprintf>.
+
+       SV*     newSVpvf(const char* pat, ...)
+
+=for hackers
+Found in file sv.c
+
+=item newSVpvn
+
+Creates a new SV and copies a string into it.  The reference count for the
+SV is set to 1.  Note that if C<len> is zero, Perl will create a zero length
+string.  You are responsible for ensuring that the source string is at least
+C<len> bytes long.
+
+       SV*     newSVpvn(const char* s, STRLEN len)
+
+=for hackers
+Found in file sv.c
+
+=item newSVpvn_share
+
+Creates a new SV with its SvPVX pointing to a shared string in the string
+table. If the string does not already exist in the table, it is created
+first.  Turns on READONLY and FAKE.  The string's hash is stored in the UV
+slot of the SV; if the C<hash> parameter is non-zero, that value is used;
+otherwise the hash is computed.  The idea here is that as the string table
+is used for shared hash keys these strings will have SvPVX == HeKEY and
+hash lookup will avoid string compare.
+
+       SV*     newSVpvn_share(const char* s, I32 len, U32 hash)
 
 =for hackers
-Found in file handy.h
+Found in file sv.c
 
-=item strGE
+=item newSVrv
 
-Test two strings to see if the first, C<s1>, is greater than or equal to
-the second, C<s2>.  Returns true or false.
+Creates a new SV for the RV, C<rv>, to point to.  If C<rv> is not an RV then
+it will be upgraded to one.  If C<classname> is non-null then the new SV will
+be blessed in the specified package.  The new SV is returned and its
+reference count is 1.
 
-       bool    strGE(char* s1, char* s2)
+       SV*     newSVrv(SV* rv, const char* classname)
 
 =for hackers
-Found in file handy.h
+Found in file sv.c
 
-=item strGT
+=item newSVsv
 
-Test two strings to see if the first, C<s1>, is greater than the second,
-C<s2>.  Returns true or false.
+Creates a new SV which is an exact duplicate of the original SV.
+(Uses C<sv_setsv>).
 
-       bool    strGT(char* s1, char* s2)
+       SV*     newSVsv(SV* old)
 
 =for hackers
-Found in file handy.h
+Found in file sv.c
 
-=item strLE
+=item newSVuv
 
-Test two strings to see if the first, C<s1>, is less than or equal to the
-second, C<s2>.  Returns true or false.
+Creates a new SV and copies an unsigned integer into it.
+The reference count for the SV is set to 1.
 
-       bool    strLE(char* s1, char* s2)
+       SV*     newSVuv(UV u)
 
 =for hackers
-Found in file handy.h
+Found in file sv.c
 
-=item strLT
+=item new_version
 
-Test two strings to see if the first, C<s1>, is less than the second,
-C<s2>.  Returns true or false.
+Returns a new version object based on the passed in SV:
 
-       bool    strLT(char* s1, char* s2)
+    SV *sv = new_version(SV *ver);
 
-=for hackers
-Found in file handy.h
+Does not alter the passed in ver SV.  See "upg_version" if you
+want to upgrade the SV.
 
-=item strNE
+       SV*     new_version(SV *ver)
 
-Test two strings to see if they are different.  Returns true or
-false.
+=for hackers
+Found in file util.c
 
-       bool    strNE(char* s1, char* s2)
+=item scan_version
 
-=for hackers
-Found in file handy.h
+Returns a pointer to the next character after the parsed
+version string, as well as upgrading the passed in SV to
+an RV.
 
-=item strnEQ
+Function must be called with an already existing SV like
 
-Test two strings to see if they are equal.  The C<len> parameter indicates
-the number of bytes to compare.  Returns true or false. (A wrapper for
-C<strncmp>).
+    sv = NEWSV(92,0);
+    s = scan_version(s,sv);
 
-       bool    strnEQ(char* s1, char* s2, STRLEN len)
+Performs some preprocessing to the string to ensure that
+it has the correct characteristics of a version.  Flags the
+object if it contains an underscore (which denotes this
+is a beta version).
 
-=for hackers
-Found in file handy.h
+       char*   scan_version(char *vstr, SV *sv)
 
-=item strnNE
+=for hackers
+Found in file util.c
 
-Test two strings to see if they are different.  The C<len> parameter
-indicates the number of bytes to compare.  Returns true or false. (A
-wrapper for C<strncmp>).
+=item scan_vstring
 
-       bool    strnNE(char* s1, char* s2, STRLEN len)
+Returns a pointer to the next character after the parsed
+vstring, as well as updating the passed in sv.
 
-=for hackers
-Found in file handy.h
+Function must be called like
 
-=item StructCopy
+       sv = NEWSV(92,5);
+       s = scan_vstring(s,sv);
 
-This is an architecture-independent macro to copy one structure to another.
+The sv should already be large enough to store the vstring
+passed in, for performance reasons.
 
-       void    StructCopy(type src, type dest, type)
+       char*   scan_vstring(char *vstr, SV *sv)
 
 =for hackers
-Found in file handy.h
+Found in file util.c
 
 =item SvCUR
 
@@ -1878,24 +2608,14 @@ See C<SvCUR>.  Access the character as *(SvEND(sv)).
 =for hackers
 Found in file sv.h
 
-=item SvGETMAGIC
-
-Invokes C<mg_get> on an SV if it has 'get' magic.  This macro evaluates its
-argument more than once.
-
-       void    SvGETMAGIC(SV* sv)
-
-=for hackers
-Found in file sv.h
-
 =item SvGROW
 
 Expands the character buffer in the SV so that it has room for the
 indicated number of bytes (remember to reserve space for an extra trailing
-NUL character).  Calls C<sv_grow> to perform the expansion if necessary. 
+NUL character).  Calls C<sv_grow> to perform the expansion if necessary.
 Returns a pointer to the character buffer.
 
-       void    SvGROW(SV* sv, STRLEN len)
+       char *  SvGROW(SV* sv, STRLEN len)
 
 =for hackers
 Found in file sv.h
@@ -1921,7 +2641,7 @@ Found in file sv.h
 
 =item SvIOK_notUV
 
-Returns a boolean indicating whether the SV contains an signed integer.
+Returns a boolean indicating whether the SV contains a signed integer.
 
        void    SvIOK_notUV(SV* sv)
 
@@ -1975,17 +2695,28 @@ Found in file sv.h
 
 =item SvIV
 
-Coerces the given SV to an integer and returns it.
+Coerces the given SV to an integer and returns it. See  C<SvIVx> for a
+version which guarantees to evaluate sv only once.
 
        IV      SvIV(SV* sv)
 
 =for hackers
 Found in file sv.h
 
+=item SvIVx
+
+Coerces the given SV to an integer and returns it. Guarantees to evaluate
+sv only once. Use the more efficient C<SvIV> otherwise.
+
+       IV      SvIVx(SV* sv)
+
+=for hackers
+Found in file sv.h
+
 =item SvIVX
 
-Returns the integer which is stored in the SV, assuming SvIOK is
-true.
+Returns the raw value in the SV's IV slot, without checks or conversions.
+Only use when you are sure SvIOK is true. See also C<SvIV()>.
 
        IV      SvIVX(SV* sv)
 
@@ -2079,7 +2810,8 @@ Found in file sv.h
 
 =item SvNV
 
-Coerce the given SV to a double and return it.
+Coerce the given SV to a double and return it. See  C<SvNVx> for a version
+which guarantees to evaluate sv only once.
 
        NV      SvNV(SV* sv)
 
@@ -2088,14 +2820,24 @@ Found in file sv.h
 
 =item SvNVX
 
-Returns the double which is stored in the SV, assuming SvNOK is
-true.
+Returns the raw value in the SV's NV slot, without checks or conversions.
+Only use when you are sure SvNOK is true. See also C<SvNV()>.
 
        NV      SvNVX(SV* sv)
 
 =for hackers
 Found in file sv.h
 
+=item SvNVx
+
+Coerces the given SV to a double and returns it. Guarantees to evaluate
+sv only once. Use the more efficient C<SvNV> otherwise.
+
+       NV      SvNVx(SV* sv)
+
+=for hackers
+Found in file sv.h
+
 =item SvOK
 
 Returns a boolean indicating whether the value is an SV.
@@ -2158,6 +2900,7 @@ Found in file sv.h
 =item SvPOK_only
 
 Tells an SV that it is a string and disables all other OK bits.
+Will also turn off the UTF8 status.
 
        void    SvPOK_only(SV* sv)
 
@@ -2166,9 +2909,9 @@ Found in file sv.h
 
 =item SvPOK_only_UTF8
 
-Tells an SV that it is a UTF8 string (do not use frivolously)
-and disables all other OK bits.
-  
+Tells an SV that it is a string and disables all other OK bits,
+and leaves the UTF8 status as it was.
+
        void    SvPOK_only_UTF8(SV* sv)
 
 =for hackers
@@ -2176,17 +2919,127 @@ Found in file sv.h
 
 =item SvPV
 
-Returns a pointer to the string in the SV, or a stringified form of the SV
-if the SV does not contain a string.  Handles 'get' magic.
+Returns a pointer to the string in the SV, or a stringified form of
+the SV if the SV does not contain a string.  The SV may cache the
+stringified version becoming C<SvPOK>.  Handles 'get' magic. See also
+C<SvPVx> for a version which guarantees to evaluate sv only once.
 
        char*   SvPV(SV* sv, STRLEN len)
 
 =for hackers
 Found in file sv.h
 
+=item SvPVbyte
+
+Like C<SvPV>, but converts sv to byte representation first if necessary.
+
+       char*   SvPVbyte(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVbytex
+
+Like C<SvPV>, but converts sv to byte representation first if necessary.
+Guarantees to evaluate sv only once; use the more efficient C<SvPVbyte>
+otherwise.
+
+
+       char*   SvPVbytex(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVbytex_force
+
+Like C<SvPV_force>, but converts sv to byte representation first if necessary.
+Guarantees to evaluate sv only once; use the more efficient C<SvPVbyte_force>
+otherwise.
+
+       char*   SvPVbytex_force(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVbyte_force
+
+Like C<SvPV_force>, but converts sv to byte representation first if necessary.
+
+       char*   SvPVbyte_force(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVbyte_nolen
+
+Like C<SvPV_nolen>, but converts sv to byte representation first if necessary.
+
+       char*   SvPVbyte_nolen(SV* sv)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVutf8
+
+Like C<SvPV>, but converts sv to utf8 first if necessary.
+
+       char*   SvPVutf8(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVutf8x
+
+Like C<SvPV>, but converts sv to utf8 first if necessary.
+Guarantees to evaluate sv only once; use the more efficient C<SvPVutf8>
+otherwise.
+
+       char*   SvPVutf8x(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVutf8x_force
+
+Like C<SvPV_force>, but converts sv to utf8 first if necessary.
+Guarantees to evaluate sv only once; use the more efficient C<SvPVutf8_force>
+otherwise.
+
+       char*   SvPVutf8x_force(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVutf8_force
+
+Like C<SvPV_force>, but converts sv to utf8 first if necessary.
+
+       char*   SvPVutf8_force(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVutf8_nolen
+
+Like C<SvPV_nolen>, but converts sv to utf8 first if necessary.
+
+       char*   SvPVutf8_nolen(SV* sv)
+
+=for hackers
+Found in file sv.h
+
+=item SvPVx
+
+A version of C<SvPV> which guarantees to evaluate sv only once.
+
+       char*   SvPVx(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
 =item SvPVX
 
-Returns a pointer to the string in the SV.  The SV must contain a
+Returns a pointer to the physical string in the SV.  The SV must contain a
 string.
 
        char*   SvPVX(SV* sv)
@@ -2196,18 +3049,31 @@ Found in file sv.h
 
 =item SvPV_force
 
-Like <SvPV> but will force the SV into becoming a string (SvPOK).  You want
-force if you are going to update the SvPVX directly.
+Like C<SvPV> but will force the SV into containing just a string
+(C<SvPOK_only>).  You want force if you are going to update the C<SvPVX>
+directly.
 
        char*   SvPV_force(SV* sv, STRLEN len)
 
 =for hackers
 Found in file sv.h
 
+=item SvPV_force_nomg
+
+Like C<SvPV> but will force the SV into containing just a string
+(C<SvPOK_only>).  You want force if you are going to update the C<SvPVX>
+directly. Doesn't process magic.
+
+       char*   SvPV_force_nomg(SV* sv, STRLEN len)
+
+=for hackers
+Found in file sv.h
+
 =item SvPV_nolen
 
-Returns a pointer to the string in the SV, or a stringified form of the SV
-if the SV does not contain a string.  Handles 'get' magic.
+Returns a pointer to the string in the SV, or a stringified form of
+the SV if the SV does not contain a string.  The SV may cache the
+stringified form becoming C<SvPOK>.  Handles 'get' magic.
 
        char*   SvPV_nolen(SV* sv)
 
@@ -2277,234 +3143,324 @@ Dereferences an RV to return the SV.
 =for hackers
 Found in file sv.h
 
-=item SvSETMAGIC
+=item SvSTASH
 
-Invokes C<mg_set> on an SV if it has 'set' magic.  This macro evaluates its
-argument more than once.
+Returns the stash of the SV.
 
-       void    SvSETMAGIC(SV* sv)
+       HV*     SvSTASH(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvSetSV
+=item SvTAINT
 
-Calls C<sv_setsv> if dsv is not the same as ssv.  May evaluate arguments
-more than once.
+Taints an SV if tainting is enabled
 
-       void    SvSetSV(SV* dsb, SV* ssv)
+       void    SvTAINT(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvSetSV_nosteal
+=item SvTAINTED
 
-Calls a non-destructive version of C<sv_setsv> if dsv is not the same as
-ssv. May evaluate arguments more than once.
+Checks to see if an SV is tainted. Returns TRUE if it is, FALSE if
+not.
 
-       void    SvSetSV_nosteal(SV* dsv, SV* ssv)
+       bool    SvTAINTED(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvSTASH
+=item SvTAINTED_off
 
-Returns the stash of the SV.
+Untaints an SV. Be I<very> careful with this routine, as it short-circuits
+some of Perl's fundamental security features. XS module authors should not
+use this function unless they fully understand all the implications of
+unconditionally untainting the value. Untainting should be done in the
+standard perl fashion, via a carefully crafted regexp, rather than directly
+untainting variables.
 
-       HV*     SvSTASH(SV* sv)
+       void    SvTAINTED_off(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvTAINT
+=item SvTAINTED_on
 
-Taints an SV if tainting is enabled
+Marks an SV as tainted.
 
-       void    SvTAINT(SV* sv)
+       void    SvTAINTED_on(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvTAINTED
+=item SvTRUE
 
-Checks to see if an SV is tainted. Returns TRUE if it is, FALSE if
-not.
+Returns a boolean indicating whether Perl would evaluate the SV as true or
+false, defined or undefined.  Does not handle 'get' magic.
 
-       bool    SvTAINTED(SV* sv)
+       bool    SvTRUE(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvTAINTED_off
+=item SvTYPE
 
-Untaints an SV. Be I<very> careful with this routine, as it short-circuits
-some of Perl's fundamental security features. XS module authors should not
-use this function unless they fully understand all the implications of
-unconditionally untainting the value. Untainting should be done in the
-standard perl fashion, via a carefully crafted regexp, rather than directly
-untainting variables.
+Returns the type of the SV.  See C<svtype>.
+
+       svtype  SvTYPE(SV* sv)
+
+=for hackers
+Found in file sv.h
+
+=item SvUNLOCK
+
+Releases a mutual exclusion lock on sv if a suitable module
+has been loaded.
+
+
+       void    SvUNLOCK(SV* sv)
+
+=for hackers
+Found in file sv.h
+
+=item SvUOK
+
+Returns a boolean indicating whether the SV contains an unsigned integer.
+
+       void    SvUOK(SV* sv)
+
+=for hackers
+Found in file sv.h
+
+=item SvUPGRADE
+
+Used to upgrade an SV to a more complex form.  Uses C<sv_upgrade> to
+perform the upgrade if necessary.  See C<svtype>.
+
+       void    SvUPGRADE(SV* sv, svtype type)
+
+=for hackers
+Found in file sv.h
+
+=item SvUTF8
+
+Returns a boolean indicating whether the SV contains UTF-8 encoded data.
 
-       void    SvTAINTED_off(SV* sv)
+       void    SvUTF8(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvTAINTED_on
+=item SvUTF8_off
 
-Marks an SV as tainted.
+Unsets the UTF8 status of an SV.
 
-       void    SvTAINTED_on(SV* sv)
+       void    SvUTF8_off(SV *sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvTRUE
+=item SvUTF8_on
 
-Returns a boolean indicating whether Perl would evaluate the SV as true or
-false, defined or undefined.  Does not handle 'get' magic.
+Turn on the UTF8 status of an SV (the data is not changed, just the flag).
+Do not use frivolously.
 
-       bool    SvTRUE(SV* sv)
+       void    SvUTF8_on(SV *sv)
 
 =for hackers
 Found in file sv.h
 
-=item SvTYPE
+=item SvUV
 
-Returns the type of the SV.  See C<svtype>.
+Coerces the given SV to an unsigned integer and returns it.  See C<SvUVx>
+for a version which guarantees to evaluate sv only once.
 
-       svtype  SvTYPE(SV* sv)
+       UV      SvUV(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item svtype
+=item SvUVX
 
-An enum of flags for Perl types.  These are found in the file B<sv.h> 
-in the C<svtype> enum.  Test these flags with the C<SvTYPE> macro.
+Returns the raw value in the SV's UV slot, without checks or conversions.
+Only use when you are sure SvIOK is true. See also C<SvUV()>.
+
+       UV      SvUVX(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SVt_IV
+=item SvUVx
 
-Integer type flag for scalars.  See C<svtype>.
+Coerces the given SV to an unsigned integer and returns it. Guarantees to
+evaluate sv only once. Use the more efficient C<SvUV> otherwise.
+
+       UV      SvUVx(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SVt_NV
+=item SvVOK
 
-Double type flag for scalars.  See C<svtype>.
+Returns a boolean indicating whether the SV contains a v-string.
+
+       bool    SvVOK(SV* sv)
 
 =for hackers
 Found in file sv.h
 
-=item SVt_PV
+=item sv_2bool
 
-Pointer type flag for scalars.  See C<svtype>.
+This function is only called on magical items, and is only used by
+sv_true() or its macro equivalent.
+
+       bool    sv_2bool(SV* sv)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SVt_PVAV
+=item sv_2cv
 
-Type flag for arrays.  See C<svtype>.
+Using various gambits, try to get a CV from an SV; in addition, try if
+possible to set C<*st> and C<*gvp> to the stash and GV associated with it.
+
+       CV*     sv_2cv(SV* sv, HV** st, GV** gvp, I32 lref)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SVt_PVCV
+=item sv_2io
 
-Type flag for code refs.  See C<svtype>.
+Using various gambits, try to get an IO from an SV: the IO slot if its a
+GV; or the recursive result if we're an RV; or the IO slot of the symbol
+named after the PV if we're a string.
+
+       IO*     sv_2io(SV* sv)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SVt_PVHV
+=item sv_2iv
 
-Type flag for hashes.  See C<svtype>.
+Return the integer value of an SV, doing any necessary string conversion,
+magic etc. Normally used via the C<SvIV(sv)> and C<SvIVx(sv)> macros.
+
+       IV      sv_2iv(SV* sv)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SVt_PVMG
+=item sv_2mortal
 
-Type flag for blessed scalars.  See C<svtype>.
+Marks an existing SV as mortal.  The SV will be destroyed "soon", either
+by an explicit call to FREETMPS, or by an implicit call at places such as
+statement boundaries.  See also C<sv_newmortal> and C<sv_mortalcopy>.
+
+       SV*     sv_2mortal(SV* sv)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SvUOK
+=item sv_2nv
 
-Returns a boolean indicating whether the SV contains an unsigned integer.
+Return the num value of an SV, doing any necessary string or integer
+conversion, magic etc. Normally used via the C<SvNV(sv)> and C<SvNVx(sv)>
+macros.
 
-       void    SvUOK(SV* sv)
+       NV      sv_2nv(SV* sv)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SvUPGRADE
+=item sv_2pvbyte
 
-Used to upgrade an SV to a more complex form.  Uses C<sv_upgrade> to
-perform the upgrade if necessary.  See C<svtype>.
+Return a pointer to the byte-encoded representation of the SV, and set *lp
+to its length.  May cause the SV to be downgraded from UTF8 as a
+side-effect.
 
-       void    SvUPGRADE(SV* sv, svtype type)
+Usually accessed via the C<SvPVbyte> macro.
+
+       char*   sv_2pvbyte(SV* sv, STRLEN* lp)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SvUTF8
+=item sv_2pvbyte_nolen
 
-Returns a boolean indicating whether the SV contains UTF-8 encoded data.
+Return a pointer to the byte-encoded representation of the SV.
+May cause the SV to be downgraded from UTF8 as a side-effect.
 
-       void    SvUTF8(SV* sv)
+Usually accessed via the C<SvPVbyte_nolen> macro.
+
+       char*   sv_2pvbyte_nolen(SV* sv)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SvUTF8_off
+=item sv_2pvutf8
 
-Unsets the UTF8 status of an SV.
+Return a pointer to the UTF8-encoded representation of the SV, and set *lp
+to its length.  May cause the SV to be upgraded to UTF8 as a side-effect.
 
-       void    SvUTF8_off(SV *sv)
+Usually accessed via the C<SvPVutf8> macro.
+
+       char*   sv_2pvutf8(SV* sv, STRLEN* lp)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SvUTF8_on
+=item sv_2pvutf8_nolen
 
-Tells an SV that it is a string and encoded in UTF8.  Do not use frivolously.
+Return a pointer to the UTF8-encoded representation of the SV.
+May cause the SV to be upgraded to UTF8 as a side-effect.
 
-       void    SvUTF8_on(SV *sv)
+Usually accessed via the C<SvPVutf8_nolen> macro.
+
+       char*   sv_2pvutf8_nolen(SV* sv)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SvUV
+=item sv_2pv_flags
 
-Coerces the given SV to an unsigned integer and returns it.
+Returns a pointer to the string value of an SV, and sets *lp to its length.
+If flags includes SV_GMAGIC, does an mg_get() first. Coerces sv to a string
+if necessary.
+Normally invoked via the C<SvPV_flags> macro. C<sv_2pv()> and C<sv_2pv_nomg>
+usually end up here too.
 
-       UV      SvUV(SV* sv)
+       char*   sv_2pv_flags(SV* sv, STRLEN* lp, I32 flags)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item SvUVX
+=item sv_2pv_nolen
 
-Returns the unsigned integer which is stored in the SV, assuming SvIOK is
-true.
+Like C<sv_2pv()>, but doesn't return the length too. You should usually
+use the macro wrapper C<SvPV_nolen(sv)> instead.
+       char*   sv_2pv_nolen(SV* sv)
 
-       UV      SvUVX(SV* sv)
+=for hackers
+Found in file sv.c
+
+=item sv_2uv
+
+Return the unsigned integer value of an SV, doing any necessary string
+conversion, magic etc. Normally used via the C<SvUV(sv)> and C<SvUVx(sv)>
+macros.
+
+       UV      sv_2uv(SV* sv)
 
 =for hackers
-Found in file sv.h
+Found in file sv.c
 
-=item sv_2mortal
+=item sv_backoff
 
-Marks an SV as mortal.  The SV will be destroyed when the current context
-ends.
+Remove any string offset. You should normally use the C<SvOOK_off> macro
+wrapper instead.
 
-       SV*     sv_2mortal(SV* sv)
+       int     sv_backoff(SV* sv)
 
 =for hackers
 Found in file sv.c
@@ -2523,7 +3479,8 @@ Found in file sv.c
 =item sv_catpv
 
 Concatenates the string onto the end of the string which is in the SV.
-Handles 'get' magic, but not 'set' magic.  See C<sv_catpv_mg>.
+If the SV has the UTF8 status set, then the bytes appended should be
+valid UTF8.  Handles 'get' magic, but not 'set' magic.  See C<sv_catpv_mg>.
 
        void    sv_catpv(SV* sv, const char* ptr)
 
@@ -2532,9 +3489,13 @@ Found in file sv.c
 
 =item sv_catpvf
 
-Processes its arguments like C<sprintf> and appends the formatted output
-to an SV.  Handles 'get' magic, but not 'set' magic.  C<SvSETMAGIC()> must
-typically be called after calling this function to handle 'set' magic.
+Processes its arguments like C<sprintf> and appends the formatted
+output to an SV.  If the appended data contains "wide" characters
+(including, but not limited to, SVs with a UTF-8 PV formatted with %s,
+and characters >255 formatted with %c), the original SV might get
+upgraded to UTF-8.  Handles 'get' magic, but not 'set' magic.
+C<SvSETMAGIC()> must typically be called after calling this function
+to handle 'set' magic.
 
        void    sv_catpvf(SV* sv, const char* pat, ...)
 
@@ -2553,14 +3514,29 @@ Found in file sv.c
 =item sv_catpvn
 
 Concatenates the string onto the end of the string which is in the SV.  The
-C<len> indicates number of bytes to copy.  Handles 'get' magic, but not
-'set' magic.  See C<sv_catpvn_mg>.
+C<len> indicates number of bytes to copy.  If the SV has the UTF8
+status set, then the bytes appended should be valid UTF8.
+Handles 'get' magic, but not 'set' magic.  See C<sv_catpvn_mg>.
 
        void    sv_catpvn(SV* sv, const char* ptr, STRLEN len)
 
 =for hackers
 Found in file sv.c
 
+=item sv_catpvn_flags
+
+Concatenates the string onto the end of the string which is in the SV.  The
+C<len> indicates number of bytes to copy.  If the SV has the UTF8
+status set, then the bytes appended should be valid UTF8.
+If C<flags> has C<SV_GMAGIC> bit set, will C<mg_get> on C<dsv> if
+appropriate, else not. C<sv_catpvn> and C<sv_catpvn_nomg> are implemented
+in terms of this function.
+
+       void    sv_catpvn_flags(SV* sv, const char* ptr, STRLEN len, I32 flags)
+
+=for hackers
+Found in file sv.c
+
 =item sv_catpvn_mg
 
 Like C<sv_catpvn>, but also handles 'set' magic.
@@ -2590,6 +3566,18 @@ not 'set' magic.  See C<sv_catsv_mg>.
 =for hackers
 Found in file sv.c
 
+=item sv_catsv_flags
+
+Concatenates the string from SV C<ssv> onto the end of the string in
+SV C<dsv>.  Modifies C<dsv> but not C<ssv>.  If C<flags> has C<SV_GMAGIC>
+bit set, will C<mg_get> on the SVs if appropriate, else not. C<sv_catsv>
+and C<sv_catsv_nomg> are implemented in terms of this function.
+
+       void    sv_catsv_flags(SV* dsv, SV* ssv, I32 flags)
+
+=for hackers
+Found in file sv.c
+
 =item sv_catsv_mg
 
 Like C<sv_catsv>, but also handles 'set' magic.
@@ -2604,7 +3592,7 @@ Found in file sv.c
 Efficient removal of characters from the beginning of the string buffer.
 SvPOK(sv) must be true and the C<ptr> must be a pointer to somewhere inside
 the string buffer.  The C<ptr> becomes the first character of the adjusted
-string.
+string. Uses the "OOK hack".
 
        void    sv_chop(SV* sv, char* ptr)
 
@@ -2613,8 +3601,13 @@ Found in file sv.c
 
 =item sv_clear
 
-Clear an SV, making it empty. Does not free the memory used by the SV
-itself.
+Clear an SV: call any destructors, free up any memory used by the body,
+and free the body itself. The SV's head is I<not> freed, although
+its type is set to all 1's so that it won't inadvertently be assumed
+to be live during global destruction etc.
+This function should only be called when REFCNT is zero. Most of the time
+you'll want to call C<sv_free()> (or its macro wrapper C<SvREFCNT_dec>)
+instead.
 
        void    sv_clear(SV* sv)
 
@@ -2625,7 +3618,8 @@ Found in file sv.c
 
 Compares the strings in two SVs.  Returns -1, 0, or 1 indicating whether the
 string in C<sv1> is less than, equal to, or greater than the string in
-C<sv2>.
+C<sv2>. Is UTF-8 and 'use bytes' aware, handles get magic, and will
+coerce its args to strings if necessary.  See also C<sv_cmp_locale>.
 
        I32     sv_cmp(SV* sv1, SV* sv2)
 
@@ -2634,17 +3628,48 @@ Found in file sv.c
 
 =item sv_cmp_locale
 
-Compares the strings in two SVs in a locale-aware manner. See
-L</sv_cmp_locale>
+Compares the strings in two SVs in a locale-aware manner. Is UTF-8 and
+'use bytes' aware, handles get magic, and will coerce its args to strings
+if necessary.  See also C<sv_cmp_locale>.  See also C<sv_cmp>.
 
        I32     sv_cmp_locale(SV* sv1, SV* sv2)
 
 =for hackers
 Found in file sv.c
 
+=item sv_collxfrm
+
+Add Collate Transform magic to an SV if it doesn't already have it.
+
+Any scalar variable may carry PERL_MAGIC_collxfrm magic that contains the
+scalar data of the variable, but transformed to such a format that a normal
+memory comparison can be used to compare the data according to the locale
+settings.
+
+       char*   sv_collxfrm(SV* sv, STRLEN* nxp)
+
+=for hackers
+Found in file sv.c
+
+=item sv_copypv
+
+Copies a stringified representation of the source SV into the
+destination SV.  Automatically performs any necessary mg_get and
+coercion of numeric values into strings.  Guaranteed to preserve
+UTF-8 flag even from overloaded objects.  Similar in nature to
+sv_2pv[_flags] but operates directly on an SV instead of just the
+string.  Mostly uses sv_2pv_flags to do its work, except when that
+would lose the UTF-8'ness of the PV.
+
+       void    sv_copypv(SV* dsv, SV* ssv)
+
+=for hackers
+Found in file sv.c
+
 =item sv_dec
 
-Auto-decrement of the value in the SV.
+Auto-decrement of the value in the SV, doing string to numeric conversion
+if necessary. Handles 'get' magic.
 
        void    sv_dec(SV* sv)
 
@@ -2665,16 +3690,48 @@ Found in file universal.c
 =item sv_eq
 
 Returns a boolean indicating whether the strings in the two SVs are
-identical.
+identical. Is UTF-8 and 'use bytes' aware, handles get magic, and will
+coerce its args to strings if necessary.
 
        I32     sv_eq(SV* sv1, SV* sv2)
 
 =for hackers
 Found in file sv.c
 
+=item sv_force_normal
+
+Undo various types of fakery on an SV: if the PV is a shared string, make
+a private copy; if we're a ref, stop refing; if we're a glob, downgrade to
+an xpvmg. See also C<sv_force_normal_flags>.
+
+       void    sv_force_normal(SV *sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_force_normal_flags
+
+Undo various types of fakery on an SV: if the PV is a shared string, make
+a private copy; if we're a ref, stop refing; if we're a glob, downgrade to
+an xpvmg; if we're a copy-on-write scalar, this is the on-write time when
+we do the copy, and is also used locally. If C<SV_COW_DROP_PV> is set
+then a copy-on-write scalar drops its PV buffer (if any) and becomes
+SvPOK_off rather than making a copy. (Used where this scalar is about to be
+set to some other value. In addtion, the C<flags> parameter gets passed to
+C<sv_unref_flags()> when unrefing. C<sv_force_normal> calls this function
+with flags set to 0.
+
+       void    sv_force_normal_flags(SV *sv, U32 flags)
+
+=for hackers
+Found in file sv.c
+
 =item sv_free
 
-Free the memory used by an SV.
+Decrement an SV's reference count, and if it drops to zero, call
+C<sv_clear> to invoke destructors and free up any memory used by
+the body; finally, deallocate the SV's head itself.
+Normally called via a wrapper macro C<SvREFCNT_dec>.
 
        void    sv_free(SV* sv)
 
@@ -2693,9 +3750,9 @@ Found in file sv.c
 
 =item sv_grow
 
-Expands the character buffer in the SV.  This will use C<sv_unref> and will
-upgrade the SV to C<SVt_PV>.  Returns a pointer to the character buffer.
-Use C<SvGROW>.
+Expands the character buffer in the SV.  If necessary, uses C<sv_unref> and
+upgrades the SV to C<SVt_PV>.  Returns a pointer to the character buffer.
+Use the C<SvGROW> wrapper instead.
 
        char*   sv_grow(SV* sv, STRLEN newlen)
 
@@ -2704,7 +3761,8 @@ Found in file sv.c
 
 =item sv_inc
 
-Auto-increment of the value in the SV.
+Auto-increment of the value in the SV, doing string to numeric conversion
+if necessary. Handles 'get' magic.
 
        void    sv_inc(SV* sv)
 
@@ -2743,66 +3801,268 @@ will return false.
 =for hackers
 Found in file sv.c
 
+=item sv_iv
+
+A private implementation of the C<SvIVx> macro for compilers which can't
+cope with complex macro expressions. Always use the macro instead.
+
+       IV      sv_iv(SV* sv)
+
+=for hackers
+Found in file sv.c
+
 =item sv_len
 
-Returns the length of the string in the SV.  See also C<SvCUR>.
+Returns the length of the string in the SV. Handles magic and type
+coercion.  See also C<SvCUR>, which gives raw access to the xpv_cur slot.
+
+       STRLEN  sv_len(SV* sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_len_utf8
+
+Returns the number of characters in the string in an SV, counting wide
+UTF8 bytes as a single character. Handles magic and type coercion.
+
+       STRLEN  sv_len_utf8(SV* sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_magic
+
+Adds magic to an SV. First upgrades C<sv> to type C<SVt_PVMG> if necessary,
+then adds a new magic item of type C<how> to the head of the magic list.
+
+       void    sv_magic(SV* sv, SV* obj, int how, const char* name, I32 namlen)
+
+=for hackers
+Found in file sv.c
+
+=item sv_magicext
+
+Adds magic to an SV, upgrading it if necessary. Applies the
+supplied vtable and returns pointer to the magic added.
+
+Note that sv_magicext will allow things that sv_magic will not.
+In particular you can add magic to SvREADONLY SVs and and more than
+one instance of the same 'how'
+
+I C<namelen> is greater then zero then a savepvn() I<copy> of C<name> is stored,
+if C<namelen> is zero then C<name> is stored as-is and - as another special
+case - if C<(name && namelen == HEf_SVKEY)> then C<name> is assumed to contain
+an C<SV*> and has its REFCNT incremented
+
+(This is now used as a subroutine by sv_magic.)
+
+       MAGIC * sv_magicext(SV* sv, SV* obj, int how, MGVTBL *vtbl, const char* name, I32 namlen        )
+
+=for hackers
+Found in file sv.c
+
+=item sv_mortalcopy
+
+Creates a new SV which is a copy of the original SV (using C<sv_setsv>).
+The new SV is marked as mortal. It will be destroyed "soon", either by an
+explicit call to FREETMPS, or by an implicit call at places such as
+statement boundaries.  See also C<sv_newmortal> and C<sv_2mortal>.
+
+       SV*     sv_mortalcopy(SV* oldsv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_newmortal
+
+Creates a new null SV which is mortal.  The reference count of the SV is
+set to 1. It will be destroyed "soon", either by an explicit call to
+FREETMPS, or by an implicit call at places such as statement boundaries.
+See also C<sv_mortalcopy> and C<sv_2mortal>.
+
+       SV*     sv_newmortal()
+
+=for hackers
+Found in file sv.c
+
+=item sv_newref
+
+Increment an SV's reference count. Use the C<SvREFCNT_inc()> wrapper
+instead.
+
+       SV*     sv_newref(SV* sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_nolocking
+
+Dummy routine which "locks" an SV when there is no locking module present.
+Exists to avoid test for a NULL function pointer and because it could potentially warn under
+some level of strict-ness.
+
+       void    sv_nolocking(SV *)
+
+=for hackers
+Found in file util.c
+
+=item sv_nosharing
+
+Dummy routine which "shares" an SV when there is no sharing module present.
+Exists to avoid test for a NULL function pointer and because it could potentially warn under
+some level of strict-ness.
+
+       void    sv_nosharing(SV *)
+
+=for hackers
+Found in file util.c
+
+=item sv_nounlocking
+
+Dummy routine which "unlocks" an SV when there is no locking module present.
+Exists to avoid test for a NULL function pointer and because it could potentially warn under
+some level of strict-ness.
+
+       void    sv_nounlocking(SV *)
+
+=for hackers
+Found in file util.c
+
+=item sv_nv
+
+A private implementation of the C<SvNVx> macro for compilers which can't
+cope with complex macro expressions. Always use the macro instead.
+
+       NV      sv_nv(SV* sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_pos_b2u
+
+Converts the value pointed to by offsetp from a count of bytes from the
+start of the string, to a count of the equivalent number of UTF8 chars.
+Handles magic and type coercion.
+
+       void    sv_pos_b2u(SV* sv, I32* offsetp)
+
+=for hackers
+Found in file sv.c
+
+=item sv_pos_u2b
+
+Converts the value pointed to by offsetp from a count of UTF8 chars from
+the start of the string, to a count of the equivalent number of bytes; if
+lenp is non-zero, it does the same to lenp, but this time starting from
+the offset, rather than from the start of the string. Handles magic and
+type coercion.
+
+       void    sv_pos_u2b(SV* sv, I32* offsetp, I32* lenp)
+
+=for hackers
+Found in file sv.c
+
+=item sv_pv
+
+Use the C<SvPV_nolen> macro instead
+
+       char*   sv_pv(SV *sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_pvbyte
+
+Use C<SvPVbyte_nolen> instead.
+
+       char*   sv_pvbyte(SV *sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_pvbyten
+
+A private implementation of the C<SvPVbyte> macro for compilers
+which can't cope with complex macro expressions. Always use the macro
+instead.
+
+       char*   sv_pvbyten(SV *sv, STRLEN *len)
+
+=for hackers
+Found in file sv.c
+
+=item sv_pvbyten_force
+
+A private implementation of the C<SvPVbytex_force> macro for compilers
+which can't cope with complex macro expressions. Always use the macro
+instead.
 
-       STRLEN  sv_len(SV* sv)
+       char*   sv_pvbyten_force(SV* sv, STRLEN* lp)
 
 =for hackers
 Found in file sv.c
 
-=item sv_len_utf8
+=item sv_pvn
 
-Returns the number of characters in the string in an SV, counting wide
-UTF8 bytes as a single character.
+A private implementation of the C<SvPV> macro for compilers which can't
+cope with complex macro expressions. Always use the macro instead.
 
-       STRLEN  sv_len_utf8(SV* sv)
+       char*   sv_pvn(SV *sv, STRLEN *len)
 
 =for hackers
 Found in file sv.c
 
-=item sv_magic
+=item sv_pvn_force
 
-Adds magic to an SV.
+Get a sensible string out of the SV somehow.
+A private implementation of the C<SvPV_force> macro for compilers which
+can't cope with complex macro expressions. Always use the macro instead.
 
-       void    sv_magic(SV* sv, SV* obj, int how, const char* name, I32 namlen)
+       char*   sv_pvn_force(SV* sv, STRLEN* lp)
 
 =for hackers
 Found in file sv.c
 
-=item sv_mortalcopy
+=item sv_pvn_force_flags
 
-Creates a new SV which is a copy of the original SV.  The new SV is marked
-as mortal.
+Get a sensible string out of the SV somehow.
+If C<flags> has C<SV_GMAGIC> bit set, will C<mg_get> on C<sv> if
+appropriate, else not. C<sv_pvn_force> and C<sv_pvn_force_nomg> are
+implemented in terms of this function.
+You normally want to use the various wrapper macros instead: see
+C<SvPV_force> and C<SvPV_force_nomg>
 
-       SV*     sv_mortalcopy(SV* oldsv)
+       char*   sv_pvn_force_flags(SV* sv, STRLEN* lp, I32 flags)
 
 =for hackers
 Found in file sv.c
 
-=item sv_newmortal
+=item sv_pvutf8
 
-Creates a new SV which is mortal.  The reference count of the SV is set to 1.
+Use the C<SvPVutf8_nolen> macro instead
 
-       SV*     sv_newmortal()
+       char*   sv_pvutf8(SV *sv)
 
 =for hackers
 Found in file sv.c
 
-=item sv_pvn_force
+=item sv_pvutf8n
 
-Get a sensible string out of the SV somehow.
+A private implementation of the C<SvPVutf8> macro for compilers
+which can't cope with complex macro expressions. Always use the macro
+instead.
 
-       char*   sv_pvn_force(SV* sv, STRLEN* lp)
+       char*   sv_pvutf8n(SV *sv, STRLEN *len)
 
 =for hackers
 Found in file sv.c
 
 =item sv_pvutf8n_force
 
-Get a sensible UTF8-encoded string out of the SV somehow. See
-L</sv_pvn_force>.
+A private implementation of the C<SvPVutf8_force> macro for compilers
+which can't cope with complex macro expressions. Always use the macro
+instead.
 
        char*   sv_pvutf8n_force(SV* sv, STRLEN* lp)
 
@@ -2821,15 +4081,42 @@ Found in file sv.c
 =item sv_replace
 
 Make the first argument a copy of the second, then delete the original.
+The target SV physically takes over ownership of the body of the source SV
+and inherits its flags; however, the target keeps any magic it owns,
+and any magic in the source is discarded.
+Note that this is a rather specialist SV copying operation; most of the
+time you'll want to use C<sv_setsv> or one of its many macro front-ends.
 
        void    sv_replace(SV* sv, SV* nsv)
 
 =for hackers
 Found in file sv.c
 
+=item sv_report_used
+
+Dump the contents of all SVs not yet freed. (Debugging aid).
+
+       void    sv_report_used()
+
+=for hackers
+Found in file sv.c
+
+=item sv_reset
+
+Underlying implementation for the C<reset> Perl function.
+Note that the perl-level function is vaguely deprecated.
+
+       void    sv_reset(char* s, HV* stash)
+
+=for hackers
+Found in file sv.c
+
 =item sv_rvweaken
 
-Weaken a reference.
+Weaken a reference: set the C<SvWEAKREF> flag on this RV; give the
+referred-to SV C<PERL_MAGIC_backref> magic if it hasn't already; and
+push a back-reference to this RV onto the array of backreferences
+associated with that magic.
 
        SV*     sv_rvweaken(SV *sv)
 
@@ -2838,8 +4125,8 @@ Found in file sv.c
 
 =item sv_setiv
 
-Copies an integer into the given SV.  Does not handle 'set' magic.  See
-C<sv_setiv_mg>.
+Copies an integer into the given SV, upgrading first if necessary.
+Does not handle 'set' magic.  See also C<sv_setiv_mg>.
 
        void    sv_setiv(SV* sv, IV num)
 
@@ -2857,8 +4144,8 @@ Found in file sv.c
 
 =item sv_setnv
 
-Copies a double into the given SV.  Does not handle 'set' magic.  See
-C<sv_setnv_mg>.
+Copies a double into the given SV, upgrading first if necessary.
+Does not handle 'set' magic.  See also C<sv_setnv_mg>.
 
        void    sv_setnv(SV* sv, NV num)
 
@@ -2903,25 +4190,6 @@ Like C<sv_setpvf>, but also handles 'set' magic.
 =for hackers
 Found in file sv.c
 
-=item sv_setpviv
-
-Copies an integer into the given SV, also updating its string value.
-Does not handle 'set' magic.  See C<sv_setpviv_mg>.
-
-       void    sv_setpviv(SV* sv, IV num)
-
-=for hackers
-Found in file sv.c
-
-=item sv_setpviv_mg
-
-Like C<sv_setpviv>, but also handles 'set' magic.
-
-       void    sv_setpviv_mg(SV *sv, IV iv)
-
-=for hackers
-Found in file sv.c
-
 =item sv_setpvn
 
 Copies a string into an SV.  The C<len> parameter indicates the number of
@@ -3026,16 +4294,44 @@ Found in file sv.c
 
 =item sv_setsv
 
-Copies the contents of the source SV C<ssv> into the destination SV C<dsv>.
-The source SV may be destroyed if it is mortal.  Does not handle 'set'
-magic.  See the macro forms C<SvSetSV>, C<SvSetSV_nosteal> and
-C<sv_setsv_mg>.
+Copies the contents of the source SV C<ssv> into the destination SV
+C<dsv>.  The source SV may be destroyed if it is mortal, so don't use this
+function if the source SV needs to be reused. Does not handle 'set' magic.
+Loosely speaking, it performs a copy-by-value, obliterating any previous
+content of the destination.
+
+You probably want to use one of the assortment of wrappers, such as
+C<SvSetSV>, C<SvSetSV_nosteal>, C<SvSetMagicSV> and
+C<SvSetMagicSV_nosteal>.
 
        void    sv_setsv(SV* dsv, SV* ssv)
 
 =for hackers
 Found in file sv.c
 
+=item sv_setsv_flags
+
+Copies the contents of the source SV C<ssv> into the destination SV
+C<dsv>.  The source SV may be destroyed if it is mortal, so don't use this
+function if the source SV needs to be reused. Does not handle 'set' magic.
+Loosely speaking, it performs a copy-by-value, obliterating any previous
+content of the destination.
+If the C<flags> parameter has the C<SV_GMAGIC> bit set, will C<mg_get> on
+C<ssv> if appropriate, else not. C<sv_setsv> and C<sv_setsv_nomg> are
+implemented in terms of this function.
+
+You probably want to use one of the assortment of wrappers, such as
+C<SvSetSV>, C<SvSetSV_nosteal>, C<SvSetMagicSV> and
+C<SvSetMagicSV_nosteal>.
+
+This is the primary function for copying scalars, and most other
+copy-ish functions and macros use this underneath.
+
+       void    sv_setsv_flags(SV* dsv, SV* ssv, I32 flags)
+
+=for hackers
+Found in file sv.c
+
 =item sv_setsv_mg
 
 Like C<sv_setsv>, but also handles 'set' magic.
@@ -3047,8 +4343,8 @@ Found in file sv.c
 
 =item sv_setuv
 
-Copies an unsigned integer into the given SV.  Does not handle 'set' magic.
-See C<sv_setuv_mg>.
+Copies an unsigned integer into the given SV, upgrading first if necessary.
+Does not handle 'set' magic.  See also C<sv_setuv_mg>.
 
        void    sv_setuv(SV* sv, UV num)
 
@@ -3064,9 +4360,27 @@ Like C<sv_setuv>, but also handles 'set' magic.
 =for hackers
 Found in file sv.c
 
+=item sv_taint
+
+Taint an SV. Use C<SvTAINTED_on> instead.
+       void    sv_taint(SV* sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_tainted
+
+Test an SV for taintedness. Use C<SvTAINTED> instead.
+       bool    sv_tainted(SV* sv)
+
+=for hackers
+Found in file sv.c
+
 =item sv_true
 
 Returns true if the SV has a true value by Perl's rules.
+Use the C<SvTRUE> macro instead, which may call C<sv_true()> or may
+instead use an in-line version.
 
        I32     sv_true(SV *sv)
 
@@ -3075,7 +4389,7 @@ Found in file sv.c
 
 =item sv_unmagic
 
-Removes magic from an SV.
+Removes all magic of type C<type> from an SV.
 
        int     sv_unmagic(SV* sv, int type)
 
@@ -3109,10 +4423,19 @@ See C<SvROK_off>.
 =for hackers
 Found in file sv.c
 
+=item sv_untaint
+
+Untaint an SV. Use C<SvTAINTED_off> instead.
+       void    sv_untaint(SV* sv)
+
+=for hackers
+Found in file sv.c
+
 =item sv_upgrade
 
-Upgrade an SV to a more complex form.  Use C<SvUPGRADE>.  See
-C<svtype>.
+Upgrade an SV to a more complex form.  Generally adds a new body type to the
+SV, then copies across as much information as possible from the old body.
+You generally want to use the C<SvUPGRADE> macro wrapper. See also C<svtype>.
 
        bool    sv_upgrade(SV* sv, U32 mt)
 
@@ -3143,6 +4466,20 @@ Like C<sv_usepvn>, but also handles 'set' magic.
 =for hackers
 Found in file sv.c
 
+=item sv_utf8_decode
+
+Convert the octets in the PV from UTF-8 to chars. Scan for validity and then
+turn off SvUTF8 if needed so that we see characters. Used as a building block
+for decode_utf8 in Encode.xs
+
+NOTE: this function is experimental and may change or be
+removed without notice.
+
+       bool    sv_utf8_decode(SV *sv)
+
+=for hackers
+Found in file sv.c
+
 =item sv_utf8_downgrade
 
 Attempt to convert the PV of an SV from UTF8-encoded to byte encoding.
@@ -3150,6 +4487,9 @@ This may not be possible if the PV contains non-byte encoding characters;
 if this is the case, either returns false or, if C<fail_ok> is not
 true, croaks.
 
+This is not as a general purpose Unicode to byte encoding interface:
+use the Encode extension for that.
+
 NOTE: this function is experimental and may change or be
 removed without notice.
 
@@ -3161,10 +4501,8 @@ Found in file sv.c
 =item sv_utf8_encode
 
 Convert the PV of an SV to UTF8-encoded, but then turn off the C<SvUTF8>
-flag so that it looks like bytes again. Nothing calls this.
-
-NOTE: this function is experimental and may change or be
-removed without notice.
+flag so that it looks like octets again. Used as a building block
+for encode_utf8 in Encode.xs
 
        void    sv_utf8_encode(SV *sv)
 
@@ -3174,63 +4512,396 @@ Found in file sv.c
 =item sv_utf8_upgrade
 
 Convert the PV of an SV to its UTF8-encoded form.
+Forces the SV to string form if it is not already.
+Always sets the SvUTF8 flag to avoid future validity checks even
+if all the bytes have hibit clear.
+
+This is not as a general purpose byte encoding to Unicode interface:
+use the Encode extension for that.
+
+       STRLEN  sv_utf8_upgrade(SV *sv)
+
+=for hackers
+Found in file sv.c
+
+=item sv_utf8_upgrade_flags
+
+Convert the PV of an SV to its UTF8-encoded form.
+Forces the SV to string form if it is not already.
+Always sets the SvUTF8 flag to avoid future validity checks even
+if all the bytes have hibit clear. If C<flags> has C<SV_GMAGIC> bit set,
+will C<mg_get> on C<sv> if appropriate, else not. C<sv_utf8_upgrade> and
+C<sv_utf8_upgrade_nomg> are implemented in terms of this function.
+
+This is not as a general purpose byte encoding to Unicode interface:
+use the Encode extension for that.
+
+       STRLEN  sv_utf8_upgrade_flags(SV *sv, I32 flags)
 
-       void    sv_utf8_upgrade(SV *sv)
+=for hackers
+Found in file sv.c
+
+=item sv_uv
+
+A private implementation of the C<SvUVx> macro for compilers which can't
+cope with complex macro expressions. Always use the macro instead.
+
+       UV      sv_uv(SV* sv)
 
 =for hackers
 Found in file sv.c
 
 =item sv_vcatpvfn
 
-Processes its arguments like C<vsprintf> and appends the formatted output
-to an SV.  Uses an array of SVs if the C style variable argument list is
-missing (NULL).  When running with taint checks enabled, indicates via
-C<maybe_tainted> if results are untrustworthy (often due to the use of
-locales).
+Processes its arguments like C<vsprintf> and appends the formatted output
+to an SV.  Uses an array of SVs if the C style variable argument list is
+missing (NULL).  When running with taint checks enabled, indicates via
+C<maybe_tainted> if results are untrustworthy (often due to the use of
+locales).
+
+Usually used via one of its frontends C<sv_catpvf> and C<sv_catpvf_mg>.
+
+       void    sv_vcatpvfn(SV* sv, const char* pat, STRLEN patlen, va_list* args, SV** svargs, I32 svmax, bool *maybe_tainted)
+
+=for hackers
+Found in file sv.c
+
+=item sv_vsetpvfn
+
+Works like C<vcatpvfn> but copies the text into the SV instead of
+appending it.
+
+Usually used via one of its frontends C<sv_setpvf> and C<sv_setpvf_mg>.
+
+       void    sv_vsetpvfn(SV* sv, const char* pat, STRLEN patlen, va_list* args, SV** svargs, I32 svmax, bool *maybe_tainted)
+
+=for hackers
+Found in file sv.c
+
+=item upg_version
+
+In-place upgrade of the supplied SV to a version object.
+
+    SV *sv = upg_version(SV *sv);
+
+Returns a pointer to the upgraded SV.
+
+       SV*     upg_version(SV *ver)
+
+=for hackers
+Found in file util.c
+
+=item vcmp
+
+Version object aware cmp.  Both operands must already have been 
+converted into version objects.
+
+       int     vcmp(SV *lvs, SV *rvs)
+
+=for hackers
+Found in file util.c
+
+=item vnumify
+
+Accepts a version object and returns the normalized floating
+point representation.  Call like:
+
+    sv = vnumify(rv);
+
+NOTE: you can pass either the object directly or the SV
+contained within the RV.
+
+       SV*     vnumify(SV *vs)
+
+=for hackers
+Found in file util.c
+
+=item vstringify
+
+Accepts a version object and returns the normalized string
+representation.  Call like:
+
+    sv = vstringify(rv);
+
+NOTE: you can pass either the object directly or the SV
+contained within the RV.
+
+       SV*     vstringify(SV *vs)
+
+=for hackers
+Found in file util.c
+
+
+=back
+
+=head1 Unicode Support
+
+=over 8
+
+=item bytes_from_utf8
+
+Converts a string C<s> of length C<len> from UTF8 into byte encoding.
+Unlike <utf8_to_bytes> but like C<bytes_to_utf8>, returns a pointer to
+the newly-created string, and updates C<len> to contain the new
+length.  Returns the original string if no conversion occurs, C<len>
+is unchanged. Do nothing if C<is_utf8> points to 0. Sets C<is_utf8> to
+0 if C<s> is converted or contains all 7bit characters.
+
+NOTE: this function is experimental and may change or be
+removed without notice.
+
+       U8*     bytes_from_utf8(U8 *s, STRLEN *len, bool *is_utf8)
+
+=for hackers
+Found in file utf8.c
+
+=item bytes_to_utf8
+
+Converts a string C<s> of length C<len> from ASCII into UTF8 encoding.
+Returns a pointer to the newly-created string, and sets C<len> to
+reflect the new length.
+
+NOTE: this function is experimental and may change or be
+removed without notice.
+
+       U8*     bytes_to_utf8(U8 *s, STRLEN *len)
+
+=for hackers
+Found in file utf8.c
+
+=item ibcmp_utf8
+
+Return true if the strings s1 and s2 differ case-insensitively, false
+if not (if they are equal case-insensitively).  If u1 is true, the
+string s1 is assumed to be in UTF-8-encoded Unicode.  If u2 is true,
+the string s2 is assumed to be in UTF-8-encoded Unicode.  If u1 or u2
+are false, the respective string is assumed to be in native 8-bit
+encoding.
+
+If the pe1 and pe2 are non-NULL, the scanning pointers will be copied
+in there (they will point at the beginning of the I<next> character).
+If the pointers behind pe1 or pe2 are non-NULL, they are the end
+pointers beyond which scanning will not continue under any
+circustances.  If the byte lengths l1 and l2 are non-zero, s1+l1 and
+s2+l2 will be used as goal end pointers that will also stop the scan,
+and which qualify towards defining a successful match: all the scans
+that define an explicit length must reach their goal pointers for
+a match to succeed).
+
+For case-insensitiveness, the "casefolding" of Unicode is used
+instead of upper/lowercasing both the characters, see
+http://www.unicode.org/unicode/reports/tr21/ (Case Mappings).
+
+       I32     ibcmp_utf8(const char* a, char **pe1, UV l1, bool u1, const char* b, char **pe2, UV l2, bool u2)
+
+=for hackers
+Found in file utf8.c
+
+=item is_utf8_char
+
+Tests if some arbitrary number of bytes begins in a valid UTF-8
+character.  Note that an INVARIANT (i.e. ASCII) character is a valid
+UTF-8 character.  The actual number of bytes in the UTF-8 character
+will be returned if it is valid, otherwise 0.
+
+       STRLEN  is_utf8_char(U8 *p)
+
+=for hackers
+Found in file utf8.c
+
+=item is_utf8_string
+
+Returns true if first C<len> bytes of the given string form a valid UTF8
+string, false otherwise.  Note that 'a valid UTF8 string' does not mean
+'a string that contains UTF8' because a valid ASCII string is a valid
+UTF8 string.
+
+       bool    is_utf8_string(U8 *s, STRLEN len)
+
+=for hackers
+Found in file utf8.c
+
+=item pv_uni_display
+
+Build to the scalar dsv a displayable version of the string spv,
+length len, the displayable version being at most pvlim bytes long
+(if longer, the rest is truncated and "..." will be appended).
+
+The flags argument can have UNI_DISPLAY_ISPRINT set to display
+isPRINT()able characters as themselves, UNI_DISPLAY_BACKSLASH
+to display the \\[nrfta\\] as the backslashed versions (like '\n')
+(UNI_DISPLAY_BACKSLASH is preferred over UNI_DISPLAY_ISPRINT for \\).
+UNI_DISPLAY_QQ (and its alias UNI_DISPLAY_REGEX) have both
+UNI_DISPLAY_BACKSLASH and UNI_DISPLAY_ISPRINT turned on.
+
+The pointer to the PV of the dsv is returned.
+
+       char*   pv_uni_display(SV *dsv, U8 *spv, STRLEN len, STRLEN pvlim, UV flags)
+
+=for hackers
+Found in file utf8.c
+
+=item sv_recode_to_utf8
+
+The encoding is assumed to be an Encode object, on entry the PV
+of the sv is assumed to be octets in that encoding, and the sv
+will be converted into Unicode (and UTF-8).
+
+If the sv already is UTF-8 (or if it is not POK), or if the encoding
+is not a reference, nothing is done to the sv.  If the encoding is not
+an C<Encode::XS> Encoding object, bad things will happen.
+(See F<lib/encoding.pm> and L<Encode>).
+
+The PV of the sv is returned.
+
+       char*   sv_recode_to_utf8(SV* sv, SV *encoding)
+
+=for hackers
+Found in file sv.c
+
+=item sv_uni_display
+
+Build to the scalar dsv a displayable version of the scalar sv,
+the displayable version being at most pvlim bytes long
+(if longer, the rest is truncated and "..." will be appended).
+
+The flags argument is as in pv_uni_display().
+
+The pointer to the PV of the dsv is returned.
+
+       char*   sv_uni_display(SV *dsv, SV *ssv, STRLEN pvlim, UV flags)
+
+=for hackers
+Found in file utf8.c
+
+=item to_utf8_case
+
+The "p" contains the pointer to the UTF-8 string encoding
+the character that is being converted.
+
+The "ustrp" is a pointer to the character buffer to put the
+conversion result to.  The "lenp" is a pointer to the length
+of the result.
+
+The "swashp" is a pointer to the swash to use.
+
+Both the special and normal mappings are stored lib/unicore/To/Foo.pl,
+and loaded by SWASHGET, using lib/utf8_heavy.pl.  The special (usually,
+but not always, a multicharacter mapping), is tried first.
+
+The "special" is a string like "utf8::ToSpecLower", which means the
+hash %utf8::ToSpecLower.  The access to the hash is through
+Perl_to_utf8_case().
+
+The "normal" is a string like "ToLower" which means the swash
+%utf8::ToLower.
+
+       UV      to_utf8_case(U8 *p, U8* ustrp, STRLEN *lenp, SV **swash, char *normal, char *special)
+
+=for hackers
+Found in file utf8.c
+
+=item to_utf8_fold
+
+Convert the UTF-8 encoded character at p to its foldcase version and
+store that in UTF-8 in ustrp and its length in bytes in lenp.  Note
+that the ustrp needs to be at least UTF8_MAXLEN_FOLD+1 bytes since the
+foldcase version may be longer than the original character (up to
+three characters).
+
+The first character of the foldcased version is returned
+(but note, as explained above, that there may be more.)
+
+       UV      to_utf8_fold(U8 *p, U8* ustrp, STRLEN *lenp)
+
+=for hackers
+Found in file utf8.c
+
+=item to_utf8_lower
+
+Convert the UTF-8 encoded character at p to its lowercase version and
+store that in UTF-8 in ustrp and its length in bytes in lenp.  Note
+that the ustrp needs to be at least UTF8_MAXLEN_UCLC+1 bytes since the
+lowercase version may be longer than the original character (up to two
+characters).
+
+The first character of the lowercased version is returned
+(but note, as explained above, that there may be more.)
 
-       void    sv_vcatpvfn(SV* sv, const char* pat, STRLEN patlen, va_list* args, SV** svargs, I32 svmax, bool *maybe_tainted)
+       UV      to_utf8_lower(U8 *p, U8* ustrp, STRLEN *lenp)
 
 =for hackers
-Found in file sv.c
+Found in file utf8.c
 
-=item sv_vsetpvfn
+=item to_utf8_title
 
-Works like C<vcatpvfn> but copies the text into the SV instead of
-appending it.
+Convert the UTF-8 encoded character at p to its titlecase version and
+store that in UTF-8 in ustrp and its length in bytes in lenp.  Note
+that the ustrp needs to be at least UTF8_MAXLEN_UCLC+1 bytes since the
+titlecase version may be longer than the original character (up to two
+characters).
 
-       void    sv_vsetpvfn(SV* sv, const char* pat, STRLEN patlen, va_list* args, SV** svargs, I32 svmax, bool *maybe_tainted)
+The first character of the titlecased version is returned
+(but note, as explained above, that there may be more.)
+
+       UV      to_utf8_title(U8 *p, U8* ustrp, STRLEN *lenp)
 
 =for hackers
-Found in file sv.c
+Found in file utf8.c
 
-=item THIS
+=item to_utf8_upper
 
-Variable which is setup by C<xsubpp> to designate the object in a C++ 
-XSUB.  This is always the proper type for the C++ object.  See C<CLASS> and 
-L<perlxs/"Using XS With C++">.
+Convert the UTF-8 encoded character at p to its uppercase version and
+store that in UTF-8 in ustrp and its length in bytes in lenp.  Note
+that the ustrp needs to be at least UTF8_MAXLEN_UCLC+1 bytes since the
+uppercase version may be longer than the original character (up to two
+characters).
 
-       (whatever)      THIS
+The first character of the uppercased version is returned
+(but note, as explained above, that there may be more.)
+
+       UV      to_utf8_upper(U8 *p, U8* ustrp, STRLEN *lenp)
 
 =for hackers
-Found in file XSUB.h
+Found in file utf8.c
 
-=item toLOWER
+=item utf8n_to_uvchr
 
-Converts the specified character to lowercase.
+Returns the native character value of the first character in the string C<s>
+which is assumed to be in UTF8 encoding; C<retlen> will be set to the
+length, in bytes, of that character.
 
-       char    toLOWER(char ch)
+Allows length and flags to be passed to low level routine.
+
+       UV      utf8n_to_uvchr(U8 *s, STRLEN curlen, STRLEN* retlen, U32 flags)
 
 =for hackers
-Found in file handy.h
+Found in file utf8.c
 
-=item toUPPER
+=item utf8n_to_uvuni
 
-Converts the specified character to uppercase.
+Bottom level UTF-8 decode routine.
+Returns the unicode code point value of the first character in the string C<s>
+which is assumed to be in UTF8 encoding and no longer than C<curlen>;
+C<retlen> will be set to the length, in bytes, of that character.
 
-       char    toUPPER(char ch)
+If C<s> does not point to a well-formed UTF8 character, the behaviour
+is dependent on the value of C<flags>: if it contains UTF8_CHECK_ONLY,
+it is assumed that the caller will raise a warning, and this function
+will silently just set C<retlen> to C<-1> and return zero.  If the
+C<flags> does not contain UTF8_CHECK_ONLY, warnings about
+malformations will be given, C<retlen> will be set to the expected
+length of the UTF-8 character in bytes, and zero will be returned.
+
+The C<flags> can also contain various flags to allow deviations from
+the strict UTF-8 encoding (see F<utf8.h>).
+
+Most code should use utf8_to_uvchr() rather than call this directly.
+
+       UV      utf8n_to_uvuni(U8 *s, STRLEN curlen, STRLEN* retlen, U32 flags)
 
 =for hackers
-Found in file handy.h
+Found in file utf8.c
 
 =item utf8_distance
 
@@ -3285,259 +4956,223 @@ removed without notice.
 =for hackers
 Found in file utf8.c
 
-=item utf8_to_uv
-
-Returns the character value of the first character in the string C<s>
-which is assumed to be in UTF8 encoding and no longer than C<curlen>;
-C<retlen> will be set to the length, in bytes, of that character.
+=item utf8_to_uvchr
 
-If C<s> does not point to a well-formed UTF8 character, the behaviour
-is dependent on the value of C<flags>: if it contains UTF8_CHECK_ONLY,
-it is assumed that the caller will raise a warning, and this function
-will silently just set C<retlen> to C<-1> and return zero.  If the
-C<flags> does not contain UTF8_CHECK_ONLY, warnings about
-malformations will be given, C<retlen> will be set to the expected
-length of the UTF-8 character in bytes, and zero will be returned.
+Returns the native character value of the first character in the string C<s>
+which is assumed to be in UTF8 encoding; C<retlen> will be set to the
+length, in bytes, of that character.
 
-The C<flags> can also contain various flags to allow deviations from
-the strict UTF-8 encoding (see F<utf8.h>).
+If C<s> does not point to a well-formed UTF8 character, zero is
+returned and retlen is set, if possible, to -1.
 
-       UV      utf8_to_uv(U8 *s, STRLEN curlen, STRLEN* retlen, U32 flags)
+       UV      utf8_to_uvchr(U8 *s, STRLEN* retlen)
 
 =for hackers
 Found in file utf8.c
 
-=item utf8_to_uv_simple
+=item utf8_to_uvuni
 
-Returns the character value of the first character in the string C<s>
+Returns the Unicode code point of the first character in the string C<s>
 which is assumed to be in UTF8 encoding; C<retlen> will be set to the
 length, in bytes, of that character.
 
+This function should only be used when returned UV is considered
+an index into the Unicode semantic tables (e.g. swashes).
+
 If C<s> does not point to a well-formed UTF8 character, zero is
 returned and retlen is set, if possible, to -1.
 
-       UV      utf8_to_uv_simple(U8 *s, STRLEN* retlen)
+       UV      utf8_to_uvuni(U8 *s, STRLEN* retlen)
 
 =for hackers
 Found in file utf8.c
 
-=item uv_to_utf8
+=item uvchr_to_utf8
 
-Adds the UTF8 representation of the Unicode codepoint C<uv> to the end
+Adds the UTF8 representation of the Native codepoint C<uv> to the end
 of the string C<d>; C<d> should be have at least C<UTF8_MAXLEN+1> free
 bytes available. The return value is the pointer to the byte after the
-end of the new character. In other words, 
+end of the new character. In other words,
 
-    d = uv_to_utf8(d, uv);
+    d = uvchr_to_utf8(d, uv);
 
-is the recommended Unicode-aware way of saying
+is the recommended wide native character-aware way of saying
 
     *(d++) = uv;
 
-       U8*     uv_to_utf8(U8 *d, UV uv)
+       U8*     uvchr_to_utf8(U8 *d, UV uv)
 
 =for hackers
 Found in file utf8.c
 
-=item warn
-
-This is the XSUB-writer's interface to Perl's C<warn> function.  Use this
-function the same way you use the C C<printf> function.  See
-C<croak>.
-
-       void    warn(const char* pat, ...)
-
-=for hackers
-Found in file util.c
-
-=item XPUSHi
-
-Push an integer onto the stack, extending the stack if necessary.  Handles
-'set' magic. See C<PUSHi>.
+=item uvuni_to_utf8_flags
 
-       void    XPUSHi(IV iv)
+Adds the UTF8 representation of the Unicode codepoint C<uv> to the end
+of the string C<d>; C<d> should be have at least C<UTF8_MAXLEN+1> free
+bytes available. The return value is the pointer to the byte after the
+end of the new character. In other words,
 
-=for hackers
-Found in file pp.h
+    d = uvuni_to_utf8_flags(d, uv, flags);
 
-=item XPUSHn
+or, in most cases,
 
-Push a double onto the stack, extending the stack if necessary.  Handles
-'set' magic.  See C<PUSHn>.
+    d = uvuni_to_utf8(d, uv);
 
-       void    XPUSHn(NV nv)
+(which is equivalent to)
 
-=for hackers
-Found in file pp.h
+    d = uvuni_to_utf8_flags(d, uv, 0);
 
-=item XPUSHp
+is the recommended Unicode-aware way of saying
 
-Push a string onto the stack, extending the stack if necessary.  The C<len>
-indicates the length of the string.  Handles 'set' magic.  See
-C<PUSHp>.
+    *(d++) = uv;
 
-       void    XPUSHp(char* str, STRLEN len)
+       U8*     uvuni_to_utf8_flags(U8 *d, UV uv, UV flags)
 
 =for hackers
-Found in file pp.h
-
-=item XPUSHs
-
-Push an SV onto the stack, extending the stack if necessary.  Does not
-handle 'set' magic.  See C<PUSHs>.
-
-       void    XPUSHs(SV* sv)
+Found in file utf8.c
 
-=for hackers
-Found in file pp.h
 
-=item XPUSHu
+=back
 
-Push an unsigned integer onto the stack, extending the stack if necessary.
-See C<PUSHu>.
+=head1 Variables created by C<xsubpp> and C<xsubpp> internal functions
 
-       void    XPUSHu(UV uv)
+=over 8
 
-=for hackers
-Found in file pp.h
+=item ax
 
-=item XS
+Variable which is setup by C<xsubpp> to indicate the stack base offset,
+used by the C<ST>, C<XSprePUSH> and C<XSRETURN> macros.  The C<dMARK> macro
+must be called prior to setup the C<MARK> variable.
 
-Macro to declare an XSUB and its C parameter list.  This is handled by
-C<xsubpp>.
+       I32     ax
 
 =for hackers
 Found in file XSUB.h
 
-=item XSRETURN
+=item CLASS
 
-Return from XSUB, indicating number of items on the stack.  This is usually
-handled by C<xsubpp>.
+Variable which is setup by C<xsubpp> to indicate the 
+class name for a C++ XS constructor.  This is always a C<char*>.  See C<THIS>.
 
-       void    XSRETURN(int nitems)
+       char*   CLASS
 
 =for hackers
 Found in file XSUB.h
 
-=item XSRETURN_EMPTY
+=item dAX
 
-Return an empty list from an XSUB immediately.
+Sets up the C<ax> variable.
+This is usually handled automatically by C<xsubpp> by calling C<dXSARGS>.
 
-               XSRETURN_EMPTY;
+               dAX;
 
 =for hackers
 Found in file XSUB.h
 
-=item XSRETURN_IV
+=item dITEMS
 
-Return an integer from an XSUB immediately.  Uses C<XST_mIV>.
+Sets up the C<items> variable.
+This is usually handled automatically by C<xsubpp> by calling C<dXSARGS>.
 
-       void    XSRETURN_IV(IV iv)
+               dITEMS;
 
 =for hackers
 Found in file XSUB.h
 
-=item XSRETURN_NO
+=item dXSARGS
 
-Return C<&PL_sv_no> from an XSUB immediately.  Uses C<XST_mNO>.
+Sets up stack and mark pointers for an XSUB, calling dSP and dMARK.
+Sets up the C<ax> and C<items> variables by calling C<dAX> and C<dITEMS>.
+This is usually handled automatically by C<xsubpp>.
 
-               XSRETURN_NO;
+               dXSARGS;
 
 =for hackers
 Found in file XSUB.h
 
-=item XSRETURN_NV
+=item dXSI32
 
-Return an double from an XSUB immediately.  Uses C<XST_mNV>.
+Sets up the C<ix> variable for an XSUB which has aliases.  This is usually
+handled automatically by C<xsubpp>.
 
-       void    XSRETURN_NV(NV nv)
+               dXSI32;
 
 =for hackers
 Found in file XSUB.h
 
-=item XSRETURN_PV
+=item items
 
-Return a copy of a string from an XSUB immediately.  Uses C<XST_mPV>.
+Variable which is setup by C<xsubpp> to indicate the number of 
+items on the stack.  See L<perlxs/"Variable-length Parameter Lists">.
 
-       void    XSRETURN_PV(char* str)
+       I32     items
 
 =for hackers
 Found in file XSUB.h
 
-=item XSRETURN_UNDEF
+=item ix
 
-Return C<&PL_sv_undef> from an XSUB immediately.  Uses C<XST_mUNDEF>.
+Variable which is setup by C<xsubpp> to indicate which of an 
+XSUB's aliases was used to invoke it.  See L<perlxs/"The ALIAS: Keyword">.
 
-               XSRETURN_UNDEF;
+       I32     ix
 
 =for hackers
 Found in file XSUB.h
 
-=item XSRETURN_YES
-
-Return C<&PL_sv_yes> from an XSUB immediately.  Uses C<XST_mYES>.
+=item newXSproto
 
-               XSRETURN_YES;
+Used by C<xsubpp> to hook up XSUBs as Perl subs.  Adds Perl prototypes to
+the subs.
 
 =for hackers
 Found in file XSUB.h
 
-=item XST_mIV
+=item RETVAL
 
-Place an integer into the specified position C<pos> on the stack.  The
-value is stored in a new mortal SV.
+Variable which is setup by C<xsubpp> to hold the return value for an 
+XSUB. This is always the proper type for the XSUB. See 
+L<perlxs/"The RETVAL Variable">.
 
-       void    XST_mIV(int pos, IV iv)
+       (whatever)      RETVAL
 
 =for hackers
 Found in file XSUB.h
 
-=item XST_mNO
+=item ST
 
-Place C<&PL_sv_no> into the specified position C<pos> on the
-stack.
+Used to access elements on the XSUB's stack.
 
-       void    XST_mNO(int pos)
+       SV*     ST(int ix)
 
 =for hackers
 Found in file XSUB.h
 
-=item XST_mNV
+=item THIS
 
-Place a double into the specified position C<pos> on the stack.  The value
-is stored in a new mortal SV.
+Variable which is setup by C<xsubpp> to designate the object in a C++ 
+XSUB.  This is always the proper type for the C++ object.  See C<CLASS> and 
+L<perlxs/"Using XS With C++">.
 
-       void    XST_mNV(int pos, NV nv)
+       (whatever)      THIS
 
 =for hackers
 Found in file XSUB.h
 
-=item XST_mPV
-
-Place a copy of a string into the specified position C<pos> on the stack. 
-The value is stored in a new mortal SV.
+=item XS
 
-       void    XST_mPV(int pos, char* str)
+Macro to declare an XSUB and its C parameter list.  This is handled by
+C<xsubpp>.
 
 =for hackers
 Found in file XSUB.h
 
-=item XST_mUNDEF
-
-Place C<&PL_sv_undef> into the specified position C<pos> on the
-stack.
-
-       void    XST_mUNDEF(int pos)
-
-=for hackers
-Found in file XSUB.h
+=item XSRETURN_EMPTY
 
-=item XST_mYES
+Return an empty list from an XSUB immediately.
 
-Place C<&PL_sv_yes> into the specified position C<pos> on the
-stack.
 
-       void    XST_mYES(int pos)
+               XSRETURN_EMPTY;
 
 =for hackers
 Found in file XSUB.h
@@ -3561,15 +5196,42 @@ C<xsubpp>.  See L<perlxs/"The VERSIONCHECK: Keyword">.
 =for hackers
 Found in file XSUB.h
 
-=item Zero
 
-The XSUB-writer's interface to the C C<memzero> function.  The C<dest> is the
-destination, C<nitems> is the number of items, and C<type> is the type.
+=back
 
-       void    Zero(void* dest, int nitems, type)
+=head1 Warning and Dieing
+
+=over 8
+
+=item croak
+
+This is the XSUB-writer's interface to Perl's C<die> function.
+Normally use this function the same way you use the C C<printf>
+function.  See C<warn>.
+
+If you want to throw an exception object, assign the object to
+C<$@> and then pass C<Nullch> to croak():
+
+   errsv = get_sv("@", TRUE);
+   sv_setsv(errsv, exception_object);
+   croak(Nullch);
+
+       void    croak(const char* pat, ...)
 
 =for hackers
-Found in file handy.h
+Found in file util.c
+
+=item warn
+
+This is the XSUB-writer's interface to Perl's C<warn> function.  Use this
+function the same way you use the C C<printf> function.  See
+C<croak>.
+
+       void    warn(const char* pat, ...)
+
+=for hackers
+Found in file util.c
+
 
 =back