perlio.c

   1 /*
   2  * perlio.c
   3  * Copyright (c) 1996-2006, Nick Ing-Simmons
   4  * Copyright (c) 2006, 2007, Larry Wall and others
   5  *
   6  * You may distribute under the terms of either the GNU General Public License
   7  * or the Artistic License, as specified in the README file.
   8  */
   9
  10 /*
  11  * Hour after hour for nearly three weary days he had jogged up and down,
  12  * over passes, and through long dales, and across many streams.
  13  */
  14
  15 /* This file contains the functions needed to implement PerlIO, which
  16  * is Perl's private replacement for the C stdio library. This is used
  17  * by default unless you compile with -Uuseperlio or run with
  18  * PERLIO=:stdio (but don't do this unless you know what you're doing)
  19  */
  20
  21 /*
  22  * If we have ActivePerl-like PERL_IMPLICIT_SYS then we need a dTHX to get
  23  * at the dispatch tables, even when we do not need it for other reasons.
  24  * Invent a dSYS macro to abstract this out
  25  */
  26 #ifdef PERL_IMPLICIT_SYS
  27 #define dSYS dTHX
  28 #else
  29 #define dSYS dNOOP
  30 #endif
  31
  32 #define VOIDUSED 1
  33 #ifdef PERL_MICRO
  34 #   include "uconfig.h"
  35 #else
  36 #   ifndef USE_CROSS_COMPILE
  37 #       include "config.h"
  38 #   else
  39 #       include "xconfig.h"
  40 #   endif
  41 #endif
  42
  43 #define PERLIO_NOT_STDIO 0
  44 #if !defined(PERLIO_IS_STDIO) && !defined(USE_SFIO)
  45 /*
  46  * #define PerlIO FILE
  47  */
  48 #endif
  49 /*
  50  * This file provides those parts of PerlIO abstraction
  51  * which are not #defined in perlio.h.
  52  * Which these are depends on various Configure #ifdef's
  53  */
  54
  55 #include "EXTERN.h"
  56 #define PERL_IN_PERLIO_C
  57 #include "perl.h"
  58
  59 #ifdef PERL_IMPLICIT_CONTEXT
  60 #undef dSYS
  61 #define dSYS dTHX
  62 #endif
  63
  64 #include "XSUB.h"
  65
  66 #ifdef __Lynx__
  67 /* Missing proto on LynxOS */
  68 int mkstemp(char*);
  69 #endif
  70
  71 /* Call the callback or PerlIOBase, and return failure. */
  72 #define Perl_PerlIO_or_Base(f, callback, base, failure, args)   \
  73         if (PerlIOValid(f)) {                                   \
  74                 const PerlIO_funcs * const tab = PerlIOBase(f)->tab;\
  75                 if (tab && tab->callback)                       \
  76                         return (*tab->callback) args;           \
  77                 else                                            \
  78                         return PerlIOBase_ ## base args;        \
  79         }                                                       \
  80         else                                                    \
  81                 SETERRNO(EBADF, SS_IVCHAN);                     \
  82         return failure
  83
  84 /* Call the callback or fail, and return failure. */
  85 #define Perl_PerlIO_or_fail(f, callback, failure, args)         \
  86         if (PerlIOValid(f)) {                                   \
  87                 const PerlIO_funcs * const tab = PerlIOBase(f)->tab;\
  88                 if (tab && tab->callback)                       \
  89                         return (*tab->callback) args;           \
  90                 SETERRNO(EINVAL, LIB_INVARG);                   \
  91         }                                                       \
  92         else                                                    \
  93                 SETERRNO(EBADF, SS_IVCHAN);                     \
  94         return failure
  95
  96 /* Call the callback or PerlIOBase, and be void. */
  97 #define Perl_PerlIO_or_Base_void(f, callback, base, args)       \
  98         if (PerlIOValid(f)) {                                   \
  99                 const PerlIO_funcs * const tab = PerlIOBase(f)->tab;\
 100                 if (tab && tab->callback)                       \
 101                         (*tab->callback) args;                  \
 102                 else                                            \
 103                         PerlIOBase_ ## base args;               \
 104         }                                                       \
 105         else                                                    \
 106                 SETERRNO(EBADF, SS_IVCHAN)
 107
 108 /* Call the callback or fail, and be void. */
 109 #define Perl_PerlIO_or_fail_void(f, callback, args)             \
 110         if (PerlIOValid(f)) {                                   \
 111                 const PerlIO_funcs * const tab = PerlIOBase(f)->tab;\
 112                 if (tab && tab->callback)                       \
 113                         (*tab->callback) args;                  \
 114                 else                                            \
 115                         SETERRNO(EINVAL, LIB_INVARG);           \
 116         }                                                       \
 117         else                                                    \
 118                 SETERRNO(EBADF, SS_IVCHAN)
 119
 120 #if defined(__osf__) && _XOPEN_SOURCE < 500
 121 extern int   fseeko(FILE *, off_t, int);
 122 extern off_t ftello(FILE *);
 123 #endif
 124
 125 #ifndef USE_SFIO
 126
 127 EXTERN_C int perlsio_binmode(FILE *fp, int iotype, int mode);
 128
 129 int
 130 perlsio_binmode(FILE *fp, int iotype, int mode)
 131 {
 132     /*
 133      * This used to be contents of do_binmode in doio.c
 134      */
 135 #ifdef DOSISH
 136 #  if defined(atarist) || defined(__MINT__)
 137     PERL_UNUSED_ARG(iotype);
 138     if (!fflush(fp)) {
 139         if (mode & O_BINARY)
 140             ((FILE *) fp)->_flag |= _IOBIN;
 141         else
 142             ((FILE *) fp)->_flag &= ~_IOBIN;
 143         return 1;
 144     }
 145     return 0;
 146 #  else
 147     dTHX;
 148     PERL_UNUSED_ARG(iotype);
 149 #ifdef NETWARE
 150     if (PerlLIO_setmode(fp, mode) != -1) {
 151 #else
 152     if (PerlLIO_setmode(fileno(fp), mode) != -1) {
 153 #endif
 154 #    if defined(WIN32) && defined(__BORLANDC__)
 155         /*
 156          * The translation mode of the stream is maintained independent
 157 of
 158          * the translation mode of the fd in the Borland RTL (heavy
 159          * digging through their runtime sources reveal).  User has to
 160 set
 161          * the mode explicitly for the stream (though they don't
 162 document
 163          * this anywhere). GSAR 97-5-24
 164          */
 165         fseek(fp, 0L, 0);
 166         if (mode & O_BINARY)
 167             fp->flags |= _F_BIN;
 168         else
 169             fp->flags &= ~_F_BIN;
 170 #    endif
 171         return 1;
 172     }
 173     else
 174         return 0;
 175 #  endif
 176 #else
 177 #  if defined(USEMYBINMODE)
 178     dTHX;
 179 #    if defined(__CYGWIN__)
 180     PERL_UNUSED_ARG(iotype);
 181 #    endif
 182     if (my_binmode(fp, iotype, mode) != FALSE)
 183         return 1;
 184     else
 185         return 0;
 186 #  else
 187     PERL_UNUSED_ARG(fp);
 188     PERL_UNUSED_ARG(iotype);
 189     PERL_UNUSED_ARG(mode);
 190     return 1;
 191 #  endif
 192 #endif
 193 }
 194 #endif /* sfio */
 195
 196 #ifndef O_ACCMODE
 197 #define O_ACCMODE 3             /* Assume traditional implementation */
 198 #endif
 199
 200 int
 201 PerlIO_intmode2str(int rawmode, char *mode, int *writing)
 202 {
 203     const int result = rawmode & O_ACCMODE;
 204     int ix = 0;
 205     int ptype;
 206     switch (result) {
 207     case O_RDONLY:
 208         ptype = IoTYPE_RDONLY;
 209         break;
 210     case O_WRONLY:
 211         ptype = IoTYPE_WRONLY;
 212         break;
 213     case O_RDWR:
 214     default:
 215         ptype = IoTYPE_RDWR;
 216         break;
 217     }
 218     if (writing)
 219         *writing = (result != O_RDONLY);
 220
 221     if (result == O_RDONLY) {
 222         mode[ix++] = 'r';
 223     }
 224 #ifdef O_APPEND
 225     else if (rawmode & O_APPEND) {
 226         mode[ix++] = 'a';
 227         if (result != O_WRONLY)
 228             mode[ix++] = '+';
 229     }
 230 #endif
 231     else {
 232         if (result == O_WRONLY)
 233             mode[ix++] = 'w';
 234         else {
 235             mode[ix++] = 'r';
 236             mode[ix++] = '+';
 237         }
 238     }
 239     if (rawmode & O_BINARY)
 240         mode[ix++] = 'b';
 241     mode[ix] = '\0';
 242     return ptype;
 243 }
 244
 245 #ifndef PERLIO_LAYERS
 246 int
 247 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
 248 {
 249     if (!names || !*names
 250         || strEQ(names, ":crlf")
 251         || strEQ(names, ":raw")
 252         || strEQ(names, ":bytes")
 253        ) {
 254         return 0;
 255     }
 256     Perl_croak(aTHX_ "Cannot apply \"%s\" in non-PerlIO perl", names);
 257     /*
 258      * NOTREACHED
 259      */
 260     return -1;
 261 }
 262
 263 void
 264 PerlIO_destruct(pTHX)
 265 {
 266 }
 267
 268 int
 269 PerlIO_binmode(pTHX_ PerlIO *fp, int iotype, int mode, const char *names)
 270 {
 271 #ifdef USE_SFIO
 272     PERL_UNUSED_ARG(iotype);
 273     PERL_UNUSED_ARG(mode);
 274     PERL_UNUSED_ARG(names);
 275     return 1;
 276 #else
 277     return perlsio_binmode(fp, iotype, mode);
 278 #endif
 279 }
 280
 281 PerlIO *
 282 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
 283 {
 284 #if defined(PERL_MICRO) || defined(__SYMBIAN32__)
 285     return NULL;
 286 #else
 287 #ifdef PERL_IMPLICIT_SYS
 288     return PerlSIO_fdupopen(f);
 289 #else
 290 #ifdef WIN32
 291     return win32_fdupopen(f);
 292 #else
 293     if (f) {
 294         const int fd = PerlLIO_dup(PerlIO_fileno(f));
 295         if (fd >= 0) {
 296             char mode[8];
 297 #ifdef DJGPP
 298             const int omode = djgpp_get_stream_mode(f);
 299 #else
 300             const int omode = fcntl(fd, F_GETFL);
 301 #endif
 302             PerlIO_intmode2str(omode,mode,NULL);
 303             /* the r+ is a hack */
 304             return PerlIO_fdopen(fd, mode);
 305         }
 306         return NULL;
 307     }
 308     else {
 309         SETERRNO(EBADF, SS_IVCHAN);
 310     }
 311 #endif
 312     return NULL;
 313 #endif
 314 #endif
 315 }
 316
 317
 318 /*
 319  * De-mux PerlIO_openn() into fdopen, freopen and fopen type entries
 320  */
 321
 322 PerlIO *
 323 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
 324              int imode, int perm, PerlIO *old, int narg, SV **args)
 325 {
 326     if (narg) {
 327         if (narg > 1) {
 328             Perl_croak(aTHX_ "More than one argument to open");
 329         }
 330         if (*args == &PL_sv_undef)
 331             return PerlIO_tmpfile();
 332         else {
 333             const char *name = SvPV_nolen_const(*args);
 334             if (*mode == IoTYPE_NUMERIC) {
 335                 fd = PerlLIO_open3(name, imode, perm);
 336                 if (fd >= 0)
 337                     return PerlIO_fdopen(fd, mode + 1);
 338             }
 339             else if (old) {
 340                 return PerlIO_reopen(name, mode, old);
 341             }
 342             else {
 343                 return PerlIO_open(name, mode);
 344             }
 345         }
 346     }
 347     else {
 348         return PerlIO_fdopen(fd, (char *) mode);
 349     }
 350     return NULL;
 351 }
 352
 353 XS(XS_PerlIO__Layer__find)
 354 {
 355     dXSARGS;
 356     if (items < 2)
 357         Perl_croak(aTHX_ "Usage class->find(name[,load])");
 358     else {
 359         const char * const name = SvPV_nolen_const(ST(1));
 360         ST(0) = (strEQ(name, "crlf")
 361                  || strEQ(name, "raw")) ? &PL_sv_yes : &PL_sv_undef;
 362         XSRETURN(1);
 363     }
 364 }
 365
 366
 367 void
 368 Perl_boot_core_PerlIO(pTHX)
 369 {
 370     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
 371 }
 372
 373 #endif
 374
 375
 376 #ifdef PERLIO_IS_STDIO
 377
 378 void
 379 PerlIO_init(pTHX)
 380 {
 381     PERL_UNUSED_CONTEXT;
 382     /*
 383      * Does nothing (yet) except force this file to be included in perl
 384      * binary. That allows this file to force inclusion of other functions
 385      * that may be required by loadable extensions e.g. for
 386      * FileHandle::tmpfile
 387      */
 388 }
 389
 390 #undef PerlIO_tmpfile
 391 PerlIO *
 392 PerlIO_tmpfile(void)
 393 {
 394     return tmpfile();
 395 }
 396
 397 #else                           /* PERLIO_IS_STDIO */
 398
 399 #ifdef USE_SFIO
 400
 401 #undef HAS_FSETPOS
 402 #undef HAS_FGETPOS
 403
 404 /*
 405  * This section is just to make sure these functions get pulled in from
 406  * libsfio.a
 407  */
 408
 409 #undef PerlIO_tmpfile
 410 PerlIO *
 411 PerlIO_tmpfile(void)
 412 {
 413     return sftmp(0);
 414 }
 415
 416 void
 417 PerlIO_init(pTHX)
 418 {
 419     PERL_UNUSED_CONTEXT;
 420     /*
 421      * Force this file to be included in perl binary. Which allows this
 422      * file to force inclusion of other functions that may be required by
 423      * loadable extensions e.g. for FileHandle::tmpfile
 424      */
 425
 426     /*
 427      * Hack sfio does its own 'autoflush' on stdout in common cases. Flush
 428      * results in a lot of lseek()s to regular files and lot of small
 429      * writes to pipes.
 430      */
 431     sfset(sfstdout, SF_SHARE, 0);
 432 }
 433
 434 /* This is not the reverse of PerlIO_exportFILE(), PerlIO_releaseFILE() is. */
 435 PerlIO *
 436 PerlIO_importFILE(FILE *stdio, const char *mode)
 437 {
 438     const int fd = fileno(stdio);
 439     if (!mode || !*mode) {
 440         mode = "r+";
 441     }
 442     return PerlIO_fdopen(fd, mode);
 443 }
 444
 445 FILE *
 446 PerlIO_findFILE(PerlIO *pio)
 447 {
 448     const int fd = PerlIO_fileno(pio);
 449     FILE * const f = fdopen(fd, "r+");
 450     PerlIO_flush(pio);
 451     if (!f && errno == EINVAL)
 452         f = fdopen(fd, "w");
 453     if (!f && errno == EINVAL)
 454         f = fdopen(fd, "r");
 455     return f;
 456 }
 457
 458
 459 #else                           /* USE_SFIO */
 460 /*======================================================================================*/
 461 /*
 462  * Implement all the PerlIO interface ourselves.
 463  */
 464
 465 #include "perliol.h"
 466
 467 /*
 468  * We _MUST_ have <unistd.h> if we are using lseek() and may have large
 469  * files
 470  */
 471 #ifdef I_UNISTD
 472 #include <unistd.h>
 473 #endif
 474 #ifdef HAS_MMAP
 475 #include <sys/mman.h>
 476 #endif
 477
 478 void
 479 PerlIO_debug(const char *fmt, ...)
 480 {
 481     va_list ap;
 482     dSYS;
 483     va_start(ap, fmt);
 484     if (!PL_perlio_debug_fd) {
 485         if (!PL_tainting && PL_uid == PL_euid && PL_gid == PL_egid) {
 486             const char * const s = PerlEnv_getenv("PERLIO_DEBUG");
 487             if (s && *s)
 488                 PL_perlio_debug_fd
 489                     = PerlLIO_open3(s, O_WRONLY | O_CREAT | O_APPEND, 0666);
 490             else
 491                 PL_perlio_debug_fd = -1;
 492         } else {
 493             /* tainting or set*id, so ignore the environment, and ensure we
 494                skip these tests next time through.  */
 495             PL_perlio_debug_fd = -1;
 496         }
 497     }
 498     if (PL_perlio_debug_fd > 0) {
 499         dTHX;
 500 #ifdef USE_ITHREADS
 501         const char * const s = CopFILE(PL_curcop);
 502         /* Use fixed buffer as sv_catpvf etc. needs SVs */
 503         char buffer[1024];
 504         const STRLEN len1 = my_snprintf(buffer, sizeof(buffer), "%.40s:%" IVdf " ", s ? s : "(none)", (IV) CopLINE(PL_curcop));
 505         const STRLEN len2 = my_vsnprintf(buffer + len1, sizeof(buffer) - len1, fmt, ap);
 506         PerlLIO_write(PL_perlio_debug_fd, buffer, len1 + len2);
 507 #else
 508         const char *s = CopFILE(PL_curcop);
 509         STRLEN len;
 510         SV * const sv = newSVpvs("");
 511         Perl_sv_catpvf(aTHX_ sv, "%s:%" IVdf " ", s ? s : "(none)",
 512                        (IV) CopLINE(PL_curcop));
 513         Perl_sv_vcatpvf(aTHX_ sv, fmt, &ap);
 514
 515         s = SvPV_const(sv, len);
 516         PerlLIO_write(PL_perlio_debug_fd, s, len);
 517         SvREFCNT_dec(sv);
 518 #endif
 519     }
 520     va_end(ap);
 521 }
 522
 523 /*--------------------------------------------------------------------------------------*/
 524
 525 /*
 526  * Inner level routines
 527  */
 528
 529 /*
 530  * Table of pointers to the PerlIO structs (malloc'ed)
 531  */
 532 #define PERLIO_TABLE_SIZE 64
 533
 534 PerlIO *
 535 PerlIO_allocate(pTHX)
 536 {
 537     dVAR;
 538     /*
 539      * Find a free slot in the table, allocating new table as necessary
 540      */
 541     PerlIO **last;
 542     PerlIO *f;
 543     last = &PL_perlio;
 544     while ((f = *last)) {
 545         int i;
 546         last = (PerlIO **) (f);
 547         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 548             if (!*++f) {
 549                 return f;
 550             }
 551         }
 552     }
 553     Newxz(f,PERLIO_TABLE_SIZE,PerlIO);
 554     if (!f) {
 555         return NULL;
 556     }
 557     *last = f;
 558     return f + 1;
 559 }
 560
 561 #undef PerlIO_fdupopen
 562 PerlIO *
 563 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
 564 {
 565     if (PerlIOValid(f)) {
 566         const PerlIO_funcs * const tab = PerlIOBase(f)->tab;
 567         PerlIO_debug("fdupopen f=%p param=%p\n",(void*)f,(void*)param);
 568         if (tab && tab->Dup)
 569              return (*tab->Dup)(aTHX_ PerlIO_allocate(aTHX), f, param, flags);
 570         else {
 571              return PerlIOBase_dup(aTHX_ PerlIO_allocate(aTHX), f, param, flags);
 572         }
 573     }
 574     else
 575          SETERRNO(EBADF, SS_IVCHAN);
 576
 577     return NULL;
 578 }
 579
 580 void
 581 PerlIO_cleantable(pTHX_ PerlIO **tablep)
 582 {
 583     PerlIO * const table = *tablep;
 584     if (table) {
 585         int i;
 586         PerlIO_cleantable(aTHX_(PerlIO **) & (table[0]));
 587         for (i = PERLIO_TABLE_SIZE - 1; i > 0; i--) {
 588             PerlIO * const f = table + i;
 589             if (*f) {
 590                 PerlIO_close(f);
 591             }
 592         }
 593         Safefree(table);
 594         *tablep = NULL;
 595     }
 596 }
 597
 598
 599 PerlIO_list_t *
 600 PerlIO_list_alloc(pTHX)
 601 {
 602     PerlIO_list_t *list;
 603     PERL_UNUSED_CONTEXT;
 604     Newxz(list, 1, PerlIO_list_t);
 605     list->refcnt = 1;
 606     return list;
 607 }
 608
 609 void
 610 PerlIO_list_free(pTHX_ PerlIO_list_t *list)
 611 {
 612     if (list) {
 613         if (--list->refcnt == 0) {
 614             if (list->array) {
 615                 IV i;
 616                 for (i = 0; i < list->cur; i++) {
 617                     if (list->array[i].arg)
 618                         SvREFCNT_dec(list->array[i].arg);
 619                 }
 620                 Safefree(list->array);
 621             }
 622             Safefree(list);
 623         }
 624     }
 625 }
 626
 627 void
 628 PerlIO_list_push(pTHX_ PerlIO_list_t *list, PerlIO_funcs *funcs, SV *arg)
 629 {
 630     dVAR;
 631     PerlIO_pair_t *p;
 632     PERL_UNUSED_CONTEXT;
 633
 634     if (list->cur >= list->len) {
 635         list->len += 8;
 636         if (list->array)
 637             Renew(list->array, list->len, PerlIO_pair_t);
 638         else
 639             Newx(list->array, list->len, PerlIO_pair_t);
 640     }
 641     p = &(list->array[list->cur++]);
 642     p->funcs = funcs;
 643     if ((p->arg = arg)) {
 644         SvREFCNT_inc_simple_void_NN(arg);
 645     }
 646 }
 647
 648 PerlIO_list_t *
 649 PerlIO_clone_list(pTHX_ PerlIO_list_t *proto, CLONE_PARAMS *param)
 650 {
 651     PerlIO_list_t *list = NULL;
 652     if (proto) {
 653         int i;
 654         list = PerlIO_list_alloc(aTHX);
 655         for (i=0; i < proto->cur; i++) {
 656             SV *arg = proto->array[i].arg;
 657 #ifdef sv_dup
 658             if (arg && param)
 659                 arg = sv_dup(arg, param);
 660 #else
 661             PERL_UNUSED_ARG(param);
 662 #endif
 663             PerlIO_list_push(aTHX_ list, proto->array[i].funcs, arg);
 664         }
 665     }
 666     return list;
 667 }
 668
 669 void
 670 PerlIO_clone(pTHX_ PerlInterpreter *proto, CLONE_PARAMS *param)
 671 {
 672 #ifdef USE_ITHREADS
 673     PerlIO **table = &proto->Iperlio;
 674     PerlIO *f;
 675     PL_perlio = NULL;
 676     PL_known_layers = PerlIO_clone_list(aTHX_ proto->Iknown_layers, param);
 677     PL_def_layerlist = PerlIO_clone_list(aTHX_ proto->Idef_layerlist, param);
 678     PerlIO_allocate(aTHX); /* root slot is never used */
 679     PerlIO_debug("Clone %p from %p\n",(void*)aTHX,(void*)proto);
 680     while ((f = *table)) {
 681             int i;
 682             table = (PerlIO **) (f++);
 683             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 684                 if (*f) {
 685                     (void) fp_dup(f, 0, param);
 686                 }
 687                 f++;
 688             }
 689         }
 690 #else
 691     PERL_UNUSED_CONTEXT;
 692     PERL_UNUSED_ARG(proto);
 693     PERL_UNUSED_ARG(param);
 694 #endif
 695 }
 696
 697 void
 698 PerlIO_destruct(pTHX)
 699 {
 700     dVAR;
 701     PerlIO **table = &PL_perlio;
 702     PerlIO *f;
 703 #ifdef USE_ITHREADS
 704     PerlIO_debug("Destruct %p\n",(void*)aTHX);
 705 #endif
 706     while ((f = *table)) {
 707         int i;
 708         table = (PerlIO **) (f++);
 709         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 710             PerlIO *x = f;
 711             const PerlIOl *l;
 712             while ((l = *x)) {
 713                 if (l->tab->kind & PERLIO_K_DESTRUCT) {
 714                     PerlIO_debug("Destruct popping %s\n", l->tab->name);
 715                     PerlIO_flush(x);
 716                     PerlIO_pop(aTHX_ x);
 717                 }
 718                 else {
 719                     x = PerlIONext(x);
 720                 }
 721             }
 722             f++;
 723         }
 724     }
 725 }
 726
 727 void
 728 PerlIO_pop(pTHX_ PerlIO *f)
 729 {
 730     const PerlIOl *l = *f;
 731     if (l) {
 732         PerlIO_debug("PerlIO_pop f=%p %s\n", (void*)f, l->tab->name);
 733         if (l->tab->Popped) {
 734             /*
 735              * If popped returns non-zero do not free its layer structure
 736              * it has either done so itself, or it is shared and still in
 737              * use
 738              */
 739             if ((*l->tab->Popped) (aTHX_ f) != 0)
 740                 return;
 741         }
 742         *f = l->next;
 743         Safefree(l);
 744     }
 745 }
 746
 747 /* Return as an array the stack of layers on a filehandle.  Note that
 748  * the stack is returned top-first in the array, and there are three
 749  * times as many array elements as there are layers in the stack: the
 750  * first element of a layer triplet is the name, the second one is the
 751  * arguments, and the third one is the flags. */
 752
 753 AV *
 754 PerlIO_get_layers(pTHX_ PerlIO *f)
 755 {
 756     dVAR;
 757     AV * const av = newAV();
 758
 759     if (PerlIOValid(f)) {
 760         PerlIOl *l = PerlIOBase(f);
 761
 762         while (l) {
 763             SV * const name = l->tab && l->tab->name ?
 764             newSVpv(l->tab->name, 0) : &PL_sv_undef;
 765             SV * const arg = l->tab && l->tab->Getarg ?
 766             (*l->tab->Getarg)(aTHX_ &l, 0, 0) : &PL_sv_undef;
 767             av_push(av, name);
 768             av_push(av, arg);
 769             av_push(av, newSViv((IV)l->flags));
 770             l = l->next;
 771         }
 772     }
 773
 774     return av;
 775 }
 776
 777 /*--------------------------------------------------------------------------------------*/
 778 /*
 779  * XS Interface for perl code
 780  */
 781
 782 PerlIO_funcs *
 783 PerlIO_find_layer(pTHX_ const char *name, STRLEN len, int load)
 784 {
 785     dVAR;
 786     IV i;
 787     if ((SSize_t) len <= 0)
 788         len = strlen(name);
 789     for (i = 0; i < PL_known_layers->cur; i++) {
 790         PerlIO_funcs * const f = PL_known_layers->array[i].funcs;
 791         if (memEQ(f->name, name, len) && f->name[len] == 0) {
 792             PerlIO_debug("%.*s => %p\n", (int) len, name, (void*)f);
 793             return f;
 794         }
 795     }
 796     if (load && PL_subname && PL_def_layerlist
 797         && PL_def_layerlist->cur >= 2) {
 798         if (PL_in_load_module) {
 799             Perl_croak(aTHX_ "Recursive call to Perl_load_module in PerlIO_find_layer");
 800             return NULL;
 801         } else {
 802             SV * const pkgsv = newSVpvs("PerlIO");
 803             SV * const layer = newSVpvn(name, len);
 804             CV * const cv    = Perl_get_cvn_flags(aTHX_ STR_WITH_LEN("PerlIO::Layer::NoWarnings"), 0);
 805             ENTER;
 806             SAVEINT(PL_in_load_module);
 807             if (cv) {
 808                 SAVEGENERICSV(PL_warnhook);
 809                 PL_warnhook = (SV *) (SvREFCNT_inc_simple_NN(cv));
 810             }
 811             PL_in_load_module++;
 812             /*
 813              * The two SVs are magically freed by load_module
 814              */
 815             Perl_load_module(aTHX_ 0, pkgsv, NULL, layer, NULL);
 816             PL_in_load_module--;
 817             LEAVE;
 818             return PerlIO_find_layer(aTHX_ name, len, 0);
 819         }
 820     }
 821     PerlIO_debug("Cannot find %.*s\n", (int) len, name);
 822     return NULL;
 823 }
 824
 825 #ifdef USE_ATTRIBUTES_FOR_PERLIO
 826
 827 static int
 828 perlio_mg_set(pTHX_ SV *sv, MAGIC *mg)
 829 {
 830     if (SvROK(sv)) {
 831         IO * const io = GvIOn((GV *) SvRV(sv));
 832         PerlIO * const ifp = IoIFP(io);
 833         PerlIO * const ofp = IoOFP(io);
 834         Perl_warn(aTHX_ "set %" SVf " %p %p %p",
 835                   SVfARG(sv), (void*)io, (void*)ifp, (void*)ofp);
 836     }
 837     return 0;
 838 }
 839
 840 static int
 841 perlio_mg_get(pTHX_ SV *sv, MAGIC *mg)
 842 {
 843     if (SvROK(sv)) {
 844         IO * const io = GvIOn((GV *) SvRV(sv));
 845         PerlIO * const ifp = IoIFP(io);
 846         PerlIO * const ofp = IoOFP(io);
 847         Perl_warn(aTHX_ "get %" SVf " %p %p %p",
 848                   SVfARG(sv), (void*)io, (void*)ifp, (void*)ofp);
 849     }
 850     return 0;
 851 }
 852
 853 static int
 854 perlio_mg_clear(pTHX_ SV *sv, MAGIC *mg)
 855 {
 856     Perl_warn(aTHX_ "clear %" SVf, SVfARG(sv));
 857     return 0;
 858 }
 859
 860 static int
 861 perlio_mg_free(pTHX_ SV *sv, MAGIC *mg)
 862 {
 863     Perl_warn(aTHX_ "free %" SVf, SVfARG(sv));
 864     return 0;
 865 }
 866
 867 MGVTBL perlio_vtab = {
 868     perlio_mg_get,
 869     perlio_mg_set,
 870     NULL,                       /* len */
 871     perlio_mg_clear,
 872     perlio_mg_free
 873 };
 874
 875 XS(XS_io_MODIFY_SCALAR_ATTRIBUTES)
 876 {
 877     dXSARGS;
 878     SV * const sv = SvRV(ST(1));
 879     AV * const av = newAV();
 880     MAGIC *mg;
 881     int count = 0;
 882     int i;
 883     sv_magic(sv, (SV *) av, PERL_MAGIC_ext, NULL, 0);
 884     SvRMAGICAL_off(sv);
 885     mg = mg_find(sv, PERL_MAGIC_ext);
 886     mg->mg_virtual = &perlio_vtab;
 887     mg_magical(sv);
 888     Perl_warn(aTHX_ "attrib %" SVf, SVfARG(sv));
 889     for (i = 2; i < items; i++) {
 890         STRLEN len;
 891         const char * const name = SvPV_const(ST(i), len);
 892         SV * const layer = PerlIO_find_layer(aTHX_ name, len, 1);
 893         if (layer) {
 894             av_push(av, SvREFCNT_inc_simple_NN(layer));
 895         }
 896         else {
 897             ST(count) = ST(i);
 898             count++;
 899         }
 900     }
 901     SvREFCNT_dec(av);
 902     XSRETURN(count);
 903 }
 904
 905 #endif                          /* USE_ATTIBUTES_FOR_PERLIO */
 906
 907 SV *
 908 PerlIO_tab_sv(pTHX_ PerlIO_funcs *tab)
 909 {
 910     HV * const stash = gv_stashpvs("PerlIO::Layer", GV_ADD);
 911     SV * const sv = sv_bless(newRV_noinc(newSViv(PTR2IV(tab))), stash);
 912     return sv;
 913 }
 914
 915 XS(XS_PerlIO__Layer__NoWarnings)
 916 {
 917     /* This is used as a %SIG{__WARN__} handler to supress warnings
 918        during loading of layers.
 919      */
 920     dVAR;
 921     dXSARGS;
 922     PERL_UNUSED_ARG(cv);
 923     if (items)
 924         PerlIO_debug("warning:%s\n",SvPV_nolen_const(ST(0)));
 925     XSRETURN(0);
 926 }
 927
 928 XS(XS_PerlIO__Layer__find)
 929 {
 930     dVAR;
 931     dXSARGS;
 932     PERL_UNUSED_ARG(cv);
 933     if (items < 2)
 934         Perl_croak(aTHX_ "Usage class->find(name[,load])");
 935     else {
 936         STRLEN len;
 937         const char * const name = SvPV_const(ST(1), len);
 938         const bool load = (items > 2) ? SvTRUE(ST(2)) : 0;
 939         PerlIO_funcs * const layer = PerlIO_find_layer(aTHX_ name, len, load);
 940         ST(0) =
 941             (layer) ? sv_2mortal(PerlIO_tab_sv(aTHX_ layer)) :
 942             &PL_sv_undef;
 943         XSRETURN(1);
 944     }
 945 }
 946
 947 void
 948 PerlIO_define_layer(pTHX_ PerlIO_funcs *tab)
 949 {
 950     dVAR;
 951     if (!PL_known_layers)
 952         PL_known_layers = PerlIO_list_alloc(aTHX);
 953     PerlIO_list_push(aTHX_ PL_known_layers, tab, NULL);
 954     PerlIO_debug("define %s %p\n", tab->name, (void*)tab);
 955 }
 956
 957 int
 958 PerlIO_parse_layers(pTHX_ PerlIO_list_t *av, const char *names)
 959 {
 960     dVAR;
 961     if (names) {
 962         const char *s = names;
 963         while (*s) {
 964             while (isSPACE(*s) || *s == ':')
 965                 s++;
 966             if (*s) {
 967                 STRLEN llen = 0;
 968                 const char *e = s;
 969                 const char *as = NULL;
 970                 STRLEN alen = 0;
 971                 if (!isIDFIRST(*s)) {
 972                     /*
 973                      * Message is consistent with how attribute lists are
 974                      * passed. Even though this means "foo : : bar" is
 975                      * seen as an invalid separator character.
 976                      */
 977                     const char q = ((*s == '\'') ? '"' : '\'');
 978                     if (ckWARN(WARN_LAYER))
 979                         Perl_warner(aTHX_ packWARN(WARN_LAYER),
 980                               "Invalid separator character %c%c%c in PerlIO layer specification %s",
 981                               q, *s, q, s);
 982                     SETERRNO(EINVAL, LIB_INVARG);
 983                     return -1;
 984                 }
 985                 do {
 986                     e++;
 987                 } while (isALNUM(*e));
 988                 llen = e - s;
 989                 if (*e == '(') {
 990                     int nesting = 1;
 991                     as = ++e;
 992                     while (nesting) {
 993                         switch (*e++) {
 994                         case ')':
 995                             if (--nesting == 0)
 996                                 alen = (e - 1) - as;
 997                             break;
 998                         case '(':
 999                             ++nesting;
1000                             break;
1001                         case '\\':
1002                             /*
1003                              * It's a nul terminated string, not allowed
1004                              * to \ the terminating null. Anything other
1005                              * character is passed over.
1006                              */
1007                             if (*e++) {
1008                                 break;
1009                             }
1010                             /*
1011                              * Drop through
1012                              */
1013                         case '\0':
1014                             e--;
1015                             if (ckWARN(WARN_LAYER))
1016                                 Perl_warner(aTHX_ packWARN(WARN_LAYER),
1017                                       "Argument list not closed for PerlIO layer \"%.*s\"",
1018                                       (int) (e - s), s);
1019                             return -1;
1020                         default:
1021                             /*
1022                              * boring.
1023                              */
1024                             break;
1025                         }
1026                     }
1027                 }
1028                 if (e > s) {
1029                     PerlIO_funcs * const layer =
1030                         PerlIO_find_layer(aTHX_ s, llen, 1);
1031                     if (layer) {
1032                         SV *arg = NULL;
1033                         if (as)
1034                             arg = newSVpvn(as, alen);
1035                         PerlIO_list_push(aTHX_ av, layer,
1036                                          (arg) ? arg : &PL_sv_undef);
1037                         if (arg)
1038                             SvREFCNT_dec(arg);
1039                     }
1040                     else {
1041                         if (ckWARN(WARN_LAYER))
1042                             Perl_warner(aTHX_ packWARN(WARN_LAYER), "Unknown PerlIO layer \"%.*s\"",
1043                                   (int) llen, s);
1044                         return -1;
1045                     }
1046                 }
1047                 s = e;
1048             }
1049         }
1050     }
1051     return 0;
1052 }
1053
1054 void
1055 PerlIO_default_buffer(pTHX_ PerlIO_list_t *av)
1056 {
1057     dVAR;
1058     PERLIO_FUNCS_DECL(*tab) = &PerlIO_perlio;
1059 #ifdef PERLIO_USING_CRLF
1060     tab = &PerlIO_crlf;
1061 #else
1062     if (PerlIO_stdio.Set_ptrcnt)
1063         tab = &PerlIO_stdio;
1064 #endif
1065     PerlIO_debug("Pushing %s\n", tab->name);
1066     PerlIO_list_push(aTHX_ av, PerlIO_find_layer(aTHX_ tab->name, 0, 0),
1067                      &PL_sv_undef);
1068 }
1069
1070 SV *
1071 PerlIO_arg_fetch(PerlIO_list_t *av, IV n)
1072 {
1073     return av->array[n].arg;
1074 }
1075
1076 PerlIO_funcs *
1077 PerlIO_layer_fetch(pTHX_ PerlIO_list_t *av, IV n, PerlIO_funcs *def)
1078 {
1079     if (n >= 0 && n < av->cur) {
1080         PerlIO_debug("Layer %" IVdf " is %s\n", n,
1081                      av->array[n].funcs->name);
1082         return av->array[n].funcs;
1083     }
1084     if (!def)
1085         Perl_croak(aTHX_ "panic: PerlIO layer array corrupt");
1086     return def;
1087 }
1088
1089 IV
1090 PerlIOPop_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1091 {
1092     PERL_UNUSED_ARG(mode);
1093     PERL_UNUSED_ARG(arg);
1094     PERL_UNUSED_ARG(tab);
1095     if (PerlIOValid(f)) {
1096         PerlIO_flush(f);
1097         PerlIO_pop(aTHX_ f);
1098         return 0;
1099     }
1100     return -1;
1101 }
1102
1103 PERLIO_FUNCS_DECL(PerlIO_remove) = {
1104     sizeof(PerlIO_funcs),
1105     "pop",
1106     0,
1107     PERLIO_K_DUMMY | PERLIO_K_UTF8,
1108     PerlIOPop_pushed,
1109     NULL,
1110     NULL,
1111     NULL,
1112     NULL,
1113     NULL,
1114     NULL,
1115     NULL,
1116     NULL,
1117     NULL,
1118     NULL,
1119     NULL,
1120     NULL,
1121     NULL,                       /* flush */
1122     NULL,                       /* fill */
1123     NULL,
1124     NULL,
1125     NULL,
1126     NULL,
1127     NULL,                       /* get_base */
1128     NULL,                       /* get_bufsiz */
1129     NULL,                       /* get_ptr */
1130     NULL,                       /* get_cnt */
1131     NULL,                       /* set_ptrcnt */
1132 };
1133
1134 PerlIO_list_t *
1135 PerlIO_default_layers(pTHX)
1136 {
1137     dVAR;
1138     if (!PL_def_layerlist) {
1139         const char * const s = (PL_tainting) ? NULL : PerlEnv_getenv("PERLIO");
1140         PERLIO_FUNCS_DECL(*osLayer) = &PerlIO_unix;
1141         PL_def_layerlist = PerlIO_list_alloc(aTHX);
1142         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_unix));
1143 #if defined(WIN32)
1144         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_win32));
1145 #if 0
1146         osLayer = &PerlIO_win32;
1147 #endif
1148 #endif
1149         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_raw));
1150         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_perlio));
1151         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_stdio));
1152         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_crlf));
1153 #ifdef HAS_MMAP
1154         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_mmap));
1155 #endif
1156         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_utf8));
1157         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_remove));
1158         PerlIO_define_layer(aTHX_ PERLIO_FUNCS_CAST(&PerlIO_byte));
1159         PerlIO_list_push(aTHX_ PL_def_layerlist,
1160                          PerlIO_find_layer(aTHX_ osLayer->name, 0, 0),
1161                          &PL_sv_undef);
1162         if (s) {
1163             PerlIO_parse_layers(aTHX_ PL_def_layerlist, s);
1164         }
1165         else {
1166             PerlIO_default_buffer(aTHX_ PL_def_layerlist);
1167         }
1168     }
1169     if (PL_def_layerlist->cur < 2) {
1170         PerlIO_default_buffer(aTHX_ PL_def_layerlist);
1171     }
1172     return PL_def_layerlist;
1173 }
1174
1175 void
1176 Perl_boot_core_PerlIO(pTHX)
1177 {
1178 #ifdef USE_ATTRIBUTES_FOR_PERLIO
1179     newXS("io::MODIFY_SCALAR_ATTRIBUTES", XS_io_MODIFY_SCALAR_ATTRIBUTES,
1180           __FILE__);
1181 #endif
1182     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
1183     newXS("PerlIO::Layer::NoWarnings", XS_PerlIO__Layer__NoWarnings, __FILE__);
1184 }
1185
1186 PerlIO_funcs *
1187 PerlIO_default_layer(pTHX_ I32 n)
1188 {
1189     dVAR;
1190     PerlIO_list_t * const av = PerlIO_default_layers(aTHX);
1191     if (n < 0)
1192         n += av->cur;
1193     return PerlIO_layer_fetch(aTHX_ av, n, PERLIO_FUNCS_CAST(&PerlIO_stdio));
1194 }
1195
1196 #define PerlIO_default_top() PerlIO_default_layer(aTHX_ -1)
1197 #define PerlIO_default_btm() PerlIO_default_layer(aTHX_ 0)
1198
1199 void
1200 PerlIO_stdstreams(pTHX)
1201 {
1202     dVAR;
1203     if (!PL_perlio) {
1204         PerlIO_allocate(aTHX);
1205         PerlIO_fdopen(0, "Ir" PERLIO_STDTEXT);
1206         PerlIO_fdopen(1, "Iw" PERLIO_STDTEXT);
1207         PerlIO_fdopen(2, "Iw" PERLIO_STDTEXT);
1208     }
1209 }
1210
1211 PerlIO *
1212 PerlIO_push(pTHX_ PerlIO *f, PERLIO_FUNCS_DECL(*tab), const char *mode, SV *arg)
1213 {
1214     if (tab->fsize != sizeof(PerlIO_funcs)) {
1215       mismatch:
1216         Perl_croak(aTHX_ "Layer does not match this perl");
1217     }
1218     if (tab->size) {
1219         PerlIOl *l;
1220         if (tab->size < sizeof(PerlIOl)) {
1221             goto mismatch;
1222         }
1223         /* Real layer with a data area */
1224         if (f) {
1225             char *temp;
1226             Newxz(temp, tab->size, char);
1227             l = (PerlIOl*)temp;
1228             if (l) {
1229                 l->next = *f;
1230                 l->tab = (PerlIO_funcs*) tab;
1231                 *f = l;
1232                 PerlIO_debug("PerlIO_push f=%p %s %s %p\n",
1233                              (void*)f, tab->name,
1234                              (mode) ? mode : "(Null)", (void*)arg);
1235                 if (*l->tab->Pushed &&
1236                     (*l->tab->Pushed)
1237                       (aTHX_ f, mode, arg, (PerlIO_funcs*) tab) != 0) {
1238                     PerlIO_pop(aTHX_ f);
1239                     return NULL;
1240                 }
1241             }
1242             else
1243                 return NULL;
1244         }
1245     }
1246     else if (f) {
1247         /* Pseudo-layer where push does its own stack adjust */
1248         PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1249                      (mode) ? mode : "(Null)", (void*)arg);
1250         if (tab->Pushed &&
1251             (*tab->Pushed) (aTHX_ f, mode, arg, (PerlIO_funcs*) tab) != 0) {
1252              return NULL;
1253         }
1254     }
1255     return f;
1256 }
1257
1258 IV
1259 PerlIOBase_binmode(pTHX_ PerlIO *f)
1260 {
1261    if (PerlIOValid(f)) {
1262         /* Is layer suitable for raw stream ? */
1263         if (PerlIOBase(f)->tab->kind & PERLIO_K_RAW) {
1264             /* Yes - turn off UTF-8-ness, to undo UTF-8 locale effects */
1265             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1266         }
1267         else {
1268             /* Not suitable - pop it */
1269             PerlIO_pop(aTHX_ f);
1270         }
1271         return 0;
1272    }
1273    return -1;
1274 }
1275
1276 IV
1277 PerlIORaw_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1278 {
1279     PERL_UNUSED_ARG(mode);
1280     PERL_UNUSED_ARG(arg);
1281     PERL_UNUSED_ARG(tab);
1282
1283     if (PerlIOValid(f)) {
1284         PerlIO *t;
1285         const PerlIOl *l;
1286         PerlIO_flush(f);
1287         /*
1288          * Strip all layers that are not suitable for a raw stream
1289          */
1290         t = f;
1291         while (t && (l = *t)) {
1292             if (l->tab->Binmode) {
1293                 /* Has a handler - normal case */
1294                 if ((*l->tab->Binmode)(aTHX_ f) == 0) {
1295                     if (*t == l) {
1296                         /* Layer still there - move down a layer */
1297                         t = PerlIONext(t);
1298                     }
1299                 }
1300                 else {
1301                     return -1;
1302                 }
1303             }
1304             else {
1305                 /* No handler - pop it */
1306                 PerlIO_pop(aTHX_ t);
1307             }
1308         }
1309         if (PerlIOValid(f)) {
1310             PerlIO_debug(":raw f=%p :%s\n", (void*)f, PerlIOBase(f)->tab->name);
1311             return 0;
1312         }
1313     }
1314     return -1;
1315 }
1316
1317 int
1318 PerlIO_apply_layera(pTHX_ PerlIO *f, const char *mode,
1319                     PerlIO_list_t *layers, IV n, IV max)
1320 {
1321     int code = 0;
1322     while (n < max) {
1323         PerlIO_funcs * const tab = PerlIO_layer_fetch(aTHX_ layers, n, NULL);
1324         if (tab) {
1325             if (!PerlIO_push(aTHX_ f, tab, mode, PerlIOArg)) {
1326                 code = -1;
1327                 break;
1328             }
1329         }
1330         n++;
1331     }
1332     return code;
1333 }
1334
1335 int
1336 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
1337 {
1338     int code = 0;
1339     if (f && names) {
1340         PerlIO_list_t * const layers = PerlIO_list_alloc(aTHX);
1341         code = PerlIO_parse_layers(aTHX_ layers, names);
1342         if (code == 0) {
1343             code = PerlIO_apply_layera(aTHX_ f, mode, layers, 0, layers->cur);
1344         }
1345         PerlIO_list_free(aTHX_ layers);
1346     }
1347     return code;
1348 }
1349
1350
1351 /*--------------------------------------------------------------------------------------*/
1352 /*
1353  * Given the abstraction above the public API functions
1354  */
1355
1356 int
1357 PerlIO_binmode(pTHX_ PerlIO *f, int iotype, int mode, const char *names)
1358 {
1359     PerlIO_debug("PerlIO_binmode f=%p %s %c %x %s\n", (void*)f,
1360                  (PerlIOBase(f)) ? PerlIOBase(f)->tab->name : "(Null)",
1361                  iotype, mode, (names) ? names : "(Null)");
1362
1363     if (names) {
1364         /* Do not flush etc. if (e.g.) switching encodings.
1365            if a pushed layer knows it needs to flush lower layers
1366            (for example :unix which is never going to call them)
1367            it can do the flush when it is pushed.
1368          */
1369         return PerlIO_apply_layers(aTHX_ f, NULL, names) == 0 ? TRUE : FALSE;
1370     }
1371     else {
1372         /* Fake 5.6 legacy of using this call to turn ON O_TEXT */
1373 #ifdef PERLIO_USING_CRLF
1374         /* Legacy binmode only has meaning if O_TEXT has a value distinct from
1375            O_BINARY so we can look for it in mode.
1376          */
1377         if (!(mode & O_BINARY)) {
1378             /* Text mode */
1379             /* FIXME?: Looking down the layer stack seems wrong,
1380                but is a way of reaching past (say) an encoding layer
1381                to flip CRLF-ness of the layer(s) below
1382              */
1383             while (*f) {
1384                 /* Perhaps we should turn on bottom-most aware layer
1385                    e.g. Ilya's idea that UNIX TTY could serve
1386                  */
1387                 if (PerlIOBase(f)->tab->kind & PERLIO_K_CANCRLF) {
1388                     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
1389                         /* Not in text mode - flush any pending stuff and flip it */
1390                         PerlIO_flush(f);
1391                         PerlIOBase(f)->flags |= PERLIO_F_CRLF;
1392                     }
1393                     /* Only need to turn it on in one layer so we are done */
1394                     return TRUE;
1395                 }
1396                 f = PerlIONext(f);
1397             }
1398             /* Not finding a CRLF aware layer presumably means we are binary
1399                which is not what was requested - so we failed
1400                We _could_ push :crlf layer but so could caller
1401              */
1402             return FALSE;
1403         }
1404 #endif
1405         /* Legacy binmode is now _defined_ as being equivalent to pushing :raw
1406            So code that used to be here is now in PerlIORaw_pushed().
1407          */
1408         return PerlIO_push(aTHX_ f, PERLIO_FUNCS_CAST(&PerlIO_raw), NULL, NULL) ? TRUE : FALSE;
1409     }
1410 }
1411
1412 int
1413 PerlIO__close(pTHX_ PerlIO *f)
1414 {
1415     if (PerlIOValid(f)) {
1416         PerlIO_funcs * const tab = PerlIOBase(f)->tab;
1417         if (tab && tab->Close)
1418             return (*tab->Close)(aTHX_ f);
1419         else
1420             return PerlIOBase_close(aTHX_ f);
1421     }
1422     else {
1423         SETERRNO(EBADF, SS_IVCHAN);
1424         return -1;
1425     }
1426 }
1427
1428 int
1429 Perl_PerlIO_close(pTHX_ PerlIO *f)
1430 {
1431     const int code = PerlIO__close(aTHX_ f);
1432     while (PerlIOValid(f)) {
1433         PerlIO_pop(aTHX_ f);
1434     }
1435     return code;
1436 }
1437
1438 int
1439 Perl_PerlIO_fileno(pTHX_ PerlIO *f)
1440 {
1441     dVAR;
1442      Perl_PerlIO_or_Base(f, Fileno, fileno, -1, (aTHX_ f));
1443 }
1444
1445
1446 static PerlIO_funcs *
1447 PerlIO_layer_from_ref(pTHX_ SV *sv)
1448 {
1449     dVAR;
1450     /*
1451      * For any scalar type load the handler which is bundled with perl
1452      */
1453     if (SvTYPE(sv) < SVt_PVAV) {
1454         PerlIO_funcs *f = PerlIO_find_layer(aTHX_ STR_WITH_LEN("scalar"), 1);
1455         /* This isn't supposed to happen, since PerlIO::scalar is core,
1456          * but could happen anyway in smaller installs or with PAR */
1457         if (!f && ckWARN(WARN_LAYER))
1458             Perl_warner(aTHX_ packWARN(WARN_LAYER), "Unknown PerlIO layer \"scalar\"");
1459         return f;
1460     }
1461
1462     /*
1463      * For other types allow if layer is known but don't try and load it
1464      */
1465     switch (SvTYPE(sv)) {
1466     case SVt_PVAV:
1467         return PerlIO_find_layer(aTHX_ STR_WITH_LEN("Array"), 0);
1468     case SVt_PVHV:
1469         return PerlIO_find_layer(aTHX_ STR_WITH_LEN("Hash"), 0);
1470     case SVt_PVCV:
1471         return PerlIO_find_layer(aTHX_ STR_WITH_LEN("Code"), 0);
1472     case SVt_PVGV:
1473         return PerlIO_find_layer(aTHX_ STR_WITH_LEN("Glob"), 0);
1474     default:
1475         return NULL;
1476     }
1477 }
1478
1479 PerlIO_list_t *
1480 PerlIO_resolve_layers(pTHX_ const char *layers,
1481                       const char *mode, int narg, SV **args)
1482 {
1483     dVAR;
1484     PerlIO_list_t *def = PerlIO_default_layers(aTHX);
1485     int incdef = 1;
1486     if (!PL_perlio)
1487         PerlIO_stdstreams(aTHX);
1488     if (narg) {
1489         SV * const arg = *args;
1490         /*
1491          * If it is a reference but not an object see if we have a handler
1492          * for it
1493          */
1494         if (SvROK(arg) && !sv_isobject(arg)) {
1495             PerlIO_funcs * const handler = PerlIO_layer_from_ref(aTHX_ SvRV(arg));
1496             if (handler) {
1497                 def = PerlIO_list_alloc(aTHX);
1498                 PerlIO_list_push(aTHX_ def, handler, &PL_sv_undef);
1499                 incdef = 0;
1500             }
1501             /*
1502              * Don't fail if handler cannot be found :via(...) etc. may do
1503              * something sensible else we will just stringfy and open
1504              * resulting string.
1505              */
1506         }
1507     }
1508     if (!layers || !*layers)
1509         layers = Perl_PerlIO_context_layers(aTHX_ mode);
1510     if (layers && *layers) {
1511         PerlIO_list_t *av;
1512         if (incdef) {
1513             av = PerlIO_clone_list(aTHX_ def, NULL);
1514         }
1515         else {
1516             av = def;
1517         }
1518         if (PerlIO_parse_layers(aTHX_ av, layers) == 0) {
1519              return av;
1520         }
1521         else {
1522             PerlIO_list_free(aTHX_ av);
1523             return NULL;
1524         }
1525     }
1526     else {
1527         if (incdef)
1528             def->refcnt++;
1529         return def;
1530     }
1531 }
1532
1533 PerlIO *
1534 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
1535              int imode, int perm, PerlIO *f, int narg, SV **args)
1536 {
1537     dVAR;
1538     if (!f && narg == 1 && *args == &PL_sv_undef) {
1539         if ((f = PerlIO_tmpfile())) {
1540             if (!layers || !*layers)
1541                 layers = Perl_PerlIO_context_layers(aTHX_ mode);
1542             if (layers && *layers)
1543                 PerlIO_apply_layers(aTHX_ f, mode, layers);
1544         }
1545     }
1546     else {
1547         PerlIO_list_t *layera;
1548         IV n;
1549         PerlIO_funcs *tab = NULL;
1550         if (PerlIOValid(f)) {
1551             /*
1552              * This is "reopen" - it is not tested as perl does not use it
1553              * yet
1554              */
1555             PerlIOl *l = *f;
1556             layera = PerlIO_list_alloc(aTHX);
1557             while (l) {
1558                 SV *arg = NULL;
1559                 if (l->tab->Getarg)
1560                     arg = (*l->tab->Getarg) (aTHX_ &l, NULL, 0);
1561                 PerlIO_list_push(aTHX_ layera, l->tab,
1562                                  (arg) ? arg : &PL_sv_undef);
1563                 if (arg)
1564                     SvREFCNT_dec(arg);
1565                 l = *PerlIONext(&l);
1566             }
1567         }
1568         else {
1569             layera = PerlIO_resolve_layers(aTHX_ layers, mode, narg, args);
1570             if (!layera) {
1571                 return NULL;
1572             }
1573         }
1574         /*
1575          * Start at "top" of layer stack
1576          */
1577         n = layera->cur - 1;
1578         while (n >= 0) {
1579             PerlIO_funcs * const t = PerlIO_layer_fetch(aTHX_ layera, n, NULL);
1580             if (t && t->Open) {
1581                 tab = t;
1582                 break;
1583             }
1584             n--;
1585         }
1586         if (tab) {
1587             /*
1588              * Found that layer 'n' can do opens - call it
1589              */
1590             if (narg > 1 && !(tab->kind & PERLIO_K_MULTIARG)) {
1591                 Perl_croak(aTHX_ "More than one argument to open(,':%s')",tab->name);
1592             }
1593             PerlIO_debug("openn(%s,'%s','%s',%d,%x,%o,%p,%d,%p)\n",
1594                          tab->name, layers ? layers : "(Null)", mode, fd,
1595                          imode, perm, (void*)f, narg, (void*)args);
1596             if (tab->Open)
1597                  f = (*tab->Open) (aTHX_ tab, layera, n, mode, fd, imode, perm,
1598                                    f, narg, args);
1599             else {
1600                  SETERRNO(EINVAL, LIB_INVARG);
1601                  f = NULL;
1602             }
1603             if (f) {
1604                 if (n + 1 < layera->cur) {
1605                     /*
1606                      * More layers above the one that we used to open -
1607                      * apply them now
1608                      */
1609                     if (PerlIO_apply_layera(aTHX_ f, mode, layera, n + 1, layera->cur) != 0) {
1610                         /* If pushing layers fails close the file */
1611                         PerlIO_close(f);
1612                         f = NULL;
1613                     }
1614                 }
1615             }
1616         }
1617         PerlIO_list_free(aTHX_ layera);
1618     }
1619     return f;
1620 }
1621
1622
1623 SSize_t
1624 Perl_PerlIO_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1625 {
1626      Perl_PerlIO_or_Base(f, Read, read, -1, (aTHX_ f, vbuf, count));
1627 }
1628
1629 SSize_t
1630 Perl_PerlIO_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1631 {
1632      Perl_PerlIO_or_Base(f, Unread, unread, -1, (aTHX_ f, vbuf, count));
1633 }
1634
1635 SSize_t
1636 Perl_PerlIO_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1637 {
1638      Perl_PerlIO_or_fail(f, Write, -1, (aTHX_ f, vbuf, count));
1639 }
1640
1641 int
1642 Perl_PerlIO_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
1643 {
1644      Perl_PerlIO_or_fail(f, Seek, -1, (aTHX_ f, offset, whence));
1645 }
1646
1647 Off_t
1648 Perl_PerlIO_tell(pTHX_ PerlIO *f)
1649 {
1650      Perl_PerlIO_or_fail(f, Tell, -1, (aTHX_ f));
1651 }
1652
1653 int
1654 Perl_PerlIO_flush(pTHX_ PerlIO *f)
1655 {
1656     dVAR;
1657     if (f) {
1658         if (*f) {
1659             const PerlIO_funcs *tab = PerlIOBase(f)->tab;
1660
1661             if (tab && tab->Flush)
1662                 return (*tab->Flush) (aTHX_ f);
1663             else
1664                  return 0; /* If no Flush defined, silently succeed. */
1665         }
1666         else {
1667             PerlIO_debug("Cannot flush f=%p\n", (void*)f);
1668             SETERRNO(EBADF, SS_IVCHAN);
1669             return -1;
1670         }
1671     }
1672     else {
1673         /*
1674          * Is it good API design to do flush-all on NULL, a potentially
1675          * errorneous input? Maybe some magical value (PerlIO*
1676          * PERLIO_FLUSH_ALL = (PerlIO*)-1;)? Yes, stdio does similar
1677          * things on fflush(NULL), but should we be bound by their design
1678          * decisions? --jhi
1679          */
1680         PerlIO **table = &PL_perlio;
1681         int code = 0;
1682         while ((f = *table)) {
1683             int i;
1684             table = (PerlIO **) (f++);
1685             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1686                 if (*f && PerlIO_flush(f) != 0)
1687                     code = -1;
1688                 f++;
1689             }
1690         }
1691         return code;
1692     }
1693 }
1694
1695 void
1696 PerlIOBase_flush_linebuf(pTHX)
1697 {
1698     dVAR;
1699     PerlIO **table = &PL_perlio;
1700     PerlIO *f;
1701     while ((f = *table)) {
1702         int i;
1703         table = (PerlIO **) (f++);
1704         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1705             if (*f
1706                 && (PerlIOBase(f)->
1707                     flags & (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1708                 == (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1709                 PerlIO_flush(f);
1710             f++;
1711         }
1712     }
1713 }
1714
1715 int
1716 Perl_PerlIO_fill(pTHX_ PerlIO *f)
1717 {
1718      Perl_PerlIO_or_fail(f, Fill, -1, (aTHX_ f));
1719 }
1720
1721 int
1722 PerlIO_isutf8(PerlIO *f)
1723 {
1724      if (PerlIOValid(f))
1725           return (PerlIOBase(f)->flags & PERLIO_F_UTF8) != 0;
1726      else
1727           SETERRNO(EBADF, SS_IVCHAN);
1728
1729      return -1;
1730 }
1731
1732 int
1733 Perl_PerlIO_eof(pTHX_ PerlIO *f)
1734 {
1735      Perl_PerlIO_or_Base(f, Eof, eof, -1, (aTHX_ f));
1736 }
1737
1738 int
1739 Perl_PerlIO_error(pTHX_ PerlIO *f)
1740 {
1741      Perl_PerlIO_or_Base(f, Error, error, -1, (aTHX_ f));
1742 }
1743
1744 void
1745 Perl_PerlIO_clearerr(pTHX_ PerlIO *f)
1746 {
1747      Perl_PerlIO_or_Base_void(f, Clearerr, clearerr, (aTHX_ f));
1748 }
1749
1750 void
1751 Perl_PerlIO_setlinebuf(pTHX_ PerlIO *f)
1752 {
1753      Perl_PerlIO_or_Base_void(f, Setlinebuf, setlinebuf, (aTHX_ f));
1754 }
1755
1756 int
1757 PerlIO_has_base(PerlIO *f)
1758 {
1759      if (PerlIOValid(f)) {
1760           const PerlIO_funcs * const tab = PerlIOBase(f)->tab;
1761
1762           if (tab)
1763                return (tab->Get_base != NULL);
1764           SETERRNO(EINVAL, LIB_INVARG);
1765      }
1766      else
1767           SETERRNO(EBADF, SS_IVCHAN);
1768
1769      return 0;
1770 }
1771
1772 int
1773 PerlIO_fast_gets(PerlIO *f)
1774 {
1775     if (PerlIOValid(f) && (PerlIOBase(f)->flags & PERLIO_F_FASTGETS)) {
1776          const PerlIO_funcs * const tab = PerlIOBase(f)->tab;
1777
1778          if (tab)
1779               return (tab->Set_ptrcnt != NULL);
1780          SETERRNO(EINVAL, LIB_INVARG);
1781     }
1782     else
1783          SETERRNO(EBADF, SS_IVCHAN);
1784
1785     return 0;
1786 }
1787
1788 int
1789 PerlIO_has_cntptr(PerlIO *f)
1790 {
1791     if (PerlIOValid(f)) {
1792         const PerlIO_funcs * const tab = PerlIOBase(f)->tab;
1793
1794         if (tab)
1795              return (tab->Get_ptr != NULL && tab->Get_cnt != NULL);
1796           SETERRNO(EINVAL, LIB_INVARG);
1797     }
1798     else
1799          SETERRNO(EBADF, SS_IVCHAN);
1800
1801     return 0;
1802 }
1803
1804 int
1805 PerlIO_canset_cnt(PerlIO *f)
1806 {
1807     if (PerlIOValid(f)) {
1808           const PerlIO_funcs * const tab = PerlIOBase(f)->tab;
1809
1810           if (tab)
1811                return (tab->Set_ptrcnt != NULL);
1812           SETERRNO(EINVAL, LIB_INVARG);
1813     }
1814     else
1815          SETERRNO(EBADF, SS_IVCHAN);
1816
1817     return 0;
1818 }
1819
1820 STDCHAR *
1821 Perl_PerlIO_get_base(pTHX_ PerlIO *f)
1822 {
1823      Perl_PerlIO_or_fail(f, Get_base, NULL, (aTHX_ f));
1824 }
1825
1826 int
1827 Perl_PerlIO_get_bufsiz(pTHX_ PerlIO *f)
1828 {
1829      Perl_PerlIO_or_fail(f, Get_bufsiz, -1, (aTHX_ f));
1830 }
1831
1832 STDCHAR *
1833 Perl_PerlIO_get_ptr(pTHX_ PerlIO *f)
1834 {
1835      Perl_PerlIO_or_fail(f, Get_ptr, NULL, (aTHX_ f));
1836 }
1837
1838 int
1839 Perl_PerlIO_get_cnt(pTHX_ PerlIO *f)
1840 {
1841      Perl_PerlIO_or_fail(f, Get_cnt, -1, (aTHX_ f));
1842 }
1843
1844 void
1845 Perl_PerlIO_set_cnt(pTHX_ PerlIO *f, int cnt)
1846 {
1847      Perl_PerlIO_or_fail_void(f, Set_ptrcnt, (aTHX_ f, NULL, cnt));
1848 }
1849
1850 void
1851 Perl_PerlIO_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, int cnt)
1852 {
1853      Perl_PerlIO_or_fail_void(f, Set_ptrcnt, (aTHX_ f, ptr, cnt));
1854 }
1855
1856
1857 /*--------------------------------------------------------------------------------------*/
1858 /*
1859  * utf8 and raw dummy layers
1860  */
1861
1862 IV
1863 PerlIOUtf8_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1864 {
1865     PERL_UNUSED_CONTEXT;
1866     PERL_UNUSED_ARG(mode);
1867     PERL_UNUSED_ARG(arg);
1868     if (PerlIOValid(f)) {
1869         if (tab->kind & PERLIO_K_UTF8)
1870             PerlIOBase(f)->flags |= PERLIO_F_UTF8;
1871         else
1872             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1873         return 0;
1874     }
1875     return -1;
1876 }
1877
1878 PERLIO_FUNCS_DECL(PerlIO_utf8) = {
1879     sizeof(PerlIO_funcs),
1880     "utf8",
1881     0,
1882     PERLIO_K_DUMMY | PERLIO_K_UTF8,
1883     PerlIOUtf8_pushed,
1884     NULL,
1885     NULL,
1886     NULL,
1887     NULL,
1888     NULL,
1889     NULL,
1890     NULL,
1891     NULL,
1892     NULL,
1893     NULL,
1894     NULL,
1895     NULL,
1896     NULL,                       /* flush */
1897     NULL,                       /* fill */
1898     NULL,
1899     NULL,
1900     NULL,
1901     NULL,
1902     NULL,                       /* get_base */
1903     NULL,                       /* get_bufsiz */
1904     NULL,                       /* get_ptr */
1905     NULL,                       /* get_cnt */
1906     NULL,                       /* set_ptrcnt */
1907 };
1908
1909 PERLIO_FUNCS_DECL(PerlIO_byte) = {
1910     sizeof(PerlIO_funcs),
1911     "bytes",
1912     0,
1913     PERLIO_K_DUMMY,
1914     PerlIOUtf8_pushed,
1915     NULL,
1916     NULL,
1917     NULL,
1918     NULL,
1919     NULL,
1920     NULL,
1921     NULL,
1922     NULL,
1923     NULL,
1924     NULL,
1925     NULL,
1926     NULL,
1927     NULL,                       /* flush */
1928     NULL,                       /* fill */
1929     NULL,
1930     NULL,
1931     NULL,
1932     NULL,
1933     NULL,                       /* get_base */
1934     NULL,                       /* get_bufsiz */
1935     NULL,                       /* get_ptr */
1936     NULL,                       /* get_cnt */
1937     NULL,                       /* set_ptrcnt */
1938 };
1939
1940 PerlIO *
1941 PerlIORaw_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
1942                IV n, const char *mode, int fd, int imode, int perm,
1943                PerlIO *old, int narg, SV **args)
1944 {
1945     PerlIO_funcs * const tab = PerlIO_default_btm();
1946     PERL_UNUSED_ARG(self);
1947     if (tab && tab->Open)
1948          return (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
1949                               old, narg, args);
1950     SETERRNO(EINVAL, LIB_INVARG);
1951     return NULL;
1952 }
1953
1954 PERLIO_FUNCS_DECL(PerlIO_raw) = {
1955     sizeof(PerlIO_funcs),
1956     "raw",
1957     0,
1958     PERLIO_K_DUMMY,
1959     PerlIORaw_pushed,
1960     PerlIOBase_popped,
1961     PerlIORaw_open,
1962     NULL,
1963     NULL,
1964     NULL,
1965     NULL,
1966     NULL,
1967     NULL,
1968     NULL,
1969     NULL,
1970     NULL,
1971     NULL,
1972     NULL,                       /* flush */
1973     NULL,                       /* fill */
1974     NULL,
1975     NULL,
1976     NULL,
1977     NULL,
1978     NULL,                       /* get_base */
1979     NULL,                       /* get_bufsiz */
1980     NULL,                       /* get_ptr */
1981     NULL,                       /* get_cnt */
1982     NULL,                       /* set_ptrcnt */
1983 };
1984 /*--------------------------------------------------------------------------------------*/
1985 /*--------------------------------------------------------------------------------------*/
1986 /*
1987  * "Methods" of the "base class"
1988  */
1989
1990 IV
1991 PerlIOBase_fileno(pTHX_ PerlIO *f)
1992 {
1993     return PerlIOValid(f) ? PerlIO_fileno(PerlIONext(f)) : -1;
1994 }
1995
1996 char *
1997 PerlIO_modestr(PerlIO * f, char *buf)
1998 {
1999     char *s = buf;
2000     if (PerlIOValid(f)) {
2001         const IV flags = PerlIOBase(f)->flags;
2002         if (flags & PERLIO_F_APPEND) {
2003             *s++ = 'a';
2004             if (flags & PERLIO_F_CANREAD) {
2005                 *s++ = '+';
2006             }
2007         }
2008         else if (flags & PERLIO_F_CANREAD) {
2009             *s++ = 'r';
2010             if (flags & PERLIO_F_CANWRITE)
2011                 *s++ = '+';
2012         }
2013         else if (flags & PERLIO_F_CANWRITE) {
2014             *s++ = 'w';
2015             if (flags & PERLIO_F_CANREAD) {
2016                 *s++ = '+';
2017             }
2018         }
2019 #ifdef PERLIO_USING_CRLF
2020         if (!(flags & PERLIO_F_CRLF))
2021             *s++ = 'b';
2022 #endif
2023     }
2024     *s = '\0';
2025     return buf;
2026 }
2027
2028
2029 IV
2030 PerlIOBase_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2031 {
2032     PerlIOl * const l = PerlIOBase(f);
2033     PERL_UNUSED_CONTEXT;
2034     PERL_UNUSED_ARG(arg);
2035
2036     l->flags &= ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE |
2037                   PERLIO_F_TRUNCATE | PERLIO_F_APPEND);
2038     if (tab->Set_ptrcnt != NULL)
2039         l->flags |= PERLIO_F_FASTGETS;
2040     if (mode) {
2041         if (*mode == IoTYPE_NUMERIC || *mode == IoTYPE_IMPLICIT)
2042             mode++;
2043         switch (*mode++) {
2044         case 'r':
2045             l->flags |= PERLIO_F_CANREAD;
2046             break;
2047         case 'a':
2048             l->flags |= PERLIO_F_APPEND | PERLIO_F_CANWRITE;
2049             break;
2050         case 'w':
2051             l->flags |= PERLIO_F_TRUNCATE | PERLIO_F_CANWRITE;
2052             break;
2053         default:
2054             SETERRNO(EINVAL, LIB_INVARG);
2055             return -1;
2056         }
2057         while (*mode) {
2058             switch (*mode++) {
2059             case '+':
2060                 l->flags |= PERLIO_F_CANREAD | PERLIO_F_CANWRITE;
2061                 break;
2062             case 'b':
2063                 l->flags &= ~PERLIO_F_CRLF;
2064                 break;
2065             case 't':
2066                 l->flags |= PERLIO_F_CRLF;
2067                 break;
2068             default:
2069                 SETERRNO(EINVAL, LIB_INVARG);
2070                 return -1;
2071             }
2072         }
2073     }
2074     else {
2075         if (l->next) {
2076             l->flags |= l->next->flags &
2077                 (PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_TRUNCATE |
2078                  PERLIO_F_APPEND);
2079         }
2080     }
2081 #if 0
2082     PerlIO_debug("PerlIOBase_pushed f=%p %s %s fl=%08" UVxf " (%s)\n",
2083                  (void*)f, PerlIOBase(f)->tab->name, (omode) ? omode : "(Null)",
2084                  l->flags, PerlIO_modestr(f, temp));
2085 #endif
2086     return 0;
2087 }
2088
2089 IV
2090 PerlIOBase_popped(pTHX_ PerlIO *f)
2091 {
2092     PERL_UNUSED_CONTEXT;
2093     PERL_UNUSED_ARG(f);
2094     return 0;
2095 }
2096
2097 SSize_t
2098 PerlIOBase_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2099 {
2100     /*
2101      * Save the position as current head considers it
2102      */
2103     const Off_t old = PerlIO_tell(f);
2104     PerlIO_push(aTHX_ f, PERLIO_FUNCS_CAST(&PerlIO_pending), "r", NULL);
2105     PerlIOSelf(f, PerlIOBuf)->posn = old;
2106     return PerlIOBuf_unread(aTHX_ f, vbuf, count);
2107 }
2108
2109 SSize_t
2110 PerlIOBase_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2111 {
2112     STDCHAR *buf = (STDCHAR *) vbuf;
2113     if (f) {
2114         if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD)) {
2115             PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2116             SETERRNO(EBADF, SS_IVCHAN);
2117             return 0;
2118         }
2119         while (count > 0) {
2120          get_cnt:
2121           {
2122             SSize_t avail = PerlIO_get_cnt(f);
2123             SSize_t take = 0;
2124             if (avail > 0)
2125                 take = ((SSize_t)count < avail) ? (SSize_t)count : avail;
2126             if (take > 0) {
2127                 STDCHAR *ptr = PerlIO_get_ptr(f);
2128                 Copy(ptr, buf, take, STDCHAR);
2129                 PerlIO_set_ptrcnt(f, ptr + take, (avail -= take));
2130                 count -= take;
2131                 buf += take;
2132                 if (avail == 0)         /* set_ptrcnt could have reset avail */
2133                     goto get_cnt;
2134             }
2135             if (count > 0 && avail <= 0) {
2136                 if (PerlIO_fill(f) != 0)
2137                     break;
2138             }
2139           }
2140         }
2141         return (buf - (STDCHAR *) vbuf);
2142     }
2143     return 0;
2144 }
2145
2146 IV
2147 PerlIOBase_noop_ok(pTHX_ PerlIO *f)
2148 {
2149     PERL_UNUSED_CONTEXT;
2150     PERL_UNUSED_ARG(f);
2151     return 0;
2152 }
2153
2154 IV
2155 PerlIOBase_noop_fail(pTHX_ PerlIO *f)
2156 {
2157     PERL_UNUSED_CONTEXT;
2158     PERL_UNUSED_ARG(f);
2159     return -1;
2160 }
2161
2162 IV
2163 PerlIOBase_close(pTHX_ PerlIO *f)
2164 {
2165     IV code = -1;
2166     if (PerlIOValid(f)) {
2167         PerlIO *n = PerlIONext(f);
2168         code = PerlIO_flush(f);
2169         PerlIOBase(f)->flags &=
2170            ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_OPEN);
2171         while (PerlIOValid(n)) {
2172             const PerlIO_funcs * const tab = PerlIOBase(n)->tab;
2173             if (tab && tab->Close) {
2174                 if ((*tab->Close)(aTHX_ n) != 0)
2175                     code = -1;
2176                 break;
2177             }
2178             else {
2179                 PerlIOBase(n)->flags &=
2180                     ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_OPEN);
2181             }
2182             n = PerlIONext(n);
2183         }
2184     }
2185     else {
2186         SETERRNO(EBADF, SS_IVCHAN);
2187     }
2188     return code;
2189 }
2190
2191 IV
2192 PerlIOBase_eof(pTHX_ PerlIO *f)
2193 {
2194     PERL_UNUSED_CONTEXT;
2195     if (PerlIOValid(f)) {
2196         return (PerlIOBase(f)->flags & PERLIO_F_EOF) != 0;
2197     }
2198     return 1;
2199 }
2200
2201 IV
2202 PerlIOBase_error(pTHX_ PerlIO *f)
2203 {
2204     PERL_UNUSED_CONTEXT;
2205     if (PerlIOValid(f)) {
2206         return (PerlIOBase(f)->flags & PERLIO_F_ERROR) != 0;
2207     }
2208     return 1;
2209 }
2210
2211 void
2212 PerlIOBase_clearerr(pTHX_ PerlIO *f)
2213 {
2214     if (PerlIOValid(f)) {
2215         PerlIO * const n = PerlIONext(f);
2216         PerlIOBase(f)->flags &= ~(PERLIO_F_ERROR | PERLIO_F_EOF);
2217         if (PerlIOValid(n))
2218             PerlIO_clearerr(n);
2219     }
2220 }
2221
2222 void
2223 PerlIOBase_setlinebuf(pTHX_ PerlIO *f)
2224 {
2225     PERL_UNUSED_CONTEXT;
2226     if (PerlIOValid(f)) {
2227         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF;
2228     }
2229 }
2230
2231 SV *
2232 PerlIO_sv_dup(pTHX_ SV *arg, CLONE_PARAMS *param)
2233 {
2234     if (!arg)
2235         return NULL;
2236 #ifdef sv_dup
2237     if (param) {
2238         arg = sv_dup(arg, param);
2239         SvREFCNT_inc_simple_void_NN(arg);
2240         return arg;
2241     }
2242     else {
2243         return newSVsv(arg);
2244     }
2245 #else
2246     PERL_UNUSED_ARG(param);
2247     return newSVsv(arg);
2248 #endif
2249 }
2250
2251 PerlIO *
2252 PerlIOBase_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2253 {
2254     PerlIO * const nexto = PerlIONext(o);
2255     if (PerlIOValid(nexto)) {
2256         const PerlIO_funcs * const tab = PerlIOBase(nexto)->tab;
2257         if (tab && tab->Dup)
2258             f = (*tab->Dup)(aTHX_ f, nexto, param, flags);
2259         else
2260             f = PerlIOBase_dup(aTHX_ f, nexto, param, flags);
2261     }
2262     if (f) {
2263         PerlIO_funcs * const self = PerlIOBase(o)->tab;
2264         SV *arg = NULL;
2265         char buf[8];
2266         PerlIO_debug("PerlIOBase_dup %s f=%p o=%p param=%p\n",
2267                      self->name, (void*)f, (void*)o, (void*)param);
2268         if (self->Getarg)
2269             arg = (*self->Getarg)(aTHX_ o, param, flags);
2270         f = PerlIO_push(aTHX_ f, self, PerlIO_modestr(o,buf), arg);
2271         if (PerlIOBase(o)->flags & PERLIO_F_UTF8)
2272             PerlIOBase(f)->flags |= PERLIO_F_UTF8;
2273         if (arg)
2274             SvREFCNT_dec(arg);
2275     }
2276     return f;
2277 }
2278
2279 /* PL_perlio_fd_refcnt[] is in intrpvar.h */
2280
2281 /* Must be called with PL_perlio_mutex locked. */
2282 static void
2283 S_more_refcounted_fds(pTHX_ const int new_fd) {
2284     dVAR;
2285     const int old_max = PL_perlio_fd_refcnt_size;
2286     const int new_max = 16 + (new_fd & ~15);
2287     int *new_array;
2288
2289     PerlIO_debug("More fds - old=%d, need %d, new=%d\n",
2290                  old_max, new_fd, new_max);
2291
2292     if (new_fd < old_max) {
2293         return;
2294     }
2295
2296     assert (new_max > new_fd);
2297
2298     /* Use plain realloc() since we need this memory to be really
2299      * global and visible to all the interpreters and/or threads. */
2300     new_array = (int*) realloc(PL_perlio_fd_refcnt, new_max * sizeof(int));
2301
2302     if (!new_array) {
2303 #ifdef USE_ITHREADS
2304         MUTEX_UNLOCK(&PL_perlio_mutex);
2305 #endif
2306         /* Can't use PerlIO to write as it allocates memory */
2307         PerlLIO_write(PerlIO_fileno(Perl_error_log),
2308                       PL_no_mem, strlen(PL_no_mem));
2309         my_exit(1);
2310     }
2311
2312     PL_perlio_fd_refcnt_size = new_max;
2313     PL_perlio_fd_refcnt = new_array;
2314
2315     PerlIO_debug("Zeroing %p, %d\n",
2316                  (void*)(new_array + old_max),
2317                  new_max - old_max);
2318
2319     Zero(new_array + old_max, new_max - old_max, int);
2320 }
2321
2322
2323 void
2324 PerlIO_init(pTHX)
2325 {
2326     /* MUTEX_INIT(&PL_perlio_mutex) is done in PERL_SYS_INIT3(). */
2327     PERL_UNUSED_CONTEXT;
2328 }
2329
2330 void
2331 PerlIOUnix_refcnt_inc(int fd)
2332 {
2333     dTHX;
2334     if (fd >= 0) {
2335         dVAR;
2336
2337 #ifdef USE_ITHREADS
2338         MUTEX_LOCK(&PL_perlio_mutex);
2339 #endif
2340         if (fd >= PL_perlio_fd_refcnt_size)
2341             S_more_refcounted_fds(aTHX_ fd);
2342
2343         PL_perlio_fd_refcnt[fd]++;
2344         if (PL_perlio_fd_refcnt[fd] <= 0) {
2345             Perl_croak(aTHX_ "refcnt_inc: fd %d: %d <= 0\n",
2346                        fd, PL_perlio_fd_refcnt[fd]);
2347         }
2348         PerlIO_debug("refcnt_inc: fd %d refcnt=%d\n",
2349                      fd, PL_perlio_fd_refcnt[fd]);
2350
2351 #ifdef USE_ITHREADS
2352         MUTEX_UNLOCK(&PL_perlio_mutex);
2353 #endif
2354     } else {
2355         Perl_croak(aTHX_ "refcnt_inc: fd %d < 0\n", fd);
2356     }
2357 }
2358
2359 int
2360 PerlIOUnix_refcnt_dec(int fd)
2361 {
2362     dTHX;
2363     int cnt = 0;
2364     if (fd >= 0) {
2365         dVAR;
2366 #ifdef USE_ITHREADS
2367         MUTEX_LOCK(&PL_perlio_mutex);
2368 #endif
2369         if (fd >= PL_perlio_fd_refcnt_size) {
2370             Perl_croak(aTHX_ "refcnt_dec: fd %d >= refcnt_size %d\n",
2371                        fd, PL_perlio_fd_refcnt_size);
2372         }
2373         if (PL_perlio_fd_refcnt[fd] <= 0) {
2374             Perl_croak(aTHX_ "refcnt_dec: fd %d: %d <= 0\n",
2375                        fd, PL_perlio_fd_refcnt[fd]);
2376         }
2377         cnt = --PL_perlio_fd_refcnt[fd];
2378         PerlIO_debug("refcnt_dec: fd %d refcnt=%d\n", fd, cnt);
2379 #ifdef USE_ITHREADS
2380         MUTEX_UNLOCK(&PL_perlio_mutex);
2381 #endif
2382     } else {
2383         Perl_croak(aTHX_ "refcnt_dec: fd %d < 0\n", fd);
2384     }
2385     return cnt;
2386 }
2387
2388 void
2389 PerlIO_cleanup(pTHX)
2390 {
2391     dVAR;
2392     int i;
2393 #ifdef USE_ITHREADS
2394     PerlIO_debug("Cleanup layers for %p\n",(void*)aTHX);
2395 #else
2396     PerlIO_debug("Cleanup layers\n");
2397 #endif
2398
2399     /* Raise STDIN..STDERR refcount so we don't close them */
2400     for (i=0; i < 3; i++)
2401         PerlIOUnix_refcnt_inc(i);
2402     PerlIO_cleantable(aTHX_ &PL_perlio);
2403     /* Restore STDIN..STDERR refcount */
2404     for (i=0; i < 3; i++)
2405         PerlIOUnix_refcnt_dec(i);
2406
2407     if (PL_known_layers) {
2408         PerlIO_list_free(aTHX_ PL_known_layers);
2409         PL_known_layers = NULL;
2410     }
2411     if (PL_def_layerlist) {
2412         PerlIO_list_free(aTHX_ PL_def_layerlist);
2413         PL_def_layerlist = NULL;
2414     }
2415 }
2416
2417 void PerlIO_teardown(pTHX) /* Call only from PERL_SYS_TERM(). */
2418 {
2419     dVAR;
2420 #ifdef DEBUGGING
2421     {
2422         /* By now all filehandles should have been closed, so any
2423          * stray (non-STD-)filehandles indicate *possible* (PerlIO)
2424          * errors. */
2425         int i;
2426         for (i = 3; i < PL_perlio_fd_refcnt_size; i++) {
2427             if (PL_perlio_fd_refcnt[i])
2428                 PerlIO_debug("PerlIO_cleanup: fd %d refcnt=%d\n",
2429                              i, PL_perlio_fd_refcnt[i]);
2430         }
2431     }
2432 #endif
2433     /* Not bothering with PL_perlio_mutex since by now
2434      * all the interpreters are gone. */
2435     if (PL_perlio_fd_refcnt_size /* Assuming initial size of zero. */
2436         && PL_perlio_fd_refcnt) {
2437         free(PL_perlio_fd_refcnt); /* To match realloc() in S_more_refcounted_fds(). */
2438         PL_perlio_fd_refcnt = NULL;
2439         PL_perlio_fd_refcnt_size = 0;
2440     }
2441 }
2442
2443 /*--------------------------------------------------------------------------------------*/
2444 /*
2445  * Bottom-most level for UNIX-like case
2446  */
2447
2448 typedef struct {
2449     struct _PerlIO base;        /* The generic part */
2450     int fd;                     /* UNIX like file descriptor */
2451     int oflags;                 /* open/fcntl flags */
2452 } PerlIOUnix;
2453
2454 int
2455 PerlIOUnix_oflags(const char *mode)
2456 {
2457     int oflags = -1;
2458     if (*mode == IoTYPE_IMPLICIT || *mode == IoTYPE_NUMERIC)
2459         mode++;
2460     switch (*mode) {
2461     case 'r':
2462         oflags = O_RDONLY;
2463         if (*++mode == '+') {
2464             oflags = O_RDWR;
2465             mode++;
2466         }
2467         break;
2468
2469     case 'w':
2470         oflags = O_CREAT | O_TRUNC;
2471         if (*++mode == '+') {
2472             oflags |= O_RDWR;
2473             mode++;
2474         }
2475         else
2476             oflags |= O_WRONLY;
2477         break;
2478
2479     case 'a':
2480         oflags = O_CREAT | O_APPEND;
2481         if (*++mode == '+') {
2482             oflags |= O_RDWR;
2483             mode++;
2484         }
2485         else
2486             oflags |= O_WRONLY;
2487         break;
2488     }
2489     if (*mode == 'b') {
2490         oflags |= O_BINARY;
2491         oflags &= ~O_TEXT;
2492         mode++;
2493     }
2494     else if (*mode == 't') {
2495         oflags |= O_TEXT;
2496         oflags &= ~O_BINARY;
2497         mode++;
2498     }
2499     /*
2500      * Always open in binary mode
2501      */
2502     oflags |= O_BINARY;
2503     if (*mode || oflags == -1) {
2504         SETERRNO(EINVAL, LIB_INVARG);
2505         oflags = -1;
2506     }
2507     return oflags;
2508 }
2509
2510 IV
2511 PerlIOUnix_fileno(pTHX_ PerlIO *f)
2512 {
2513     PERL_UNUSED_CONTEXT;
2514     return PerlIOSelf(f, PerlIOUnix)->fd;
2515 }
2516
2517 static void
2518 PerlIOUnix_setfd(pTHX_ PerlIO *f, int fd, int imode)
2519 {
2520     PerlIOUnix * const s = PerlIOSelf(f, PerlIOUnix);
2521 #if defined(WIN32)
2522     Stat_t st;
2523     if (PerlLIO_fstat(fd, &st) == 0) {
2524         if (!S_ISREG(st.st_mode)) {
2525             PerlIO_debug("%d is not regular file\n",fd);
2526             PerlIOBase(f)->flags |= PERLIO_F_NOTREG;
2527         }
2528         else {
2529             PerlIO_debug("%d _is_ a regular file\n",fd);
2530         }
2531     }
2532 #endif
2533     s->fd = fd;
2534     s->oflags = imode;
2535     PerlIOUnix_refcnt_inc(fd);
2536     PERL_UNUSED_CONTEXT;
2537 }
2538
2539 IV
2540 PerlIOUnix_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2541 {
2542     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2543     if (*PerlIONext(f)) {
2544         /* We never call down so do any pending stuff now */
2545         PerlIO_flush(PerlIONext(f));
2546         /*
2547          * XXX could (or should) we retrieve the oflags from the open file
2548          * handle rather than believing the "mode" we are passed in? XXX
2549          * Should the value on NULL mode be 0 or -1?
2550          */
2551         PerlIOUnix_setfd(aTHX_ f, PerlIO_fileno(PerlIONext(f)),
2552                          mode ? PerlIOUnix_oflags(mode) : -1);
2553     }
2554     PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2555
2556     return code;
2557 }
2558
2559 IV
2560 PerlIOUnix_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2561 {
2562     const int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2563     Off_t new_loc;
2564     PERL_UNUSED_CONTEXT;
2565     if (PerlIOBase(f)->flags & PERLIO_F_NOTREG) {
2566 #ifdef  ESPIPE
2567         SETERRNO(ESPIPE, LIB_INVARG);
2568 #else
2569         SETERRNO(EINVAL, LIB_INVARG);
2570 #endif
2571         return -1;
2572     }
2573     new_loc = PerlLIO_lseek(fd, offset, whence);
2574     if (new_loc == (Off_t) - 1)
2575         return -1;
2576     PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
2577     return  0;
2578 }
2579
2580 PerlIO *
2581 PerlIOUnix_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2582                 IV n, const char *mode, int fd, int imode,
2583                 int perm, PerlIO *f, int narg, SV **args)
2584 {
2585     if (PerlIOValid(f)) {
2586         if (PerlIOBase(f)->flags & PERLIO_F_OPEN)
2587             (*PerlIOBase(f)->tab->Close)(aTHX_ f);
2588     }
2589     if (narg > 0) {
2590         if (*mode == IoTYPE_NUMERIC)
2591             mode++;
2592         else {
2593             imode = PerlIOUnix_oflags(mode);
2594             perm = 0666;
2595         }
2596         if (imode != -1) {
2597             const char *path = SvPV_nolen_const(*args);
2598             fd = PerlLIO_open3(path, imode, perm);
2599         }
2600     }
2601     if (fd >= 0) {
2602         if (*mode == IoTYPE_IMPLICIT)
2603             mode++;
2604         if (!f) {
2605             f = PerlIO_allocate(aTHX);
2606         }
2607         if (!PerlIOValid(f)) {
2608             if (!(f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2609                 return NULL;
2610             }
2611         }
2612         PerlIOUnix_setfd(aTHX_ f, fd, imode);
2613         PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2614         if (*mode == IoTYPE_APPEND)
2615             PerlIOUnix_seek(aTHX_ f, 0, SEEK_END);
2616         return f;
2617     }
2618     else {
2619         if (f) {
2620             NOOP;
2621             /*
2622              * FIXME: pop layers ???
2623              */
2624         }
2625         return NULL;
2626     }
2627 }
2628
2629 PerlIO *
2630 PerlIOUnix_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2631 {
2632     const PerlIOUnix * const os = PerlIOSelf(o, PerlIOUnix);
2633     int fd = os->fd;
2634     if (flags & PERLIO_DUP_FD) {
2635         fd = PerlLIO_dup(fd);
2636     }
2637     if (fd >= 0) {
2638         f = PerlIOBase_dup(aTHX_ f, o, param, flags);
2639         if (f) {
2640             /* If all went well overwrite fd in dup'ed lay with the dup()'ed fd */
2641             PerlIOUnix_setfd(aTHX_ f, fd, os->oflags);
2642             return f;
2643         }
2644     }
2645     return NULL;
2646 }
2647
2648
2649 SSize_t
2650 PerlIOUnix_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2651 {
2652     dVAR;
2653     const int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2654 #ifdef PERLIO_STD_SPECIAL
2655     if (fd == 0)
2656         return PERLIO_STD_IN(fd, vbuf, count);
2657 #endif
2658     if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD) ||
2659          PerlIOBase(f)->flags & (PERLIO_F_EOF|PERLIO_F_ERROR)) {
2660         return 0;
2661     }
2662     while (1) {
2663         const SSize_t len = PerlLIO_read(fd, vbuf, count);
2664         if (len >= 0 || errno != EINTR) {
2665             if (len < 0) {
2666                 if (errno != EAGAIN) {
2667                     PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2668                 }
2669             }
2670             else if (len == 0 && count != 0) {
2671                 PerlIOBase(f)->flags |= PERLIO_F_EOF;
2672                 SETERRNO(0,0);
2673             }
2674             return len;
2675         }
2676         PERL_ASYNC_CHECK();
2677     }
2678     /*NOTREACHED*/
2679 }
2680
2681 SSize_t
2682 PerlIOUnix_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2683 {
2684     dVAR;
2685     const int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2686 #ifdef PERLIO_STD_SPECIAL
2687     if (fd == 1 || fd == 2)
2688         return PERLIO_STD_OUT(fd, vbuf, count);
2689 #endif
2690     while (1) {
2691         const SSize_t len = PerlLIO_write(fd, vbuf, count);
2692         if (len >= 0 || errno != EINTR) {
2693             if (len < 0) {
2694                 if (errno != EAGAIN) {
2695                     PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2696                 }
2697             }
2698             return len;
2699         }
2700         PERL_ASYNC_CHECK();
2701     }
2702     /*NOTREACHED*/
2703 }
2704
2705 Off_t
2706 PerlIOUnix_tell(pTHX_ PerlIO *f)
2707 {
2708     PERL_UNUSED_CONTEXT;
2709
2710     return PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, 0, SEEK_CUR);
2711 }
2712
2713
2714 IV
2715 PerlIOUnix_close(pTHX_ PerlIO *f)
2716 {
2717     dVAR;
2718     const int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2719     int code = 0;
2720     if (PerlIOBase(f)->flags & PERLIO_F_OPEN) {
2721         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2722             PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2723             return 0;
2724         }
2725     }
2726     else {
2727         SETERRNO(EBADF,SS_IVCHAN);
2728         return -1;
2729     }
2730     while (PerlLIO_close(fd) != 0) {
2731         if (errno != EINTR) {
2732             code = -1;
2733             break;
2734         }
2735         PERL_ASYNC_CHECK();
2736     }
2737     if (code == 0) {
2738         PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2739     }
2740     return code;
2741 }
2742
2743 PERLIO_FUNCS_DECL(PerlIO_unix) = {
2744     sizeof(PerlIO_funcs),
2745     "unix",
2746     sizeof(PerlIOUnix),
2747     PERLIO_K_RAW,
2748     PerlIOUnix_pushed,
2749     PerlIOBase_popped,
2750     PerlIOUnix_open,
2751     PerlIOBase_binmode,         /* binmode */
2752     NULL,
2753     PerlIOUnix_fileno,
2754     PerlIOUnix_dup,
2755     PerlIOUnix_read,
2756     PerlIOBase_unread,
2757     PerlIOUnix_write,
2758     PerlIOUnix_seek,
2759     PerlIOUnix_tell,
2760     PerlIOUnix_close,
2761     PerlIOBase_noop_ok,         /* flush */
2762     PerlIOBase_noop_fail,       /* fill */
2763     PerlIOBase_eof,
2764     PerlIOBase_error,
2765     PerlIOBase_clearerr,
2766     PerlIOBase_setlinebuf,
2767     NULL,                       /* get_base */
2768     NULL,                       /* get_bufsiz */
2769     NULL,                       /* get_ptr */
2770     NULL,                       /* get_cnt */
2771     NULL,                       /* set_ptrcnt */
2772 };
2773
2774 /*--------------------------------------------------------------------------------------*/
2775 /*
2776  * stdio as a layer
2777  */
2778
2779 #if defined(VMS) && !defined(STDIO_BUFFER_WRITABLE)
2780 /* perl5.8 - This ensures the last minute VMS ungetc fix is not
2781    broken by the last second glibc 2.3 fix
2782  */
2783 #define STDIO_BUFFER_WRITABLE
2784 #endif
2785
2786
2787 typedef struct {
2788     struct _PerlIO base;
2789     FILE *stdio;                /* The stream */
2790 } PerlIOStdio;
2791
2792 IV
2793 PerlIOStdio_fileno(pTHX_ PerlIO *f)
2794 {
2795     PERL_UNUSED_CONTEXT;
2796
2797     if (PerlIOValid(f)) {
2798         FILE * const s = PerlIOSelf(f, PerlIOStdio)->stdio;
2799         if (s)
2800             return PerlSIO_fileno(s);
2801     }
2802     errno = EBADF;
2803     return -1;
2804 }
2805
2806 char *
2807 PerlIOStdio_mode(const char *mode, char *tmode)
2808 {
2809     char * const ret = tmode;
2810     if (mode) {
2811         while (*mode) {
2812             *tmode++ = *mode++;
2813         }
2814     }
2815 #if defined(PERLIO_USING_CRLF) || defined(__CYGWIN__)
2816     *tmode++ = 'b';
2817 #endif
2818     *tmode = '\0';
2819     return ret;
2820 }
2821
2822 IV
2823 PerlIOStdio_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2824 {
2825     PerlIO *n;
2826     if (PerlIOValid(f) && PerlIOValid(n = PerlIONext(f))) {
2827         PerlIO_funcs * const toptab = PerlIOBase(n)->tab;
2828         if (toptab == tab) {
2829             /* Top is already stdio - pop self (duplicate) and use original */
2830             PerlIO_pop(aTHX_ f);
2831             return 0;
2832         } else {
2833             const int fd = PerlIO_fileno(n);
2834             char tmode[8];
2835             FILE *stdio;
2836             if (fd >= 0 && (stdio  = PerlSIO_fdopen(fd,
2837                             mode = PerlIOStdio_mode(mode, tmode)))) {
2838                 PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2839                 /* We never call down so do any pending stuff now */
2840                 PerlIO_flush(PerlIONext(f));
2841             }
2842             else {
2843                 return -1;
2844             }
2845         }
2846     }
2847     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2848 }
2849
2850
2851 PerlIO *
2852 PerlIO_importFILE(FILE *stdio, const char *mode)
2853 {
2854     dTHX;
2855     PerlIO *f = NULL;
2856     if (stdio) {
2857         PerlIOStdio *s;
2858         if (!mode || !*mode) {
2859             /* We need to probe to see how we can open the stream
2860                so start with read/write and then try write and read
2861                we dup() so that we can fclose without loosing the fd.
2862
2863                Note that the errno value set by a failing fdopen
2864                varies between stdio implementations.
2865              */
2866             const int fd = PerlLIO_dup(fileno(stdio));
2867             FILE *f2 = PerlSIO_fdopen(fd, (mode = "r+"));
2868             if (!f2) {
2869                 f2 = PerlSIO_fdopen(fd, (mode = "w"));
2870             }
2871             if (!f2) {
2872                 f2 = PerlSIO_fdopen(fd, (mode = "r"));
2873             }
2874             if (!f2) {
2875                 /* Don't seem to be able to open */
2876                 PerlLIO_close(fd);
2877                 return f;
2878             }
2879             fclose(f2);
2880         }
2881         if ((f = PerlIO_push(aTHX_(f = PerlIO_allocate(aTHX)), PERLIO_FUNCS_CAST(&PerlIO_stdio), mode, NULL))) {
2882             s = PerlIOSelf(f, PerlIOStdio);
2883             s->stdio = stdio;
2884             PerlIOUnix_refcnt_inc(fileno(stdio));
2885         }
2886     }
2887     return f;
2888 }
2889
2890 PerlIO *
2891 PerlIOStdio_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2892                  IV n, const char *mode, int fd, int imode,
2893                  int perm, PerlIO *f, int narg, SV **args)
2894 {
2895     char tmode[8];
2896     if (PerlIOValid(f)) {
2897         const char * const path = SvPV_nolen_const(*args);
2898         PerlIOStdio * const s = PerlIOSelf(f, PerlIOStdio);
2899         FILE *stdio;
2900         PerlIOUnix_refcnt_dec(fileno(s->stdio));
2901         stdio = PerlSIO_freopen(path, (mode = PerlIOStdio_mode(mode, tmode)),
2902                             s->stdio);
2903         if (!s->stdio)
2904             return NULL;
2905         s->stdio = stdio;
2906         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2907         return f;
2908     }
2909     else {
2910         if (narg > 0) {
2911             const char * const path = SvPV_nolen_const(*args);
2912             if (*mode == IoTYPE_NUMERIC) {
2913                 mode++;
2914                 fd = PerlLIO_open3(path, imode, perm);
2915             }
2916             else {
2917                 FILE *stdio;
2918                 bool appended = FALSE;
2919 #ifdef __CYGWIN__
2920                 /* Cygwin wants its 'b' early. */
2921                 appended = TRUE;
2922                 mode = PerlIOStdio_mode(mode, tmode);
2923 #endif
2924                 stdio = PerlSIO_fopen(path, mode);
2925                 if (stdio) {
2926                     if (!f) {
2927                         f = PerlIO_allocate(aTHX);
2928                     }
2929                     if (!appended)
2930                         mode = PerlIOStdio_mode(mode, tmode);
2931                     f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg);
2932                     if (f) {
2933                         PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2934                         PerlIOUnix_refcnt_inc(fileno(stdio));
2935                     } else {
2936                         PerlSIO_fclose(stdio);
2937                     }
2938                     return f;
2939                 }
2940                 else {
2941                     return NULL;
2942                 }
2943             }
2944         }
2945         if (fd >= 0) {
2946             FILE *stdio = NULL;
2947             int init = 0;
2948             if (*mode == IoTYPE_IMPLICIT) {
2949                 init = 1;
2950                 mode++;
2951             }
2952             if (init) {
2953                 switch (fd) {
2954                 case 0:
2955                     stdio = PerlSIO_stdin;
2956                     break;
2957                 case 1:
2958                     stdio = PerlSIO_stdout;
2959                     break;
2960                 case 2:
2961                     stdio = PerlSIO_stderr;
2962                     break;
2963                 }
2964             }
2965             else {
2966                 stdio = PerlSIO_fdopen(fd, mode =
2967                                        PerlIOStdio_mode(mode, tmode));
2968             }
2969             if (stdio) {
2970                 if (!f) {
2971                     f = PerlIO_allocate(aTHX);
2972                 }
2973                 if ((f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2974                     PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2975                     PerlIOUnix_refcnt_inc(fileno(stdio));
2976                 }
2977                 return f;
2978             }
2979         }
2980     }
2981     return NULL;
2982 }
2983
2984 PerlIO *
2985 PerlIOStdio_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2986 {
2987     /* This assumes no layers underneath - which is what
2988        happens, but is not how I remember it. NI-S 2001/10/16
2989      */
2990     if ((f = PerlIOBase_dup(aTHX_ f, o, param, flags))) {
2991         FILE *stdio = PerlIOSelf(o, PerlIOStdio)->stdio;
2992         const int fd = fileno(stdio);
2993         char mode[8];
2994         if (flags & PERLIO_DUP_FD) {
2995             const int dfd = PerlLIO_dup(fileno(stdio));
2996             if (dfd >= 0) {
2997                 stdio = PerlSIO_fdopen(dfd, PerlIO_modestr(o,mode));
2998                 goto set_this;
2999             }
3000             else {
3001                 NOOP;
3002                 /* FIXME: To avoid messy error recovery if dup fails
3003                    re-use the existing stdio as though flag was not set
3004                  */
3005             }
3006         }
3007         stdio = PerlSIO_fdopen(fd, PerlIO_modestr(o,mode));
3008     set_this:
3009         PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
3010         PerlIOUnix_refcnt_inc(fileno(stdio));
3011     }
3012     return f;
3013 }
3014
3015 static int
3016 PerlIOStdio_invalidate_fileno(pTHX_ FILE *f)
3017 {
3018     PERL_UNUSED_CONTEXT;
3019
3020     /* XXX this could use PerlIO_canset_fileno() and
3021      * PerlIO_set_fileno() support from Configure
3022      */
3023 #  if defined(__UCLIBC__)
3024     /* uClibc must come before glibc because it defines __GLIBC__ as well. */
3025     f->__filedes = -1;
3026     return 1;
3027 #  elif defined(__GLIBC__)
3028     /* There may be a better way for GLIBC:
3029         - libio.h defines a flag to not close() on cleanup
3030      */
3031     f->_fileno = -1;
3032     return 1;
3033 #  elif defined(__sun__)
3034     PERL_UNUSED_ARG(f);
3035     return 0;
3036 #  elif defined(__hpux)
3037     f->__fileH = 0xff;
3038     f->__fileL = 0xff;
3039     return 1;
3040    /* Next one ->_file seems to be a reasonable fallback, i.e. if
3041       your platform does not have special entry try this one.
3042       [For OSF only have confirmation for Tru64 (alpha)
3043       but assume other OSFs will be similar.]
3044     */
3045 #  elif defined(_AIX) || defined(__osf__) || defined(__irix__)
3046     f->_file = -1;
3047     return 1;
3048 #  elif defined(__FreeBSD__)
3049     /* There may be a better way on FreeBSD:
3050         - we could insert a dummy func in the _close function entry
3051         f->_close = (int (*)(void *)) dummy_close;
3052      */
3053     f->_file = -1;
3054     return 1;
3055 #  elif defined(__OpenBSD__)
3056     /* There may be a better way on OpenBSD:
3057         - we could insert a dummy func in the _close function entry
3058         f->_close = (int (*)(void *)) dummy_close;
3059      */
3060     f->_file = -1;
3061     return 1;
3062 #  elif defined(__EMX__)
3063     /* f->_flags &= ~_IOOPEN; */        /* Will leak stream->_buffer */
3064     f->_handle = -1;
3065     return 1;
3066 #  elif defined(__CYGWIN__)
3067     /* There may be a better way on CYGWIN:
3068         - we could insert a dummy func in the _close function entry
3069         f->_close = (int (*)(void *)) dummy_close;
3070      */
3071     f->_file = -1;
3072     return 1;
3073 #  elif defined(WIN32)
3074 #    if defined(__BORLANDC__)
3075     f->fd = PerlLIO_dup(fileno(f));
3076 #    elif defined(UNDER_CE)
3077     /* WIN_CE does not have access to FILE internals, it hardly has FILE
3078        structure at all
3079      */
3080 #    else
3081     f->_file = -1;
3082 #    endif
3083     return 1;
3084 #  else
3085 #if 0
3086     /* Sarathy's code did this - we fall back to a dup/dup2 hack
3087        (which isn't thread safe) instead
3088      */
3089 #    error "Don't know how to set FILE.fileno on your platform"
3090 #endif
3091     PERL_UNUSED_ARG(f);
3092     return 0;
3093 #  endif
3094 }
3095
3096 IV
3097 PerlIOStdio_close(pTHX_ PerlIO *f)
3098 {
3099     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3100     if (!stdio) {
3101         errno = EBADF;
3102         return -1;
3103     }
3104     else {
3105         const int fd = fileno(stdio);
3106         int invalidate = 0;
3107         IV result = 0;
3108         int saveerr = 0;
3109         int dupfd = 0;
3110 #ifdef SOCKS5_VERSION_NAME
3111         /* Socks lib overrides close() but stdio isn't linked to
3112            that library (though we are) - so we must call close()
3113            on sockets on stdio's behalf.
3114          */
3115         int optval;
3116         Sock_size_t optlen = sizeof(int);
3117         if (getsockopt(fd, SOL_SOCKET, SO_TYPE, (void *) &optval, &optlen) == 0)
3118             invalidate = 1;
3119 #endif
3120         if (PerlIOUnix_refcnt_dec(fd) > 0) /* File descriptor still in use */
3121             invalidate = 1;
3122         if (invalidate) {
3123             /* For STD* handles, don't close stdio, since we shared the FILE *, too. */
3124             if (stdio == stdin) /* Some stdios are buggy fflush-ing inputs */
3125                 return 0;
3126             if (stdio == stdout || stdio == stderr)
3127                 return PerlIO_flush(f);
3128             /* Tricky - must fclose(stdio) to free memory but not close(fd)
3129                Use Sarathy's trick from maint-5.6 to invalidate the
3130                fileno slot of the FILE *
3131             */
3132             result = PerlIO_flush(f);
3133             saveerr = errno;
3134             invalidate = PerlIOStdio_invalidate_fileno(aTHX_ stdio);
3135             if (!invalidate)
3136                 dupfd = PerlLIO_dup(fd);
3137         }
3138         result = PerlSIO_fclose(stdio);
3139         /* We treat error from stdio as success if we invalidated
3140            errno may NOT be expected EBADF
3141          */
3142         if (invalidate && result != 0) {
3143             errno = saveerr;
3144             result = 0;
3145         }
3146 #ifdef SOCKS5_VERSION_NAME
3147         /* in SOCKS' case, let close() determine return value */
3148         result = close(fd);
3149 #endif
3150         if (dupfd) {
3151             PerlLIO_dup2(dupfd,fd);
3152             PerlLIO_close(dupfd);
3153         }
3154         return result;
3155     }
3156 }
3157
3158 SSize_t
3159 PerlIOStdio_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3160 {
3161     dVAR;
3162     FILE * const s = PerlIOSelf(f, PerlIOStdio)->stdio;
3163     SSize_t got = 0;
3164     for (;;) {
3165         if (count == 1) {
3166             STDCHAR *buf = (STDCHAR *) vbuf;
3167             /*
3168              * Perl is expecting PerlIO_getc() to fill the buffer Linux's
3169              * stdio does not do that for fread()
3170              */
3171             const int ch = PerlSIO_fgetc(s);
3172             if (ch != EOF) {
3173                 *buf = ch;
3174                 got = 1;
3175             }
3176         }
3177         else
3178             got = PerlSIO_fread(vbuf, 1, count, s);
3179         if (got == 0 && PerlSIO_ferror(s))
3180             got = -1;
3181         if (got >= 0 || errno != EINTR)
3182             break;
3183         PERL_ASYNC_CHECK();
3184         SETERRNO(0,0);  /* just in case */
3185     }
3186     return got;
3187 }
3188
3189 SSize_t
3190 PerlIOStdio_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3191 {
3192     SSize_t unread = 0;
3193     FILE * const s = PerlIOSelf(f, PerlIOStdio)->stdio;
3194
3195 #ifdef STDIO_BUFFER_WRITABLE
3196     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
3197         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
3198         STDCHAR *base = PerlIO_get_base(f);
3199         SSize_t cnt   = PerlIO_get_cnt(f);
3200         STDCHAR *ptr  = PerlIO_get_ptr(f);
3201         SSize_t avail = ptr - base;
3202         if (avail > 0) {
3203             if (avail > count) {
3204                 avail = count;
3205             }
3206             ptr -= avail;
3207             Move(buf-avail,ptr,avail,STDCHAR);
3208             count -= avail;
3209             unread += avail;
3210             PerlIO_set_ptrcnt(f,ptr,cnt+avail);
3211             if (PerlSIO_feof(s) && unread >= 0)
3212                 PerlSIO_clearerr(s);
3213         }
3214     }
3215     else
3216 #endif
3217     if (PerlIO_has_cntptr(f)) {
3218         /* We can get pointer to buffer but not its base
3219            Do ungetc() but check chars are ending up in the
3220            buffer
3221          */
3222         STDCHAR *eptr = (STDCHAR*)PerlSIO_get_ptr(s);
3223         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
3224         while (count > 0) {
3225             const int ch = *--buf & 0xFF;
3226             if (ungetc(ch,s) != ch) {
3227                 /* ungetc did not work */
3228                 break;
3229             }
3230             if ((STDCHAR*)PerlSIO_get_ptr(s) != --eptr || ((*eptr & 0xFF) != ch)) {
3231                 /* Did not change pointer as expected */
3232                 fgetc(s);  /* get char back again */
3233                 break;
3234             }
3235             /* It worked ! */
3236             count--;
3237             unread++;
3238         }
3239     }
3240
3241     if (count > 0) {
3242         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
3243     }
3244     return unread;
3245 }
3246
3247 SSize_t
3248 PerlIOStdio_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3249 {
3250     dVAR;
3251     SSize_t got;
3252     for (;;) {
3253         got = PerlSIO_fwrite(vbuf, 1, count,
3254                               PerlIOSelf(f, PerlIOStdio)->stdio);
3255         if (got >= 0 || errno != EINTR)
3256             break;
3257         PERL_ASYNC_CHECK();
3258         SETERRNO(0,0);  /* just in case */
3259     }
3260     return got;
3261 }
3262
3263 IV
3264 PerlIOStdio_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3265 {
3266     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3267     PERL_UNUSED_CONTEXT;
3268
3269     return PerlSIO_fseek(stdio, offset, whence);
3270 }
3271
3272 Off_t
3273 PerlIOStdio_tell(pTHX_ PerlIO *f)
3274 {
3275     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3276     PERL_UNUSED_CONTEXT;
3277
3278     return PerlSIO_ftell(stdio);
3279 }
3280
3281 IV
3282 PerlIOStdio_flush(pTHX_ PerlIO *f)
3283 {
3284     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3285     PERL_UNUSED_CONTEXT;
3286
3287     if (PerlIOBase(f)->flags & PERLIO_F_CANWRITE) {
3288         return PerlSIO_fflush(stdio);
3289     }
3290     else {
3291         NOOP;
3292 #if 0
3293         /*
3294          * FIXME: This discards ungetc() and pre-read stuff which is not
3295          * right if this is just a "sync" from a layer above Suspect right
3296          * design is to do _this_ but not have layer above flush this
3297          * layer read-to-read
3298          */
3299         /*
3300          * Not writeable - sync by attempting a seek
3301          */
3302         const int err = errno;
3303         if (PerlSIO_fseek(stdio, (Off_t) 0, SEEK_CUR) != 0)
3304             errno = err;
3305 #endif
3306     }
3307     return 0;
3308 }
3309
3310 IV
3311 PerlIOStdio_eof(pTHX_ PerlIO *f)
3312 {
3313     PERL_UNUSED_CONTEXT;
3314
3315     return PerlSIO_feof(PerlIOSelf(f, PerlIOStdio)->stdio);
3316 }
3317
3318 IV
3319 PerlIOStdio_error(pTHX_ PerlIO *f)
3320 {
3321     PERL_UNUSED_CONTEXT;
3322
3323     return PerlSIO_ferror(PerlIOSelf(f, PerlIOStdio)->stdio);
3324 }
3325
3326 void
3327 PerlIOStdio_clearerr(pTHX_ PerlIO *f)
3328 {
3329     PERL_UNUSED_CONTEXT;
3330
3331     PerlSIO_clearerr(PerlIOSelf(f, PerlIOStdio)->stdio);
3332 }
3333
3334 void
3335 PerlIOStdio_setlinebuf(pTHX_ PerlIO *f)
3336 {
3337     PERL_UNUSED_CONTEXT;
3338
3339 #ifdef HAS_SETLINEBUF
3340     PerlSIO_setlinebuf(PerlIOSelf(f, PerlIOStdio)->stdio);
3341 #else
3342     PerlSIO_setvbuf(PerlIOSelf(f, PerlIOStdio)->stdio, NULL, _IOLBF, 0);
3343 #endif
3344 }
3345
3346 #ifdef FILE_base
3347 STDCHAR *
3348 PerlIOStdio_get_base(pTHX_ PerlIO *f)
3349 {
3350     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3351     return (STDCHAR*)PerlSIO_get_base(stdio);
3352 }
3353
3354 Size_t
3355 PerlIOStdio_get_bufsiz(pTHX_ PerlIO *f)
3356 {
3357     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3358     return PerlSIO_get_bufsiz(stdio);
3359 }
3360 #endif
3361
3362 #ifdef USE_STDIO_PTR
3363 STDCHAR *
3364 PerlIOStdio_get_ptr(pTHX_ PerlIO *f)
3365 {
3366     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3367     return (STDCHAR*)PerlSIO_get_ptr(stdio);
3368 }
3369
3370 SSize_t
3371 PerlIOStdio_get_cnt(pTHX_ PerlIO *f)
3372 {
3373     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3374     return PerlSIO_get_cnt(stdio);
3375 }
3376
3377 void
3378 PerlIOStdio_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3379 {
3380     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3381     if (ptr != NULL) {
3382 #ifdef STDIO_PTR_LVALUE
3383         PerlSIO_set_ptr(stdio, ptr); /* LHS STDCHAR* cast non-portable */
3384 #ifdef STDIO_PTR_LVAL_SETS_CNT
3385         if (PerlSIO_get_cnt(stdio) != (cnt)) {
3386             assert(PerlSIO_get_cnt(stdio) == (cnt));
3387         }
3388 #endif
3389 #if (!defined(STDIO_PTR_LVAL_NOCHANGE_CNT))
3390         /*
3391          * Setting ptr _does_ change cnt - we are done
3392          */
3393         return;
3394 #endif
3395 #else                           /* STDIO_PTR_LVALUE */
3396         PerlProc_abort();
3397 #endif                          /* STDIO_PTR_LVALUE */
3398     }
3399     /*
3400      * Now (or only) set cnt
3401      */
3402 #ifdef STDIO_CNT_LVALUE
3403     PerlSIO_set_cnt(stdio, cnt);
3404 #else                           /* STDIO_CNT_LVALUE */
3405 #if (defined(STDIO_PTR_LVALUE) && defined(STDIO_PTR_LVAL_SETS_CNT))
3406     PerlSIO_set_ptr(stdio,
3407                     PerlSIO_get_ptr(stdio) + (PerlSIO_get_cnt(stdio) -
3408                                               cnt));
3409 #else                           /* STDIO_PTR_LVAL_SETS_CNT */
3410     PerlProc_abort();
3411 #endif                          /* STDIO_PTR_LVAL_SETS_CNT */
3412 #endif                          /* STDIO_CNT_LVALUE */
3413 }
3414
3415
3416 #endif
3417
3418 IV
3419 PerlIOStdio_fill(pTHX_ PerlIO *f)
3420 {
3421     FILE * const stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
3422     int c;
3423     PERL_UNUSED_CONTEXT;
3424
3425     /*
3426      * fflush()ing read-only streams can cause trouble on some stdio-s
3427      */
3428     if ((PerlIOBase(f)->flags & PERLIO_F_CANWRITE)) {
3429         if (PerlSIO_fflush(stdio) != 0)
3430             return EOF;
3431     }
3432     for (;;) {
3433         c = PerlSIO_fgetc(stdio);
3434         if (c != EOF)
3435             break;
3436         if (! PerlSIO_ferror(stdio) || errno != EINTR)
3437             return EOF;
3438         PERL_ASYNC_CHECK();
3439         SETERRNO(0,0);
3440     }
3441
3442 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
3443
3444 #ifdef STDIO_BUFFER_WRITABLE
3445     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
3446         /* Fake ungetc() to the real buffer in case system's ungetc
3447            goes elsewhere
3448          */
3449         STDCHAR *base = (STDCHAR*)PerlSIO_get_base(stdio);
3450         SSize_t cnt   = PerlSIO_get_cnt(stdio);
3451         STDCHAR *ptr  = (STDCHAR*)PerlSIO_get_ptr(stdio);
3452         if (ptr == base+1) {
3453             *--ptr = (STDCHAR) c;
3454             PerlIOStdio_set_ptrcnt(aTHX_ f,ptr,cnt+1);
3455             if (PerlSIO_feof(stdio))
3456                 PerlSIO_clearerr(stdio);
3457             return 0;
3458         }
3459     }
3460     else
3461 #endif
3462     if (PerlIO_has_cntptr(f)) {
3463         STDCHAR ch = c;
3464         if (PerlIOStdio_unread(aTHX_ f,&ch,1) == 1) {
3465             return 0;
3466         }
3467     }
3468 #endif
3469
3470 #if defined(VMS)
3471     /* An ungetc()d char is handled separately from the regular
3472      * buffer, so we stuff it in the buffer ourselves.
3473      * Should never get called as should hit code above
3474      */
3475     *(--((*stdio)->_ptr)) = (unsigned char) c;
3476     (*stdio)->_cnt++;
3477 #else
3478     /* If buffer snoop scheme above fails fall back to
3479        using ungetc().
3480      */
3481     if (PerlSIO_ungetc(c, stdio) != c)
3482         return EOF;
3483 #endif
3484     return 0;
3485 }
3486
3487
3488
3489 PERLIO_FUNCS_DECL(PerlIO_stdio) = {
3490     sizeof(PerlIO_funcs),
3491     "stdio",
3492     sizeof(PerlIOStdio),
3493     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3494     PerlIOStdio_pushed,
3495     PerlIOBase_popped,
3496     PerlIOStdio_open,
3497     PerlIOBase_binmode,         /* binmode */
3498     NULL,
3499     PerlIOStdio_fileno,
3500     PerlIOStdio_dup,
3501     PerlIOStdio_read,
3502     PerlIOStdio_unread,
3503     PerlIOStdio_write,
3504     PerlIOStdio_seek,
3505     PerlIOStdio_tell,
3506     PerlIOStdio_close,
3507     PerlIOStdio_flush,
3508     PerlIOStdio_fill,
3509     PerlIOStdio_eof,
3510     PerlIOStdio_error,
3511     PerlIOStdio_clearerr,
3512     PerlIOStdio_setlinebuf,
3513 #ifdef FILE_base
3514     PerlIOStdio_get_base,
3515     PerlIOStdio_get_bufsiz,
3516 #else
3517     NULL,
3518     NULL,
3519 #endif
3520 #ifdef USE_STDIO_PTR
3521     PerlIOStdio_get_ptr,
3522     PerlIOStdio_get_cnt,
3523 #   if defined(HAS_FAST_STDIO) && defined(USE_FAST_STDIO)
3524     PerlIOStdio_set_ptrcnt,
3525 #   else
3526     NULL,
3527 #   endif /* HAS_FAST_STDIO && USE_FAST_STDIO */
3528 #else
3529     NULL,
3530     NULL,
3531     NULL,
3532 #endif /* USE_STDIO_PTR */
3533 };
3534
3535 /* Note that calls to PerlIO_exportFILE() are reversed using
3536  * PerlIO_releaseFILE(), not importFILE. */
3537 FILE *
3538 PerlIO_exportFILE(PerlIO * f, const char *mode)
3539 {
3540     dTHX;
3541     FILE *stdio = NULL;
3542     if (PerlIOValid(f)) {
3543         char buf[8];
3544         PerlIO_flush(f);
3545         if (!mode || !*mode) {
3546             mode = PerlIO_modestr(f, buf);
3547         }
3548         stdio = PerlSIO_fdopen(PerlIO_fileno(f), mode);
3549         if (stdio) {
3550             PerlIOl *l = *f;
3551             PerlIO *f2;
3552             /* De-link any lower layers so new :stdio sticks */
3553             *f = NULL;
3554             if ((f2 = PerlIO_push(aTHX_ f, PERLIO_FUNCS_CAST(&PerlIO_stdio), buf, NULL))) {
3555                 PerlIOStdio *s = PerlIOSelf((f = f2), PerlIOStdio);
3556                 s->stdio = stdio;
3557                 PerlIOUnix_refcnt_inc(fileno(stdio));
3558                 /* Link previous lower layers under new one */
3559                 *PerlIONext(f) = l;
3560             }
3561             else {
3562                 /* restore layers list */
3563                 *f = l;
3564             }
3565         }
3566     }
3567     return stdio;
3568 }
3569
3570
3571 FILE *
3572 PerlIO_findFILE(PerlIO *f)
3573 {
3574     PerlIOl *l = *f;
3575     while (l) {
3576         if (l->tab == &PerlIO_stdio) {
3577             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3578             return s->stdio;
3579         }
3580         l = *PerlIONext(&l);
3581     }
3582     /* Uses fallback "mode" via PerlIO_modestr() in PerlIO_exportFILE */
3583     return PerlIO_exportFILE(f, NULL);
3584 }
3585
3586 /* Use this to reverse PerlIO_exportFILE calls. */
3587 void
3588 PerlIO_releaseFILE(PerlIO *p, FILE *f)
3589 {
3590     dVAR;
3591     PerlIOl *l;
3592     while ((l = *p)) {
3593         if (l->tab == &PerlIO_stdio) {
3594             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3595             if (s->stdio == f) {
3596                 dTHX;
3597                 const int fd = fileno(f);
3598                 if (fd >= 0)
3599                     PerlIOUnix_refcnt_dec(fd);
3600                 PerlIO_pop(aTHX_ p);
3601                 return;
3602             }
3603         }
3604         p = PerlIONext(p);
3605     }
3606     return;
3607 }
3608
3609 /*--------------------------------------------------------------------------------------*/
3610 /*
3611  * perlio buffer layer
3612  */
3613
3614 IV
3615 PerlIOBuf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3616 {
3617     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3618     const int fd = PerlIO_fileno(f);
3619     if (fd >= 0 && PerlLIO_isatty(fd)) {
3620         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF | PERLIO_F_TTY;
3621     }
3622     if (*PerlIONext(f)) {
3623         const Off_t posn = PerlIO_tell(PerlIONext(f));
3624         if (posn != (Off_t) - 1) {
3625             b->posn = posn;
3626         }
3627     }
3628     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3629 }
3630
3631 PerlIO *
3632 PerlIOBuf_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
3633                IV n, const char *mode, int fd, int imode, int perm,
3634                PerlIO *f, int narg, SV **args)
3635 {
3636     if (PerlIOValid(f)) {
3637         PerlIO *next = PerlIONext(f);
3638         PerlIO_funcs *tab =
3639              PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIOBase(next)->tab);
3640         if (tab && tab->Open)
3641              next =
3642                   (*tab->Open)(aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3643                                next, narg, args);
3644         if (!next || (*PerlIOBase(f)->tab->Pushed) (aTHX_ f, mode, PerlIOArg, self) != 0) {
3645             return NULL;
3646         }
3647     }
3648     else {
3649         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIO_default_btm());
3650         int init = 0;
3651         if (*mode == IoTYPE_IMPLICIT) {
3652             init = 1;
3653             /*
3654              * mode++;
3655              */
3656         }
3657         if (tab && tab->Open)
3658              f = (*tab->Open)(aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3659                               f, narg, args);
3660         else
3661              SETERRNO(EINVAL, LIB_INVARG);
3662         if (f) {
3663             if (PerlIO_push(aTHX_ f, self, mode, PerlIOArg) == 0) {
3664                 /*
3665                  * if push fails during open, open fails. close will pop us.
3666                  */
3667                 PerlIO_close (f);
3668                 return NULL;
3669             } else {
3670                 fd = PerlIO_fileno(f);
3671                 if (init && fd == 2) {
3672                     /*
3673                      * Initial stderr is unbuffered
3674                      */
3675                     PerlIOBase(f)->flags |= PERLIO_F_UNBUF;
3676                 }
3677 #ifdef PERLIO_USING_CRLF
3678 #  ifdef PERLIO_IS_BINMODE_FD
3679                 if (PERLIO_IS_BINMODE_FD(fd))
3680                     PerlIO_binmode(aTHX_ f,  '<'/*not used*/, O_BINARY, NULL);
3681                 else
3682 #  endif
3683                 /*
3684                  * do something about failing setmode()? --jhi
3685                  */
3686                 PerlLIO_setmode(fd, O_BINARY);
3687 #endif
3688             }
3689         }
3690     }
3691     return f;
3692 }
3693
3694 /*
3695  * This "flush" is akin to sfio's sync in that it handles files in either
3696  * read or write state.  For write state, we put the postponed data through
3697  * the next layers.  For read state, we seek() the next layers to the
3698  * offset given by current position in the buffer, and discard the buffer
3699  * state (XXXX supposed to be for seek()able buffers only, but now it is done
3700  * in any case?).  Then the pass the stick further in chain.
3701  */
3702 IV
3703 PerlIOBuf_flush(pTHX_ PerlIO *f)
3704 {
3705     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3706     int code = 0;
3707     PerlIO *n = PerlIONext(f);
3708     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF) {
3709         /*
3710          * write() the buffer
3711          */
3712         const STDCHAR *buf = b->buf;
3713         const STDCHAR *p = buf;
3714         while (p < b->ptr) {
3715             SSize_t count = PerlIO_write(n, p, b->ptr - p);
3716             if (count > 0) {
3717                 p += count;
3718             }
3719             else if (count < 0 || PerlIO_error(n)) {
3720                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3721                 code = -1;
3722                 break;
3723             }
3724         }
3725         b->posn += (p - buf);
3726     }
3727     else if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3728         STDCHAR *buf = PerlIO_get_base(f);
3729         /*
3730          * Note position change
3731          */
3732         b->posn += (b->ptr - buf);
3733         if (b->ptr < b->end) {
3734             /* We did not consume all of it - try and seek downstream to
3735                our logical position
3736              */
3737             if (PerlIOValid(n) && PerlIO_seek(n, b->posn, SEEK_SET) == 0) {
3738                 /* Reload n as some layers may pop themselves on seek */
3739                 b->posn = PerlIO_tell(n = PerlIONext(f));
3740             }
3741             else {
3742                 /* Seek failed (e.g. pipe or tty). Do NOT clear buffer or pre-read
3743                    data is lost for good - so return saying "ok" having undone
3744                    the position adjust
3745                  */
3746                 b->posn -= (b->ptr - buf);
3747                 return code;
3748             }
3749         }
3750     }
3751     b->ptr = b->end = b->buf;
3752     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3753     /* We check for Valid because of dubious decision to make PerlIO_flush(NULL) flush all */
3754     if (PerlIOValid(n) && PerlIO_flush(n) != 0)
3755         code = -1;
3756     return code;
3757 }
3758
3759 /* This discards the content of the buffer after b->ptr, and rereads
3760  * the buffer from the position off in the layer downstream; here off
3761  * is at offset corresponding to b->ptr - b->buf.
3762  */
3763 IV
3764 PerlIOBuf_fill(pTHX_ PerlIO *f)
3765 {
3766     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3767     PerlIO *n = PerlIONext(f);
3768     SSize_t avail;
3769     /*
3770      * Down-stream flush is defined not to loose read data so is harmless.
3771      * we would not normally be fill'ing if there was data left in anycase.
3772      */
3773     if (PerlIO_flush(f) != 0)   /* XXXX Check that its seek() succeeded?! */
3774         return -1;
3775     if (PerlIOBase(f)->flags & PERLIO_F_TTY)
3776         PerlIOBase_flush_linebuf(aTHX);
3777
3778     if (!b->buf)
3779         PerlIO_get_base(f);     /* allocate via vtable */
3780
3781     assert(b->buf); /* The b->buf does get allocated via the vtable system. */
3782
3783     b->ptr = b->end = b->buf;
3784
3785     if (!PerlIOValid(n)) {
3786         PerlIOBase(f)->flags |= PERLIO_F_EOF;
3787         return -1;
3788     }
3789
3790     if (PerlIO_fast_gets(n)) {
3791         /*
3792          * Layer below is also buffered. We do _NOT_ want to call its
3793          * ->Read() because that will loop till it gets what we asked for
3794          * which may hang on a pipe etc. Instead take anything it has to
3795          * hand, or ask it to fill _once_.
3796          */
3797         avail = PerlIO_get_cnt(n);
3798         if (avail <= 0) {
3799             avail = PerlIO_fill(n);
3800             if (avail == 0)
3801                 avail = PerlIO_get_cnt(n);
3802             else {
3803                 if (!PerlIO_error(n) && PerlIO_eof(n))
3804                     avail = 0;
3805             }
3806         }
3807         if (avail > 0) {
3808             STDCHAR *ptr = PerlIO_get_ptr(n);
3809             const SSize_t cnt = avail;
3810             if (avail > (SSize_t)b->bufsiz)
3811                 avail = b->bufsiz;
3812             Copy(ptr, b->buf, avail, STDCHAR);
3813             PerlIO_set_ptrcnt(n, ptr + avail, cnt - avail);
3814         }
3815     }
3816     else {
3817         avail = PerlIO_read(n, b->ptr, b->bufsiz);
3818     }
3819     if (avail <= 0) {
3820         if (avail == 0)
3821             PerlIOBase(f)->flags |= PERLIO_F_EOF;
3822         else
3823             PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3824         return -1;
3825     }
3826     b->end = b->buf + avail;
3827     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3828     return 0;
3829 }
3830
3831 SSize_t
3832 PerlIOBuf_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3833 {
3834     if (PerlIOValid(f)) {
3835         const PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3836         if (!b->ptr)
3837             PerlIO_get_base(f);
3838         return PerlIOBase_read(aTHX_ f, vbuf, count);
3839     }
3840     return 0;
3841 }
3842
3843 SSize_t
3844 PerlIOBuf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3845 {
3846     const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3847     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3848     SSize_t unread = 0;
3849     SSize_t avail;
3850     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3851         PerlIO_flush(f);
3852     if (!b->buf)
3853         PerlIO_get_base(f);
3854     if (b->buf) {
3855         if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3856             /*
3857              * Buffer is already a read buffer, we can overwrite any chars
3858              * which have been read back to buffer start
3859              */
3860             avail = (b->ptr - b->buf);
3861         }
3862         else {
3863             /*
3864              * Buffer is idle, set it up so whole buffer is available for
3865              * unread
3866              */
3867             avail = b->bufsiz;
3868             b->end = b->buf + avail;
3869             b->ptr = b->end;
3870             PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3871             /*
3872              * Buffer extends _back_ from where we are now
3873              */
3874             b->posn -= b->bufsiz;
3875         }
3876         if (avail > (SSize_t) count) {
3877             /*
3878              * If we have space for more than count, just move count
3879              */
3880             avail = count;
3881         }
3882         if (avail > 0) {
3883             b->ptr -= avail;
3884             buf -= avail;
3885             /*
3886              * In simple stdio-like ungetc() case chars will be already
3887              * there
3888              */
3889             if (buf != b->ptr) {
3890                 Copy(buf, b->ptr, avail, STDCHAR);
3891             }
3892             count -= avail;
3893             unread += avail;
3894             PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3895         }
3896     }
3897     if (count > 0) {
3898         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
3899     }
3900     return unread;
3901 }
3902
3903 SSize_t
3904 PerlIOBuf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3905 {
3906     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3907     const STDCHAR *buf = (const STDCHAR *) vbuf;
3908     const STDCHAR *flushptr = buf;
3909     Size_t written = 0;
3910     if (!b->buf)
3911         PerlIO_get_base(f);
3912     if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
3913         return 0;
3914     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3915         if (PerlIO_flush(f) != 0) {
3916             return 0;
3917         }
3918     }
3919     if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
3920         flushptr = buf + count;
3921         while (flushptr > buf && *(flushptr - 1) != '\n')
3922             --flushptr;
3923     }
3924     while (count > 0) {
3925         SSize_t avail = b->bufsiz - (b->ptr - b->buf);
3926         if ((SSize_t) count < avail)
3927             avail = count;
3928         if (flushptr > buf && flushptr <= buf + avail)
3929             avail = flushptr - buf;
3930         PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
3931         if (avail) {
3932             Copy(buf, b->ptr, avail, STDCHAR);
3933             count -= avail;
3934             buf += avail;
3935             written += avail;
3936             b->ptr += avail;
3937             if (buf == flushptr)
3938                 PerlIO_flush(f);
3939         }
3940         if (b->ptr >= (b->buf + b->bufsiz))
3941             PerlIO_flush(f);
3942     }
3943     if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
3944         PerlIO_flush(f);
3945     return written;
3946 }
3947
3948 IV
3949 PerlIOBuf_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3950 {
3951     IV code;
3952     if ((code = PerlIO_flush(f)) == 0) {
3953         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3954         code = PerlIO_seek(PerlIONext(f), offset, whence);
3955         if (code == 0) {
3956             PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3957             b->posn = PerlIO_tell(PerlIONext(f));
3958         }
3959     }
3960     return code;
3961 }
3962
3963 Off_t
3964 PerlIOBuf_tell(pTHX_ PerlIO *f)
3965 {
3966     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3967     /*
3968      * b->posn is file position where b->buf was read, or will be written
3969      */
3970     Off_t posn = b->posn;
3971     if ((PerlIOBase(f)->flags & PERLIO_F_APPEND) &&
3972         (PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
3973 #if 1
3974         /* As O_APPEND files are normally shared in some sense it is better
3975            to flush :
3976          */
3977         PerlIO_flush(f);
3978 #else
3979         /* when file is NOT shared then this is sufficient */
3980         PerlIO_seek(PerlIONext(f),0, SEEK_END);
3981 #endif
3982         posn = b->posn = PerlIO_tell(PerlIONext(f));
3983     }
3984     if (b->buf) {
3985         /*
3986          * If buffer is valid adjust position by amount in buffer
3987          */
3988         posn += (b->ptr - b->buf);
3989     }
3990     return posn;
3991 }
3992
3993 IV
3994 PerlIOBuf_popped(pTHX_ PerlIO *f)
3995 {
3996     const IV code = PerlIOBase_popped(aTHX_ f);
3997     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
3998     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3999         Safefree(b->buf);
4000     }
4001     b->ptr = b->end = b->buf = NULL;
4002     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
4003     return code;
4004 }
4005
4006 IV
4007 PerlIOBuf_close(pTHX_ PerlIO *f)
4008 {
4009     const IV code = PerlIOBase_close(aTHX_ f);
4010     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4011     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
4012         Safefree(b->buf);
4013     }
4014     b->ptr = b->end = b->buf = NULL;
4015     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
4016     return code;
4017 }
4018
4019 STDCHAR *
4020 PerlIOBuf_get_ptr(pTHX_ PerlIO *f)
4021 {
4022     const PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4023     if (!b->buf)
4024         PerlIO_get_base(f);
4025     return b->ptr;
4026 }
4027
4028 SSize_t
4029 PerlIOBuf_get_cnt(pTHX_ PerlIO *f)
4030 {
4031     const PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4032     if (!b->buf)
4033         PerlIO_get_base(f);
4034     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF)
4035         return (b->end - b->ptr);
4036     return 0;
4037 }
4038
4039 STDCHAR *
4040 PerlIOBuf_get_base(pTHX_ PerlIO *f)
4041 {
4042     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4043     PERL_UNUSED_CONTEXT;
4044
4045     if (!b->buf) {
4046         if (!b->bufsiz)
4047             b->bufsiz = 4096;
4048         b->buf = Newxz(b->buf,b->bufsiz, STDCHAR);
4049         if (!b->buf) {
4050             b->buf = (STDCHAR *) & b->oneword;
4051             b->bufsiz = sizeof(b->oneword);
4052         }
4053         b->end = b->ptr = b->buf;
4054     }
4055     return b->buf;
4056 }
4057
4058 Size_t
4059 PerlIOBuf_bufsiz(pTHX_ PerlIO *f)
4060 {
4061     const PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4062     if (!b->buf)
4063         PerlIO_get_base(f);
4064     return (b->end - b->buf);
4065 }
4066
4067 void
4068 PerlIOBuf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
4069 {
4070     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4071     if (!b->buf)
4072         PerlIO_get_base(f);
4073     b->ptr = ptr;
4074     if (PerlIO_get_cnt(f) != cnt || b->ptr < b->buf) {
4075         assert(PerlIO_get_cnt(f) == cnt);
4076         assert(b->ptr >= b->buf);
4077     }
4078     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
4079 }
4080
4081 PerlIO *
4082 PerlIOBuf_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
4083 {
4084  return PerlIOBase_dup(aTHX_ f, o, param, flags);
4085 }
4086
4087
4088
4089 PERLIO_FUNCS_DECL(PerlIO_perlio) = {
4090     sizeof(PerlIO_funcs),
4091     "perlio",
4092     sizeof(PerlIOBuf),
4093     PERLIO_K_BUFFERED|PERLIO_K_RAW,
4094     PerlIOBuf_pushed,
4095     PerlIOBuf_popped,
4096     PerlIOBuf_open,
4097     PerlIOBase_binmode,         /* binmode */
4098     NULL,
4099     PerlIOBase_fileno,
4100     PerlIOBuf_dup,
4101     PerlIOBuf_read,
4102     PerlIOBuf_unread,
4103     PerlIOBuf_write,
4104     PerlIOBuf_seek,
4105     PerlIOBuf_tell,
4106     PerlIOBuf_close,
4107     PerlIOBuf_flush,
4108     PerlIOBuf_fill,
4109     PerlIOBase_eof,
4110     PerlIOBase_error,
4111     PerlIOBase_clearerr,
4112     PerlIOBase_setlinebuf,
4113     PerlIOBuf_get_base,
4114     PerlIOBuf_bufsiz,
4115     PerlIOBuf_get_ptr,
4116     PerlIOBuf_get_cnt,
4117     PerlIOBuf_set_ptrcnt,
4118 };
4119
4120 /*--------------------------------------------------------------------------------------*/
4121 /*
4122  * Temp layer to hold unread chars when cannot do it any other way
4123  */
4124
4125 IV
4126 PerlIOPending_fill(pTHX_ PerlIO *f)
4127 {
4128     /*
4129      * Should never happen
4130      */
4131     PerlIO_flush(f);
4132     return 0;
4133 }
4134
4135 IV
4136 PerlIOPending_close(pTHX_ PerlIO *f)
4137 {
4138     /*
4139      * A tad tricky - flush pops us, then we close new top
4140      */
4141     PerlIO_flush(f);
4142     return PerlIO_close(f);
4143 }
4144
4145 IV
4146 PerlIOPending_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
4147 {
4148     /*
4149      * A tad tricky - flush pops us, then we seek new top
4150      */
4151     PerlIO_flush(f);
4152     return PerlIO_seek(f, offset, whence);
4153 }
4154
4155
4156 IV
4157 PerlIOPending_flush(pTHX_ PerlIO *f)
4158 {
4159     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4160     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
4161         Safefree(b->buf);
4162         b->buf = NULL;
4163     }
4164     PerlIO_pop(aTHX_ f);
4165     return 0;
4166 }
4167
4168 void
4169 PerlIOPending_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
4170 {
4171     if (cnt <= 0) {
4172         PerlIO_flush(f);
4173     }
4174     else {
4175         PerlIOBuf_set_ptrcnt(aTHX_ f, ptr, cnt);
4176     }
4177 }
4178
4179 IV
4180 PerlIOPending_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
4181 {
4182     const IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
4183     PerlIOl * const l = PerlIOBase(f);
4184     /*
4185      * Our PerlIO_fast_gets must match what we are pushed on, or sv_gets()
4186      * etc. get muddled when it changes mid-string when we auto-pop.
4187      */
4188     l->flags = (l->flags & ~(PERLIO_F_FASTGETS | PERLIO_F_UTF8)) |
4189         (PerlIOBase(PerlIONext(f))->
4190          flags & (PERLIO_F_FASTGETS | PERLIO_F_UTF8));
4191     return code;
4192 }
4193
4194 SSize_t
4195 PerlIOPending_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
4196 {
4197     SSize_t avail = PerlIO_get_cnt(f);
4198     SSize_t got = 0;
4199     if ((SSize_t)count < avail)
4200         avail = count;
4201     if (avail > 0)
4202         got = PerlIOBuf_read(aTHX_ f, vbuf, avail);
4203     if (got >= 0 && got < (SSize_t)count) {
4204         const SSize_t more =
4205             PerlIO_read(f, ((STDCHAR *) vbuf) + got, count - got);
4206         if (more >= 0 || got == 0)
4207             got += more;
4208     }
4209     return got;
4210 }
4211
4212 PERLIO_FUNCS_DECL(PerlIO_pending) = {
4213     sizeof(PerlIO_funcs),
4214     "pending",
4215     sizeof(PerlIOBuf),
4216     PERLIO_K_BUFFERED|PERLIO_K_RAW,  /* not sure about RAW here */
4217     PerlIOPending_pushed,
4218     PerlIOBuf_popped,
4219     NULL,
4220     PerlIOBase_binmode,         /* binmode */
4221     NULL,
4222     PerlIOBase_fileno,
4223     PerlIOBuf_dup,
4224     PerlIOPending_read,
4225     PerlIOBuf_unread,
4226     PerlIOBuf_write,
4227     PerlIOPending_seek,
4228     PerlIOBuf_tell,
4229     PerlIOPending_close,
4230     PerlIOPending_flush,
4231     PerlIOPending_fill,
4232     PerlIOBase_eof,
4233     PerlIOBase_error,
4234     PerlIOBase_clearerr,
4235     PerlIOBase_setlinebuf,
4236     PerlIOBuf_get_base,
4237     PerlIOBuf_bufsiz,
4238     PerlIOBuf_get_ptr,
4239     PerlIOBuf_get_cnt,
4240     PerlIOPending_set_ptrcnt,
4241 };
4242
4243
4244
4245 /*--------------------------------------------------------------------------------------*/
4246 /*
4247  * crlf - translation On read translate CR,LF to "\n" we do this by
4248  * overriding ptr/cnt entries to hand back a line at a time and keeping a
4249  * record of which nl we "lied" about. On write translate "\n" to CR,LF
4250  *
4251  * c->nl points on the first byte of CR LF pair when it is temporarily
4252  * replaced by LF, or to the last CR of the buffer.  In the former case
4253  * the caller thinks that the buffer ends at c->nl + 1, in the latter
4254  * that it ends at c->nl; these two cases can be distinguished by
4255  * *c->nl.  c->nl is set during _getcnt() call, and unset during
4256  * _unread() and _flush() calls.
4257  * It only matters for read operations.
4258  */
4259
4260 typedef struct {
4261     PerlIOBuf base;             /* PerlIOBuf stuff */
4262     STDCHAR *nl;                /* Position of crlf we "lied" about in the
4263                                  * buffer */
4264 } PerlIOCrlf;
4265
4266 /* Inherit the PERLIO_F_UTF8 flag from previous layer.
4267  * Otherwise the :crlf layer would always revert back to
4268  * raw mode.
4269  */
4270 static void
4271 S_inherit_utf8_flag(PerlIO *f)
4272 {
4273     PerlIO *g = PerlIONext(f);
4274     if (PerlIOValid(g)) {
4275         if (PerlIOBase(g)->flags & PERLIO_F_UTF8) {
4276             PerlIOBase(f)->flags |= PERLIO_F_UTF8;
4277         }
4278     }
4279 }
4280
4281 IV
4282 PerlIOCrlf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
4283 {
4284     IV code;
4285     PerlIOBase(f)->flags |= PERLIO_F_CRLF;
4286     code = PerlIOBuf_pushed(aTHX_ f, mode, arg, tab);
4287 #if 0
4288     PerlIO_debug("PerlIOCrlf_pushed f=%p %s %s fl=%08" UVxf "\n",
4289                  (void*)f, PerlIOBase(f)->tab->name, (mode) ? mode : "(Null)",
4290                  PerlIOBase(f)->flags);
4291 #endif
4292     {
4293       /* Enable the first CRLF capable layer you can find, but if none
4294        * found, the one we just pushed is fine.  This results in at
4295        * any given moment at most one CRLF-capable layer being enabled
4296        * in the whole layer stack. */
4297          PerlIO *g = PerlIONext(f);
4298          while (PerlIOValid(g)) {
4299               PerlIOl *b = PerlIOBase(g);
4300               if (b && b->tab == &PerlIO_crlf) {
4301                    if (!(b->flags & PERLIO_F_CRLF))
4302                         b->flags |= PERLIO_F_CRLF;
4303                    S_inherit_utf8_flag(g);
4304                    PerlIO_pop(aTHX_ f);
4305                    return code;
4306               }
4307               g = PerlIONext(g);
4308          }
4309     }
4310     S_inherit_utf8_flag(f);
4311     return code;
4312 }
4313
4314
4315 SSize_t
4316 PerlIOCrlf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4317 {
4318     PerlIOCrlf * const c = PerlIOSelf(f, PerlIOCrlf);
4319     if (c->nl) {        /* XXXX Shouldn't it be done only if b->ptr > c->nl? */
4320         *(c->nl) = 0xd;
4321         c->nl = NULL;
4322     }
4323     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
4324         return PerlIOBuf_unread(aTHX_ f, vbuf, count);
4325     else {
4326         const STDCHAR *buf = (const STDCHAR *) vbuf + count;
4327         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4328         SSize_t unread = 0;
4329         if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
4330             PerlIO_flush(f);
4331         if (!b->buf)
4332             PerlIO_get_base(f);
4333         if (b->buf) {
4334             if (!(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4335                 b->end = b->ptr = b->buf + b->bufsiz;
4336                 PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
4337                 b->posn -= b->bufsiz;
4338             }
4339             while (count > 0 && b->ptr > b->buf) {
4340                 const int ch = *--buf;
4341                 if (ch == '\n') {
4342                     if (b->ptr - 2 >= b->buf) {
4343                         *--(b->ptr) = 0xa;
4344                         *--(b->ptr) = 0xd;
4345                         unread++;
4346                         count--;
4347                     }
4348                     else {
4349                     /* If b->ptr - 1 == b->buf, we are undoing reading 0xa */
4350                         *--(b->ptr) = 0xa;      /* Works even if 0xa == '\r' */
4351                         unread++;
4352                         count--;
4353                     }
4354                 }
4355                 else {
4356                     *--(b->ptr) = ch;
4357                     unread++;
4358                     count--;
4359                 }
4360             }
4361         }
4362         return unread;
4363     }
4364 }
4365
4366 /* XXXX This code assumes that buffer size >=2, but does not check it... */
4367 SSize_t
4368 PerlIOCrlf_get_cnt(pTHX_ PerlIO *f)
4369 {
4370     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4371     if (!b->buf)
4372         PerlIO_get_base(f);
4373     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
4374         PerlIOCrlf * const c = PerlIOSelf(f, PerlIOCrlf);
4375         if ((PerlIOBase(f)->flags & PERLIO_F_CRLF) && (!c->nl || *c->nl == 0xd)) {
4376             STDCHAR *nl = (c->nl) ? c->nl : b->ptr;
4377           scan:
4378             while (nl < b->end && *nl != 0xd)
4379                 nl++;
4380             if (nl < b->end && *nl == 0xd) {
4381               test:
4382                 if (nl + 1 < b->end) {
4383                     if (nl[1] == 0xa) {
4384                         *nl = '\n';
4385                         c->nl = nl;
4386                     }
4387                     else {
4388                         /*
4389                          * Not CR,LF but just CR
4390                          */
4391                         nl++;
4392                         goto scan;
4393                     }
4394                 }
4395                 else {
4396                     /*
4397                      * Blast - found CR as last char in buffer
4398                      */
4399
4400                     if (b->ptr < nl) {
4401                         /*
4402                          * They may not care, defer work as long as
4403                          * possible
4404                          */
4405                         c->nl = nl;
4406                         return (nl - b->ptr);
4407                     }
4408                     else {
4409                         int code;
4410                         b->ptr++;       /* say we have read it as far as
4411                                          * flush() is concerned */
4412                         b->buf++;       /* Leave space in front of buffer */
4413                         /* Note as we have moved buf up flush's
4414                            posn += ptr-buf
4415                            will naturally make posn point at CR
4416                          */
4417                         b->bufsiz--;    /* Buffer is thus smaller */
4418                         code = PerlIO_fill(f);  /* Fetch some more */
4419                         b->bufsiz++;    /* Restore size for next time */
4420                         b->buf--;       /* Point at space */
4421                         b->ptr = nl = b->buf;   /* Which is what we hand
4422                                                  * off */
4423                         *nl = 0xd;      /* Fill in the CR */
4424                         if (code == 0)
4425                             goto test;  /* fill() call worked */
4426                         /*
4427                          * CR at EOF - just fall through
4428                          */
4429                         /* Should we clear EOF though ??? */
4430                     }
4431                 }
4432             }
4433         }
4434         return (((c->nl) ? (c->nl + 1) : b->end) - b->ptr);
4435     }
4436     return 0;
4437 }
4438
4439 void
4440 PerlIOCrlf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
4441 {
4442     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4443     PerlIOCrlf * const c = PerlIOSelf(f, PerlIOCrlf);
4444     if (!b->buf)
4445         PerlIO_get_base(f);
4446     if (!ptr) {
4447         if (c->nl) {
4448             ptr = c->nl + 1;
4449             if (ptr == b->end && *c->nl == 0xd) {
4450                 /* Defered CR at end of buffer case - we lied about count */
4451                 ptr--;
4452             }
4453         }
4454         else {
4455             ptr = b->end;
4456         }
4457         ptr -= cnt;
4458     }
4459     else {
4460         NOOP;
4461 #if 0
4462         /*
4463          * Test code - delete when it works ...
4464          */
4465         IV flags = PerlIOBase(f)->flags;
4466         STDCHAR *chk = (c->nl) ? (c->nl+1) : b->end;
4467         if (ptr+cnt == c->nl && c->nl+1 == b->end && *c->nl == 0xd) {
4468           /* Defered CR at end of buffer case - we lied about count */
4469           chk--;
4470         }
4471         chk -= cnt;
4472
4473         if (ptr != chk ) {
4474             Perl_croak(aTHX_ "ptr wrong %p != %p fl=%08" UVxf
4475                        " nl=%p e=%p for %d", (void*)ptr, (void*)chk,
4476                        flags, c->nl, b->end, cnt);
4477         }
4478 #endif
4479     }
4480     if (c->nl) {
4481         if (ptr > c->nl) {
4482             /*
4483              * They have taken what we lied about
4484              */
4485             *(c->nl) = 0xd;
4486             c->nl = NULL;
4487             ptr++;
4488         }
4489     }
4490     b->ptr = ptr;
4491     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
4492 }
4493
4494 SSize_t
4495 PerlIOCrlf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4496 {
4497     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
4498         return PerlIOBuf_write(aTHX_ f, vbuf, count);
4499     else {
4500         PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4501         const STDCHAR *buf = (const STDCHAR *) vbuf;
4502         const STDCHAR * const ebuf = buf + count;
4503         if (!b->buf)
4504             PerlIO_get_base(f);
4505         if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
4506             return 0;
4507         while (buf < ebuf) {
4508             const STDCHAR * const eptr = b->buf + b->bufsiz;
4509             PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
4510             while (buf < ebuf && b->ptr < eptr) {
4511                 if (*buf == '\n') {
4512                     if ((b->ptr + 2) > eptr) {
4513                         /*
4514                          * Not room for both
4515                          */
4516                         PerlIO_flush(f);
4517                         break;
4518                     }
4519                     else {
4520                         *(b->ptr)++ = 0xd;      /* CR */
4521                         *(b->ptr)++ = 0xa;      /* LF */
4522                         buf++;
4523                         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
4524                             PerlIO_flush(f);
4525                             break;
4526                         }
4527                     }
4528                 }
4529                 else {
4530                     *(b->ptr)++ = *buf++;
4531                 }
4532                 if (b->ptr >= eptr) {
4533                     PerlIO_flush(f);
4534                     break;
4535                 }
4536             }
4537         }
4538         if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
4539             PerlIO_flush(f);
4540         return (buf - (STDCHAR *) vbuf);
4541     }
4542 }
4543
4544 IV
4545 PerlIOCrlf_flush(pTHX_ PerlIO *f)
4546 {
4547     PerlIOCrlf * const c = PerlIOSelf(f, PerlIOCrlf);
4548     if (c->nl) {
4549         *(c->nl) = 0xd;
4550         c->nl = NULL;
4551     }
4552     return PerlIOBuf_flush(aTHX_ f);
4553 }
4554
4555 IV
4556 PerlIOCrlf_binmode(pTHX_ PerlIO *f)
4557 {
4558     if ((PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
4559         /* In text mode - flush any pending stuff and flip it */
4560         PerlIOBase(f)->flags &= ~PERLIO_F_CRLF;
4561 #ifndef PERLIO_USING_CRLF
4562         /* CRLF is unusual case - if this is just the :crlf layer pop it */
4563         if (PerlIOBase(f)->tab == &PerlIO_crlf) {
4564                 PerlIO_pop(aTHX_ f);
4565         }
4566 #endif
4567     }
4568     return 0;
4569 }
4570
4571 PERLIO_FUNCS_DECL(PerlIO_crlf) = {
4572     sizeof(PerlIO_funcs),
4573     "crlf",
4574     sizeof(PerlIOCrlf),
4575     PERLIO_K_BUFFERED | PERLIO_K_CANCRLF | PERLIO_K_RAW,
4576     PerlIOCrlf_pushed,
4577     PerlIOBuf_popped,         /* popped */
4578     PerlIOBuf_open,
4579     PerlIOCrlf_binmode,       /* binmode */
4580     NULL,
4581     PerlIOBase_fileno,
4582     PerlIOBuf_dup,
4583     PerlIOBuf_read,             /* generic read works with ptr/cnt lies */
4584     PerlIOCrlf_unread,          /* Put CR,LF in buffer for each '\n' */
4585     PerlIOCrlf_write,           /* Put CR,LF in buffer for each '\n' */
4586     PerlIOBuf_seek,
4587     PerlIOBuf_tell,
4588     PerlIOBuf_close,
4589     PerlIOCrlf_flush,
4590     PerlIOBuf_fill,
4591     PerlIOBase_eof,
4592     PerlIOBase_error,
4593     PerlIOBase_clearerr,
4594     PerlIOBase_setlinebuf,
4595     PerlIOBuf_get_base,
4596     PerlIOBuf_bufsiz,
4597     PerlIOBuf_get_ptr,
4598     PerlIOCrlf_get_cnt,
4599     PerlIOCrlf_set_ptrcnt,
4600 };
4601
4602 #ifdef HAS_MMAP
4603 /*--------------------------------------------------------------------------------------*/
4604 /*
4605  * mmap as "buffer" layer
4606  */
4607
4608 typedef struct {
4609     PerlIOBuf base;             /* PerlIOBuf stuff */
4610     Mmap_t mptr;                /* Mapped address */
4611     Size_t len;                 /* mapped length */
4612     STDCHAR *bbuf;              /* malloced buffer if map fails */
4613 } PerlIOMmap;
4614
4615 IV
4616 PerlIOMmap_map(pTHX_ PerlIO *f)
4617 {
4618     dVAR;
4619     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4620     const IV flags = PerlIOBase(f)->flags;
4621     IV code = 0;
4622     if (m->len)
4623         abort();
4624     if (flags & PERLIO_F_CANREAD) {
4625         PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4626         const int fd = PerlIO_fileno(f);
4627         Stat_t st;
4628         code = Fstat(fd, &st);
4629         if (code == 0 && S_ISREG(st.st_mode)) {
4630             SSize_t len = st.st_size - b->posn;
4631             if (len > 0) {
4632                 Off_t posn;
4633                 if (PL_mmap_page_size <= 0)
4634                   Perl_croak(aTHX_ "panic: bad pagesize %" IVdf,
4635                              PL_mmap_page_size);
4636                 if (b->posn < 0) {
4637                     /*
4638                      * This is a hack - should never happen - open should
4639                      * have set it !
4640                      */
4641                     b->posn = PerlIO_tell(PerlIONext(f));
4642                 }
4643                 posn = (b->posn / PL_mmap_page_size) * PL_mmap_page_size;
4644                 len = st.st_size - posn;
4645                 m->mptr = (Mmap_t)mmap(NULL, len, PROT_READ, MAP_SHARED, fd, posn);
4646                 if (m->mptr && m->mptr != (Mmap_t) - 1) {
4647 #if 0 && defined(HAS_MADVISE) && defined(MADV_SEQUENTIAL)
4648                     madvise(m->mptr, len, MADV_SEQUENTIAL);
4649 #endif
4650 #if 0 && defined(HAS_MADVISE) && defined(MADV_WILLNEED)
4651                     madvise(m->mptr, len, MADV_WILLNEED);
4652 #endif
4653                     PerlIOBase(f)->flags =
4654                         (flags & ~PERLIO_F_EOF) | PERLIO_F_RDBUF;
4655                     b->end = ((STDCHAR *) m->mptr) + len;
4656                     b->buf = ((STDCHAR *) m->mptr) + (b->posn - posn);
4657                     b->ptr = b->buf;
4658                     m->len = len;
4659                 }
4660                 else {
4661                     b->buf = NULL;
4662                 }
4663             }
4664             else {
4665                 PerlIOBase(f)->flags =
4666                     flags | PERLIO_F_EOF | PERLIO_F_RDBUF;
4667                 b->buf = NULL;
4668                 b->ptr = b->end = b->ptr;
4669                 code = -1;
4670             }
4671         }
4672     }
4673     return code;
4674 }
4675
4676 IV
4677 PerlIOMmap_unmap(pTHX_ PerlIO *f)
4678 {
4679     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4680     IV code = 0;
4681     if (m->len) {
4682         PerlIOBuf * const b = &m->base;
4683         if (b->buf) {
4684             /* The munmap address argument is tricky: depending on the
4685              * standard it is either "void *" or "caddr_t" (which is
4686              * usually "char *" (signed or unsigned).  If we cast it
4687              * to "void *", those that have it caddr_t and an uptight
4688              * C++ compiler, will freak out.  But casting it as char*
4689              * should work.  Maybe.  (Using Mmap_t figured out by
4690              * Configure doesn't always work, apparently.) */
4691             code = munmap((char*)m->mptr, m->len);
4692             b->buf = NULL;
4693             m->len = 0;
4694             m->mptr = NULL;
4695             if (PerlIO_seek(PerlIONext(f), b->posn, SEEK_SET) != 0)
4696                 code = -1;
4697         }
4698         b->ptr = b->end = b->buf;
4699         PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
4700     }
4701     return code;
4702 }
4703
4704 STDCHAR *
4705 PerlIOMmap_get_base(pTHX_ PerlIO *f)
4706 {
4707     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4708     PerlIOBuf * const b = &m->base;
4709     if (b->buf && (PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4710         /*
4711          * Already have a readbuffer in progress
4712          */
4713         return b->buf;
4714     }
4715     if (b->buf) {
4716         /*
4717          * We have a write buffer or flushed PerlIOBuf read buffer
4718          */
4719         m->bbuf = b->buf;       /* save it in case we need it again */
4720         b->buf = NULL;          /* Clear to trigger below */
4721     }
4722     if (!b->buf) {
4723         PerlIOMmap_map(aTHX_ f);        /* Try and map it */
4724         if (!b->buf) {
4725             /*
4726              * Map did not work - recover PerlIOBuf buffer if we have one
4727              */
4728             b->buf = m->bbuf;
4729         }
4730     }
4731     b->ptr = b->end = b->buf;
4732     if (b->buf)
4733         return b->buf;
4734     return PerlIOBuf_get_base(aTHX_ f);
4735 }
4736
4737 SSize_t
4738 PerlIOMmap_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4739 {
4740     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4741     PerlIOBuf * const b = &m->base;
4742     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
4743         PerlIO_flush(f);
4744     if (b->ptr && (b->ptr - count) >= b->buf
4745         && memEQ(b->ptr - count, vbuf, count)) {
4746         b->ptr -= count;
4747         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
4748         return count;
4749     }
4750     if (m->len) {
4751         /*
4752          * Loose the unwritable mapped buffer
4753          */
4754         PerlIO_flush(f);
4755         /*
4756          * If flush took the "buffer" see if we have one from before
4757          */
4758         if (!b->buf && m->bbuf)
4759             b->buf = m->bbuf;
4760         if (!b->buf) {
4761             PerlIOBuf_get_base(aTHX_ f);
4762             m->bbuf = b->buf;
4763         }
4764     }
4765     return PerlIOBuf_unread(aTHX_ f, vbuf, count);
4766 }
4767
4768 SSize_t
4769 PerlIOMmap_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4770 {
4771     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4772     PerlIOBuf * const b = &m->base;
4773
4774     if (!b->buf || !(PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
4775         /*
4776          * No, or wrong sort of, buffer
4777          */
4778         if (m->len) {
4779             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4780                 return 0;
4781         }
4782         /*
4783          * If unmap took the "buffer" see if we have one from before
4784          */
4785         if (!b->buf && m->bbuf)
4786             b->buf = m->bbuf;
4787         if (!b->buf) {
4788             PerlIOBuf_get_base(aTHX_ f);
4789             m->bbuf = b->buf;
4790         }
4791     }
4792     return PerlIOBuf_write(aTHX_ f, vbuf, count);
4793 }
4794
4795 IV
4796 PerlIOMmap_flush(pTHX_ PerlIO *f)
4797 {
4798     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4799     PerlIOBuf * const b = &m->base;
4800     IV code = PerlIOBuf_flush(aTHX_ f);
4801     /*
4802      * Now we are "synced" at PerlIOBuf level
4803      */
4804     if (b->buf) {
4805         if (m->len) {
4806             /*
4807              * Unmap the buffer
4808              */
4809             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4810                 code = -1;
4811         }
4812         else {
4813             /*
4814              * We seem to have a PerlIOBuf buffer which was not mapped
4815              * remember it in case we need one later
4816              */
4817             m->bbuf = b->buf;
4818         }
4819     }
4820     return code;
4821 }
4822
4823 IV
4824 PerlIOMmap_fill(pTHX_ PerlIO *f)
4825 {
4826     PerlIOBuf * const b = PerlIOSelf(f, PerlIOBuf);
4827     IV code = PerlIO_flush(f);
4828     if (code == 0 && !b->buf) {
4829         code = PerlIOMmap_map(aTHX_ f);
4830     }
4831     if (code == 0 && !(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4832         code = PerlIOBuf_fill(aTHX_ f);
4833     }
4834     return code;
4835 }
4836
4837 IV
4838 PerlIOMmap_close(pTHX_ PerlIO *f)
4839 {
4840     PerlIOMmap * const m = PerlIOSelf(f, PerlIOMmap);
4841     PerlIOBuf * const b = &m->base;
4842     IV code = PerlIO_flush(f);
4843     if (m->bbuf) {
4844         b->buf = m->bbuf;
4845         m->bbuf = NULL;
4846         b->ptr = b->end = b->buf;
4847     }
4848     if (PerlIOBuf_close(aTHX_ f) != 0)
4849         code = -1;
4850     return code;
4851 }
4852
4853 PerlIO *
4854 PerlIOMmap_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
4855 {
4856  return PerlIOBase_dup(aTHX_ f, o, param, flags);
4857 }
4858
4859
4860 PERLIO_FUNCS_DECL(PerlIO_mmap) = {
4861     sizeof(PerlIO_funcs),
4862     "mmap",
4863     sizeof(PerlIOMmap),
4864     PERLIO_K_BUFFERED|PERLIO_K_RAW,
4865     PerlIOBuf_pushed,
4866     PerlIOBuf_popped,
4867     PerlIOBuf_open,
4868     PerlIOBase_binmode,         /* binmode */
4869     NULL,
4870     PerlIOBase_fileno,
4871     PerlIOMmap_dup,
4872     PerlIOBuf_read,
4873     PerlIOMmap_unread,
4874     PerlIOMmap_write,
4875     PerlIOBuf_seek,
4876     PerlIOBuf_tell,
4877     PerlIOBuf_close,
4878     PerlIOMmap_flush,
4879     PerlIOMmap_fill,
4880     PerlIOBase_eof,
4881     PerlIOBase_error,
4882     PerlIOBase_clearerr,
4883     PerlIOBase_setlinebuf,
4884     PerlIOMmap_get_base,
4885     PerlIOBuf_bufsiz,
4886     PerlIOBuf_get_ptr,
4887     PerlIOBuf_get_cnt,
4888     PerlIOBuf_set_ptrcnt,
4889 };
4890
4891 #endif                          /* HAS_MMAP */
4892
4893 PerlIO *
4894 Perl_PerlIO_stdin(pTHX)
4895 {
4896     dVAR;
4897     if (!PL_perlio) {
4898         PerlIO_stdstreams(aTHX);
4899     }
4900     return &PL_perlio[1];
4901 }
4902
4903 PerlIO *
4904 Perl_PerlIO_stdout(pTHX)
4905 {
4906     dVAR;
4907     if (!PL_perlio) {
4908         PerlIO_stdstreams(aTHX);
4909     }
4910     return &PL_perlio[2];
4911 }
4912
4913 PerlIO *
4914 Perl_PerlIO_stderr(pTHX)
4915 {
4916     dVAR;
4917     if (!PL_perlio) {
4918         PerlIO_stdstreams(aTHX);
4919     }
4920     return &PL_perlio[3];
4921 }
4922
4923 /*--------------------------------------------------------------------------------------*/
4924
4925 char *
4926 PerlIO_getname(PerlIO *f, char *buf)
4927 {
4928     dTHX;
4929 #ifdef VMS
4930     char *name = NULL;
4931     bool exported = FALSE;
4932     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
4933     if (!stdio) {
4934         stdio = PerlIO_exportFILE(f,0);
4935         exported = TRUE;
4936     }
4937     if (stdio) {
4938         name = fgetname(stdio, buf);
4939         if (exported) PerlIO_releaseFILE(f,stdio);
4940     }
4941     return name;
4942 #else
4943     PERL_UNUSED_ARG(f);
4944     PERL_UNUSED_ARG(buf);
4945     Perl_croak(aTHX_ "Don't know how to get file name");
4946     return NULL;
4947 #endif
4948 }
4949
4950
4951 /*--------------------------------------------------------------------------------------*/
4952 /*
4953  * Functions which can be called on any kind of PerlIO implemented in
4954  * terms of above
4955  */
4956
4957 #undef PerlIO_fdopen
4958 PerlIO *
4959 PerlIO_fdopen(int fd, const char *mode)
4960 {
4961     dTHX;
4962     return PerlIO_openn(aTHX_ NULL, mode, fd, 0, 0, NULL, 0, NULL);
4963 }
4964
4965 #undef PerlIO_open
4966 PerlIO *
4967 PerlIO_open(const char *path, const char *mode)
4968 {
4969     dTHX;
4970     SV *name = sv_2mortal(newSVpv(path, 0));
4971     return PerlIO_openn(aTHX_ NULL, mode, -1, 0, 0, NULL, 1, &name);
4972 }
4973
4974 #undef Perlio_reopen
4975 PerlIO *
4976 PerlIO_reopen(const char *path, const char *mode, PerlIO *f)
4977 {
4978     dTHX;
4979     SV *name = sv_2mortal(newSVpv(path,0));
4980     return PerlIO_openn(aTHX_ NULL, mode, -1, 0, 0, f, 1, &name);
4981 }
4982
4983 #undef PerlIO_getc
4984 int
4985 PerlIO_getc(PerlIO *f)
4986 {
4987     dTHX;
4988     STDCHAR buf[1];
4989     if ( 1 == PerlIO_read(f, buf, 1) ) {
4990         return (unsigned char) buf[0];
4991     }
4992     return EOF;
4993 }
4994
4995 #undef PerlIO_ungetc
4996 int
4997 PerlIO_ungetc(PerlIO *f, int ch)
4998 {
4999     dTHX;
5000     if (ch != EOF) {
5001         STDCHAR buf = ch;
5002         if (PerlIO_unread(f, &buf, 1) == 1)
5003             return ch;
5004     }
5005     return EOF;
5006 }
5007
5008 #undef PerlIO_putc
5009 int
5010 PerlIO_putc(PerlIO *f, int ch)
5011 {
5012     dTHX;
5013     STDCHAR buf = ch;
5014     return PerlIO_write(f, &buf, 1);
5015 }
5016
5017 #undef PerlIO_puts
5018 int
5019 PerlIO_puts(PerlIO *f, const char *s)
5020 {
5021     dTHX;
5022     return PerlIO_write(f, s, strlen(s));
5023 }
5024
5025 #undef PerlIO_rewind
5026 void
5027 PerlIO_rewind(PerlIO *f)
5028 {
5029     dTHX;
5030     PerlIO_seek(f, (Off_t) 0, SEEK_SET);
5031     PerlIO_clearerr(f);
5032 }
5033
5034 #undef PerlIO_vprintf
5035 int
5036 PerlIO_vprintf(PerlIO *f, const char *fmt, va_list ap)
5037 {
5038     dTHX;
5039     SV * const sv = newSVpvs("");
5040     const char *s;
5041     STRLEN len;
5042     SSize_t wrote;
5043 #ifdef NEED_VA_COPY
5044     va_list apc;
5045     Perl_va_copy(ap, apc);
5046     sv_vcatpvf(sv, fmt, &apc);
5047 #else
5048     sv_vcatpvf(sv, fmt, &ap);
5049 #endif
5050     s = SvPV_const(sv, len);
5051     wrote = PerlIO_write(f, s, len);
5052     SvREFCNT_dec(sv);
5053     return wrote;
5054 }
5055
5056 #undef PerlIO_printf
5057 int
5058 PerlIO_printf(PerlIO *f, const char *fmt, ...)
5059 {
5060     va_list ap;
5061     int result;
5062     va_start(ap, fmt);
5063     result = PerlIO_vprintf(f, fmt, ap);
5064     va_end(ap);
5065     return result;
5066 }
5067
5068 #undef PerlIO_stdoutf
5069 int
5070 PerlIO_stdoutf(const char *fmt, ...)
5071 {
5072     dTHX;
5073     va_list ap;
5074     int result;
5075     va_start(ap, fmt);
5076     result = PerlIO_vprintf(PerlIO_stdout(), fmt, ap);
5077     va_end(ap);
5078     return result;
5079 }
5080
5081 #undef PerlIO_tmpfile
5082 PerlIO *
5083 PerlIO_tmpfile(void)
5084 {
5085      dTHX;
5086      PerlIO *f = NULL;
5087 #ifdef WIN32
5088      const int fd = win32_tmpfd();
5089      if (fd >= 0)
5090           f = PerlIO_fdopen(fd, "w+b");
5091 #else /* WIN32 */
5092 #    if defined(HAS_MKSTEMP) && ! defined(VMS) && ! defined(OS2)
5093      SV * const sv = newSVpvs("/tmp/PerlIO_XXXXXX");
5094      /*
5095       * I have no idea how portable mkstemp() is ... NI-S
5096       */
5097      const int fd = mkstemp(SvPVX(sv));
5098      if (fd >= 0) {
5099           f = PerlIO_fdopen(fd, "w+");
5100           if (f)
5101                PerlIOBase(f)->flags |= PERLIO_F_TEMP;
5102           PerlLIO_unlink(SvPVX_const(sv));
5103      }
5104      SvREFCNT_dec(sv);
5105 #    else       /* !HAS_MKSTEMP, fallback to stdio tmpfile(). */
5106      FILE * const stdio = PerlSIO_tmpfile();
5107
5108      if (stdio)
5109           f = PerlIO_fdopen(fileno(stdio), "w+");
5110
5111 #    endif /* else HAS_MKSTEMP */
5112 #endif /* else WIN32 */
5113      return f;
5114 }
5115
5116 #undef HAS_FSETPOS
5117 #undef HAS_FGETPOS
5118
5119 #endif                          /* USE_SFIO */
5120 #endif                          /* PERLIO_IS_STDIO */
5121
5122 /*======================================================================================*/
5123 /*
5124  * Now some functions in terms of above which may be needed even if we are
5125  * not in true PerlIO mode
5126  */
5127 const char *
5128 Perl_PerlIO_context_layers(pTHX_ const char *mode)
5129 {
5130     dVAR;
5131     const char *direction = NULL;
5132     SV *layers;
5133     /*
5134      * Need to supply default layer info from open.pm
5135      */
5136
5137     if (!PL_curcop)
5138         return NULL;
5139
5140     if (mode && mode[0] != 'r') {
5141         if (PL_curcop->cop_hints & HINT_LEXICAL_IO_OUT)
5142             direction = "open>";
5143     } else {
5144         if (PL_curcop->cop_hints & HINT_LEXICAL_IO_IN)
5145             direction = "open<";
5146     }
5147     if (!direction)
5148         return NULL;
5149
5150     layers = Perl_refcounted_he_fetch(aTHX_ PL_curcop->cop_hints_hash,
5151                                       0, direction, 5, 0, 0);
5152
5153     assert(layers);
5154     return SvOK(layers) ? SvPV_nolen_const(layers) : NULL;
5155 }
5156
5157
5158 #ifndef HAS_FSETPOS
5159 #undef PerlIO_setpos
5160 int
5161 PerlIO_setpos(PerlIO *f, SV *pos)
5162 {
5163     dTHX;
5164     if (SvOK(pos)) {
5165         STRLEN len;
5166         const Off_t * const posn = (Off_t *) SvPV(pos, len);
5167         if (f && len == sizeof(Off_t))
5168             return PerlIO_seek(f, *posn, SEEK_SET);
5169     }
5170     SETERRNO(EINVAL, SS_IVCHAN);
5171     return -1;
5172 }
5173 #else
5174 #undef PerlIO_setpos
5175 int
5176 PerlIO_setpos(PerlIO *f, SV *pos)
5177 {
5178     dTHX;
5179     if (SvOK(pos)) {
5180         STRLEN len;
5181         Fpos_t * const fpos = (Fpos_t *) SvPV(pos, len);
5182         if (f && len == sizeof(Fpos_t)) {
5183 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
5184             return fsetpos64(f, fpos);
5185 #else
5186             return fsetpos(f, fpos);
5187 #endif
5188         }
5189     }
5190     SETERRNO(EINVAL, SS_IVCHAN);
5191     return -1;
5192 }
5193 #endif
5194
5195 #ifndef HAS_FGETPOS
5196 #undef PerlIO_getpos
5197 int
5198 PerlIO_getpos(PerlIO *f, SV *pos)
5199 {
5200     dTHX;
5201     Off_t posn = PerlIO_tell(f);
5202     sv_setpvn(pos, (char *) &posn, sizeof(posn));
5203     return (posn == (Off_t) - 1) ? -1 : 0;
5204 }
5205 #else
5206 #undef PerlIO_getpos
5207 int
5208 PerlIO_getpos(PerlIO *f, SV *pos)
5209 {
5210     dTHX;
5211     Fpos_t fpos;
5212     int code;
5213 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
5214     code = fgetpos64(f, &fpos);
5215 #else
5216     code = fgetpos(f, &fpos);
5217 #endif
5218     sv_setpvn(pos, (char *) &fpos, sizeof(fpos));
5219     return code;
5220 }
5221 #endif
5222
5223 #if (defined(PERLIO_IS_STDIO) || !defined(USE_SFIO)) && !defined(HAS_VPRINTF)
5224
5225 int
5226 vprintf(char *pat, char *args)
5227 {
5228     _doprnt(pat, args, stdout);
5229     return 0;                   /* wrong, but perl doesn't use the return
5230                                  * value */
5231 }
5232
5233 int
5234 vfprintf(FILE *fd, char *pat, char *args)
5235 {
5236     _doprnt(pat, args, fd);
5237     return 0;                   /* wrong, but perl doesn't use the return
5238                                  * value */
5239 }
5240
5241 #endif
5242
5243 #ifndef PerlIO_vsprintf
5244 int
5245 PerlIO_vsprintf(char *s, int n, const char *fmt, va_list ap)
5246 {
5247     dTHX;
5248     const int val = my_vsnprintf(s, n > 0 ? n : 0, fmt, ap);
5249     PERL_UNUSED_CONTEXT;
5250
5251 #ifndef PERL_MY_VSNPRINTF_GUARDED
5252     if (val < 0 || (n > 0 ? val >= n : 0)) {
5253         Perl_croak(aTHX_ "panic: my_vsnprintf overflow in PerlIO_vsprintf\n");
5254     }
5255 #endif
5256     return val;
5257 }
5258 #endif
5259
5260 #ifndef PerlIO_sprintf
5261 int
5262 PerlIO_sprintf(char *s, int n, const char *fmt, ...)
5263 {
5264     va_list ap;
5265     int result;
5266     va_start(ap, fmt);
5267     result = PerlIO_vsprintf(s, n, fmt, ap);
5268     va_end(ap);
5269     return result;
5270 }
5271 #endif
5272
5273 /*
5274  * Local variables:
5275  * c-indentation-style: bsd
5276  * c-basic-offset: 4
5277  * indent-tabs-mode: t
5278  * End:
5279  *
5280  * ex: set ts=8 sts=4 sw=4 noet:
5281  */