perlio.c

   1 /*
   2  * perlio.c Copyright (c) 1996-2002, Nick Ing-Simmons You may distribute
   3  * under the terms of either the GNU General Public License or the
   4  * Artistic License, as specified in the README file.
   5  */
   6
   7 /*
   8  * Hour after hour for nearly three weary days he had jogged up and down,
   9  * over passes, and through long dales, and across many streams.
  10  */
  11
  12 /*
  13  * If we have ActivePerl-like PERL_IMPLICIT_SYS then we need a dTHX to get
  14  * at the dispatch tables, even when we do not need it for other reasons.
  15  * Invent a dSYS macro to abstract this out
  16  */
  17 #ifdef PERL_IMPLICIT_SYS
  18 #define dSYS dTHX
  19 #else
  20 #define dSYS dNOOP
  21 #endif
  22
  23 #define VOIDUSED 1
  24 #ifdef PERL_MICRO
  25 #   include "uconfig.h"
  26 #else
  27 #   include "config.h"
  28 #endif
  29
  30 #define PERLIO_NOT_STDIO 0
  31 #if !defined(PERLIO_IS_STDIO) && !defined(USE_SFIO)
  32 /*
  33  * #define PerlIO FILE
  34  */
  35 #endif
  36 /*
  37  * This file provides those parts of PerlIO abstraction
  38  * which are not #defined in perlio.h.
  39  * Which these are depends on various Configure #ifdef's
  40  */
  41
  42 #include "EXTERN.h"
  43 #define PERL_IN_PERLIO_C
  44 #include "perl.h"
  45
  46 #ifdef PERL_IMPLICIT_CONTEXT
  47 #undef dSYS
  48 #define dSYS dTHX
  49 #endif
  50
  51 #include "XSUB.h"
  52
  53 int
  54 perlsio_binmode(FILE *fp, int iotype, int mode)
  55 {
  56     /*
  57      * This used to be contents of do_binmode in doio.c
  58      */
  59 #ifdef DOSISH
  60 #  if defined(atarist) || defined(__MINT__)
  61     if (!fflush(fp)) {
  62         if (mode & O_BINARY)
  63             ((FILE *) fp)->_flag |= _IOBIN;
  64         else
  65             ((FILE *) fp)->_flag &= ~_IOBIN;
  66         return 1;
  67     }
  68     return 0;
  69 #  else
  70     dTHX;
  71 #ifdef NETWARE
  72     if (PerlLIO_setmode(fp, mode) != -1) {
  73 #else
  74     if (PerlLIO_setmode(fileno(fp), mode) != -1) {
  75 #endif
  76 #    if defined(WIN32) && defined(__BORLANDC__)
  77         /*
  78          * The translation mode of the stream is maintained independent of
  79          * the translation mode of the fd in the Borland RTL (heavy
  80          * digging through their runtime sources reveal).  User has to set
  81          * the mode explicitly for the stream (though they don't document
  82          * this anywhere). GSAR 97-5-24
  83          */
  84         fseek(fp, 0L, 0);
  85         if (mode & O_BINARY)
  86             fp->flags |= _F_BIN;
  87         else
  88             fp->flags &= ~_F_BIN;
  89 #    endif
  90         return 1;
  91     }
  92     else
  93         return 0;
  94 #  endif
  95 #else
  96 #  if defined(USEMYBINMODE)
  97     dTHX;
  98     if (my_binmode(fp, iotype, mode) != FALSE)
  99         return 1;
 100     else
 101         return 0;
 102 #  else
 103     return 1;
 104 #  endif
 105 #endif
 106 }
 107
 108 #ifndef O_ACCMODE
 109 #define O_ACCMODE 3             /* Assume traditional implementation */
 110 #endif
 111
 112 int
 113 PerlIO_intmode2str(int rawmode, char *mode, int *writing)
 114 {
 115     int result = rawmode & O_ACCMODE;
 116     int ix = 0;
 117     int ptype;
 118     switch (result) {
 119     case O_RDONLY:
 120         ptype = IoTYPE_RDONLY;
 121         break;
 122     case O_WRONLY:
 123         ptype = IoTYPE_WRONLY;
 124         break;
 125     case O_RDWR:
 126     default:
 127         ptype = IoTYPE_RDWR;
 128         break;
 129     }
 130     if (writing)
 131         *writing = (result != O_RDONLY);
 132
 133     if (result == O_RDONLY) {
 134         mode[ix++] = 'r';
 135     }
 136 #ifdef O_APPEND
 137     else if (rawmode & O_APPEND) {
 138         mode[ix++] = 'a';
 139         if (result != O_WRONLY)
 140             mode[ix++] = '+';
 141     }
 142 #endif
 143     else {
 144         if (result == O_WRONLY)
 145             mode[ix++] = 'w';
 146         else {
 147             mode[ix++] = 'r';
 148             mode[ix++] = '+';
 149         }
 150     }
 151     if (rawmode & O_BINARY)
 152         mode[ix++] = 'b';
 153     mode[ix] = '\0';
 154     return ptype;
 155 }
 156
 157 #ifndef PERLIO_LAYERS
 158 int
 159 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
 160 {
 161     if (!names || !*names
 162         || strEQ(names, ":crlf")
 163         || strEQ(names, ":raw")
 164         || strEQ(names, ":bytes")
 165        ) {
 166         return 0;
 167     }
 168     Perl_croak(aTHX_ "Cannot apply \"%s\" in non-PerlIO perl", names);
 169     /*
 170      * NOTREACHED
 171      */
 172     return -1;
 173 }
 174
 175 void
 176 PerlIO_destruct(pTHX)
 177 {
 178 }
 179
 180 int
 181 PerlIO_binmode(pTHX_ PerlIO *fp, int iotype, int mode, const char *names)
 182 {
 183 #ifdef USE_SFIO
 184     return 1;
 185 #else
 186     return perlsio_binmode(fp, iotype, mode);
 187 #endif
 188 }
 189
 190 PerlIO *
 191 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
 192 {
 193 #ifdef PERL_MICRO
 194     return NULL;
 195 #else
 196 #ifdef PERL_IMPLICIT_SYS
 197     return PerlSIO_fdupopen(f);
 198 #else
 199 #ifdef WIN32
 200     return win32_fdupopen(f);
 201 #else
 202     if (f) {
 203         int fd = PerlLIO_dup(PerlIO_fileno(f));
 204         if (fd >= 0) {
 205             char mode[8];
 206             int omode = fcntl(fd, F_GETFL);
 207 #ifdef DJGPP
 208             omode = djgpp_get_stream_mode(f);
 209 #endif
 210             PerlIO_intmode2str(omode,mode,NULL);
 211             /* the r+ is a hack */
 212             return PerlIO_fdopen(fd, mode);
 213         }
 214         return NULL;
 215     }
 216     else {
 217         SETERRNO(EBADF, SS_IVCHAN);
 218     }
 219 #endif
 220     return NULL;
 221 #endif
 222 #endif
 223 }
 224
 225
 226 /*
 227  * De-mux PerlIO_openn() into fdopen, freopen and fopen type entries
 228  */
 229
 230 PerlIO *
 231 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
 232              int imode, int perm, PerlIO *old, int narg, SV **args)
 233 {
 234     if (narg) {
 235         if (narg > 1) {
 236             Perl_croak(aTHX_ "More than one argument to open");
 237         }
 238         if (*args == &PL_sv_undef)
 239             return PerlIO_tmpfile();
 240         else {
 241             char *name = SvPV_nolen(*args);
 242             if (*mode == '#') {
 243                 fd = PerlLIO_open3(name, imode, perm);
 244                 if (fd >= 0)
 245                     return PerlIO_fdopen(fd, (char *) mode + 1);
 246             }
 247             else if (old) {
 248                 return PerlIO_reopen(name, mode, old);
 249             }
 250             else {
 251                 return PerlIO_open(name, mode);
 252             }
 253         }
 254     }
 255     else {
 256         return PerlIO_fdopen(fd, (char *) mode);
 257     }
 258     return NULL;
 259 }
 260
 261 XS(XS_PerlIO__Layer__find)
 262 {
 263     dXSARGS;
 264     if (items < 2)
 265         Perl_croak(aTHX_ "Usage class->find(name[,load])");
 266     else {
 267         char *name = SvPV_nolen(ST(1));
 268         ST(0) = (strEQ(name, "crlf")
 269                  || strEQ(name, "raw")) ? &PL_sv_yes : &PL_sv_undef;
 270         XSRETURN(1);
 271     }
 272 }
 273
 274
 275 void
 276 Perl_boot_core_PerlIO(pTHX)
 277 {
 278     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
 279 }
 280
 281 #endif
 282
 283
 284 #ifdef PERLIO_IS_STDIO
 285
 286 void
 287 PerlIO_init(pTHX)
 288 {
 289     /*
 290      * Does nothing (yet) except force this file to be included in perl
 291      * binary. That allows this file to force inclusion of other functions
 292      * that may be required by loadable extensions e.g. for
 293      * FileHandle::tmpfile
 294      */
 295 }
 296
 297 #undef PerlIO_tmpfile
 298 PerlIO *
 299 PerlIO_tmpfile(void)
 300 {
 301     return tmpfile();
 302 }
 303
 304 #else                           /* PERLIO_IS_STDIO */
 305
 306 #ifdef USE_SFIO
 307
 308 #undef HAS_FSETPOS
 309 #undef HAS_FGETPOS
 310
 311 /*
 312  * This section is just to make sure these functions get pulled in from
 313  * libsfio.a
 314  */
 315
 316 #undef PerlIO_tmpfile
 317 PerlIO *
 318 PerlIO_tmpfile(void)
 319 {
 320     return sftmp(0);
 321 }
 322
 323 void
 324 PerlIO_init(pTHX)
 325 {
 326     /*
 327      * Force this file to be included in perl binary. Which allows this
 328      * file to force inclusion of other functions that may be required by
 329      * loadable extensions e.g. for FileHandle::tmpfile
 330      */
 331
 332     /*
 333      * Hack sfio does its own 'autoflush' on stdout in common cases. Flush
 334      * results in a lot of lseek()s to regular files and lot of small
 335      * writes to pipes.
 336      */
 337     sfset(sfstdout, SF_SHARE, 0);
 338 }
 339
 340 /* This is not the reverse of PerlIO_exportFILE(), PerlIO_releaseFILE() is. */
 341 PerlIO *
 342 PerlIO_importFILE(FILE *stdio, const char *mode)
 343 {
 344     int fd = fileno(stdio);
 345     if (!mode || !*mode) {
 346         mode = "r+";
 347     }
 348     return PerlIO_fdopen(fd, mode);
 349 }
 350
 351 FILE *
 352 PerlIO_findFILE(PerlIO *pio)
 353 {
 354     int fd = PerlIO_fileno(pio);
 355     FILE *f = fdopen(fd, "r+");
 356     PerlIO_flush(pio);
 357     if (!f && errno == EINVAL)
 358         f = fdopen(fd, "w");
 359     if (!f && errno == EINVAL)
 360         f = fdopen(fd, "r");
 361     return f;
 362 }
 363
 364
 365 #else                           /* USE_SFIO */
 366 /*======================================================================================*/
 367 /*
 368  * Implement all the PerlIO interface ourselves.
 369  */
 370
 371 #include "perliol.h"
 372
 373 /*
 374  * We _MUST_ have <unistd.h> if we are using lseek() and may have large
 375  * files
 376  */
 377 #ifdef I_UNISTD
 378 #include <unistd.h>
 379 #endif
 380 #ifdef HAS_MMAP
 381 #include <sys/mman.h>
 382 #endif
 383
 384
 385 void PerlIO_debug(const char *fmt, ...)
 386     __attribute__ ((format(__printf__, 1, 2)));
 387
 388 void
 389 PerlIO_debug(const char *fmt, ...)
 390 {
 391     static int dbg = 0;
 392     va_list ap;
 393     dSYS;
 394     va_start(ap, fmt);
 395     if (!dbg) {
 396         char *s = PerlEnv_getenv("PERLIO_DEBUG");
 397         if (s && *s)
 398             dbg = PerlLIO_open3(s, O_WRONLY | O_CREAT | O_APPEND, 0666);
 399         else
 400             dbg = -1;
 401     }
 402     if (dbg > 0) {
 403         dTHX;
 404 #ifdef USE_ITHREADS
 405         /* Use fixed buffer as sv_catpvf etc. needs SVs */
 406         char buffer[1024];
 407         char *s;
 408         STRLEN len;
 409         s = CopFILE(PL_curcop);
 410         if (!s)
 411             s = "(none)";
 412         sprintf(buffer, "%s:%" IVdf " ", s, (IV) CopLINE(PL_curcop));
 413         len = strlen(buffer);
 414         vsprintf(buffer+len, fmt, ap);
 415         PerlLIO_write(dbg, buffer, strlen(buffer));
 416 #else
 417         SV *sv = newSVpvn("", 0);
 418         char *s;
 419         STRLEN len;
 420         s = CopFILE(PL_curcop);
 421         if (!s)
 422             s = "(none)";
 423         Perl_sv_catpvf(aTHX_ sv, "%s:%" IVdf " ", s,
 424                        (IV) CopLINE(PL_curcop));
 425         Perl_sv_vcatpvf(aTHX_ sv, fmt, &ap);
 426
 427         s = SvPV(sv, len);
 428         PerlLIO_write(dbg, s, len);
 429         SvREFCNT_dec(sv);
 430 #endif
 431     }
 432     va_end(ap);
 433 }
 434
 435 /*--------------------------------------------------------------------------------------*/
 436
 437 /*
 438  * Inner level routines
 439  */
 440
 441 /*
 442  * Table of pointers to the PerlIO structs (malloc'ed)
 443  */
 444 #define PERLIO_TABLE_SIZE 64
 445
 446 PerlIO *
 447 PerlIO_allocate(pTHX)
 448 {
 449     /*
 450      * Find a free slot in the table, allocating new table as necessary
 451      */
 452     PerlIO **last;
 453     PerlIO *f;
 454     last = &PL_perlio;
 455     while ((f = *last)) {
 456         int i;
 457         last = (PerlIO **) (f);
 458         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 459             if (!*++f) {
 460                 return f;
 461             }
 462         }
 463     }
 464     Newz('I',f,PERLIO_TABLE_SIZE,PerlIO);
 465     if (!f) {
 466         return NULL;
 467     }
 468     *last = f;
 469     return f + 1;
 470 }
 471
 472 #undef PerlIO_fdupopen
 473 PerlIO *
 474 PerlIO_fdupopen(pTHX_ PerlIO *f, CLONE_PARAMS *param, int flags)
 475 {
 476     if (PerlIOValid(f)) {
 477         PerlIO_funcs *tab = PerlIOBase(f)->tab;
 478         PerlIO *new;
 479         PerlIO_debug("fdupopen f=%p param=%p\n",(void*)f,(void*)param);
 480         new = (*tab->Dup)(aTHX_ PerlIO_allocate(aTHX),f,param, flags);
 481         return new;
 482     }
 483     else {
 484         SETERRNO(EBADF, SS_IVCHAN);
 485         return NULL;
 486     }
 487 }
 488
 489 void
 490 PerlIO_cleantable(pTHX_ PerlIO **tablep)
 491 {
 492     PerlIO *table = *tablep;
 493     if (table) {
 494         int i;
 495         PerlIO_cleantable(aTHX_(PerlIO **) & (table[0]));
 496         for (i = PERLIO_TABLE_SIZE - 1; i > 0; i--) {
 497             PerlIO *f = table + i;
 498             if (*f) {
 499                 PerlIO_close(f);
 500             }
 501         }
 502         Safefree(table);
 503         *tablep = NULL;
 504     }
 505 }
 506
 507
 508 PerlIO_list_t *
 509 PerlIO_list_alloc(pTHX)
 510 {
 511     PerlIO_list_t *list;
 512     Newz('L', list, 1, PerlIO_list_t);
 513     list->refcnt = 1;
 514     return list;
 515 }
 516
 517 void
 518 PerlIO_list_free(pTHX_ PerlIO_list_t *list)
 519 {
 520     if (list) {
 521         if (--list->refcnt == 0) {
 522             if (list->array) {
 523                 IV i;
 524                 for (i = 0; i < list->cur; i++) {
 525                     if (list->array[i].arg)
 526                         SvREFCNT_dec(list->array[i].arg);
 527                 }
 528                 Safefree(list->array);
 529             }
 530             Safefree(list);
 531         }
 532     }
 533 }
 534
 535 void
 536 PerlIO_list_push(pTHX_ PerlIO_list_t *list, PerlIO_funcs *funcs, SV *arg)
 537 {
 538     PerlIO_pair_t *p;
 539     if (list->cur >= list->len) {
 540         list->len += 8;
 541         if (list->array)
 542             Renew(list->array, list->len, PerlIO_pair_t);
 543         else
 544             New('l', list->array, list->len, PerlIO_pair_t);
 545     }
 546     p = &(list->array[list->cur++]);
 547     p->funcs = funcs;
 548     if ((p->arg = arg)) {
 549         SvREFCNT_inc(arg);
 550     }
 551 }
 552
 553 PerlIO_list_t *
 554 PerlIO_clone_list(pTHX_ PerlIO_list_t *proto, CLONE_PARAMS *param)
 555 {
 556     PerlIO_list_t *list = (PerlIO_list_t *) NULL;
 557     if (proto) {
 558         int i;
 559         list = PerlIO_list_alloc(aTHX);
 560         for (i=0; i < proto->cur; i++) {
 561             SV *arg = Nullsv;
 562             if (proto->array[i].arg)
 563                 arg = PerlIO_sv_dup(aTHX_ proto->array[i].arg,param);
 564             PerlIO_list_push(aTHX_ list, proto->array[i].funcs, arg);
 565         }
 566     }
 567     return list;
 568 }
 569
 570 void
 571 PerlIO_clone(pTHX_ PerlInterpreter *proto, CLONE_PARAMS *param)
 572 {
 573 #ifdef USE_ITHREADS
 574     PerlIO **table = &proto->Iperlio;
 575     PerlIO *f;
 576     PL_perlio = NULL;
 577     PL_known_layers = PerlIO_clone_list(aTHX_ proto->Iknown_layers, param);
 578     PL_def_layerlist = PerlIO_clone_list(aTHX_ proto->Idef_layerlist, param);
 579     PerlIO_allocate(aTHX); /* root slot is never used */
 580     PerlIO_debug("Clone %p from %p\n",aTHX,proto);
 581     while ((f = *table)) {
 582             int i;
 583             table = (PerlIO **) (f++);
 584             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 585                 if (*f) {
 586                     (void) fp_dup(f, 0, param);
 587                 }
 588                 f++;
 589             }
 590         }
 591 #endif
 592 }
 593
 594 void
 595 PerlIO_destruct(pTHX)
 596 {
 597     PerlIO **table = &PL_perlio;
 598     PerlIO *f;
 599 #ifdef USE_ITHREADS
 600     PerlIO_debug("Destruct %p\n",aTHX);
 601 #endif
 602     while ((f = *table)) {
 603         int i;
 604         table = (PerlIO **) (f++);
 605         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
 606             PerlIO *x = f;
 607             PerlIOl *l;
 608             while ((l = *x)) {
 609                 if (l->tab->kind & PERLIO_K_DESTRUCT) {
 610                     PerlIO_debug("Destruct popping %s\n", l->tab->name);
 611                     PerlIO_flush(x);
 612                     PerlIO_pop(aTHX_ x);
 613                 }
 614                 else {
 615                     x = PerlIONext(x);
 616                 }
 617             }
 618             f++;
 619         }
 620     }
 621 }
 622
 623 void
 624 PerlIO_pop(pTHX_ PerlIO *f)
 625 {
 626     PerlIOl *l = *f;
 627     if (l) {
 628         PerlIO_debug("PerlIO_pop f=%p %s\n", (void*)f, l->tab->name);
 629         if (l->tab->Popped) {
 630             /*
 631              * If popped returns non-zero do not free its layer structure
 632              * it has either done so itself, or it is shared and still in
 633              * use
 634              */
 635             if ((*l->tab->Popped) (aTHX_ f) != 0)
 636                 return;
 637         }
 638         *f = l->next;
 639         Safefree(l);
 640     }
 641 }
 642
 643 /*--------------------------------------------------------------------------------------*/
 644 /*
 645  * XS Interface for perl code
 646  */
 647
 648 PerlIO_funcs *
 649 PerlIO_find_layer(pTHX_ const char *name, STRLEN len, int load)
 650 {
 651     IV i;
 652     if ((SSize_t) len <= 0)
 653         len = strlen(name);
 654     for (i = 0; i < PL_known_layers->cur; i++) {
 655         PerlIO_funcs *f = PL_known_layers->array[i].funcs;
 656         if (memEQ(f->name, name, len)) {
 657             PerlIO_debug("%.*s => %p\n", (int) len, name, (void*)f);
 658             return f;
 659         }
 660     }
 661     if (load && PL_subname && PL_def_layerlist
 662         && PL_def_layerlist->cur >= 2) {
 663         if (PL_in_load_module) {
 664             Perl_croak(aTHX_ "Recursive call to Perl_load_module in PerlIO_find_layer");
 665             return NULL;
 666         } else {
 667             SV *pkgsv = newSVpvn("PerlIO", 6);
 668             SV *layer = newSVpvn(name, len);
 669             ENTER;
 670             SAVEINT(PL_in_load_module);
 671             PL_in_load_module++;
 672             /*
 673              * The two SVs are magically freed by load_module
 674              */
 675             Perl_load_module(aTHX_ 0, pkgsv, Nullsv, layer, Nullsv);
 676             PL_in_load_module--;
 677             LEAVE;
 678             return PerlIO_find_layer(aTHX_ name, len, 0);
 679         }
 680     }
 681     PerlIO_debug("Cannot find %.*s\n", (int) len, name);
 682     return NULL;
 683 }
 684
 685 #ifdef USE_ATTRIBUTES_FOR_PERLIO
 686
 687 static int
 688 perlio_mg_set(pTHX_ SV *sv, MAGIC *mg)
 689 {
 690     if (SvROK(sv)) {
 691         IO *io = GvIOn((GV *) SvRV(sv));
 692         PerlIO *ifp = IoIFP(io);
 693         PerlIO *ofp = IoOFP(io);
 694         Perl_warn(aTHX_ "set %" SVf " %p %p %p", sv, io, ifp, ofp);
 695     }
 696     return 0;
 697 }
 698
 699 static int
 700 perlio_mg_get(pTHX_ SV *sv, MAGIC *mg)
 701 {
 702     if (SvROK(sv)) {
 703         IO *io = GvIOn((GV *) SvRV(sv));
 704         PerlIO *ifp = IoIFP(io);
 705         PerlIO *ofp = IoOFP(io);
 706         Perl_warn(aTHX_ "get %" SVf " %p %p %p", sv, io, ifp, ofp);
 707     }
 708     return 0;
 709 }
 710
 711 static int
 712 perlio_mg_clear(pTHX_ SV *sv, MAGIC *mg)
 713 {
 714     Perl_warn(aTHX_ "clear %" SVf, sv);
 715     return 0;
 716 }
 717
 718 static int
 719 perlio_mg_free(pTHX_ SV *sv, MAGIC *mg)
 720 {
 721     Perl_warn(aTHX_ "free %" SVf, sv);
 722     return 0;
 723 }
 724
 725 MGVTBL perlio_vtab = {
 726     perlio_mg_get,
 727     perlio_mg_set,
 728     NULL,                       /* len */
 729     perlio_mg_clear,
 730     perlio_mg_free
 731 };
 732
 733 XS(XS_io_MODIFY_SCALAR_ATTRIBUTES)
 734 {
 735     dXSARGS;
 736     SV *sv = SvRV(ST(1));
 737     AV *av = newAV();
 738     MAGIC *mg;
 739     int count = 0;
 740     int i;
 741     sv_magic(sv, (SV *) av, PERL_MAGIC_ext, NULL, 0);
 742     SvRMAGICAL_off(sv);
 743     mg = mg_find(sv, PERL_MAGIC_ext);
 744     mg->mg_virtual = &perlio_vtab;
 745     mg_magical(sv);
 746     Perl_warn(aTHX_ "attrib %" SVf, sv);
 747     for (i = 2; i < items; i++) {
 748         STRLEN len;
 749         const char *name = SvPV(ST(i), len);
 750         SV *layer = PerlIO_find_layer(aTHX_ name, len, 1);
 751         if (layer) {
 752             av_push(av, SvREFCNT_inc(layer));
 753         }
 754         else {
 755             ST(count) = ST(i);
 756             count++;
 757         }
 758     }
 759     SvREFCNT_dec(av);
 760     XSRETURN(count);
 761 }
 762
 763 #endif                          /* USE_ATTIBUTES_FOR_PERLIO */
 764
 765 SV *
 766 PerlIO_tab_sv(pTHX_ PerlIO_funcs *tab)
 767 {
 768     HV *stash = gv_stashpv("PerlIO::Layer", TRUE);
 769     SV *sv = sv_bless(newRV_noinc(newSViv(PTR2IV(tab))), stash);
 770     return sv;
 771 }
 772
 773 XS(XS_PerlIO__Layer__find)
 774 {
 775     dXSARGS;
 776     if (items < 2)
 777         Perl_croak(aTHX_ "Usage class->find(name[,load])");
 778     else {
 779         STRLEN len = 0;
 780         char *name = SvPV(ST(1), len);
 781         bool load = (items > 2) ? SvTRUE(ST(2)) : 0;
 782         PerlIO_funcs *layer = PerlIO_find_layer(aTHX_ name, len, load);
 783         ST(0) =
 784             (layer) ? sv_2mortal(PerlIO_tab_sv(aTHX_ layer)) :
 785             &PL_sv_undef;
 786         XSRETURN(1);
 787     }
 788 }
 789
 790 void
 791 PerlIO_define_layer(pTHX_ PerlIO_funcs *tab)
 792 {
 793     if (!PL_known_layers)
 794         PL_known_layers = PerlIO_list_alloc(aTHX);
 795     PerlIO_list_push(aTHX_ PL_known_layers, tab, Nullsv);
 796     PerlIO_debug("define %s %p\n", tab->name, (void*)tab);
 797 }
 798
 799 int
 800 PerlIO_parse_layers(pTHX_ PerlIO_list_t *av, const char *names)
 801 {
 802     if (names) {
 803         const char *s = names;
 804         while (*s) {
 805             while (isSPACE(*s) || *s == ':')
 806                 s++;
 807             if (*s) {
 808                 STRLEN llen = 0;
 809                 const char *e = s;
 810                 const char *as = Nullch;
 811                 STRLEN alen = 0;
 812                 if (!isIDFIRST(*s)) {
 813                     /*
 814                      * Message is consistent with how attribute lists are
 815                      * passed. Even though this means "foo : : bar" is
 816                      * seen as an invalid separator character.
 817                      */
 818                     char q = ((*s == '\'') ? '"' : '\'');
 819                     if (ckWARN(WARN_LAYER))
 820                         Perl_warner(aTHX_ packWARN(WARN_LAYER),
 821                               "perlio: invalid separator character %c%c%c in layer specification list %s",
 822                               q, *s, q, s);
 823                     SETERRNO(EINVAL, LIB_INVARG);
 824                     return -1;
 825                 }
 826                 do {
 827                     e++;
 828                 } while (isALNUM(*e));
 829                 llen = e - s;
 830                 if (*e == '(') {
 831                     int nesting = 1;
 832                     as = ++e;
 833                     while (nesting) {
 834                         switch (*e++) {
 835                         case ')':
 836                             if (--nesting == 0)
 837                                 alen = (e - 1) - as;
 838                             break;
 839                         case '(':
 840                             ++nesting;
 841                             break;
 842                         case '\\':
 843                             /*
 844                              * It's a nul terminated string, not allowed
 845                              * to \ the terminating null. Anything other
 846                              * character is passed over.
 847                              */
 848                             if (*e++) {
 849                                 break;
 850                             }
 851                             /*
 852                              * Drop through
 853                              */
 854                         case '\0':
 855                             e--;
 856                             if (ckWARN(WARN_LAYER))
 857                                 Perl_warner(aTHX_ packWARN(WARN_LAYER),
 858                                       "perlio: argument list not closed for layer \"%.*s\"",
 859                                       (int) (e - s), s);
 860                             return -1;
 861                         default:
 862                             /*
 863                              * boring.
 864                              */
 865                             break;
 866                         }
 867                     }
 868                 }
 869                 if (e > s) {
 870                     bool warn_layer = ckWARN(WARN_LAYER);
 871                     PerlIO_funcs *layer =
 872                         PerlIO_find_layer(aTHX_ s, llen, 1);
 873                     if (layer) {
 874                         PerlIO_list_push(aTHX_ av, layer,
 875                                          (as) ? newSVpvn(as,
 876                                                          alen) :
 877                                          &PL_sv_undef);
 878                     }
 879                     else {
 880                         if (warn_layer)
 881                             Perl_warner(aTHX_ packWARN(WARN_LAYER), "perlio: unknown layer \"%.*s\"",
 882                                   (int) llen, s);
 883                         return -1;
 884                     }
 885                 }
 886                 s = e;
 887             }
 888         }
 889     }
 890     return 0;
 891 }
 892
 893 void
 894 PerlIO_default_buffer(pTHX_ PerlIO_list_t *av)
 895 {
 896     PerlIO_funcs *tab = &PerlIO_perlio;
 897 #ifdef PERLIO_USING_CRLF
 898     tab = &PerlIO_crlf;
 899 #else
 900     if (PerlIO_stdio.Set_ptrcnt)
 901         tab = &PerlIO_stdio;
 902 #endif
 903     PerlIO_debug("Pushing %s\n", tab->name);
 904     PerlIO_list_push(aTHX_ av, PerlIO_find_layer(aTHX_ tab->name, 0, 0),
 905                      &PL_sv_undef);
 906 }
 907
 908 SV *
 909 PerlIO_arg_fetch(PerlIO_list_t *av, IV n)
 910 {
 911     return av->array[n].arg;
 912 }
 913
 914 PerlIO_funcs *
 915 PerlIO_layer_fetch(pTHX_ PerlIO_list_t *av, IV n, PerlIO_funcs *def)
 916 {
 917     if (n >= 0 && n < av->cur) {
 918         PerlIO_debug("Layer %" IVdf " is %s\n", n,
 919                      av->array[n].funcs->name);
 920         return av->array[n].funcs;
 921     }
 922     if (!def)
 923         Perl_croak(aTHX_ "panic: PerlIO layer array corrupt");
 924     return def;
 925 }
 926
 927 IV
 928 PerlIOPop_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
 929 {
 930     if (PerlIOValid(f)) {
 931         PerlIO_flush(f);
 932         PerlIO_pop(aTHX_ f);
 933         return 0;
 934     }
 935     return -1;
 936 }
 937
 938 PerlIO_funcs PerlIO_remove = {
 939     sizeof(PerlIO_funcs),
 940     "pop",
 941     0,
 942     PERLIO_K_DUMMY | PERLIO_K_UTF8,
 943     PerlIOPop_pushed,
 944     NULL,
 945     NULL,
 946     NULL,
 947     NULL,
 948     NULL,
 949     NULL,
 950     NULL,
 951     NULL,
 952     NULL,
 953     NULL,
 954     NULL,                       /* flush */
 955     NULL,                       /* fill */
 956     NULL,
 957     NULL,
 958     NULL,
 959     NULL,
 960     NULL,                       /* get_base */
 961     NULL,                       /* get_bufsiz */
 962     NULL,                       /* get_ptr */
 963     NULL,                       /* get_cnt */
 964     NULL,                       /* set_ptrcnt */
 965 };
 966
 967 PerlIO_list_t *
 968 PerlIO_default_layers(pTHX)
 969 {
 970     if (!PL_def_layerlist) {
 971         const char *s = (PL_tainting) ? Nullch : PerlEnv_getenv("PERLIO");
 972         PerlIO_funcs *osLayer = &PerlIO_unix;
 973         PL_def_layerlist = PerlIO_list_alloc(aTHX);
 974         PerlIO_define_layer(aTHX_ & PerlIO_unix);
 975 #if defined(WIN32) && !defined(UNDER_CE)
 976         PerlIO_define_layer(aTHX_ & PerlIO_win32);
 977 #if 0
 978         osLayer = &PerlIO_win32;
 979 #endif
 980 #endif
 981         PerlIO_define_layer(aTHX_ & PerlIO_raw);
 982         PerlIO_define_layer(aTHX_ & PerlIO_perlio);
 983         PerlIO_define_layer(aTHX_ & PerlIO_stdio);
 984         PerlIO_define_layer(aTHX_ & PerlIO_crlf);
 985 #ifdef HAS_MMAP
 986         PerlIO_define_layer(aTHX_ & PerlIO_mmap);
 987 #endif
 988         PerlIO_define_layer(aTHX_ & PerlIO_utf8);
 989         PerlIO_define_layer(aTHX_ & PerlIO_remove);
 990         PerlIO_define_layer(aTHX_ & PerlIO_byte);
 991         PerlIO_list_push(aTHX_ PL_def_layerlist,
 992                          PerlIO_find_layer(aTHX_ osLayer->name, 0, 0),
 993                          &PL_sv_undef);
 994         if (s) {
 995             PerlIO_parse_layers(aTHX_ PL_def_layerlist, s);
 996         }
 997         else {
 998             PerlIO_default_buffer(aTHX_ PL_def_layerlist);
 999         }
1000     }
1001     if (PL_def_layerlist->cur < 2) {
1002         PerlIO_default_buffer(aTHX_ PL_def_layerlist);
1003     }
1004     return PL_def_layerlist;
1005 }
1006
1007 void
1008 Perl_boot_core_PerlIO(pTHX)
1009 {
1010 #ifdef USE_ATTRIBUTES_FOR_PERLIO
1011     newXS("io::MODIFY_SCALAR_ATTRIBUTES", XS_io_MODIFY_SCALAR_ATTRIBUTES,
1012           __FILE__);
1013 #endif
1014     newXS("PerlIO::Layer::find", XS_PerlIO__Layer__find, __FILE__);
1015 }
1016
1017 PerlIO_funcs *
1018 PerlIO_default_layer(pTHX_ I32 n)
1019 {
1020     PerlIO_list_t *av = PerlIO_default_layers(aTHX);
1021     if (n < 0)
1022         n += av->cur;
1023     return PerlIO_layer_fetch(aTHX_ av, n, &PerlIO_stdio);
1024 }
1025
1026 #define PerlIO_default_top() PerlIO_default_layer(aTHX_ -1)
1027 #define PerlIO_default_btm() PerlIO_default_layer(aTHX_ 0)
1028
1029 void
1030 PerlIO_stdstreams(pTHX)
1031 {
1032     if (!PL_perlio) {
1033         PerlIO_allocate(aTHX);
1034         PerlIO_fdopen(0, "Ir" PERLIO_STDTEXT);
1035         PerlIO_fdopen(1, "Iw" PERLIO_STDTEXT);
1036         PerlIO_fdopen(2, "Iw" PERLIO_STDTEXT);
1037     }
1038 }
1039
1040 PerlIO *
1041 PerlIO_push(pTHX_ PerlIO *f, PerlIO_funcs *tab, const char *mode, SV *arg)
1042 {
1043     if (tab->fsize != sizeof(PerlIO_funcs)) {
1044       mismatch:
1045         Perl_croak(aTHX_ "Layer does not match this perl");
1046     }
1047     if (tab->size) {
1048         PerlIOl *l = NULL;
1049         if (tab->size < sizeof(PerlIOl)) {
1050             goto mismatch;
1051         }
1052         /* Real layer with a data area */
1053         Newc('L',l,tab->size,char,PerlIOl);
1054         if (l && f) {
1055             Zero(l, tab->size, char);
1056             l->next = *f;
1057             l->tab = tab;
1058             *f = l;
1059             PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1060                         (mode) ? mode : "(Null)", (void*)arg);
1061             if ((*l->tab->Pushed) (aTHX_ f, mode, arg, tab) != 0) {
1062                 PerlIO_pop(aTHX_ f);
1063                 return NULL;
1064             }
1065         }
1066     }
1067     else if (f) {
1068         /* Pseudo-layer where push does its own stack adjust */
1069         PerlIO_debug("PerlIO_push f=%p %s %s %p\n", (void*)f, tab->name,
1070                      (mode) ? mode : "(Null)", (void*)arg);
1071         if ((*tab->Pushed) (aTHX_ f, mode, arg, tab) != 0) {
1072             return NULL;
1073         }
1074     }
1075     return f;
1076 }
1077
1078 IV
1079 PerlIOBase_binmode(pTHX_ PerlIO *f)
1080 {
1081    if (PerlIOValid(f)) {
1082         /* Is layer suitable for raw stream ? */
1083         if (PerlIOBase(f)->tab->kind & PERLIO_K_RAW) {
1084             /* Yes - turn off UTF-8-ness, to undo UTF-8 locale effects */
1085             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1086         }
1087         else {
1088             /* Not suitable - pop it */
1089             PerlIO_pop(aTHX_ f);
1090         }
1091         return 0;
1092    }
1093    return -1;
1094 }
1095
1096 IV
1097 PerlIORaw_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1098 {
1099
1100     if (PerlIOValid(f)) {
1101         PerlIO *t;
1102         PerlIOl *l;
1103         PerlIO_flush(f);
1104         /*
1105          * Strip all layers that are not suitable for a raw stream
1106          */
1107         t = f;
1108         while (t && (l = *t)) {
1109             if (l->tab->Binmode) {
1110                 /* Has a handler - normal case */
1111                 if ((*l->tab->Binmode)(aTHX_ f) == 0) {
1112                     if (*t == l) {
1113                         /* Layer still there - move down a layer */
1114                         t = PerlIONext(t);
1115                     }
1116                 }
1117                 else {
1118                     return -1;
1119                 }
1120             }
1121             else {
1122                 /* No handler - pop it */
1123                 PerlIO_pop(aTHX_ t);
1124             }
1125         }
1126         if (PerlIOValid(f)) {
1127             PerlIO_debug(":raw f=%p :%s\n", (void*)f, PerlIOBase(f)->tab->name);
1128             return 0;
1129         }
1130     }
1131     return -1;
1132 }
1133
1134 int
1135 PerlIO_apply_layera(pTHX_ PerlIO *f, const char *mode,
1136                     PerlIO_list_t *layers, IV n, IV max)
1137 {
1138     int code = 0;
1139     while (n < max) {
1140         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n, NULL);
1141         if (tab) {
1142             if (!PerlIO_push(aTHX_ f, tab, mode, PerlIOArg)) {
1143                 code = -1;
1144                 break;
1145             }
1146         }
1147         n++;
1148     }
1149     return code;
1150 }
1151
1152 int
1153 PerlIO_apply_layers(pTHX_ PerlIO *f, const char *mode, const char *names)
1154 {
1155     int code = 0;
1156     if (f && names) {
1157         PerlIO_list_t *layers = PerlIO_list_alloc(aTHX);
1158         code = PerlIO_parse_layers(aTHX_ layers, names);
1159         if (code == 0) {
1160             code = PerlIO_apply_layera(aTHX_ f, mode, layers, 0, layers->cur);
1161         }
1162         PerlIO_list_free(aTHX_ layers);
1163     }
1164     return code;
1165 }
1166
1167
1168 /*--------------------------------------------------------------------------------------*/
1169 /*
1170  * Given the abstraction above the public API functions
1171  */
1172
1173 int
1174 PerlIO_binmode(pTHX_ PerlIO *f, int iotype, int mode, const char *names)
1175 {
1176     PerlIO_debug("PerlIO_binmode f=%p %s %c %x %s\n",
1177                  (void*)f, PerlIOBase(f)->tab->name, iotype, mode,
1178                  (names) ? names : "(Null)");
1179     if (names) {
1180         /* Do not flush etc. if (e.g.) switching encodings.
1181            if a pushed layer knows it needs to flush lower layers
1182            (for example :unix which is never going to call them)
1183            it can do the flush when it is pushed.
1184          */
1185         return PerlIO_apply_layers(aTHX_ f, NULL, names) == 0 ? TRUE : FALSE;
1186     }
1187     else {
1188         /* Fake 5.6 legacy of using this call to turn ON O_TEXT */
1189 #ifdef PERLIO_USING_CRLF
1190         /* Legacy binmode only has meaning if O_TEXT has a value distinct from
1191            O_BINARY so we can look for it in mode.
1192          */
1193         if (!(mode & O_BINARY)) {
1194             /* Text mode */
1195             /* FIXME?: Looking down the layer stack seems wrong,
1196                but is a way of reaching past (say) an encoding layer
1197                to flip CRLF-ness of the layer(s) below
1198              */
1199             while (*f) {
1200                 /* Perhaps we should turn on bottom-most aware layer
1201                    e.g. Ilya's idea that UNIX TTY could serve
1202                  */
1203                 if (PerlIOBase(f)->tab->kind & PERLIO_K_CANCRLF) {
1204                     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
1205                         /* Not in text mode - flush any pending stuff and flip it */
1206                         PerlIO_flush(f);
1207                         PerlIOBase(f)->flags |= PERLIO_F_CRLF;
1208                     }
1209                     /* Only need to turn it on in one layer so we are done */
1210                     return TRUE;
1211                 }
1212                 f = PerlIONext(f);
1213             }
1214             /* Not finding a CRLF aware layer presumably means we are binary
1215                which is not what was requested - so we failed
1216                We _could_ push :crlf layer but so could caller
1217              */
1218             return FALSE;
1219         }
1220 #endif
1221         /* Legacy binmode is now _defined_ as being equivalent to pushing :raw
1222            So code that used to be here is now in PerlIORaw_pushed().
1223          */
1224         return PerlIO_push(aTHX_ f, &PerlIO_raw, Nullch, Nullsv) ? TRUE : FALSE;
1225     }
1226 }
1227
1228 int
1229 PerlIO__close(pTHX_ PerlIO *f)
1230 {
1231     if (PerlIOValid(f))
1232         return (*PerlIOBase(f)->tab->Close) (aTHX_ f);
1233     else {
1234         SETERRNO(EBADF, SS_IVCHAN);
1235         return -1;
1236     }
1237 }
1238
1239 int
1240 Perl_PerlIO_close(pTHX_ PerlIO *f)
1241 {
1242     int code = -1;
1243     if (PerlIOValid(f)) {
1244         code = (*PerlIOBase(f)->tab->Close) (aTHX_ f);
1245         while (*f) {
1246             PerlIO_pop(aTHX_ f);
1247         }
1248     }
1249     return code;
1250 }
1251
1252 int
1253 Perl_PerlIO_fileno(pTHX_ PerlIO *f)
1254 {
1255     if (PerlIOValid(f))
1256         return (*PerlIOBase(f)->tab->Fileno) (aTHX_ f);
1257     else {
1258         SETERRNO(EBADF, SS_IVCHAN);
1259         return -1;
1260     }
1261 }
1262
1263 static const char *
1264 PerlIO_context_layers(pTHX_ const char *mode)
1265 {
1266     const char *type = NULL;
1267     /*
1268      * Need to supply default layer info from open.pm
1269      */
1270     if (PL_curcop) {
1271         SV *layers = PL_curcop->cop_io;
1272         if (layers) {
1273             STRLEN len;
1274             type = SvPV(layers, len);
1275             if (type && mode[0] != 'r') {
1276                 /*
1277                  * Skip to write part
1278                  */
1279                 const char *s = strchr(type, 0);
1280                 if (s && (STRLEN)(s - type) < len) {
1281                     type = s + 1;
1282                 }
1283             }
1284         }
1285     }
1286     return type;
1287 }
1288
1289 static PerlIO_funcs *
1290 PerlIO_layer_from_ref(pTHX_ SV *sv)
1291 {
1292     /*
1293      * For any scalar type load the handler which is bundled with perl
1294      */
1295     if (SvTYPE(sv) < SVt_PVAV)
1296         return PerlIO_find_layer(aTHX_ "scalar", 6, 1);
1297
1298     /*
1299      * For other types allow if layer is known but don't try and load it
1300      */
1301     switch (SvTYPE(sv)) {
1302     case SVt_PVAV:
1303         return PerlIO_find_layer(aTHX_ "Array", 5, 0);
1304     case SVt_PVHV:
1305         return PerlIO_find_layer(aTHX_ "Hash", 4, 0);
1306     case SVt_PVCV:
1307         return PerlIO_find_layer(aTHX_ "Code", 4, 0);
1308     case SVt_PVGV:
1309         return PerlIO_find_layer(aTHX_ "Glob", 4, 0);
1310     }
1311     return NULL;
1312 }
1313
1314 PerlIO_list_t *
1315 PerlIO_resolve_layers(pTHX_ const char *layers,
1316                       const char *mode, int narg, SV **args)
1317 {
1318     PerlIO_list_t *def = PerlIO_default_layers(aTHX);
1319     int incdef = 1;
1320     if (!PL_perlio)
1321         PerlIO_stdstreams(aTHX);
1322     if (narg) {
1323         SV *arg = *args;
1324         /*
1325          * If it is a reference but not an object see if we have a handler
1326          * for it
1327          */
1328         if (SvROK(arg) && !sv_isobject(arg)) {
1329             PerlIO_funcs *handler = PerlIO_layer_from_ref(aTHX_ SvRV(arg));
1330             if (handler) {
1331                 def = PerlIO_list_alloc(aTHX);
1332                 PerlIO_list_push(aTHX_ def, handler, &PL_sv_undef);
1333                 incdef = 0;
1334             }
1335             /*
1336              * Don't fail if handler cannot be found :via(...) etc. may do
1337              * something sensible else we will just stringfy and open
1338              * resulting string.
1339              */
1340         }
1341     }
1342     if (!layers)
1343         layers = PerlIO_context_layers(aTHX_ mode);
1344     if (layers && *layers) {
1345         PerlIO_list_t *av;
1346         if (incdef) {
1347             IV i = def->cur;
1348             av = PerlIO_list_alloc(aTHX);
1349             for (i = 0; i < def->cur; i++) {
1350                 PerlIO_list_push(aTHX_ av, def->array[i].funcs,
1351                                  def->array[i].arg);
1352             }
1353         }
1354         else {
1355             av = def;
1356         }
1357         if (PerlIO_parse_layers(aTHX_ av, layers) == 0) {
1358              return av;
1359         }
1360         else {
1361             PerlIO_list_free(aTHX_ av);
1362             return (PerlIO_list_t *) NULL;
1363         }
1364     }
1365     else {
1366         if (incdef)
1367             def->refcnt++;
1368         return def;
1369     }
1370 }
1371
1372 PerlIO *
1373 PerlIO_openn(pTHX_ const char *layers, const char *mode, int fd,
1374              int imode, int perm, PerlIO *f, int narg, SV **args)
1375 {
1376     if (!f && narg == 1 && *args == &PL_sv_undef) {
1377         if ((f = PerlIO_tmpfile())) {
1378             if (!layers)
1379                 layers = PerlIO_context_layers(aTHX_ mode);
1380             if (layers && *layers)
1381                 PerlIO_apply_layers(aTHX_ f, mode, layers);
1382         }
1383     }
1384     else {
1385         PerlIO_list_t *layera = NULL;
1386         IV n;
1387         PerlIO_funcs *tab = NULL;
1388         if (PerlIOValid(f)) {
1389             /*
1390              * This is "reopen" - it is not tested as perl does not use it
1391              * yet
1392              */
1393             PerlIOl *l = *f;
1394             layera = PerlIO_list_alloc(aTHX);
1395             while (l) {
1396                 SV *arg = (l->tab->Getarg)
1397                         ? (*l->tab->Getarg) (aTHX_ &l, NULL, 0)
1398                         : &PL_sv_undef;
1399                 PerlIO_list_push(aTHX_ layera, l->tab, arg);
1400                 l = *PerlIONext(&l);
1401             }
1402         }
1403         else {
1404             layera = PerlIO_resolve_layers(aTHX_ layers, mode, narg, args);
1405             if (!layera) {
1406                 return NULL;
1407             }
1408         }
1409         /*
1410          * Start at "top" of layer stack
1411          */
1412         n = layera->cur - 1;
1413         while (n >= 0) {
1414             PerlIO_funcs *t = PerlIO_layer_fetch(aTHX_ layera, n, NULL);
1415             if (t && t->Open) {
1416                 tab = t;
1417                 break;
1418             }
1419             n--;
1420         }
1421         if (tab) {
1422             /*
1423              * Found that layer 'n' can do opens - call it
1424              */
1425             if (narg > 1 && !(tab->kind & PERLIO_K_MULTIARG)) {
1426                 Perl_croak(aTHX_ "More than one argument to open(,':%s')",tab->name);
1427             }
1428             PerlIO_debug("openn(%s,'%s','%s',%d,%x,%o,%p,%d,%p)\n",
1429                          tab->name, layers, mode, fd, imode, perm,
1430                          (void*)f, narg, (void*)args);
1431             f = (*tab->Open) (aTHX_ tab, layera, n, mode, fd, imode, perm,
1432                               f, narg, args);
1433             if (f) {
1434                 if (n + 1 < layera->cur) {
1435                     /*
1436                      * More layers above the one that we used to open -
1437                      * apply them now
1438                      */
1439                     if (PerlIO_apply_layera(aTHX_ f, mode, layera, n + 1, layera->cur) != 0) {
1440                         /* If pushing layers fails close the file */
1441                         PerlIO_close(f);
1442                         f = NULL;
1443                     }
1444                 }
1445             }
1446         }
1447         PerlIO_list_free(aTHX_ layera);
1448     }
1449     return f;
1450 }
1451
1452
1453 SSize_t
1454 Perl_PerlIO_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1455 {
1456     if (PerlIOValid(f))
1457         return (*PerlIOBase(f)->tab->Read) (aTHX_ f, vbuf, count);
1458     else {
1459         SETERRNO(EBADF, SS_IVCHAN);
1460         return -1;
1461     }
1462 }
1463
1464 SSize_t
1465 Perl_PerlIO_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1466 {
1467     if (PerlIOValid(f))
1468         return (*PerlIOBase(f)->tab->Unread) (aTHX_ f, vbuf, count);
1469     else {
1470         SETERRNO(EBADF, SS_IVCHAN);
1471         return -1;
1472     }
1473 }
1474
1475 SSize_t
1476 Perl_PerlIO_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1477 {
1478     if (PerlIOValid(f))
1479         return (*PerlIOBase(f)->tab->Write) (aTHX_ f, vbuf, count);
1480     else {
1481         SETERRNO(EBADF, SS_IVCHAN);
1482         return -1;
1483     }
1484 }
1485
1486 int
1487 Perl_PerlIO_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
1488 {
1489     if (PerlIOValid(f))
1490         return (*PerlIOBase(f)->tab->Seek) (aTHX_ f, offset, whence);
1491     else {
1492         SETERRNO(EBADF, SS_IVCHAN);
1493         return -1;
1494     }
1495 }
1496
1497 Off_t
1498 Perl_PerlIO_tell(pTHX_ PerlIO *f)
1499 {
1500     if (PerlIOValid(f))
1501         return (*PerlIOBase(f)->tab->Tell) (aTHX_ f);
1502     else {
1503         SETERRNO(EBADF, SS_IVCHAN);
1504         return -1;
1505     }
1506 }
1507
1508 int
1509 Perl_PerlIO_flush(pTHX_ PerlIO *f)
1510 {
1511     if (f) {
1512         if (*f) {
1513             PerlIO_funcs *tab = PerlIOBase(f)->tab;
1514             if (tab && tab->Flush) {
1515                 return (*tab->Flush) (aTHX_ f);
1516             }
1517             else {
1518                 PerlIO_debug("Cannot flush f=%p :%s\n", (void*)f, tab->name);
1519                 SETERRNO(EBADF, SS_IVCHAN);
1520                 return -1;
1521             }
1522         }
1523         else {
1524             PerlIO_debug("Cannot flush f=%p\n", (void*)f);
1525             SETERRNO(EBADF, SS_IVCHAN);
1526             return -1;
1527         }
1528     }
1529     else {
1530         /*
1531          * Is it good API design to do flush-all on NULL, a potentially
1532          * errorneous input? Maybe some magical value (PerlIO*
1533          * PERLIO_FLUSH_ALL = (PerlIO*)-1;)? Yes, stdio does similar
1534          * things on fflush(NULL), but should we be bound by their design
1535          * decisions? --jhi
1536          */
1537         PerlIO **table = &PL_perlio;
1538         int code = 0;
1539         while ((f = *table)) {
1540             int i;
1541             table = (PerlIO **) (f++);
1542             for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1543                 if (*f && PerlIO_flush(f) != 0)
1544                     code = -1;
1545                 f++;
1546             }
1547         }
1548         return code;
1549     }
1550 }
1551
1552 void
1553 PerlIOBase_flush_linebuf(pTHX)
1554 {
1555     PerlIO **table = &PL_perlio;
1556     PerlIO *f;
1557     while ((f = *table)) {
1558         int i;
1559         table = (PerlIO **) (f++);
1560         for (i = 1; i < PERLIO_TABLE_SIZE; i++) {
1561             if (*f
1562                 && (PerlIOBase(f)->
1563                     flags & (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1564                 == (PERLIO_F_LINEBUF | PERLIO_F_CANWRITE))
1565                 PerlIO_flush(f);
1566             f++;
1567         }
1568     }
1569 }
1570
1571 int
1572 Perl_PerlIO_fill(pTHX_ PerlIO *f)
1573 {
1574     if (PerlIOValid(f))
1575         return (*PerlIOBase(f)->tab->Fill) (aTHX_ f);
1576     else {
1577         SETERRNO(EBADF, SS_IVCHAN);
1578         return -1;
1579     }
1580 }
1581
1582 int
1583 PerlIO_isutf8(PerlIO *f)
1584 {
1585     if (PerlIOValid(f))
1586         return (PerlIOBase(f)->flags & PERLIO_F_UTF8) != 0;
1587     else {
1588         SETERRNO(EBADF, SS_IVCHAN);
1589         return -1;
1590     }
1591 }
1592
1593 int
1594 Perl_PerlIO_eof(pTHX_ PerlIO *f)
1595 {
1596     if (PerlIOValid(f))
1597         return (*PerlIOBase(f)->tab->Eof) (aTHX_ f);
1598     else {
1599         SETERRNO(EBADF, SS_IVCHAN);
1600         return -1;
1601     }
1602 }
1603
1604 int
1605 Perl_PerlIO_error(pTHX_ PerlIO *f)
1606 {
1607     if (PerlIOValid(f))
1608         return (*PerlIOBase(f)->tab->Error) (aTHX_ f);
1609     else {
1610         SETERRNO(EBADF, SS_IVCHAN);
1611         return -1;
1612     }
1613 }
1614
1615 void
1616 Perl_PerlIO_clearerr(pTHX_ PerlIO *f)
1617 {
1618     if (PerlIOValid(f))
1619         (*PerlIOBase(f)->tab->Clearerr) (aTHX_ f);
1620     else
1621         SETERRNO(EBADF, SS_IVCHAN);
1622 }
1623
1624 void
1625 Perl_PerlIO_setlinebuf(pTHX_ PerlIO *f)
1626 {
1627     if (PerlIOValid(f))
1628         (*PerlIOBase(f)->tab->Setlinebuf) (aTHX_ f);
1629     else
1630         SETERRNO(EBADF, SS_IVCHAN);
1631 }
1632
1633 int
1634 PerlIO_has_base(PerlIO *f)
1635 {
1636     if (PerlIOValid(f)) {
1637         return (PerlIOBase(f)->tab->Get_base != NULL);
1638     }
1639     return 0;
1640 }
1641
1642 int
1643 PerlIO_fast_gets(PerlIO *f)
1644 {
1645     if (PerlIOValid(f) && (PerlIOBase(f)->flags & PERLIO_F_FASTGETS)) {
1646         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1647         return (tab->Set_ptrcnt != NULL);
1648     }
1649     return 0;
1650 }
1651
1652 int
1653 PerlIO_has_cntptr(PerlIO *f)
1654 {
1655     if (PerlIOValid(f)) {
1656         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1657         return (tab->Get_ptr != NULL && tab->Get_cnt != NULL);
1658     }
1659     return 0;
1660 }
1661
1662 int
1663 PerlIO_canset_cnt(PerlIO *f)
1664 {
1665     if (PerlIOValid(f)) {
1666         PerlIOl *l = PerlIOBase(f);
1667         return (l->tab->Set_ptrcnt != NULL);
1668     }
1669     return 0;
1670 }
1671
1672 STDCHAR *
1673 Perl_PerlIO_get_base(pTHX_ PerlIO *f)
1674 {
1675     if (PerlIOValid(f))
1676         return (*PerlIOBase(f)->tab->Get_base) (aTHX_ f);
1677     return NULL;
1678 }
1679
1680 int
1681 Perl_PerlIO_get_bufsiz(pTHX_ PerlIO *f)
1682 {
1683     if (PerlIOValid(f))
1684         return (*PerlIOBase(f)->tab->Get_bufsiz) (aTHX_ f);
1685     return 0;
1686 }
1687
1688 STDCHAR *
1689 Perl_PerlIO_get_ptr(pTHX_ PerlIO *f)
1690 {
1691     if (PerlIOValid(f)) {
1692         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1693         if (tab->Get_ptr == NULL)
1694             return NULL;
1695         return (*tab->Get_ptr) (aTHX_ f);
1696     }
1697     return NULL;
1698 }
1699
1700 int
1701 Perl_PerlIO_get_cnt(pTHX_ PerlIO *f)
1702 {
1703     if (PerlIOValid(f)) {
1704         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1705         if (tab->Get_cnt == NULL)
1706            return 0;
1707         return (*tab->Get_cnt) (aTHX_ f);
1708     }
1709     return 0;
1710 }
1711
1712 void
1713 Perl_PerlIO_set_cnt(pTHX_ PerlIO *f, int cnt)
1714 {
1715     if (PerlIOValid(f)) {
1716         (*PerlIOBase(f)->tab->Set_ptrcnt) (aTHX_ f, NULL, cnt);
1717     }
1718 }
1719
1720 void
1721 Perl_PerlIO_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, int cnt)
1722 {
1723     if (PerlIOValid(f)) {
1724         PerlIO_funcs *tab = PerlIOBase(f)->tab;
1725         if (tab->Set_ptrcnt == NULL) {
1726             Perl_croak(aTHX_ "PerlIO buffer snooping abuse");
1727         }
1728         (*PerlIOBase(f)->tab->Set_ptrcnt) (aTHX_ f, ptr, cnt);
1729     }
1730 }
1731
1732
1733 /*--------------------------------------------------------------------------------------*/
1734 /*
1735  * utf8 and raw dummy layers
1736  */
1737
1738 IV
1739 PerlIOUtf8_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1740 {
1741     if (PerlIOValid(f)) {
1742         if (tab->kind & PERLIO_K_UTF8)
1743             PerlIOBase(f)->flags |= PERLIO_F_UTF8;
1744         else
1745             PerlIOBase(f)->flags &= ~PERLIO_F_UTF8;
1746         return 0;
1747     }
1748     return -1;
1749 }
1750
1751 PerlIO_funcs PerlIO_utf8 = {
1752     sizeof(PerlIO_funcs),
1753     "utf8",
1754     0,
1755     PERLIO_K_DUMMY | PERLIO_K_UTF8,
1756     PerlIOUtf8_pushed,
1757     NULL,
1758     NULL,
1759     NULL,
1760     NULL,
1761     NULL,
1762     NULL,
1763     NULL,
1764     NULL,
1765     NULL,
1766     NULL,
1767     NULL,                       /* flush */
1768     NULL,                       /* fill */
1769     NULL,
1770     NULL,
1771     NULL,
1772     NULL,
1773     NULL,                       /* get_base */
1774     NULL,                       /* get_bufsiz */
1775     NULL,                       /* get_ptr */
1776     NULL,                       /* get_cnt */
1777     NULL,                       /* set_ptrcnt */
1778 };
1779
1780 PerlIO_funcs PerlIO_byte = {
1781     sizeof(PerlIO_funcs),
1782     "bytes",
1783     0,
1784     PERLIO_K_DUMMY,
1785     PerlIOUtf8_pushed,
1786     NULL,
1787     NULL,
1788     NULL,
1789     NULL,
1790     NULL,
1791     NULL,
1792     NULL,
1793     NULL,
1794     NULL,
1795     NULL,
1796     NULL,                       /* flush */
1797     NULL,                       /* fill */
1798     NULL,
1799     NULL,
1800     NULL,
1801     NULL,
1802     NULL,                       /* get_base */
1803     NULL,                       /* get_bufsiz */
1804     NULL,                       /* get_ptr */
1805     NULL,                       /* get_cnt */
1806     NULL,                       /* set_ptrcnt */
1807 };
1808
1809 PerlIO *
1810 PerlIORaw_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
1811                IV n, const char *mode, int fd, int imode, int perm,
1812                PerlIO *old, int narg, SV **args)
1813 {
1814     PerlIO_funcs *tab = PerlIO_default_btm();
1815     return (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
1816                          old, narg, args);
1817 }
1818
1819 PerlIO_funcs PerlIO_raw = {
1820     sizeof(PerlIO_funcs),
1821     "raw",
1822     0,
1823     PERLIO_K_DUMMY,
1824     PerlIORaw_pushed,
1825     PerlIOBase_popped,
1826     PerlIORaw_open,
1827     NULL,
1828     NULL,
1829     NULL,
1830     NULL,
1831     NULL,
1832     NULL,
1833     NULL,
1834     NULL,
1835     NULL,                       /* flush */
1836     NULL,                       /* fill */
1837     NULL,
1838     NULL,
1839     NULL,
1840     NULL,
1841     NULL,                       /* get_base */
1842     NULL,                       /* get_bufsiz */
1843     NULL,                       /* get_ptr */
1844     NULL,                       /* get_cnt */
1845     NULL,                       /* set_ptrcnt */
1846 };
1847 /*--------------------------------------------------------------------------------------*/
1848 /*--------------------------------------------------------------------------------------*/
1849 /*
1850  * "Methods" of the "base class"
1851  */
1852
1853 IV
1854 PerlIOBase_fileno(pTHX_ PerlIO *f)
1855 {
1856     return PerlIOValid(f) ? PerlIO_fileno(PerlIONext(f)) : -1;
1857 }
1858
1859 char *
1860 PerlIO_modestr(PerlIO * f, char *buf)
1861 {
1862     char *s = buf;
1863     if (PerlIOValid(f)) {
1864         IV flags = PerlIOBase(f)->flags;
1865         if (flags & PERLIO_F_APPEND) {
1866             *s++ = 'a';
1867             if (flags & PERLIO_F_CANREAD) {
1868                 *s++ = '+';
1869             }
1870         }
1871         else if (flags & PERLIO_F_CANREAD) {
1872             *s++ = 'r';
1873             if (flags & PERLIO_F_CANWRITE)
1874                 *s++ = '+';
1875         }
1876         else if (flags & PERLIO_F_CANWRITE) {
1877             *s++ = 'w';
1878             if (flags & PERLIO_F_CANREAD) {
1879                 *s++ = '+';
1880             }
1881         }
1882 #ifdef PERLIO_USING_CRLF
1883         if (!(flags & PERLIO_F_CRLF))
1884             *s++ = 'b';
1885 #endif
1886     }
1887     *s = '\0';
1888     return buf;
1889 }
1890
1891
1892 IV
1893 PerlIOBase_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
1894 {
1895     PerlIOl *l = PerlIOBase(f);
1896 #if 0
1897     const char *omode = mode;
1898     char temp[8];
1899 #endif
1900     l->flags &= ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE |
1901                   PERLIO_F_TRUNCATE | PERLIO_F_APPEND);
1902     if (tab->Set_ptrcnt != NULL)
1903         l->flags |= PERLIO_F_FASTGETS;
1904     if (mode) {
1905         if (*mode == '#' || *mode == 'I')
1906             mode++;
1907         switch (*mode++) {
1908         case 'r':
1909             l->flags |= PERLIO_F_CANREAD;
1910             break;
1911         case 'a':
1912             l->flags |= PERLIO_F_APPEND | PERLIO_F_CANWRITE;
1913             break;
1914         case 'w':
1915             l->flags |= PERLIO_F_TRUNCATE | PERLIO_F_CANWRITE;
1916             break;
1917         default:
1918             SETERRNO(EINVAL, LIB_INVARG);
1919             return -1;
1920         }
1921         while (*mode) {
1922             switch (*mode++) {
1923             case '+':
1924                 l->flags |= PERLIO_F_CANREAD | PERLIO_F_CANWRITE;
1925                 break;
1926             case 'b':
1927                 l->flags &= ~PERLIO_F_CRLF;
1928                 break;
1929             case 't':
1930                 l->flags |= PERLIO_F_CRLF;
1931                 break;
1932             default:
1933                 SETERRNO(EINVAL, LIB_INVARG);
1934                 return -1;
1935             }
1936         }
1937     }
1938     else {
1939         if (l->next) {
1940             l->flags |= l->next->flags &
1941                 (PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_TRUNCATE |
1942                  PERLIO_F_APPEND);
1943         }
1944     }
1945 #if 0
1946     PerlIO_debug("PerlIOBase_pushed f=%p %s %s fl=%08" UVxf " (%s)\n",
1947                  f, PerlIOBase(f)->tab->name, (omode) ? omode : "(Null)",
1948                  l->flags, PerlIO_modestr(f, temp));
1949 #endif
1950     return 0;
1951 }
1952
1953 IV
1954 PerlIOBase_popped(pTHX_ PerlIO *f)
1955 {
1956     return 0;
1957 }
1958
1959 SSize_t
1960 PerlIOBase_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
1961 {
1962     /*
1963      * Save the position as current head considers it
1964      */
1965     Off_t old = PerlIO_tell(f);
1966     SSize_t done;
1967     PerlIO_push(aTHX_ f, &PerlIO_pending, "r", Nullsv);
1968     PerlIOSelf(f, PerlIOBuf)->posn = old;
1969     done = PerlIOBuf_unread(aTHX_ f, vbuf, count);
1970     return done;
1971 }
1972
1973 SSize_t
1974 PerlIOBase_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
1975 {
1976     STDCHAR *buf = (STDCHAR *) vbuf;
1977     if (f) {
1978         if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD))
1979             return 0;
1980         while (count > 0) {
1981             SSize_t avail = PerlIO_get_cnt(f);
1982             SSize_t take = 0;
1983             if (avail > 0)
1984                 take = ((SSize_t)count < avail) ? count : avail;
1985             if (take > 0) {
1986                 STDCHAR *ptr = PerlIO_get_ptr(f);
1987                 Copy(ptr, buf, take, STDCHAR);
1988                 PerlIO_set_ptrcnt(f, ptr + take, (avail -= take));
1989                 count -= take;
1990                 buf += take;
1991             }
1992             if (count > 0 && avail <= 0) {
1993                 if (PerlIO_fill(f) != 0)
1994                     break;
1995             }
1996         }
1997         return (buf - (STDCHAR *) vbuf);
1998     }
1999     return 0;
2000 }
2001
2002 IV
2003 PerlIOBase_noop_ok(pTHX_ PerlIO *f)
2004 {
2005     return 0;
2006 }
2007
2008 IV
2009 PerlIOBase_noop_fail(pTHX_ PerlIO *f)
2010 {
2011     return -1;
2012 }
2013
2014 IV
2015 PerlIOBase_close(pTHX_ PerlIO *f)
2016 {
2017     IV code = 0;
2018     PerlIO *n = PerlIONext(f);
2019     if (PerlIO_flush(f) != 0)
2020         code = -1;
2021     if (PerlIOValid(n) && (*PerlIOBase(n)->tab->Close)(aTHX_ n) != 0)
2022         code = -1;
2023     PerlIOBase(f)->flags &=
2024         ~(PERLIO_F_CANREAD | PERLIO_F_CANWRITE | PERLIO_F_OPEN);
2025     return code;
2026 }
2027
2028 IV
2029 PerlIOBase_eof(pTHX_ PerlIO *f)
2030 {
2031     if (PerlIOValid(f)) {
2032         return (PerlIOBase(f)->flags & PERLIO_F_EOF) != 0;
2033     }
2034     return 1;
2035 }
2036
2037 IV
2038 PerlIOBase_error(pTHX_ PerlIO *f)
2039 {
2040     if (PerlIOValid(f)) {
2041         return (PerlIOBase(f)->flags & PERLIO_F_ERROR) != 0;
2042     }
2043     return 1;
2044 }
2045
2046 void
2047 PerlIOBase_clearerr(pTHX_ PerlIO *f)
2048 {
2049     if (PerlIOValid(f)) {
2050         PerlIO *n = PerlIONext(f);
2051         PerlIOBase(f)->flags &= ~(PERLIO_F_ERROR | PERLIO_F_EOF);
2052         if (PerlIOValid(n))
2053             PerlIO_clearerr(n);
2054     }
2055 }
2056
2057 void
2058 PerlIOBase_setlinebuf(pTHX_ PerlIO *f)
2059 {
2060     if (PerlIOValid(f)) {
2061         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF;
2062     }
2063 }
2064
2065 SV *
2066 PerlIO_sv_dup(pTHX_ SV *arg, CLONE_PARAMS *param)
2067 {
2068     if (!arg)
2069         return Nullsv;
2070 #ifdef sv_dup
2071     if (param) {
2072         return sv_dup(arg, param);
2073     }
2074     else {
2075         return newSVsv(arg);
2076     }
2077 #else
2078     return newSVsv(arg);
2079 #endif
2080 }
2081
2082 PerlIO *
2083 PerlIOBase_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2084 {
2085     PerlIO *nexto = PerlIONext(o);
2086     if (PerlIOValid(nexto)) {
2087         PerlIO_funcs *tab = PerlIOBase(nexto)->tab;
2088         f = (*tab->Dup)(aTHX_ f, nexto, param, flags);
2089     }
2090     if (f) {
2091         PerlIO_funcs *self = PerlIOBase(o)->tab;
2092         SV *arg = Nullsv;
2093         char buf[8];
2094         PerlIO_debug("PerlIOBase_dup %s f=%p o=%p param=%p\n",
2095                      self->name, (void*)f, (void*)o, (void*)param);
2096         if (self->Getarg) {
2097             arg = (*self->Getarg)(aTHX_ o,param,flags);
2098         }
2099         f = PerlIO_push(aTHX_ f, self, PerlIO_modestr(o,buf), arg);
2100         if (arg) {
2101             SvREFCNT_dec(arg);
2102         }
2103     }
2104     return f;
2105 }
2106
2107 #define PERLIO_MAX_REFCOUNTABLE_FD 2048
2108 #ifdef USE_THREADS
2109 perl_mutex PerlIO_mutex;
2110 #endif
2111 int PerlIO_fd_refcnt[PERLIO_MAX_REFCOUNTABLE_FD];
2112
2113 void
2114 PerlIO_init(pTHX)
2115 {
2116  /* Place holder for stdstreams call ??? */
2117 #ifdef USE_THREADS
2118  MUTEX_INIT(&PerlIO_mutex);
2119 #endif
2120 }
2121
2122 void
2123 PerlIOUnix_refcnt_inc(int fd)
2124 {
2125     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2126 #ifdef USE_THREADS
2127         MUTEX_LOCK(&PerlIO_mutex);
2128 #endif
2129         PerlIO_fd_refcnt[fd]++;
2130         PerlIO_debug("fd %d refcnt=%d\n",fd,PerlIO_fd_refcnt[fd]);
2131 #ifdef USE_THREADS
2132         MUTEX_UNLOCK(&PerlIO_mutex);
2133 #endif
2134     }
2135 }
2136
2137 int
2138 PerlIOUnix_refcnt_dec(int fd)
2139 {
2140     int cnt = 0;
2141     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2142 #ifdef USE_THREADS
2143         MUTEX_LOCK(&PerlIO_mutex);
2144 #endif
2145         cnt = --PerlIO_fd_refcnt[fd];
2146         PerlIO_debug("fd %d refcnt=%d\n",fd,cnt);
2147 #ifdef USE_THREADS
2148         MUTEX_UNLOCK(&PerlIO_mutex);
2149 #endif
2150     }
2151     return cnt;
2152 }
2153
2154 void
2155 PerlIO_cleanup(pTHX)
2156 {
2157     int i;
2158 #ifdef USE_ITHREADS
2159     PerlIO_debug("Cleanup layers for %p\n",aTHX);
2160 #else
2161     PerlIO_debug("Cleanup layers\n");
2162 #endif
2163     /* Raise STDIN..STDERR refcount so we don't close them */
2164     for (i=0; i < 3; i++)
2165         PerlIOUnix_refcnt_inc(i);
2166     PerlIO_cleantable(aTHX_ &PL_perlio);
2167     /* Restore STDIN..STDERR refcount */
2168     for (i=0; i < 3; i++)
2169         PerlIOUnix_refcnt_dec(i);
2170
2171     if (PL_known_layers) {
2172         PerlIO_list_free(aTHX_ PL_known_layers);
2173         PL_known_layers = NULL;
2174     }
2175     if(PL_def_layerlist) {
2176         PerlIO_list_free(aTHX_ PL_def_layerlist);
2177         PL_def_layerlist = NULL;
2178     }
2179 }
2180
2181
2182
2183 /*--------------------------------------------------------------------------------------*/
2184 /*
2185  * Bottom-most level for UNIX-like case
2186  */
2187
2188 typedef struct {
2189     struct _PerlIO base;        /* The generic part */
2190     int fd;                     /* UNIX like file descriptor */
2191     int oflags;                 /* open/fcntl flags */
2192 } PerlIOUnix;
2193
2194 int
2195 PerlIOUnix_oflags(const char *mode)
2196 {
2197     int oflags = -1;
2198     if (*mode == 'I' || *mode == '#')
2199         mode++;
2200     switch (*mode) {
2201     case 'r':
2202         oflags = O_RDONLY;
2203         if (*++mode == '+') {
2204             oflags = O_RDWR;
2205             mode++;
2206         }
2207         break;
2208
2209     case 'w':
2210         oflags = O_CREAT | O_TRUNC;
2211         if (*++mode == '+') {
2212             oflags |= O_RDWR;
2213             mode++;
2214         }
2215         else
2216             oflags |= O_WRONLY;
2217         break;
2218
2219     case 'a':
2220         oflags = O_CREAT | O_APPEND;
2221         if (*++mode == '+') {
2222             oflags |= O_RDWR;
2223             mode++;
2224         }
2225         else
2226             oflags |= O_WRONLY;
2227         break;
2228     }
2229     if (*mode == 'b') {
2230         oflags |= O_BINARY;
2231         oflags &= ~O_TEXT;
2232         mode++;
2233     }
2234     else if (*mode == 't') {
2235         oflags |= O_TEXT;
2236         oflags &= ~O_BINARY;
2237         mode++;
2238     }
2239     /*
2240      * Always open in binary mode
2241      */
2242     oflags |= O_BINARY;
2243     if (*mode || oflags == -1) {
2244         SETERRNO(EINVAL, LIB_INVARG);
2245         oflags = -1;
2246     }
2247     return oflags;
2248 }
2249
2250 IV
2251 PerlIOUnix_fileno(pTHX_ PerlIO *f)
2252 {
2253     return PerlIOSelf(f, PerlIOUnix)->fd;
2254 }
2255
2256 IV
2257 PerlIOUnix_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2258 {
2259     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2260     PerlIOUnix *s = PerlIOSelf(f, PerlIOUnix);
2261     if (*PerlIONext(f)) {
2262         /* We never call down so do any pending stuff now */
2263         PerlIO_flush(PerlIONext(f));
2264         s->fd = PerlIO_fileno(PerlIONext(f));
2265         /*
2266          * XXX could (or should) we retrieve the oflags from the open file
2267          * handle rather than believing the "mode" we are passed in? XXX
2268          * Should the value on NULL mode be 0 or -1?
2269          */
2270         s->oflags = mode ? PerlIOUnix_oflags(mode) : -1;
2271     }
2272     PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2273     return code;
2274 }
2275
2276 PerlIO *
2277 PerlIOUnix_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2278                 IV n, const char *mode, int fd, int imode,
2279                 int perm, PerlIO *f, int narg, SV **args)
2280 {
2281     if (PerlIOValid(f)) {
2282         if (PerlIOBase(f)->flags & PERLIO_F_OPEN)
2283             (*PerlIOBase(f)->tab->Close)(aTHX_ f);
2284     }
2285     if (narg > 0) {
2286         char *path = SvPV_nolen(*args);
2287         if (*mode == '#')
2288             mode++;
2289         else {
2290             imode = PerlIOUnix_oflags(mode);
2291             perm = 0666;
2292         }
2293         if (imode != -1) {
2294             fd = PerlLIO_open3(path, imode, perm);
2295         }
2296     }
2297     if (fd >= 0) {
2298         PerlIOUnix *s;
2299         if (*mode == 'I')
2300             mode++;
2301         if (!f) {
2302             f = PerlIO_allocate(aTHX);
2303         }
2304         if (!PerlIOValid(f)) {
2305             if (!(f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2306                 return NULL;
2307             }
2308         }
2309         s = PerlIOSelf(f, PerlIOUnix);
2310         s->fd = fd;
2311         s->oflags = imode;
2312         PerlIOBase(f)->flags |= PERLIO_F_OPEN;
2313         PerlIOUnix_refcnt_inc(fd);
2314         return f;
2315     }
2316     else {
2317         if (f) {
2318             /*
2319              * FIXME: pop layers ???
2320              */
2321         }
2322         return NULL;
2323     }
2324 }
2325
2326 PerlIO *
2327 PerlIOUnix_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2328 {
2329     PerlIOUnix *os = PerlIOSelf(o, PerlIOUnix);
2330     int fd = os->fd;
2331     if (flags & PERLIO_DUP_FD) {
2332         fd = PerlLIO_dup(fd);
2333     }
2334     if (fd >= 0 && fd < PERLIO_MAX_REFCOUNTABLE_FD) {
2335         f = PerlIOBase_dup(aTHX_ f, o, param, flags);
2336         if (f) {
2337             /* If all went well overwrite fd in dup'ed lay with the dup()'ed fd */
2338             PerlIOUnix *s = PerlIOSelf(f, PerlIOUnix);
2339             s->fd = fd;
2340             PerlIOUnix_refcnt_inc(fd);
2341             return f;
2342         }
2343     }
2344     return NULL;
2345 }
2346
2347
2348 SSize_t
2349 PerlIOUnix_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2350 {
2351     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2352     if (!(PerlIOBase(f)->flags & PERLIO_F_CANREAD) ||
2353          PerlIOBase(f)->flags & (PERLIO_F_EOF|PERLIO_F_ERROR)) {
2354         return 0;
2355     }
2356     while (1) {
2357         SSize_t len = PerlLIO_read(fd, vbuf, count);
2358         if (len >= 0 || errno != EINTR) {
2359             if (len < 0)
2360                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2361             else if (len == 0 && count != 0)
2362                 PerlIOBase(f)->flags |= PERLIO_F_EOF;
2363             return len;
2364         }
2365         PERL_ASYNC_CHECK();
2366     }
2367 }
2368
2369 SSize_t
2370 PerlIOUnix_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2371 {
2372     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2373     while (1) {
2374         SSize_t len = PerlLIO_write(fd, vbuf, count);
2375         if (len >= 0 || errno != EINTR) {
2376             if (len < 0)
2377                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
2378             return len;
2379         }
2380         PERL_ASYNC_CHECK();
2381     }
2382 }
2383
2384 IV
2385 PerlIOUnix_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2386 {
2387     Off_t new =
2388         PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, offset, whence);
2389     PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
2390     return (new == (Off_t) - 1) ? -1 : 0;
2391 }
2392
2393 Off_t
2394 PerlIOUnix_tell(pTHX_ PerlIO *f)
2395 {
2396     return PerlLIO_lseek(PerlIOSelf(f, PerlIOUnix)->fd, 0, SEEK_CUR);
2397 }
2398
2399
2400 IV
2401 PerlIOUnix_close(pTHX_ PerlIO *f)
2402 {
2403     int fd = PerlIOSelf(f, PerlIOUnix)->fd;
2404     int code = 0;
2405     if (PerlIOBase(f)->flags & PERLIO_F_OPEN) {
2406         if (PerlIOUnix_refcnt_dec(fd) > 0) {
2407             PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2408             return 0;
2409         }
2410     }
2411     else {
2412         SETERRNO(EBADF,SS_IVCHAN);
2413         return -1;
2414     }
2415     while (PerlLIO_close(fd) != 0) {
2416         if (errno != EINTR) {
2417             code = -1;
2418             break;
2419         }
2420         PERL_ASYNC_CHECK();
2421     }
2422     if (code == 0) {
2423         PerlIOBase(f)->flags &= ~PERLIO_F_OPEN;
2424     }
2425     return code;
2426 }
2427
2428 PerlIO_funcs PerlIO_unix = {
2429     sizeof(PerlIO_funcs),
2430     "unix",
2431     sizeof(PerlIOUnix),
2432     PERLIO_K_RAW,
2433     PerlIOUnix_pushed,
2434     PerlIOBase_popped,
2435     PerlIOUnix_open,
2436     PerlIOBase_binmode,         /* binmode */
2437     NULL,
2438     PerlIOUnix_fileno,
2439     PerlIOUnix_dup,
2440     PerlIOUnix_read,
2441     PerlIOBase_unread,
2442     PerlIOUnix_write,
2443     PerlIOUnix_seek,
2444     PerlIOUnix_tell,
2445     PerlIOUnix_close,
2446     PerlIOBase_noop_ok,         /* flush */
2447     PerlIOBase_noop_fail,       /* fill */
2448     PerlIOBase_eof,
2449     PerlIOBase_error,
2450     PerlIOBase_clearerr,
2451     PerlIOBase_setlinebuf,
2452     NULL,                       /* get_base */
2453     NULL,                       /* get_bufsiz */
2454     NULL,                       /* get_ptr */
2455     NULL,                       /* get_cnt */
2456     NULL,                       /* set_ptrcnt */
2457 };
2458
2459 /*--------------------------------------------------------------------------------------*/
2460 /*
2461  * stdio as a layer
2462  */
2463
2464 #if defined(VMS) && !defined(STDIO_BUFFER_WRITABLE)
2465 /* perl5.8 - This ensures the last minute VMS ungetc fix is not
2466    broken by the last second glibc 2.3 fix
2467  */
2468 #define STDIO_BUFFER_WRITABLE
2469 #endif
2470
2471
2472 typedef struct {
2473     struct _PerlIO base;
2474     FILE *stdio;                /* The stream */
2475 } PerlIOStdio;
2476
2477 IV
2478 PerlIOStdio_fileno(pTHX_ PerlIO *f)
2479 {
2480     FILE *s;
2481     if (PerlIOValid(f) && (s = PerlIOSelf(f, PerlIOStdio)->stdio)) {
2482         return PerlSIO_fileno(s);
2483     }
2484     errno = EBADF;
2485     return -1;
2486 }
2487
2488 char *
2489 PerlIOStdio_mode(const char *mode, char *tmode)
2490 {
2491     char *ret = tmode;
2492     while (*mode) {
2493         *tmode++ = *mode++;
2494     }
2495 #ifdef PERLIO_USING_CRLF
2496     *tmode++ = 'b';
2497 #endif
2498     *tmode = '\0';
2499     return ret;
2500 }
2501
2502 IV
2503 PerlIOStdio_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
2504 {
2505     PerlIO *n;
2506     if (PerlIOValid(f) && PerlIOValid(n = PerlIONext(f))) {
2507         PerlIO_funcs *toptab = PerlIOBase(n)->tab;
2508         if (toptab == tab) {
2509             /* Top is already stdio - pop self (duplicate) and use original */
2510             PerlIO_pop(aTHX_ f);
2511             return 0;
2512         } else {
2513             int fd = PerlIO_fileno(n);
2514             char tmode[8];
2515             FILE *stdio;
2516             if (fd >= 0 && (stdio  = PerlSIO_fdopen(fd,
2517                             mode = PerlIOStdio_mode(mode, tmode)))) {
2518                 PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2519                 /* We never call down so do any pending stuff now */
2520                 PerlIO_flush(PerlIONext(f));
2521             }
2522             else {
2523                 return -1;
2524             }
2525         }
2526     }
2527     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
2528 }
2529
2530
2531 PerlIO *
2532 PerlIO_importFILE(FILE *stdio, const char *mode)
2533 {
2534     dTHX;
2535     PerlIO *f = NULL;
2536     if (stdio) {
2537         PerlIOStdio *s;
2538         if (!mode || !*mode) {
2539             /* We need to probe to see how we can open the stream
2540                so start with read/write and then try write and read
2541                we dup() so that we can fclose without loosing the fd.
2542
2543                Note that the errno value set by a failing fdopen
2544                varies between stdio implementations.
2545              */
2546             int fd = PerlLIO_dup(fileno(stdio));
2547             FILE *f2 = PerlSIO_fdopen(fd, (mode = "r+"));
2548             if (!f2) {
2549                 f2 = PerlSIO_fdopen(fd, (mode = "w"));
2550             }
2551             if (!f2) {
2552                 f2 = PerlSIO_fdopen(fd, (mode = "r"));
2553             }
2554             if (!f2) {
2555                 /* Don't seem to be able to open */
2556                 PerlLIO_close(fd);
2557                 return f;
2558             }
2559             fclose(f2);
2560         }
2561         if ((f = PerlIO_push(aTHX_(f = PerlIO_allocate(aTHX)), &PerlIO_stdio, mode, Nullsv))) {
2562             s = PerlIOSelf(f, PerlIOStdio);
2563             s->stdio = stdio;
2564         }
2565     }
2566     return f;
2567 }
2568
2569 PerlIO *
2570 PerlIOStdio_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
2571                  IV n, const char *mode, int fd, int imode,
2572                  int perm, PerlIO *f, int narg, SV **args)
2573 {
2574     char tmode[8];
2575     if (PerlIOValid(f)) {
2576         char *path = SvPV_nolen(*args);
2577         PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
2578         FILE *stdio;
2579         PerlIOUnix_refcnt_dec(fileno(s->stdio));
2580         stdio = PerlSIO_freopen(path, (mode = PerlIOStdio_mode(mode, tmode)),
2581                             s->stdio);
2582         if (!s->stdio)
2583             return NULL;
2584         s->stdio = stdio;
2585         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2586         return f;
2587     }
2588     else {
2589         if (narg > 0) {
2590             char *path = SvPV_nolen(*args);
2591             if (*mode == '#') {
2592                 mode++;
2593                 fd = PerlLIO_open3(path, imode, perm);
2594             }
2595             else {
2596                 FILE *stdio = PerlSIO_fopen(path, mode);
2597                 if (stdio) {
2598                     PerlIOStdio *s;
2599                     if (!f) {
2600                         f = PerlIO_allocate(aTHX);
2601                     }
2602                     if ((f = PerlIO_push(aTHX_ f, self,
2603                                     (mode = PerlIOStdio_mode(mode, tmode)),
2604                                     PerlIOArg))) {
2605                         s = PerlIOSelf(f, PerlIOStdio);
2606                         s->stdio = stdio;
2607                         PerlIOUnix_refcnt_inc(fileno(s->stdio));
2608                     }
2609                     return f;
2610                 }
2611                 else {
2612                     return NULL;
2613                 }
2614             }
2615         }
2616         if (fd >= 0) {
2617             FILE *stdio = NULL;
2618             int init = 0;
2619             if (*mode == 'I') {
2620                 init = 1;
2621                 mode++;
2622             }
2623             if (init) {
2624                 switch (fd) {
2625                 case 0:
2626                     stdio = PerlSIO_stdin;
2627                     break;
2628                 case 1:
2629                     stdio = PerlSIO_stdout;
2630                     break;
2631                 case 2:
2632                     stdio = PerlSIO_stderr;
2633                     break;
2634                 }
2635             }
2636             else {
2637                 stdio = PerlSIO_fdopen(fd, mode =
2638                                        PerlIOStdio_mode(mode, tmode));
2639             }
2640             if (stdio) {
2641                 PerlIOStdio *s;
2642                 if (!f) {
2643                     f = PerlIO_allocate(aTHX);
2644                 }
2645                 if ((f = PerlIO_push(aTHX_ f, self, mode, PerlIOArg))) {
2646                     s = PerlIOSelf(f, PerlIOStdio);
2647                     s->stdio = stdio;
2648                     PerlIOUnix_refcnt_inc(fileno(s->stdio));
2649                 }
2650                 return f;
2651             }
2652         }
2653     }
2654     return NULL;
2655 }
2656
2657 PerlIO *
2658 PerlIOStdio_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
2659 {
2660     /* This assumes no layers underneath - which is what
2661        happens, but is not how I remember it. NI-S 2001/10/16
2662      */
2663     if ((f = PerlIOBase_dup(aTHX_ f, o, param, flags))) {
2664         FILE *stdio = PerlIOSelf(o, PerlIOStdio)->stdio;
2665         if (flags & PERLIO_DUP_FD) {
2666             int fd = PerlLIO_dup(fileno(stdio));
2667             if (fd >= 0) {
2668                 char mode[8];
2669                 stdio = PerlSIO_fdopen(fd, PerlIO_modestr(o,mode));
2670             }
2671             else {
2672                 /* FIXME: To avoid messy error recovery if dup fails
2673                    re-use the existing stdio as though flag was not set
2674                  */
2675             }
2676         }
2677         PerlIOSelf(f, PerlIOStdio)->stdio = stdio;
2678         PerlIOUnix_refcnt_inc(fileno(stdio));
2679     }
2680     return f;
2681 }
2682
2683 IV
2684 PerlIOStdio_close(pTHX_ PerlIO *f)
2685 {
2686 #ifdef SOCKS5_VERSION_NAME
2687     int optval;
2688     Sock_size_t optlen = sizeof(int);
2689 #endif
2690     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2691     if (!stdio) {
2692         errno = EBADF;
2693         return -1;
2694     }
2695     if (PerlIOUnix_refcnt_dec(fileno(stdio)) > 0) {
2696         /* Do not close it but do flush any buffers */
2697         return PerlIO_flush(f);
2698     }
2699     return (
2700 #ifdef SOCKS5_VERSION_NAME
2701                (getsockopt
2702                 (PerlIO_fileno(f), SOL_SOCKET, SO_TYPE, (void *) &optval,
2703                  &optlen) <
2704                 0) ? PerlSIO_fclose(stdio) : close(PerlIO_fileno(f))
2705 #else
2706                PerlSIO_fclose(stdio)
2707 #endif
2708         );
2709
2710 }
2711
2712
2713
2714 SSize_t
2715 PerlIOStdio_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
2716 {
2717     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
2718     SSize_t got = 0;
2719     if (count == 1) {
2720         STDCHAR *buf = (STDCHAR *) vbuf;
2721         /*
2722          * Perl is expecting PerlIO_getc() to fill the buffer Linux's
2723          * stdio does not do that for fread()
2724          */
2725         int ch = PerlSIO_fgetc(s);
2726         if (ch != EOF) {
2727             *buf = ch;
2728             got = 1;
2729         }
2730     }
2731     else
2732         got = PerlSIO_fread(vbuf, 1, count, s);
2733     return got;
2734 }
2735
2736 SSize_t
2737 PerlIOStdio_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2738 {
2739     SSize_t unread = 0;
2740     FILE *s = PerlIOSelf(f, PerlIOStdio)->stdio;
2741
2742 #ifdef STDIO_BUFFER_WRITABLE
2743     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
2744         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
2745         STDCHAR *base = PerlIO_get_base(f);
2746         SSize_t cnt   = PerlIO_get_cnt(f);
2747         STDCHAR *ptr  = PerlIO_get_ptr(f);
2748         SSize_t avail = ptr - base;
2749         if (avail > 0) {
2750             if (avail > count) {
2751                 avail = count;
2752             }
2753             ptr -= avail;
2754             Move(buf-avail,ptr,avail,STDCHAR);
2755             count -= avail;
2756             unread += avail;
2757             PerlIO_set_ptrcnt(f,ptr,cnt+avail);
2758             if (PerlSIO_feof(s) && unread >= 0)
2759                 PerlSIO_clearerr(s);
2760         }
2761     }
2762     else
2763 #endif
2764     if (PerlIO_has_cntptr(f)) {
2765         /* We can get pointer to buffer but not its base
2766            Do ungetc() but check chars are ending up in the
2767            buffer
2768          */
2769         STDCHAR *eptr = (STDCHAR*)PerlSIO_get_ptr(s);
2770         STDCHAR *buf = ((STDCHAR *) vbuf) + count;
2771         while (count > 0) {
2772             int ch = *--buf & 0xFF;
2773             if (ungetc(ch,s) != ch) {
2774                 /* ungetc did not work */
2775                 break;
2776             }
2777             if ((STDCHAR*)PerlSIO_get_ptr(s) != --eptr || ((*eptr & 0xFF) != ch)) {
2778                 /* Did not change pointer as expected */
2779                 fgetc(s);  /* get char back again */
2780                 break;
2781             }
2782             /* It worked ! */
2783             count--;
2784             unread++;
2785         }
2786     }
2787
2788     if (count > 0) {
2789         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
2790     }
2791     return unread;
2792 }
2793
2794 SSize_t
2795 PerlIOStdio_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
2796 {
2797     return PerlSIO_fwrite(vbuf, 1, count,
2798                           PerlIOSelf(f, PerlIOStdio)->stdio);
2799 }
2800
2801 IV
2802 PerlIOStdio_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
2803 {
2804     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2805     return PerlSIO_fseek(stdio, offset, whence);
2806 }
2807
2808 Off_t
2809 PerlIOStdio_tell(pTHX_ PerlIO *f)
2810 {
2811     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2812     return PerlSIO_ftell(stdio);
2813 }
2814
2815 IV
2816 PerlIOStdio_flush(pTHX_ PerlIO *f)
2817 {
2818     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2819     if (PerlIOBase(f)->flags & PERLIO_F_CANWRITE) {
2820         return PerlSIO_fflush(stdio);
2821     }
2822     else {
2823 #if 0
2824         /*
2825          * FIXME: This discards ungetc() and pre-read stuff which is not
2826          * right if this is just a "sync" from a layer above Suspect right
2827          * design is to do _this_ but not have layer above flush this
2828          * layer read-to-read
2829          */
2830         /*
2831          * Not writeable - sync by attempting a seek
2832          */
2833         int err = errno;
2834         if (PerlSIO_fseek(stdio, (Off_t) 0, SEEK_CUR) != 0)
2835             errno = err;
2836 #endif
2837     }
2838     return 0;
2839 }
2840
2841 IV
2842 PerlIOStdio_eof(pTHX_ PerlIO *f)
2843 {
2844     return PerlSIO_feof(PerlIOSelf(f, PerlIOStdio)->stdio);
2845 }
2846
2847 IV
2848 PerlIOStdio_error(pTHX_ PerlIO *f)
2849 {
2850     return PerlSIO_ferror(PerlIOSelf(f, PerlIOStdio)->stdio);
2851 }
2852
2853 void
2854 PerlIOStdio_clearerr(pTHX_ PerlIO *f)
2855 {
2856     PerlSIO_clearerr(PerlIOSelf(f, PerlIOStdio)->stdio);
2857 }
2858
2859 void
2860 PerlIOStdio_setlinebuf(pTHX_ PerlIO *f)
2861 {
2862 #ifdef HAS_SETLINEBUF
2863     PerlSIO_setlinebuf(PerlIOSelf(f, PerlIOStdio)->stdio);
2864 #else
2865     PerlSIO_setvbuf(PerlIOSelf(f, PerlIOStdio)->stdio, Nullch, _IOLBF, 0);
2866 #endif
2867 }
2868
2869 #ifdef FILE_base
2870 STDCHAR *
2871 PerlIOStdio_get_base(pTHX_ PerlIO *f)
2872 {
2873     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2874     return (STDCHAR*)PerlSIO_get_base(stdio);
2875 }
2876
2877 Size_t
2878 PerlIOStdio_get_bufsiz(pTHX_ PerlIO *f)
2879 {
2880     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2881     return PerlSIO_get_bufsiz(stdio);
2882 }
2883 #endif
2884
2885 #ifdef USE_STDIO_PTR
2886 STDCHAR *
2887 PerlIOStdio_get_ptr(pTHX_ PerlIO *f)
2888 {
2889     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2890     return (STDCHAR*)PerlSIO_get_ptr(stdio);
2891 }
2892
2893 SSize_t
2894 PerlIOStdio_get_cnt(pTHX_ PerlIO *f)
2895 {
2896     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2897     return PerlSIO_get_cnt(stdio);
2898 }
2899
2900 void
2901 PerlIOStdio_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
2902 {
2903     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2904     if (ptr != NULL) {
2905 #ifdef STDIO_PTR_LVALUE
2906         PerlSIO_set_ptr(stdio, (void*)ptr); /* LHS STDCHAR* cast non-portable */
2907 #ifdef STDIO_PTR_LVAL_SETS_CNT
2908         if (PerlSIO_get_cnt(stdio) != (cnt)) {
2909             assert(PerlSIO_get_cnt(stdio) == (cnt));
2910         }
2911 #endif
2912 #if (!defined(STDIO_PTR_LVAL_NOCHANGE_CNT))
2913         /*
2914          * Setting ptr _does_ change cnt - we are done
2915          */
2916         return;
2917 #endif
2918 #else                           /* STDIO_PTR_LVALUE */
2919         PerlProc_abort();
2920 #endif                          /* STDIO_PTR_LVALUE */
2921     }
2922     /*
2923      * Now (or only) set cnt
2924      */
2925 #ifdef STDIO_CNT_LVALUE
2926     PerlSIO_set_cnt(stdio, cnt);
2927 #else                           /* STDIO_CNT_LVALUE */
2928 #if (defined(STDIO_PTR_LVALUE) && defined(STDIO_PTR_LVAL_SETS_CNT))
2929     PerlSIO_set_ptr(stdio,
2930                     PerlSIO_get_ptr(stdio) + (PerlSIO_get_cnt(stdio) -
2931                                               cnt));
2932 #else                           /* STDIO_PTR_LVAL_SETS_CNT */
2933     PerlProc_abort();
2934 #endif                          /* STDIO_PTR_LVAL_SETS_CNT */
2935 #endif                          /* STDIO_CNT_LVALUE */
2936 }
2937
2938
2939 #endif
2940
2941 IV
2942 PerlIOStdio_fill(pTHX_ PerlIO *f)
2943 {
2944     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
2945     int c;
2946     /*
2947      * fflush()ing read-only streams can cause trouble on some stdio-s
2948      */
2949     if ((PerlIOBase(f)->flags & PERLIO_F_CANWRITE)) {
2950         if (PerlSIO_fflush(stdio) != 0)
2951             return EOF;
2952     }
2953     c = PerlSIO_fgetc(stdio);
2954     if (c == EOF)
2955         return EOF;
2956
2957 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
2958
2959 #ifdef STDIO_BUFFER_WRITABLE
2960     if (PerlIO_fast_gets(f) && PerlIO_has_base(f)) {
2961         /* Fake ungetc() to the real buffer in case system's ungetc
2962            goes elsewhere
2963          */
2964         STDCHAR *base = (STDCHAR*)PerlSIO_get_base(stdio);
2965         SSize_t cnt   = PerlSIO_get_cnt(stdio);
2966         STDCHAR *ptr  = (STDCHAR*)PerlSIO_get_ptr(stdio);
2967         if (ptr == base+1) {
2968             *--ptr = (STDCHAR) c;
2969             PerlIOStdio_set_ptrcnt(aTHX_ f,ptr,cnt+1);
2970             if (PerlSIO_feof(stdio))
2971                 PerlSIO_clearerr(stdio);
2972             return 0;
2973         }
2974     }
2975     else
2976 #endif
2977     if (PerlIO_has_cntptr(f)) {
2978         STDCHAR ch = c;
2979         if (PerlIOStdio_unread(aTHX_ f,&ch,1) == 1) {
2980             return 0;
2981         }
2982     }
2983 #endif
2984
2985 #if defined(VMS)
2986     /* An ungetc()d char is handled separately from the regular
2987      * buffer, so we stuff it in the buffer ourselves.
2988      * Should never get called as should hit code above
2989      */
2990     *(--((*stdio)->_ptr)) = (unsigned char) c;
2991     (*stdio)->_cnt++;
2992 #else
2993     /* If buffer snoop scheme above fails fall back to
2994        using ungetc().
2995      */
2996     if (PerlSIO_ungetc(c, stdio) != c)
2997         return EOF;
2998 #endif
2999     return 0;
3000 }
3001
3002
3003
3004 PerlIO_funcs PerlIO_stdio = {
3005     sizeof(PerlIO_funcs),
3006     "stdio",
3007     sizeof(PerlIOStdio),
3008     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3009     PerlIOStdio_pushed,
3010     PerlIOBase_popped,
3011     PerlIOStdio_open,
3012     PerlIOBase_binmode,         /* binmode */
3013     NULL,
3014     PerlIOStdio_fileno,
3015     PerlIOStdio_dup,
3016     PerlIOStdio_read,
3017     PerlIOStdio_unread,
3018     PerlIOStdio_write,
3019     PerlIOStdio_seek,
3020     PerlIOStdio_tell,
3021     PerlIOStdio_close,
3022     PerlIOStdio_flush,
3023     PerlIOStdio_fill,
3024     PerlIOStdio_eof,
3025     PerlIOStdio_error,
3026     PerlIOStdio_clearerr,
3027     PerlIOStdio_setlinebuf,
3028 #ifdef FILE_base
3029     PerlIOStdio_get_base,
3030     PerlIOStdio_get_bufsiz,
3031 #else
3032     NULL,
3033     NULL,
3034 #endif
3035 #ifdef USE_STDIO_PTR
3036     PerlIOStdio_get_ptr,
3037     PerlIOStdio_get_cnt,
3038 #if (defined(STDIO_PTR_LVALUE) && (defined(STDIO_CNT_LVALUE) || defined(STDIO_PTR_LVAL_SETS_CNT)))
3039     PerlIOStdio_set_ptrcnt
3040 #else                           /* STDIO_PTR_LVALUE */
3041     NULL
3042 #endif                          /* STDIO_PTR_LVALUE */
3043 #else                           /* USE_STDIO_PTR */
3044     NULL,
3045     NULL,
3046     NULL
3047 #endif                          /* USE_STDIO_PTR */
3048 };
3049
3050 /* Note that calls to PerlIO_exportFILE() are reversed using
3051  * PerlIO_releaseFILE(), not importFILE. */
3052 FILE *
3053 PerlIO_exportFILE(PerlIO * f, const char *mode)
3054 {
3055     dTHX;
3056     FILE *stdio = NULL;
3057     if (PerlIOValid(f)) {
3058         char buf[8];
3059         PerlIO_flush(f);
3060         if (!mode || !*mode) {
3061             mode = PerlIO_modestr(f, buf);
3062         }
3063         stdio = PerlSIO_fdopen(PerlIO_fileno(f), mode);
3064         if (stdio) {
3065             PerlIOl *l = *f;
3066             /* De-link any lower layers so new :stdio sticks */
3067             *f = NULL;
3068             if ((f = PerlIO_push(aTHX_ f, &PerlIO_stdio, buf, Nullsv))) {
3069                 PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
3070                 s->stdio = stdio;
3071                 /* Link previous lower layers under new one */
3072                 *PerlIONext(f) = l;
3073             }
3074             else {
3075                 /* restore layers list */
3076                 *f = l;
3077             }
3078         }
3079     }
3080     return stdio;
3081 }
3082
3083
3084 FILE *
3085 PerlIO_findFILE(PerlIO *f)
3086 {
3087     PerlIOl *l = *f;
3088     while (l) {
3089         if (l->tab == &PerlIO_stdio) {
3090             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3091             return s->stdio;
3092         }
3093         l = *PerlIONext(&l);
3094     }
3095     /* Uses fallback "mode" via PerlIO_modestr() in PerlIO_exportFILE */
3096     return PerlIO_exportFILE(f, Nullch);
3097 }
3098
3099 /* Use this to reverse PerlIO_exportFILE calls. */
3100 void
3101 PerlIO_releaseFILE(PerlIO *p, FILE *f)
3102 {
3103     PerlIOl *l;
3104     while ((l = *p)) {
3105         if (l->tab == &PerlIO_stdio) {
3106             PerlIOStdio *s = PerlIOSelf(&l, PerlIOStdio);
3107             if (s->stdio == f) {
3108                 dTHX;
3109                 PerlIO_pop(aTHX_ p);
3110                 return;
3111             }
3112         }
3113         p = PerlIONext(p);
3114     }
3115     return;
3116 }
3117
3118 /*--------------------------------------------------------------------------------------*/
3119 /*
3120  * perlio buffer layer
3121  */
3122
3123 IV
3124 PerlIOBuf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3125 {
3126     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3127     int fd = PerlIO_fileno(f);
3128     if (fd >= 0 && PerlLIO_isatty(fd)) {
3129         PerlIOBase(f)->flags |= PERLIO_F_LINEBUF | PERLIO_F_TTY;
3130     }
3131     if (*PerlIONext(f)) {
3132         Off_t posn = PerlIO_tell(PerlIONext(f));
3133         if (posn != (Off_t) - 1) {
3134             b->posn = posn;
3135         }
3136     }
3137     return PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3138 }
3139
3140 PerlIO *
3141 PerlIOBuf_open(pTHX_ PerlIO_funcs *self, PerlIO_list_t *layers,
3142                IV n, const char *mode, int fd, int imode, int perm,
3143                PerlIO *f, int narg, SV **args)
3144 {
3145     if (PerlIOValid(f)) {
3146         PerlIO *next = PerlIONext(f);
3147         PerlIO_funcs *tab =  PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIOBase(next)->tab);
3148         next = (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3149                           next, narg, args);
3150         if (!next || (*PerlIOBase(f)->tab->Pushed) (aTHX_ f, mode, PerlIOArg, self) != 0) {
3151             return NULL;
3152         }
3153     }
3154     else {
3155         PerlIO_funcs *tab = PerlIO_layer_fetch(aTHX_ layers, n - 1, PerlIO_default_btm());
3156         int init = 0;
3157         if (*mode == 'I') {
3158             init = 1;
3159             /*
3160              * mode++;
3161              */
3162         }
3163         f = (*tab->Open) (aTHX_ tab, layers, n - 1, mode, fd, imode, perm,
3164                           f, narg, args);
3165         if (f) {
3166             if (PerlIO_push(aTHX_ f, self, mode, PerlIOArg) == 0) {
3167                 /*
3168                  * if push fails during open, open fails. close will pop us.
3169                  */
3170                 PerlIO_close (f);
3171                 return NULL;
3172             } else {
3173                 fd = PerlIO_fileno(f);
3174                 if (init && fd == 2) {
3175                     /*
3176                      * Initial stderr is unbuffered
3177                      */
3178                     PerlIOBase(f)->flags |= PERLIO_F_UNBUF;
3179                 }
3180 #ifdef PERLIO_USING_CRLF
3181 #  ifdef PERLIO_IS_BINMODE_FD
3182                 if (PERLIO_IS_BINMODE_FD(fd))
3183                     PerlIO_binmode(f,  '<'/*not used*/, O_BINARY, Nullch);
3184                 else
3185 #  endif
3186                 /*
3187                  * do something about failing setmode()? --jhi
3188                  */
3189                 PerlLIO_setmode(fd, O_BINARY);
3190 #endif
3191             }
3192         }
3193     }
3194     return f;
3195 }
3196
3197 /*
3198  * This "flush" is akin to sfio's sync in that it handles files in either
3199  * read or write state
3200  */
3201 IV
3202 PerlIOBuf_flush(pTHX_ PerlIO *f)
3203 {
3204     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3205     int code = 0;
3206     PerlIO *n = PerlIONext(f);
3207     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF) {
3208         /*
3209          * write() the buffer
3210          */
3211         STDCHAR *buf = b->buf;
3212         STDCHAR *p = buf;
3213         while (p < b->ptr) {
3214             SSize_t count = PerlIO_write(n, p, b->ptr - p);
3215             if (count > 0) {
3216                 p += count;
3217             }
3218             else if (count < 0 || PerlIO_error(n)) {
3219                 PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3220                 code = -1;
3221                 break;
3222             }
3223         }
3224         b->posn += (p - buf);
3225     }
3226     else if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3227         STDCHAR *buf = PerlIO_get_base(f);
3228         /*
3229          * Note position change
3230          */
3231         b->posn += (b->ptr - buf);
3232         if (b->ptr < b->end) {
3233             /* We did not consume all of it - try and seek downstream to
3234                our logical position
3235              */
3236             if (PerlIOValid(n) && PerlIO_seek(n, b->posn, SEEK_SET) == 0) {
3237                 /* Reload n as some layers may pop themselves on seek */
3238                 b->posn = PerlIO_tell(n = PerlIONext(f));
3239             }
3240             else {
3241                 /* Seek failed (e.g. pipe or tty). Do NOT clear buffer or pre-read
3242                    data is lost for good - so return saying "ok" having undone
3243                    the position adjust
3244                  */
3245                 b->posn -= (b->ptr - buf);
3246                 return code;
3247             }
3248         }
3249     }
3250     b->ptr = b->end = b->buf;
3251     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3252     /* We check for Valid because of dubious decision to make PerlIO_flush(NULL) flush all */
3253     if (PerlIOValid(n) && PerlIO_flush(n) != 0)
3254         code = -1;
3255     return code;
3256 }
3257
3258 IV
3259 PerlIOBuf_fill(pTHX_ PerlIO *f)
3260 {
3261     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3262     PerlIO *n = PerlIONext(f);
3263     SSize_t avail;
3264     /*
3265      * Down-stream flush is defined not to loose read data so is harmless.
3266      * we would not normally be fill'ing if there was data left in anycase.
3267      */
3268     if (PerlIO_flush(f) != 0)
3269         return -1;
3270     if (PerlIOBase(f)->flags & PERLIO_F_TTY)
3271         PerlIOBase_flush_linebuf(aTHX);
3272
3273     if (!b->buf)
3274         PerlIO_get_base(f);     /* allocate via vtable */
3275
3276     b->ptr = b->end = b->buf;
3277
3278     if (!PerlIOValid(n)) {
3279         PerlIOBase(f)->flags |= PERLIO_F_EOF;
3280         return -1;
3281     }
3282
3283     if (PerlIO_fast_gets(n)) {
3284         /*
3285          * Layer below is also buffered. We do _NOT_ want to call its
3286          * ->Read() because that will loop till it gets what we asked for
3287          * which may hang on a pipe etc. Instead take anything it has to
3288          * hand, or ask it to fill _once_.
3289          */
3290         avail = PerlIO_get_cnt(n);
3291         if (avail <= 0) {
3292             avail = PerlIO_fill(n);
3293             if (avail == 0)
3294                 avail = PerlIO_get_cnt(n);
3295             else {
3296                 if (!PerlIO_error(n) && PerlIO_eof(n))
3297                     avail = 0;
3298             }
3299         }
3300         if (avail > 0) {
3301             STDCHAR *ptr = PerlIO_get_ptr(n);
3302             SSize_t cnt = avail;
3303             if (avail > (SSize_t)b->bufsiz)
3304                 avail = b->bufsiz;
3305             Copy(ptr, b->buf, avail, STDCHAR);
3306             PerlIO_set_ptrcnt(n, ptr + avail, cnt - avail);
3307         }
3308     }
3309     else {
3310         avail = PerlIO_read(n, b->ptr, b->bufsiz);
3311     }
3312     if (avail <= 0) {
3313         if (avail == 0)
3314             PerlIOBase(f)->flags |= PERLIO_F_EOF;
3315         else
3316             PerlIOBase(f)->flags |= PERLIO_F_ERROR;
3317         return -1;
3318     }
3319     b->end = b->buf + avail;
3320     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3321     return 0;
3322 }
3323
3324 SSize_t
3325 PerlIOBuf_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3326 {
3327     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3328     if (PerlIOValid(f)) {
3329         if (!b->ptr)
3330             PerlIO_get_base(f);
3331         return PerlIOBase_read(aTHX_ f, vbuf, count);
3332     }
3333     return 0;
3334 }
3335
3336 SSize_t
3337 PerlIOBuf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3338 {
3339     const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3340     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3341     SSize_t unread = 0;
3342     SSize_t avail;
3343     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3344         PerlIO_flush(f);
3345     if (!b->buf)
3346         PerlIO_get_base(f);
3347     if (b->buf) {
3348         if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3349             /*
3350              * Buffer is already a read buffer, we can overwrite any chars
3351              * which have been read back to buffer start
3352              */
3353             avail = (b->ptr - b->buf);
3354         }
3355         else {
3356             /*
3357              * Buffer is idle, set it up so whole buffer is available for
3358              * unread
3359              */
3360             avail = b->bufsiz;
3361             b->end = b->buf + avail;
3362             b->ptr = b->end;
3363             PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3364             /*
3365              * Buffer extends _back_ from where we are now
3366              */
3367             b->posn -= b->bufsiz;
3368         }
3369         if (avail > (SSize_t) count) {
3370             /*
3371              * If we have space for more than count, just move count
3372              */
3373             avail = count;
3374         }
3375         if (avail > 0) {
3376             b->ptr -= avail;
3377             buf -= avail;
3378             /*
3379              * In simple stdio-like ungetc() case chars will be already
3380              * there
3381              */
3382             if (buf != b->ptr) {
3383                 Copy(buf, b->ptr, avail, STDCHAR);
3384             }
3385             count -= avail;
3386             unread += avail;
3387             PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3388         }
3389     }
3390     if (count > 0) {
3391         unread += PerlIOBase_unread(aTHX_ f, vbuf, count);
3392     }
3393     return unread;
3394 }
3395
3396 SSize_t
3397 PerlIOBuf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3398 {
3399     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3400     const STDCHAR *buf = (const STDCHAR *) vbuf;
3401     Size_t written = 0;
3402     if (!b->buf)
3403         PerlIO_get_base(f);
3404     if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
3405         return 0;
3406     while (count > 0) {
3407         SSize_t avail = b->bufsiz - (b->ptr - b->buf);
3408         if ((SSize_t) count < avail)
3409             avail = count;
3410         PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
3411         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
3412             while (avail > 0) {
3413                 int ch = *buf++;
3414                 *(b->ptr)++ = ch;
3415                 count--;
3416                 avail--;
3417                 written++;
3418                 if (ch == '\n') {
3419                     PerlIO_flush(f);
3420                     break;
3421                 }
3422             }
3423         }
3424         else {
3425             if (avail) {
3426                 Copy(buf, b->ptr, avail, STDCHAR);
3427                 count -= avail;
3428                 buf += avail;
3429                 written += avail;
3430                 b->ptr += avail;
3431             }
3432         }
3433         if (b->ptr >= (b->buf + b->bufsiz))
3434             PerlIO_flush(f);
3435     }
3436     if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
3437         PerlIO_flush(f);
3438     return written;
3439 }
3440
3441 IV
3442 PerlIOBuf_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3443 {
3444     IV code;
3445     if ((code = PerlIO_flush(f)) == 0) {
3446         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3447         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
3448         code = PerlIO_seek(PerlIONext(f), offset, whence);
3449         if (code == 0) {
3450             b->posn = PerlIO_tell(PerlIONext(f));
3451         }
3452     }
3453     return code;
3454 }
3455
3456 Off_t
3457 PerlIOBuf_tell(pTHX_ PerlIO *f)
3458 {
3459     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3460     /*
3461      * b->posn is file position where b->buf was read, or will be written
3462      */
3463     Off_t posn = b->posn;
3464     if (b->buf) {
3465         /*
3466          * If buffer is valid adjust position by amount in buffer
3467          */
3468         posn += (b->ptr - b->buf);
3469     }
3470     return posn;
3471 }
3472
3473 IV
3474 PerlIOBuf_popped(pTHX_ PerlIO *f)
3475 {
3476     IV code = PerlIOBase_popped(aTHX_ f);
3477     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3478     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3479         Safefree(b->buf);
3480     }
3481     b->buf = NULL;
3482     b->ptr = b->end = b->buf;
3483     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3484     return code;
3485 }
3486
3487 IV
3488 PerlIOBuf_close(pTHX_ PerlIO *f)
3489 {
3490     IV code = PerlIOBase_close(aTHX_ f);
3491     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3492     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3493         Safefree(b->buf);
3494     }
3495     b->buf = NULL;
3496     b->ptr = b->end = b->buf;
3497     PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
3498     return code;
3499 }
3500
3501 STDCHAR *
3502 PerlIOBuf_get_ptr(pTHX_ PerlIO *f)
3503 {
3504     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3505     if (!b->buf)
3506         PerlIO_get_base(f);
3507     return b->ptr;
3508 }
3509
3510 SSize_t
3511 PerlIOBuf_get_cnt(pTHX_ PerlIO *f)
3512 {
3513     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3514     if (!b->buf)
3515         PerlIO_get_base(f);
3516     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF)
3517         return (b->end - b->ptr);
3518     return 0;
3519 }
3520
3521 STDCHAR *
3522 PerlIOBuf_get_base(pTHX_ PerlIO *f)
3523 {
3524     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3525     if (!b->buf) {
3526         if (!b->bufsiz)
3527             b->bufsiz = 4096;
3528         b->buf =
3529         Newz('B',b->buf,b->bufsiz, STDCHAR);
3530         if (!b->buf) {
3531             b->buf = (STDCHAR *) & b->oneword;
3532             b->bufsiz = sizeof(b->oneword);
3533         }
3534         b->ptr = b->buf;
3535         b->end = b->ptr;
3536     }
3537     return b->buf;
3538 }
3539
3540 Size_t
3541 PerlIOBuf_bufsiz(pTHX_ PerlIO *f)
3542 {
3543     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3544     if (!b->buf)
3545         PerlIO_get_base(f);
3546     return (b->end - b->buf);
3547 }
3548
3549 void
3550 PerlIOBuf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3551 {
3552     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3553     if (!b->buf)
3554         PerlIO_get_base(f);
3555     b->ptr = ptr;
3556     if (PerlIO_get_cnt(f) != cnt || b->ptr < b->buf) {
3557         assert(PerlIO_get_cnt(f) == cnt);
3558         assert(b->ptr >= b->buf);
3559     }
3560     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3561 }
3562
3563 PerlIO *
3564 PerlIOBuf_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
3565 {
3566  return PerlIOBase_dup(aTHX_ f, o, param, flags);
3567 }
3568
3569
3570
3571 PerlIO_funcs PerlIO_perlio = {
3572     sizeof(PerlIO_funcs),
3573     "perlio",
3574     sizeof(PerlIOBuf),
3575     PERLIO_K_BUFFERED|PERLIO_K_RAW,
3576     PerlIOBuf_pushed,
3577     PerlIOBuf_popped,
3578     PerlIOBuf_open,
3579     PerlIOBase_binmode,         /* binmode */
3580     NULL,
3581     PerlIOBase_fileno,
3582     PerlIOBuf_dup,
3583     PerlIOBuf_read,
3584     PerlIOBuf_unread,
3585     PerlIOBuf_write,
3586     PerlIOBuf_seek,
3587     PerlIOBuf_tell,
3588     PerlIOBuf_close,
3589     PerlIOBuf_flush,
3590     PerlIOBuf_fill,
3591     PerlIOBase_eof,
3592     PerlIOBase_error,
3593     PerlIOBase_clearerr,
3594     PerlIOBase_setlinebuf,
3595     PerlIOBuf_get_base,
3596     PerlIOBuf_bufsiz,
3597     PerlIOBuf_get_ptr,
3598     PerlIOBuf_get_cnt,
3599     PerlIOBuf_set_ptrcnt,
3600 };
3601
3602 /*--------------------------------------------------------------------------------------*/
3603 /*
3604  * Temp layer to hold unread chars when cannot do it any other way
3605  */
3606
3607 IV
3608 PerlIOPending_fill(pTHX_ PerlIO *f)
3609 {
3610     /*
3611      * Should never happen
3612      */
3613     PerlIO_flush(f);
3614     return 0;
3615 }
3616
3617 IV
3618 PerlIOPending_close(pTHX_ PerlIO *f)
3619 {
3620     /*
3621      * A tad tricky - flush pops us, then we close new top
3622      */
3623     PerlIO_flush(f);
3624     return PerlIO_close(f);
3625 }
3626
3627 IV
3628 PerlIOPending_seek(pTHX_ PerlIO *f, Off_t offset, int whence)
3629 {
3630     /*
3631      * A tad tricky - flush pops us, then we seek new top
3632      */
3633     PerlIO_flush(f);
3634     return PerlIO_seek(f, offset, whence);
3635 }
3636
3637
3638 IV
3639 PerlIOPending_flush(pTHX_ PerlIO *f)
3640 {
3641     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3642     if (b->buf && b->buf != (STDCHAR *) & b->oneword) {
3643         Safefree(b->buf);
3644         b->buf = NULL;
3645     }
3646     PerlIO_pop(aTHX_ f);
3647     return 0;
3648 }
3649
3650 void
3651 PerlIOPending_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3652 {
3653     if (cnt <= 0) {
3654         PerlIO_flush(f);
3655     }
3656     else {
3657         PerlIOBuf_set_ptrcnt(aTHX_ f, ptr, cnt);
3658     }
3659 }
3660
3661 IV
3662 PerlIOPending_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3663 {
3664     IV code = PerlIOBase_pushed(aTHX_ f, mode, arg, tab);
3665     PerlIOl *l = PerlIOBase(f);
3666     /*
3667      * Our PerlIO_fast_gets must match what we are pushed on, or sv_gets()
3668      * etc. get muddled when it changes mid-string when we auto-pop.
3669      */
3670     l->flags = (l->flags & ~(PERLIO_F_FASTGETS | PERLIO_F_UTF8)) |
3671         (PerlIOBase(PerlIONext(f))->
3672          flags & (PERLIO_F_FASTGETS | PERLIO_F_UTF8));
3673     return code;
3674 }
3675
3676 SSize_t
3677 PerlIOPending_read(pTHX_ PerlIO *f, void *vbuf, Size_t count)
3678 {
3679     SSize_t avail = PerlIO_get_cnt(f);
3680     SSize_t got = 0;
3681     if ((SSize_t)count < avail)
3682         avail = count;
3683     if (avail > 0)
3684         got = PerlIOBuf_read(aTHX_ f, vbuf, avail);
3685     if (got >= 0 && got < (SSize_t)count) {
3686         SSize_t more =
3687             PerlIO_read(f, ((STDCHAR *) vbuf) + got, count - got);
3688         if (more >= 0 || got == 0)
3689             got += more;
3690     }
3691     return got;
3692 }
3693
3694 PerlIO_funcs PerlIO_pending = {
3695     sizeof(PerlIO_funcs),
3696     "pending",
3697     sizeof(PerlIOBuf),
3698     PERLIO_K_BUFFERED|PERLIO_K_RAW,  /* not sure about RAW here */
3699     PerlIOPending_pushed,
3700     PerlIOBuf_popped,
3701     NULL,
3702     PerlIOBase_binmode,         /* binmode */
3703     NULL,
3704     PerlIOBase_fileno,
3705     PerlIOBuf_dup,
3706     PerlIOPending_read,
3707     PerlIOBuf_unread,
3708     PerlIOBuf_write,
3709     PerlIOPending_seek,
3710     PerlIOBuf_tell,
3711     PerlIOPending_close,
3712     PerlIOPending_flush,
3713     PerlIOPending_fill,
3714     PerlIOBase_eof,
3715     PerlIOBase_error,
3716     PerlIOBase_clearerr,
3717     PerlIOBase_setlinebuf,
3718     PerlIOBuf_get_base,
3719     PerlIOBuf_bufsiz,
3720     PerlIOBuf_get_ptr,
3721     PerlIOBuf_get_cnt,
3722     PerlIOPending_set_ptrcnt,
3723 };
3724
3725
3726
3727 /*--------------------------------------------------------------------------------------*/
3728 /*
3729  * crlf - translation On read translate CR,LF to "\n" we do this by
3730  * overriding ptr/cnt entries to hand back a line at a time and keeping a
3731  * record of which nl we "lied" about. On write translate "\n" to CR,LF
3732  */
3733
3734 typedef struct {
3735     PerlIOBuf base;             /* PerlIOBuf stuff */
3736     STDCHAR *nl;                /* Position of crlf we "lied" about in the
3737                                  * buffer */
3738 } PerlIOCrlf;
3739
3740 IV
3741 PerlIOCrlf_pushed(pTHX_ PerlIO *f, const char *mode, SV *arg, PerlIO_funcs *tab)
3742 {
3743     IV code;
3744     PerlIOBase(f)->flags |= PERLIO_F_CRLF;
3745     code = PerlIOBuf_pushed(aTHX_ f, mode, arg, tab);
3746 #if 0
3747     PerlIO_debug("PerlIOCrlf_pushed f=%p %s %s fl=%08" UVxf "\n",
3748                  f, PerlIOBase(f)->tab->name, (mode) ? mode : "(Null)",
3749                  PerlIOBase(f)->flags);
3750 #endif
3751     return code;
3752 }
3753
3754
3755 SSize_t
3756 PerlIOCrlf_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3757 {
3758     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3759     if (c->nl) {
3760         *(c->nl) = 0xd;
3761         c->nl = NULL;
3762     }
3763     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
3764         return PerlIOBuf_unread(aTHX_ f, vbuf, count);
3765     else {
3766         const STDCHAR *buf = (const STDCHAR *) vbuf + count;
3767         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3768         SSize_t unread = 0;
3769         if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
3770             PerlIO_flush(f);
3771         if (!b->buf)
3772             PerlIO_get_base(f);
3773         if (b->buf) {
3774             if (!(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
3775                 b->end = b->ptr = b->buf + b->bufsiz;
3776                 PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3777                 b->posn -= b->bufsiz;
3778             }
3779             while (count > 0 && b->ptr > b->buf) {
3780                 int ch = *--buf;
3781                 if (ch == '\n') {
3782                     if (b->ptr - 2 >= b->buf) {
3783                         *--(b->ptr) = 0xa;
3784                         *--(b->ptr) = 0xd;
3785                         unread++;
3786                         count--;
3787                     }
3788                     else {
3789                         buf++;
3790                         break;
3791                     }
3792                 }
3793                 else {
3794                     *--(b->ptr) = ch;
3795                     unread++;
3796                     count--;
3797                 }
3798             }
3799         }
3800         return unread;
3801     }
3802 }
3803
3804 SSize_t
3805 PerlIOCrlf_get_cnt(pTHX_ PerlIO *f)
3806 {
3807     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3808     if (!b->buf)
3809         PerlIO_get_base(f);
3810     if (PerlIOBase(f)->flags & PERLIO_F_RDBUF) {
3811         PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3812         if ((PerlIOBase(f)->flags & PERLIO_F_CRLF) && (!c->nl || *c->nl == 0xd)) {
3813             STDCHAR *nl = (c->nl) ? c->nl : b->ptr;
3814           scan:
3815             while (nl < b->end && *nl != 0xd)
3816                 nl++;
3817             if (nl < b->end && *nl == 0xd) {
3818               test:
3819                 if (nl + 1 < b->end) {
3820                     if (nl[1] == 0xa) {
3821                         *nl = '\n';
3822                         c->nl = nl;
3823                     }
3824                     else {
3825                         /*
3826                          * Not CR,LF but just CR
3827                          */
3828                         nl++;
3829                         goto scan;
3830                     }
3831                 }
3832                 else {
3833                     /*
3834                      * Blast - found CR as last char in buffer
3835                      */
3836
3837                     if (b->ptr < nl) {
3838                         /*
3839                          * They may not care, defer work as long as
3840                          * possible
3841                          */
3842                         c->nl = nl;
3843                         return (nl - b->ptr);
3844                     }
3845                     else {
3846                         int code;
3847                         b->ptr++;       /* say we have read it as far as
3848                                          * flush() is concerned */
3849                         b->buf++;       /* Leave space in front of buffer */
3850                         /* Note as we have moved buf up flush's
3851                            posn += ptr-buf
3852                            will naturally make posn point at CR
3853                          */
3854                         b->bufsiz--;    /* Buffer is thus smaller */
3855                         code = PerlIO_fill(f);  /* Fetch some more */
3856                         b->bufsiz++;    /* Restore size for next time */
3857                         b->buf--;       /* Point at space */
3858                         b->ptr = nl = b->buf;   /* Which is what we hand
3859                                                  * off */
3860                         *nl = 0xd;      /* Fill in the CR */
3861                         if (code == 0)
3862                             goto test;  /* fill() call worked */
3863                         /*
3864                          * CR at EOF - just fall through
3865                          */
3866                         /* Should we clear EOF though ??? */
3867                     }
3868                 }
3869             }
3870         }
3871         return (((c->nl) ? (c->nl + 1) : b->end) - b->ptr);
3872     }
3873     return 0;
3874 }
3875
3876 void
3877 PerlIOCrlf_set_ptrcnt(pTHX_ PerlIO *f, STDCHAR * ptr, SSize_t cnt)
3878 {
3879     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3880     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3881     if (!b->buf)
3882         PerlIO_get_base(f);
3883     if (!ptr) {
3884         if (c->nl) {
3885             ptr = c->nl + 1;
3886             if (ptr == b->end && *c->nl == 0xd) {
3887                 /* Defered CR at end of buffer case - we lied about count */
3888                 ptr--;
3889             }
3890         }
3891         else {
3892             ptr = b->end;
3893         }
3894         ptr -= cnt;
3895     }
3896     else {
3897 #if 0
3898         /*
3899          * Test code - delete when it works ...
3900          */
3901         IV flags = PerlIOBase(f)->flags;
3902         STDCHAR *chk = (c->nl) ? (c->nl+1) : b->end;
3903         if (ptr+cnt == c->nl && c->nl+1 == b->end && *c->nl == 0xd) {
3904           /* Defered CR at end of buffer case - we lied about count */
3905           chk--;
3906         }
3907         chk -= cnt;
3908
3909         if (ptr != chk ) {
3910             Perl_croak(aTHX_ "ptr wrong %p != %p fl=%08" UVxf
3911                        " nl=%p e=%p for %d", ptr, chk, flags, c->nl,
3912                        b->end, cnt);
3913         }
3914 #endif
3915     }
3916     if (c->nl) {
3917         if (ptr > c->nl) {
3918             /*
3919              * They have taken what we lied about
3920              */
3921             *(c->nl) = 0xd;
3922             c->nl = NULL;
3923             ptr++;
3924         }
3925     }
3926     b->ptr = ptr;
3927     PerlIOBase(f)->flags |= PERLIO_F_RDBUF;
3928 }
3929
3930 SSize_t
3931 PerlIOCrlf_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
3932 {
3933     if (!(PerlIOBase(f)->flags & PERLIO_F_CRLF))
3934         return PerlIOBuf_write(aTHX_ f, vbuf, count);
3935     else {
3936         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
3937         const STDCHAR *buf = (const STDCHAR *) vbuf;
3938         const STDCHAR *ebuf = buf + count;
3939         if (!b->buf)
3940             PerlIO_get_base(f);
3941         if (!(PerlIOBase(f)->flags & PERLIO_F_CANWRITE))
3942             return 0;
3943         while (buf < ebuf) {
3944             STDCHAR *eptr = b->buf + b->bufsiz;
3945             PerlIOBase(f)->flags |= PERLIO_F_WRBUF;
3946             while (buf < ebuf && b->ptr < eptr) {
3947                 if (*buf == '\n') {
3948                     if ((b->ptr + 2) > eptr) {
3949                         /*
3950                          * Not room for both
3951                          */
3952                         PerlIO_flush(f);
3953                         break;
3954                     }
3955                     else {
3956                         *(b->ptr)++ = 0xd;      /* CR */
3957                         *(b->ptr)++ = 0xa;      /* LF */
3958                         buf++;
3959                         if (PerlIOBase(f)->flags & PERLIO_F_LINEBUF) {
3960                             PerlIO_flush(f);
3961                             break;
3962                         }
3963                     }
3964                 }
3965                 else {
3966                     int ch = *buf++;
3967                     *(b->ptr)++ = ch;
3968                 }
3969                 if (b->ptr >= eptr) {
3970                     PerlIO_flush(f);
3971                     break;
3972                 }
3973             }
3974         }
3975         if (PerlIOBase(f)->flags & PERLIO_F_UNBUF)
3976             PerlIO_flush(f);
3977         return (buf - (STDCHAR *) vbuf);
3978     }
3979 }
3980
3981 IV
3982 PerlIOCrlf_flush(pTHX_ PerlIO *f)
3983 {
3984     PerlIOCrlf *c = PerlIOSelf(f, PerlIOCrlf);
3985     if (c->nl) {
3986         *(c->nl) = 0xd;
3987         c->nl = NULL;
3988     }
3989     return PerlIOBuf_flush(aTHX_ f);
3990 }
3991
3992 IV
3993 PerlIOCrlf_binmode(pTHX_ PerlIO *f)
3994 {
3995     if ((PerlIOBase(f)->flags & PERLIO_F_CRLF)) {
3996         /* In text mode - flush any pending stuff and flip it */
3997         PerlIOBase(f)->flags &= ~PERLIO_F_CRLF;
3998 #ifndef PERLIO_USING_CRLF
3999         /* CRLF is unusual case - if this is just the :crlf layer pop it */
4000         if (PerlIOBase(f)->tab == &PerlIO_crlf) {
4001                 PerlIO_pop(aTHX_ f);
4002         }
4003 #endif
4004     }
4005     return 0;
4006 }
4007
4008 PerlIO_funcs PerlIO_crlf = {
4009     sizeof(PerlIO_funcs),
4010     "crlf",
4011     sizeof(PerlIOCrlf),
4012     PERLIO_K_BUFFERED | PERLIO_K_CANCRLF | PERLIO_K_RAW,
4013     PerlIOCrlf_pushed,
4014     PerlIOBuf_popped,         /* popped */
4015     PerlIOBuf_open,
4016     PerlIOCrlf_binmode,       /* binmode */
4017     NULL,
4018     PerlIOBase_fileno,
4019     PerlIOBuf_dup,
4020     PerlIOBuf_read,             /* generic read works with ptr/cnt lies
4021                                  * ... */
4022     PerlIOCrlf_unread,          /* Put CR,LF in buffer for each '\n' */
4023     PerlIOCrlf_write,           /* Put CR,LF in buffer for each '\n' */
4024     PerlIOBuf_seek,
4025     PerlIOBuf_tell,
4026     PerlIOBuf_close,
4027     PerlIOCrlf_flush,
4028     PerlIOBuf_fill,
4029     PerlIOBase_eof,
4030     PerlIOBase_error,
4031     PerlIOBase_clearerr,
4032     PerlIOBase_setlinebuf,
4033     PerlIOBuf_get_base,
4034     PerlIOBuf_bufsiz,
4035     PerlIOBuf_get_ptr,
4036     PerlIOCrlf_get_cnt,
4037     PerlIOCrlf_set_ptrcnt,
4038 };
4039
4040 #ifdef HAS_MMAP
4041 /*--------------------------------------------------------------------------------------*/
4042 /*
4043  * mmap as "buffer" layer
4044  */
4045
4046 typedef struct {
4047     PerlIOBuf base;             /* PerlIOBuf stuff */
4048     Mmap_t mptr;                /* Mapped address */
4049     Size_t len;                 /* mapped length */
4050     STDCHAR *bbuf;              /* malloced buffer if map fails */
4051 } PerlIOMmap;
4052
4053 static size_t page_size = 0;
4054
4055 IV
4056 PerlIOMmap_map(pTHX_ PerlIO *f)
4057 {
4058     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4059     IV flags = PerlIOBase(f)->flags;
4060     IV code = 0;
4061     if (m->len)
4062         abort();
4063     if (flags & PERLIO_F_CANREAD) {
4064         PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4065         int fd = PerlIO_fileno(f);
4066         Stat_t st;
4067         code = Fstat(fd, &st);
4068         if (code == 0 && S_ISREG(st.st_mode)) {
4069             SSize_t len = st.st_size - b->posn;
4070             if (len > 0) {
4071                 Off_t posn;
4072                 if (!page_size) {
4073 #if defined(HAS_SYSCONF) && (defined(_SC_PAGESIZE) || defined(_SC_PAGE_SIZE))
4074                     {
4075                         SETERRNO(0, SS_NORMAL);
4076 #   ifdef _SC_PAGESIZE
4077                         page_size = sysconf(_SC_PAGESIZE);
4078 #   else
4079                         page_size = sysconf(_SC_PAGE_SIZE);
4080 #   endif
4081                         if ((long) page_size < 0) {
4082                             if (errno) {
4083                                 SV *error = ERRSV;
4084                                 char *msg;
4085                                 STRLEN n_a;
4086                                 (void) SvUPGRADE(error, SVt_PV);
4087                                 msg = SvPVx(error, n_a);
4088                                 Perl_croak(aTHX_ "panic: sysconf: %s",
4089                                            msg);
4090                             }
4091                             else
4092                                 Perl_croak(aTHX_
4093                                            "panic: sysconf: pagesize unknown");
4094                         }
4095                     }
4096 #else
4097 #   ifdef HAS_GETPAGESIZE
4098                     page_size = getpagesize();
4099 #   else
4100 #       if defined(I_SYS_PARAM) && defined(PAGESIZE)
4101                     page_size = PAGESIZE;       /* compiletime, bad */
4102 #       endif
4103 #   endif
4104 #endif
4105                     if ((IV) page_size <= 0)
4106                         Perl_croak(aTHX_ "panic: bad pagesize %" IVdf,
4107                                    (IV) page_size);
4108                 }
4109                 if (b->posn < 0) {
4110                     /*
4111                      * This is a hack - should never happen - open should
4112                      * have set it !
4113                      */
4114                     b->posn = PerlIO_tell(PerlIONext(f));
4115                 }
4116                 posn = (b->posn / page_size) * page_size;
4117                 len = st.st_size - posn;
4118                 m->mptr = mmap(NULL, len, PROT_READ, MAP_SHARED, fd, posn);
4119                 if (m->mptr && m->mptr != (Mmap_t) - 1) {
4120 #if 0 && defined(HAS_MADVISE) && defined(MADV_SEQUENTIAL)
4121                     madvise(m->mptr, len, MADV_SEQUENTIAL);
4122 #endif
4123 #if 0 && defined(HAS_MADVISE) && defined(MADV_WILLNEED)
4124                     madvise(m->mptr, len, MADV_WILLNEED);
4125 #endif
4126                     PerlIOBase(f)->flags =
4127                         (flags & ~PERLIO_F_EOF) | PERLIO_F_RDBUF;
4128                     b->end = ((STDCHAR *) m->mptr) + len;
4129                     b->buf = ((STDCHAR *) m->mptr) + (b->posn - posn);
4130                     b->ptr = b->buf;
4131                     m->len = len;
4132                 }
4133                 else {
4134                     b->buf = NULL;
4135                 }
4136             }
4137             else {
4138                 PerlIOBase(f)->flags =
4139                     flags | PERLIO_F_EOF | PERLIO_F_RDBUF;
4140                 b->buf = NULL;
4141                 b->ptr = b->end = b->ptr;
4142                 code = -1;
4143             }
4144         }
4145     }
4146     return code;
4147 }
4148
4149 IV
4150 PerlIOMmap_unmap(pTHX_ PerlIO *f)
4151 {
4152     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4153     PerlIOBuf *b = &m->base;
4154     IV code = 0;
4155     if (m->len) {
4156         if (b->buf) {
4157             code = munmap(m->mptr, m->len);
4158             b->buf = NULL;
4159             m->len = 0;
4160             m->mptr = NULL;
4161             if (PerlIO_seek(PerlIONext(f), b->posn, SEEK_SET) != 0)
4162                 code = -1;
4163         }
4164         b->ptr = b->end = b->buf;
4165         PerlIOBase(f)->flags &= ~(PERLIO_F_RDBUF | PERLIO_F_WRBUF);
4166     }
4167     return code;
4168 }
4169
4170 STDCHAR *
4171 PerlIOMmap_get_base(pTHX_ PerlIO *f)
4172 {
4173     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4174     PerlIOBuf *b = &m->base;
4175     if (b->buf && (PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4176         /*
4177          * Already have a readbuffer in progress
4178          */
4179         return b->buf;
4180     }
4181     if (b->buf) {
4182         /*
4183          * We have a write buffer or flushed PerlIOBuf read buffer
4184          */
4185         m->bbuf = b->buf;       /* save it in case we need it again */
4186         b->buf = NULL;          /* Clear to trigger below */
4187     }
4188     if (!b->buf) {
4189         PerlIOMmap_map(aTHX_ f);        /* Try and map it */
4190         if (!b->buf) {
4191             /*
4192              * Map did not work - recover PerlIOBuf buffer if we have one
4193              */
4194             b->buf = m->bbuf;
4195         }
4196     }
4197     b->ptr = b->end = b->buf;
4198     if (b->buf)
4199         return b->buf;
4200     return PerlIOBuf_get_base(aTHX_ f);
4201 }
4202
4203 SSize_t
4204 PerlIOMmap_unread(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4205 {
4206     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4207     PerlIOBuf *b = &m->base;
4208     if (PerlIOBase(f)->flags & PERLIO_F_WRBUF)
4209         PerlIO_flush(f);
4210     if (b->ptr && (b->ptr - count) >= b->buf
4211         && memEQ(b->ptr - count, vbuf, count)) {
4212         b->ptr -= count;
4213         PerlIOBase(f)->flags &= ~PERLIO_F_EOF;
4214         return count;
4215     }
4216     if (m->len) {
4217         /*
4218          * Loose the unwritable mapped buffer
4219          */
4220         PerlIO_flush(f);
4221         /*
4222          * If flush took the "buffer" see if we have one from before
4223          */
4224         if (!b->buf && m->bbuf)
4225             b->buf = m->bbuf;
4226         if (!b->buf) {
4227             PerlIOBuf_get_base(aTHX_ f);
4228             m->bbuf = b->buf;
4229         }
4230     }
4231     return PerlIOBuf_unread(aTHX_ f, vbuf, count);
4232 }
4233
4234 SSize_t
4235 PerlIOMmap_write(pTHX_ PerlIO *f, const void *vbuf, Size_t count)
4236 {
4237     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4238     PerlIOBuf *b = &m->base;
4239     if (!b->buf || !(PerlIOBase(f)->flags & PERLIO_F_WRBUF)) {
4240         /*
4241          * No, or wrong sort of, buffer
4242          */
4243         if (m->len) {
4244             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4245                 return 0;
4246         }
4247         /*
4248          * If unmap took the "buffer" see if we have one from before
4249          */
4250         if (!b->buf && m->bbuf)
4251             b->buf = m->bbuf;
4252         if (!b->buf) {
4253             PerlIOBuf_get_base(aTHX_ f);
4254             m->bbuf = b->buf;
4255         }
4256     }
4257     return PerlIOBuf_write(aTHX_ f, vbuf, count);
4258 }
4259
4260 IV
4261 PerlIOMmap_flush(pTHX_ PerlIO *f)
4262 {
4263     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4264     PerlIOBuf *b = &m->base;
4265     IV code = PerlIOBuf_flush(aTHX_ f);
4266     /*
4267      * Now we are "synced" at PerlIOBuf level
4268      */
4269     if (b->buf) {
4270         if (m->len) {
4271             /*
4272              * Unmap the buffer
4273              */
4274             if (PerlIOMmap_unmap(aTHX_ f) != 0)
4275                 code = -1;
4276         }
4277         else {
4278             /*
4279              * We seem to have a PerlIOBuf buffer which was not mapped
4280              * remember it in case we need one later
4281              */
4282             m->bbuf = b->buf;
4283         }
4284     }
4285     return code;
4286 }
4287
4288 IV
4289 PerlIOMmap_fill(pTHX_ PerlIO *f)
4290 {
4291     PerlIOBuf *b = PerlIOSelf(f, PerlIOBuf);
4292     IV code = PerlIO_flush(f);
4293     if (code == 0 && !b->buf) {
4294         code = PerlIOMmap_map(aTHX_ f);
4295     }
4296     if (code == 0 && !(PerlIOBase(f)->flags & PERLIO_F_RDBUF)) {
4297         code = PerlIOBuf_fill(aTHX_ f);
4298     }
4299     return code;
4300 }
4301
4302 IV
4303 PerlIOMmap_close(pTHX_ PerlIO *f)
4304 {
4305     PerlIOMmap *m = PerlIOSelf(f, PerlIOMmap);
4306     PerlIOBuf *b = &m->base;
4307     IV code = PerlIO_flush(f);
4308     if (m->bbuf) {
4309         b->buf = m->bbuf;
4310         m->bbuf = NULL;
4311         b->ptr = b->end = b->buf;
4312     }
4313     if (PerlIOBuf_close(aTHX_ f) != 0)
4314         code = -1;
4315     return code;
4316 }
4317
4318 PerlIO *
4319 PerlIOMmap_dup(pTHX_ PerlIO *f, PerlIO *o, CLONE_PARAMS *param, int flags)
4320 {
4321  return PerlIOBase_dup(aTHX_ f, o, param, flags);
4322 }
4323
4324
4325 PerlIO_funcs PerlIO_mmap = {
4326     sizeof(PerlIO_funcs),
4327     "mmap",
4328     sizeof(PerlIOMmap),
4329     PERLIO_K_BUFFERED|PERLIO_K_RAW,
4330     PerlIOBuf_pushed,
4331     PerlIOBuf_popped,
4332     PerlIOBuf_open,
4333     PerlIOBase_binmode,         /* binmode */
4334     NULL,
4335     PerlIOBase_fileno,
4336     PerlIOMmap_dup,
4337     PerlIOBuf_read,
4338     PerlIOMmap_unread,
4339     PerlIOMmap_write,
4340     PerlIOBuf_seek,
4341     PerlIOBuf_tell,
4342     PerlIOBuf_close,
4343     PerlIOMmap_flush,
4344     PerlIOMmap_fill,
4345     PerlIOBase_eof,
4346     PerlIOBase_error,
4347     PerlIOBase_clearerr,
4348     PerlIOBase_setlinebuf,
4349     PerlIOMmap_get_base,
4350     PerlIOBuf_bufsiz,
4351     PerlIOBuf_get_ptr,
4352     PerlIOBuf_get_cnt,
4353     PerlIOBuf_set_ptrcnt,
4354 };
4355
4356 #endif                          /* HAS_MMAP */
4357
4358 PerlIO *
4359 Perl_PerlIO_stdin(pTHX)
4360 {
4361     if (!PL_perlio) {
4362         PerlIO_stdstreams(aTHX);
4363     }
4364     return &PL_perlio[1];
4365 }
4366
4367 PerlIO *
4368 Perl_PerlIO_stdout(pTHX)
4369 {
4370     if (!PL_perlio) {
4371         PerlIO_stdstreams(aTHX);
4372     }
4373     return &PL_perlio[2];
4374 }
4375
4376 PerlIO *
4377 Perl_PerlIO_stderr(pTHX)
4378 {
4379     if (!PL_perlio) {
4380         PerlIO_stdstreams(aTHX);
4381     }
4382     return &PL_perlio[3];
4383 }
4384
4385 /*--------------------------------------------------------------------------------------*/
4386
4387 char *
4388 PerlIO_getname(PerlIO *f, char *buf)
4389 {
4390     dTHX;
4391     char *name = NULL;
4392 #ifdef VMS
4393     FILE *stdio = PerlIOSelf(f, PerlIOStdio)->stdio;
4394     if (stdio)
4395         name = fgetname(stdio, buf);
4396 #else
4397     Perl_croak(aTHX_ "Don't know how to get file name");
4398 #endif
4399     return name;
4400 }
4401
4402
4403 /*--------------------------------------------------------------------------------------*/
4404 /*
4405  * Functions which can be called on any kind of PerlIO implemented in
4406  * terms of above
4407  */
4408
4409 #undef PerlIO_fdopen
4410 PerlIO *
4411 PerlIO_fdopen(int fd, const char *mode)
4412 {
4413     dTHX;
4414     return PerlIO_openn(aTHX_ Nullch, mode, fd, 0, 0, NULL, 0, NULL);
4415 }
4416
4417 #undef PerlIO_open
4418 PerlIO *
4419 PerlIO_open(const char *path, const char *mode)
4420 {
4421     dTHX;
4422     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4423     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, NULL, 1, &name);
4424 }
4425
4426 #undef Perlio_reopen
4427 PerlIO *
4428 PerlIO_reopen(const char *path, const char *mode, PerlIO *f)
4429 {
4430     dTHX;
4431     SV *name = sv_2mortal(newSVpvn(path, strlen(path)));
4432     return PerlIO_openn(aTHX_ Nullch, mode, -1, 0, 0, f, 1, &name);
4433 }
4434
4435 #undef PerlIO_getc
4436 int
4437 PerlIO_getc(PerlIO *f)
4438 {
4439     dTHX;
4440     STDCHAR buf[1];
4441     SSize_t count = PerlIO_read(f, buf, 1);
4442     if (count == 1) {
4443         return (unsigned char) buf[0];
4444     }
4445     return EOF;
4446 }
4447
4448 #undef PerlIO_ungetc
4449 int
4450 PerlIO_ungetc(PerlIO *f, int ch)
4451 {
4452     dTHX;
4453     if (ch != EOF) {
4454         STDCHAR buf = ch;
4455         if (PerlIO_unread(f, &buf, 1) == 1)
4456             return ch;
4457     }
4458     return EOF;
4459 }
4460
4461 #undef PerlIO_putc
4462 int
4463 PerlIO_putc(PerlIO *f, int ch)
4464 {
4465     dTHX;
4466     STDCHAR buf = ch;
4467     return PerlIO_write(f, &buf, 1);
4468 }
4469
4470 #undef PerlIO_puts
4471 int
4472 PerlIO_puts(PerlIO *f, const char *s)
4473 {
4474     dTHX;
4475     STRLEN len = strlen(s);
4476     return PerlIO_write(f, s, len);
4477 }
4478
4479 #undef PerlIO_rewind
4480 void
4481 PerlIO_rewind(PerlIO *f)
4482 {
4483     dTHX;
4484     PerlIO_seek(f, (Off_t) 0, SEEK_SET);
4485     PerlIO_clearerr(f);
4486 }
4487
4488 #undef PerlIO_vprintf
4489 int
4490 PerlIO_vprintf(PerlIO *f, const char *fmt, va_list ap)
4491 {
4492     dTHX;
4493     SV *sv = newSVpvn("", 0);
4494     char *s;
4495     STRLEN len;
4496     SSize_t wrote;
4497 #ifdef NEED_VA_COPY
4498     va_list apc;
4499     Perl_va_copy(ap, apc);
4500     sv_vcatpvf(sv, fmt, &apc);
4501 #else
4502     sv_vcatpvf(sv, fmt, &ap);
4503 #endif
4504     s = SvPV(sv, len);
4505     wrote = PerlIO_write(f, s, len);
4506     SvREFCNT_dec(sv);
4507     return wrote;
4508 }
4509
4510 #undef PerlIO_printf
4511 int
4512 PerlIO_printf(PerlIO *f, const char *fmt, ...)
4513 {
4514     va_list ap;
4515     int result;
4516     va_start(ap, fmt);
4517     result = PerlIO_vprintf(f, fmt, ap);
4518     va_end(ap);
4519     return result;
4520 }
4521
4522 #undef PerlIO_stdoutf
4523 int
4524 PerlIO_stdoutf(const char *fmt, ...)
4525 {
4526     dTHX;
4527     va_list ap;
4528     int result;
4529     va_start(ap, fmt);
4530     result = PerlIO_vprintf(PerlIO_stdout(), fmt, ap);
4531     va_end(ap);
4532     return result;
4533 }
4534
4535 #undef PerlIO_tmpfile
4536 PerlIO *
4537 PerlIO_tmpfile(void)
4538 {
4539     /*
4540      * I have no idea how portable mkstemp() is ...
4541      */
4542 #if defined(WIN32) || !defined(HAVE_MKSTEMP)
4543     dTHX;
4544     PerlIO *f = NULL;
4545     FILE *stdio = PerlSIO_tmpfile();
4546     if (stdio) {
4547         if ((f = PerlIO_push(aTHX_(PerlIO_allocate(aTHX)), &PerlIO_stdio, "w+", Nullsv))) {
4548             PerlIOStdio *s = PerlIOSelf(f, PerlIOStdio);
4549             s->stdio = stdio;
4550         }
4551     }
4552     return f;
4553 #else
4554     dTHX;
4555     SV *sv = newSVpv("/tmp/PerlIO_XXXXXX", 0);
4556     int fd = mkstemp(SvPVX(sv));
4557     PerlIO *f = NULL;
4558     if (fd >= 0) {
4559         f = PerlIO_fdopen(fd, "w+");
4560         if (f) {
4561             PerlIOBase(f)->flags |= PERLIO_F_TEMP;
4562         }
4563         PerlLIO_unlink(SvPVX(sv));
4564         SvREFCNT_dec(sv);
4565     }
4566     return f;
4567 #endif
4568 }
4569
4570 #undef HAS_FSETPOS
4571 #undef HAS_FGETPOS
4572
4573 #endif                          /* USE_SFIO */
4574 #endif                          /* PERLIO_IS_STDIO */
4575
4576 /*======================================================================================*/
4577 /*
4578  * Now some functions in terms of above which may be needed even if we are
4579  * not in true PerlIO mode
4580  */
4581
4582 #ifndef HAS_FSETPOS
4583 #undef PerlIO_setpos
4584 int
4585 PerlIO_setpos(PerlIO *f, SV *pos)
4586 {
4587     dTHX;
4588     if (SvOK(pos)) {
4589         STRLEN len;
4590         Off_t *posn = (Off_t *) SvPV(pos, len);
4591         if (f && len == sizeof(Off_t))
4592             return PerlIO_seek(f, *posn, SEEK_SET);
4593     }
4594     SETERRNO(EINVAL, SS_IVCHAN);
4595     return -1;
4596 }
4597 #else
4598 #undef PerlIO_setpos
4599 int
4600 PerlIO_setpos(PerlIO *f, SV *pos)
4601 {
4602     dTHX;
4603     if (SvOK(pos)) {
4604         STRLEN len;
4605         Fpos_t *fpos = (Fpos_t *) SvPV(pos, len);
4606         if (f && len == sizeof(Fpos_t)) {
4607 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4608             return fsetpos64(f, fpos);
4609 #else
4610             return fsetpos(f, fpos);
4611 #endif
4612         }
4613     }
4614     SETERRNO(EINVAL, SS_IVCHAN);
4615     return -1;
4616 }
4617 #endif
4618
4619 #ifndef HAS_FGETPOS
4620 #undef PerlIO_getpos
4621 int
4622 PerlIO_getpos(PerlIO *f, SV *pos)
4623 {
4624     dTHX;
4625     Off_t posn = PerlIO_tell(f);
4626     sv_setpvn(pos, (char *) &posn, sizeof(posn));
4627     return (posn == (Off_t) - 1) ? -1 : 0;
4628 }
4629 #else
4630 #undef PerlIO_getpos
4631 int
4632 PerlIO_getpos(PerlIO *f, SV *pos)
4633 {
4634     dTHX;
4635     Fpos_t fpos;
4636     int code;
4637 #if defined(USE_64_BIT_STDIO) && defined(USE_FSETPOS64)
4638     code = fgetpos64(f, &fpos);
4639 #else
4640     code = fgetpos(f, &fpos);
4641 #endif
4642     sv_setpvn(pos, (char *) &fpos, sizeof(fpos));
4643     return code;
4644 }
4645 #endif
4646
4647 #if (defined(PERLIO_IS_STDIO) || !defined(USE_SFIO)) && !defined(HAS_VPRINTF)
4648
4649 int
4650 vprintf(char *pat, char *args)
4651 {
4652     _doprnt(pat, args, stdout);
4653     return 0;                   /* wrong, but perl doesn't use the return
4654                                  * value */
4655 }
4656
4657 int
4658 vfprintf(FILE *fd, char *pat, char *args)
4659 {
4660     _doprnt(pat, args, fd);
4661     return 0;                   /* wrong, but perl doesn't use the return
4662                                  * value */
4663 }
4664
4665 #endif
4666
4667 #ifndef PerlIO_vsprintf
4668 int
4669 PerlIO_vsprintf(char *s, int n, const char *fmt, va_list ap)
4670 {
4671     int val = vsprintf(s, fmt, ap);
4672     if (n >= 0) {
4673         if (strlen(s) >= (STRLEN) n) {
4674             dTHX;
4675             (void) PerlIO_puts(Perl_error_log,
4676                                "panic: sprintf overflow - memory corrupted!\n");
4677             my_exit(1);
4678         }
4679     }
4680     return val;
4681 }
4682 #endif
4683
4684 #ifndef PerlIO_sprintf
4685 int
4686 PerlIO_sprintf(char *s, int n, const char *fmt, ...)
4687 {
4688     va_list ap;
4689     int result;
4690     va_start(ap, fmt);
4691     result = PerlIO_vsprintf(s, n, fmt, ap);
4692     va_end(ap);
4693     return result;
4694 }
4695 #endif
4696
4697
4698
4699
4700
4701
4702
4703