This is a live mirror of the Perl 5 development currently hosted at https://github.com/perl/perl5
e5996b3084a4c3dbf49494a824db30fe94373db1
[perl5.git] / ext / Fcntl / t / syslfs.t
1 # NOTE: this file tests how large files (>2GB) work with raw system IO.
2 # stdio: open(), tell(), seek(), print(), read() is tested in t/op/lfs.t.
3 # If you modify/add tests here, remember to update also t/op/lfs.t.
4
5 BEGIN {
6         require Config; import Config;
7         # Don't bother if there are no quad offsets.
8         if ($Config{lseeksize} < 8) {
9                 print "1..0 # Skip: no 64-bit file offsets\n";
10                 exit(0);
11         }
12         require Fcntl; import Fcntl qw(/^O_/ /^SEEK_/);
13 }
14
15 use strict;
16 use File::Temp 'tempfile';
17
18 our @s;
19 our $fail;
20
21 (undef, my $big0) = tempfile(UNLINK => 1);
22 (undef, my $big1) = tempfile(UNLINK => 1);
23 (undef, my $big2) = tempfile(UNLINK => 1);
24
25 sub bye {
26     close(BIG);
27     exit(0);
28 }
29
30 my $explained;
31
32 sub explain {
33     unless ($explained++) {
34         print <<EOM;
35 #
36 # If the lfs (large file support: large meaning larger than two
37 # gigabytes) tests are skipped or fail, it may mean either that your
38 # process (or process group) is not allowed to write large files
39 # (resource limits) or that the file system (the network filesystem?)
40 # you are running the tests on doesn't let your user/group have large
41 # files (quota) or the filesystem simply doesn't support large files.
42 # You may even need to reconfigure your kernel.  (This is all very
43 # operating system and site-dependent.)
44 #
45 # Perl may still be able to support large files, once you have
46 # such a process, enough quota, and such a (file) system.
47 # It is just that the test failed now.
48 #
49 EOM
50     }
51     if (@_) {
52         print "1..0 # Skip: @_\n";
53         bye();
54     }
55 }
56
57 $| = 1;
58
59 print "# checking whether we have sparse files...\n";
60
61 # Known have-nots.
62 if ($^O eq 'MSWin32' || $^O eq 'NetWare' || $^O eq 'VMS') {
63     print "1..0 # Skip: no sparse files in $^O\n";
64     bye();
65 }
66
67 # Known haves that have problems running this test
68 # (for example because they do not support sparse files, like UNICOS)
69 if ($^O eq 'unicos') {
70     print "1..0 # Skip: no sparse files in $^O, unable to test large files\n";
71     bye();
72 }
73
74 # Then try heuristically to deduce whether we have sparse files.
75
76 # We'll start off by creating a one megabyte file which has
77 # only three "true" bytes.  If we have sparseness, we should
78 # consume less blocks than one megabyte (assuming nobody has
79 # one megabyte blocks...)
80
81 sysopen(BIG, $big1, O_WRONLY|O_CREAT|O_TRUNC) or
82     do { warn "sysopen $big1 failed: $!\n"; bye };
83 sysseek(BIG, 1_000_000, SEEK_SET) or
84     do { warn "sysseek $big1 failed: $!\n"; bye };
85 syswrite(BIG, "big") or
86     do { warn "syswrite $big1 failed: $!\n"; bye };
87 close(BIG) or
88     do { warn "close $big1 failed: $!\n"; bye };
89
90 my @s1 = stat($big1);
91
92 print "# s1 = @s1\n";
93
94 sysopen(BIG, $big2, O_WRONLY|O_CREAT|O_TRUNC) or
95     do { warn "sysopen $big2 failed: $!\n"; bye };
96 sysseek(BIG, 2_000_000, SEEK_SET) or
97     do { warn "sysseek $big2 failed: $!\n"; bye };
98 syswrite(BIG, "big") or
99     do { warn "syswrite $big2 failed: $!\n"; bye };
100 close(BIG) or
101     do { warn "close $big2 failed: $!\n"; bye };
102
103 my @s2 = stat($big2);
104
105 print "# s2 = @s2\n";
106
107 unless ($s1[7] == 1_000_003 && $s2[7] == 2_000_003 &&
108         $s1[11] == $s2[11] && $s1[12] == $s2[12] &&
109         $s1[12] > 0) {
110         print "1..0 # Skip: no sparse files?\n";
111         bye;
112 }
113
114 print "# we seem to have sparse files...\n";
115
116 # By now we better be sure that we do have sparse files:
117 # if we are not, the following will hog 5 gigabytes of disk.  Ooops.
118 # This may fail by producing some signal; run in a subprocess first for safety
119
120 $ENV{LC_ALL} = "C";
121
122 my $perl = '../../perl';
123 unless (-x $perl) {
124     print "1..1\nnot ok 1 - can't find perl: expected $perl\n";
125     exit 0;
126 }
127 my $r = system $perl, '-I../lib', '-e', <<"EOF";
128 use Fcntl qw(/^O_/ /^SEEK_/);
129 sysopen \$big, q{$big0}, O_WRONLY|O_CREAT|O_TRUNC or die qq{sysopen $big0 $!};
130 sysseek \$big, 5_000_000_000, SEEK_SET or die qq{sysseek $big0 $!};
131 syswrite \$big, "big" or die qq{syswrite $big0 $!};
132 close \$big or die qq{close $big0: $!};
133 exit 0;
134 EOF
135
136
137 sysopen(BIG, $big0, O_WRONLY|O_CREAT|O_TRUNC) or
138         do { warn "sysopen $big0 failed: $!\n"; bye };
139 my $sysseek = sysseek(BIG, 5_000_000_000, SEEK_SET);
140 unless (! $r && defined $sysseek && $sysseek == 5_000_000_000) {
141     $sysseek = 'undef' unless defined $sysseek;
142     explain("seeking past 2GB failed: ",
143             $r ? 'signal '.($r & 0x7f) : "$! (sysseek returned $sysseek)");
144 }
145
146 # The syswrite will fail if there are are filesize limitations (process or fs).
147 my $syswrite = syswrite(BIG, "big");
148 print "# syswrite failed: $! (syswrite returned ",
149       defined $syswrite ? $syswrite : 'undef', ")\n"
150     unless defined $syswrite && $syswrite == 3;
151 my $close     = close BIG;
152 print "# close failed: $!\n" unless $close;
153 unless($syswrite && $close) {
154     if ($! =~/too large/i) {
155         explain("writing past 2GB failed: process limits?");
156     } elsif ($! =~ /quota/i) {
157         explain("filesystem quota limits?");
158     } else {
159         explain("error: $!");
160     }
161 }
162
163 @s = stat($big0);
164
165 print "# @s\n";
166
167 unless ($s[7] == 5_000_000_003) {
168     explain("kernel/fs not configured to use large files?");
169 }
170
171 sub fail {
172     print "not ";
173     $fail++;
174 }
175
176 sub offset ($$) {
177     my ($offset_will_be, $offset_want) = @_;
178     my $offset_is = eval $offset_will_be;
179     unless ($offset_is == $offset_want) {
180         print "# bad offset $offset_is, want $offset_want\n";
181         my ($offset_func) = ($offset_will_be =~ /^(\w+)/);
182         if (unpack("L", pack("L", $offset_want)) == $offset_is) {
183             print "# 32-bit wraparound suspected in $offset_func() since\n";
184             print "# $offset_want cast into 32 bits equals $offset_is.\n";
185         } elsif ($offset_want - unpack("L", pack("L", $offset_want)) - 1
186                  == $offset_is) {
187             print "# 32-bit wraparound suspected in $offset_func() since\n";
188             printf "# %s - unpack('L', pack('L', %s)) - 1 equals %s.\n",
189                 $offset_want,
190                 $offset_want,
191                 $offset_is;
192         }
193         fail;
194     }
195 }
196
197 print "1..17\n";
198
199 $fail = 0;
200
201 fail unless $s[7] == 5_000_000_003;     # exercizes pp_stat
202 print "ok 1\n";
203
204 fail unless -s $big0 == 5_000_000_003;  # exercizes pp_ftsize
205 print "ok 2\n";
206
207 fail unless -e $big0;
208 print "ok 3\n";
209
210 fail unless -f $big0;
211 print "ok 4\n";
212
213 sysopen(BIG, $big0, O_RDONLY) or do { warn "sysopen failed: $!\n"; bye };
214
215 offset('sysseek(BIG, 4_500_000_000, SEEK_SET)', 4_500_000_000);
216 print "ok 5\n";
217
218 offset('sysseek(BIG, 0, SEEK_CUR)', 4_500_000_000);
219 print "ok 6\n";
220
221 # If you get 205_032_705 from here it means that
222 # your tell() is returning 32-bit values since (I32)4_500_000_001
223 # is exactly 205_032_705.
224 offset('sysseek(BIG, 1, SEEK_CUR)', 4_500_000_001);
225 print "ok 7\n";
226
227 offset('sysseek(BIG, 0, SEEK_CUR)', 4_500_000_001);
228 print "ok 8\n";
229
230 offset('sysseek(BIG, -1, SEEK_CUR)', 4_500_000_000);
231 print "ok 9\n";
232
233 offset('sysseek(BIG, 0, SEEK_CUR)', 4_500_000_000);
234 print "ok 10\n";
235
236 offset('sysseek(BIG, -3, SEEK_END)', 5_000_000_000);
237 print "ok 11\n";
238
239 offset('sysseek(BIG, 0, SEEK_CUR)', 5_000_000_000);
240 print "ok 12\n";
241
242 my $big;
243
244 fail unless sysread(BIG, $big, 3) == 3;
245 print "ok 13\n";
246
247 fail unless $big eq "big";
248 print "ok 14\n";
249
250 # 705_032_704 = (I32)5_000_000_000
251 # See that we don't have "big" in the 705_... spot:
252 # that would mean that we have a wraparound.
253 fail unless sysseek(BIG, 705_032_704, SEEK_SET);
254 print "ok 15\n";
255
256 my $zero;
257
258 fail unless read(BIG, $zero, 3) == 3;
259 print "ok 16\n";
260
261 fail unless $zero eq "\0\0\0";
262 print "ok 17\n";
263
264 explain() if $fail;
265
266 bye(); # does the necessary cleanup
267
268 END {
269     # unlink may fail if applied directly to a large file
270     # be paranoid about leaving 5 gig files lying around
271     open(BIG, ">$big0"); # truncate
272     close(BIG);
273 }
274
275 # eof