This is a live mirror of the Perl 5 development currently hosted at https://github.com/perl/perl5
[perl #128260] Fix \substr %h
[perl5.git] / t / op / utftaint.t
index 692c908..da4f842 100644 (file)
 # tests whether tainting works with UTF-8
 
 BEGIN {
-    if ($ENV{PERL_CORE_MINITEST}) {
-        print "1..0 # Skip: no dynamic loading on miniperl, no threads\n";
-        exit 0;
-    }
     chdir 't' if -d 't';
-    @INC = qw(../lib);
+    require './test.pl';
+    set_up_inc('../lib');
 }
 
 use strict;
 use Config;
 
-BEGIN {
-    if ($Config{extensions} !~ m(\bList/Util\b)) {
-        print "1..0 # Skip: no Scalar::Util module\n";
-        exit 0;
-    }
+# How to identify taint when you see it
+sub any_tainted (@) {
+    not eval { join("",@_), kill 0; 1 };
+}
+sub tainted ($) {
+    any_tainted @_;
 }
 
-use Scalar::Util qw(tainted);
-
-use Test;
-plan tests => 3*10;
-my $cnt = 0;
+plan(tests => 3*10 + 3*8 + 2*16 + 3);
 
 my $arg = $ENV{PATH}; # a tainted value
 use constant UTF8 => "\x{1234}";
 
+*is_utf8 = \&utf8::is_utf8;
+
 for my $ary ([ascii => 'perl'], [latin1 => "\xB6"], [utf8 => "\x{100}"]) {
     my $encode = $ary->[0];
     my $string = $ary->[1];
 
     my $taint = $arg; substr($taint, 0) = $ary->[1];
 
-    print tainted($taint) == tainted($arg)
-       ? "ok " : "not ok ", ++$cnt, " # tainted: $encode, before test\n";
+    is(tainted($taint), tainted($arg), "tainted: $encode, before test");
 
     my $lconcat = $taint;
        $lconcat .= UTF8;
-    print $lconcat eq $string."\x{1234}"
-       ? "ok " : "not ok ", ++$cnt, " # compare: $encode, concat left\n";
+    is($lconcat, $string.UTF8, "compare: $encode, concat left");
 
-    print tainted($lconcat) == tainted($arg)
-       ? "ok " : "not ok ", ++$cnt, " # tainted: $encode, concat left\n";
+    is(tainted($lconcat), tainted($arg), "tainted: $encode, concat left");
 
     my $rconcat = UTF8;
        $rconcat .= $taint;
-    print $rconcat eq "\x{1234}".$string
-       ? "ok " : "not ok ", ++$cnt, " # compare: $encode, concat right\n";
+    is($rconcat, UTF8.$string, "compare: $encode, concat right");
 
-    print tainted($rconcat) == tainted($arg)
-       ? "ok " : "not ok ", ++$cnt, " # tainted: $encode, concat right\n";
+    is(tainted($rconcat), tainted($arg), "tainted: $encode, concat right");
 
     my $ljoin = join('!', $taint, UTF8);
-    print $ljoin eq join('!', $string, UTF8)
-       ? "ok " : "not ok ", ++$cnt, " # compare: $encode, join left\n";
+    is($ljoin, join('!', $string, UTF8), "compare: $encode, join left");
 
-    print tainted($ljoin) == tainted($arg)
-       ? "ok " : "not ok ", ++$cnt, " # tainted: $encode, join left\n";
+    is(tainted($ljoin), tainted($arg), "tainted: $encode, join left");
 
     my $rjoin = join('!', UTF8, $taint);
-    print $rjoin eq join('!', UTF8, $string)
-       ? "ok " : "not ok ", ++$cnt, " # compare: $encode, join right\n";
+    is($rjoin, join('!', UTF8, $string), "compare: $encode, join right");
+
+    is(tainted($rjoin), tainted($arg), "tainted: $encode, join right");
+
+    is(tainted($taint), tainted($arg), "tainted: $encode, after test");
+}
+
+
+for my $ary ([ascii => 'perl'], [latin1 => "\xB6"], [utf8 => "\x{100}"]) {
+    my $encode = $ary->[0];
+
+    my $utf8 = pack('U*') . $ary->[1];
+    my $byte = unpack('U0a*', $utf8);
+
+    my $taint = $arg; substr($taint, 0) = $utf8;
+    utf8::encode($taint);
+
+    is($taint, $byte, "compare: $encode, encode utf8");
+
+    is(pack('a*',$taint), pack('a*',$byte), "bytecmp: $encode, encode utf8");
+
+    ok(!is_utf8($taint), "is_utf8: $encode, encode utf8");
+
+    is(tainted($taint), tainted($arg), "tainted: $encode, encode utf8");
+
+    my $taint = $arg; substr($taint, 0) = $byte;
+    utf8::decode($taint);
+
+    is($taint, $utf8, "compare: $encode, decode byte");
+
+    is(pack('a*',$taint), pack('a*',$utf8), "bytecmp: $encode, decode byte");
+
+    is(is_utf8($taint), ($encode ne 'ascii'), "is_utf8: $encode, decode byte");
+
+    is(tainted($taint), tainted($arg), "tainted: $encode, decode byte");
+}
+
+
+for my $ary ([ascii => 'perl'], [latin1 => "\xB6"]) {
+    my $encode = $ary->[0];
+
+    my $up   = pack('U*') . $ary->[1];
+    my $down = pack("a*", $ary->[1]);
+
+    my $taint = $arg; substr($taint, 0) = $up;
+    utf8::upgrade($taint);
+
+    is($taint, $up, "compare: $encode, upgrade up");
+
+    is(pack('a*',$taint), pack('a*',$up), "bytecmp: $encode, upgrade up");
+
+    ok(is_utf8($taint), "is_utf8: $encode, upgrade up");
+
+    is(tainted($taint), tainted($arg), "tainted: $encode, upgrade up");
+
+    my $taint = $arg; substr($taint, 0) = $down;
+    utf8::upgrade($taint);
+
+    is($taint, $up, "compare: $encode, upgrade down");
+
+    is(pack('a*',$taint), pack('a*',$up), "bytecmp: $encode, upgrade down");
+
+    ok(is_utf8($taint), "is_utf8: $encode, upgrade down");
+
+    is(tainted($taint), tainted($arg), "tainted: $encode, upgrade down");
+
+    my $taint = $arg; substr($taint, 0) = $up;
+    utf8::downgrade($taint);
+
+    is($taint, $down, "compare: $encode, downgrade up");
+
+    is(pack('a*',$taint), pack('a*',$down), "bytecmp: $encode, downgrade up");
+
+    ok(!is_utf8($taint), "is_utf8: $encode, downgrade up");
+
+    is(tainted($taint), tainted($arg), "tainted: $encode, downgrade up");
+
+    my $taint = $arg; substr($taint, 0) = $down;
+    utf8::downgrade($taint);
+
+    is($taint, $down, "compare: $encode, downgrade down");
+
+    is(pack('a*',$taint), pack('a*',$down), "bytecmp: $encode, downgrade down");
+
+    ok(!is_utf8($taint), "is_utf8: $encode, downgrade down");
+
+    is(tainted($taint), tainted($arg), "tainted: $encode, downgrade down");
+}
+
+SKIP: {
+    if (is_miniperl()) {
+        skip_if_miniperl("Unicode tables not built yet", 2)
+            unless eval 'require "unicore/Heavy.pl"';
+    }
+    fresh_perl_is('$a = substr $^X, 0, 0; /\x{100}/i; /$a\x{100}/i || print q,ok,',
+                 'ok', {switches => ["-T", "-l"]},
+                 "matching a regexp is taint agnostic");
+
+    fresh_perl_is('$a = substr $^X, 0, 0; /$a\x{100}/i || print q,ok,',
+                 'ok', {switches => ["-T", "-l"]},
+                 "therefore swash_init should be taint agnostic");
+}
 
-    print tainted($rjoin) == tainted($arg)
-       ? "ok " : "not ok ", ++$cnt, " # tainted: $encode, join right\n";
+{
+    # RT #122148: s///e on tainted utf8 strings got pos() messed up in 5.20
 
-    print tainted($taint) == tainted($arg)
-       ? "ok " : "not ok ", ++$cnt, " # tainted: $encode, after test\n";
+    my @p;
+    my $s = "\x{100}\x{100}\x{100}\x{100}". $^X;
+    $s =~ s/\x{100}/push @p, pos($s); "xxxx";/eg;
+    is("@p", "0 1 2 3", "RT #122148");
 }