This is a live mirror of the Perl 5 development currently hosted at https://github.com/perl/perl5
Remove tiehandle code.
[perl5.git] / lib / Test.pm
index 19a9089..dcc5f68 100644 (file)
@@ -1,18 +1,23 @@
-use strict;
 package Test;
-use Test::Harness 1.1601 ();
+
+require 5.004;
+
+use strict;
+
 use Carp;
-our($VERSION, @ISA, @EXPORT, @EXPORT_OK, $ntest, $TestLevel); #public-ish
-our($TESTOUT, $ONFAIL, %todo, %history, $planned, @FAILDETAIL); #private-ish
-$VERSION = '1.15';
+use vars (qw($VERSION @ISA @EXPORT @EXPORT_OK $ntest $TestLevel), #public-ish
+         qw($TESTOUT $ONFAIL %todo %history $planned @FAILDETAIL)#private-ish
+         );
+
+$VERSION = '1.18';
 require Exporter;
 @ISA=('Exporter');
-@EXPORT=qw(&plan &ok &skip);
-@EXPORT_OK=qw($ntest $TESTOUT);
+
+@EXPORT    = qw(&plan &ok &skip);
+@EXPORT_OK = qw($ntest $TESTOUT);
 
 $TestLevel = 0;                # how many extra stack frames to skip
 $|=1;
-#$^W=1;  ?
 $ntest=1;
 $TESTOUT = *STDOUT{IO};
 
@@ -20,9 +25,93 @@ $TESTOUT = *STDOUT{IO};
 # help test coverage analyzers know which test is running.
 $ENV{REGRESSION_TEST} = $0;
 
+
+=head1 NAME
+
+Test - provides a simple framework for writing test scripts
+
+=head1 SYNOPSIS
+
+  use strict;
+  use Test;
+
+  # use a BEGIN block so we print our plan before MyModule is loaded
+  BEGIN { plan tests => 14, todo => [3,4] }
+
+  # load your module...
+  use MyModule;
+
+  ok(0); # failure
+  ok(1); # success
+
+  ok(0); # ok, expected failure (see todo list, above)
+  ok(1); # surprise success!
+
+  ok(0,1);             # failure: '0' ne '1'
+  ok('broke','fixed'); # failure: 'broke' ne 'fixed'
+  ok('fixed','fixed'); # success: 'fixed' eq 'fixed'
+  ok('fixed',qr/x/);   # success: 'fixed' =~ qr/x/
+
+  ok(sub { 1+1 }, 2);  # success: '2' eq '2'
+  ok(sub { 1+1 }, 3);  # failure: '2' ne '3'
+  ok(0, int(rand(2));  # (just kidding :-)
+
+  my @list = (0,0);
+  ok @list, 3, "\@list=".join(',',@list);      #extra diagnostics
+  ok 'segmentation fault', '/(?i)success/';    #regex match
+
+  skip($feature_is_missing, ...);    #do platform specific test
+
+=head1 DESCRIPTION
+
+B<STOP!> If you are writing a new test, we I<highly suggest> you use
+the new Test::Simple and Test::More modules instead.
+
+L<Test::Harness|Test::Harness> expects to see particular output when it
+executes tests.  This module aims to make writing proper test scripts just
+a little bit easier (and less error prone :-).
+
+
+=head2 Functions
+
+All the following are exported by Test by default.
+
+=over 4
+
+=item B<plan>
+
+     BEGIN { plan %theplan; }
+
+This should be the first thing you call in your test script.  It
+declares your testing plan, how many there will be, if any of them
+should be allowed to fail, etc...
+
+Typical usage is just:
+
+     use Test;
+     BEGIN { plan tests => 23 }
+
+Things you can put in the plan:
+
+     tests          The number of tests in your script.
+                    This means all ok() and skip() calls.
+     todo           A reference to a list of tests which are allowed
+                    to fail.  See L</TODO TESTS>.
+     onfail         A subroutine reference to be run at the end of
+                    the test script should any of the tests fail.
+                    See L</ONFAIL>.
+
+You must call plan() once and only once.
+
+=cut
+
 sub plan {
     croak "Test::plan(%args): odd number of arguments" if @_ & 1;
     croak "Test::plan(): should not be called more than once" if $planned;
+
+    local($\, $,);   # guard against -l and other things that screw with
+                     # print
+
     my $max=0;
     for (my $x=0; $x < @_; $x+=2) {
        my ($k,$v) = @_[$x,$x+1];
@@ -42,35 +131,119 @@ sub plan {
        print $TESTOUT "1..$max\n";
     }
     ++$planned;
+
+    # Never used.
+    return undef;
 }
 
-sub to_value {
+
+=begin _private
+
+=item B<_to_value>
+
+  my $value = _to_value($input);
+
+Converts an ok parameter to its value.  Typically this just means
+running it if its a code reference.  You should run all inputed 
+values through this.
+
+=cut
+
+sub _to_value {
     my ($v) = @_;
-    (ref $v or '') eq 'CODE' ? $v->() : $v;
+    return (ref $v or '') eq 'CODE' ? $v->() : $v;
 }
 
+=end _private
+
+=item B<ok>
+
+  ok(1 + 1 == 2);
+  ok($have, $expect);
+  ok($have, $expect, $diagnostics);
+
+This is the reason for Test's existance.  Its the basic function that
+handles printing "ok" or "not ok" along with the current test number.
+
+In its most basic usage, it simply takes an expression.  If its true,
+the test passes, if false, the test fails.  Simp.
+
+    ok( 1 + 1 == 2 );           # ok if 1 + 1 == 2
+    ok( $foo =~ /bar/ );        # ok if $foo contains 'bar'
+    ok( baz($x + $y) eq 'Armondo' );    # ok if baz($x + $y) returns
+                                        # 'Armondo'
+    ok( @a == @b );             # ok if @a and @b are the same length
+
+The expression is evaluated in scalar context.  So the following will
+work:
+
+    ok( @stuff );                       # ok if @stuff has any elements
+    ok( !grep !defined $_, @stuff );    # ok if everything in @stuff is
+                                        # defined.
+
+A special case is if the expression is a subroutine reference.  In
+that case, it is executed and its value (true or false) determines if
+the test passes or fails.
+
+In its two argument form it compares the two values to see if they
+equal (with C<eq>).
+
+    ok( "this", "that" );               # not ok, 'this' ne 'that'
+
+If either is a subroutine reference, that is run and used as a
+comparison.
+
+Should $expect either be a regex reference (ie. qr//) or a string that
+looks like a regex (ie. '/foo/') ok() will perform a pattern match
+against it rather than using eq.
+
+    ok( 'JaffO', '/Jaff/' );    # ok, 'JaffO' =~ /Jaff/
+    ok( 'JaffO', qr/Jaff/ );    # ok, 'JaffO' =~ qr/Jaff/;
+    ok( 'JaffO', '/(?i)jaff/ ); # ok, 'JaffO' =~ /jaff/i;
+
+Finally, an optional set of $diagnostics will be printed should the
+test fail.  This should usually be some useful information about the
+test pertaining to why it failed or perhaps a description of the test.
+Or both.
+
+    ok( grep($_ eq 'something unique', @stuff), 1,
+        "Something that should be unique isn't!\n".
+        '@stuff = '.join ', ', @stuff
+      );
+
+Unfortunately, a diagnostic cannot be used with the single argument
+style of ok().
+
+All these special cases can cause some problems.  See L</BUGS and CAVEATS>.
+
+=cut
+
 sub ok ($;$$) {
     croak "ok: plan before you test!" if !$planned;
+
+    local($\,$,);   # guard against -l and other things that screw with
+                    # print
+
     my ($pkg,$file,$line) = caller($TestLevel);
     my $repetition = ++$history{"$file:$line"};
     my $context = ("$file at line $line".
                   ($repetition > 1 ? " fail \#$repetition" : ''));
     my $ok=0;
-    my $result = to_value(shift);
-    my ($expected,$diag);
+    my $result = _to_value(shift);
+    my ($expected,$diag,$isregex,$regex);
     if (@_ == 0) {
        $ok = $result;
     } else {
-       $expected = to_value(shift);
-       my ($regex,$ignore);
+       $expected = _to_value(shift);
        if (!defined $expected) {
            $ok = !defined $result;
        } elsif (!defined $result) {
            $ok = 0;
        } elsif ((ref($expected)||'') eq 'Regexp') {
            $ok = $result =~ /$expected/;
+            $regex = $expected;
        } elsif (($regex) = ($expected =~ m,^ / (.+) / $,sx) or
-           ($ignore, $regex) = ($expected =~ m,^ m([^\w\s]) (.+) \1 $,sx)) {
+           (undef, $regex) = ($expected =~ m,^ m([^\w\s]) (.+) \1 $,sx)) {
            $ok = $result =~ /$regex/;
        } else {
            $ok = $result eq $expected;
@@ -81,24 +254,24 @@ sub ok ($;$$) {
        $context .= ' TODO?!' if $todo;
        print $TESTOUT "ok $ntest # ($context)\n";
     } else {
-       # Issuing two separate print()s causes severe trouble with 
-       # Test::Harness on VMS.  The "not "'s for failed tests occur
-       # on a separate line and would not get counted as failures.
-       #print $TESTOUT "not " if !$ok;
-       #print $TESTOUT "ok $ntest\n";
-       # Replace with one of a pair of single print()'s as a workaround:
-       if (!$ok) {
-           print $TESTOUT "not ok $ntest\n";
+        # Issuing two seperate prints() causes problems on VMS.
+        if (!$ok) {
+            print $TESTOUT "not ok $ntest\n";
         }
-        else {
-           print $TESTOUT "ok $ntest\n";
+       else {
+            print $TESTOUT "ok $ntest\n";
         }
        
        if (!$ok) {
            my $detail = { 'repetition' => $repetition, 'package' => $pkg,
                           'result' => $result, 'todo' => $todo };
            $$detail{expected} = $expected if defined $expected;
-           $diag = $$detail{diagnostic} = to_value(shift) if @_;
+
+            # Get the user's diagnostic, protecting against multi-line
+            # diagnostics.
+           $diag = $$detail{diagnostic} = _to_value(shift) if @_;
+            $diag =~ s/\n/\n#/g if defined $diag;
+
            $context .= ' *TODO*' if $todo;
            if (!defined $expected) {
                if (!$diag) {
@@ -111,9 +284,10 @@ sub ok ($;$$) {
                print $TESTOUT "# $prefix got: ".
                    (defined $result? "'$result'":'<UNDEF>')." ($context)\n";
                $prefix = ' ' x (length($prefix) - 5);
-               if ((ref($expected)||'') eq 'Regexp') {
-                   $expected = 'qr/'.$expected.'/'
-               } else {
+               if (defined $regex) {
+                   $expected = 'qr{'.$regex.'}';
+               }
+                else {
                    $expected = "'$expected'";
                }
                if (!$diag) {
@@ -129,19 +303,41 @@ sub ok ($;$$) {
     $ok;
 }
 
-sub skip ($$;$$) {
-    my $whyskip = to_value(shift);
-    if ($whyskip) {
-       $whyskip = 'skip' if $whyskip =~ m/^\d+$/;
-       print $TESTOUT "ok $ntest # $whyskip\n";
-       ++ $ntest;
-       1;
+sub skip ($;$$$) {
+    local($\, $,);   # guard against -l and other things that screw with
+                     # print
+
+    my $whyskip = _to_value(shift);
+    if (!@_ or $whyskip) {
+       $whyskip = '' if $whyskip =~ m/^\d+$/;
+        $whyskip =~ s/^[Ss]kip(?:\s+|$)//;  # backwards compatibility, old
+                                            # versions required the reason
+                                            # to start with 'skip'
+        # We print in one shot for VMSy reasons.
+        my $ok = "ok $ntest # skip";
+        $ok .= " $whyskip" if length $whyskip;
+        $ok .= "\n";
+        print $TESTOUT $ok;
+        ++ $ntest;
+        return 1;
     } else {
+        # backwards compatiblity (I think).  skip() used to be
+        # called like ok(), which is weird.  I haven't decided what to do with
+        # this yet.
+#        warn <<WARN if $^W;
+#This looks like a skip() using the very old interface.  Please upgrade to
+#the documented interface as this has been deprecated.
+#WARN
+
        local($TestLevel) = $TestLevel+1;  #ignore this stack frame
-       &ok;
+        return &ok(@_);
     }
 }
 
+=back
+
+=cut
+
 END {
     $ONFAIL->(\@FAILDETAIL) if @FAILDETAIL && $ONFAIL;
 }
@@ -149,48 +345,6 @@ END {
 1;
 __END__
 
-=head1 NAME
-
-Test - provides a simple framework for writing test scripts
-
-=head1 SYNOPSIS
-
-  use strict;
-  use Test;
-
-  # use a BEGIN block so we print our plan before MyModule is loaded
-  BEGIN { plan tests => 14, todo => [3,4] }
-
-  # load your module...
-  use MyModule;
-
-  ok(0); # failure
-  ok(1); # success
-
-  ok(0); # ok, expected failure (see todo list, above)
-  ok(1); # surprise success!
-
-  ok(0,1);             # failure: '0' ne '1'
-  ok('broke','fixed'); # failure: 'broke' ne 'fixed'
-  ok('fixed','fixed'); # success: 'fixed' eq 'fixed'
-  ok('fixed',qr/x/);   # success: 'fixed' =~ qr/x/
-
-  ok(sub { 1+1 }, 2);  # success: '2' eq '2'
-  ok(sub { 1+1 }, 3);  # failure: '2' ne '3'
-  ok(0, int(rand(2));  # (just kidding :-)
-
-  my @list = (0,0);
-  ok @list, 3, "\@list=".join(',',@list);      #extra diagnostics
-  ok 'segmentation fault', '/(?i)success/';    #regex match
-
-  skip($feature_is_missing, ...);    #do platform specific test
-
-=head1 DESCRIPTION
-
-L<Test::Harness|Test::Harness> expects to see particular output when it
-executes tests.  This module aims to make writing proper test scripts just
-a little bit easier (and less error prone :-).
-
 =head1 TEST TYPES
 
 =over 4
@@ -221,11 +375,6 @@ notes or change log.
 
 =back
 
-=head1 RETURN VALUE
-
-Both C<ok> and C<skip> return true if their test succeeds and false
-otherwise in a scalar context.
-
 =head1 ONFAIL
 
   BEGIN { plan test => 4, onfail => sub { warn "CALL 911!" } }
@@ -248,13 +397,57 @@ running.  (It is run inside an C<END> block.)  Besides, C<onfail> is
 probably over-kill in most cases.  (Your test code should be simpler
 than the code it is testing, yes?)
 
+
+=head1 BUGS and CAVEATS
+
+ok()'s special handling of subroutine references is an unfortunate
+"feature" that can't be removed due to compatibility.
+
+ok()'s use of string eq can sometimes cause odd problems when comparing
+numbers, especially if you're casting a string to a number:
+
+    $foo = "1.0";
+    ok( $foo, 1 );      # not ok, "1.0" ne 1
+
+Your best bet is to use the single argument form:
+
+    ok( $foo == 1 );    # ok "1.0" == 1
+
+ok()'s special handing of strings which look like they might be
+regexes can also cause unexpected behavior.  An innocent:
+
+    ok( $fileglob, '/path/to/some/*stuff/' );
+
+will fail since Test.pm considers the second argument to a regex.
+Again, best bet is to use the single argument form:
+
+    ok( $fileglob eq '/path/to/some/*stuff/' );
+
+
+=head1 TODO
+
+Add todo().
+
+Allow named tests.
+
+Implement noplan().
+
+
 =head1 SEE ALSO
 
-L<Test::Harness> and, perhaps, test coverage analysis tools.
+L<Test::Simple>, L<Test::More>, L<Test::Harness>, L<Devel::Cover>
+
+L<Test::Unit> is an interesting alternative testing library.
+
+L<Pod::Tests> and L<SelfTest> let you embed tests in code.
+
 
 =head1 AUTHOR
 
-Copyright (c) 1998-1999 Joshua Nathaniel Pritikin.  All rights reserved.
+Copyright (c) 1998-2000 Joshua Nathaniel Pritikin.  All rights reserved.
+Copyright (c) 2001      Michael G Schwern.
+
+Current maintainer, Michael G Schwern <schwern@pobox.com>
 
 This package is free software and is provided "as is" without express
 or implied warranty.  It may be used, redistributed and/or modified