]> Sergey Matveev's repositories - public-inbox.git/blobdiff - t/mda.t
mda, watch: wire up List-ID header support
[public-inbox.git] / t / mda.t
diff --git a/t/mda.t b/t/mda.t
index ad6a09139c6f74503411a513f0b405736d99bbba..3cab590b78f9a9d2728c213706bc229e3ba81aad 100644 (file)
--- a/t/mda.t
+++ b/t/mda.t
@@ -1,14 +1,14 @@
-# Copyright (C) 2014-2015 all contributors <meta@public-inbox.org>
-# License: AGPLv3 or later (https://www.gnu.org/licenses/agpl-3.0.txt)
+# Copyright (C) 2014-2019 all contributors <meta@public-inbox.org>
+# License: AGPL-3.0+ <https://www.gnu.org/licenses/agpl-3.0.txt>
 use strict;
 use warnings;
 use Test::More;
 use Email::MIME;
-use Email::Filter;
 use File::Temp qw/tempdir/;
-use Cwd;
-use IPC::Run qw(run);
+use Cwd qw(getcwd);
 use PublicInbox::MID qw(mid2path);
+eval { require IPC::Run };
+plan skip_all => "missing IPC::Run for t/mda.t" if $@;
 
 my $mda = "blib/script/public-inbox-mda";
 my $learn = "blib/script/public-inbox-learn";
@@ -23,7 +23,7 @@ my $fail_bin = getcwd()."/t/fail-bin";
 my $fail_path = "$fail_bin:$ENV{PATH}"; # for spamc spam mock
 my $addr = 'test-public@example.com';
 my $cfgpfx = "publicinbox.test";
-my $failbox = "$home/fail.mbox";
+my $faildir = "$home/faildir/";
 my $mime;
 
 {
@@ -48,19 +48,18 @@ my $mime;
 
 local $ENV{GIT_COMMITTER_NAME} = eval {
        use PublicInbox::MDA;
+       use PublicInbox::Address;
        use Encode qw/encode/;
        my $mbox = 't/utf8.mbox';
        open(my $fh, '<', $mbox) or die "failed to open mbox: $mbox\n";
        my $str = eval { local $/; <$fh> };
        close $fh;
-       my $msg = Email::Filter->new(data => $str);
-       $msg = Email::MIME->new($msg->simple->as_string);
+       my $msg = Email::MIME->new($str);
 
        my $from = $msg->header('From');
-       my @from = Email::Address->parse($from);
-       my $author = $from[0]->name;
-       my $email = $from[0]->address;
-       my $date = $msg ->header('Date');
+       my ($author) = PublicInbox::Address::names($from);
+       my ($email) = PublicInbox::Address::emails($from);
+       my $date = $msg->header('Date');
 
        is('El&#233;anor',
                encode('us-ascii', my $tmp = $author, Encode::HTMLCREF),
@@ -74,7 +73,7 @@ die $@ if $@;
 
 {
        my $good_rev;
-       local $ENV{PI_EMERGENCY} = $failbox;
+       local $ENV{PI_EMERGENCY} = $faildir;
        local $ENV{HOME} = $home;
        local $ENV{ORIGINAL_RECIPIENT} = $addr;
        my $simple = Email::Simple->new(<<EOF);
@@ -91,7 +90,7 @@ EOF
        # ensure successful message delivery
        {
                local $ENV{PATH} = $main_path;
-               run([$mda], \$in);
+               IPC::Run::run([$mda], \$in);
                my $rev = `git --git-dir=$maindir rev-list HEAD`;
                like($rev, qr/\A[a-f0-9]{40}/, "good revision committed");
                chomp $rev;
@@ -105,12 +104,14 @@ EOF
 
        # ensure failures work, fail with bad spamc
        {
-               ok(!-e $failbox, "nothing in PI_EMERGENCY before");
+               my @prev = <$faildir/new/*>;
+               is(scalar @prev, 0 , "nothing in PI_EMERGENCY before");
                local $ENV{PATH} = $fail_path;
-               run([$mda], \$in);
+               IPC::Run::run([$mda], \$in);
                my @revs = `git --git-dir=$maindir rev-list HEAD`;
                is(scalar @revs, 1, "bad revision not committed");
-               ok(-s $failbox > 0, "PI_EMERGENCY is written to");
+               my @new = <$faildir/new/*>;
+               is(scalar @new, 1, "PI_EMERGENCY is written to");
        }
 
        fail_bad_header($good_rev, "bad recipient", <<"");
@@ -160,7 +161,7 @@ Date: deadbeef
 
 # spam training
 {
-       local $ENV{PI_EMERGENCY} = $failbox;
+       local $ENV{PI_EMERGENCY} = $faildir;
        local $ENV{HOME} = $home;
        local $ENV{ORIGINAL_RECIPIENT} = $addr;
        local $ENV{PATH} = $main_path;
@@ -178,7 +179,7 @@ EOF
 
        {
                # deliver the spam message, first
-               run([$mda], \$in);
+               IPC::Run::run([$mda], \$in);
                my $path = mid2path($mid);
                my $msg = `git --git-dir=$maindir cat-file blob HEAD:$path`;
                like($msg, qr/\Q$mid\E/, "message delivered");
@@ -186,16 +187,17 @@ EOF
                # now train it
                local $ENV{GIT_AUTHOR_EMAIL} = 'trainer@example.com';
                local $ENV{GIT_COMMITTER_EMAIL} = 'trainer@example.com';
-               run([$learn, "spam"], \$msg);
+               local $ENV{GIT_COMMITTER_NAME} = undef;
+               IPC::Run::run([$learn, "spam"], \$msg);
                is($?, 0, "no failure from learning spam");
-               run([$learn, "spam"], \$msg);
+               IPC::Run::run([$learn, "spam"], \$msg);
                is($?, 0, "no failure from learning spam idempotently");
        }
 }
 
 # train ham message
 {
-       local $ENV{PI_EMERGENCY} = $failbox;
+       local $ENV{PI_EMERGENCY} = $faildir;
        local $ENV{HOME} = $home;
        local $ENV{ORIGINAL_RECIPIENT} = $addr;
        local $ENV{PATH} = $main_path;
@@ -216,12 +218,12 @@ EOF
        local $ENV{GIT_AUTHOR_EMAIL} = 'trainer@example.com';
        local $ENV{GIT_COMMITTER_EMAIL} = 'trainer@example.com';
 
-       run([$learn, "ham"], \$in);
+       IPC::Run::run([$learn, "ham"], \$in);
        is($?, 0, "learned ham without failure");
        my $path = mid2path($mid);
        my $msg = `git --git-dir=$maindir cat-file blob HEAD:$path`;
        like($msg, qr/\Q$mid\E/, "ham message delivered");
-       run([$learn, "ham"], \$in);
+       IPC::Run::run([$learn, "ham"], \$in);
        is($?, 0, "learned ham idempotently ");
 
        # ensure trained email is filtered, too
@@ -256,7 +258,7 @@ EOF
 
        {
                $in = $mime->as_string;
-               run([$learn, "ham"], \$in);
+               IPC::Run::run([$learn, "ham"], \$in);
                is($?, 0, "learned ham without failure");
                my $path = mid2path($mid);
                $msg = `git --git-dir=$maindir cat-file blob HEAD:$path`;
@@ -265,72 +267,47 @@ EOF
        }
 }
 
-# faildir - emergency destination is maildir
+# List-ID based delivery
 {
-       my $faildir= "$home/faildir/";
        local $ENV{PI_EMERGENCY} = $faildir;
        local $ENV{HOME} = $home;
-       local $ENV{ORIGINAL_RECIPIENT} = $addr;
-       local $ENV{PATH} = $fail_path;
-       my $in = <<EOF;
-From: Faildir <faildir\@example.com>
+       local $ENV{ORIGINAL_RECIPIENT} = undef;
+       local $ENV{PATH} = $main_path;
+       my $list_id = 'foo.example.com';
+       my $mid = 'list-id-delivery@example.com';
+       my $simple = Email::Simple->new(<<EOF);
+From: user <user\@example.com>
 To: You <you\@example.com>
 Cc: $addr
-Message-ID: <faildir\@example.com>
-Subject: faildir subject
-Date: Thu, 01 Jan 1970 00:00:00 +0000
-
-EOF
-       run([$mda], \$in);
-       ok(-d $faildir, "emergency exists");
-       my @new = glob("$faildir/new/*");
-       is(scalar(@new), 1, "message delivered");
-       is(unlink(@new), 1, "removed emergency message");
-
-       local $ENV{PATH} = $main_path;
-       $in = <<EOF;
-From: Faildir <faildir\@example.com>
-To: $addr
-Content-Type: text/html
-Message-ID: <faildir\@example.com>
-Subject: faildir subject
+Message-ID: <$mid>
+List-Id: <$list_id>
+Subject: this message will be trained as spam
 Date: Thu, 01 Jan 1970 00:00:00 +0000
 
-<html><body>bad</body></html>
 EOF
-       my $out = '';
-       my $err = '';
-       run([$mda], \$in, \$out, \$err);
-       isnt($?, 0, "mda exited with failure");
-       is(length $out, 0, 'nothing in stdout');
-       isnt(length $err, 0, 'error message in stderr');
-
-       @new = glob("$faildir/new/*");
-       is(scalar(@new), 0, "new message did not show up");
-
-       # reject multipart again
-       $in = $mime->as_string;
-       $err = '';
-       run([$mda], \$in, \$out, \$err);
-       isnt($?, 0, "mda exited with failure");
-       is(length $out, 0, 'nothing in stdout');
-       isnt(length $err, 0, 'error message in stderr');
-       @new = glob("$faildir/new/*");
-       is(scalar(@new), 0, "new message did not show up");
+       system(qw(git config --file), $pi_config, "$cfgpfx.listid", $list_id);
+       $? == 0 or die "failed to set listid $?";
+       my $in = $simple->as_string;
+       IPC::Run::run([$mda], \$in);
+       is($?, 0, 'mda OK with List-Id match');
+       my $path = mid2path($mid);
+       my $msg = `git --git-dir=$maindir cat-file blob HEAD:$path`;
+       like($msg, qr/\Q$list_id\E/, 'delivered message w/ List-ID matches');
 }
 
 done_testing();
 
 sub fail_bad_header {
        my ($good_rev, $msg, $in) = @_;
-       open my $fh, '>', $failbox or die "failed to open $failbox: $!\n";
-       close $fh or die "failed to close $failbox: $!\n";
+       my @f = glob("$faildir/*/*");
+       unlink @f if @f;
        my ($out, $err) = ("", "");
        local $ENV{PATH} = $main_path;
-       run([$mda], \$in, \$out, \$err);
+       IPC::Run::run([$mda], \$in, \$out, \$err);
        my $rev = `git --git-dir=$maindir rev-list HEAD`;
        chomp $rev;
        is($rev, $good_rev, "bad revision not commited ($msg)");
-       ok(-s $failbox > 0, "PI_EMERGENCY is written to ($msg)");
+       @f = glob("$faildir/*/*");
+       is(scalar @f, 1, "faildir written to");
        [ $in, $out, $err ];
 }