public-inbox-mda

   1 #!/usr/bin/perl -w
   2 # Copyright (C) 2013-2015 all contributors <meta@public-inbox.org>
   3 # License: AGPLv3 or later (https://www.gnu.org/licenses/agpl-3.0.txt)
   4 use strict;
   5 use warnings;
   6 my $usage = 'public-inbox-mda < rfc2822_message';
   7
   8 use Email::Filter;
   9 use Email::MIME;
  10 use Email::Address;
  11 use File::Path::Expand qw/expand_filename/;
  12 use IPC::Run qw(run);
  13 use PublicInbox::MDA;
  14 use PublicInbox::Filter;
  15 use PublicInbox::Config;
  16
  17 # n.b: hopefully we can setup the emergency path without bailing due to
  18 # user error, we really want to setup the emergency destination ASAP
  19 # in case there's bugs in our code or user error.
  20 my $emergency = $ENV{PI_EMERGENCY} || '~/.public-inbox/emergency/';
  21 $emergency = expand_filename($emergency);
  22
  23 # this reads the message from stdin
  24 my $filter = Email::Filter->new(emergency => $emergency);
  25 my $config = PublicInbox::Config->new;
  26
  27 my $recipient = $ENV{ORIGINAL_RECIPIENT};
  28 defined $recipient or die "ORIGINAL_RECIPIENT not defined in ENV\n";
  29 my $dst = $config->lookup($recipient); # first check
  30 defined $dst or exit(1);
  31 my $main_repo = $dst->{mainrepo} or exit(1);
  32 my $filtered; # string dest
  33
  34 if (PublicInbox::MDA->precheck($filter, $dst->{address}) &&
  35     do_spamc($filter->simple, \$filtered)) {
  36         # update our message with SA headers (in case our filter rejects it)
  37         my $msg = Email::MIME->new(\$filtered);
  38         $filtered = undef;
  39         $filter->simple($msg);
  40
  41         my $filter_arg;
  42         my $fcfg = $dst->{filter};
  43         if (!defined $fcfg || $filter eq 'reject') {
  44                 $filter_arg = $filter;
  45         } elsif ($fcfg eq 'scrub') {
  46                 $filter_arg = undef; # the default for legacy versions
  47         } else {
  48                 warn "publicinbox.$dst->{listname}.filter=$fcfg invalid\n";
  49                 warn "must be either 'scrub' or 'reject' (the default)\n";
  50         }
  51
  52         if (PublicInbox::Filter->run($msg, $filter_arg)) {
  53                 # run spamc again on the HTML-free message
  54                 if (do_spamc($msg, \$filtered)) {
  55                         $msg = Email::MIME->new(\$filtered);
  56                         PublicInbox::MDA->set_list_headers($msg, $dst);
  57                         $filter->simple($msg);
  58
  59                         my ($name, $email, $date) =
  60                                         PublicInbox::MDA->author_info($msg);
  61
  62                         END {
  63                                 search_index_sync($main_repo) if ($? == 0);
  64                         };
  65
  66                         local $ENV{GIT_AUTHOR_NAME} = $name;
  67                         local $ENV{GIT_AUTHOR_EMAIL} = $email;
  68                         local $ENV{GIT_AUTHOR_DATE} = $date;
  69                         local $ENV{GIT_COMMITTER_EMAIL} = $recipient;
  70                         local $ENV{GIT_COMMITTER_NAME} = $dst->{listname};
  71
  72                         $filter->pipe(PublicInbox::MDA->cmd, $main_repo);
  73                 }
  74         }
  75 } else {
  76         # Ensure emergency spam gets spamassassin headers.
  77         # This makes it easier to prioritize obvious spam from less obvious
  78         if (defined($filtered) && $filtered ne '') {
  79                 my $drop = Email::MIME->new(\$filtered);
  80                 $filtered = undef;
  81                 $filter->simple($drop);
  82         }
  83 }
  84 exit 0; # goes to emergency
  85
  86 # we depend on "report_safe 0" in /etc/spamassassin/*.cf with --headers
  87 # not using Email::Filter->pipe here since we want the stdout of
  88 # the command even on failure (spamc will set $? on error).
  89 sub do_spamc {
  90         my ($msg, $out) = @_;
  91         eval {
  92                 my $orig = $msg->as_string;
  93                 run([qw/spamc -E --headers/], \$orig, $out);
  94         };
  95
  96         return ($@ || $? || !defined($$out) || $$out eq '') ? 0 : 1;
  97 }
  98
  99 sub search_index_sync {
 100         my ($git_dir) = @_;
 101         eval {
 102                 require PublicInbox::SearchIdx;
 103                 PublicInbox::SearchIdx->new($git_dir, 2)->index_sync;
 104         };
 105 }