]> Sergey Matveev's repositories - public-inbox.git/blobdiff - t/lei.t
lei import: initial implementation
[public-inbox.git] / t / lei.t
diff --git a/t/lei.t b/t/lei.t
index 33f47ae4b082a406930ca420f19eacc6efd8bb91..eb824a307f6df70558203a3d4c8c2c44656ab26e 100644 (file)
--- a/t/lei.t
+++ b/t/lei.t
@@ -9,11 +9,15 @@ use PublicInbox::Config;
 use File::Path qw(rmtree);
 use Fcntl qw(SEEK_SET);
 use PublicInbox::Spawn qw(which);
+my $req_sendcmd = 'Socket::MsgHdr or Inline::C missing or unconfigured';
+undef($req_sendcmd) if PublicInbox::Spawn->can('send_cmd4');
+eval { require Socket::MsgHdr; undef $req_sendcmd };
 require_git 2.6;
 require_mods(qw(json DBD::SQLite Search::Xapian));
 my $opt = { 1 => \(my $out = ''), 2 => \(my $err = '') };
 my ($home, $for_destroy) = tmpdir();
 my $err_filter;
+my $curl = which('curl');
 my @onions = qw(http://hjrcffqmbrq6wope.onion/meta/
        http://czquwvybam4bgbro.onion/meta/
        http://ou63pmih66umazou.onion/meta/);
@@ -39,7 +43,7 @@ local $ENV{XDG_RUNTIME_DIR} = "$home/xdg_run";
 local $ENV{HOME} = $home;
 local $ENV{FOO} = 'BAR';
 mkdir "$home/xdg_run", 0700 or BAIL_OUT "mkdir: $!";
-my $home_trash = [ "$home/.local", "$home/.config" ];
+my $home_trash = [ "$home/.local", "$home/.config", "$home/junk" ];
 my $cleanup = sub { rmtree([@$home_trash, @_]) };
 my $config_file = "$home/.config/lei/config";
 my $store_dir = "$home/.local/share/lei";
@@ -162,26 +166,20 @@ my $setup_publicinboxes = sub {
 my $test_external_remote = sub {
        my ($url, $k) = @_;
 SKIP: {
-       my $nr = 4;
+       my $nr = 5;
        skip "$k unset", $nr if !$url;
-       which('curl') or skip 'no curl', $nr;
+       skip $req_sendcmd, $nr if $req_sendcmd;
+       $curl or skip 'no curl', $nr;
        which('torsocks') or skip 'no torsocks', $nr if $url =~ m!\.onion/!;
-       $lei->('ls-external');
-       for my $e (split(/^/ms, $out)) {
-               $e =~ s/\s+boost.*//s;
-               $lei->('forget-external', '-q', $e) or
-                       fail "error forgetting $e: $err"
-       }
-       $lei->('add-external', $url);
        my $mid = '20140421094015.GA8962@dcvr.yhbt.net';
-       ok($lei->('q', '-q', "m:$mid"), "query $url");
+       my @cmd = ('q', '--only', $url, '-q', "m:$mid");
+       ok($lei->(@cmd), "query $url");
        is($err, '', "no errors on $url");
        my $res = $json->decode($out);
        is($res->[0]->{'m'}, "<$mid>", "got expected mid from $url");
-       ok($lei->('q', '-q', "m:$mid", 'd:..20101002'), 'no results, no error');
+       ok($lei->(@cmd, 'd:..20101002'), 'no results, no error');
        is($err, '', 'no output on 404, matching local FS behavior');
        is($out, "[null]\n", 'got null results');
-       $lei->('forget-external', $url);
 } # /SKIP
 }; # /sub
 
@@ -239,6 +237,9 @@ my $test_external = sub {
                                "completed partial URL $u on q $qo");
                }
        }
+       ok($lei->(qw(_complete lei add-external), 'https://'),
+               'add-external hostname completion');
+       is($out, "https://example.com/\n", 'completed up to hostname');
 
        $lei->('ls-external');
        like($out, qr!https://example\.com/ibx/!s, 'added canonical URL');
@@ -248,6 +249,8 @@ my $test_external = sub {
        $lei->('ls-external');
        unlike($out, qr!https://example\.com/ibx/!s, 'removed canonical URL');
 
+SKIP: {
+       skip $req_sendcmd, 52 if $req_sendcmd;
        ok(!$lei->(qw(q s:prefix -o /dev/null -f maildir)), 'bad maildir');
        like($err, qr!/dev/null exists and is not a directory!,
                'error shown');
@@ -278,6 +281,25 @@ my $test_external = sub {
        my $pretty = $json->decode($out);
        is_deeply($res, $pretty, '--pretty is identical after decode');
 
+       {
+               open my $fh, '+>', undef or BAIL_OUT $!;
+               $fh->autoflush(1);
+               print $fh 's:use' or BAIL_OUT $!;
+               seek($fh, 0, SEEK_SET) or BAIL_OUT $!;
+               ok($lei->([qw(q -q --stdin)], undef, { %$opt, 0 => $fh }),
+                               '--stdin on regular file works');
+               like($out, qr/use boolean prefix/, '--stdin on regular file');
+       }
+       {
+               pipe(my ($r, $w)) or BAIL_OUT $!;
+               print $w 's:use' or BAIL_OUT $!;
+               close $w or BAIL_OUT $!;
+               ok($lei->([qw(q -q --stdin)], undef, { %$opt, 0 => $r }),
+                               '--stdin on pipe file works');
+               like($out, qr/use boolean prefix/, '--stdin on pipe');
+       }
+       ok(!$lei->(qw(q -q --stdin s:use)), "--stdin and argv don't mix");
+
        for my $fmt (qw(ldjson ndjson jsonl)) {
                $lei->('q', '-f', $fmt, 's:use boolean prefix');
                is($out, $json->encode($pretty->[0])."\n", "-f $fmt");
@@ -326,6 +348,7 @@ my $test_external = sub {
                $url = $e{$k} if $url eq '1';
                $test_external_remote->($url, $k);
        }
+       }; # /SKIP
 };
 
 my $test_completion = sub {
@@ -355,12 +378,39 @@ my $test_completion = sub {
        }
 };
 
+my $test_fail = sub {
+SKIP: {
+       skip $req_sendcmd, 3 if $req_sendcmd;
+       $lei->(qw(q --only http://127.0.0.1:99999/bogus/ t:m));
+       is($? >> 8, 3, 'got curl exit for bogus URL');
+       $lei->(qw(q --only http://127.0.0.1:99999/bogus/ t:m -o), "$home/junk");
+       is($? >> 8, 3, 'got curl exit for bogus URL with Maildir');
+       is($out, '', 'no output');
+}; # /SKIP
+};
+
+my $test_import = sub {
+       $cleanup->();
+       ok($lei->(qw(q s:boolean)), 'search miss before import');
+       unlike($out, qr/boolean/i, 'no results, yet');
+       open my $fh, '<', 't/data/0001.patch' or BAIL_OUT $!;
+       ok($lei->([qw(import -f eml -)], undef, { %$opt, 0 => $fh }),
+               'import single file from stdin');
+       close $fh;
+       ok($lei->(qw(q s:boolean)), 'search hit after import');
+       ok($lei->(qw(import -f eml), 't/data/message_embed.eml'),
+               'import single file by path');
+       $cleanup->();
+};
+
 my $test_lei_common = sub {
        $test_help->();
        $test_config->();
        $test_init->();
        $test_external->();
        $test_completion->();
+       $test_fail->();
+       $test_import->();
 };
 
 if ($ENV{TEST_LEI_ONESHOT}) {
@@ -372,10 +422,7 @@ if ($ENV{TEST_LEI_ONESHOT}) {
        $test_lei_common->();
 } else {
 SKIP: { # real socket
-       eval { require Socket::MsgHdr; 1 } // do {
-               require PublicInbox::Spawn;
-               PublicInbox::Spawn->can('send_cmd4');
-       } // skip 'Socket::MsgHdr or Inline::C missing or unconfigured', 115;
+       skip $req_sendcmd, 115 if $req_sendcmd;
        local $ENV{XDG_RUNTIME_DIR} = "$home/xdg_run";
        my $sock = "$ENV{XDG_RUNTIME_DIR}/lei/5.seq.sock";
        my $err_log = "$ENV{XDG_RUNTIME_DIR}/lei/errors.log";