]> Sergey Matveev's repositories - public-inbox.git/blob - t/init.t
init: implement locking
[public-inbox.git] / t / init.t
1 # Copyright (C) 2014-2019 all contributors <meta@public-inbox.org>
2 # License: AGPL-3.0+ <https://www.gnu.org/licenses/agpl-3.0.txt>
3 use strict;
4 use warnings;
5 use Test::More;
6 use PublicInbox::Config;
7 use File::Temp qw/tempdir/;
8 require './t/common.perl';
9 my $tmpdir = tempdir('pi-init-XXXXXX', TMPDIR => 1, CLEANUP => 1);
10 use constant pi_init => 'blib/script/public-inbox-init';
11 use PublicInbox::Import;
12 use File::Basename;
13 use PublicInbox::Spawn qw(spawn);
14 use Cwd qw(getcwd);
15 open my $null, '>>', '/dev/null';
16 my $rdr = { 2 => fileno($null) };
17 sub quiet_fail {
18         my ($cmd, $msg) = @_;
19         # run_die doesn't take absolute paths:
20         my $path = $ENV{PATH};
21         if (index($cmd->[0], '/') >= 0) {
22                 my ($dir, $base) = ($cmd->[0] =~ m!\A(.+)/([^/]+)\z!);
23                 $path = "$dir:$path";
24                 $cmd->[0] = $base;
25         }
26         local $ENV{PATH} = $path;
27         eval { PublicInbox::Import::run_die($cmd, undef, $rdr) };
28         isnt($@, '', $msg);
29 }
30
31 {
32         local $ENV{PI_DIR} = "$tmpdir/.public-inbox/";
33         my $cfgfile = "$ENV{PI_DIR}/config";
34         my @cmd = (pi_init, 'blist', "$tmpdir/blist",
35                    qw(http://example.com/blist blist@example.com));
36         is(system(@cmd), 0, 'public-inbox-init OK');
37
38         is(read_indexlevel('blist'), '', 'indexlevel unset by default');
39
40         ok(-e $cfgfile, "config exists, now");
41         is(system(@cmd), 0, 'public-inbox-init OK (idempotent)');
42
43         chmod 0666, $cfgfile or die "chmod failed: $!";
44         @cmd = (pi_init, 'clist', "$tmpdir/clist",
45                    qw(http://example.com/clist clist@example.com));
46         is(system(@cmd), 0, 'public-inbox-init clist OK');
47         is((stat($cfgfile))[2] & 07777, 0666, "permissions preserved");
48
49         @cmd = (pi_init, 'clist', '-V2', "$tmpdir/clist",
50                    qw(http://example.com/clist clist@example.com));
51         quiet_fail(\@cmd, 'attempting to init V2 from V1 fails');
52
53         open my $lock, '+>', "$cfgfile.lock" or die;
54         @cmd = (getcwd(). '/'. pi_init, 'lock', "$tmpdir/lock",
55                 qw(http://example.com/lock lock@example.com));
56         ok(-e "$cfgfile.lock", 'lock exists');
57         my $pid = spawn(\@cmd, undef, $rdr);
58         is(waitpid($pid, 0), $pid, 'lock init failed');
59         is($? >> 8, 255, 'got expected exit code on lock failure');
60         ok(unlink("$cfgfile.lock"),
61                 '-init did not unlink lock on failure');
62 }
63
64 SKIP: {
65         foreach my $mod (qw(DBD::SQLite Search::Xapian::WritableDatabase)) {
66                 eval "require $mod";
67                 skip "$mod missing for v2", 2 if $@;
68         }
69         require_git(2.6, 1) or skip "git 2.6+ required", 2;
70         local $ENV{PI_DIR} = "$tmpdir/.public-inbox/";
71         my $cfgfile = "$ENV{PI_DIR}/config";
72         my @cmd = (pi_init, '-V2', 'v2list', "$tmpdir/v2list",
73                    qw(http://example.com/v2list v2list@example.com));
74         is(system(@cmd), 0, 'public-inbox-init -V2 OK');
75         ok(-d "$tmpdir/v2list", 'v2list directory exists');
76         ok(-f "$tmpdir/v2list/msgmap.sqlite3", 'msgmap exists');
77         ok(-d "$tmpdir/v2list/all.git", 'catch-all.git directory exists');
78         @cmd = (pi_init, 'v2list', "$tmpdir/v2list",
79                    qw(http://example.com/v2list v2list@example.com));
80         is(system(@cmd), 0, 'public-inbox-init is idempotent');
81         ok(! -d "$tmpdir/public-inbox" && !-d "$tmpdir/objects",
82                 'idempotent invocation w/o -V2 does not make inbox v1');
83         is(read_indexlevel('v2list'), '', 'indexlevel unset by default');
84
85         @cmd = (pi_init, 'v2list', "-V1", "$tmpdir/v2list",
86                    qw(http://example.com/v2list v2list@example.com));
87         quiet_fail(\@cmd, 'initializing V2 as V1 fails');
88
89         foreach my $lvl (qw(medium basic)) {
90                 @cmd = (pi_init, "v2$lvl", '-V2', '-L', $lvl,
91                         "$tmpdir/v2$lvl", "http://example.com/v2$lvl",
92                         "v2$lvl\@example.com");
93                 is(system(@cmd), 0, "-init -L $lvl");
94                 is(read_indexlevel("v2$lvl"), $lvl, "indexlevel set to '$lvl'");
95         }
96
97         # loop for idempotency
98         for (1..2) {
99                 @cmd = (pi_init, '-V2', '-S1', 'skip1', "$tmpdir/skip1",
100                            qw(http://example.com/skip1 skip1@example.com));
101                 is(system(@cmd), 0, "--skip-epoch 1");
102                 my $gits = [ glob("$tmpdir/skip1/git/*.git") ];
103                 is_deeply($gits, ["$tmpdir/skip1/git/1.git"], 'skip OK');
104         }
105
106
107         @cmd = (pi_init, '-V2', '--skip-epoch=2', 'skip2', "$tmpdir/skip2",
108                    qw(http://example.com/skip2 skip2@example.com));
109         is(system(@cmd), 0, "--skip-epoch 2");
110         my $gits = [ glob("$tmpdir/skip2/git/*.git") ];
111         is_deeply($gits, ["$tmpdir/skip2/git/2.git"], 'skipping 2 works, too');
112 }
113
114 done_testing();
115
116 sub read_indexlevel {
117         my ($inbox) = @_;
118         local $ENV{GIT_CONFIG} = "$ENV{PI_DIR}/config";
119         chomp(my $lvl = `git config publicinbox.$inbox.indexlevel`);
120         $lvl;
121 }