t/index-git-times.t

   1 #!perl -w
   2 # Copyright (C) 2020 all contributors <meta@public-inbox.org>
   3 # License: AGPL-3.0+ <https://www.gnu.org/licenses/agpl-3.0.txt>
   4 use strict;
   5 use v5.10.1;
   6 use Test::More;
   7 use PublicInbox::TestCommon;
   8 use PublicInbox::Import;
   9 use PublicInbox::Config;
  10 use PublicInbox::Admin;
  11 use File::Path qw(remove_tree);
  12
  13 require_mods(qw(DBD::SQLite Search::Xapian));
  14 use_ok 'PublicInbox::Over';
  15
  16 my ($tmpdir, $for_destroy) = tmpdir();
  17 local $ENV{PI_CONFIG} = "$tmpdir/cfg";
  18 my $v1dir = "$tmpdir/v1";
  19 my $addr = 'x@example.com';
  20 run_script(['-init', '--indexlevel=medium', 'v1', $v1dir,
  21                 'http://example.com/x', $addr])
  22         or die "init failed";
  23
  24 {
  25         my $data = <<'EOF';
  26 blob
  27 mark :1
  28 data 133
  29 From: timeless <t@example.com>
  30 To: x <x@example.com>
  31 Subject: can I haz the time?
  32 Message-ID: <19700101000000-1234@example.com>
  33
  34 plz
  35
  36 reset refs/heads/master
  37 commit refs/heads/master
  38 mark :2
  39 author timeless <t@example.com> 749520000 +0100
  40 committer x <x@example.com> 1285977600 -0100
  41 data 20
  42 can I haz the time?
  43 M 100644 :1 53/256f6177504c2878d3a302ef5090dacf5e752c
  44
  45 EOF
  46         pipe(my($r, $w)) or die;
  47         length($data) <= 512 or die "data too large to fit in POSIX pipe";
  48         print $w $data or die;
  49         close $w or die;
  50         my $cmd = ['git', "--git-dir=$v1dir", 'fast-import', '--quiet'];
  51         PublicInbox::Import::run_die($cmd, undef, { 0 => $r });
  52 }
  53
  54 run_script(['-index', '--skip-docdata', $v1dir]) or die 'v1 index failed';
  55
  56 my $smsg;
  57 {
  58         my $cfg = PublicInbox::Config->new;
  59         my $ibx = $cfg->lookup($addr);
  60         my $lvl = PublicInbox::Admin::detect_indexlevel($ibx);
  61         is($lvl, 'medium', 'indexlevel detected');
  62         is($ibx->{-skip_docdata}, 1, '--skip-docdata flag set on -index');
  63         $smsg = $ibx->over->get_art(1);
  64         is($smsg->{ds}, 749520000, 'datestamp from git author time');
  65         is($smsg->{ts}, 1285977600, 'timestamp from git committer time');
  66         my $res = $ibx->search->query("m:$smsg->{mid}");
  67         is(scalar @$res, 1, 'got one result for m:');
  68         is($res->[0]->{ds}, $smsg->{ds}, 'Xapian stored datestamp');
  69         $res = $ibx->search->query('d:19931002..19931002');
  70         is(scalar @$res, 1, 'got one result for d:');
  71         is($res->[0]->{ds}, $smsg->{ds}, 'Xapian search on datestamp');
  72 }
  73 SKIP: {
  74         require_git(2.6, 1) or skip('git 2.6+ required for v2', 10);
  75         my $v2dir = "$tmpdir/v2";
  76         run_script(['-convert', $v1dir, $v2dir]) or die 'v2 conversion failed';
  77
  78         my $check_v2 = sub {
  79                 my $ibx = PublicInbox::Inbox->new({inboxdir => $v2dir,
  80                                 address => $addr});
  81                 my $lvl = PublicInbox::Admin::detect_indexlevel($ibx);
  82                 is($lvl, 'medium', 'indexlevel detected after convert');
  83                 is($ibx->{-skip_docdata}, 1,
  84                         '--skip-docdata preserved after convert');
  85                 my $v2smsg = $ibx->over->get_art(1);
  86                 is($v2smsg->{ds}, $smsg->{ds},
  87                         'v2 datestamp from git author time');
  88                 is($v2smsg->{ts}, $smsg->{ts},
  89                         'v2 timestamp from git committer time');
  90                 my $res = $ibx->search->query("m:$smsg->{mid}");
  91                 is($res->[0]->{ds}, $smsg->{ds}, 'Xapian stored datestamp');
  92                 $res = $ibx->search->query('d:19931002..19931002');
  93                 is(scalar @$res, 1, 'got one result for d:');
  94                 is($res->[0]->{ds}, $smsg->{ds}, 'Xapian search on datestamp');
  95         };
  96         $check_v2->();
  97         remove_tree($v2dir);
  98
  99         # test non-parallelized conversion
 100         run_script(['-convert', '-j0', $v1dir, $v2dir]) or
 101                 die 'v2 conversion failed';
 102         $check_v2->();
 103 }
 104
 105 done_testing;