]> Sergey Matveev's repositories - public-inbox.git/blob - lib/PublicInbox/LeiUp.pm
lei up: support multiple output folders w/o --all=local
[public-inbox.git] / lib / PublicInbox / LeiUp.pm
1 # Copyright (C) 2021 all contributors <meta@public-inbox.org>
2 # License: AGPL-3.0+ <https://www.gnu.org/licenses/agpl-3.0.txt>
3
4 # "lei up" - updates the result of "lei q --save"
5 package PublicInbox::LeiUp;
6 use strict;
7 use v5.10.1;
8 use PublicInbox::LeiSavedSearch;
9 use parent qw(PublicInbox::IPC);
10
11 sub up1 ($$) {
12         my ($lei, $out) = @_;
13         my $lss = PublicInbox::LeiSavedSearch->up($lei, $out) or return;
14         my $f = $lss->{'-f'};
15         my $mset_opt = $lei->{mset_opt} = { relevance => -2 };
16         $mset_opt->{limit} = $lei->{opt}->{limit} // 10000;
17         my $q = $mset_opt->{q_raw} = $lss->{-cfg}->{'lei.q'} //
18                                 return $lei->fail("lei.q unset in $f");
19         my $lse = $lei->{lse} // die 'BUG: {lse} missing';
20         if (ref($q)) {
21                 $mset_opt->{qstr} = $lse->query_argv_to_string($lse->git, $q);
22         } else {
23                 $lse->query_approxidate($lse->git, $mset_opt->{qstr} = $q);
24         }
25         my $o = $lei->{opt}->{output} = $lss->{-cfg}->{'lei.q.output'} //
26                 return $lei->fail("lei.q.output unset in $f");
27         ref($o) and return $lei->fail("multiple values of lei.q.output in $f");
28         if (defined(my $dd = $lss->{-cfg}->{'lei.q.dedupe'})) {
29                 $lss->translate_dedupe($lei, $dd) or return;
30                 $lei->{opt}->{dedupe} = $dd;
31         }
32         for my $k (qw(only include exclude)) {
33                 my $v = $lss->{-cfg}->get_all("lei.q.$k") // next;
34                 $lei->{opt}->{$k} = $v;
35         }
36         for my $k (qw(external local remote
37                         import-remote import-before threads)) {
38                 my $c = "lei.q.$k";
39                 my $v = $lss->{-cfg}->{$c} // next;
40                 ref($v) and return $lei->fail("multiple values of $c in $f");
41                 $lei->{opt}->{$k} = $v;
42         }
43         $lei->{lss} = $lss; # for LeiOverview->new
44         my $lxs = $lei->lxs_prepare or return;
45         $lei->ale->refresh_externals($lxs, $lei);
46         $lei->_start_query;
47 }
48
49 sub up1_redispatch {
50         my ($lei, $out, $op_p) = @_;
51         my $l = bless { %$lei }, ref($lei);
52         $l->{opt} = { %{$l->{opt}} };
53         delete $l->{sock};
54         $l->{''} = $op_p; # daemon only
55         eval {
56                 $l->qerr("# updating $out");
57                 up1($l, $out);
58                 $l->qerr("# $out done");
59         };
60         $l->err($@) if $@;
61 }
62
63 sub lei_up {
64         my ($lei, @outs) = @_;
65         $lei->{lse} = $lei->_lei_store(1)->search;
66         my $opt = $lei->{opt};
67         $opt->{save} = -1;
68         my @local;
69         if (defined $opt->{all}) {
70                 return $lei->fail("--all and @outs incompatible") if @outs;
71                 length($opt->{mua}//'') and return
72                         $lei->fail('--all and --mua= are incompatible');
73
74                 # supporting IMAP outputs is more involved due to
75                 # git-credential prompts.  TODO: add this in 1.8
76                 $opt->{all} eq 'local' or return
77                         $lei->fail('only --all=local works at the moment');
78                 my @all = PublicInbox::LeiSavedSearch::list($lei);
79                 @local = grep(!m!\Aimaps?://!i, @all);
80         } else {
81                 @local = @outs;
82         }
83         if (scalar(@outs) > 1) {
84                 length($opt->{mua}//'') and return $lei->fail(<<EOM);
85 multiple outputs and --mua= are incompatible
86 EOM
87                 # TODO:
88                 return $lei->fail(<<EOM) if grep(m!\Aimaps?://!i, @outs);
89 multiple destinations only supported for local outputs (FIXME)
90 EOM
91         }
92         if (scalar(@local) > 1) {
93                 $lei->_lei_store->write_prepare($lei); # share early
94                 # daemon mode, re-dispatch into our event loop w/o
95                 # creating an extra fork-level
96                 require PublicInbox::DS;
97                 require PublicInbox::PktOp;
98                 my ($op_c, $op_p) = PublicInbox::PktOp->pair;
99                 for my $o (@local) {
100                         PublicInbox::DS::requeue(sub {
101                                 up1_redispatch($lei, $o, $op_p);
102                         });
103                 }
104                 $lei->event_step_init;
105                 $op_c->{ops} = { '' => [$lei->can('dclose'), $lei] };
106         } else {
107                 up1($lei, $local[0]);
108         }
109 }
110
111 sub _complete_up {
112         my ($lei, @argv) = @_;
113         my $match_cb = $lei->complete_url_prepare(\@argv);
114         map { $match_cb->($_) } PublicInbox::LeiSavedSearch::list($lei);
115 }
116
117 1;