source: trunk/LATMOS-Accounts/lib/LATMOS/Accounts/SyncManager.pm @ 1950

Last change on this file since 1950 was 1824, checked in by nanardon, 8 years ago

Order module to optimize data update

File size: 6.4 KB
Line 
1package LATMOS::Accounts::SyncManager;
2
3use strict;
4use warnings;
5use LATMOS::Accounts::Log;
6use LATMOS::Accounts;
7use Config::IniFiles;
8
9=head1 NAME
10
11LATMOS::Accounts::SyncManager - Routine task manager
12
13=head1 DESCRIPTION
14
15Handle Task process run by L<la-sync-manager>
16
17=head1 FUNCTIONS
18
19=cut
20
21=head2 new($config)
22
23Instaciate object.
24
25C<$config> is a path to an alternative configuration file to default one.
26
27=cut
28
29sub new {
30    my ($class, $config) = @_;
31
32    my $ini = Config::IniFiles->new(
33        -file => join('/', ($config || '/etc/latmos-accounts'),
34            'la-sync-manager.ini'),
35    ) or do {
36        la_log LA_ERR, "Cannot load config";
37        return;
38    };
39
40    foreach my $section (qw(basessynchro refreshexpired updatedyndata)) {
41        if ( !grep {
42            lc($ini->val($_, 'type', '')) eq $section
43            } $ini->Sections ) {
44            $ini->newval("_$section", 'type', $section);
45        }
46    }
47
48    bless {
49        ini => $ini,
50        config => $config,
51        lastrev => 0,
52    }, $class;
53}
54
55=head2 ini
56
57Return a reference to the L<Ini::Files> object handling configuration.
58
59=cut
60
61sub ini { $_[0]->{ini} }
62
63=head2 dbrev
64
65Return the current base revision
66
67=cut
68
69sub dbrev {
70    my ($self) = @_;
71    my $LA = LATMOS::Accounts->new($self->{config}, noacl => 1);
72    my $base = $LA->base;
73    return $base->current_rev;
74}
75
76sub _load_state_ini {
77    my ($self) = @_;
78    my $la = LATMOS::Accounts->new($self->{config}, noacl => 1);
79
80    my $state_file =  $la->val('_default_', 'state_dir', '/');
81    $state_file .= '/la-sync-manager.ini';
82    la_log(LA_DEBUG, "Status file is %s", $state_file);
83    if ($state_file && ! -w $state_file) {
84        # don't exists, we have to create it
85        open(my $handle, '>', $state_file) or do {
86            la_log(LA_ERR, "Cannot open build net status file %s",
87                $state_file);
88            return;
89        };
90        print $handle "[_default_]\n";
91        close($handle);
92    }
93    return Config::IniFiles->new(
94        -file => $state_file
95    );
96}
97
98=head2 get_last_rev($module)
99
100Return the last revision the module succeed
101
102=cut
103
104sub get_last_rev {
105    my ($self, $module) = @_;
106
107    my $ini = $self->_load_state_ini or return(0, 0);
108
109    return ($ini->val($module, 'rev', 0), $ini->val($module, 'time', 0));
110}
111
112=head2 list_modules
113
114List configured task module
115
116=cut
117
118sub list_modules {
119    my ($self) = @_;
120    $self->ini->Sections;
121}
122
123
124=head2 listSortedModules
125
126List configured module ordered for running
127
128=cut
129
130sub listSortedModules {
131    my ($self) = @_;
132
133    my %modules = ();
134
135    foreach my $module ($self->list_modules) {
136        $modules{$module} = 1;
137        my $modtype = $self->ini->val($module, 'type', $module);
138        my $task = LATMOS::Accounts::Task->new(
139            $modtype,
140            config => $self->{config},
141            name   => $module,
142            syncm  => $self,
143        )
144            or do {
145            la_log(LA_ERR, 'Cannot load module %s', $modtype);
146            next;
147        };
148
149        $modules{$module} = $task->order;
150    }
151
152    return sort { $modules{$a} <=> $modules{$b} } keys %modules;
153}
154
155=head2 process_module($module)
156
157Process C<$module>.
158
159=cut
160
161# TODO what is $dbrev, why is it need here ??
162
163sub process_module {
164    my ($self, $module) = @_;
165
166    eval {
167        if (!$self->ini->SectionExists($module)) {
168            la_log LA_ERR, "Cannot run inexistant module %s", $module;
169            return;
170        }
171
172        my $modtype = $self->ini->val($module, 'type', $module);
173        my $task = LATMOS::Accounts::Task->new(
174            $modtype,
175            config => $self->{config},
176            name   => $module,
177            syncm  => $self,
178        )
179            or do {
180            la_log(LA_ERR, 'Cannot load module %s', $modtype);
181            return;
182        };
183        if (!$task->init) {
184            la_log(LA_ERR, 'init() failed for module %s', $module);
185            return;
186        }
187
188        my $currentrev = $self->dbrev;
189        $task->needToBeRun($self, $module) or return 1;
190
191        la_log LA_NOTICE, "Processing sync module %s (%s)", $module, $modtype;
192
193        my $res = $task->run;
194        if (!$res) {
195            my $ini = $self->_load_state_ini or return;
196            $ini->newval($module, 'error', LATMOS::Accounts::Log::lastmessage());
197            la_log LA_ERR, "Task %s did not end successfully", $module;
198            $ini->RewriteConfig;
199        } else {
200            $task->post if ($res);
201            my $ini = $self->_load_state_ini or return;
202
203            $ini->delval($module, 'error');
204            $ini->newval($module, 'rev', $currentrev);
205            my $time = time;
206            $ini->newval($module, 'time', $time);
207            $ini->SetParameterComment(
208                $module, 'time',
209                scalar(localtime(time)),
210            );
211            $ini->RewriteConfig;
212
213            la_log LA_DEBUG, "end process $module";
214        }
215        return $res;
216    };
217
218    if ($@) {
219        la_log(LA_CRIT, 'Fatal Perl Error: %s', $@);
220        return;
221    } else {
222        return 1;
223    }
224}
225
226=head2 reset_module_savepoint($module)
227
228Reset the savepoint for module C<$module> to force it to run at next
229synchronisation.
230
231=cut
232
233sub reset_module_savepoint {
234    my ($self, $module) = @_;
235    if (!$self->ini->SectionExists($module)) {
236        la_log LA_ERR, "Cannot run inexistant module %s", $module;
237        return;
238    }
239
240    my $modtype = $self->ini->val($module, 'type', $module);
241    my $task = LATMOS::Accounts::Task->new(
242        $modtype,
243        config => $self->{config},
244        name   => $module,
245        syncm  => $self,
246    )
247        or do {
248        la_log(LA_ERR, 'Cannot load module %s', $modtype);
249        return;
250    };
251    $task->init or do {
252        la_log LA_ERR, "Cannot init module %s", $_;
253        return;
254    };
255
256    my $ini = $self->_load_state_ini or return;
257
258    $ini->delval($module, 'rev');
259    $ini->newval($module, 'time', 0);
260    $ini->SetParameterComment(
261        $module, 'time',
262        'Reset to 0 the ' . scalar(localtime(time)),
263    );
264
265    $task->reset_savepoint; # Specific reset
266    $ini->RewriteConfig;
267}
268
2691;
270
271__END__
272
273=head1 SEE ALSO
274
275L<LATMOS::Accountsi::Task>
276
277=head1 AUTHOR
278
279Olivier Thauvin, E<lt>olivier.thauvin@latmos.ipsl.frE<gt>
280
281=head1 COPYRIGHT AND LICENSE
282
283Copyright (C) 2012 CNRS SA/CETP/LATMOS
284
285This library is free software; you can redistribute it and/or modify
286it under the same terms as Perl itself, either Perl version 5.10.0 or,
287at your option, any later version of Perl 5 you may have available.
288
289=cut
Note: See TracBrowser for help on using the repository browser.