File Coverage

blib/lib/File/Rsync/Mirror/Recentfile/Done.pm
Criterion Covered Total %
statement 142 165 86.0
branch 64 86 74.4
condition 31 36 86.1
subroutine 16 16 100.0
pod 5 5 100.0
total 258 308 83.7


line stmt bran cond sub pod time code
1             package File::Rsync::Mirror::Recentfile::Done;
2              
3             # use warnings;
4 8     8   521 use strict;
  8         9  
  8         275  
5              
6 8     8   45 use File::Rsync::Mirror::Recentfile::FakeBigFloat qw(:all);
  8         9  
  8         1862  
7              
8             =encoding utf-8
9              
10             =head1 NAME
11              
12             File::Rsync::Mirror::Recentfile::Done - intervals of already rsynced timespans
13              
14             =cut
15              
16 8     8   47 use version; our $VERSION = qv('0.0.8');
  8         14  
  8         61  
17              
18             =head1 SYNOPSIS
19              
20             my $done = File::Rsync::Mirror::Recentfile::Done->new;
21             $done->register ( $recent_events, [3,4,5,9] ); # registers elements 3-5 and 9
22             my $boolean = $done->covered ( $epoch );
23              
24             =head1 DESCRIPTION
25              
26             Keeping track of already rsynced timespans.
27              
28             =head1 EXPORT
29              
30             No exports.
31              
32             =head1 CONSTRUCTORS
33              
34             =head2 my $obj = CLASS->new(%hash)
35              
36             Constructor. On every argument pair the key is a method name and the
37             value is an argument to that method name.
38              
39             =cut
40              
41             sub new {
42 36     36 1 10636 my($class, @args) = @_;
43 36         79 my $self = bless {}, $class;
44 36         118 while (@args) {
45 0         0 my($method,$arg) = splice @args, 0, 2;
46 0         0 $self->$method($arg);
47             }
48 36         96 return $self;
49             }
50              
51             =head1 ACCESSORS
52              
53             =cut
54              
55             my @accessors;
56              
57             BEGIN {
58 8     8   2186 @accessors = (
59             "__intervals",
60             "_logfile", # undocced: a small yaml dump appended on every change
61             "_rfinterval", # undocced: the interval of the holding rf
62             );
63              
64 8         55 my @pod_lines =
65 8         22 split /\n/, <<'=cut'; push @accessors, grep {s/^=item\s+//} @pod_lines; }
  64         329  
66              
67             =over 4
68              
69             =item verbose
70              
71             Boolean to turn on a bit verbosity.
72              
73             =back
74              
75             =cut
76              
77 8     8   47 use accessors @accessors;
  8         16  
  8         68  
78              
79             =head1 METHODS
80              
81             =head2 $boolean = $obj->covered ( $epoch1, $epoch2 )
82              
83             =head2 $boolean = $obj->covered ( $epoch )
84              
85             The first form returns true if both timestamps $epoch1 and $epoch2 in
86             floating point notation have been registered within one interval,
87             otherwise false.
88              
89             The second form returns true if this timestamp has been registered.
90              
91             =cut
92             sub _is_sorted {
93 3372     3372   2888 my($self,$ivs) = @_;
94 3372         2374 my $Lup;
95 3372         2501 my $is_sorted = 1;
96 3372         5509 for my $i (0..$#$ivs) {
97 3992 100       5263 if (defined $Lup) {
98 620 50       1157 if (_bigfloatge ($ivs->[$i][0],$Lup)) {
99 0         0 warn "Warning (may be harmless): F:R:M:R:Done object contains unsorted internal data";
100 0         0 $DB::single++;
101 0         0 return 0;
102             }
103             }
104 3992         5245 $Lup = $ivs->[$i][0];
105             }
106 3372         4077 return $is_sorted;
107             }
108             sub covered {
109 3990     3990 1 4367 my($self, $epoch_high, $epoch_low) = @_;
110 3990 50       6821 die "Alert: covered() called without or with undefined first argument" unless defined $epoch_high;
111 3990         5603 my $intervals = $self->_intervals;
112 3990 100       6998 return unless @$intervals;
113 3372 100       4702 if (defined $epoch_low) {
114 44 50       160 ($epoch_high,$epoch_low) = ($epoch_low,$epoch_high) if _bigfloatgt($epoch_low,$epoch_high);
115             }
116 3372         4448 my $is_sorted = $self->_is_sorted($intervals);
117 3372         4282 for my $iv (@$intervals) {
118 3988         4848 my($upper,$lower) = @$iv; # may be the same
119 3988 100       5636 if (defined $epoch_low) {
120 54         63 my $goodbound = 0;
121 54         75 for my $e ($epoch_high,$epoch_low) {
122 108 100 100     771 $goodbound++ if
      100        
      66        
123             $e eq $upper || $e eq $lower || (_bigfloatlt($e,$upper) && _bigfloatgt($e,$lower));
124             }
125 54 100       201 return 1 if $goodbound > 1;
126             } else {
127 3934 100       7434 if ( _bigfloatle ( $epoch_high, $upper ) ) {
    50          
128 3742 100       5811 if ( _bigfloatge ( $epoch_high, $lower )) {
129 1072         2920 return 1; # "between"
130             }
131             } elsif ($is_sorted) {
132 192         427 return 0; # no chance anymore
133             }
134             }
135             }
136 2083         4084 return 0;
137             }
138              
139             =head2 (void) $obj1->merge ( $obj2 )
140              
141             Integrates all intervals in $obj2 into $obj1. Overlapping intervals
142             are conflated/folded/consolidated. Sort order is preserved as decreasing.
143              
144             =cut
145             sub merge {
146 66     66 1 3378 my($self, $other) = @_;
147 66         128 my $intervals = $self->_intervals;
148 66         109 my $ointervals = $other->_intervals;
149 66         133 OTHER: for my $oiv (@$ointervals) {
150 87         77 my $splicepos;
151 87 100       153 if (@$intervals) {
152 79         130 SELF: for my $i (0..$#$intervals) {
153 123         139 my $iv = $intervals->[$i];
154 123 100       261 if ( _bigfloatlt ($oiv->[0],$iv->[1]) ) {
155             # both oiv lower than iv => next
156 78         88 next SELF;
157             }
158 45 100       127 if ( _bigfloatgt ($oiv->[1],$iv->[0]) ) {
159             # both oiv greater than iv => insert
160 33         25 $splicepos = $i;
161 33         36 last SELF;
162             }
163             # larger(left-iv,left-oiv) becomes left, smaller(right-iv,right-oiv) becomes right
164 12         53 $iv->[0] = _bigfloatmax ($oiv->[0],$iv->[0]);
165 12         55 $iv->[1] = _bigfloatmin ($oiv->[1],$iv->[1]);
166 12         55 next OTHER;
167             }
168 67 100       99 unless (defined $splicepos) {
169 34 50       59 if ( _bigfloatlt ($oiv->[0], $intervals->[-1][1]) ) {
170 34         30 $splicepos = @$intervals;
171             } else {
172 0         0 die "Panic: left-oiv[$oiv->[0]] should be smaller than smallest[$intervals->[-1][1]]";
173             }
174             }
175 67         163 splice @$intervals, $splicepos, 0, [@$oiv];
176             } else {
177 8         60 $intervals->[0] = [@$oiv];
178             }
179             }
180             }
181              
182             =head2 (void) $obj->register ( $recent_events_arrayref, $register_arrayref )
183              
184             =head2 (void) $obj->register ( $recent_events_arrayref )
185              
186             The first arrayref is a list of hashes that contain a key called
187             C which is a string looking like a number. The second arrayref
188             is a list if integers which point to elements in the first arrayref to
189             be registered.
190              
191             The second form registers all events in $recent_events_arrayref.
192              
193             =cut
194              
195             sub register {
196 82     82 1 8315 my($self, $re, $reg) = @_;
197 82         330 my $intervals = $self->_intervals;
198 82 50       277 unless ($reg) {
199 0         0 $reg = [0..$#$re];
200             }
201 82         171 REGISTRANT: for my $i (@$reg) {
202 1482         3143 my $logfile = $self->_logfile;
203 1482 50       5752 if ($logfile) {
204 0         0 require YAML::Syck;
205 0 0       0 open my $fh, ">>", $logfile or die "Could not open '$logfile': $!";
206 0 0       0 print $fh YAML::Syck::Dump({
    0          
207             At => "before",
208             Brfinterval => $self->_rfinterval,
209             Ci => $i,
210             ($i>0 ? ("Dre-1" => $re->[$i-1]) : ()),
211             "Dre-0" => $re->[$i],
212             ($i<$#$re ? ("Dre+1" => $re->[$i+1]) : ()),
213             Eintervals => $intervals,
214             });
215             }
216             $self->_register_one
217             ({
218 1482         4647 i => $i,
219             re => $re,
220             intervals => $intervals,
221             });
222 1482 50       3954 if ($logfile) {
223 0         0 require YAML::Syck;
224 0 0       0 open my $fh, ">>", $logfile or die "Could not open '$logfile': $!";
225 0         0 print $fh YAML::Syck::Dump({
226             At => "after",
227             intervals => $intervals,
228             });
229             }
230             }
231             }
232              
233             sub _register_one {
234 1482     1482   1483 my($self, $one) = @_;
235 1482         1385 my($i,$re,$intervals) = @{$one}{qw(i re intervals)};
  1482         2243  
236 1482 50       2758 die sprintf "Panic: illegal i[%d] larger than number of events[%d]", $i, $#$re
237             if $i > $#$re;
238 1482         1870 my $epoch = $re->[$i]{epoch};
239 1482 100       2345 return if $self->covered ( $epoch );
240 1478 100       2334 if (@$intervals) {
241 1457         1199 my $registered = 0;
242 1457         1856 IV: for my $iv (@$intervals) {
243 1650         2268 my($ivhi,$ivlo) = @$iv; # may be the same
244 1650 100 100     6321 if ($i > 0
      100        
      66        
245             && _bigfloatge($re->[$i-1]{epoch}, $ivlo)
246             && _bigfloatle($re->[$i-1]{epoch}, $ivhi)
247             && _bigfloatge($iv->[1],$epoch)
248             ) {
249             # if left neighbor in re belongs to this interval,
250             # then I belong to it too; let us lower the ivlo
251 1415         1522 $iv->[1] = $epoch;
252 1415         1479 $registered++;
253             }
254 1650 100 100     7181 if ($i < $#$re
      100        
      66        
255             && _bigfloatle($re->[$i+1]{epoch}, $ivhi)
256             && _bigfloatge($re->[$i+1]{epoch}, $ivlo)
257             && _bigfloatle($iv->[0],$epoch)
258             ) {
259             # ditto for right neighbor; increase the ivhi
260 42         51 $iv->[0] = $epoch;
261 42         43 $registered++;
262             }
263 1650 100       4076 last IV if $registered>=2;
264             }
265 1457 100       3170 if ($registered == 2) {
    100          
266 21         83 $self->_register_one_fold2
267             (
268             $intervals,
269             $epoch,
270             );
271             } elsif ($registered == 1) {
272 1415         2785 $self->_register_one_fold1 ($intervals);
273             } else {
274 21         69 $self->_register_one_fold0
275             (
276             $intervals,
277             $epoch,
278             );
279             }
280             } else {
281 21         124 $intervals->[0] = [($epoch)x2];
282             }
283             }
284              
285             sub _register_one_fold0 {
286 21     21   38 my($self,
287             $intervals,
288             $epoch,
289             ) = @_;
290 21         24 my $splicepos;
291 21         61 for my $i (0..$#$intervals) {
292 27 100       99 if (_bigfloatgt ($epoch, $intervals->[$i][0])) {
293 5         4 $splicepos = $i;
294 5         7 last;
295             }
296             }
297 21 100       63 unless (defined $splicepos) {
298 16 50       65 if (_bigfloatlt ($epoch, $intervals->[-1][1])) {
299 16         29 $splicepos = @$intervals;
300             } else {
301 0         0 die "Panic: epoch[$epoch] should be smaller than smallest[$intervals->[-1][1]]";
302             }
303             }
304 21         128 splice @$intervals, $splicepos, 0, [($epoch)x2];
305             }
306              
307             # conflate: eliminate overlapping intervals
308             sub _register_one_fold1 {
309 1415     1415   1681 my($self,$intervals) = @_;
310 1415         1184 LOOP: while () {
311 1415         1023 my $splicepos;
312 1415         2894 for my $i (0..$#$intervals-1) {
313 162 50       321 if (_bigfloatle ($intervals->[$i][1],
314             $intervals->[$i+1][0])) {
315 0         0 $intervals->[$i+1][0] = $intervals->[$i][0];
316 0         0 $splicepos = $i;
317 0         0 last;
318             }
319             }
320 1415 50       2040 if (defined $splicepos) {
321 0         0 splice @$intervals, $splicepos, 1;
322             } else {
323 1415         2662 last LOOP;
324             }
325             }
326             }
327              
328             sub _register_one_fold2 {
329 33     33   66 my($self,
330             $intervals,
331             $epoch,
332             ) = @_;
333             # we know we have hit twice, like in
334             # 40:[45,40], [40,35]
335             # 40:[45,40],[42,37],[40,35]
336             # 45:[45,40], [45,35]
337             # 45:[45,40],[42,37],[45,35]
338             # 35:[45,35], [40,35]
339             # 35:[45,35],[42,37],[40,35]
340 33         73 my($splicepos, $splicelen, %assert_between);
341 33         103 INTERVAL: for my $i (0..$#$intervals) {
342 40 100 100     237 if ( $epoch eq $intervals->[$i][0]
343             or $epoch eq $intervals->[$i][1]
344             ) {
345 33         106 for (my $j = 1; $i+$j <= $#$intervals; $j++) {
346 42 100 100     171 if ( $epoch eq $intervals->[$i+$j][0]
347             or $epoch eq $intervals->[$i+$j][1]) {
348 33         131 $intervals->[$i+$j][0] = _bigfloatmax($intervals->[$i][0],$intervals->[$i+$j][0]);
349 33         104 $intervals->[$i+$j][1] = _bigfloatmin($intervals->[$i][1],$intervals->[$i+$j][1]);
350 33         46 $splicepos = $i;
351 33         42 $splicelen = $j;
352 33         54 last INTERVAL;
353             } else {
354 9         10 for my $k (0,1) {
355 18         39 $assert_between{$intervals->[$i+$j][$k]}++;
356             }
357             }
358             }
359             }
360             }
361 33 50       79 if (defined $splicepos) {
362 33         111 for my $k (keys %assert_between) {
363 18 50 33     32 if (_bigfloatgt($k,$intervals->[$splicepos+$splicelen][0])
364             or _bigfloatlt($k,$intervals->[$splicepos+$splicelen][1])){
365 0         0 $DB::single=1;
366 0         0 require Data::Dumper;
367 0         0 die "Panic: broken intervals:".Data::Dumper::Dumper($intervals);
368             }
369             }
370 33         117 splice @$intervals, $splicepos, $splicelen;
371             } else {
372 0         0 $DB::single=1;
373 0         0 die "Panic: Could not find an interval position to insert '$epoch'";
374             }
375             }
376              
377             =head2 reset
378              
379             Forgets everything ever done and gives way for a new round of
380             mirroring. Usually called when the dirtymark on upstream has changed.
381              
382             =cut
383              
384             sub reset {
385 5     5 1 10 my($self) = @_;
386 5         36 $self->_intervals(undef);
387             }
388              
389             =head1 PRIVATE METHODS
390              
391             =head2 _intervals
392              
393             =cut
394             sub _intervals {
395 4209     4209   3715 my($self,$set) = @_;
396 4209 100       6431 if (@_ >= 2) {
397 5         48 $self->__intervals($set);
398             }
399 4209         6839 my $x = $self->__intervals;
400 4209 100       14081 unless (defined $x) {
401 29         59 $x = [];
402 29         93 $self->__intervals ($x);
403             }
404 4209         4588 return $x;
405             }
406              
407             =head1 COPYRIGHT & LICENSE
408              
409             Copyright 2008, 2009 Andreas König.
410              
411             This program is free software; you can redistribute it and/or modify it
412             under the same terms as Perl itself.
413              
414             =cut
415              
416             1; # End of File::Rsync::Mirror::Recentfile
417              
418             # Local Variables:
419             # mode: cperl
420             # cperl-indent-level: 4
421             # End: