ecf57055e7924c57f8e6a2ff4581f1c7563051d3
[spider.git] / perl / Aranea.pm
1 #
2 # The new protocol for real at last
3 #
4 # $Id$
5 #
6 # Copyright (c) 2005 Dirk Koopman G1TLH
7 #
8
9 package Aranea;
10
11 use strict;
12
13 use DXUtil;
14 use DXChannel;
15 use DXUser;
16 use DXM;
17 use DXLog;
18 use DXDebug;
19 use Filter;
20 use Time::HiRes qw(gettimeofday tv_interval);
21 use DXHash;
22 use Route;
23 use Route::Node;
24 use Script;
25 use Verify;
26 use DXDupe;
27 use Thingy;
28
29 use vars qw($VERSION $BRANCH);
30 $VERSION = sprintf( "%d.%03d", q$Revision$ =~ /(\d+)\.(\d+)/ );
31 $BRANCH = sprintf( "%d.%03d", q$Revision$ =~ /^\d+\.\d+(?:\.(\d+)\.(\d+))?$/  || (0,0));
32 $main::build += $VERSION;
33 $main::branch += $BRANCH;
34
35 use vars qw(@ISA $ntpflag $dupeage);
36
37 @ISA = qw(DXChannel);
38
39 $ntpflag = 0;                                   # should be set in startup if NTP in use
40 $dupeage = 12*60*60;                    # duplicates stored half a day 
41
42 my $seqno = 0;
43 my $dayno = 0;
44 my $daystart = 0;
45
46 sub init
47 {
48
49 }
50
51 sub new
52 {
53         my $self = DXChannel::alloc(@_);
54
55         # add this node to the table, the values get filled in later
56         my $pkg = shift;
57         my $call = shift;
58         $main::routeroot->add($call, '5251', Route::here(1)) if $call ne $main::mycall;
59         $self->{'sort'} = 'W';
60         return $self;
61 }
62
63 sub start
64 {
65         my ($self, $line, $sort) = @_;
66         my $call = $self->{call};
67         my $user = $self->{user};
68
69         # log it
70         my $host = $self->{conn}->{peerhost} || "unknown";
71         Log('Aranea', "$call connected from $host");
72         
73         # remember type of connection
74         $self->{consort} = $line;
75         $self->{outbound} = $sort eq 'O';
76         my $priv = $user->priv;
77         $priv = $user->priv(1) unless $priv;
78         $self->{priv} = $priv;     # other clusters can always be 'normal' users
79         $self->{lang} = $user->lang || 'en';
80         $self->{consort} = $line;       # save the connection type
81         $self->{here} = 1;
82         $self->{width} = 80;
83
84         # sort out registration
85         $self->{registered} = 1;
86
87         # get the output filters
88         $self->{spotsfilter} = Filter::read_in('spots', $call, 0) || Filter::read_in('spots', 'node_default', 0);
89         $self->{wwvfilter} = Filter::read_in('wwv', $call, 0) || Filter::read_in('wwv', 'node_default', 0);
90         $self->{wcyfilter} = Filter::read_in('wcy', $call, 0) || Filter::read_in('wcy', 'node_default', 0);
91         $self->{annfilter} = Filter::read_in('ann', $call, 0) || Filter::read_in('ann', 'node_default', 0) ;
92         $self->{routefilter} = Filter::read_in('route', $call, 0) || Filter::read_in('route', 'node_default', 0) unless $self->{isolate} ;
93
94
95         # get the INPUT filters (these only pertain to Clusters)
96         $self->{inspotsfilter} = Filter::read_in('spots', $call, 1) || Filter::read_in('spots', 'node_default', 1);
97         $self->{inwwvfilter} = Filter::read_in('wwv', $call, 1) || Filter::read_in('wwv', 'node_default', 1);
98         $self->{inwcyfilter} = Filter::read_in('wcy', $call, 1) || Filter::read_in('wcy', 'node_default', 1);
99         $self->{inannfilter} = Filter::read_in('ann', $call, 1) || Filter::read_in('ann', 'node_default', 1);
100         $self->{inroutefilter} = Filter::read_in('route', $call, 1) || Filter::read_in('route', 'node_default', 1) unless $self->{isolate};
101         
102         $self->conn->echo(0) if $self->conn->can('echo');
103         
104         # ping neighbour node stuff
105         my $ping = $user->pingint;
106         $ping = $DXProt::pingint unless defined $ping;
107         $self->{pingint} = $ping;
108         $self->{nopings} = $user->nopings || $DXProt::obscount;
109         $self->{pingtime} = [ ];
110         $self->{pingave} = 999;
111         $self->{metric} ||= 100;
112         $self->{lastping} = $main::systime;
113         
114         $self->state('normal');
115         $self->{pc50_t} = $main::systime;
116
117         # send info to all logged in thingies
118         $self->tell_login('loginn');
119
120         # run a script send the output to the debug file
121         my $script = new Script(lc $call) || new Script('node_default');
122         $script->run($self) if $script;
123 }
124
125 #
126 # This is the normal despatcher
127 #
128 sub normal
129 {
130         my ($self, $line) = @_;
131         my $thing = input($line);
132         $thing->queue($self) if $thing;
133 }
134
135 #
136 # periodic processing
137 #
138
139 sub process
140 {
141
142         # calc day number
143         my $d = (gmtime($main::systime))[3];
144         if ($d != $dayno) {
145                 $dayno = $d;
146                 $daystart = $main::systime - ($main::systime % 86400);
147         }
148 }
149
150 sub disconnect
151 {
152         my $self = shift;
153         my $call = $self->call;
154
155         return if $self->{disconnecting}++;
156         
157         # get rid of any PC16/17/19
158 #       eph_del_regex("^PC1[679]*$call");
159
160         # do routing stuff, remove me from routing table
161         my $node = Route::Node::get($call);
162         my @rout;
163         if ($node) {
164                 @rout = $node->del($main::routeroot);
165                 
166                 # and all my ephemera as well
167                 for (@rout) {
168                         my $c = $_->call;
169 #                       eph_del_regex("^PC1[679].*$c");
170                 }
171         }
172
173         RouteDB::delete_interface($call);
174         
175         # unbusy and stop and outgoing mail
176         my $mref = DXMsg::get_busy($call);
177         $mref->stop_msg($call) if $mref;
178         
179         # broadcast to all other nodes that all the nodes connected to via me are gone
180 #       $self->route_pc21($main::mycall, undef, @rout) if @rout;
181
182         # remove outstanding pings
183 #       delete $pings{$call};
184         
185         # I was the last node visited
186     $self->user->node($main::mycall);
187
188         # send info to all logged in thingies
189         $self->tell_login('logoutn');
190
191         Log('Aranea', $call . " Disconnected");
192
193         $self->SUPER::disconnect;
194 }
195
196
197 # generate new header (this is a general subroutine, not a method
198 # because it has to be used before a channel is fully initialised).
199 #
200
201 sub genheader
202 {
203         my $mycall = shift;
204         my $to = shift;
205         my $from = shift;
206         
207         my $date = ((($dayno << 1) | $ntpflag) << 18) |  ($main::systime % 86400);
208         my $r = "$mycall,$to," . sprintf('%6X%04X,0', $date, $seqno);
209         $r .= ",$from" if $from;
210         $seqno++;
211         $seqno = 0 if $seqno > 0x0ffff;
212         return $r;
213 }
214
215 #
216 # decode the date time sequence group
217 #
218
219 sub decode_dts
220 {
221         my $dts = shift;
222         my ($dt, $seqno) = map {hex} unpack "H6H4", $dts;
223         my $secs = $dt & 0x3FFFF;
224         $dt >>= 18;
225         my $day = $dt >> 1;
226         my $ntp = $dt & 1;
227         my $t;
228         if ($dayno == $day) {
229                 $t = $daystart + $secs;
230         } elsif ($dayno < $day) {
231                 $t = $daystart + (($day-$dayno) * 86400) + $secs;
232         } else {
233                 $t = $daystart + (($dayno-$day) * 86400) + $secs;
234         }
235         return ($t, $seqno, $ntp);
236 }
237
238 # subroutines to encode and decode values in lists 
239 sub tencode
240 {
241         my $s = shift;
242         $s =~ s/([\%=|,\'\x00-\x1f\x7f-\xff])/sprintf("%%%02X", ord($1))/eg; 
243         $s = "'$s'" if $s =~ / /;
244         return $s;
245 }
246
247 sub tdecode
248 {
249         my $s = shift;
250         $s =~ s/^'(.*)'$/$1/;
251         $s =~ s/\%([0-9A-F][0-9A-F])/chr(hex($1))/eg;
252         return $s;
253 }
254
255 sub genmsg
256 {
257         my $thing = shift;
258         my $name = shift;
259         my $head = genheader($thing->{origin}, 
260                                                  ($thing->{group} || $thing->{touser} || $thing->{tonode}),
261                                                  ($thing->{user} || $thing->{fromuser} || $thing->{fromnode})
262                                                 );
263         my $data = "$name,";
264         while (@_) {
265                 my $k = lc shift;
266                 my $v = tencode(shift);
267                 $data .= "$k=$v,";
268         }
269         chop $data;
270         return "$head|$data";
271 }
272
273
274 sub decode_input
275 {
276         my $self = shift;
277         my $line = shift;
278         return ('I', $self->{call}, $line);
279 }
280
281 sub input
282 {
283         my $line = shift;
284         my ($head, $data) = split /\|/, $line, 2;
285         return unless $head && $data;
286
287         my ($origin, $group, $dts, $hop, $user) = split /,/, $head;
288         return if DXDupe::check("Ara,$origin,$dts", $dupeage);
289         my $err;
290         $err .= "incomplete header," unless $origin && defined $group && $dts && defined $hop;
291         my ($cmd, $rdata) = split /,/, $data, 2;
292
293         # validate it further
294         $err .= "missing cmd or data," unless $cmd && $data;
295         $err .= "invalid command ($cmd)," unless $cmd =~ /^[A-Z][A-Z0-9]*$/;
296         $err .= "invalid group ($group)," unless $group =~ /^[-A-Z0-9\/:]{2,}$/;
297
298         my $class = 'Thingy::' . ucfirst(lc $cmd);
299         my $thing;
300         my ($t, $seqno, $ntp) = decode_dts($dts) unless $err;
301         $err .= "invalid date/seq," unless $t;
302         
303         if ($err) {
304                 chop $err;
305                 dbg("Aranea input: $err");
306         } elsif ($class->can('new')) {
307                 # create the appropriate Thingy
308                 $thing = $class->new();
309
310                 # reconstitute the header but wth hop increased by one
311                 $head = join(',', $origin, $group, $dts, ++$hop);
312                 $head .= ",$user" if $user;
313                 $thing->{Aranea} = "$head|$data";
314
315                 # store useful data
316                 $thing->{origin} = $origin;
317                 ($thing->{group}, $thing->{touser}) = split /:/, $group, 2;
318                 $thing->{time} = $t;
319                 $thing->{user} = $user if $user;
320                 $thing->{hopsaway} = $hop; 
321                 
322                 for (split(/,/, $rdata)) {
323                         if (/=/) {
324                                 my ($k,$v) = split /=/, $_, 2;
325                                 $thing->{$k} = tdecode($v);
326                         } else {
327                                 $thing->{$_} = 1;
328                         }
329                 }
330
331                 # post process the thing, this generally adds on semantic meaning
332                 # does parameter checking etc. It also adds / prepares the thingy so
333                 # this is compatible with older protocol and arranges data so
334                 # that the filtering can still work.
335                 if ($thing->can('from_Aranea')) {
336
337                         # if a thing is ok then return that thing, otherwise return
338                         # nothing
339                         $thing = $thing->from_Aranea;
340                 }
341         }
342         return $thing;
343 }
344
345 # this is the DXChannel send
346 # note that this does NOT send out stuff in same way as other DXChannels
347 # it is just as it comes, no extra bits added (here)
348 sub send                                                # this is always later and always data
349 {
350         my $self = shift;
351         my $conn = $self->{conn};
352         return unless $conn;
353         my $call = $self->{call};
354
355         for (@_) {
356 #               chomp;
357         my @lines = split /\n/;
358                 for (@lines) {
359                         $conn->send_later($_);
360                         dbg("-> D $call $_") if isdbg('chan');
361                 }
362         }
363         $self->{t} = $main::systime;
364 }
365
366 #
367 # load of dummies for DXChannel broadcasts
368 # these will go away in time?
369 # These are all from PC protocol
370 #
371
372 sub dx_spot
373 {
374         my $self = shift;
375         my $line = shift;
376         my $isolate = shift;
377         my ($filter, $hops);
378
379         if ($self->{spotsfilter}) {
380                 ($filter, $hops) = $self->{spotsfilter}->it(@_);
381                 return unless $filter;
382         }
383 #       send_prot_line($self, $filter, $hops, $isolate, $line);
384 }
385
386 sub wwv
387 {
388         my $self = shift;
389         my $line = shift;
390         my $isolate = shift;
391         my ($filter, $hops);
392         
393         if ($self->{wwvfilter}) {
394                 ($filter, $hops) = $self->{wwvfilter}->it(@_);
395                 return unless $filter;
396         }
397 #       send_prot_line($self, $filter, $hops, $isolate, $line)
398 }
399
400 sub wcy
401 {
402         my $self = shift;
403         my $line = shift;
404         my $isolate = shift;
405         my ($filter, $hops);
406
407         if ($self->{wcyfilter}) {
408                 ($filter, $hops) = $self->{wcyfilter}->it(@_);
409                 return unless $filter;
410         }
411 #       send_prot_line($self, $filter, $hops, $isolate, $line) if $self->is_clx || $self->is_spider || $self->is_dxnet;
412 }
413
414 sub announce
415 {
416         my $self = shift;
417         my $line = shift;
418         my $isolate = shift;
419         my $to = shift;
420         my $target = shift;
421         my $text = shift;
422         my ($filter, $hops);
423
424         if ($self->{annfilter}) {
425                 ($filter, $hops) = $self->{annfilter}->it(@_);
426                 return unless $filter;
427         }
428 #       send_prot_line($self, $filter, $hops, $isolate, $line) unless $_[1] eq $main::mycall;
429 }
430
431 sub chat
432 {
433         goto &announce;
434 }
435
436 1;