fix route promoted PC11s so that the PC61 are sent!
[spider.git] / perl / DXProtHandle.pm
1 #
2 #
3 # This module impliments the handlers for the protocal mode for a dx cluster
4 #
5 # Copyright (c) 1998-2007 Dirk Koopman G1TLH
6 #
7 #
8 #
9
10 package DXProt;
11
12 @ISA = qw(DXChannel);
13
14 use DXUtil;
15 use DXChannel;
16 use DXUser;
17 use DXM;
18 use DXProtVars;
19 use DXCommandmode;
20 use DXLog;
21 use Spot;
22 use DXProtout;
23 use DXDebug;
24 use Filter;
25 use Local;
26 use DXDb;
27 use AnnTalk;
28 use Geomag;
29 use WCY;
30 use BadWords;
31 use DXHash;
32 use Route;
33 use Route::Node;
34 use Script;
35 use DXCIDR;
36
37 use strict;
38 use warnings qw(all);
39 no warnings qw(uninitialized);
40
41
42
43 use vars qw($pc11_max_age $pc23_max_age $last_pc50 $eph_restime $eph_info_restime $eph_pc34_restime
44                         $last_hour $last10 %eph  %pings %rcmds $ann_to_talk
45                         $pingint $obscount %pc19list $chatdupeage $chatimportfn
46                         $investigation_int $pc19_version $myprot_version
47                         %nodehops $baddx $badspotter $badnode $censorpc
48                         $allowzero $decode_dk0wcy $send_opernam @checklist
49                         $eph_pc15_restime $pc9x_past_age $pc9x_dupe_age
50                         $pc10_dupe_age $pc92_slug_changes $last_pc92_slug
51                         $pc92Ain $pc92Cin $pc92Din $pc92Kin $pc9x_time_tolerance
52                         $pc92filterdef $senderverify $pc11_dwell_time $pc11_extract_route
53                    );
54
55 $pc9x_dupe_age = 60;                    # catch loops of circular (usually) D records
56 $pc10_dupe_age = 45;                    # just something to catch duplicate PC10->PC93 conversions
57 $pc92_slug_changes = 60*1;              # slug any changes going outward for this long
58 $last_pc92_slug = 0;                    # the last time we sent out any delayed add or del PC92s
59 $pc9x_time_tolerance = 15*60;   # the time on a pc9x is allowed to be out by this amount
60 $pc9x_past_age = (122*60)+              # maximum age in the past of a px9x (a config record might be the only
61 $pc9x_time_tolerance;           # thing a node might send - once an hour and we allow an extra hour for luck)
62                                 # this is actually the partition between "yesterday" and "today" but old.
63 $senderverify = 0;                              # 1 - check for forged PC11 or PC61.
64                                 # 2 - if forged, dump them.
65 $pc11_dwell_time = 2;                   # number of seconds to wait for a PC61 to come to substitute the PC11
66 $pc11_extract_route = 1;                # generate missing  user route entry and IP address from passing PC61s
67
68
69 $pc92filterdef = bless ([
70                           # tag, sort, field, priv, special parser
71                           ['call', 'c', 0],
72                           ['by', 'c', 0],
73                           ['dxcc', 'nc', 1],
74                           ['itu', 'ni', 2],
75                           ['zone', 'nz', 3],
76                          ], 'Filter::Cmd');
77
78 our %pc11q;
79 # this is a place to park an incoming PC11 in the sure and certain hope that
80 # a PC61 will be along soon. This has the side benefit that it will delay a
81 # a PC11 for one second - assuming that it is not removed by a PC61 version
82
83 # incoming talk commands
84 sub handle_10
85 {
86         my $self = shift;
87         my $pcno = shift;
88         my $line = shift;
89         my $origin = shift;
90         my $pc = shift;
91
92         # this is to catch loops caused by bad software ...
93         if (eph_dup($line, $pc10_dupe_age)) {
94                 return;
95         }
96
97
98         # is it for me or one of mine?
99         my ($from, $to, $via, $call, $dxchan);
100         $from = $pc->[1];
101         if ($pc->[5] gt ' ') {
102                 $via = $pc->[2];
103                 $to = $pc->[5];
104         } else {
105                 $to = $pc->[2];
106         }
107
108         # if this is a 'nodx' node then ignore it
109         if ($badnode->in($pc->[6]) || ($via && $badnode->in($via))) {
110                 dbg($line) if isdbg('nologchan');
111                 dbg("PCPROT: Bad Node, dropped");
112                 return;
113         }
114
115
116         my $nossid = $from;
117         $nossid =~ s/-\d+$//;
118         if ($badspotter->in($nossid)) {
119                 dbg($line) if isdbg('nologchan');
120                 dbg("PCPROT: Bad Spotter, dropped");
121                 return;
122         }
123
124         # if we are converting announces to talk is it a dup?
125         if ($ann_to_talk) {
126                 if (AnnTalk::is_talk_candidate($from, $pc->[3]) && AnnTalk::dup($from, $to, $pc->[3])) {
127                         dbg("PCPROT: Dupe talk from announce, dropped") if isdbg('chanerr');
128                         return;
129                 }
130         }
131         
132         # will we allow it at all?
133         if ($censorpc) {
134                 my @bad;
135                 if (@bad = BadWords::check($pc->[3])) {
136                         my $bw = join ', ', @bad; 
137                         dbg($line) if isdbg('nologchan');
138                         dbg("PCPROT: Badwords: '$bw', dropped");
139                         return;
140                 }
141         }
142
143         # convert this to a PC93, coming from mycall with origin set and process it as such
144         $main::me->normal(pc93($to, $from, $via, $pc->[3], $pc->[6]));
145 }
146
147 my %pc11_saved;                                 # delayed PC11s
148 my $pc11_rx;                                    # no of pc11 rxed
149 my $pc61_rx;                                    # no of pc61 rxed
150 my $pc11_to_61;                                 # no of 'better' pc61, that replaced stored waiting pc11
151 my $rpc11_to_61;                                # no of pc11s 'promoted' to pc61 by IP captured in routing table
152
153 # DX Spot handling
154 sub handle_11
155 {
156         my $self = shift;
157         my $pcno = shift;
158         my $line = shift;
159         my $origin = shift;
160         my $pc = shift;
161         my $recurse = shift || 0;
162
163         # route 'foreign' pc26s
164         if ($pcno == 26) {
165                 if ($pc->[7] ne $main::mycall) {
166                         $self->route($pc->[7], $line);
167                         return;
168                 }
169         }
170
171         dbg("INPUT $self->{call}: $line origin $origin recurse: $recurse") if isdbg("pc11") || isdbg("pc61"); 
172
173 #       my ($hops) = $pc->[8] =~ /^H(\d+)/;
174
175         # is the spotted callsign blank? This should really be trapped earlier but it
176         # could break other protocol sentences. Also check for lower case characters.
177         if ($pc->[2] =~ /^\s*$/) {
178                 dbg($line) if isdbg('nologchan');
179                 dbg("PCPROT: blank callsign, dropped");
180                 return;
181         }
182         if ($pc->[2] =~ /[a-z]/) {
183                 dbg($line) if isdbg('nologchan');
184                 dbg("PCPROT: lowercase characters, dropped");
185                 return;
186         }
187
188
189         # if this is a 'nodx' node then ignore it
190         if ($badnode->in($pc->[7])) {
191                 dbg($line) if isdbg('nologchan');
192                 dbg("PCPROT: Bad Node $pc->[7], dropped");
193                 return;
194         }
195
196         # convert the date to a unix date
197         my $d = cltounix($pc->[3], $pc->[4]);
198         # bang out (and don't pass on) if date is invalid or the spot is too old (or too young)
199         if (!$d || (($pcno == 11 || $pcno == 61) && ($d < $main::systime - $pc11_max_age || $d > $main::systime + 900))) {
200                 dbg($line) if isdbg('nologchan');
201                 dbg("PCPROT: Spot ignored, invalid date or out of range ($pc->[3] $pc->[4])\n");
202                 return;
203         }
204
205         # is it 'baddx'
206         if ($baddx->in($pc->[2])) {
207                 dbg("PCPROT: Bad DX spot '$pc->[2]', ignored");
208                 dbg($line) if isdbg('nologchan');
209                 return;
210         }
211
212         # is it claiming to be BUST(ed)
213         $pc->[5] =~ s/^\s+//;                   # take any leading blanks off
214         $pc->[2] = unpad($pc->[2]);             # take off leading and trailing blanks from spotted callsign
215         if ($pc->[2] =~ /BUST\w*$/) {
216                 dbg($line) if isdbg('nologchan');
217                 dbg("PCPROT: useless 'BUSTED' spot") if isdbg('chanerr');
218                 return;
219         }
220         
221         my $nossid = $pc->[6];
222     $nossid =~ s/-\d+$//;
223
224         my @spot = Spot::prepare($pc->[1], $pc->[2], $d, $pc->[5], $nossid, $pc->[7], $pc->[8]);
225
226         #   $f0 = frequency
227         #   $f1 = call
228         #   $f2 = date in unix format
229         #   $f3 = comment
230         #   $f4 = spotter
231         #   $f5 = spotted dxcc country
232         #   $f6 = spotter dxcc country
233         #   $f7 = origin
234         #   $f8 = spotted itu
235         #   $f9 = spotted cq zone
236         #   $f10 = spotter itu
237         #   $f11 = spotter cq zone
238         #   $f12 = spotted us state
239         #   $f13 = spotter us state
240         #   $f14 = ip address
241
242
243         # is this is a 'bad spotter' or an unknown user then ignore it. 
244         if ($badspotter->in($nossid)) {
245                 dbg($line) if isdbg('nologchan');
246                 dbg("PCPROT: Bad Spotter $pc->[6], dropped");
247                 return;
248         }
249
250         # global spot filtering on INPUT
251         if ($self->{inspotsfilter}) {
252                 my ($filter, $hops) = $self->{inspotsfilter}->it(@spot);
253                 unless ($filter) {
254                         dbg("PCPROT: Rejected by input spot filter") if isdbg('chanerr');
255                         return;
256                 }
257         }
258
259
260         # this is where we decide to delay PC11s in the hope that a PC61 will be along soon.
261         
262         my $key = join '|', @spot[0..2,4,7]; # not including text
263
264         unless ($recurse) {
265                 if ($pcno == 61) {
266                         if (Spot::dup_find(@spot[0..4,7])) {
267                                 dbg("DUPE $pc->[0] $self->{call}: key: $key dumped") if isdbg('pc11');
268                                 return;
269                         } else {
270                                 ++$pc61_rx;
271                         }
272
273                         # as we have a route to a user, if it does not exist, create and link if (and only if) the node exists as well
274                         if ($pc->[8]) {
275                                 my $new = $pc->[8];
276                                 # $new =~ s/,/:/g;
277                                 my $r = Route::User::get($pc->[6]);
278                                 unless ($r) {
279                                         my $rn = Route::Node::get($pc->[7]) || Route::Node->new($pc->[7]);
280                                         $rn->add_user($pc->[6], 0, $pc->[8]);
281                                         $r = Route::User::get($pc->[6]);
282                                 }
283                                 if ($r) {
284                                         if ($r->ip ne $pc->[8]) {
285                                                 my $old = $r->ip;
286                                                 $r->ip($new);
287                                                 dbg("ROUTE ALTER IP node: $pc->[7] user: $pc->[6] old IP: '$old'-> new IP: '$new'") if isdbg('pc11');
288                                         } else {
289                                                 dbg("ROUTE NEW IP node: $pc->[7] user: $pc->[6] IP: '$new'") if isdbg('pc11');
290                                         }
291                                 } else {
292                                         dbg("ROUTE ADD Failed for node $pc->[7] user $pc->[6]") if isdbg('pc11');
293                                 }
294                         }
295
296                         if ($pc11_saved{$key}) {
297                                 ++$pc11_to_61;
298                                 my $percent = $pc11_rx ? $pc11_to_61 * 100 / $pc11_rx : 0;
299                                 dbg(sprintf("PROMOTED BETTER $self->{call}: $pc->[0] $key, using pc61, WAITING pc11 DUMPED: $pc61_rx pc11: $pc11_rx better pc61: $pc11_to_61 (%0.1f%%)", $percent)) if isdbg("pc11");
300                                 delete $pc11_saved{$key};
301                         }
302                 }
303                 if ($pcno == 11) {
304
305                         if (Spot::dup_find(@spot[0..4,7])) {
306                                 dbg("DUPE $pc->[0] $self->{call}: key: $key dumped") if isdbg('pc11');
307                                 return;
308                         } else {
309                                 ++$pc11_rx;
310                         }
311
312                         if ($pc11_saved{$key}) {
313                                 dbg("DUPE $pc->[0] $self->{call } key: $key is saved, ignored") if isdbg("pc11");
314                                 return;         # because it's a dup
315                         }
316
317                         # can we promote this to a PC61?
318                         my $r = Route::User::get($spot[4]); # find spotter
319
320                         if ($r && $r->ip) {                     # do we have an ip address
321                                 $pcno = 61;
322                                 $pc->[0] = 'PC61';
323                                 my $hops = $pc->[8];
324                                 $pc->[8] = $spot[14] = $r->ip;
325                                 ++$rpc11_to_61;
326                                 my $percent = $pc11_rx ? $rpc11_to_61 * 100 / $pc11_rx : 0;
327                                 dbg(sprintf("PROMOTED ROUTE $self->{call}: pc11 $key PROMOTED to pc61 with IP $spot[14] pc61: $pc61_rx pc11: $pc11_rx route->pc61 $rpc11_to_61 (%0.1f%%)", $percent)) if isdbg("pc11");
328                                 $line = join '^', @$pc, $hops, '~';
329                                 dbg("CHANGED saved key: $key PC11 line to $line") if isdbg('pc11');
330                                 delete $pc11_saved{$key};
331                         }
332
333                         # if it is STILL (despite all efforts to change it) a PC11
334                         # save it and wait - it will be called from pc11_process
335                         if ($pcno == 11) {
336                                 $pc11_saved{$key} = [$main::systime, $self, $pcno, $line, $origin, $pc];
337                                 dbg("WAITING $self->{call}: NEW $pc->[0] spot $key waiting for a better offer") if isdbg("pc11");
338                                 return;
339                         }
340                 }
341         }
342
343
344         
345         # this goes after the input filtering, but before the add
346         # so that if it is input filtered, it isn't added to the dup
347         # list. This allows it to come in from a "legitimate" source
348         if (Spot::dup(@spot[0..4,7])) {
349                 dbg("PCPROT: Duplicate Spot  $self->{call}: $pc->[0] $key ignored\n") if isdbg('chanerr') || isdbg('dupespot') || isdbg('pc11');
350                 return;
351         }
352
353         dbg("PROCESSING $self->{call}: $pc->[0] key: $key") if isdbg('pc11');
354         
355         # we check IP addresses for PC61 - this will also dedupe PC11 copies
356         if (@$pc > 8 && is_ipaddr($pc->[8])) {
357                 my $ip = $pc->[8];
358                 $ip =~ s/,/:/g;
359                 $ip =~ s/^::ffff://;
360                 if (DXCIDR::find($ip)) {
361                         dbg($line) if isdbg('nologchan');
362                         dbg("PCPROT: PC61 $ip in badip list, dropped");
363                         return;
364                 }
365         }
366
367         
368         # here we verify the spotter is currently connected to the node it says it is one. AKA email sender verify
369         # but without the explicit probe to the node. We are relying on "historical" information, but it very likely
370         # to be current once we have seen the first PC92C from that node.
371         #
372         # As for spots generated from non-PC92 nodes, we'll see after about  do_pc9x3h20m...
373         #
374         if ($senderverify) {
375                 my $nroute = Route::Node::get($pc->[7]);
376                 my $uroute = Route::Node::get($pc->[6]);
377                 my $local = DXChannel::get($pc->[7]);
378                 
379                 if ($nroute && ($nroute->last_PC92C || ($local && !$local->do_pc9x))) {
380                         my $s = '';
381                         my $ip = $pcno == 61 ?  $pc->[8] : '';
382 #                       $s .= "User $pc->[6] not logged in, " unless $uroute;
383                         $s .= "User $pc->[6] not on node $pc->[7], " unless $nroute->is_user($pc->[6]);
384 #                       $s .= "Node $pc->[7] at '$ip' not on Node's IP " . $nroute->ip if $ip && $nroute && $nroute->ip && $nroute->ip ne $ip;
385                         if ($s) {
386                                 my $action = $senderverify > 1 ? ", DUMPED" : '';
387                                 $s =~ s/, $//;
388                                 dbg("PCPROT: Suspicious Spot $pc->[2] on $pc->[1] by $pc->[6]($ip)\@$pc->[7] $s$action");
389                                 return unless $senderverify < 2;
390                         }
391                 }
392         }
393
394         # we until here to do any censorship to try and reduce the amount of noise that repeated copies
395         # from other connected nodes cause
396         if ($censorpc) {
397                 my @bad;
398                 if (@bad = BadWords::check($pc->[5])) {
399                         my $bw = join ', ', @bad;
400                         dbg($line) if isdbg('nologchan');
401                         dbg("PCPROT: Badwords: '$bw', dropped");
402                         return;
403                 }
404         }
405
406         
407         # add it
408         Spot::add(@spot);
409
410         my $ip = '';
411         $ip ||= $spot[14] if exists $spot[14];
412         if (isdbg('progress')) {
413                 my $sip = $ip ? sprintf "($ip)" : '' unless $ip =~ m|[\(\)\*]|;
414                 $sip ||= '';
415                 my $d = ztime($spot[2]);
416                 my $s = "SPOT: $spot[1] on $spot[0] \@ $d by $spot[4]$sip\@$spot[7]";
417                 $s .= $spot[3] ? " '$spot[3]'" : q{ ''};
418                 $s .=  " route: $origin";
419                 dbg($s);
420         }
421         
422         #
423         # @spot at this point contains:-
424         # freq, spotted call, time, text, spotter, spotted cc, spotters cc, orig node
425         # then  spotted itu, spotted cq, spotters itu, spotters cq
426         # you should be able to route on any of these
427         #
428
429         # fix up qra locators of known users
430         my $user = DXUser::get_current($spot[4]);
431         if ($user) {
432                 my $qra = $user->qra;
433                 unless ($qra && is_qra($qra)) {
434                         my $lat = $user->lat;
435                         my $long = $user->long;
436                         if (defined $lat && defined $long) {
437                                 $user->qra(DXBearing::lltoqra($lat, $long));
438                                 $user->put;
439                         }
440                 }
441
442                 # send a remote command to a distant cluster if it is visible and there is no
443                 # qra locator and we havn't done it for a month.
444
445                 unless ($user->qra) {
446                         my $node;
447                         my $to = $user->homenode;
448                         my $last = $user->lastoper || 0;
449                         if ($send_opernam && $to && $to ne $main::mycall && $main::systime > $last + $DXUser::lastoperinterval && ($node = Route::Node::get($to)) ) {
450                                 my $cmd = "forward/opernam $spot[4]";
451                                 # send the rcmd but we aren't interested in the replies...
452                                 my $dxchan = $node->dxchan;
453                                 if ($dxchan && $dxchan->is_clx) {
454                                         route(undef, $to, pc84($main::mycall, $to, $main::mycall, $cmd));
455                                 } else {
456                                         route(undef, $to, pc34($main::mycall, $to, $cmd));
457                                 }
458                                 if ($to ne $origin) {
459                                         $to = $origin;
460                                         $node = Route::Node::get($to);
461                                         if ($node) {
462                                                 $dxchan = $node->dxchan;
463                                                 if ($dxchan && $dxchan->is_clx) {
464                                                         route(undef, $to, pc84($main::mycall, $to, $main::mycall, $cmd));
465                                                 } else {
466                                                         route(undef, $to, pc34($main::mycall, $to, $cmd));
467                                                 }
468                                         }
469                                 }
470                                 $user->lastoper($main::systime);
471                                 $user->put;
472                         }
473                 }
474         }
475
476         # local processing
477         if (defined &Local::spot) {
478                 my $r;
479                 eval {
480                         $r = Local::spot($self, @spot);
481                 };
482                 return if $r;
483         }
484
485         # DON'T be silly and send on PC26s!
486         return if $pcno == 26;
487
488         # send out the filtered spots
489         send_dx_spot($self, $line, @spot) if @spot;
490
491         # cancel any recursion as we have now processed it
492         my $count =  $pc11_to_61+$rpc11_to_61;
493         my $percent = ($pc11_rx + $pc61_rx) ? ($pc11_rx * 100) / ($pc11_rx + $pc61_rx) : 0;
494         my $pc11_61 = $pc11_rx ? ($count * 100) / $pc11_rx : 0;
495         my $data = "$self->{call} $pc->[0] key: $key";
496         my $stats = sprintf "pc11: $pc11_rx pc61: $pc61_rx pc11%%: %0.1f%% pc11->pc61: $count(%0.1f%%)", $percent, $pc11_61;
497         if ($recurse) {
498                 if ($pc11_saved{$key}) {
499                         dbg("END RECURSED $data removed and finished $stats") if isdbg('pc11');
500                         delete $pc11_saved{$key};
501                 } else {
502                         dbg("END RECURSED $data finished $stats") if isdbg('pc11'); 
503                 }
504                 $recurse = 0;
505         } else {
506                 dbg("END NORMAL $data finished $stats") if isdbg('pc11');
507         }
508 }
509
510 # used to kick outstanding PC11 if required
511 sub pc11_process
512 {
513         foreach my $key (keys %pc11_saved) {
514                 my $r = $pc11_saved{$key};
515                 if ($main::systime > $r->[0] + $pc11_dwell_time) {
516                         dbg("RECURSE PC11 spot $key timed out waiting, resend") if isdbg("pc11");
517                         my $self = $r->[1];
518                         delete $pc11_saved{$key};
519                         $self->handle_11(@$r[2..5], 1);
520                 }
521         }
522 }
523
524 # return the pc11 / pc61 / promotions data
525 sub get_pc11_61_stats
526 {
527         my $promotions =  $pc11_to_61+$rpc11_to_61;
528         my $percent = ($pc11_rx + $pc61_rx) ? ($pc11_rx * 100) / ($pc11_rx + $pc61_rx) : 0;
529         my $pc11_61p = $pc11_rx ? ($promotions * 100) / $pc11_rx : 0;
530         return {
531                         pc11_rx => $pc11_rx+0,
532                         pc61_rx => $pc61_rx+0,
533                         pc11_to_61 => $pc11_to_61+0,
534                         rpc11_to_61 => $rpc11_to_61+0,
535                         promotions => $promotions+0,
536                         pc11_percent => $percent+0,
537                         promotions_percent => $pc11_61p+0,
538                    };
539 }
540
541 # announces
542 sub handle_12
543 {
544         my $self = shift;
545         my $pcno = shift;
546         my $line = shift;
547         my $origin = shift;
548         my $pc = shift;
549
550         # announce duplicate checking
551         $pc->[3] =~ s/^\s+//;                   # remove leading blanks
552
553         # if this is a 'nodx' node then ignore it
554         if ($badnode->in($pc->[5])) {
555                 dbg($line) if isdbg('nologchan');
556                 dbg("PCPROT: Bad Node, dropped");
557                 return;
558         }
559
560         # if this is a 'bad spotter' user then ignore it
561         my $nossid = $pc->[1];
562         $nossid =~ s/-\d+$//;
563         if ($badspotter->in($nossid)) {
564                 dbg($line) if isdbg('nologchan');
565                 dbg("PCPROT: Bad Spotter, dropped");
566                 return;
567         }
568
569         # ignore PC12s from origins that use PCxx protocol
570         my $oref = Route::get($origin);
571         if ($oref->do_pc9x) {
572                 dbg("PCPROT: PC12 rxed from PC9x node, ignored") if isdbg('chanerr');
573                 return;
574         }
575
576         if ($censorpc) {
577                 my @bad;
578                 if (@bad = BadWords::check($pc->[3])) {
579                         my $bw = join ', ', @bad;
580                         dbg($line) if isdbg('nologchan');
581                         dbg("PCPROT: Badwords: '$bw', dropped");
582                         return;
583                 }
584         }
585
586
587         my $dxchan;
588
589         if ((($dxchan = DXChannel::get($pc->[2])) && $dxchan->is_user) || $pc->[4] =~ /^[\#\w.]+$/){
590                 $self->send_chat(0, $line, @$pc[1..6]);
591         } elsif ($pc->[2] eq '*' || $pc->[2] eq $main::mycall) {
592
593                 # ignore something that looks like a chat line coming in with sysop
594                 # flag - this is a kludge...
595                 if ($pc->[3] =~ /^\#\d+ / && $pc->[4] eq '*') {
596                         dbg('PCPROT: Probable chat rewrite, dropped') if isdbg('chanerr');
597                         return;
598                 }
599
600                 # here's a bit of fun, convert incoming ann with a callsign in the first word
601                 # or one saying 'to <call>' to a talk if we can route to the recipient
602                 if ($ann_to_talk) {
603                         my $call = AnnTalk::is_talk_candidate($pc->[1], $pc->[3]);
604                         if ($call) {
605                                 my $ref = Route::get($call);
606                                 if ($ref) {
607                                         $dxchan = $ref->dxchan;
608                                         $dxchan->talk($pc->[1], $call, undef, $pc->[3], $pc->[5]) if $dxchan != $self;
609                                         return;
610                                 }
611                         }
612                 }
613
614                 # send it
615                 $self->send_announce(0, $line, @$pc[1..6]);
616         } else {
617                 $self->route($pc->[2], $line);
618         }
619
620         # local processing
621         if (defined &Local::ann) {
622                 my $r;
623                 eval {
624                         $r = Local::ann($self, $line, @$pc[1..6]);
625                 };
626                 return if $r;
627         }
628 }
629
630 sub handle_15
631 {
632         my $self = shift;
633         my $pcno = shift;
634         my $line = shift;
635         my $origin = shift;
636         my $pc = shift;
637
638         if (eph_dup($line, $eph_pc15_restime)) {
639                 return;
640         } else {
641                 unless ($self->{isolate}) {
642                         DXChannel::broadcast_nodes($line, $self) if $line =~ /\^H\d+\^?~?$/; # send it to everyone but me
643                 }
644         }
645 }
646
647 # incoming user
648 sub handle_16
649 {
650         my $self = shift;
651         my $pcno = shift;
652         my $line = shift;
653         my $origin = shift;
654         my $pc = shift;
655
656         # general checks
657         my $dxchan;
658         my $ncall = $pc->[1];
659         my $newline = "PC16^";
660
661         # dos I want users from this channel?
662         unless ($self->user->wantpc16) {
663                 dbg("PCPROT: don't send users to $self->{call}") if isdbg('chanerr');
664                 return;
665         }
666
667         # is it me?
668         if ($ncall eq $main::mycall) {
669                 dbg("PCPROT: trying to alter config on this node from outside!") if isdbg('chanerr');
670                 return;
671         }
672
673         my $h;
674         $h = 1 if DXChannel::get($ncall);
675         if ($h && $self->{call} ne $ncall) {
676                 dbg("PCPROT: trying to update a local node, ignored") if isdbg('chanerr');
677                 return;
678         }
679
680         if (eph_dup($line)) {
681                 return;
682         }
683
684         # isolate now means only accept stuff from this call only
685         if ($self->{isolate} && $ncall ne $self->{call}) {
686                 dbg("PCPROT: $self->{call} isolated, $ncall ignored") if isdbg('chanerr');
687                 return;
688         }
689
690         my $parent = Route::Node::get($ncall);
691
692         if ($parent) {
693                 $dxchan = $parent->dxchan;
694                 if ($dxchan && $dxchan ne $self) {
695                         dbg("PCPROT: PC16 from $self->{call} trying to alter locally connected $ncall, ignored!") if isdbg('chanerr');
696                         return;
697                 }
698
699                 # input filter if required
700                 return unless $self->in_filter_route($parent);
701         } else {
702                 $parent = Route::Node->new($ncall);
703         }
704
705         unless ($h) {
706                 if ($parent->via_pc92) {
707                         dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
708                         return;
709                 }
710         }
711
712         my $i;
713         my @rout;
714         for ($i = 2; $i < $#$pc; $i++) {
715                 my ($call, $conf, $here) = $pc->[$i] =~ /^(\S+) (\S) (\d)/o;
716                 next unless $call && $conf && defined $here && is_callsign($call);
717                 next if $call eq $main::mycall;
718
719                 eph_del_regex("^PC17\\^$call\\^$ncall");
720
721                 $conf = $conf eq '*';
722
723                 # reject this if we think it is a node already
724                 my $r = Route::Node::get($call);
725                 my $u = DXUser::get_current($call) unless $r;
726                 if ($r || ($u && $u->is_node)) {
727                         dbg("PCPROT: $call is a node") if isdbg('chanerr');
728                         next;
729                 }
730
731                 $r = Route::User::get($call);
732                 my $flags = Route::here($here)|Route::conf($conf);
733
734                 if ($r) {
735                         my $au = $r->addparent($parent);
736                         if ($r->flags != $flags) {
737                                 $r->flags($flags);
738                                 $au = $r;
739                         }
740                         push @rout, $r if $h && $au;
741                 } else {
742                         my @ans = $parent->add_user($call, $flags);
743                         push @rout, @ans if $h && @ans;
744                 }
745
746                 # add this station to the user database, if required
747                 my $user = DXUser::get_current($ncall);
748                 $user = DXUser->new($call) unless $user;
749                 $user->homenode($parent->call) if !$user->homenode;
750                 $user->node($parent->call);
751                 $user->lastin($main::systime) unless DXChannel::get($call);
752                 $user->put;
753
754                 # send info to all logged in thingies
755                 $self->tell_login('loginu', "$ncall: $call") if $user->is_local_node;
756                 $self->tell_buddies('loginb', $call, $ncall);
757         }
758         if (@rout) {
759                 $self->route_pc16($origin, $line, $parent, @rout) if @rout;
760 #               $self->route_pc92a($main::mycall, undef, $parent, @rout) if $h && $self->{state} eq 'normal';
761         }
762 }
763
764 # remove a user
765 sub handle_17
766 {
767         my $self = shift;
768         my $pcno = shift;
769         my $line = shift;
770         my $origin = shift;
771         my $pc = shift;
772
773         my $dxchan;
774         my $ncall = $pc->[2];
775         my $ucall = $pc->[1];
776
777         eph_del_regex("^PC16\\^$ncall.*$ucall");
778
779         # do I want users from this channel?
780         unless ($self->user->wantpc16) {
781                 dbg("PCPROT: don't send users to $self->{call}") if isdbg('chanerr');
782                 return;
783         }
784
785         if ($ncall eq $main::mycall) {
786                 dbg("PCPROT: trying to alter config on this node from outside!") if isdbg('chanerr');
787                 return;
788         }
789
790         # isolate now means only accept stuff from this call only
791         if ($self->{isolate} && $ncall ne $self->{call}) {
792                 dbg("PCPROT: $self->{call} isolated, $ncall ignored") if isdbg('chanerr');
793                 return;
794         }
795
796         my $uref = Route::User::get($ucall);
797         unless ($uref) {
798                 dbg("PCPROT: Route::User $ucall not in config") if isdbg('chanerr');
799                 return;
800         }
801         my $parent = Route::Node::get($ncall);
802         unless ($parent) {
803                 dbg("PCPROT: Route::Node $ncall not in config") if isdbg('chanerr');
804                 return;
805         }
806
807         $dxchan = DXChannel::get($ncall);
808         if ($dxchan && $dxchan ne $self) {
809                 dbg("PCPROT: PC17 from $self->{call} trying to alter locally connected $ncall, ignored!") if isdbg('chanerr');
810                 return;
811         }
812
813         unless ($dxchan) {
814                 if ($parent->via_pc92) {
815                         dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
816                         return;
817                 }
818         }
819
820         if (DXChannel::get($ucall)) {
821                 dbg("PCPROT: trying do disconnect local user, ignored") if isdbg('chanerr');
822                 return;
823         }
824
825         # input filter if required and then remove user if present
826 #               return unless $self->in_filter_route($parent);
827         $parent->del_user($uref);
828
829         # send info to all logged in thingies
830         my $user = DXUser::get_current($ncall);
831         $self->tell_login('logoutu', "$ncall: $ucall") if $user && $user->is_local_node;
832         $self->tell_buddies('logoutb', $ucall, $ncall);
833
834         if (eph_dup($line)) {
835                 return;
836         }
837
838         $self->route_pc17($origin, $line, $parent, $uref);
839 #       $self->route_pc92d($main::mycall, undef, $parent, $uref) if $dxchan;
840 }
841
842 # link request
843 sub handle_18
844 {
845         my $self = shift;
846         my $pcno = shift;
847         my $line = shift;
848         my $origin = shift;
849         my $pc = shift;
850
851         $self->state('init');
852
853         my $parent = Route::Node::get($self->{call});
854         
855         # record the type and version offered
856         if (my ($software, $version) = $pc->[1] =~ /(DXSpider|CC\s*Cluster)\s+Version: (\d+(?:\.\d+)?)/i) {
857                 $version += 0;
858                 $version += 53 if $version < 6;
859                 $self->{version} = $version;
860                 $self->user->version($version);
861                 $parent->version($version);
862                 my ($build) = $pc->[1] =~ /Build: (\d+(?:\.\d+)?)/;
863                 $build += 0;
864                 $self->{build} = $build;
865                 $self->user->build($build);
866                 $parent->build($build);
867                 dbg("$self->{call} = $software version $version build $build");
868                 unless ($self->is_spider) {
869                         dbg("Change U " . $self->user->sort . " C $self->{sort} -> S");
870                         $self->user->sort('S');
871                         $self->user->put;
872                         $self->sort('S');
873                 }
874 #               $self->{handle_xml}++ if DXXml::available() && $pc->[1] =~ /\bxml/;
875         } elsif (my ($software, $version, $build) = $pc->[1] =~ /(AR-Cluster)\s+Version:\s+(\d+\.\d+).?(\d+\.\d+)?/) {
876                 dbg("$self->{call} = $software version $version build $build");
877                 $self->{version} = $version;
878                 $self->user->version($version);
879                 $parent->version($version);
880                 $self->{build} = $build;
881                 $self->user->build($build);
882                 $parent->build($build);
883                 unless ($self->is_arcluster) {
884                         dbg("Change U " . $self->user->sort . " C $self->{sort} -> R");
885                         $self->user->sort('R');
886                         $self->user->put;
887                         $self->sort('R');
888                 }
889         } else {
890                 dbg("$self->{call} = Unknown software ($pc->[1] $pc->[2])");
891                 $self->version(50.0);
892                 $self->version($pc->[2] / 100) if $pc->[2] && $pc->[2] =~ /^\d+$/;
893                 $self->user->version($self->version);
894         }
895
896         if ($pc->[1] =~ /CC\*Cluster/i || $pc->[1] =~ /\bpc9x/i) {
897                 if ($self->{isolate}) {
898                         dbg("$self->{call} pc9x recognised, but node is isolated, using old protocol");
899                 } elsif (!$self->user->wantpc9x) {
900                         dbg("$self->{call} pc9x explicitly switched off, using old protocol");
901                 } else {
902                         $self->{do_pc9x} = 1;
903                         dbg("$self->{call} Set do PC9x");
904                 }
905         }
906
907         # first clear out any nodes on this dxchannel
908         my @rout = $parent->del_nodes;
909         $self->route_pc21($origin, $line, @rout, $parent) if @rout;
910         $self->send_local_config();
911         $self->send(pc20());
912 }
913
914 sub check_add_user
915 {
916         my $call = shift;
917         my $type = shift;
918         my $homenode = shift;
919
920         # add this station to the user database, if required (don't remove SSID from nodes)
921         my $user = DXUser::get_current($call);
922         unless ($user) {
923                 $user = DXUser->new($call);
924                 $user->sort($type || 'U');
925                 if ($user->is_node) {
926                         $user->priv(1);         # I have relented and defaulted nodes
927                         $user->lockout(1) if $user->is_node;
928                 } else {
929                         $user->homenode($homenode) if $homenode;
930                         $user->node($homenode);
931                         $user->priv(0);
932                 }
933                 $user->lastin($main::systime); # this make it last longer than just this invocation
934                 $user->put;                             # just to make sure it gets written away!!!
935                 dbg("DXProt: PC92 new user record for $call created");
936         }
937
938         # this is to fix a problem I introduced some build ago by using this function for users
939         # whereas it was only being used for nodes.
940         if ($user->is_user && $user->lockout && ($user->priv // 0) == 1) {
941                 $user->priv(0);
942                 $user->lockout(0);
943                 dbg("DXProt: PC92 user record for $call depriv'd and unlocked");
944                 $user->put;
945         }
946         return $user;
947 }
948
949 # incoming cluster list
950 sub handle_19
951 {
952         my $self = shift;
953         my $pcno = shift;
954         my $line = shift;
955         my $origin = shift;
956         my $pc = shift;
957
958         my $i;
959         my $newline = "PC19^";
960
961         # new routing list
962         my (@rout, @pc92out);
963
964         # first get the INTERFACE node
965         my $parent = Route::Node::get($self->{call});
966         unless ($parent) {
967                 dbg("PCPROT: my parent $self->{call} has disappeared");
968                 $self->disconnect;
969                 return;
970         }
971
972         my $h;
973
974         # parse the PC19
975         #
976         # We are making a major change from now on. We are only going to accept
977         # PC19s from directly connected nodes.  This means that we are probably
978         # going to throw away most of the data that we are being sent.
979         #
980         # The justification for this is that most of it is wrong or out of date
981         # anyway.
982         #
983         # From now on we are only going to believe PC92 data and locally connected
984         # non-pc92 nodes.
985         #
986         for ($i = 1; $i < $#$pc-1; $i += 4) {
987                 my $here = $pc->[$i];
988                 my $call = uc $pc->[$i+1];
989                 my $conf = $pc->[$i+2];
990                 my $ver = $pc->[$i+3];
991                 next unless defined $here && defined $conf && is_callsign($call);
992
993                 eph_del_regex("^PC(?:21\\^$call|17\\^[^\\^]+\\^$call)");
994
995                 # check for sane parameters
996                 #                               $ver = 5000 if $ver eq '0000';
997                 next unless $ver && $ver =~ /^\d+$/;
998                 next if $ver < 5000;    # only works with version 5 software
999                 next if length $call < 3; # min 3 letter callsigns
1000                 next if $call eq $main::mycall || $call eq $main::myalias;
1001
1002                 # check that this PC19 isn't trying to alter the wrong dxchan
1003                 $h = 0;
1004                 my $dxchan = DXChannel::get($call);
1005                 if ($dxchan) {
1006                         if ($dxchan == $self) {
1007                                 $h = 1;
1008                         } else {
1009                                 dbg("PCPROT: PC19 from $self->{call} trying to alter wrong locally connected $call, ignored!") if isdbg('chanerr');
1010                                 next;
1011                         }
1012                 }
1013
1014                 # isolate now means only accept stuff from this call only
1015                 if ($self->{isolate} && $call ne $self->{call}) {
1016                         dbg("PCPROT: $self->{call} isolated, $call ignored") if isdbg('chanerr');
1017                         next;
1018                 }
1019
1020                 my $user = check_add_user($call, 'A');
1021
1022 #               if (eph_dup($genline)) {
1023 #                       dbg("PCPROT: dup PC19 for $call detected") if isdbg('chanerr');
1024 #                       next;
1025 #               }
1026
1027
1028                 unless ($h) {
1029                         if ($parent->via_pc92) {
1030                                 dbg("PCPROT: non-local node controlled by PC92, ignored") if isdbg('chanerr');
1031                                 next;
1032                         }
1033                 }
1034
1035                 my $r = Route::Node::get($call);
1036                 my $flags = Route::here($here)|Route::conf($conf);
1037
1038                 # modify the routing table if it is in it, otherwise store it in the pc19list for now
1039                 if ($r) {
1040                         my $ar;
1041                         if ($call ne $parent->call) {
1042                                 if ($self->in_filter_route($r)) {
1043                                         $ar = $parent->add($call, $ver, $flags);
1044 #                                       push @rout, $ar if $ar;
1045                                 } else {
1046                                         next;
1047                                 }
1048                         }
1049                         if ($r->version ne $ver || $r->flags != $flags) {
1050                                 $r->version($ver);
1051                                 $r->flags($flags);
1052                         }
1053                         push @rout, $r;
1054                 } else {
1055                         if ($call eq $self->{call} || $user->wantroutepc19) {
1056                                 my $new = Route->new($call); # throw away
1057                                 if ($self->in_filter_route($new)) {
1058                                         my $ar = $parent->add($call, $ver, $flags);
1059                                         $user->wantroutepc19(1) unless defined $user->wantroutepc19;
1060                                         push @rout, $ar if $ar;
1061                                         push @pc92out, $r if $h;
1062                                 } else {
1063                                         next;
1064                                 }
1065                         }
1066                 }
1067
1068                 # unbusy and stop and outgoing mail (ie if somehow we receive another PC19 without a disconnect)
1069                 my $mref = DXMsg::get_busy($call);
1070                 $mref->stop_msg($call) if $mref;
1071
1072                 $user->lastin($main::systime) unless DXChannel::get($call);
1073                 $user->put;
1074         }
1075
1076         # we are not automatically sending out PC19s, we send out a composite PC21,PC19 instead
1077         # but remember there will only be one (pair) these because any extras will be
1078         # thrown away.
1079         if (@rout) {
1080 #               $self->route_pc21($self->{call}, $line, @rout);
1081                 $self->route_pc19($self->{call}, $line, @rout);
1082         }
1083         if (@pc92out && !$pc92_slug_changes) {
1084                 $self->route_pc92a($main::mycall, $line, $main::routeroot, @pc92out) if $self->{state} eq 'normal';
1085         }
1086 }
1087
1088 # send local configuration
1089 sub handle_20
1090 {
1091         my $self = shift;
1092         my $pcno = shift;
1093         my $line = shift;
1094         my $origin = shift;
1095         my $pc = shift;
1096
1097         if ($self->{do_pc9x} && $self->{state} ne 'init92' && $self->{state} ne 'normal') {
1098                 $self->send("Reseting to oldstyle routing because login call not sent in any pc92");
1099                 $self->{do_pc9x} = 0;
1100         }
1101         $self->send_local_config;
1102         $self->send(pc22());
1103         $self->state('normal');
1104         $self->{lastping} = 0;
1105         $self->route_pc92a($main::mycall, undef, $main::routeroot, Route::Node::get($self->{call}));
1106 }
1107
1108 # delete a cluster from the list
1109 #
1110 # This should never occur for directly connected nodes.
1111 #
1112 sub handle_21
1113 {
1114         my $self = shift;
1115         my $pcno = shift;
1116         my $line = shift;
1117         my $origin = shift;
1118         my $pc = shift;
1119
1120         my $call = uc $pc->[1];
1121
1122         eph_del_regex("^PC1[679].*$call");
1123
1124         # if I get a PC21 from the same callsign as self then ignore it
1125         if ($call eq $self->{call}) {
1126                 dbg("PCPROT: self referencing PC21 from $self->{call}");
1127                 return;
1128         }
1129
1130         # for the above reason and also because of the check for PC21s coming
1131         # in for self->call from outside being ignored further down
1132         # we don't need any isolation code here, because we will never
1133         # act on a PC21 with self->call in it.
1134
1135         my $parent = Route::Node::get($self->{call});
1136         unless ($parent) {
1137                 dbg("PCPROT: my parent $self->{call} has disappeared");
1138                 $self->disconnect;
1139                 return;
1140         }
1141
1142         my @rout;
1143
1144         if ($call ne $main::mycall && $call ne $main::myalias) { # don't allow malicious buggers to disconnect me!
1145                 my $node = Route::Node::get($call);
1146                 if ($node) {
1147
1148                         if ($node->via_pc92) {
1149                                 dbg("PCPROT: controlled by PC92, ignored") if isdbg('chanerr');
1150                                 return;
1151                         }
1152
1153                         my $dxchan = DXChannel::get($call);
1154                         if ($dxchan && $dxchan != $self) {
1155                                 dbg("PCPROT: PC21 from $self->{call} trying to alter locally connected $call, ignored!") if isdbg('chan');
1156                                 return;
1157                         }
1158
1159                         # input filter it
1160                         return unless $self->in_filter_route($node);
1161
1162                         # routing objects, force a PC21 if it is local
1163                         push @rout, $node->del($parent);
1164                         push @rout, $call if $dxchan && @rout == 0;
1165                 }
1166         } else {
1167                 dbg("PCPROT: I WILL _NOT_ be disconnected!") if isdbg('chan');
1168                 return;
1169         }
1170
1171         if (eph_dup($line)) {
1172                 return;
1173         }
1174
1175         if (@rout) {
1176                 $self->route_pc21($origin, $line, @rout);
1177 #               $self->route_pc92d($main::mycall, $line, $main::routeroot, @rout);
1178         }
1179 }
1180
1181
1182 sub handle_22
1183 {
1184         my $self = shift;
1185         my $pcno = shift;
1186         my $line = shift;
1187         my $origin = shift;
1188         my $pc = shift;
1189
1190         if ($self->{do_pc9x}) {
1191                 if ($self->{state} ne 'init92' && $self->{state} ne 'normal') {
1192                         $self->send("Reseting to oldstyle routing because login call not sent in any pc92");
1193                         $self->{do_pc9x} = 0;
1194                 }
1195         }
1196         $self->{lastping} = 0;
1197         $self->state('normal');
1198         $self->route_pc92a($main::mycall, undef, $main::routeroot, Route::Node::get($self->{call}));
1199 }
1200
1201 # WWV info
1202 sub handle_23
1203 {
1204         my $self = shift;
1205         my $pcno = shift;
1206         my $line = shift;
1207         my $origin = shift;
1208         my $pc = shift;
1209
1210         # route foreign' pc27s
1211         if ($pcno == 27) {
1212                 if ($pc->[8] ne $main::mycall) {
1213                         $self->route($pc->[8], $line);
1214                         return;
1215                 }
1216         }
1217
1218
1219         # do some de-duping
1220         my $d = cltounix($pc->[1], sprintf("%02d18Z", $pc->[2]));
1221         my $sfi = unpad($pc->[3]);
1222         my $k = unpad($pc->[4]);
1223         my $i = unpad($pc->[5]);
1224         my ($r) = $pc->[6] =~ /R=(\d+)/;
1225         $r = 0 unless $r;
1226         if (($pcno == 23 && $d < $main::systime - $pc23_max_age) || $d > $main::systime + 1500 || $pc->[2] < 0 || $pc->[2] > 23) {
1227                 dbg("PCPROT: WWV Date ($pc->[1] $pc->[2]) out of range") if isdbg('chanerr');
1228                 return;
1229         }
1230
1231         # global wwv filtering on INPUT
1232         my @dxcc = ((Prefix::cty_data($pc->[7]))[0..2], (Prefix::cty_data($pc->[8]))[0..2]);
1233         if ($self->{inwwvfilter}) {
1234                 my ($filter, $hops) = $self->{inwwvfilter}->it(@$pc[7,8], $origin, @dxcc);
1235                 unless ($filter) {
1236                         dbg("PCPROT: Rejected by input wwv filter") if isdbg('chanerr');
1237                         return;
1238                 }
1239         }
1240         $pc->[7] =~ s/-\d+$//o;         # remove spotter's ssid
1241         if (Geomag::dup($d,$sfi,$k,$i,$pc->[6],$pc->[7])) {
1242                 dbg("PCPROT: Dup WWV Spot ignored\n") if isdbg('chanerr');
1243                 return;
1244         }
1245
1246         # note this only takes the first one it gets
1247         Geomag::update($d, $pc->[2], $sfi, $k, $i, @$pc[6..8], $r);
1248         dbg("WWV: <$pc->[2]>, sfi=$sfi k=$k info=$i '$pc->[6]' $pc->[7]\@$pc->[8] $r route: $origin") if isdbg('progress');
1249
1250         if (defined &Local::wwv) {
1251                 my $rep;
1252                 eval {
1253                         $rep = Local::wwv($self, $pc->[1], $pc->[2], $sfi, $k, $i, @$pc[6..8], $r);
1254                 };
1255                 return if $rep;
1256         }
1257
1258         # DON'T be silly and send on PC27s!
1259         return if $pcno == 27;
1260
1261         # broadcast to the eager world
1262         send_wwv_spot($self, $line, $d, $pc->[2], $sfi, $k, $i, @$pc[6..8]);
1263 }
1264
1265 # set here status
1266 sub handle_24
1267 {
1268         my $self = shift;
1269         my $pcno = shift;
1270         my $line = shift;
1271         my $origin = shift;
1272         my $pc = shift;
1273
1274         my $call = uc $pc->[1];
1275         my ($nref, $uref);
1276         $nref = Route::Node::get($call);
1277         $uref = Route::User::get($call);
1278         return unless $nref || $uref; # if we don't know where they are, it's pointless sending it on
1279
1280         if (eph_dup($line)) {
1281                 return;
1282         }
1283
1284         $nref->here($pc->[2]) if $nref;
1285         $uref->here($pc->[2]) if $uref;
1286         my $ref = $nref || $uref;
1287         return unless $self->in_filter_route($ref);
1288
1289         $self->route_pc24($origin, $line, $ref, $pc->[3]);
1290 }
1291
1292 # merge request
1293 sub handle_25
1294 {
1295         my $self = shift;
1296         my $pcno = shift;
1297         my $line = shift;
1298         my $origin = shift;
1299         my $pc = shift;
1300
1301         if ($pc->[1] ne $main::mycall) {
1302                 $self->route($pc->[1], $line);
1303                 return;
1304         }
1305         if ($pc->[2] eq $main::mycall) {
1306                 dbg("PCPROT: Trying to merge to myself, ignored") if isdbg('chan');
1307                 return;
1308         }
1309
1310         Log('DXProt', "Merge request for $pc->[3] spots and $pc->[4] WWV from $pc->[2]");
1311
1312         # spots
1313         if ($pc->[3] > 0) {
1314                 my @in = reverse Spot::search(1, undef, undef, 0, $pc->[3]);
1315                 my $in;
1316                 foreach $in (@in) {
1317                         $self->send(pc26(@{$in}[0..4], $pc->[2]));
1318                 }
1319         }
1320
1321         # wwv
1322         if ($pc->[4] > 0) {
1323                 my @in = reverse Geomag::search(0, $pc->[4], time, 1);
1324                 my $in;
1325                 foreach $in (@in) {
1326                         $self->send(pc27(@{$in}[0..5], $pc->[2]));
1327                 }
1328         }
1329 }
1330
1331 sub handle_26 {goto &handle_11}
1332 sub handle_27 {goto &handle_23}
1333
1334 # mail/file handling
1335 sub handle_28
1336 {
1337         my $self = shift;
1338         my $pcno = shift;
1339         my $line = shift;
1340         my $origin = shift;
1341         my $pc = shift;
1342
1343         if ($pc->[1] eq $main::mycall) {
1344                 no strict 'refs';
1345                 my $sub = "DXMsg::handle_$pcno";
1346                 &$sub($self, @$pc);
1347         } else {
1348                 $self->route($pc->[1], $line) unless $self->is_clx;
1349         }
1350 }
1351
1352 sub handle_29 {goto &handle_28}
1353 sub handle_30 {goto &handle_28}
1354 sub handle_31 {goto &handle_28}
1355 sub handle_32 {goto &handle_28}
1356 sub handle_33 {goto &handle_28}
1357
1358 sub handle_34
1359 {
1360         my $self = shift;
1361         my $pcno = shift;
1362         my $line = shift;
1363         my $origin = shift;
1364         my $pc = shift;
1365
1366         if (eph_dup($line, $eph_pc34_restime)) {
1367                 return;
1368         } else {
1369                 $self->process_rcmd($pc->[1], $pc->[2], $pc->[2], $pc->[3]);
1370         }
1371 }
1372
1373 # remote command replies
1374 sub handle_35
1375 {
1376         my $self = shift;
1377         my $pcno = shift;
1378         my $line = shift;
1379         my $origin = shift;
1380         my $pc = shift;
1381
1382         eph_del_regex("^PC35\\^$pc->[2]\\^$pc->[1]\\^");
1383         $self->process_rcmd_reply($pc->[1], $pc->[2], $pc->[1], $pc->[3]);
1384 }
1385
1386 sub handle_36 {goto &handle_34}
1387
1388 # database stuff
1389 sub handle_37
1390 {
1391         my $self = shift;
1392         my $pcno = shift;
1393         my $line = shift;
1394         my $origin = shift;
1395         my $pc = shift;
1396
1397         if ($pc->[1] eq $main::mycall) {
1398                 no strict 'refs';
1399                 my $sub = "DXDb::handle_$pcno";
1400                 &$sub($self, @$pc);
1401         } else {
1402                 $self->route($pc->[1], $line) unless $self->is_clx;
1403         }
1404 }
1405
1406 # node connected list from neighbour
1407 sub handle_38
1408 {
1409         my $self = shift;
1410         my $pcno = shift;
1411         my $line = shift;
1412         my $origin = shift;
1413         my $pc = shift;
1414 }
1415
1416 # incoming disconnect
1417 sub handle_39
1418 {
1419         my $self = shift;
1420         my $pcno = shift;
1421         my $line = shift;
1422         my $origin = shift;
1423         my $pc = shift;
1424
1425         if ($pc->[1] eq $self->{call}) {
1426                 $self->disconnect(1);
1427         } else {
1428                 dbg("PCPROT: came in on wrong channel") if isdbg('chanerr');
1429         }
1430 }
1431
1432 sub handle_40 {goto &handle_28}
1433
1434 # user info
1435 sub handle_41
1436 {
1437         my $self = shift;
1438         my $pcno = shift;
1439         my $line = shift;
1440         my $origin = shift;
1441         my $pc = shift;
1442
1443         my $call = $pc->[1];
1444         my $sort = $pc->[2];
1445         my $val = $pc->[3];
1446
1447         my $l = "PC41^$call^$sort";
1448         if (eph_dup($l, $eph_info_restime)) {
1449                 return;
1450         }
1451
1452         # input filter if required
1453         #                       my $ref = Route::get($call) || Route->new($call);
1454         #                       return unless $self->in_filter_route($ref);
1455
1456         if ($val eq $sort || $val =~ /^\s*$/) {
1457                 dbg('PCPROT: invalid value') if isdbg('chanerr');
1458                 return;
1459         }
1460
1461         if ($call eq $main::mycall || $call eq $main::myalias) {
1462                 dbg "DXPROT: PC41 trying to update $call from outside via $origin, ignored";
1463                 return;
1464         }
1465         my $chan = DXChannel::get($call);
1466         if ($chan) {
1467                 dbg "DXPROT: PC41 trying to update online $call from outside via $origin, ignored";
1468                 return;
1469         }
1470
1471         # add this station to the user database, if required
1472         my $user = DXUser::get_current($call);
1473         $user = DXUser->new($call) unless $user;
1474
1475         if ($sort == 1) {
1476                 if (($val =~ /spotter/i || $val =~ /self/i) && $user->name && $user->name ne $val) {
1477                         dbg("PCPROT: invalid name") if isdbg('chanerr');
1478                         return;
1479                 }
1480                 $user->name($val);
1481         } elsif ($sort == 2) {
1482                 $user->qth($val);
1483         } elsif ($sort == 3) {
1484                 if (is_latlong($val)) {
1485                         my ($lat, $long) = DXBearing::stoll($val);
1486                         $user->lat($lat) if $lat;
1487                         $user->long($long) if $long;
1488                         $user->qra(DXBearing::lltoqra($lat, $long)) unless $user->qra;
1489                 } else {
1490                         dbg('PCPROT: not a valid lat/long') if isdbg('chanerr');
1491                         return;
1492                 }
1493         } elsif ($sort == 4) {
1494                 $user->homenode($val);
1495         } elsif ($sort == 5) {
1496                 if (is_qra(uc $val)) {
1497                         my ($lat, $long) = DXBearing::qratoll(uc $val);
1498                         $user->lat($lat) if $lat && !$user->lat;
1499                         $user->long($long) if $long && !$user->long;
1500                         $user->qra(uc $val);
1501                 } else {
1502                         dbg('PCPROT: not a valid QRA locator') if isdbg('chanerr');
1503                         return;
1504                 }
1505         }
1506         $user->lastoper($main::systime); # to cut down on excessive for/opers being generated
1507         $user->put;
1508
1509         unless ($self->{isolate}) {
1510                 DXChannel::broadcast_nodes($line, $self); # send it to everyone but me
1511         }
1512
1513         #  perhaps this IS what we want after all
1514         #                       $self->route_pc41($ref, $call, $sort, $val, $pc->[4]);
1515 }
1516
1517 sub handle_42 {goto &handle_28}
1518
1519
1520 # database
1521 sub handle_44 {goto &handle_37}
1522 sub handle_45 {goto &handle_37}
1523 sub handle_46 {goto &handle_37}
1524 sub handle_47 {goto &handle_37}
1525 sub handle_48 {goto &handle_37}
1526
1527 # message and database
1528 sub handle_49
1529 {
1530         my $self = shift;
1531         my $pcno = shift;
1532         my $line = shift;
1533         my $origin = shift;
1534         my $pc = shift;
1535
1536         if (eph_dup($line)) {
1537                 return;
1538         }
1539
1540         if ($pc->[1] eq $main::mycall) {
1541                 DXMsg::handle_49($self, @$pc);
1542         } else {
1543                 $self->route($pc->[1], $line) unless $self->is_clx;
1544         }
1545 }
1546
1547 # keep alive/user list
1548 sub handle_50
1549 {
1550         my $self = shift;
1551         my $pcno = shift;
1552         my $line = shift;
1553         my $origin = shift;
1554         my $pc = shift;
1555
1556         return if (eph_dup($line));
1557
1558         my $call = $pc->[1];
1559
1560         my $node = Route::Node::get($call);
1561         if ($node) {
1562                 return unless $node->call eq $self->{call};
1563                 $node->usercount($pc->[2]) unless $node->users;
1564                 $node->reset_obs;
1565                 $node->PC92C_dxchan($self->call, $pc->[-1]);
1566
1567                 # input filter if required
1568 #               return unless $self->in_filter_route($node);
1569
1570                 unless ($self->{isolate}) {
1571                         DXChannel::broadcast_nodes($line, $self); # send it to everyone but me
1572                 }
1573 #               $self->route_pc50($origin, $line, $node, $pc->[2], $pc->[3]) unless eph_dup($line);
1574         }
1575 }
1576
1577 # incoming ping requests/answers
1578 sub handle_51
1579 {
1580         my $self = shift;
1581         my $pcno = shift;
1582         my $line = shift;
1583         my $origin = shift;
1584         my $pc = shift;
1585
1586         my $to = $pc->[1];
1587         my $from = $pc->[2];
1588         my $flag = $pc->[3];
1589
1590         if ($to eq $main::myalias) {
1591                 dbg("DXPROT: Ping addressed to \$myalias ($main::myalias), ignored") if isdbg('chan');
1592                 return;
1593         }
1594
1595         # is it for us?
1596         if ($to eq $main::mycall) {
1597                 if ($flag == 1) {
1598                         $self->send(pc51($from, $to, '0'));
1599                 } else {
1600                         DXXml::Ping::handle_ping_reply($self, $from);
1601                 }
1602         } else {
1603                 if (eph_dup($line)) {
1604                         return;
1605                 }
1606                 # route down an appropriate thingy
1607                 $self->route($to, $line);
1608         }
1609 }
1610
1611 sub handle_61 { goto &handle_11; }
1612
1613 # dunno but route it
1614 sub handle_75
1615 {
1616         my $self = shift;
1617         my $pcno = shift;
1618         my $line = shift;
1619         my $origin = shift;
1620         my $pc = shift;
1621
1622         my $call = $pc->[1];
1623         if ($call ne $main::mycall) {
1624                 $self->route($call, $line);
1625         }
1626 }
1627
1628 # WCY broadcasts
1629 sub handle_73
1630 {
1631         my $self = shift;
1632         my $pcno = shift;
1633         my $line = shift;
1634         my $origin = shift;
1635         my $pc = shift;
1636
1637         my $call = $pc->[1];
1638
1639         # do some de-duping
1640         my $d = cltounix($call, sprintf("%02d18Z", $pc->[2]));
1641         if (($pcno == 23 && $d < $main::systime - $pc23_max_age) || $d > $main::systime + 1500 || $pc->[2] < 0 || $pc->[2] > 23) {
1642                 dbg("PCPROT: WCY Date ($call $pc->[2]) out of range") if isdbg('chanerr');
1643                 return;
1644         }
1645         $pc = [ map { unpad($_) } @$pc ];
1646         if (WCY::dup($d)) {
1647                 dbg("PCPROT: Dup WCY Spot ignored\n") if isdbg('chanerr');
1648                 return;
1649         }
1650
1651         my $wcy = WCY::update($d, @$pc[2..12]);
1652         dbg("WCY: <$pc->[2]> K=$pc->[5] expK=$pc->[6] A=$pc->[4] R=$pc->[7] SFI=$pc->[3] SA=$pc->[8] GMF=$pc->[9] Au=$pc->[10] $pc->[11]\@$pc->[12] route: $origin") if isdbg('progress');
1653
1654         if (defined &Local::wcy) {
1655                 my $rep;
1656                 eval {
1657                         $rep = Local::wcy($self, @$pc[1..12]);
1658                 };
1659                 return if $rep;
1660         }
1661
1662         # broadcast to the eager world
1663         send_wcy_spot($self, $line, $d, @$pc[2..12]);
1664 }
1665
1666 # remote commands (incoming)
1667 sub handle_84
1668 {
1669         my $self = shift;
1670         my $pcno = shift;
1671         my $line = shift;
1672         my $origin = shift;
1673         my $pc = shift;
1674
1675         $self->process_rcmd($pc->[1], $pc->[2], $pc->[3], $pc->[4]);
1676 }
1677
1678 # remote command replies
1679 sub handle_85
1680 {
1681         my $self = shift;
1682         my $pcno = shift;
1683         my $line = shift;
1684         my $origin = shift;
1685         my $pc = shift;
1686
1687         $self->process_rcmd_reply($pc->[1], $pc->[2], $pc->[3], $pc->[4]);
1688 }
1689
1690 # decode a pc92 call: flag call : version : build
1691 sub _decode_pc92_call
1692 {
1693         my $icall = shift;
1694         my @part = split /:/, $icall;
1695         my ($flag, $call) = unpack "A A*", $part[0];
1696         unless (defined $flag && $flag ge '0' && $flag le '7') {
1697                 dbg("PCPROT: $icall no flag byte (0-7) at front of call, ignored") if isdbg('chanerr');
1698                 return ();
1699         }
1700         unless ($call && is_callsign($call)) {
1701                 dbg("PCPROT: $icall no recognisable callsign, ignored") if isdbg('chanerr');
1702                 return ();
1703         }
1704         my $is_node = $flag & 4;
1705         my $is_extnode = $flag & 2;
1706         my $here = $flag & 1;
1707         my $version = $part[1] || 0;
1708         my $build = $part[2] || 0;
1709         my $ip = $part[3] || '';
1710
1711         # remember that, at this stage, IPV6 addresses have : replaced by ,
1712         if (length $version > 4 && $version =~ /[,\.][\da-f]{1,4}/i) {
1713                 $ip = $version;
1714                 $version = 0;
1715         }
1716         $version =~ s/\D//g;
1717         $version = 0 unless $version && $version =~ /^[0-9]+$/;
1718         $build =~ s/^0\.//;
1719         $build =~ s/\D//g;
1720         $build = 0 unless $build &&  $build =~ /^[0-9]+$/;
1721         if ($ip) {
1722         $ip =~ s/,/:/g;
1723         $ip =~ s/^::ffff://i;
1724                 $ip = '' unless is_ipaddr($ip);
1725     }
1726         dbg("'$icall' = '" . join("', '", $call, $is_node, $is_extnode, $here, $version, $build, $ip) . "'") if isdbg('pc92');
1727         return ($call, $is_node, $is_extnode, $here, $version+0, $build+0, $ip);
1728 }
1729
1730 # decode a pc92 call: flag call : version : build
1731 sub _encode_pc92_call
1732 {
1733         my $ref = shift;
1734
1735         # plain call or value
1736         return $ref unless ref $ref;
1737
1738         my $ext = shift || 0;
1739         my $flag = 0;
1740         my $call = $ref->call;
1741         my $extra = '';
1742         $flag |= $ref->here ? 1 : 0;
1743         if ($ref->isa('Route::Node') || $ref->isa('DXProt')) {
1744                 $flag |= 4;
1745                 my $dxchan = DXChannel::get($call);
1746                 $flag |= 2 if $call ne $main::mycall && $dxchan && !$dxchan->{do_pc9x};
1747                 if (($ext & 1) && $ref->version) {
1748                         my $version = $ref->version || 1.0;
1749                         $version =  $version * 100 + 5300 if $version < 50;
1750                         $extra .= ":" . $version;
1751                 }
1752         }
1753         if (($ext & 2) && $ref->ip) {
1754                 my $ip = $ref->ip;
1755                 $ip =~ s/:/,/g;
1756                 $extra .= ':' . $ip;
1757         }
1758
1759         return "$flag$call$extra";
1760 }
1761
1762 my %things_add;
1763 my %things_del;
1764
1765 sub _add_thingy
1766 {
1767         my $parent = shift;
1768         my $s = shift;
1769         my $dxchan = shift;
1770         my $hops = shift;
1771
1772         my ($call, $is_node, $is_extnode, $here, $version, $build, $ip) = @$s;
1773         my @rout;
1774
1775         # remove spurious IPV6 prefix on IPV4 addresses
1776         $build ||= 0;
1777         $version ||= 0;
1778
1779         if ($call) {
1780                 my $ncall = $parent->call;
1781                 if ($ncall ne $call) {
1782                         my $user;
1783                         my $r;
1784
1785                         # normalise call, delete any unnormalised calls in the users file.
1786                         # then ignore this thingy
1787                         my $normcall = normalise_call($call);
1788                         if ($normcall ne $call) {
1789                                 next if DXChannel::get($call);
1790                                 $user = DXUser::get($call);
1791                                 dbg("DXProt::_add_thingy call $call normalised to $normcall, deleting spurious user $call");
1792                                 $user->del if $user;
1793                             $call = $normcall; # this is safe because a route add will ignore duplicates
1794                         }
1795                         
1796                         if ($is_node) {
1797                                 dbg("ROUTE: added node $call to $ncall") if isdbg('routelow');
1798                                 $user = check_add_user($call, 'A');
1799                                 @rout = $parent->add($call, $version, Route::here($here), $ip);
1800                                 $r = Route::Node::get($call);
1801                                 $r->PC92C_dxchan($dxchan->call, $hops) if $r;
1802                                 if ($version && is_numeric($version) && !$r->K && !$user->K) {
1803                                         my $old = $user->sort;
1804                                         if ($user->is_ak1a && (($version >= 5455 &&  $build > 0) || ($version >= 3000 && $version <= 3500)) ) {
1805                                                 $user->sort('S');
1806                                                 dbg("PCPROT::_add_thingy node $call v: $version b: $build sort ($old) updated to " . $user->sort);
1807                                         } elsif ($user->is_spider && ($version < 3000 || ($version > 4000 && $version < 5455))) {
1808                                                 unless ($version > 0  && $build == 0) {
1809                                                         $user->sort('A');
1810                                                         $build ||= 0;
1811                                                         dbg("PCPROT::_add_thingy node $call v: $version b: $build sort ($old) downgraded to " . $user->sort);
1812                                                 }
1813                                         }
1814                                 }
1815                                 $r->version($user->version) if $user->version;
1816                                 $r->build($user->build) if $user->build;
1817                                 $r->K(1) if $user->K;
1818                         } else {
1819                                 dbg("ROUTE: added user $call to $ncall") if isdbg('routelow');
1820                                 $user = check_add_user($call, 'U', $parent->call);
1821                                 @rout = $parent->add_user($call, Route::here($here), $ip);
1822                                 $dxchan->tell_buddies('loginb', $call, $ncall) if $dxchan;
1823                                 $r = Route::User::get($call);
1824                         }
1825                         if ($ip) {
1826                                 $r->ip($ip);
1827                                 Log('DXProt', "PC92A $call -> $ip on $ncall");
1828                         }
1829                         if ($pc92_slug_changes && $parent == $main::routeroot) {
1830                                 $things_add{$call} = Route::get($call);
1831                                 delete $things_del{$call};
1832                         }
1833                         $user->close($main::systime, $ip) if $user;             # this just updates lastseen and the connlist list containing the IP address
1834                 } else {                                
1835                         dbgprintring(10) if isdbg('nologchan');
1836                         dbg("DXProt::add_thingy: Trying to add parent $call to itself $ncall, ignored");
1837                 }
1838         }
1839         
1840         return @rout;
1841 }
1842
1843 sub _del_thingy
1844 {
1845         my $parent = shift;
1846         my $s = shift;
1847         my $dxchan = shift;
1848         my ($call, $is_node, $is_extnode, $here, $version, $build) = @$s;
1849         my @rout;
1850         if ($call) {
1851                 my $ref;
1852                 if ($is_node) {
1853                         $ref = Route::Node::get($call);
1854                         dbg("ROUTE: deleting node $call from " . $parent->call) if isdbg('routelow');
1855                         @rout = $ref->del($parent) if $ref;
1856                 } else {
1857                         dbg("ROUTE: deleting user $call from " . $parent->call) if isdbg('routelow');
1858                         $ref = Route::User::get($call);
1859                         if ($ref) {
1860                                 $dxchan->tell_buddies('logoutb', $call, $parent->call) if $dxchan;
1861                                 @rout = $parent->del_user($ref);
1862                         }
1863                 }
1864                 if ($pc92_slug_changes && $parent == $main::routeroot) {
1865                         $things_del{$call} = $ref unless exists $things_add{$call};
1866                         delete $things_add{$call};
1867                 }
1868         }
1869         return @rout;
1870 }
1871
1872 # this will only happen if we are slugging changes and
1873 # there are some changes to be sent, it will create an add or a delete
1874 # or both
1875 sub gen_pc92_changes
1876 {
1877         my @add = values %things_add;
1878         my @del = values %things_del;
1879         return (\@add, \@del);
1880 }
1881
1882 sub clear_pc92_changes
1883 {
1884         %things_add = %things_del = ();
1885         $last_pc92_slug = $main::systime;
1886 }
1887
1888 my $_last_time;
1889 my $_last_occurs;
1890 my $_last_pc9x_id;
1891
1892 sub last_pc9x_id
1893 {
1894         return $_last_pc9x_id;
1895 }
1896
1897 sub gen_pc9x_t
1898 {
1899         if (!$_last_time || $_last_time != $main::systime) {
1900                 $_last_time = $main::systime;
1901                 $_last_occurs = 0;
1902                 return $_last_pc9x_id = $_last_time - $main::systime_daystart;
1903         } else {
1904                 $_last_occurs++;
1905                 return $_last_pc9x_id = sprintf "%d.%02d", $_last_time - $main::systime_daystart, $_last_occurs;
1906         }
1907 }
1908
1909 sub check_pc9x_t
1910 {
1911         my $call = shift;
1912         my $t = shift;
1913         my $pc = shift;
1914         my $create = shift;
1915
1916         # check that the time is between 0 >= $t < 86400
1917         unless ($t >= 0 && $t < 86400) {
1918                 dbg("PCPROT: time invalid t: $t, ignored") if isdbg('chanerr');
1919                 return undef;
1920         }
1921
1922         # check that the time of this pc9x is within tolerance (default 15 mins either way)
1923         my $now = $main::systime - $main::systime_daystart ;
1924         my $diff = abs($now - $t);
1925         unless ($diff < $pc9x_time_tolerance || 86400 - $diff < $pc9x_time_tolerance) {
1926                 my $c = ref $call ? $call->call : $call;
1927                 dbg("PC9XERR: $c time out of range t: $t now: $now diff: $diff > $pc9x_time_tolerance, ignored") if isdbg('chan');
1928                 return undef;
1929         }
1930
1931         my $parent = ref $call ? $call : Route::Node::get($call);
1932         if ($parent) {
1933                 # we only do this for external calls whose routing table
1934                 # record come and go. The reference for mycall is permanent
1935                 # and not that frequently used, it also never times out, so
1936                 # the id on it is completely unreliable. Besides, only commands
1937                 # originating on this box will go through this code...
1938                 if ($parent->call ne $main::mycall) {
1939                         my $lastid = $parent->lastid;
1940                         if (defined $lastid) {
1941                                 if ($t < $lastid) {
1942                                         # note that this is where we determine whether this pc9x has come in yesterday
1943                                         # but is still greater (modulo 86400) than the lastid or is simply an old
1944                                         # duplicate sentence. To determine this we need to do some module 86400
1945                                         # arithmetic. High numbers mean that this is an old duplicate sentence,
1946                                         # low numbers that it is a new sentence.
1947                                         #
1948                                         # Typically you will see yesterday being taken on $t = 84, $lastid = 86235
1949                                         # and old dupes with $t = 234, $lastid = 256 (which give answers 249 and
1950                                         # 86378 respectively in the calculation below).
1951                                         #
1952                                         if ($t+86400-$lastid > $pc9x_past_age) {
1953                                                 dbg("PCPROT: dup id on $t <= lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
1954                                                 return undef;
1955                                         }
1956                                 } elsif ($t == $lastid) {
1957                                         dbg("PCPROT: dup id on $t == lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
1958                                         return undef;
1959                                 } else {
1960                                         # check that if we have a low number in lastid that yesterday's numbers
1961                                         # (likely in the 85000+ area) don't override them, thus causing flip flopping
1962                                         if ($lastid+86400-$t < $pc9x_past_age) {
1963                                                 dbg("PCPROT: dup id on $t in yesterday, lastid $lastid, ignored") if isdbg('chanerr') || isdbg('pc92dedupe');
1964                                                 return undef;
1965                                         }
1966                                 }
1967                         }
1968                 }
1969         } elsif ($create) {
1970                 $parent = Route::Node->new($call);
1971         } else {
1972                 dbg("PCPROT: $call does not exist, ignored") if isdbg('pc92dedupe');
1973                 return undef;
1974         }
1975         if (isdbg('pc92dedupe')) {
1976                 my $exists = exists $parent->{lastid}; # naughty, naughty :-)
1977                 my $val = $parent->{lastid};
1978                 my $s = $exists ? (defined $val ? $val : 'exists/undef') : 'undef';
1979                 dbg("PCPROT: $call pc92 id lastid $s -> $t");
1980         }
1981         $parent->lastid($t);
1982
1983         return $parent;
1984 }
1985
1986 sub pc92_handle_first_slot
1987 {
1988         my $self = shift;
1989         my $slot = shift;
1990         my $parent = shift;
1991         my $t = shift;
1992         my $hops = shift;
1993         my $oparent = $parent;
1994
1995         my @radd;
1996
1997         my ($call, $is_node, $is_extnode, $here, $version, $build) = @$slot;
1998         if ($call && $is_node) {
1999                 if ($call eq $main::mycall) {
2000                         LogDbg('err', "PCPROT: $self->{call} : $call looped back onto \$main::mycall ($main::mycall), ignored");
2001                         return;
2002                 }
2003                 if ($call eq $main::myalias) {
2004                         LogDbg('err', "PCPROT: $self->{call} : $call looped back onto \$main::myalias ($main::myalias), ignored");
2005                         return;
2006                 }
2007                 # this is only accepted from my "self".
2008                 # this also kills configs from PC92 nodes with external PC19 nodes that are also
2009                 # locally connected. Local nodes always take precedence. But we remember the lastid
2010                 # to try to reduce the number of dupe PC92s for this external node.
2011                 if (DXChannel::get($call) && $call ne $self->{call}) {
2012                         $parent = check_pc9x_t($call, $t, 92); # this will update the lastid time
2013                         dbg("PCPROT: locally connected node $call from other another node $self->{call}, ignored") if isdbg('chanerr');
2014                         return;
2015                 }
2016                 if ($is_extnode) {
2017                         # reparent to external node (note that we must have received a 'C' or 'A' record
2018                         # from the true parent node for this external before we get one for the this node
2019                         unless ($parent = Route::Node::get($call)) {
2020                                 if ($is_extnode && $oparent) {
2021                                         @radd = _add_thingy($oparent, $slot, $self, $hops);
2022                                         $parent = $radd[0];
2023                                 } else {
2024                                         dbg("PCPROT: no previous C or A for this external node received, ignored") if isdbg('chanerr');
2025                                         return;
2026                                 }
2027                         }
2028                         $parent = check_pc9x_t($call, $t, 92) || return;
2029                         $parent->via_pc92(1);
2030                         $parent->PC92C_dxchan($self->{call}, $hops);
2031                 }
2032         } else {
2033                 dbg("PCPROT: must be \$mycall or external node as first entry, ignored") if isdbg('chanerr');
2034                 return;
2035         }
2036         $parent->here(Route::here($here));
2037         $parent->version($version || $pc19_version) if $version;
2038     $parent->build($build) if $build;
2039         $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2040         return ($parent, @radd);
2041 }
2042
2043 # DXSpider routing entries
2044 sub handle_92
2045 {
2046         my $self = shift;
2047         my $pcno = shift;
2048         my $line = shift;
2049         my $origin = shift;
2050         my $pc = shift;
2051
2052         my (@radd, @rdel);
2053
2054         my $pcall = $pc->[1];
2055         my $t = $pc->[2];
2056         my $sort = $pc->[3];
2057         my $hops = $pc->[-1];
2058
2059         # this catches loops of A/Ds
2060 #       if (eph_dup($line, $pc9x_dupe_age)) {
2061 #               return;
2062 #       }
2063
2064         if ($pcall eq $main::mycall) {
2065                 LogDbg('err', "PCPROT: looped back, ignored");
2066                 return;
2067         }
2068
2069         if ($pcall eq $main::myalias) {
2070                 LogDbg('err', "PCPROT: looped back to \$myalias ($main::myalias), misconfiguration ignored");
2071                 return;
2072         }
2073
2074         if ($pcall eq $self->{call} && $self->{state} eq 'init') {
2075                 if ($self->{isolate}) {
2076                         dbg("DXPROT: PC9x received, but $pcall is isolated, ignored");
2077                         return;
2078                 } elsif (!$self->user->wantpc9x) {
2079                         dbg("DXPROT: PC9x explicitly switched off on $pcall, ignored");
2080                         return;
2081                 } else {
2082                         $self->state('init92');
2083                         $self->{do_pc9x} = 1;
2084                         dbg("DXPROT: Do pc9x set on $pcall");
2085                 }
2086         }
2087         unless ($self->{do_pc9x}) {
2088                 dbg("PCPROT: PC9x come in from non-PC9x node, ignored") if isdbg('chanerr');
2089                 return;
2090         }
2091
2092         # don't create routing entries for D records that don't already exist
2093         # this is what causes all those PC92 loops!
2094         my $parent = check_pc9x_t($pcall, $t, 92, $sort ne 'D') || return;
2095         my $oparent = $parent;
2096
2097         $parent->do_pc9x(1);
2098         $parent->via_pc92(1);
2099
2100         if ($sort eq 'F' || $sort eq 'R') {
2101
2102                 # this is the route finding section
2103                 # here is where the consequences of the 'find' command
2104                 # are dealt with
2105
2106                 my $from = $pc->[4];
2107                 my $target = $pc->[5];
2108
2109                 if ($sort eq 'F') {
2110                         my $flag;
2111                         my $ref;
2112                         my $dxchan;
2113                         if ($ref = DXChannel::get($target)) {
2114                                 $flag = 1;              # we are directly connected
2115                         } else {
2116                                 $ref = Route::get($target);
2117                                 $dxchan = $ref->dxchan;
2118                                 $flag = 2;
2119                         }
2120                         if ($ref && $flag && $dxchan) {
2121                                 $self->send(pc92r($from, $target, $flag, int($dxchan->{pingave}*1000)));
2122                                 return;
2123                         }
2124                 } elsif ($sort eq 'R') {
2125                         if (my $dxchan = DXChannel::get($from)) {
2126                                 handle_pc92_find_reply($dxchan, $pcall, $from, $target, @$pc[6,7]);
2127                         } else {
2128                                 my $ref = Route::get($from);
2129                                 if ($ref) {
2130                                         my @dxchan = grep {$_->do_pc9x} $ref->alldxchan;
2131                                         if (@dxchan) {
2132                                                 $_->send($line) for @dxchan;
2133                                         } else {
2134                                                 dbg("PCPROT: $self->{call} : type R no return route, ignored") if isdbg('chanerr') || isdbg('route');
2135                                         }
2136                                 } else {
2137                                         dbg("PCPROT: $self->{call} : type R no return route, ignored") if isdbg('chanerr') || isdbg('route');
2138                                 }
2139                         }
2140                         return;
2141                 }
2142
2143         } elsif ($sort eq 'K') {
2144                 $pc92Kin += length $line;
2145
2146                 # remember the last channel we arrived on
2147                 $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2148
2149                 my @ent = _decode_pc92_call($pc->[4]);
2150
2151                 if (@ent) {
2152                         my $add;
2153
2154                         ($parent, $add) = $self->pc92_handle_first_slot(\@ent, $parent, $t, $hops);
2155                         return unless $parent; # dupe
2156                         
2157                         push @radd, $add if $add;
2158                         $parent->reset_obs;
2159                         my $call = $parent->call;
2160                         my $version = $ent[4] || 0;
2161                         my $build = $ent[5] ||  0;
2162                         $build =~ s/^0\.//;
2163                         my $oldbuild = $parent->build || 0;
2164                         my $oldversion = $parent->version || 0;
2165                         my $user = check_add_user($parent->call, 'S');
2166                         my $oldsort = $user->sort // '';
2167
2168                         dbg("PCPROT: PC92 K v: $version ov: $oldversion b: $build ob: $oldbuild pk: " . ($parent->K || '0') . " uk: " . ($user->K || 0)) if isdbg('pc92k');
2169                                 
2170                         if (is_numeric($version) || is_numeric($build)) {
2171                                 my $changed = 0;
2172                                 if (($oldversion ne $version || $build ne $oldbuild)) {
2173                                         dbg("PCPROT: PC92 K node $call updated version: $version (was $oldversion) build: $build (was $oldbuild)");
2174                                         $user->version($parent->version($version));
2175                                         $user->build($parent->build($build));
2176                                         ++$changed;
2177                                 }
2178                                 if ($oldsort ne 'S') {
2179                                         dbg("PCPROT: PC92 K node $call updated sort: $sort (was $oldsort)");
2180                                         $user->sort('S');
2181                                         ++$changed;
2182                                 }
2183                                 unless ($user->K) {
2184                                         dbg("PCPROT: PC92 K node $call updated - marked as PC92 K user");
2185                                         $user->K(1);
2186                                         ++$changed;
2187                                 }
2188                                 $user->put if $changed;
2189                                 $parent->K(1); # mark this as come in on a K
2190                         } else {
2191                                 dbg("DXProt PC92 K version call $call: invalid version: '$version' or build: '$version', ignored");
2192                         }
2193                         dbg("ROUTE: reset obscount on $call now " . $parent->obscount) if isdbg('obscount');
2194                 }
2195         } elsif ($sort eq 'A' || $sort eq 'D' || $sort eq 'C') {
2196
2197                 $pc92Ain += length $line if $sort eq 'A';
2198                 $pc92Cin += length $line if $sort eq 'C';
2199                 $pc92Din += length $line if $sort eq 'D';
2200
2201                 # remember the last channel we arrived on
2202                 $parent->PC92C_dxchan($self->{call}, $hops) unless $self->{call} eq $parent->call;
2203
2204                 # this is the main route section
2205                 # here is where all the routes are created and destroyed
2206
2207                 # cope with missing duplicate node calls in the first slot
2208                 my $me = $pc->[4] || '';
2209                 $me ||= _encode_pc92_call($parent) unless $me ;
2210
2211                 my @ent = map {my @a = _decode_pc92_call($_); @a ? \@a : ()} grep {$_ && /^[0-7]/} $me, @$pc[5 .. $#$pc];
2212
2213                 if (@ent) {
2214
2215                         # look at the first one which will always be a node of some sort
2216                         # except in the case of 'A' or 'D' in which the $pcall is used
2217                         # otherwise use the node call and update any information
2218                         # that needs to be done.
2219                         my $add;
2220
2221                         ($parent, $add) = $self->pc92_handle_first_slot($ent[0], $parent, $t, $hops);
2222                         return unless $parent; # dupe
2223
2224                         shift @ent;
2225                         push @radd, $add if $add;
2226                 }
2227
2228                 # do a pass through removing any references to either mycall
2229                 my @nent;
2230                 for (@ent) {
2231                         my $dxc;
2232                         next unless $_ && @$_;
2233                         if ($_->[0] eq $main::mycall) {
2234                                 dbg("PCPROT: $self->{call} : type $sort $_->[0] refers to me, ignored") if isdbg('route');
2235                                 next;
2236                         }
2237                         if ($_->[0] eq $main::myalias && $_->[1] || $_->[0] eq $main::mycall && $_->[1] == 0) {
2238                                 LogDbg('err',"PCPROT: $self->{call} : type $sort $_->[0] trying to change type to " . $_->[1]?"Node":"User" . ", ignored");
2239                                 next;
2240                         }
2241                         
2242                         push @nent, $_;
2243                 }
2244
2245                 if ($sort eq 'A') {
2246                         for (@nent) {
2247                                 push @radd, _add_thingy($parent, $_, $self, $hops);
2248                         }
2249                 } elsif ($sort eq 'D') {
2250                         for (@nent) {
2251                                 push @rdel, _del_thingy($parent, $_, $self);
2252                         }
2253                 } elsif ($sort eq 'C') {
2254                         my (@nodes, @users);
2255
2256                         # we reset obscounts on config records as well as K records
2257                         $parent->reset_obs;
2258                         dbg("ROUTE: reset obscount on $parent->{call} now " . $parent->obscount) if isdbg('obscount');
2259
2260                         #
2261                         foreach my $r (@nent) {
2262                                 #                       my ($call, $is_node, $is_extnode, $here, $version, $build) = _decode_pc92_call($_);
2263                                 if ($r->[0]) {
2264                                         if ($r->[1]) {
2265                                                 push @nodes, $r->[0];
2266                                         } else {
2267                                                 push @users, $r->[0];
2268                                         }
2269                                 } else {
2270                                         dbg("PCPROT: $self->{call} :  pc92 call entry '$_' not decoded, ignored") if isdbg('chanerr') || isdbg('route');
2271                                 }
2272                         }
2273
2274                         my ($dnodes, $dusers, $nnodes, $nusers) = $parent->calc_config_changes(\@nodes, \@users);
2275
2276                         # add users here
2277                         foreach my $r (@nent) {
2278                                 my $call = $r->[0];
2279                                 if ($call) {
2280                                         push @radd,_add_thingy($parent, $r, $self, $hops) if grep $call eq $_, (@$nnodes, @$nusers);
2281                                 }
2282                         }
2283                         # del users here
2284                         foreach my $r (@$dnodes) {
2285                                 push @rdel,_del_thingy($parent, [$r, 1], $self);
2286                         }
2287                         foreach my $r (@$dusers) {
2288                                 push @rdel,_del_thingy($parent, [$r, 0], $self);
2289                         }
2290
2291                         # remember this last PC92C for rebroadcast on demand
2292                         $parent->last_PC92C($line);
2293                 } else {
2294                         dbg("PCPROT: unknown action '$sort', ignored") if isdbg('chanerr');
2295                         return;
2296                 }
2297
2298                 foreach my $r (@rdel) {
2299                         next unless $r;
2300
2301                         $self->route_pc21($pcall, undef, $r) if $r->isa('Route::Node');
2302                         $self->route_pc17($pcall, undef, $parent, $r) if $r->isa('Route::User');
2303                 }
2304                 my @pc19 = grep { $_ && $_->isa('Route::Node') } @radd;
2305                 my @pc16 = grep { $_ && $_->isa('Route::User') } @radd;
2306                 unshift @pc19, $parent if $self->{state} eq 'init92' && $oparent == $parent;
2307                 $self->route_pc19($pcall, undef, @pc19) if @pc19;
2308                 $self->route_pc16($pcall, undef, $parent, @pc16) if @pc16;
2309         }
2310
2311         # broadcast it if we get here
2312         $self->broadcast_route_pc9x($pcall, undef, $line, 0);
2313 }
2314
2315 # get all the routes for a thing, bearing in mind that the thing (e.g. a user)
2316 # might be on two or more nodes at the same time or that there may be more than
2317 # one equal distance neighbour to a node.
2318 #
2319 # What this means that if sh/route g1tlh shows that he is on (say) two nodes, then
2320 # a Route::findroutes is done on each of those two nodes, the best route(s) taken from
2321 # each and then combined to give a set of dxchans to send the PC9x record down
2322 #
2323 sub find_pc9x_routes
2324 {
2325         my $to = shift;
2326         my $ref = Route::get($to);
2327         my @parent;
2328         my %cand;
2329
2330         if ($ref->isa('Route::User')) {
2331                 my $dxchan = DXChannel::get($to);
2332                 push @parent, $to if $dxchan;
2333                 push @parent, $ref->parents;
2334         } else {
2335                 @parent = $to;
2336         }
2337         foreach my $p (@parent) {
2338                 my $lasthops;
2339                 my @routes = Route::findroutes($p);
2340                 foreach my $r (@routes) {
2341                         $lasthops = $r->[0] unless defined $lasthops;
2342                         if ($r->[0] == $lasthops) {
2343                                 $cand{$r->[1]->call} = $r->[1];
2344                         } else {
2345                                 last;
2346                         }
2347                 }
2348         }
2349         return values %cand;
2350 }
2351
2352 sub handle_93
2353 {
2354         my $self = shift;
2355         my $pcno = shift;
2356         my $line = shift;
2357         my $origin = shift;
2358         my $pc = shift;
2359
2360 #       $self->{do_pc9x} ||= 1;
2361
2362         my $pcall = $pc->[1];                   # this is now checked earlier
2363
2364         # remember that we are converting PC10->PC93 and self will be $main::me if it
2365         # comes from us
2366         unless ($self->{do_pc9x}) {
2367                 dbg("PCPROT: PC9x come in from non-PC9x node, ignored") if isdbg('chanerr');
2368                 return;
2369         }
2370
2371         my $t = $pc->[2];
2372         my $parent = check_pc9x_t($pcall, $t, 93, 1) || return;
2373
2374         my $to = uc $pc->[3];
2375         my $from = uc $pc->[4];
2376         my $via = uc $pc->[5];
2377         my $text = $pc->[6];
2378         my $onode = uc $pc->[7];
2379         $onode = $pcall if @$pc <= 8;
2380
2381         # this is catch loops caused by bad software ...
2382         if (eph_dup("PC93|$from|$text|$onode", $pc10_dupe_age)) {
2383                 return;
2384         }
2385
2386         if (isdbg('progress')) {
2387                 my $vs = $via ne '*' ? " via $via" : ''; 
2388                 my $s = "ANNTALK: $from\@$onode$vs -> $to '$text' route: $origin";
2389                 dbg($s);
2390         }
2391
2392         # if this is a 'bad spotter' user then ignore it
2393         my $nossid = $from;
2394         $nossid =~ s/-\d+$//;
2395         if ($badspotter->in($nossid)) {
2396                 dbg($line) if isdbg('nologchan');
2397                 dbg("PCPROT: Bad Spotter, dropped");
2398                 return;
2399         }
2400
2401         # ignore PC93 coming in from outside this node with a target of local
2402         if ($to eq 'LOCAL' && $self != $main::me) {
2403                 dbg("PCPROT: incoming LOCAL chat not from local node, ignored") if isdbg('chanerr');
2404                 return;
2405         }
2406
2407         # will we allow it at all?
2408         if ($censorpc) {
2409                 my @bad;
2410                 if (@bad = BadWords::check($text)) {
2411                         my $bw = join ', ', @bad;
2412                         dbg($line) if isdbg('nologchan');
2413                         dbg("PCPROT: Badwords: '$bw', dropped");
2414                         return;
2415                 }
2416         }
2417
2418         # if it is routeable then then treat it like a talk
2419         my $ref = Route::get($to);
2420         if ($ref) {
2421                 my $dxchan;
2422
2423                 # convert to PC10 or local talks where appropriate
2424                 # PC93 capable nodes of the same hop count all get a copy
2425                 # if there is a PC10 node then it will get a copy and that
2426                 # will be it. Hopefully such a node will not figure highly
2427                 # in the route list, unless it is local, 'cos it don't issue PC92s!
2428                 # note that both local and PC93s at the same time are possible if the
2429                 # user on more than one node.
2430                 my @routes = find_pc9x_routes($to);
2431                 my $lasthops;
2432                 foreach $dxchan (@routes) {
2433                         if (ref $dxchan && $dxchan->isa('DXChannel')) {
2434                                 if ($dxchan->{do_pc9x}) {
2435                                         $dxchan->send($line);
2436                                 } else {
2437                                         $dxchan->talk($from, $to, $via, $text, $onode);
2438                                 }
2439                         } else {
2440                                 dbg("ERROR: $to -> $dxchan is not a DXChannel! (convert to pc10)");
2441                         }
2442                 }
2443                 return;
2444
2445         } elsif ($to eq '*' || $to eq 'SYSOP' || $to eq 'WX') {
2446                 # announces
2447                 my $sysop = $to eq 'SYSOP' ? '*' : ' ';
2448                 my $wx = $to eq 'WX' ? '1' : '0';
2449                 my $local = $via eq 'LOCAL' ? '*' : $via;
2450
2451                 $self->send_announce(1, pc12($from, $text, $local, $sysop, $wx, $pcall), $from, $local, $text, $sysop, $pcall, $wx, $via eq 'LOCAL' ? $via : undef);
2452                 return if $via eq 'LOCAL';
2453         } elsif (!is_callsign($to) && $text =~ /^#\d+ /) {
2454                 # chat messages really only locally connected users
2455                 $self->send_chat(1, $line, $from, '*', $text, $to, $pcall, '0');
2456         }
2457
2458         # broadcast this chat sentence everywhere unless it is targetted to 'LOCAL'
2459         $self->broadcast_route_pc9x($pcall, undef, $line, 0) unless $to eq 'LOCAL' || $via eq 'LOCAL';
2460 }
2461
2462 # if get here then rebroadcast the thing with its Hop count decremented (if
2463 # there is one). If it has a hop count and it decrements to zero then don't
2464 # rebroadcast it.
2465 #
2466 # NOTE - don't arrive here UNLESS YOU WANT this lump of protocol to be
2467 #        REBROADCAST!!!!
2468 #
2469
2470 sub handle_default
2471 {
2472         my $self = shift;
2473         my $pcno = shift;
2474         my $line = shift;
2475         my $origin = shift;
2476         my $pc = shift;
2477
2478         unless (eph_dup($line)) {
2479                 if ($pcno >= 90) {
2480                         my $pcall = $pc->[1];
2481                         unless (is_callsign($pcall)) {
2482                                 dbg("PCPROT: invalid callsign string '$pc->[1]', ignored") if isdbg('chanerr');
2483                                 return;
2484                         }
2485                         my $t = $pc->[2];
2486                         my $parent = check_pc9x_t($pcall, $t, $pcno, 1) || return;
2487                         $self->broadcast_route_pc9x($pcall, undef, $line, 0);
2488                 } else {
2489                         unless ($self->{isolate}) {
2490                                 DXChannel::broadcast_nodes($line, $self) if $line =~ /\^H\d+\^?~?$/; # send it to everyone but me
2491                         }
2492                 }
2493         }
2494 }
2495
2496 1;