bin/logwatch

   1 #!/usr/bin/perl -w
   2
   3 use File::Basename;
   4 use Cwd 'abs_path';
   5 use I18N::Langinfo qw'langinfo CODESET';
   6
   7 # add fex lib
   8 unless ($FEXLIB = $ENV{FEXLIB}) {
   9   if ($ENV{FEXHOME}) {
  10     $FEXLIB = $ENV{FEXHOME}.'/lib';
  11   } elsif (-f '/usr/share/fex/lib/fex.ph') {
  12     $FEXLIB = '/usr/share/fex/lib';
  13   } else {
  14     $FEXLIB = dirname(dirname(abs_path($0))).'/lib';
  15   }
  16   $ENV{FEXLIB} = $FEXLIB;
  17 }
  18 die "$0: no $FEXLIB\n" unless -d $FEXLIB;
  19
  20 # import from fex.pp
  21 our (@logdir,$spooldir,$debug);
  22
  23 # load common code, local config : $HOME/lib/fex.ph
  24 require "$FEXLIB/fex.pp" or die "$0: cannot load $FEXLIB/fex.pp - $!\n";
  25
  26 $CTYPE = langinfo(CODESET());
  27 binmode(STDOUT,":encoding($CTYPE)");
  28
  29 $log = shift || $logdir[0].'/fexsrv.log';
  30
  31 $ignore = join('|',qw(
  32   (CONNECT|CONTINUE).*(crawl|msnbot|obertux)
  33   DISCONNECT:.no.HTTP.request
  34   GET.*(favicon|robots\.txt)
  35   GET./organization\.gif
  36   GET./small_logo\.jpg
  37   GET./logo\.jpg
  38   GET./action-fex-camel\.gif
  39   GET./fup\?showstatus
  40   GET./FAQ/faq\.css
  41   GET./FAQ/jquery\.js
  42   GET.*Arrow\.gif
  43   GET./apple-touch
  44   GET./browserconfig\.xml
  45   User-Agent:.*(Webnote|FeedFetcher|\w+bot|bot/|Website.Watcher|crawler|spider|searchme|Yandex|Slurp|ScoutJet|findlinks|urlmon|nagios)
  46   User-Agent:.fnb.*quak
  47   From:.*(msnbot|yandex|googlebot|webcrawler)
  48   Referer:.*sex.*stream
  49   Referer:.*stream.*sex
  50   X-.*prefetch
  51   X-Purpose:.preview
  52 ));
  53
  54 @weed = qw(
  55   .*keep-alive
  56   .*no-cache
  57   Connection:
  58   Cache-Control:
  59   Content-Type:
  60   Accept
  61   TE:
  62   UA-CPU:
  63   Pragma:
  64   DNT:
  65   Via:
  66   profile:
  67   if-modified-since
  68   Surrogate-Capability
  69   Proxy-Authorization
  70   http\.
  71   NOKIA_
  72   GPRS
  73   X-Proxy-ID
  74   X-Moz
  75   X.Wap
  76   X-FH
  77   X-Nokia
  78   X-UCBrowser
  79   X-NSN
  80   X-OperaMini
  81   x-Device
  82   x-source-id
  83   x.up
  84   X-Behavioral
  85   X-Do-Not-Track
  86   X-\S*Via
  87   x-Mobile
  88   X-Country
  89   X-ClickOnceSupport
  90   X-Newrelic
  91   .*:\s*$
  92 );
  93
  94 $/ = "\n\n";
  95 $| = 1;
  96
  97 if (-t STDIN or $ENV{GATEWAY_INTERFACE}) {
  98   open L,$log or die "$0: $log - $!\n";
  99   seek L,0,2;
 100 } else {
 101   *L = *STDIN;
 102 }
 103 # binmode(L,":encoding(UTF-8)");
 104
 105 for (;;) {
 106   while (<L>) {
 107     next if /(^|\n)($ignore)/i;
 108     s/[\x00-\x08\x0B-\x1F\x1F\x80-\x9F]/_/g;
 109     s/^\n//;
 110     foreach $weed (@weed) {
 111       while (s/\n$weed.*\n/\n/i) {}
 112     }
 113     if (/^\n*(CONNECT|CONTINUE).*\s\[([\d_]+)\]/i) { $pid = $2 }
 114     if (/\n(POST|GET)\s+\/(\w+)/i)                 { $cgi = $2 }
 115     if (/Content-Length: (\d+)/i) {
 116       $d = $1;
 117       while ($d =~ s/(\d)(\d\d\d\b)/$1,$2/) {};
 118       s/Content-Length: \d+/Content-Length: $d/i;
 119     }
 120     s/[\s\n]*$/\n\n/;
 121     print or exit;
 122     $from = '';
 123     if (m:\nGET /fup/(\w{40,}):) {
 124       $_ = decode_b64($1);
 125       printf "  FROM=\"%s\"\n\n",$1 if /from=([\w\@.-]+)/;
 126     } elsif (m:\nGET /fop/(\w+)/:) {
 127       $dkey = $1;
 128       my $ddir = "$spooldir/.dkeys/$dkey";
 129       $_ = readlink $ddir or next;
 130       (undef,$to,$from) = split('/');
 131       printf "  FROM=\"%s\"\n",$from;
 132       printf "  TO=\"%s\"\n",$to;
 133       $cgi = '';
 134       if ($comment = slurp("$ddir/comment")) {
 135         printf "  COMMENT=\"%s\"\n",utf8decode($comment)||'';
 136       }
 137       if (not -f "$ddir/data" and $_ = slurp("$ddir/error")) {
 138         s/\n.*//s;
 139         print "  ERROR=\"$_\"\n";
 140       }
 141       elsif ($size = -s "$ddir/data") {
 142         printf "  SIZE=%s MB\n",int($size/1024/1024);
 143       }
 144       print "\n";
 145     } elsif (m:\nGET /fup.*skey=(\w+):) {
 146       read_skey($1);
 147       print "\n";
 148     }
 149     if ($debug and $pid and $cgi) {
 150       &read_debug_log;
 151     };
 152     $pid = $cgi = '';
 153   }
 154   sleep 1;
 155 }
 156
 157
 158 sub read_debug_log {
 159   my (@log,$log);
 160   local $/ = "\n";
 161   local $_;
 162   local $^W;
 163   # no warnings "all";
 164
 165   for (1..2) {
 166     sleep 1;
 167     @log = `ls -rt $logdir[0]/.debug/*_${pid}.$cgi 2>/dev/null`;
 168     if ($log = $log[-1] and open $log,$log) {
 169       # binmode($log,":encoding(UTF-8)");
 170       while (<$log>) {
 171         s/\r//;
 172         if (/^Content-Disposition:.*name="FILE".*filename="(.+)"/i) {
 173           print "  FILE=\"$1\"\n";
 174         } elsif (/^Content-Disposition:.*name="(\w+)"/i) {
 175           my $p = uc($1);
 176           $_ = <$log>;
 177           my $v = <$log>||'';
 178           $v =~ s/[\r\n]+//;
 179           printf "  %s=\"%s\"\n",$p,utf8decode($v)||$v if $v;
 180           read_akey($v) if $p eq 'AKEY';
 181           read_skey($v) if $p eq 'SKEY';
 182         } elsif (/^(Param|Exp): (\w+=".+")/) {
 183           print "  $2\n";
 184         }
 185       }
 186       close $log;
 187       print "\n";
 188       return;
 189     }
 190   }
 191 }
 192
 193 sub read_akey {
 194   my $akey = "$spooldir/.akeys/" . shift;
 195   if (my $user = readlink($akey)) {
 196     $user =~ s:../::;
 197     printf "  USER=\"%s\"\n",$user;
 198   }
 199 }
 200
 201
 202 sub read_skey {
 203   my $skey = "$spooldir/.skeys/" . shift;
 204   if (open $skey,$skey) {
 205     while (<$skey>) {
 206       printf "  FROM=\"%s\"\n",$1 if /from=(.+)/;
 207       printf "  TO=\"%s\"\n",$1   if /to=(.+)/;
 208     }
 209     close $skey;
 210   }
 211 }
 212
 213
 214 sub utf8decode {
 215   local $_ = shift;
 216   s/([\xC0-\xDF])([\x80-\xBF])/chr(ord($1)<<6&0xC0|ord($2)&0x3F)/eg;
 217   return $_;
 218 }