aptcheck/aptcheck.pl

   1 #!/usr/bin/perl -w
   2 #
   3 # Check what packages are needed to get upgraded on all machines
   4 #
   5 # Depends heavily on having ssh key authentication set up to all
   6 # boxes. That's why I run it on my own workstation.
   7 #
   8 # 11-Mar-2011 Heikki: Started this
   9
  10 #### Init
  11 my $debug= $ARGV[0] || 0; # 0=none, 1=some, 2=more, 3=much
  12 my $year =`date +%Y`;
  13 my $wikilink = 'http://twiki.indexdata.dk/cgi-bin/twiki/view/ID/';
  14
  15 #### Get list of hosts
  16 # I could use a hard-coded list, but I would forget to maintain it.
  17 # Nagios knows most of our hosts.
  18
  19 my $hostlist = `ssh nagios grep -l Apt /etc/nagios3/indexdata-conf.d/*.cfg`
  20   or die "Could not get host list";
  21
  22 print "Got list:\n$hostlist\n" if $debug>2;
  23
  24 # Statistics
  25 my %summary;
  26 my %sechosts;
  27 my %secpkgs;
  28 my %ownhosts;
  29 my %ownpkgs;
  30 my %normhosts;
  31 my %normpkgs;
  32 my %okhosts;
  33 my %skiphosts;
  34 my %allhosts;
  35 my $sectot = 0;
  36 my $owntot = 0;
  37 my $normtot = 0;
  38
  39 my $table = "<table>\n";
  40
  41 for $hline ( split("\n",$hostlist) ) {
  42     next unless ( $hline =~ /\/([a-z0-9-]+)\.cfg$/ );
  43     my $H = $1;
  44     next if ($H =~ /^commands/ );
  45     next if ($H =~ /^servicegroups/ );
  46     print "Checking $H\n" if $debug;
  47     $allhosts{$H}=1;
  48     my $apt = `ssh $H apt-get upgrade -s -o 'Debug::NoLocking=true' `;
  49     # Note, do not append -qq, we want some output even when nothing to do
  50     if ( !$apt ) {
  51         $table .= "<tr><td colspan='3'>&nbsp;</td></tr>\n";
  52         $table .= "<tr><td colspan='3'><b><u>$H</u></b> (skipped)\n";
  53         $skiphosts{$H}=1;
  54         next;
  55     }
  56     print "Got apts for $H: \n$apt\n" if $debug>2;
  57     my $det = "";
  58     my $pkgs = 0;
  59     my $secs = 0;
  60     my $own = 0;
  61     for $p ( split("\n",$apt) ) {
  62         next unless $p =~
  63             /^Inst ([^ ]+) \[([^]]+)\] \(([^ ]+) ([^:]+):/;
  64         my ( $pkg,$cur,$new,$src ) = ( $1,$2,$3,$4 );
  65         print "$H: $pkg: $cur -> $new ($src)\n" if $debug>1;
  66         $det .= "<tr><td>&nbsp;&nbsp;";
  67         $pkgs++;
  68         my $key = $pkg;
  69         if ( $src =~ /Security/ ) {
  70             $det .= "<b>$pkg (s)</b> ";
  71             $sechosts{$H}=1;
  72             $secpkgs{$pkg}=1;
  73             $secs++;
  74             $sectot++;
  75         } elsif ( $src =~ /Indexdata/ ) {
  76             $det .= "<i><b>$pkg</b> (id) </i>";
  77             $ownhosts{$H}=1;
  78             $ownpkgs{$pkg}=1;
  79             $own++;
  80             $owntot++;
  81         } else {
  82             $det .= "$pkg ";
  83             $normhosts{$H}=1;
  84             $normpkgs{$pkg}=1;
  85             $normtot++;
  86         }
  87         if ( !$summary{$key} ) {
  88             $summary{$key} = "";
  89         }
  90         $summary{$key} .= "$H ";
  91         $new = strdiff($cur,$new);
  92         $cur = strdiff($new,$cur);
  93         $det .= "</td> ";
  94         $det .= "<td>$cur</td> ";
  95         $det .= "<td>$new</td> ";
  96         $det .= "</tr>\n";
  97     }
  98     $table .= "<tr><td colspan='3'>&nbsp;</td></tr>\n";
  99     $table .= "<tr><td colspan='3'><a name='$H'><b><u>$H</u></b></a> &nbsp;\n";
 100     if ( $pkgs ) {
 101         $table .= "<b>$pkgs</b> packages to upgrade. ";
 102         $table .= "<b>$secs security</b>. " if $secs;
 103         $table .= " $own from indexdata " if $own;
 104     } else {
 105         $table .= "ok";
 106         $okhosts{$H} = 1;
 107     }
 108     my $updlink = $wikilink . ucfirst($H) . "Updates" . $year;
 109     # Fix some pages that do not follow the convention.
 110     # Mostly because the host names would not make proper WikiWords
 111     $updlink =~ s/Bugzilla3Updates/BugzillaUpdates/;
 112     $updlink =~ s/Opencontent-solrUpdates/OpenContentSolrUpdates/;
 113     $table .= "&nbsp;<a href='$updlink' >Upd</a>";
 114     $table .= "</td></tr>\n";
 115     $table .= $det if $pkgs;
 116     print "\n$table\n" if $debug>2;
 117     last if $H =~/dart/ && $debug;
 118 }
 119 $table .= "</table>\n";
 120
 121 # Page header
 122 my $outfile = "/tmp/aptcheck.html";
 123 open F, ">$outfile"
 124     or die "Could not open $outfile for writing: $!";
 125 print F "<html>\n";
 126 print F "<head><title>Apt upgrade status</title></head>\n";
 127 print F "<body>\n";
 128 print F "<H1>Apt package status</H1>\n";
 129
 130
 131 # Summary table: one row for per host group
 132 print F "<p/>\n";
 133 print F "<table border='1' >\n";
 134 print F "<tr><td>&nbsp;</td>" ;
 135 print F "<td><b>Hosts</b></td>\n";
 136 print F "<td><b>Packages</b></td></tr>\n";
 137
 138 if ( $sectot ) {
 139     print F "<tr><td><b>Security</b><br/>" . scalar(keys(%sechosts)) .
 140         "&nbsp;/&nbsp;" .  scalar(keys(%secpkgs)) . "&nbsp;/&nbsp;$sectot </td>\n" ;
 141     print F "<td>";
 142     for $HH ( sort(keys(%sechosts)) ) {
 143         print F "<a href='#$HH'><b>$HH</b></a> ";
 144     }
 145     print F "</td>";
 146     print F "<td>";
 147     for $PP ( sort(keys(%secpkgs)) ) {
 148         print F "<a href='#$PP'>$PP</a> ";
 149     }
 150     print F "</td>";
 151     print F "</tr>\n";
 152 }
 153 if ( $owntot ) {
 154     print F "<tr><td><b>Indexdata</b><br/>" . scalar(keys(%ownhosts)) .
 155         "&nbsp;/&nbsp;" .  scalar(keys(%ownpkgs)) . "&nbsp;/&nbsp;$owntot </td>\n" ;
 156     print F "<td>";
 157     for $HH ( sort(keys(%ownhosts)) ) {
 158         print F "<a href='#$HH'><b>$HH</b></a> ";
 159     }
 160     print F "</td>";
 161     print F "<td>";
 162     for $PP ( sort(keys(%ownpkgs)) ) {
 163         print F "<a href='#$PP'>$PP</a> ";
 164     }
 165     print F "</td>";
 166     print F "</tr>\n";
 167 }
 168 if ( $normtot ) {
 169     print F "<tr><td>Normal<br/>" . scalar(keys(%normhosts)) .
 170         "&nbsp;/&nbsp;" .  scalar(keys(%normpkgs)) . "&nbsp;/&nbsp;$normtot </td>\n" ;
 171     print F "<td>";
 172     for $HH ( sort(keys(%normhosts)) ) {
 173         print F "<a href='#$HH'><b>$HH</b></a> ";
 174     }
 175     print F "</td>";
 176     print F "<td>";
 177     for $PP ( sort(keys(%normpkgs)) ) {
 178         print F "<a href='#$PP'>$PP</a> ";
 179     }
 180     print F "</td>";
 181     print F "</tr>\n";
 182 }
 183 if ( %skiphosts ) {
 184     print F "<tr><td>Skipped " . scalar(keys(%skiphosts)) . "</td>\n";
 185     print F "<td colspan='2'>";
 186     for $HH ( sort(keys(%skiphosts)) ) {
 187         print F "<a href='#$HH'><b>$HH</b></a> ";
 188     }
 189     print F "</td></tr>\n";
 190 }
 191 if ( %okhosts ) {
 192     print F "<tr><td>Ok " . scalar(keys(%okhosts)) . "</td>\n";
 193     print F "<td colspan='2'>";
 194     for $HH ( sort(keys(%okhosts)) ) {
 195         print F "<a href='#$HH'><b>$HH</b></a> ";
 196     }
 197     print F "</td></tr>\n";
 198 }
 199 print F "</table>\n";
 200
 201
 202 # The host table
 203 print F $table;
 204
 205 # Package table
 206 print F "<p/><b><u>Packages</u></b>\n";
 207 print F "<table>\n";
 208 for $P ( sort(keys(%summary)) ) {
 209     my $PN = $P;
 210     $PN = "<b>$P (s)</b>" if ($secpkgs{$P});
 211     $PN = "$P (id)" if ($ownpkgs{$P});
 212     print F "<tr><td><a name='$P'/>$PN</td>\n";
 213     print F "<td>";
 214     for $HH ( split(' ',$summary{$P} )) {
 215         print F "<a href=#$HH>$HH</a> ";
 216     }
 217     print F "</td>\n";
 218
 219 }
 220 print F "</table>\n";
 221
 222 print F "<p/>Produced " . `date`.
 223         " on " . `hostname` . " by " . `whoami` .
 224         "<br/>\n";
 225 print F "</body></html>\n";
 226
 227 close(F)
 228     or die "Could not close $outfile: $!";
 229
 230 system "scp -q $outfile nagios:/var/www/heikki/index.html";
 231
 232 exit(0);
 233
 234 # Helper to take two strings and highligt that part of the second
 235 # that is different from the first.
 236 sub strdiff {
 237     my $x = shift;
 238     my $y = shift;
 239     print "strdiff: '$x' '$y' \n" if $debug>1;
 240     if ( $x eq $y ) {
 241         return "$x <b>??</b>";
 242     }
 243     my $a = 0;
 244     while ( $a < length($y) &&
 245         substr($x,$a,1) eq substr($y,$a,1) ) {
 246         $a++;
 247     }
 248     if ( $a == length($y) ) {
 249         return "$y ??";
 250     }
 251     my $b = 1;
 252     while ( $b < length($y)-$a &&
 253         substr($x,-$b,1) eq substr($y, -$b,1) ) {
 254         $b++;
 255     }
 256     my $c = length($y) - $b +1;
 257     print "strdiff:   a=$a " . substr($y,0,$a) ."\n" if $debug>1;
 258     print "strdiff:   b=$b " . "\n" if $debug>1;
 259     print "strdiff:   c=$c " . substr($y,$c) ."\n" if $debug>1;
 260     print "strdiff:        " . substr($y,$a, $c-$a) ."\n" if $debug>1;
 261     my $z =  substr($y,0,$a) .
 262              "<b>" . substr($y,$a, $c-$a) . "</b>" .
 263              substr($y,$c);
 264     print "strdiff:        " . $z ."\n" if $debug>1;
 265     print "\n" if $debug>1;
 266     return $z;
 267 }