ad72adba15804d9c2ed17e16e78a1f68b0e23bb7
[git-tools-moved-to-github.git] / aptcheck / aptcheck.pl
1 #!/usr/bin/perl -w
2 #
3 # Check what packages are needed to get upgraded on all machines
4 #
5 # Depends heavily on having ssh key authentication set up to all
6 # boxes. That's why I run it on my own workstation.
7 #
8 # 11-Mar-2011 Heikki: Started this
9
10 #### Init
11 my $debug= $ARGV[0] || 0; # 0=none, 1=some, 2=more, 3=much
12 my $year =`date +%Y`;
13 my $wikilink = 'http://twiki.indexdata.dk/cgi-bin/twiki/view/ID/';
14
15 #### Get list of hosts
16 # I could use a hard-coded list, but I would forget to maintain it.
17 # Nagios knows most of our hosts.
18
19 my $hostlist = `ssh nagios grep -l Apt /etc/nagios3/indexdata-conf.d/*.cfg`
20   or die "Could not get host list";
21
22 print "Got list:\n$hostlist\n" if $debug>2;
23
24 # Statistics
25 my %summary;
26 my %sechosts;
27 my %secpkgs;
28 my %ownhosts;
29 my %ownpkgs;
30 my %normhosts;
31 my %normpkgs;
32 my %okhosts;
33 my %skiphosts;
34 my %allhosts;
35 my $sectot = 0;
36 my $owntot = 0;
37 my $normtot = 0;
38
39 my $table = "<table>\n";
40
41 for $hline ( split("\n",$hostlist) ) {
42     next unless ( $hline =~ /\/([a-z0-9-]+)\.cfg$/ );
43     my $H = $1;
44     next if ($H =~ /^commands/ );
45     next if ($H =~ /^servicegroups/ );
46     print "Checking $H\n" if $debug;
47     $allhosts{$H}=1;
48     my $apt = `ssh $H apt-get upgrade -s -o 'Debug::NoLocking=true' `;
49     # Note, do not append -qq, we want some output even when nothing to do
50     if ( !$apt ) {
51         $table .= "<tr><td colspan='3'>&nbsp;</td></tr>\n";
52         $table .= "<tr><td colspan='3'><b><u>$H</u></b> (skipped)\n";
53         $skiphosts{$H}=1;
54         next;
55     }
56     print "Got apts for $H: \n$apt\n" if $debug>2;
57     my $det = "";
58     my $pkgs = 0;
59     my $secs = 0;
60     my $own = 0;
61     for $p ( split("\n",$apt) ) {
62         next unless $p =~
63             /^Inst ([^ ]+) \[([^]]+)\] \(([^ ]+) ([^:]+):/;
64         my ( $pkg,$cur,$new,$src ) = ( $1,$2,$3,$4 );
65         print "$H: $pkg: $cur -> $new ($src)\n" if $debug>1;
66         $det .= "<tr><td>&nbsp;&nbsp;";
67         $pkgs++;
68         my $key = $pkg;
69         if ( $src =~ /Security/ ) {
70             $det .= "<b>$pkg (s)</b> ";
71             $sechosts{$H}=1;
72             $secpkgs{$pkg}=1;
73             $secs++;
74             $sectot++;
75         } elsif ( $src =~ /Indexdata/ ) {
76             $det .= "<i><b>$pkg</b> (id) </i>";
77             $ownhosts{$H}=1;
78             $ownpkgs{$pkg}=1;
79             $own++;
80             $owntot++;
81         } else {
82             $det .= "$pkg ";
83             $normhosts{$H}=1;
84             $normpkgs{$pkg}=1;
85             $normtot++;
86         }
87         if ( !$summary{$key} ) {
88             $summary{$key} = "";
89         }
90         $summary{$key} .= "$H ";
91         $new = strdiff($cur,$new);
92         $cur = strdiff($new,$cur);
93         $det .= "</td> ";
94         $det .= "<td>$cur</td> ";
95         $det .= "<td>$new</td> ";
96         $det .= "</tr>\n";
97     }
98     $table .= "<tr><td colspan='3'>&nbsp;</td></tr>\n";
99     $table .= "<tr><td colspan='3'><a name='$H'><b><u>$H</u></b></a> &nbsp;\n";
100     if ( $pkgs ) {
101         $table .= "<b>$pkgs</b> packages to upgrade. ";
102         $table .= "<b>$secs security</b>. " if $secs;
103         $table .= " $own from indexdata " if $own;
104     } else {
105         $table .= "ok";
106         $okhosts{$H} = 1;
107     }
108     my $updlink = $wikilink . ucfirst($H) . "Updates" . $year;
109     # Fix some pages that do not follow the convention.
110     # Mostly because the host names would not make proper WikiWords
111     $updlink =~ s/Bugzilla3Updates/BugzillaUpdates/; 
112     $updlink =~ s/Opencontent-solrUpdates/OpenContentSolrUpdates/; 
113     $table .= "&nbsp;<a href='$updlink' >Upd</a>";
114     $table .= "</td></tr>\n";
115     $table .= $det if $pkgs;
116     print "\n$table\n" if $debug>2;
117     last if $H =~/dart/ && $debug;
118 }
119 $table .= "</table>\n";
120
121 # Page header
122 my $outfile = "/tmp/aptcheck.html";
123 open F, ">$outfile"
124     or die "Could not open $outfile for writing: $!";
125 print F "<html>\n";
126 print F "<head><title>Apt upgrade status</title></head>\n";
127 print F "<body>\n";
128 print F "<H1>Apt package status</H1>\n";
129
130
131 # Summary table: one row for per host group
132 print F "<p/>\n";
133 print F "<table border='1' >\n";
134 print F "<tr><td>&nbsp;</td>" ;
135 print F "<td><b>Hosts</b></td>\n";
136 print F "<td><b>Packages</b></td></tr>\n";
137
138 if ( $sectot ) {
139     print F "<tr><td><b>Security</b><br/>" . scalar(keys(%sechosts)) . 
140         "&nbsp;/&nbsp;" .  scalar(keys(%secpkgs)) . "&nbsp;/&nbsp;$sectot </td>\n" ;
141     print F "<td>";
142     for $HH ( sort(keys(%sechosts)) ) {
143         print F "<a href='#$HH'><b>$HH</b></a> ";
144     }
145     print F "</td>";
146     print F "<td>";
147     for $PP ( sort(keys(%secpkgs)) ) {
148         print F "<a href='#$PP'>$PP</a> ";
149     }
150     print F "</td>";
151     print F "</tr>\n";
152 }
153 if ( $owntot ) {
154     print F "<tr><td><b>Indexdata</b><br/>" . scalar(keys(%ownhosts)) . 
155         "&nbsp;/&nbsp;" .  scalar(keys(%ownpkgs)) . "&nbsp;/&nbsp;$owntot </td>\n" ;
156     print F "<td>";
157     for $HH ( sort(keys(%ownhosts)) ) {
158         print F "<a href='#$HH'><b>$HH</b></a> ";
159     }
160     print F "</td>";
161     print F "<td>";
162     for $PP ( sort(keys(%ownpkgs)) ) {
163         print F "<a href='#$PP'>$PP</a> ";
164     }
165     print F "</td>";
166     print F "</tr>\n";
167 }
168 if ( $normtot ) {
169     print F "<tr><td>Normal<br/>" . scalar(keys(%normhosts)) . 
170         "&nbsp;/&nbsp;" .  scalar(keys(%normpkgs)) . "&nbsp;/&nbsp;$normtot </td>\n" ;
171     print F "<td>";
172     for $HH ( sort(keys(%normhosts)) ) {
173         print F "<a href='#$HH'><b>$HH</b></a> ";
174     }
175     print F "</td>";
176     print F "<td>";
177     for $PP ( sort(keys(%normpkgs)) ) {
178         print F "<a href='#$PP'>$PP</a> ";
179     }
180     print F "</td>";
181     print F "</tr>\n";
182 }
183 if ( %skiphosts ) {
184     print F "<tr><td>Skipped " . scalar(keys(%skiphosts)) . "</td>\n";
185     print F "<td colspan='2'>";
186     for $HH ( sort(keys(%skiphosts)) ) {
187         print F "<a href='#$HH'><b>$HH</b></a> ";
188     }
189     print F "</td></tr>\n";
190 }
191 if ( %okhosts ) {
192     print F "<tr><td>Ok " . scalar(keys(%okhosts)) . "</td>\n";
193     print F "<td colspan='2'>";
194     for $HH ( sort(keys(%okhosts)) ) {
195         print F "<a href='#$HH'><b>$HH</b></a> ";
196     }
197     print F "</td></tr>\n";
198 }
199 print F "</table>\n";
200
201
202 # The host table
203 print F $table;
204
205 # Package table
206 print F "<p/><b><u>Packages</u></b>\n";
207 print F "<table>\n";
208 for $P ( sort(keys(%summary)) ) {
209     my $PN = $P;
210     $PN = "<b>$P (s)</b>" if ($secpkgs{$P});
211     $PN = "$P (id)" if ($ownpkgs{$P});
212     print F "<tr><td><a name='$P'/>$PN</td>\n";
213     print F "<td>";
214     for $HH ( split(' ',$summary{$P} )) {
215         print F "<a href=#$HH>$HH</a> ";
216     }
217     print F "</td>\n";
218
219 }
220 print F "</table>\n";
221
222 print F "<p/>Produced " . `date`.
223         " on " . `hostname` . " by " . `whoami` .
224         "<br/>\n";
225 print F "</body></html>\n";
226
227 close(F)
228     or die "Could not close $outfile: $!";
229
230 system "scp -q $outfile nagios:/var/www/heikki/index.html";
231
232 exit(0);
233
234 # Helper to take two strings and highligt that part of the second
235 # that is different from the first. 
236 sub strdiff {
237     my $x = shift;
238     my $y = shift;
239     print "strdiff: '$x' '$y' \n" if $debug>1;
240     if ( $x eq $y ) {
241         return "$x <b>??</b>";
242     }
243     my $a = 0;
244     while ( $a < length($y) &&
245         substr($x,$a,1) eq substr($y,$a,1) ) {
246         $a++;
247     }
248     if ( $a == length($y) ) {
249         return "$y ??";
250     }
251     my $b = 1;
252     while ( $b < length($y)-$a &&
253         substr($x,-$b,1) eq substr($y, -$b,1) ) {
254         $b++;
255     }
256     my $c = length($y) - $b +1;
257     print "strdiff:   a=$a " . substr($y,0,$a) ."\n" if $debug>1;
258     print "strdiff:   b=$b " . "\n" if $debug>1;
259     print "strdiff:   c=$c " . substr($y,$c) ."\n" if $debug>1;
260     print "strdiff:        " . substr($y,$a, $c-$a) ."\n" if $debug>1;
261     my $z =  substr($y,0,$a) .
262              "<b>" . substr($y,$a, $c-$a) . "</b>" .
263              substr($y,$c);
264     print "strdiff:        " . $z ."\n" if $debug>1;
265     print "\n" if $debug>1;
266     return $z;
267 }