[BACK]Return to clusterstatus.pl CVS log [TXT] [DIR] Up to [LON-CAPA] / loncom / cgi

Diff for /loncom/cgi/clusterstatus.pl between versions 1.11 and 1.25

version 1.11, 2003/07/31 19:18:16 version 1.25, 2008/11/29 00:57:09
Line 1 Line 1
 #!/usr/bin/perl  #!/usr/bin/perl
 $|=1;  $|=1;
 # The LearningOnline Network with CAPA  # Generates a html page showing various status reports about the domain or cluster
 # Cluster Status  
 #  
 # $Id$  # $Id$
   #
   # Copyright Michigan State University Board of Trustees
   #
   # This file is part of the LearningOnline Network with CAPA (LON-CAPA).
   #
   # LON-CAPA is free software; you can redistribute it and/or modify
   # it under the terms of the GNU General Public License as published by
   # the Free Software Foundation; either version 2 of the License, or
   # (at your option) any later version.
   #
   # LON-CAPA is distributed in the hope that it will be useful,
   # but WITHOUT ANY WARRANTY; without even the implied warranty of
   # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
   # GNU General Public License for more details.
   #
   # You should have received a copy of the GNU General Public License
   # along with LON-CAPA; if not, write to the Free Software
   # Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
   #
   # /home/httpd/html/adm/gpl.txt
   #
   # http://www.lon-capa.org/
   #
   
   use strict;
   
 use lib '/home/httpd/lib/perl/';  use lib '/home/httpd/lib/perl/';
   use Apache::lonnet;
   use Apache::lonlocal;
 use LONCAPA::Configuration;  use LONCAPA::Configuration;
   use LONCAPA::loncgi;
 use LWP::UserAgent();  use LWP::UserAgent();
 use HTTP::Headers;  use HTTP::Headers;
 use IO::File;  use IO::File;
   
   my $perlvar=&LONCAPA::Configuration::read_conf('loncapa.conf');
   
 my %host=();  my %host=();
 my $oneday=60*60*24;  my $oneday=60*60*24;
   
Line 19  my %connectionstatus=(); Line 46  my %connectionstatus=();
 my %perlvar=();  my %perlvar=();
   
 my $mode;  my $mode;
   my $concount=0;
   my $fromcache;
   
   my %domaininfo = &Apache::lonnet::domain_info();
   my %allhostname = &Apache::lonnet::all_hostnames();
   my (%hostname,%hostip);
   my %hostdom = &Apache::lonnet::all_host_domain();
   my %iphost = &Apache::lonnet::get_iphost();
   my %libserv= &Apache::lonnet::all_library();
   
   foreach my $ip (keys(%iphost)) {
       $hostip{$iphost{$ip}} = $ip;
   }
   
   my $maxusers=0;
   my $maxload=0;
   my $totalusers=0;
   
   my %FORM=();
   
   my $stat_total=0;
   my $stat_notyet=0;
   my $stat_fromcache=0;
   
 sub select_form {  sub select_form {
     my ($def,$name,%hash) = @_;      my ($def,$name,%hash) = @_;
     my $selectform = "<select name=\"$name\" size=\"1\">\n";      my $selectform = "<select name=\"$name\" size=\"1\">\n";
     foreach (sort keys %hash) {      foreach my $key (sort(keys(%hash))) {
         $selectform.="<option value=\"$_\" ".          $selectform.="<option value=\"$key\" ".
             ($_ eq $def ? 'selected' : '').              ($key eq $def? 'selected' : '').
                 ">".$hash{$_}."</option>\n";                  ">".$hash{$key}."</option>\n";
     }      }
     $selectform.="</select>";      $selectform.="</select>";
     return $selectform;      return $selectform;
Line 42  sub key { Line 92  sub key {
   
 sub hidden {  sub hidden {
     my ($name,$value)=@_;      my ($name,$value)=@_;
     print "\n<input type='hidden' name='$name' value='$value' />";      print("\n<input type='hidden' name='$name' value='$value' />");
 }  }
   
 sub request {  sub request {
     my ($local,$url,$cachetime)=@_;      my ($local,$url,$cachetime)=@_;
       $cachetime*=(0.5+rand);
     my $key=&key($local,$url);      my $key=&key($local,$url);
     my $reply='';      my $reply='';
       $stat_total++;
   # if fromcache flag is set, only return cached values
       if ($fromcache) {
    if ($FORM{$key.'_time'}) {
               $stat_fromcache++;
       return $FORM{$key};
    } else {
               $stat_notyet++;
       return 'not_yet';
    }
       }
   # normal mode, refresh when expired or not yet present
     if ($FORM{$key.'_time'}) {      if ($FORM{$key.'_time'}) {
  if ((time-$FORM{$key.'_time'})<$cachetime) {   if ((time-$FORM{$key.'_time'})<$cachetime) {
     $reply=$FORM{$key};      $reply=$FORM{$key};
     &hidden($key.'_time',$FORM{$key.'_time'});      &hidden($key.'_time',$FORM{$key.'_time'});
     &hidden($key.'_fromcache',1);      $stat_fromcache++;
  }   }
     }      }
     unless ($reply) {      unless ($reply) {
  unless ($hostname{$local}) {           if ($hostname{$local}) {
     $reply='local_unknown';   
  } else {  
   
     my $ua=new LWP::UserAgent(timeout => 20);      my $ua=new LWP::UserAgent(timeout => 20);
       
     my $request=new HTTP::Request('GET',      my $request=new HTTP::Request('GET',
   "http://".$hostname{$local}.$url);    "http://".$hostname{$local}.$url);
     $request->authorization_basic('lonadm','litelite');  
   
     my $response=$ua->request($request);      my $response=$ua->request($request);
       if ($response->is_success) {
     unless ($response->is_success) {                   $reply=$response->content;
                   chomp($reply);
               } else {
  $reply='local_error';    $reply='local_error'; 
     } else {  
  $reply=$response->content;  
  chomp($reply);  
     }      }
  }   } else {
               $reply='local_unknown';
           }
  &hidden($key.'_time',time);   &hidden($key.'_time',time);
     }      }
     &hidden($key,$reply);      &hidden($key,$reply);
Line 91  sub connected { Line 149  sub connected {
     unless ($hostname{$remote}) { return 'remote_unknown'; }      unless ($hostname{$remote}) { return 'remote_unknown'; }
     my $url='/cgi-bin/ping.pl?'.$remote;      my $url='/cgi-bin/ping.pl?'.$remote;
 #  #
 # Slowly phase this in: if not cached, only do 10 percent of the cases   # Slowly phase this in: if not cached, only do 5 percent of the cases,
   # but always do the first five. 
 #  #
     unless ($FORM{&key($local,$url)}) {      unless ($FORM{&key($local,$url)}) {
  unless (rand>0.9) { return 'not_yet'; }   unless (($concount<=5) || (rand>0.95)) {
       $stat_total++;
       $stat_notyet++; 
       return 'not_yet'; 
    } else {
       $concount++;
    }
     }      }
 #  #
 # Actually do the query  # Actually do the query
Line 130  sub otherwindow { Line 195  sub otherwindow {
   
 sub login {  sub login {
     my $local=shift;      my $local=shift;
     print &otherwindow($local,'/adm/login?domain='.$perlvar{'lonDefDomain'},      print(&otherwindow($local,'/adm/login?domain='.$perlvar{'lonDefDomain'},
        'Login');         'Login'));
 }  }
   
 sub runloncron {  sub runloncron {
     my $local=shift;      my $local=shift;
     print &otherwindow($local,'/cgi-bin/loncron.pl','Run loncron');      print(&otherwindow($local,'/cgi-bin/loncron.pl',&Apache::lonlocal::mt('Run loncron')));
 }  }
   
 sub loncron {  sub loncron {
     my $local=shift;      my $local=shift;
     print &otherwindow($local,'/lon-status','loncron');      print(&otherwindow($local,'/lon-status','loncron'));
 }  }
   
 sub lonc {  sub lonc {
     my $local=shift;      my $local=shift;
     print &otherwindow($local,'/lon-status/loncstatus.txt','lonc');      print(&otherwindow($local,'/lon-status/loncstatus.txt','lonc'));
 }  }
   
 sub lond {  sub lond {
     my $local=shift;      my $local=shift;
     print &otherwindow($local,'/lon-status/londstatus.txt','lond');      print(&otherwindow($local,'/lon-status/londstatus.txt','lond'));
 }  }
   
 sub users {  sub users {
     my $local=shift;      my $local=shift;
     print &otherwindow($local,'/cgi-bin/userstatus.pl','Users');      print(&otherwindow($local,'/cgi-bin/userstatus.pl',&Apache::lonlocal::mt('Users')));
 }  }
   
 sub versions {  sub versions {
     my $local=shift;      my $local=shift;
     print &otherwindow($local,'/cgi-bin/lonversions.pl','Versions');      print(&otherwindow($local,'/cgi-bin/lonversions.pl',&Apache::lonlocal::mt('Versions')));
 }  }
   
 sub server {  sub server {
     my $local=shift;      my $local=shift;
     print &otherwindow($local,'/server-status','Server Status');      print(&otherwindow($local,'/server-status',&Apache::lonlocal::mt('Server Status')));
   }
   
   sub announcement {
       my $local=shift;
       print(&otherwindow($local,'/announcement.txt',&Apache::lonlocal::mt('Announcement')));
   }
   
   sub takeonline {
       my $local=shift;
       print(&otherwindow($local,'/cgi-bin/takeonline.pl',&Apache::lonlocal::mt('Take online')));
   }
   
   sub takeoffline {
       my $local=shift;
       print(&otherwindow($local,'/cgi-bin/takeoffline.pl',&Apache::lonlocal::mt('Take offline')));
   }
   
   sub reroute {
       my ($local,$remote)=@_;
       print(&otherwindow($local,'/cgi-bin/takeoffline.pl?'.
          $hostname{$remote}.'&'.$hostdom{$local}
          ,$remote)."\n");
   }
   
   sub allreroutes {
       my $local=shift;
       &takeoffline($local);
       print(&Apache::lonlocal::mt('Reroute to:').' <font size="1">');
       foreach my $remote (sort keys %hostname) {
    unless ($local eq $remote) {
       &reroute($local,$remote);
    }
       }
       print('</font>');
 }  }
   
 # ========================================================= Produce a green bar  # ========================================================= Produce a green bar
 sub bar {  sub bar {
     my $parm=shift;      my $parm=shift;
     my $number=int($parm+0.5);      my $number=int($parm+0.5);
     print "<table><tr><td bgcolor='#225522'><font color='#225522'>";      print('<table><tr><td bgcolor="#225522"><font color="#225522">');
     for (my $i=0;$i<$number;$i++) {      for (my $i=0;$i<$number;$i++) {
  print "+";   print "+";
     }      }
     print "</font></table>";      print("</font></table>");
 }  }
   
 # ========================================================== Show server status  # ========================================================== Show server status
   
 sub serverstatus {  sub serverstatus {
     my ($local,$trouble)=@_;      my ($local,$trouble)=@_;
     print (<<ENDHEADER);      my $hostrole;
       if (exists($libserv{$local})) {
           $hostrole = 'library';
       } else {
           $hostrole = 'access';
       }
       my %lt = &Apache::lonlocal::texthash(
                                             rero => 'Reroute:',
                                             vers => 'Version:',
                                             load => 'Load:',
                                             acti => 'Active Users:',
                                             rpms => 'RPMs',
                                             mysq => 'MySQL Database:',
                                             notc => 'Not connected',
                                             lonc => 'loncron errors',
                                            );
      
       print(<<ENDHEADER);
 <a name="$local" />  <a name="$local" />
 <table width="100%" bgcolor="#225522" cellspacing="2" cellpadding="2" border="0">  <table width="100%" bgcolor="#225522" cellspacing="2" cellpadding="2" border="0">
 <tr><td bgcolor="#BBDDBB"><font color="#225522" face="arial"><b>  <tr><td bgcolor="#BBDDBB"><font color="#225522" face="arial"><b>
 $local $hostdom{$local}</b> <tt>($hostname{$local}; $hostrole{$local})</tt>  $local $hostdom{$local}</b> <tt>($hostname{$local}); $hostrole</tt>
 <br />$domaindescription{$hostdom{$local}}  <br />$domaininfo{$hostdom{$local}}{'description'}
   $domaininfo{$hostdom{$local}}{'city'}
 </font></th></tr><tr><td bgcolor="#DDDDBB"><font color="#225522">  </font></th></tr><tr><td bgcolor="#DDDDBB"><font color="#225522">
 ENDHEADER  ENDHEADER
     &login($local);&server($local);&users($local);&versions($local);      &login($local);&server($local);&users($local);&versions($local);
       &announcement($local);
     &loncron($local);&lond($local);&lonc($local);&runloncron($local);      &loncron($local);&lond($local);&lonc($local);&runloncron($local);
     print "</font></td></tr>";      print("</font></td></tr>");
     if ($trouble) {      if ($trouble) {
  print ("<tr><td bgcolor='#DDBBBB'><font color='#552222' size='+2'>$trouble</font></td></tr>");   print("<tr><td bgcolor='#DDBBBB'><font color='#552222' size='+2'>$trouble</font></td></tr>");
       }
       print("<tr><td bgcolor='#BBBBBB'>");
   # re-routing
       if ($host{$local.'_reroute'}) {
    print('<br />'.$lt{'rero'}.' '.$host{$local.'_reroute'});
    &takeonline($local);
       }
   # version
       if ($host{$local.'_version'}) {
    print('<br />'.$lt{'vers'}.' '.$host{$local.'_version'});
     }      }
     print "<tr><td bgcolor='#BBBBBB'>";  
 # load  # load
     if (($host{$local.'_load_doomed'}>0.5) || ($mode eq 'load_doomed')) {      if (($host{$local.'_load_doomed'}>0.5) || ($mode eq 'load_doomed')) {
  print "<br />Load: ".$host{$local.'_load'}   print('<br />'.$lt{'load'}.' '.$host{$local.'_load'});
     }      }
 # users  # users
     if (($host{$local.'_users_doomed'}>10) || ($mode eq 'users_doomed')) {      if (($host{$local.'_users_doomed'}>10) || ($mode eq 'users_doomed')) {
  print "<br />Active Users: ".$host{$local.'_users'}   print('<br />'.$lt{'acti'}.' '.$host{$local.'_users'});
     }      }
   
 # checkrpms  # checkrpms
     if ($host{$local.'_checkrpms'}) {      if ($host{$local.'_checkrpms'}) {
  print "<br />RPMs: ".$host{$local.'_checkrpms'}   print('<br />'.$lt{'rpms'}.' '.$host{$local.'_checkrpms'});
     }      }
 # mysql  # mysql
     if ($host{$local.'_mysql'}) {      if ($host{$local.'_mysql'}) {
  print "<br />MySQL Database: ".$host{$local.'_mysql'}   print('<br />'.$lt{'mysq'}.' '.$host{$local.'_mysql'});
     }      }
 # connections  # connections
     if ($host{$local.'_notconnected'}) {      if ($host{$local.'_notconnected'}) {
  print "<br />Not connected: ";   print('<br />'.$lt{'notc'}.' ');
  foreach (split(/ /,$host{$local.'_notconnected'})) {   foreach my $item (split(/ /,$host{$local.'_notconnected'})) {
     if ($_) {      if ($item) {
  print " <a href='#$_'>$_</a>";   print(' <a href="#$item">'.$item.'</a>');
     }      }
  }   }
     }      }
 # errors  # errors
     if ($host{$local.'_errors'}) {      if ($host{$local.'_errors'}) {
  print "<br />loncron errors: ".$host{$local.'_errors'};   print('<br />'.$lt{'lonc'}.' '.$host{$local.'_errors'});
     }      }
       print "</td></tr><tr><td bgcolor='#DDDDDD'>";
       &allreroutes($local);
     print "</td></tr></table><br />";      print "</td></tr></table><br />";
 }  }
   
Line 249  sub doomedness { Line 378  sub doomedness {
     return sort { $alldoomed{$b} <=> $alldoomed{$a} } @allhosts;      return sort { $alldoomed{$b} <=> $alldoomed{$a} } @allhosts;
 }  }
   
 # ====================================================================== Status  sub resetvars {
 sub statuslist {     $maxusers=0;
     my ($local,$what)=@_;     $maxload=0;
     print      $totalusers=0;
 "<script>document.prgstat.progress.value='Testing $local ($hostname{$local}): $what';</script>\n";     $stat_total=0;
      $stat_notyet=0;
      $stat_fromcache=0;
      $concount=0;
      undef %host;
      %host=();
 }  }
   
 #  sub mainloop {
 # Main program      &resetvars();
 #  
 # ========================================================= Get form parameters  
 my $buffer;  
   
 read(STDIN, $buffer, $ENV{'CONTENT_LENGTH'});  
 my @pairs=split(/&/,$buffer);  
 my $pair; my $name; my $value;  
 undef %FORM;  
 %FORM=();  
 foreach $pair (@pairs) {  
     ($name,$value) = split(/=/,$pair);  
     $value =~ tr/+/ /;  
     $value =~ s/%([a-fA-F0-9][a-fA-F0-9])/pack("C",hex($1))/eg;  
     $FORM{$name}=$value;  
 }   
   
 $buffer=$ENV{'QUERY_STRING'};  
 @pairs=split(/&/,$buffer);  
 foreach $pair (@pairs) {  
     ($name,$value) = split(/=/,$pair);  
     $value =~ tr/+/ /;  
     $value =~ s/%([a-fA-F0-9][a-fA-F0-9])/pack("C",hex($1))/eg;  
     $FORM{$name}=$value;  
 }   
   
 # ====================================================== Determine refresh rate  
   
 my $refresh=(($FORM{'refresh'}=~/^\d+$/)?$FORM{'refresh'}:120);  
 if ($refresh<30) { $refresh=30; }  
 my $starttime=time;  
   
 # ============================================================== Determine mode  
   
 my %modes=('trouble' => 'Trouble',  
    'users_doomed' => 'Doomed: Users',  
    'loncron_doomed' => 'Doomed: General (loncron)',  
    'mysql_doomed' => 'Doomed: Database (mysql)',  
    'notconnected_doomed' => 'Doomed: Connections',  
    'checkrpms_doomed' => 'Doomed: RPMs',  
    'load_doomed' => 'Doomed: Load',  
    'unresponsive_doomed' => 'Doomed: Status could not be determined',  
    'users' => 'User Report',  
    'load' => 'Load Report',  
    'connections' => 'Connections Matrix');  
   
 $mode=$FORM{'mode'};  
 unless ($modes{$mode}) { $mode='trouble'; }  
 # ================================================================ Send Headers  
 print "Content-type: text/html\n\n".  
     "<html><body bgcolor='#FFFFFF'>\n";  
 # -------------------- Read loncapa.conf (and by default, loncapa_apache.conf).  
 my $perlvarref=LONCAPA::Configuration::read_conf('loncapa.conf');  
 %perlvar=%{$perlvarref};  
 undef $perlvarref; # remove since sensitive and not needed  
 delete $perlvar{'lonReceipt'}; # remove since sensitive and not needed  
 delete $perlvar{'lonSqlAccess'}; # remove since sensitive and not needed  
   
 # ------------------------------------------------------------- Read hosts file  
 {  
     my $config=IO::File->new("$perlvar{'lonTabDir'}/hosts.tab");  
   
     $total=0;  
     while (my $configline=<$config>) {  
        $configline=~s/#.*$//;  
        unless ($configline=~/\w/) { next; }   
        my ($id,$domain,$role,$name,$ip)=split(/:/,$configline);  
        $hostname{$id}=$name;  
        $hostdom{$id}=$domain;  
        $hostrole{$id}=$role;  
        $hostip{$id}=$ip;  
        $total++;  
        if (($role eq 'library') && ($id ne $perlvar{'lonHostID'})) {  
    $libserv{$id}=$name;  
        }  
     }  
 }  
 # ------------------------------------------------------------ Read domain file  
 {  
     my $fh=IO::File->new($perlvar{'lonTabDir'}.'/domain.tab');  
     %domaindescription = ();  
     %domain_auth_def = ();  
     %domain_auth_arg_def = ();  
     if ($fh) {  
        while (<$fh>) {  
            next if (/^(\#|\s*$)/);  
            chomp;  
            my ($domain, $domain_description, $def_auth, $def_auth_arg)  
                = split(/:/,$_,4);  
            $domain_auth_def{$domain}=$def_auth;  
            $domain_auth_arg_def{$domain}=$def_auth_arg;  
            $domaindescription{$domain}=$domain_description;  
        }  
     }  
 }  
   
 print "<img src='/adm/lonIcons/lonlogos.gif' align='right' /><h1>LON-CAPA Cluster Status ".localtime()."</h1>";  
 print "<form name='prgstat'>\n".  
 "<input type='text' name='progress' value='Starting ...' size='100' /><br />".  
 "</form>\n";;  
 print "<form name='status' method='post'>\n";  
 print 'Choose next report: '.&select_form($mode,'mode',%modes).'<hr />';  
 &hidden('refresh',$refresh);  
   
 # ==================================================== Main Loop over all Hosts  # ==================================================== Main Loop over all Hosts
   
 my $maxusers=0;  foreach my $local (sort(keys(%hostname))) {
 my $maxload=0;  
 my $totalusers=0;  
   
 foreach $local (sort keys %hostname) {  
     $host{$local.'_unresponsive_doomed'}=0;      $host{$local.'_unresponsive_doomed'}=0;
 # -- Check general status  # -- Check general status
     &statuslist($local,'General');      &statuslist($local,'General');
Line 386  foreach $local (sort keys %hostname) { Line 413  foreach $local (sort keys %hostname) {
     $host{$local.'_errors'}=$loncron{'errors'};      $host{$local.'_errors'}=$loncron{'errors'};
  }   }
     }      }
   # -- Check version
       &statuslist($local,'Version');
       my $version=&request($local,'/lon-status/version.txt',7200);
       if ($version eq 'local_error') {
    $host{$local.'_version'}='Could not determine.';
    $host{$local.'_unresponsive_doomed'}++;
       } else {
    $host{$local.'_version'}=$version;
       }
 # -- Check user status  # -- Check user status
     &statuslist($local,'Users');      &statuslist($local,'Users');
     my %userstatus=&replyhash($local,'/cgi-bin/userstatus.pl?simple',600);      my %userstatus=&replyhash($local,'/cgi-bin/userstatus.pl?simple',600);
Line 407  foreach $local (sort keys %hostname) { Line 443  foreach $local (sort keys %hostname) {
  }   }
  $host{$local.'_load'}=$userstatus{'loadavg'};   $host{$local.'_load'}=$userstatus{'loadavg'};
     }      }
   # -- Check reroute status
       &statuslist($local,'Reroute');
       my %reroute=&replyhash($local,'/lon-status/reroute.txt',1800);
       if ($reroute{'status'} eq 'rerouting') {
    if ($reroute{'server'}) {
       $host{$local.'_reroute'}=
    'Rerouting to <tt>'.$reroute{'server'}.
                      '</tt>, domain: '.$reroute{'domain'}.
    ' (since '.localtime($reroute{'time'}).')';
    } else {
       $host{$local.'_reroute'}='offline';
    }
       }
 # -- Check mysql status  # -- Check mysql status
     &statuslist($local,'Database');      &statuslist($local,'Database');
     my %mysql=&replyhash($local,'/lon-status/mysql.txt',3600);      my %mysql=&replyhash($local,'/lon-status/mysql.txt',3600);
Line 415  foreach $local (sort keys %hostname) { Line 464  foreach $local (sort keys %hostname) {
  $host{$local.'_unresponsive_doomed'}++;   $host{$local.'_unresponsive_doomed'}++;
     } else {      } else {
  if ((time-$mysql{'time'})>(7*$oneday)) {   if ((time-$mysql{'time'})>(7*$oneday)) {
     if ($hostrole{$local} eq 'library') {      if (exists($libserv{$local})) {
  $host{$local.'_mysql'}='Stale.';   $host{$local.'_mysql'}='Stale.';
  $host{$local.'_mysql_doomed'}=1;   $host{$local.'_mysql_doomed'}=1;
     }      }
Line 452  foreach $local (sort keys %hostname) { Line 501  foreach $local (sort keys %hostname) {
     &statuslist($local,'Connections');      &statuslist($local,'Connections');
     $host{$local.'_notconnected'}='';      $host{$local.'_notconnected'}='';
     $host{$local.'_notconnected_doomed'}=0;      $host{$local.'_notconnected_doomed'}=0;
     foreach $remote (sort keys %hostname) {      foreach my $remote (sort keys %hostname) {
  my $status=&connected($local,$remote);   my $status=&connected($local,$remote);
  $connectionstatus{$local.'_TO_'.$remote}=$status;   $connectionstatus{$local.'_TO_'.$remote}=$status;
  unless (($status eq 'ok') || ($status eq 'not_yet')) {   unless (($status eq 'ok') || ($status eq 'not_yet')) {
Line 460  foreach $local (sort keys %hostname) { Line 509  foreach $local (sort keys %hostname) {
     $host{$local.'_notconnected_doomed'}++;      $host{$local.'_notconnected_doomed'}++;
  }   }
     }      }
 # =============================================================== End Mail Loop  # =============================================================== End Main Loop
   }
   
 }  }
 &statuslist('Done.');  
   sub reports {
 # ====================================================================== Output  # ====================================================================== Output
     if ($mode=~/\_doomed$/) {      if ($mode=~/\_doomed$/) {
 # Output by doomedness  # Output by doomedness
Line 474  foreach $local (sort keys %hostname) { Line 526  foreach $local (sort keys %hostname) {
        "<table cellspacing='3' cellpadding='3' border='0' bgcolor='#225522'>".         "<table cellspacing='3' cellpadding='3' border='0' bgcolor='#225522'>".
        "<tr><td bgcolor='#225522'>&nbsp;</td>";         "<tr><td bgcolor='#225522'>&nbsp;</td>";
  foreach my $remote (sort keys %hostname) {   foreach my $remote (sort keys %hostname) {
     print '<th bgcolor="#DDDDBB">'.$remote.'</th>';      print '<td bgcolor="#DDDDBB">'.$remote.'</td>';
  }   }
  print "</tr>\n";   print "</tr>\n";
 # connection matrix  # connection matrix
  foreach my $local (sort keys %hostname) {   foreach my $local (sort keys %hostname) {
     print '<tr><th bgcolor="#DDDDBB">'.$local.'</th>';      print '<tr><td bgcolor="#DDDDBB">'.$local.'</td>';
     foreach my $remote (sort keys %hostname) {      foreach my $remote (sort keys %hostname) {
  if ($connectionstatus{$local.'_TO_'.$remote} eq 'not_yet') {   if ($connectionstatus{$local.'_TO_'.$remote} eq 'not_yet') {
     print '<td bgcolor="#FFFFFF">&nbsp;</td>';      my $cellcolor='#FFFFFF';
       if ($local eq $remote) { $cellcolor='#DDDDDD'; }
       print '<td bgcolor="'.$cellcolor.'"><font color="#555522" size="-2">not yet tested</font></td>';
  } elsif ($connectionstatus{$local.'_TO_'.$remote} eq 'ok') {   } elsif ($connectionstatus{$local.'_TO_'.$remote} eq 'ok') {
       my $cellcolor='#BBDDBB';
       if ($local eq $remote) { $cellcolor='#99DD99'; }
     print       print 
 '<td bgcolor="#BBDDBB"><font color="#225522" face="arial"><b>ok</b></td>';  '<td bgcolor="'.$cellcolor.'"><font color="#225522" face="arial"><b>'.&Apache::lonlocal::mt('ok').'</b></td>';
  } else {   } else {
       my $cellcolor='#DDCCAA';
       if ($connectionstatus{$local.'_TO_'.$remote} eq 'local_error') {
    if ($local eq $remote) { 
       $cellcolor='#DD88AA'; 
    } else {
       $cellcolor='#DDAACC';
    }
       } else {
    if ($local eq $remote) { $cellcolor='#DDBB77'; }
       }
     print       print 
   '<td bgcolor="#DDBBBB"><font color="#552222" size="-2">'.    '<td bgcolor="'.$cellcolor.'"><font color="#552222" size="-2">'.
   $connectionstatus{$local.'_TO_'.$remote}.'<br />';    $connectionstatus{$local.'_TO_'.$remote}.'<br />';
     &lonc($local); &lond($remote);      &lonc($local); &lond($remote);
     print '</td>';      print '</td>';
Line 501  foreach $local (sort keys %hostname) { Line 567  foreach $local (sort keys %hostname) {
 # Users  # Users
  if ($maxusers) {   if ($maxusers) {
     my $factor=50/$maxusers;      my $factor=50/$maxusers;
     print "<h3>Total active user(s): $totalusers</h3>".       print '<h3>'.&Apache::lonlocal::mt('Total active user(s)').': '.$totalusers.'</h3>'. 
        "<table cellspacing='3' cellpadding='3' border='0' bgcolor='#225522'>";                    '<table cellspacing="3" cellpadding="3" border="0" bgcolor="#225522">';
   
     foreach $local (sort keys %hostname) {      foreach my $local (sort keys %hostname) {
  if (defined($host{$local.'_users'})) {   if (defined($host{$local.'_users'})) {
     print       print 
 '<tr><th bgcolor="#BBDDBB"><font face="arial" color="#225522" size="+1">'.$local.  '<tr><td bgcolor="#BBDDBB"><font face="arial" color="#225522" size="+1">'.$local.
  '</font></th><td bgcolor="#DDDDBB">';   '</font><br /><font size="-2">'.
     &users();   $domaininfo{$hostdom{$local}}{'description'}.
          '</font></td><td bgcolor="#DDDDBB">';
       &users($local);
     print       print 
       '</td><td bgcolor="#DDDDBB"><font face="arial" color="#225522">'.        '</td><td bgcolor="#DDDDBB"><font face="arial" color="#225522">'.
       $host{$local.'_users'}.'</font></td><td bgcolor="#DDDDBB"';        $host{$local.'_users'}.'</font></td><td bgcolor="#DDDDBB"';
     &bar($factor*$host{$local.'_users'});      &bar($factor*$host{$local.'_users'});
     print "</td></tr>\n";      print '</td></tr>'."\n";
  }   }
     }      }
     print "</table>";      print '</table>';
  } else {   } else {
     print "No active users logged in.";      print &Apache::lonlocal::mt('No active users logged in.');
  }   }
     } elsif ($mode eq 'load') {      } elsif ($mode eq 'load') {
 # Load  # Load
Line 527  foreach $local (sort keys %hostname) { Line 595  foreach $local (sort keys %hostname) {
     my $factor=50/$maxload;       my $factor=50/$maxload; 
     print      print
        "<table cellspacing='3' cellpadding='3' border='0' bgcolor='#225522'>";         "<table cellspacing='3' cellpadding='3' border='0' bgcolor='#225522'>";
     foreach $local (sort keys %hostname) {      foreach my $local (sort keys %hostname) {
  if (defined($host{$local.'_load_doomed'})) {   if (defined($host{$local.'_load_doomed'})) {
     print       print 
 '<tr><th bgcolor="#BBDDBB"><font face="arial" color="#225522" size="+1">'.  '<tr><td bgcolor="#BBDDBB"><font face="arial" color="#225522" size="+1">'.
                         $local.                          $local.
  '</font></th><td bgcolor="#DDDDBB">';   '</font><br /><font size="-2">'.
     &server();   $Apache::lonnet::domain{$hostdom{$local}}{'description'}.
          '</font></td><td bgcolor="#DDDDBB">';
       &server($local);
     print       print 
       '</td><td bgcolor="#DDDDBB"><font face="arial" color="#225522">'.        '</td><td bgcolor="#DDDDBB"><font face="arial" color="#225522">'.
       $host{$local.'_load_doomed'}.'</font></td><td bgcolor="#DDDDBB"';        $host{$local.'_load_doomed'}.'</font></td><td bgcolor="#DDDDBB"';
Line 543  foreach $local (sort keys %hostname) { Line 613  foreach $local (sort keys %hostname) {
     }      }
     print "</table>";      print "</table>";
  } else {   } else {
     print "No workload.";      print &Apache::lonlocal::mt('No workload.');
  }   }
     } elsif ($mode eq 'trouble') {      } elsif ($mode eq 'trouble') {
  my $count=0;   my $count=0;
  foreach $local (sort keys %hostname) {   foreach my $local (sort keys %hostname) {
     my $trouble='';      my $trouble='';
       if ($host{$local.'_unresponsive_doomed'}>3) {
    $trouble=&Apache::lonlocal::mt('Does not respond to several queries.').
                            '<br />';
       }
     if ($host{$local.'_errors'}) {      if ($host{$local.'_errors'}) {
  $trouble='Has loncron errors.<br />';   $trouble=&Apache::lonlocal::mt('Has loncron errors').'<br />';
     } elsif ($host{$local.'_loncron_doomed'}>600) {      } elsif ($host{$local.'_loncron_doomed'}>2500) {
  $trouble='High loncron count.<br />';   $trouble=&Apache::lonlocal::mt('High loncron count.').'<br />';
     }      }
     if ($host{$local.'_load_doomed'}>5) {      if ($host{$local.'_load_doomed'}>5) {
  $trouble='High load.<br />';   $trouble=&Apache::lonlocal::mt('High load.').'<br />';
     }      }
     if ($host{$local.'_users_doomed'}>200) {      if ($host{$local.'_users_doomed'}>200) {
  $trouble='High user volume.<br />';   $trouble=&Apache::lonlocal::mt('High user volume.').'<br />';
     }      }
     if ($host{$local.'_mysql_doomed'}>1) {      if ($host{$local.'_mysql_doomed'}>1) {
  $trouble='MySQL database apparently offline.<br />';   $trouble=&Apache::lonlocal::mt('MySQL database apparently offline.').'<br />';
     }      }
     if ($host{$local.'_checkrpms_doomed'}>100) {      if ($host{$local.'_checkrpms_doomed'}>100) {
  $trouble='RPMs outdated.<br />';   $trouble=&Apache::lonlocal::mt('RPMs outdated.').'<br />';
       }
       if ($host{$local.'_reroute'}) {
    $trouble=&Apache::lonlocal::&mt('Rerouting').'<br >';
     }      }
     if ($trouble) { $count++; &serverstatus($local,$trouble); }      if ($trouble) { $count++; &serverstatus($local,$trouble); }
  }   }
  unless ($count) { print "No mayor trouble."; }   unless ($count) { print &Apache::lonlocal::mt('No major trouble.'); }
       }
   }
   
   # ====================================================================== Status
   sub statuslist {
       my ($local,$what)=@_;
       my $displaylocal;
       if (defined($local)) {
           $displaylocal = " $local ($hostname{$local})";
       }
       print '<script>document.prgstat.progress.value="'. 
             &Apache::lonlocal::mt("Testing[_1]: $what",$displaylocal).'";</script>'."\n";
   }
   
   # =============================================================================
   # =============================================================================
   # Main program
   #
   # ========================================================= Get form parameters
   my $buffer;
   
   read(STDIN, $buffer, $ENV{'CONTENT_LENGTH'});
   my @pairs=split(/&/,$buffer);
   my $pair; my $name; my $value;
   undef %FORM;
   %FORM=();
   foreach $pair (@pairs) {
       ($name,$value) = split(/=/,$pair);
       $value =~ tr/+/ /;
       $value =~ s/%([a-fA-F0-9][a-fA-F0-9])/pack("C",hex($1))/eg;
       $FORM{$name}=$value;
   } 
   
   $buffer=$ENV{'QUERY_STRING'};
   @pairs=split(/&/,$buffer);
   foreach $pair (@pairs) {
       ($name,$value) = split(/=/,$pair);
       $value =~ tr/+/ /;
       $value =~ s/%([a-fA-F0-9][a-fA-F0-9])/pack("C",hex($1))/eg;
       $FORM{$name}=$value;
   } 
   
   # ====================================================== Determine refresh rate
   
   my $refresh=(($FORM{'refresh'}=~/^\d+$/)?$FORM{'refresh'}:30);
   if ($refresh<30) { $refresh=30; }
   my $starttime=time;
   
   # ============================================================== Determine mode
   
   my %modes= &Apache::lonlocal::texthash (
                        'trouble' => 'Trouble',
                'users_doomed' => 'Doomed: Users',
                'loncron_doomed' => 'Doomed: General (loncron)',
                'mysql_doomed' => 'Doomed: Database (mysql)',
                'notconnected_doomed' => 'Doomed: Connections',
                'checkrpms_doomed' => 'Doomed: RPMs',
                'load_doomed' => 'Doomed: Load',
                'unresponsive_doomed' => 'Doomed: Status could not be determined',
                'users' => 'User Report',
                'load' => 'Load Report',
                'connections' => 'Connections Matrix');
   $mode=$FORM{'mode'};
   unless ($modes{$mode}) { $mode='trouble'; }
   # ================================================================ Send Headers
   print("Content-type: text/html\n\n".
         '<html><body bgcolor="#FFFFFF">'."\n");
   # -------------------- Read loncapa.conf (and by default, loncapa_apache.conf).
   my $perlvarref=LONCAPA::Configuration::read_conf('loncapa.conf');
   %perlvar=%{$perlvarref};
   undef $perlvarref; # remove since sensitive and not needed
   delete $perlvar{'lonReceipt'}; # remove since sensitive and not needed
   delete $perlvar{'lonSqlAccess'}; # remove since sensitive and not needed
   
   if (!&LONCAPA::loncgi::check_cookie_and_load_env()) {
       &Apache::lonlocal::get_language_handle();
       print(&LONCAPA::loncgi::missing_cookie_msg());
       exit;
   }
   
   if (!&LONCAPA::loncgi::can_view('clusterstatus')) {
       &Apache::lonlocal::get_language_handle();
       print &LONCAPA::loncgi::unauthorized_msg('clusterstatus');
       exit;
   }
   
   &Apache::lonlocal::get_language_handle();
   
   my $scope = 'Domain';
   if ($Apache::lonnet::env{'request.role'} =~ m{^su\./}) {
       %hostname = %allhostname;
       $scope = 'Cluster';
   } else {
       undef(%hostname);
       my @poss_domains = &Apache::lonnet::current_machine_domains();
       foreach my $host (keys(%allhostname)) {
           if (grep(/^\Q$hostdom{$host}\E$/,@poss_domains)) {
               $hostname{$host} = $allhostname{$host};
           }
       }
   }
   
   print '<img src="/adm/lonIcons/lonlogos.gif" align="right" /><h1>'.&Apache::lonlocal::mt("LON-CAPA $scope Status").' '.localtime()."</h1>";
   print "<form name='prgstat'>\n".
   '<input type="text" name="progress" value="'."'".&Apache::lonlocal::mt('Starting ...')."'".'" size="100" /><br />'.
   "</form>\n";
   print "<form name='status' method='post'>\n";
   print &Apache::lonlocal::mt('Choose next report:').' '.&select_form($mode,'mode',%modes).'<input type="submit" name="getreport" value="'.&Apache::lonlocal::mt('Go').'" /><hr />';
   &hidden('refresh',$refresh);
   
       if (!$FORM{'runonetime'}) {
           my $lcscope = lc($scope);
    print '<h3>'.&Apache::lonlocal::mt("Gathering initial $lcscope data").'</h3>'.
                 &Apache::lonlocal::mt('This may take some time ..').'<br />';
    $fromcache=0;
    &mainloop();
    &statuslist(undef,'Done initial run.');
    &reports();
       } else {
    $fromcache=1;
    &mainloop();
    &statuslist(undef,'Done gathering cached data');
    &reports();
    $fromcache=0;
    &mainloop();
       }
       &hidden('runonetime',1);
       print '<tt><br />'.&Apache::lonlocal::mt('Total number of queries: [_1]',$stat_total);
       if ($stat_total != 0) {
           print '<br />'.&Apache::lonlocal::mt('Percent complete:').''.
         int(($stat_total-$stat_notyet)/$stat_total*100.).
         '<br />'.&Apache::lonlocal::mt('Percent from cache:').' '.
                 int($stat_fromcache/$stat_total*100.).'</tt>';
     }      }
   
 # ============================================================== Close, refresh  # ============================================================== Close, refresh
 print "</form><script>";  print "</form><script>";
 $runtime=time-$starttime;  my $runtime=time-$starttime;
 if ($runtime>=$refresh) {  if (($refresh-$runtime)<0) {
     print 'document.status.submit();';      print "document.status.submit();";
 } else {  } else {
     $refreshtime=int(1000*($refresh-$runtime));      my $refreshtime=int(1000*($refresh-$runtime));
       my $refreshmsg = &Apache::lonlocal::mt('Will automatically refresh ([_1] secs refresh cycle)',$refresh);
     print "setTimeout('document.status.submit()',$refreshtime);\n".      print "setTimeout('document.status.submit()',$refreshtime);\n".
           "document.prgstat.progress.value='Will automatically refresh ($refresh secs refresh cycle)'";            "document.prgstat.progress.value='$refreshmsg'";
 }  }
 print "</script></body></html>";  print "</script></body></html>";
 exit 0;  exit 0;
Removed from v.1.11  
changed lines
  Added in v.1.25

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>