[BACK]Return to lonstatistics.pm CVS log [TXT] [DIR] Up to [LON-CAPA] / loncom / interface

Diff for /loncom/interface/lonstatistics.pm between versions 1.13 and 1.102

version 1.13, 2002/03/22 23:06:30 version 1.102, 2004/06/04 17:41:35
Line 1 Line 1
 # The LearningOnline Network with CAPA  # The LearningOnline Network with CAPA
 # (Publication Handler  
 #  #
 # $Id$  # $Id$
 #  #
Line 26 Line 25
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
 # (Navigate problems for statistical reports  # (Navigate problems for statistical reports
 # YEAR=2001  #
 # 5/05,7/09,7/25/01,8/11,9/13,9/26,10/5,10/9,10/22,10/26 Behrouz Minaei  
 # 11/1, 11/4, 11/16, 12/14, 12/16, 12/18,12/20,12/31 Behrouz Minaei  
 # YEAR=2002  
 # 1/22, 2/1, 2/6, 2/25, 3/2, 3/6, 3/17, 3/21, 3/22 Behrouz Minaei  
 ###  ###
   
 package Apache::lonstatistics;   =pod
   
   =head1 NAME
   
   lonstatistics
   
   =head1 SYNOPSIS
   
   Main handler for statistics and chart.
   
   =over 4
   
   =cut
   
   package Apache::lonstatistics;
   
 use strict;  use strict;
 use Apache::Constants qw(:common :http);  use Apache::Constants qw(:common :http);
   use vars qw(
       @FullClasslist 
       @Students
       @Sections 
       @SelectedSections
       %StudentData
       @StudentDataOrder
       @SelectedStudentData
       $top_map 
       @Sequences 
       @SelectedMaps
       @Assessments
       $enrollment_status);
   
 use Apache::lonnet();  use Apache::lonnet();
 use Apache::lonhomework;  use Apache::lonhomework;
 use Apache::loncommon;  use Apache::loncommon;
 use HTML::TokeParser;  use Apache::loncoursedata;
 use GDBM_File;  use Apache::lonhtmlcommon;
   use Apache::lonmysql;
   use Apache::lonlocal;
   use Time::HiRes;
   #
   # Statistics Packages
   use Apache::lonproblemanalysis();
   use Apache::lonsubmissiontimeanalysis();
   use Apache::loncorrectproblemplot();
   use Apache::lonproblemstatistics();
   use Apache::lonstudentassessment();
   use Apache::lonpercentage;
   use Apache::lonstudentsubmissions();
   
   #######################################################
   #######################################################
   
   =pod
   
   =item Package Variables
   
   =item @FullClasslist The full classlist
   
   =item @Students The students we are concerned with for this invocation
   
   =item @Sections The sections available in this class
   
   =item $curr_student The student currently being examined
   
   =item $prev_student The student previous in the classlist
   
   =item $next_student The student next in the classlist
   
   =over
   
   =cut 
   
   #######################################################
   #######################################################
   #
   # Classlist variables
   #
   my $curr_student;
   my $prev_student;
   my $next_student;
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &clear_classlist_variables()
   
   undef the following package variables:
   
   =over
   
   =item @FullClasslist
   
   =item @Students
   
   =item @Sections
   
 # -------------------------------------------------------------- Module Globals  =item @SelectedSections
 my %hash;  
 my %CachData;  =item %StudentData
 my %GraphDat;  
 my %OpResp;  =item @StudentDataOrder
 my %maps;  
 my %mapsort;  =item @SelectedStudentData
 my %section;  
 my %StuBox;  =item $curr_student
 my %DiscFac;  
 my %DisUp;  =item $prev_student
 my %DisLow;  
 my $UpCnt;  =item $next_student
 my $CurMap;  
 my $CurSec;  =back
 my $CurStu;  
 my @cols;  =cut
 my @list;  
 my @students;  #######################################################
 my $p_count;  #######################################################
 my $Pos;  sub clear_classlist_variables {
 my $r;      undef(@FullClasslist);
 my $OpSel1;      undef(@Students);
 my $OpSel2;      undef(@Sections);
 my $OpSelDis1;      undef(@SelectedSections);
 my $OpSelDis2;      undef(%StudentData);
 my $OpSel3;      undef(@SelectedStudentData);
 my $OpSel4;      undef($curr_student);
 my $GData;      undef($prev_student);
 my $cid;      undef($next_student);
 my $firstres;  }
 my $lastres;  
 my $DiscFlag;  #######################################################
 my $HWN;  #######################################################
 my $P_Order;  
 my %Header = (0,"Homework Sets Order",1,"#Stdnts",2,"Tries",3,"Mod",  =pod
               4,"Mean",5,"#YES",6,"#yes",7,"%Wrng",8,"DoDiff",  
               9,"S.D.",10,"Skew.",11,"D.F.1st",12,"D.F.2nd");#,13,"OpResp");  =item &PrepareClasslist()
   
   Build up the classlist information.  The classlist information is kept in
 #------- Processing upperlist and lowerlist according to each problem  the following package variables:
 sub ProcessDisc {  
     my @List = @_;  =over
     @List = sort (@List);  
     my $Count = $#List+1;  =item @FullClasslist
     my $Prb;  
     my @Dis;  =item @Students
     my $Slvd=0;  
     my $tmp;  =item @Sections
     my $Sum1=0;  
     my $Sum2=0;  =item @SelectedSections
     my $nIdx=0;  
     my $nStud=0;  =item %StudentData
     my %Proc;  
     undef %Proc;  =item @SelectedStudentData
     while ($nIdx<$Count) {  
  ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  =item $curr_student
  @Dis=split(/\+/,$tmp);  
  my $Temp = $Prb;  =item $prev_student
  do {  
     $nIdx++;  =item $next_student
     $nStud++;  
     $Sum1 += $Dis[0];  =back
     $Sum2 += $Dis[1];  
     ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  $curr_student, $prev_student, and $next_student may not be defined, depending
     @Dis=split(/\+/,$tmp);  upon the calling context.
  } while ( $Prb eq $Temp && $nIdx < $Count );  
 # $Proc{$Temp}=($Sum1/$nStud).':'.$nStud;  =cut
  $Proc{$Temp}=($Sum1/$nStud).':'.($Sum2/$nStud);  
 #        $r->print("$nIdx) $Temp --> ($nStud) $Proc{$Temp} <br>");  #######################################################
  $Sum1=0;  #######################################################
  $Sum2=0;  sub PrepareClasslist {
  $nStud=0;      my %Sections;
     }      &clear_classlist_variables();
     return %Proc;      #
 }      # Retrieve the classlist
       my $cid  = $ENV{'request.course.id'};
       my $cdom = $ENV{'course.'.$cid.'.domain'};
 #------- Creating Discimination factor         my $cnum = $ENV{'course.'.$cid.'.num'};
 sub Discriminant {      my ($classlist,$field_names) = &Apache::loncoursedata::get_classlist($cid,
     my $Count=0;                                                                    $cdom,$cnum);
     foreach (keys(%DiscFac)){       if (exists($ENV{'form.Section'})) {
  $Count++;          if (ref($ENV{'form.Section'})) {
     }              @SelectedSections = @{$ENV{'form.Section'}};
     $UpCnt = int(0.27*$Count);          } elsif ($ENV{'form.Section'} !~ /^\s*$/) {
     my $low=0;              @SelectedSections = ($ENV{'form.Section'});
     my $up=$Count-$UpCnt;          }
     my @UpList=();      }
     my @LowList=();      @SelectedSections = ('all') if (! @SelectedSections);
     $Count=0;      foreach (@SelectedSections) {
     foreach my $key (sort(keys(%DiscFac))){           if ($_ eq 'all') {
  $Count++;                  @SelectedSections = ('all');
         #$r->print("<br>$Count) $key = $DiscFac{$key}");          }
  if ($low < $UpCnt || $Count > $up) {      }
     $low++;      #
     my $str=$DiscFac{$key};      # Deal with instructors with restricted section access
     foreach(split(/\:/,$str)){      if ($ENV{'request.course.sec'} !~ /^\s*$/) {
  if ($_) {          @SelectedSections = ($ENV{'request.course.sec'});
     if ($low<$UpCnt){push(@LowList,$_);}      }
     else {push(@UpList,$_);}      #
  }      # Set up %StudentData
     }      @StudentDataOrder = qw/fullname username domain id section status/;
  }      foreach my $field (@StudentDataOrder) {
     }          $StudentData{$field}->{'title'} = $field;
     %DisUp=&ProcessDisc(@UpList);          $StudentData{$field}->{'base_width'} = length($field);
     %DisLow=&ProcessDisc(@LowList);          $StudentData{$field}->{'width'} = 
 }                                 $StudentData{$field}->{'base_width'};
       }
          #
 sub NumericSort {                # get the status requested
     $a <=> $b;      $enrollment_status = 'Active';
 }      $enrollment_status = $ENV{'form.Status'} if (exists($ENV{'form.Status'}));
       #
 # ------ Create different Student Report       # Process the classlist
 sub StudentReport {      while (my ($student,$student_data) = each (%$classlist)) {
           my $studenthash = ();
     my ($sname,$sdom)=@_;          for (my $i=0; $i< scalar(@$field_names);$i++) {
               my $field = $field_names->[$i];
     if ( $sname eq 'All Students' ) {              # Store the data
  $r->print( '<h3><font color=blue>WARNING:               $studenthash->{$field}=$student_data->[$i];
                     Please select a student</font></h3>' );              # Keep track of the width of the fields
  return;              next if (! exists($StudentData{$field}));
     }              my $length = length($student_data->[$i]);
     my $shome=&Apache::lonnet::homeserver($sname,$sdom);                        if ($StudentData{$field}->{'width'} < $length) {
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$cid,$shome );                  $StudentData{$field}->{'width'} = $length; 
     my %result = ();              }
     my $ResId;          }
     my $PrOrd;          push (@FullClasslist,$studenthash);
     my $Code;          #
     my $Tries;          # Build up a list of sections
     my $TotalTries = 0;          my $section = $studenthash->{'section'};
     my $ParCr = 0;          if (! defined($section) || $section =~/^\s*$/ || $section == -1) {
     my $Wrongs;              $studenthash->{'section'} = 'none';
     my %TempHash;              $section = $studenthash->{'section'};
     my $Version;          }
     my $LatestVersion;          $Sections{$section}++;
     my $PtrTry='';          #
     my $PtrCod='';          # Only put in the list those students we are interested in
     my $SetNo=0;          foreach my $sect (@SelectedSections) {
     my $Str = "\n".'<table border=2>'.              if ( (($sect eq 'all') || 
               "\n".'<tr>'.                    ($section eq $sect)) &&
               "\n".'<th> # </th>'.                   (($studenthash->{'status'} eq $enrollment_status) || 
       "\n".'<th> Set Title </th>'.                    ($enrollment_status eq 'Any')) 
       "\n".'<th> Results </th>'.                   ){
       "\n".'<th> Tries </th>'.                  push (@Students,$studenthash);
       "\n".'</tr>';                  last;
     unless ($reply=~/^error\:/) {              }
         foreach (split(/\&/,$reply)){          }
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));      }
             $result{$name}=$value;      #
         }      # Put the consolidated section data in the right place
         foreach my $CurCol (@cols) {      if ($ENV{'request.course.sec'} !~ /^\s*$/) {
     if (!$CurCol){          @Sections = ($ENV{'request.course.sec'});
  my $Set=&Apache::lonnet::declutter($hash{'map_id_'.$1});      } else {
  if ( $Set ) {          @Sections = sort {$a cmp $b} keys(%Sections);
     $SetNo++;          unshift(@Sections,'all'); # Put 'all' at the front of the list
     $Str .= "\n"."<tr>".      }
     "\n"."<td> $SetNo </td>".      #
                             "\n"."<td> $Set </td>".      # Sort the Students
                             "\n"."<td> $PtrCod </td>".      my $sortby = 'fullname';
                             "\n"."<td> $PtrTry</td>".      $sortby = $ENV{'form.sort'} if (exists($ENV{'form.sort'}));
                             "\n"."</tr>";      my @TmpStudents = sort { $a->{$sortby} cmp $b->{$sortby} ||
  }                               $a->{'fullname'} cmp $b->{'fullname'} } @Students;
  $PtrTry='';      @Students = @TmpStudents;
  $PtrCod='';      # 
  next;       # Now deal with that current student thing....
     }      $curr_student = undef;
     ($PrOrd,$ResId)=split(/\:/,$CurCol);      if (exists($ENV{'form.SelectedStudent'})) {
             $ResId=~/(\d+)\.(\d+)/;          my ($current_uname,$current_dom) = 
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );              split(':',$ENV{'form.SelectedStudent'});
             if ( $CurMap ne 'All Maps' ) {          my $i;
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);          for ($i = 0; $i<=$#Students; $i++) {
  if ( $Map ne $ResMap ) { next; }              next if (($Students[$i]->{'username'} ne $current_uname) || 
     }                       ($Students[$i]->{'domain'}   ne $current_dom));
     my $meta=$hash{'src_'.$ResId};              $curr_student = $Students[$i];
     my $PartNo = 0;              last; # If we get here, we have our student.
     undef %TempHash;          }
     foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))){          if (defined($curr_student)) {
  if ($_=~/^stores\_(\w+)\_tries$/) {              if ($i == 0) {
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');                  $prev_student = undef;
     if ( $TempHash{"$Part"} eq '' ) {               } else {
  $TempHash{"$Part"} = $Part;                  $prev_student = $Students[$i-1];
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = '-';    
  $TempHash{"$Part.PrOrd"} = $PrOrd+$PartNo;    
  $PartNo++;  
     }  
  }  
  #if ($_=~/^parameter\_(\w+)\_package$/) {  
             }              }
               if ($i == $#Students) {
                   $next_student = undef;
               } else {
                   $next_student = $Students[$i+1];
               }
           }
       }
       #
       if (exists($ENV{'form.StudentData'})) {
           if (ref($ENV{'form.StudentData'}) eq 'ARRAY') {
               @SelectedStudentData = @{$ENV{'form.StudentData'}};
           } else {
               @SelectedStudentData = ($ENV{'form.StudentData'});
           }
       } else {
           @SelectedStudentData = ('username');
       }
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               @SelectedStudentData = ('all');
               last;
           }
       }
       #
       return;
   }
   
   
   #######################################################
   #######################################################
   
   =pod
   
   =item get_students
   
   Returns a list of the selected students
   
   =cut
   
   #######################################################
   #######################################################
   sub get_students {
       if (! @Students) {
           &PrepareClasslist()
       }
       return @Students;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &current_student()
   
   Returns a pointer to a hash containing data about the currently
   selected student.
   
   =cut
   
   #######################################################
   #######################################################
   sub current_student { 
       return $curr_student;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &previous_student()
   
   Returns a pointer to a hash containing data about the student prior
   in the list of students.  Or something.  
   
   =cut
   
   #######################################################
   #######################################################
   sub previous_student { 
       return $prev_student;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &next_student()
   
   Returns a pointer to a hash containing data about the next student
   to be viewed.
   
   =cut
   
   #######################################################
   #######################################################
   sub next_student { 
       return $next_student;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &clear_sequence_variables()
   
   =cut
   
   #######################################################
   #######################################################
   sub clear_sequence_variables {
       undef($top_map);
       undef(@Sequences);
       undef(@Assessments);
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &SetSelectedMaps($elementname)
   
   Sets the @SelectedMaps array from $ENV{'form.'.$elementname};
   
   =cut
   
   #######################################################
   #######################################################
   sub SetSelectedMaps {
       my $elementname = shift;
       if (exists($ENV{'form.'.$elementname})) {
           if (ref($ENV{'form.'.$elementname})) {
               @SelectedMaps = @{$ENV{'form.'.$elementname}};
           } else {
               @SelectedMaps = ($ENV{'form.'.$elementname});
           }
       } else {
           @SelectedMaps = ('all');
       }
   }
   
   
   #######################################################
   #######################################################
   
             my $Prob = $Map.'___'.$2.'___'.  =pod
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
             $Code='U';  =item &Sequences_with_Assess()
             $Tries = 0;  
             $Wrongs = 0;  Returns an array containing the subset of @Sequences which contain
      $LatestVersion = $result{"version:$Prob"};  assessments.
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  =cut
     my $vkeys = $result{"$Version:keys:$Prob"};  
     my @keys = split(/\:/,$vkeys);  #######################################################
     #######################################################
     foreach my $Key (@keys) {    sub Sequences_with_Assess {
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {      my ($mode) = @_;
     my $Part = $1;      $mode = 'selected' if (! defined($mode));
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};      my @Sequences_to_Show;
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;       foreach my $sequence (@Sequences) {
     $TotalTries += $Tries;          next if ($sequence->{'num_assess'} < 1);
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};          if ($mode eq 'all') {
     if ( $Val eq 'correct_by_student' )              push (@Sequences_to_Show,$sequence);
                                 { $Wrongs = $Tries - 1; $Code = 'Y'; }           } elsif ($mode eq 'selected') {
     elsif ( $Val eq 'correct_by_override' )              foreach my $map_symb (@SelectedMaps) {
                                 { $Wrongs = $Tries - 1; $Code = 'y'; }                                          if ($sequence->{'symb'} eq $map_symb || $map_symb eq 'all'){
     elsif ( $Val eq 'incorrect_attempted' ||                       push (@Sequences_to_Show,$sequence);
                                 $Val eq 'incorrect_by_override' )                      last; # Only put it in once
                 { $Wrongs = $Tries; $Code = 'N'; }  
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }                  }
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "$TempHash{$part.'.Tries'}";  
                     $PtrCod .= "$TempHash{$part.'.Code'}";      
  }  
             }              }
     else {   
  for(my $n=0; $n<$PartNo; $n++) {   
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "0";  
                     $PtrCod .= "-";   
  }  
     }  
         }          }
   
     }      }
     $Str .= "\n".'</table>';      return @Sequences_to_Show;
     $r->print($Str);  
     $r->rflush();  
 }  }
   
 sub CreateTable {  #######################################################
     my $ColNo=0;  #######################################################
     foreach (keys(%Header)){   
  $ColNo++;  =pod
     }   
     my ($Hd, $Hid)=@_;  =item &PrepareCourseData($r)
     if ( $Hd == 1 ) {  
  $r->print('<br><a href="'.$hash{'src_'.$Hid}.  =cut
                   '" target="_blank">'.$hash{'title_'.$Hid}.'</a>');  
     }  #######################################################
     my $Result = "\n".'<table border=2>';  #######################################################
     $Result .= '<tr><th>P#</th>'."\n";  sub PrepareCourseData {
     for ( my $nIdx=0; $nIdx < $ColNo; $nIdx++ ) {       my ($r) = @_;
  $Result .= '<th>'.'<input type="submit" name="sort" value="'.      &clear_sequence_variables();
                    $Header{$nIdx}.'" />'.'</th>'."\n";      my ($top,$sequences,$assessments) = 
           &Apache::loncoursedata::get_sequence_assessment_data();
       if (! defined($top) || ! ref($top)) {
           # There has been an error, better report it
           &Apache::lonnet::logthis('top is undefined');
           return;
     }      }
     $Result .= "\n".'</tr>'."\n";          $top_map = $top if (ref($top));
     $r->print( $Result );      @Sequences = @{$sequences} if (ref($sequences) eq 'ARRAY');
     $r->rflush();      @Assessments = @{$assessments} if (ref($assessments) eq 'ARRAY');
       return;
 }  }
   
 sub CloseTable {  #######################################################
     $r->print("\n".'</table>'."\n");  #######################################################
     $r->rflush();  
   =pod
   
   =item &log_sequence($sequence,$recursive,$padding)
   
   Write data about the sequence to a logfile.  If $recursive is not
   undef the data is written recursively.  $padding is used for recursive
   calls.
   
   =cut
   
   #######################################################
   #######################################################
   sub log_sequence {
       my ($seq,$recursive,$padding) = @_;
       $padding = '' if (! defined($padding));
       if (ref($seq) ne 'HASH') {
           &Apache::lonnet::logthis('log_sequence passed bad sequnce');
           return;
       }
       &Apache::lonnet::logthis($padding.'sequence '.$seq->{'title'});
       while (my($key,$value) = each(%$seq)) {
           next if ($key eq 'contents');
           if (ref($value) eq 'ARRAY') {
               for (my $i=0;$i< scalar(@$value);$i++) {
                   &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
                                            $value->[$i]);
               }
           } else {
               &Apache::lonnet::logthis($padding.$key.'='.$value);
           }
       }
       if (defined($recursive)) {
           &Apache::lonnet::logthis($padding.'-'x20);
           &Apache::lonnet::logthis($padding.'contains:');
           foreach my $item (@{$seq->{'contents'}}) {
               if ($item->{'type'} eq 'container') {
                   &log_sequence($item,$recursive,$padding.'    ');
               } else {
                   &Apache::lonnet::logthis($padding.'title = '.$item->{'title'});
                   while (my($key,$value) = each(%$item)) {
                       next if ($key eq 'title');
                       if (ref($value) eq 'ARRAY') {
                           for (my $i=0;$i< scalar(@$value);$i++) {
                               &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
                                                        $value->[$i]);
                           }
                       } else {
                           &Apache::lonnet::logthis($padding.$key.'='.$value);
                       }
                   }
               }
           }
           &Apache::lonnet::logthis($padding.'end contents of '.$seq->{'title'});
           &Apache::lonnet::logthis($padding.'-'x20);
       }
       return;
 }  }
    
 # ------------------------------------------- Prepare Statistics Table  ##############################################
 sub PreStatTable {  ##############################################
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_statistics.db";  =pod 
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  =item &StudentDataSelect($elementname,$status,$numvisible,$selected)
     my $OpSel11='';  
     my $OpSel12='';  Returns html for a selection box allowing the user to choose one (or more) 
     my $OpSel13='';  of the fields of student data available (fullname, username, id, section, etc)
     my $Status = $ENV{'form.status'};  
     if ( $Status eq 'Any' ) { $OpSel13='selected'; }  =over 4
     elsif ($Status eq 'Expired' ) { $OpSel12 = 'selected'; }  
     else { $OpSel11 = 'selected'; }  =item $elementname The name of the HTML form element
   
     my $Ptr = '';  =item $status 'multiple' or 'single' selection box
     $Ptr .= '<br><b> Student Status: &nbsp; </b>'."\n".  
             '<select name="status">'.   =item $numvisible The number of options to be visible
             '<option '.$OpSel11.' >Active</option>'."\n".  
             '<option '.$OpSel12.' >Expired</option>'."\n".  =back
     '<option '.$OpSel13.' >Any</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  =cut
     $Ptr .= '<input type=submit name=sort value="Recalculate Statistics"/>'."\n";  
   ##############################################
     $Ptr .= '<br><b> Sorting Type: &nbsp; </b>'."\n".  ##############################################
             '<select name="order"> <option '.$OpSel1.' >Ascending</option>'."\n".  sub StudentDataSelect {
     '<option '.$OpSel2.'>Descending</option> </select> '."\n";      my ($elementname,$status,$numvisible)=@_;
     $Ptr .= '&nbsp;&nbsp;&nbsp;';      if ($numvisible < 1) {
     $Ptr .= '<input type="submit" name="sort" value="DoDiff Graph" />'."\n";          return;
     $Ptr .= '&nbsp;&nbsp;&nbsp;';      }
     $Ptr .= '<input type="submit" name="sort" value="%Wrong Graph" />'."\n";      #
       # Build the form element
     $Ptr .= '<pre>'.      my $Str = "\n";
     '<b>  #Stdnts</b>: Total Number of Students opened the problem.<br>'.       $Str .= '<select name="'.$elementname.'" ';
     '<b>  Tries  </b>: Total Number of Tries for solving the problem.<br>'.       if ($status ne 'single') {
     '<b>  Mod   </b> : Maximunm Number of Tries for solving the problem.<br>'.           $Str .= 'multiple="true" ';
     '<b>  Mean   </b>: Average Number of the tries. [ Tries / #Stdnts ]<br>'.      }
     '<b>  #YES   </b>: Number of students solved the problem correctly.<br>'.       $Str .= 'size="'.$numvisible.'" >'."\n";
     '<b>  #yes   </b>: Number of students solved the problem by override.<br>'.      #
     '<b>  %Wrng  </b>: Percentage of students tried to solve the problem but'.      # Deal with 'all'
     ' still incorrect. [ 100*((#Stdnts-(#YES+#yes))/#Stdnts) ]<br>'.      $Str .= '    <option value="all" ';
 #    '  DoDiff : Degree of Difficulty of the problem. [ Tries/(#YES+#yes+0.1) ]<br>'. Kashy formula      foreach (@SelectedStudentData) {
     '<b>  DoDiff </b>: Degree of Difficulty of the problem. [ 1 - ((#YES+#yes) / Tries) ]<br>'. #Gerd formula          if ($_ eq 'all') {
     '<b>  S.D.  </b> : Standard Deviation of the tries.'.              $Str .= 'selected ';
     '[ sqrt(sum((Xi - Mean)^2)) / (#Stdnts-1)'.              last;
     ' where Xi denotes every student\'s tries ]<br>'.          }
     '<b>  Skew.  </b>: Skewness of the students tries.'.      }
  ' [ (sqrt( sum((Xi - Mean)^3) / #Stdnts)) / (S.D.^3) ]<br>'.      $Str .= ">all</option>\n";
     '<b>  Dis.F. </b>: Discrimination Factor: A Standard for '.      #
  'evaluating the problem according to a Criterion<br>'.      # Loop through the student data fields
  '<b>           [Applied Criterion in %27 Upper Students - '.      foreach my $item (@StudentDataOrder) {
  'Applied the same Criterion in %27 Lower Students]</b><br>'.          $Str .= '    <option value="'.$item.'" ';
     '<b>           1st </b>Criterion for Sorting the Students: '.          foreach (@SelectedStudentData) {
  'Sum of Partial Credit Awarded / Total Number of Tries<br>'.              if ($item eq $_ ) {
     '<b>           2nd </b>Criterion for Sorting the Students: '.                  $Str .= 'selected ';
  'Total number of Correct Answers / Total Number of Tries'.                  last;
             '</pre>';  
   
     $r->print($Ptr);  
     $r->rflush();  
   
     if ((-e "$CacheDB")&&($ENV{'form.sort'} ne 'Recalculate Statistics')) {  
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     &Cache_Statistics();  
         }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
     else {  
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     foreach (keys %DiscFac) {delete $CachData{$_};}  
     foreach (keys %CachData) {delete $CachData{$_};}  
     $DiscFlag=0;  
     &Build_Statistics();  
  }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
   
 #33333  
 #    my $c=0;  
 #    foreach (sort keys %OpResp) {  
 # $r->print('<br>'.$c.$_.' ====== '.$OpResp{$_});  
 # my $count=$#students+1;  
 # for (my $n=0;$n<1;$n++){  
 #    my ($sname,$sdom)=$students[$n];  
 #    my $Prob=$OpResp{$_};  
 ##my $userview=&Apache::lonnet::ssi($hash{'src_'.$ResId});  
 # $r->print('<br>'.$Prob.$sname.$sdom.$cid.  
 #  '<br>'.&Apache::loncommon::get_previous_attempt($Prob,$sname,$sdom,$cid));  
 # #$r->print('<br>'.$Prob.$sname. ' *** '.&Apache::lonnet::ssi($hash{'src_'.$Prob}));   
 # }  
 # $c++;  
 #    }  
   
     #$r->print('Total instances of the problems : '.($p_count*($#students+1)));  
   
     untie(%CachData);  
     untie(%GraphDat);  
 }  
   
   
 # ------------------------------------- Find the section of student in a course  
   
 sub usection {  
     my ($udom,$unam,$courseid,$ActiveFlag)=@_;  
     $courseid=~s/\_/\//g;  
     $courseid=~s/^(\w)/\/$1/;  
     foreach (split(/\&/,&Apache::lonnet::reply('dump:'.  
              $udom.':'.$unam.':roles',  
              &Apache::lonnet::homeserver($unam,$udom)))){  
         my ($key,$value)=split(/\=/,$_);  
         $key=&Apache::lonnet::unescape($key);  
         if ($key=~/^$courseid(?:\/)*(\w+)*\_st$/) {  
             my $section=$1;  
             if ($key eq $courseid.'_st') { $section=''; }  
     my ($dummy,$end,$start)=split(/\_/,&Apache::lonnet::unescape($value));  
     if ( $ActiveFlag ne 'Any' ) {  
  my $now=time;  
  my $notactive=0;  
  if ($start) {  
     if ($now<$start) { $notactive=1; }  
  }  
  if ($end) {  
     if ($now>$end) { $notactive=1; }  
  }  
  if ((($ActiveFlag eq 'Expired') && $notactive == 1) ||   
                     (($ActiveFlag eq 'Active') && $notactive == 0 ) ) {  
     return $section;  
  }  
  else { return '-1'; }   
     }  
     return $section;  
         }  
     }  
     return '-1';  
 }  
   
   
 # ------ Dump the Student's DB file and handling the data for statistics table   
   
 sub ExtractStudentData {  
     my ($student,$coid)=@_;  
     my ($sname,$sdom) = split( /\:/, $student );  
     my $shome=&Apache::lonnet::homeserver( $sname,$sdom );            
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$coid,$shome );  
     my %result = ();  
     my $ResId;  
     my $PrOrd;  
     my $Dis = '';  
     my $Code;  
     my $Tries;  
     my $ParCr;  
     my $TotalTries = 0;  
     my $TotalOpend = 0;  
     my $ProbSolved = 0;  
     my $ProbTot = 0;  
     my $TimeTot = 0;  
     my $TotParCr = 0;  
     my $Wrongs;  
     my %TempHash;  
     my $Version;  
     my $LatestVersion;  
     my $SecLimit;  
     my $MapLimit;  
     unless ($reply=~/^error\:/) {  
         foreach (split(/\&/,$reply)) {  
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));  
             $result{$name}=$value;  
         }  
         foreach my $CurCol(@cols) {  
     ($PrOrd,$ResId)=split(/\:/,$CurCol);  
     if ( !$CurCol ) { next; }  
             $ResId=~/(\d+)\.(\d+)/;  
     my $MapId=$1;  
     my $PrbId=$2;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$MapId} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     $Dis .= ':';  
     undef %TempHash;  
   
     foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {   
  if ($_=~/^stores\_(\w+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = 'U';    
  $TempHash{"$Part.PrOrd"} = $PrOrd+$PartNo;  
  $PartNo++;  
     }  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
  }  
             }              }
           }
           $Str .= '>'.$item."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
   }
   
   ##############################################
   ##############################################
   
   =pod 
   
   =item &MapSelect($elementname,$status,$numvisible,$restriction) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sequences in the course.  The values of the sequences are the symbs.
   If the top sequence is selected, the value 'top' will result.
   
             my $Prob = $Map.'___'.$PrbId.'___'.  =over 4
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
     $OpResp{$PrOrd}=$Prob;  =item $elementname The name of the HTML form element
             $Code='U';  
             $Tries = 0;  =item $status 'multiple' or 'single' selection box
     $ParCr = 0;  
             $Wrongs = 0;  =item $numvisible The number of options to be visible
      $LatestVersion = $result{"version:$Prob"};         
   =item $restriction Code reference to subroutine which returns true or 
     if ( $LatestVersion ) {  false.  The code must expect a reference to a sequence data structure.
 #333333333  
 #my $userview=&Apache::lonnet::ssi($hash{'src_'.$ResId});  =back
 #$r->print('<br>'.$userview);   
 #$r->print('<br>'.$Prob.$sname.$sdom.$coid.'<br>'.&get_student_answers($Prob,$sname,$sdom,$coid));   =cut
   
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  ##############################################
     my $vkeys = $result{"$Version:keys:$Prob"};  ##############################################
     my @keys = split(/\:/,$vkeys);  sub MapSelect {
         my ($elementname,$status,$numvisible,$restriction)=@_;
     foreach my $Key (@keys) {        if ($numvisible < 1) {
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {          return;
     my $Part = $1;      }
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};      #
     $ParCr = $result{"$Version:$Prob:resource.$Part.awarded"};      # Set up array of selected items
     my $Time = $result{"$Version:$Prob:timestamp"};      &SetSelectedMaps($elementname);
     $TempHash{"$Part.Time"} = ($Time) ? $Time : 0;      #
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;      # Set up the restriction call
     $TempHash{"$Part.ParCr"} = ($ParCr) ? $ParCr : 0;              if (! defined($restriction)) {
     $TotalTries += $TempHash{"$Part.Tries"};          $restriction = sub { 1; };
     $TotParCr += $TempHash{"$Part.ParCr"};      }
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};      #
     if ( $Val eq 'correct_by_student' )      # Build the form element
                                { $Wrongs = $Tries - 1; $Code = 'C'; }       my $Str = "\n";
     elsif ( $Val eq 'correct_by_override' )      $Str .= '<select name="'.$elementname.'" ';
                                { $Wrongs = $Tries - 1; $Code = 'O'; }                              if ($status ne 'single') {
     elsif ( $Val eq 'incorrect_attempted' ||           $Str .= 'multiple="true" ';
                                 $Val eq 'incorrect_by_override' )      }
                { $Wrongs = $Tries; $Code = 'I'; }      $Str .= 'size="'.$numvisible.'" >'."\n";
     $TempHash{"$Part.Code"} = $Code;      #
     $TempHash{"$Part.Wrongs"} = $Wrongs;      # Deal with 'all'
  }      foreach (@SelectedMaps) {
          }          if ($_ eq 'all') {
                 }               @SelectedMaps = ('all');
  for ( my $n = 0; $n < $PartNo; $n++ ) {                last;
     my $part = $TempHash{$n};          }
     my $Yes = 0;      }
                     if ( $TempHash{$part.'.Code'} eq 'C' ||      #
                          $TempHash{$part.'.Code'} eq 'O'  )       # Put in option for 'all'
        {$ProbSolved++;$Yes=1;}      $Str .= '    <option value="all" ';
       foreach (@SelectedMaps) {
  #    my $ptr = "$hash{'title_'.$ResId}";          if ($_ eq 'all') {
     my $ptr = $TempHash{$part.'.PrOrd'}.'&'.$ResId;              $Str .= 'selected ';
               last;
     if ( $PartNo > 1 ) {                          }
  $ptr .= "*(part $part)";      }
  $Dis .= '&';      $Str .= ">all</option>\n";
     }      #
     my $Fac = ($TempHash{"$part.Tries"}) ?       # Loop through the sequences
                               ($TempHash{"$part.ParCr"}/$TempHash{"$part.Tries"}) : 0;      foreach my $seq (@Sequences) {
     my $DisF;          next if (! $restriction->($seq));
     if ( $Fac > 0 &&  $Fac < 1 ) {           $Str .= '    <option value="'.$seq->{'symb'}.'" ';
  $DisF = sprintf( "%.4f", $Fac );          foreach (@SelectedMaps) {
     }              if ($seq->{'symb'} eq $_) {
     else {$DisF = $Fac;}                  $Str .= 'selected ';
 #    $DisF .= '+'.$TempHash{"$part.Time"};                  last;
     $TimeTot += $TempHash{"$part.Time"};  
     $Dis .= $TempHash{$part.'.PrOrd'}.'='.$DisF.'+'.$Yes;  
     $ptr .= "&$TempHash{$part.'.Tries'}".  
             "&$TempHash{$part.'.Wrongs'}".  
                             "&$TempHash{$part.'.Code'}";  
     push (@list, $ptr);  
     $TotalOpend++;  
     $ProbTot++;  
  }  
             }              }
     #else {           }
  #for(my $n=0; $n<$PartNo; $n++) {          $Str .= '>'.$seq->{'title'}."</option>\n";
  #    push (@list, "$TempHash{'0'.'.PrOrd'}.':'.$ResId:0:0:U");      }
  #    $ProbTot++;       $Str .= "</select>\n";
  #}      return $Str;
     #}  }
         }  
  if ( $TotalTries ) {  ##############################################
     my $DisFac = ( $TotalTries ) ? ($TotParCr/$TotalTries) : 0;  ##############################################
     my $DisFactor = sprintf( "%.4f", $DisFac );  
     $DiscFac{$DisFactor}=$Dis;  =pod 
     #my $time;  
     #if ($ProbSolved){  =item &SectionSelect($elementname,$status,$numvisible) 
  #$time = int(($TimeTot/$ProbSolved)-10000000);  
     #}  Returns html for a selection box allowing the user to choose one (or more) 
     #$DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.  of the sections in the course.  
             #          $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;  
  }  Uses the package variables @Sections and @SelectedSections
     }  =over 4
     #$r->print($sname.' PrCr= '.$TotParCr.' Slvd= '.$ProbSolved.' Tries='.$TotalTries.'<br>');  
 }  =item $elementname The name of the HTML form element
   
   
 # ------------------------------------------------------------ Build page table  
 sub tracetable {  
     my ($rid,$beenhere)=@_;  
     my $IsMap=0;  
     $rid=~/(\d+)\.(\d+)/;  
     $maps{&Apache::lonnet::declutter($hash{'map_id_'.$1})}='';#$hash{'title_'.$rid};   
     #$maps{$HWN}=$hash{'title_'.$rid};   
     unless ($beenhere=~/\&$rid\&/) {  
        $beenhere.=$rid.'&';   
        if (defined($hash{'is_map_'.$rid})) {  
    my $cmap=$hash{'map_type_'.$hash{'map_pc_'.$hash{'src_'.$rid}}};  
            if ( $cmap eq 'sequence' || $cmap eq 'page' ) {   
                $cols[$#cols+1]=0;  
        $P_Order++;  
        $HWN=$P_Order;  
                $mapsort{$HWN} = $rid.':';  
        $IsMap=1;  
    
                #$maps{&Apache::lonnet::declutter($hash{'src_'.$rid})}=   
                #      $hash{'title_'.$rid};   
            }  
            if ((defined($hash{'map_start_'.$hash{'src_'.$rid}})) &&  
                (defined($hash{'map_finish_'.$hash{'src_'.$rid}}))) {  
        my $frid=$hash{'map_finish_'.$hash{'src_'.$rid}};  
   
                &tracetable($hash{'map_start_'.$hash{'src_'.$rid}},  
    '&'.$frid.'&');  
   
        $cols[$#cols+1]=($P_Order+1).':'.$frid;  
         
        my $meta=$hash{'src_'.$frid};  
        my $PartNo = 0;  
  #       if ($IsMap==0){  
                if ($meta) {  
    if ($meta=~/\.(problem|exam|quiz|assess|survey|form)$/) {  
        foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {  
    if ($_=~/^stores\_(\w+)\_tries$/) {  
        &Apache::lonnet::metadata($meta,$_.'.part');  
        $P_Order++;  
        $mapsort{$HWN} .= '&'.$P_Order;  
        $PartNo++;  
        #$r->print('<br>'.$PartNo.'---'.$P_Order);  
    }  
        }  
 #       foreach (split(/\,/,&Apache::lonnet::metadata($meta,'packages'))) {  
 #   if ($_=~/^optionresponse\_(\w+)\_(\w+)$/) {  
 #       $r->print('<br>'.$_.&Apache::lonnet::metadata($meta,$_));  
 #       $r->print('<br>'.$_.'...'.$P_Order);  
 #       $OpResp{$P_Order+1}=$frid;  
 #   }   
 #       }  
    }  
                }  
    }  
  #  }  
        } else {  
    $cols[$#cols+1]=($P_Order+1).':'.$rid;  
    my $meta=$hash{'src_'.$rid};  
    my $PartNo = 0;  
    if ($meta) {  
        if ($meta=~/\.(problem|exam|quiz|assess|survey|form)$/) {  
    foreach my $Key(split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {  
        if ($Key=~/^stores\_(\w+)\_tries$/) {  
    my $Part=&Apache::lonnet::metadata($meta,$Key.'.part');  
    $P_Order++;  
    $mapsort{$HWN} .= '&'.$P_Order;  
    $PartNo++;  
    foreach (split(/\,/,&Apache::lonnet::metadata($meta,'packages'))) {  
        if ($_=~/^optionresponse\_($Part)\_(\w+)$/) {  
    #$r->print('<br>'.$_.'...'.$P_Order.'---'.$Part);  
    $OpResp{$P_Order+1}=$rid;  
        }   
      
    }  
   
        }  
    }  
        }  
    }         
        }  
        if (defined($hash{'to_'.$rid})) {  
           foreach (split(/\,/,$hash{'to_'.$rid})){  
               &tracetable($hash{'goesto_'.$_},$beenhere);  
           }  
        }  
     }  
 }  
   
 sub MySort {            
     if ( $Pos > 0 ) {  
  if ($ENV{'form.order'} eq 'Descending') {$b <=> $a;}  
  else { $a <=> $b; }  
     }  
     else {  
  if ($ENV{'form.order'} eq 'Descending') {$b cmp $a;}  
  else { $a cmp $b; }  
     }  
 }  
   
 sub Build_Statistics {  
     $r->print(<<ENDPOP);  
     <script>  
     popwin=open('','popwin','width=400,height=100');  
     popwin.document.writeln('<html><body bgcolor="#88DDFF">'+  
       '<title>LON-CAPA Statistics</title>'+  
       '<h4>Computation Progress</h4>'+  
       '<form name=popremain>'+  
       '<input type=text size=35 name=remaining value=Starting></form>'+  
       '</body></html>');  
     popwin.document.close();  
     </script>  
 ENDPOP  
   
   =item $status 'multiple' or 'single' selection box
   
   =item $numvisible The number of options to be visible
   
   =back
   
   =cut
   
   ##############################################
   ##############################################
   sub SectionSelect {
       my ($elementname,$status,$numvisible)=@_;
       if ($numvisible < 1) {
           return;
       }
       #
       # Make sure we have the data we need to continue
       if (! @Sections) {
           &PrepareClasslist()
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Loop through the sequences
       foreach my $s (@Sections) {
           $Str .= '    <option value="'.$s.'" ';
           foreach (@SelectedSections) {
               if ($s eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$s."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &CreateAndParseOutputSelector()
   
   Construct a selection list of options for output and parse output selections.
   
   =cut
   
   #######################################################
   #######################################################
   sub OutputDescriptions {
       my (@OutputOptions) = @_;
       my $Str = '';
       $Str .= "<h2>Output Modes</h2>\n";
       $Str .= "<dl>\n";
       foreach my $outputmode (@OutputOptions) {
    $Str .="    <dt>".$outputmode->{'name'}."</dt>\n";
    $Str .="        <dd>".$outputmode->{'description'}."</dd>\n";
       }
       $Str .= "</dl>\n";
       return $Str;
   }
   
   sub CreateAndParseOutputSelector {
       my ($elementname,$default,@OutputOptions) = @_;
       my $output_mode;
       my $show;
       my $Str = '';
       #
       # Format for output options is 'mode, restrictions';
       my $selected = $default;
       if (exists($ENV{'form.'.$elementname})) {
           if (ref($ENV{'form.'.$elementname} eq 'ARRAY')) {
               $selected = $ENV{'form.'.$elementname}->[0];
           } else {
               $selected = $ENV{'form.'.$elementname};
           }
       }
       #
       # Set package variables describing output mode
       $output_mode = 'html';
       $show        = 'all';
       foreach my $option (@OutputOptions) {
           next if ($option->{'value'} ne $selected);
           $output_mode = $option->{'mode'};
           $show        = $option->{'show'};
       }
       #
       # Build the form element
       $Str = qq/<select size="5" name="$elementname">/;
       foreach my $option (@OutputOptions) {
           if (exists($option->{'special'}) && 
               $option->{'special'} =~ /do not show/) {
               next;
           }
           $Str .= "\n".'    <option value="'.$option->{'value'}.'"';
           $Str .= " selected " if ($option->{'value'} eq $selected);
           $Str .= ">".&mt($option->{'name'})."<\/option>";
       }
       $Str .= "\n</select>";
       return ($Str,$output_mode,$show);
   }
   
   ###############################################
   ###############################################
   
   =pod 
   
   =item &Gather_Student_Data()
   
   Ensures all student data is up to date.
   
   =cut
   
   ###############################################
   ###############################################
   sub Gather_Student_Data {
       my ($r) = @_;
       my $c = $r->connection();
       #
       &Apache::loncoursedata::clear_internal_caches();
       #
       my @Sequences = &Apache::lonstatistics::Sequences_with_Assess();
       #
       my @Students = @Apache::lonstatistics::Students;
       #
       # Open the progress window
       my %prog_state=&Apache::lonhtmlcommon::Create_PrgWin
           ($r,'Statistics Compilation Status',
            'Statistics Compilation Progress', scalar(@Students));
       #
       while (my $student = shift @Students) {
           return if ($c->aborted());
           my ($status,undef) = &Apache::loncoursedata::ensure_current_data
               ($student->{'username'},$student->{'domain'},
                $ENV{'request.course.id'});
           &Apache::lonhtmlcommon::Increment_PrgWin($r,\%prog_state,
                                                    &mt('last student'));
       }
       &Apache::lonhtmlcommon::Close_PrgWin($r,\%prog_state);
     $r->rflush();      $r->rflush();
 # ---------------------------- Gathering the Data of students' tries  }
     my $index;  
     for ($index=0;$index<=$#students;$index++) {  ###############################################
 #----------- update progress  ###############################################
         $r->print('<script>popwin.document.popremain.remaining.value="'.  
                   'Computing '.($index+1).'/'.($#students+1).': '.  =pod 
                   $students[$index].'";</script>');  
         $r->rflush();  =item &Gather_Full_Student_Data()
   
   Ensures all student data is up to date.
   
         &ExtractStudentData($students[$index],$cid);  =cut
   
   ###############################################
   ###############################################
   sub Gather_Full_Student_Data {
       my ($r) = @_;
       my $c = $r->connection();
       #
       &Apache::loncoursedata::clear_internal_caches();
       #
       my @Students = @Apache::lonstatistics::Students;
       #
       # Open the progress window
       my %prog_state=&Apache::lonhtmlcommon::Create_PrgWin
           ($r,&mt('Student Data Compilation Status'),
            &mt('Student Data Compilation Progress'), scalar(@Students));
       #
       while (my $student = shift @Students) {
           return if ($c->aborted());
           my ($status,undef) = &Apache::loncoursedata::ensure_current_full_data
               ($student->{'username'},$student->{'domain'},
                $ENV{'request.course.id'});
           &Apache::lonhtmlcommon::Increment_PrgWin($r,\%prog_state,
                                                    &mt('last student'));
     }      }
       &Apache::lonhtmlcommon::Close_PrgWin($r,\%prog_state);
       $r->rflush();
   }
   
 # -------------------- sorting the Data  ##################################################
     $r->print('<script>popwin.document.popremain.remaining.value="'.  ##################################################
               'Calculating Discrimination Factors...";</script>');  sub DisplayClasslist {
       my ($r)=@_;
     @list = sort (@list);      #
       my @Fields = ('fullname','username','domain','id','section');
       #
     &Discriminant();      my $Str='';
       if (! @Students) {
     $OpSel2='';          if ($SelectedSections[0] eq 'all') { 
     $OpSel1='selected';              if (lc($ENV{'form.Status'}) eq 'any') {
                       $Str .= '<h2>There are no students in the course.</h2>';
     $p_count = 0;               } elsif (lc($ENV{'form.Status'}) eq 'active') {
     my $nIdx = 0;                  $Str .= '<h2>There are no currently enrolled students in '.
     my $dummy;                       'the course.</h2>';
     my $p_val;              } elsif (lc($ENV{'form.Status'}) eq 'expired') {
     my $ResId;                  $Str .= '<h2>There are no previously enrolled '.
     my $NoElements = $#list + 1;                      'students in the course.</h2>';
 #-------------------------------- loop for data representation              }
     foreach (sort keys %mapsort) {          } else { 
  my ($Hid,$pr)=split(/\:/,$mapsort{$_});              my $sections;
  my @lpr=split(/\&/,$pr);              if (@SelectedSections == 1) {
  &CreateTable(1,$Hid);                  $sections = 'section '.$SelectedSections[0];
  for (my $i=1; $i<=$#lpr; $i++) {              } elsif (@SelectedSections > 2) {
     my %storestats=();                  $sections = 'sections '.join(', ',@SelectedSections);
     my ($PrOrd,$Prob,$Tries,$Wrongs,$Code)=split(/\&/,$list[$nIdx]);                  $sections =~ s/, ([^,])*$/, and $1/;
     my $Temp = $Prob;              } else {
     my $MxTries = 0;                  $sections = 'sections '.join(' and ',@SelectedSections);
     my $TotalTries = 0;              }
     my $YES = 0;              if (lc($ENV{'form.Status'}) eq 'any') {
     my $Incorrect = 0;                  $Str .= '<h2>There are no students in '.$sections.'.</h2>';
     my $Override = 0;              } elsif (lc($ENV{'form.Status'}) eq 'active') {
     my $StdNo = 0;                  $Str .= '<h2>There are no currently enrolled students '.
     my @StdLst;                      'in '.$sections.'.</h2>';
     while ( $PrOrd == $lpr[$i] )               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
     {                  $Str .= '<h2>There are no previously enrolled students '.
  $nIdx++;                      'in '.$sections.'.</h2>';
  $StdNo++;              }
  $StdLst[ $StdNo ] = $Tries;          }
  $TotalTries += $Tries;          $Str.= '<a href="/adm/statistics?reportSelected=student_assessment">'.
  if ( $MxTries < $Tries ) { $MxTries = $Tries; }               'Return to the chart.</a>';
  if ( $Code eq 'C' ){ $YES++; }          $r->print($Str);
  elsif( $Code eq 'I' ) { $Incorrect++; }  
  elsif( $Code eq 'O' ) { $Override++; }  
  elsif( $Code eq 'U' ) { $StdNo--; }  
  ($PrOrd,$Prob,$Tries,$Wrongs,$Code)=split(/\&/,$list[$nIdx]);  
     }  
   
     $p_count++;  
     my $Dummy;  
     ($ResId,$Dummy)=split(/\*/,$Temp);  
   
     $Temp = '<a href="'.$hash{'src_'.$ResId}.  
                 '" target="_blank">'.$hash{'title_'.$ResId}.$Dummy.'</a>';  
       
     my $res = &Apache::lonnet::declutter($hash{'src_'.$ResId});  
     my $urlres=$res;  
   
     $ResId=~/(\d+)\.(\d+)/;  
     my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
     $urlres=$Map;  
    
     $res = '<a href="'.$hash{'src_'.$ResId}.'">'.$res.'</a>';  
     #$Map = '<a href="'.$Map.'">'.$res.'</a>';  
   
 #------------------------ Compute the Average of Tries about one problem  
     my $Average = ($StdNo) ? $TotalTries/$StdNo : 0;  
   
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___timestamp'}=time;         
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___stdno'}=$StdNo;  
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___avetries'}=$Average;  
      
 #-------------------------------- Compute percentage of Wrong tries  
     my $Wrong = ( $StdNo ) ? 100 * ( $Incorrect / $StdNo ) : 0;  
   
 #-------------------------------- Compute Standard Deviation  
     my $StdDev = 0;   
     if ( $StdNo > 1 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $StdDev += $Dif*$Dif;  
  }   
  $StdDev /= ( $StdNo - 1 );  
  $StdDev = sqrt( $StdDev );  
     }  
   
 #-------------------------------- Compute Degree of Difficulty  
     my $DoDiff = 0;  
     if( $TotalTries > 0 ) {  
  $DoDiff = 1 - ( ( $YES + $Override ) / $TotalTries );  
 #    $DoDiff =  ($TotalTries)/($YES + $Override+ 0.1);      
     }  
          
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___difficulty'}=$DoDiff;  
   
 #-------------------------------- Compute the Skewness  
     my $Skewness = 0;  
     my $Sum = 0;   
     if ( $StdNo > 0 && $StdDev > 0 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $Skewness += $Dif*$Dif*$Dif;  
  }   
  $Skewness /= $StdNo;  
     $Skewness /= $StdDev*$StdDev*$StdDev;  
     }  
   
 #--------------------- Compute the Discrimination Factors  
     my ($Up1,$Up2)=split(/\:/,$DisUp{$lpr[$i]});  
     my ($Lw1,$Lw2)=split(/\:/,$DisLow{$lpr[$i]});  
     my $Dis1 = $Up1 - $Lw1;  
     my $Dis2 = $Up2 - $Lw2;  
     my $_D1 = sprintf("%.2f", $Dis1);  
     my $_D2 = sprintf("%.2f", $Dis2);  
   
 #-----------------  Some restition in presenting the float numbers  
     my $Avg = sprintf( "%.2f", $Average );  
     my $Wrng = sprintf( "%.1f", $Wrong );  
     my $SD = sprintf( "%.1f", $StdDev );  
     my $DoD = sprintf( "%.2f", $DoDiff );  
     my $Sk = sprintf( "%.1f", $Skewness );  
     my $join = $PrOrd.'&'.$Temp.'&'.$StdNo.'&'.  
                        $TotalTries.'&'.$MxTries.'&'.$Avg.'&'.  
                        $YES.'&'.$Override.'&'.$Wrng.'&'.$DoD.'&'.  
        $SD.'&'.$Sk.'&'.$_D1.'&'.$_D2.'&'.$Prob;  
     $CachData{($p_count-1)}=$join;  
   
     $urlres=~/^(\w+)\/(\w+)/;  
     if ($StdNo) {   
  &Apache::lonnet::put('resevaldata',\%storestats,$1,$2);   
     }  
 #-------------------------------- Row of statistical table  
     if ( $DiscFlag == 0 ) {  
  &TableRow($join,$i,($p_count-1));  
     }   
  }  
  &CloseTable();  
     }  
 #--------------------- close Progress Line  
     $r->print('<script>popwin.close()</script>');  
     $r->rflush();   
 }  
   
 sub Cache_Statistics {  
     my @list = ();  
     my $Useful;  
     my $UnUseful;  
     my %myHeader = reverse( %Header );  
     $Pos = $myHeader{$ENV{'form.sort'}};  
     if ($Pos > 0) {$Pos++;}  
     $p_count = 0;  
     foreach my $key( keys %CachData) {   
  my @Temp=split(/\&/,$CachData{$key});  
  if ( $Pos == 0 ) {  
     ($UnUseful,$Useful)=split(/\>/,$Temp[$Pos]);  
  }  
  else {  
     $Useful = $Temp[$Pos];  
  }     
  $list[$p_count]=$Useful.'@'.$CachData{$key};  
         $p_count++;  
     }  
   
     @list = sort MySort (@list);  
   
     my $nIdx=0;  
   
     if ( $Pos == 0 ) {  
  foreach (sort keys %mapsort) {  
     my ($Hid,$pr)=split(/\:/,$mapsort{$_});  
     &CreateTable(1,$Hid);  
     my @lpr=split(/\&/,$pr);  
     for (my $i=1; $i<=$#lpr; $i++) {  
  my($Pre, $Post) = split(/\@/,$list[$nIdx]);   
  #$r->print('<br>'.$Pre.'---'.$Post);  
  &TableRow($Post,$i,$nIdx);  
  $nIdx++;  
     }  
     &CloseTable();  
  }  
     }  
     else {  
  &CreateTable(0);  
  for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
     my($Pre, $Post) = split(/\@/,$list[$nIdx]);   
     &TableRow($Post,$nIdx,$nIdx);  
  }   
  &CloseTable();  
     }  
 }  
   
 sub TableRow {  
     my ($Str,$Idx,$RealIdx)=@_;  
     my($PrOrd,$Temp,$StdNo,$TotalTries,$MxTries,$Avg,$YES,$Override,  
        $Wrng,$DoD,$SD,$Sk,$_D1,$_D2,$Prob)=split(/\&/,$Str);  
     my $Ptr =  "\n".'<tr>'.  
                "\n".'<td>'.($RealIdx+1).'</td>'.  
           #     "\n".'<td>'.$PrOrd.$Temp.'</td>'.  
                "\n".'<td>'.$Temp.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC"> '.$StdNo.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC">'.$TotalTries.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC">'.$MxTries.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF">'.$Avg.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF"> '.$YES.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF"> '.$Override.'</td>'.  
                "\n".'<td bgcolor="#FFDDDD"> '.$Wrng.'</td>'.  
                "\n".'<td bgcolor="#FFDDDD">'.$DoD.'</td>'.  
                "\n".'<td bgcolor="#DDFFDD"> '.$SD.'</td>'.  
                "\n".'<td bgcolor="#DDFFDD"> '.$Sk.'</td>'.  
                "\n".'<td bgcolor="#FFDDFF"> '.$_D1.'</td>'.  
        "\n".'<td bgcolor="#FFDDFF"> '.$_D2.'</td>';  
 #    if( $OpResp{$PrOrd} ) {  
 # $Ptr.='<td>'.'<input type="submit" name="OpResp" value="'."View_$PrOrd".'" />'.'</td>';  
 #    }     
 #    else {  
 # $Ptr.='<td> -------- </td>';  
 #    }  
     $r->print("\n".$Ptr.'</tr>' );  
     $GraphDat{$RealIdx}=$DoD.':'.$Wrng;  
 }  
   
 # ------------------------------------------- Prepare data for Graphical chart  
   
 sub GetGraphData {  
     my $Tag = shift;  
     my $Col;  
     my $data='';  
     my $count = 0;  
     my $Max = 0;  
     my $cid=$ENV{'request.course.id'};  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     foreach (keys %GraphDat) {delete $GraphDat{$_};}  
     if (-e "$GraphDB") {  
  if (tie(%GraphDat,'GDBM_File',"$GraphDB",&GDBM_READER,0640)) {  
     if ( $Tag eq 'DoDiff Graph' ) {  
  $Tag = 'Degree-of-Difficulty';  
  $Col = 0;  
     }  
     else {  
  $Tag = 'Wrong-Percentage';  
  $Col = 1;  
     }  
     foreach (sort NumericSort keys %GraphDat) {   
  my @Temp=split(/\:/,$GraphDat{$_});  
                 my $inf = $Temp[$Col];   
  if ( $Max < $inf ) {$Max = $inf;}  
  $data .= $inf.',';  
  $count++;  
     }  
             untie(%GraphDat);  
     my $Course = $ENV{'course.'.$cid.'.description'};  
     $Course =~ s/\ /"_"/eg;  
     $GData=$Course.'&'.$Tag.'&'.$Max.'&'.$count.'&'.$data;  
   
  }  
  else {  
     $r->print("Unable to tie hash to db file");  
  }  
     }  
 }  
   
   
 sub initial {  
 # --------------------------------- Initialize the global varaibles  
   undef @students;  
   undef @cols;  
   undef %maps;  
   undef %section;  
   undef %StuBox;  
   undef @list;  
   undef %CachData;  
   undef %GraphDat;  
   undef %DiscFac;  
   undef %OpResp;  
   undef $CurMap;  
   undef $CurSec;  
   undef $CurStu;  
   undef $p_count;  
   undef $Pos;  
   undef $GData;  
   $DiscFlag=0;   
   $P_Order=100000;  
   $HWN=$P_Order;  
 }  
   
   
 sub ClassList {  
   
     &GetStatus();  
   
     $cid=$ENV{'request.course.id'};  
     my $chome=$ENV{'course.'.$cid.'.home'};  
     my ($cdom,$cnum)=split(/\_/,$cid);  
 # ----------------------- Get first and last resource, see if there is anything  
     $firstres=$hash{'map_start_/res/'.$ENV{'request.course.uri'}};  
     $lastres=$hash{'map_finish_/res/'.$ENV{'request.course.uri'}};  
     if (($firstres) && ($lastres)) {  
 # ----------------------------------------------------------------- Render page  
  my $classlst=&Apache::lonnet::reply  
                  ('dump:'.$cdom.':'.$cnum.':classlist',$chome);  
  my $StudNo = 0;  
  my $now=time;  
  unless ($classlst=~/^error\:/) {  
     foreach (sort split(/\&/,$classlst)) {  
  my ($name,$value)=split(/\=/,$_);  
  my ($end,$start)=split(/\:/,&Apache::lonnet::unescape($value));  
  $name=&Apache::lonnet::unescape($name);  
  my ($sname,$sdom)=split(/\:/,$name);  
  my $active=1;  
  my $Status=$ENV{'form.status'};  
  $Status = ($Status) ? $Status : 'Active';  
  if ( ( ($end) && $now > $end ) &&   
                      ( ($Status eq 'Active') ) ) { $active=0; }  
  if ( ($Status eq 'Expired') &&   
                      ($end == 0 || $now < $end) ) { $active=0; }  
  if ($active) {  
     my $thisindex=$#students+1;  
     $name=&Apache::lonnet::unescape($name);  
     $students[$thisindex]=$name;  
     my ($sname,$sdom)=split(/\:/,$name);  
     #my %reply=&Apache::lonnet::idrget($sdom,$sname);  
     #my $reply=&Apache::lonnet::reply('get:'.$sdom.':'.$sname.  
     #         ':environment:lastname&generation&firstname&middlename',  
     #         &Apache::lonnet::homeserver($sname,$sdom));  
     my $ssec=&usection($sdom,$sname,$cid,$Status);  
     if ($ssec==-1) {next;}  
     $ssec=($ssec) ? $ssec : '(none)';  
     #$ssec=(int($ssec)) ? int($ssec) : $ssec;  
     $section{$ssec}=$ssec;  
     if ($CurSec eq 'All Sections' || $ssec eq $CurSec) {  
  $students[$StudNo]=$name;  
  $StuBox{$sname}=$sdom;  
     }  
     $StudNo++;  
         }  
     }  
  }  
  else {  
     $r->print('<h1>Could not access course data</h1>');  
  }   
         $r->print("Total number of students : ".($#students+1));  
         $r->rflush();          $r->rflush();
 # --------------- Find all assessments and put them into some linear-like order          return;
  &tracetable($firstres,'&'.$lastres.'&');  
 #    my $c=0;  
 #    foreach (sort keys %mapsort) {  
 # $r->print('<br>'.$c.')'.$_.' ... '.$mapsort{$_});  
 # $c++;  
 #    }  
     }  
   
 # ------------------------------------------------------------- End render page   
     else {  
  $r->print('<h3>Undefined course sequence</h3>');  
     }  
     &MapSecOptions();  
 }  
   
   
 sub Menu {  
     my $InpStr = $ENV{'form.sort'};  
     if ( $InpStr eq 'DoDiff Graph' || $InpStr eq '%Wrong Graph' ) {        
  &GetGraphData($InpStr);  
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" />');  
     }  
     else {  
  $r->print('<html><head><title>LON-CAPA Statistics</title></head>');  
   
   
         $r->print('<body bgcolor="#FFFFFF">'.  
                   '<script>window.focus(); window.width=500;window.height=500; </script>'.  
                   '<img align=right src=/adm/lonIcons/lonlogos.gif>');  
 # ---------------------------------------------------------------- Course title  
         $r->print('<h1> Course : "'.  
                   $ENV{'course.'.$ENV{'request.course.id'}.  
                   '.description'}.'"</h1><h2>'.localtime().'</h2>');  
 # ------------------------------- This is going to take a while, produce output  
         $r->rflush();  
   
  $r->print("\n".'<form name=stat method=post action="/adm/statistics" >');  
   
  my $content = $ENV{'form.sort'};  
  if ($content eq '' || $content eq 'Return to Menu') {  
     my $Ptr = '<h3>';  
     $Ptr .= '<input type=submit name=sort value="Problem Evaluation"/>';  
     $Ptr .= '<br><br>';  
     $Ptr .= '<input type=submit name=sort value="Student Assessment"/>';  
     $Ptr .= '</h3>';  
     $r->print( $Ptr );  
       }  
  else {  
     &initial();  
     &ClassList();  
     if ( $content eq 'Student Assessment' ||   
                     $content eq 'Create Student Report' ) {  
  &StudentOptions();  
  &StudentReport($CurStu,$StuBox{"$CurStu"});  
     }  
     else {  
  &PreStatTable();  
     }  
  }  
  $r->print("\n".'</form>'.  
                   "\n".'</body>'.  
                   "\n".'</html>');  
  $r->rflush();  
     }  
 }  
   
 sub StudentOptions {  
     my $OpSel5='';  
     $CurStu = $ENV{'form.student'};  
     if ( $CurStu eq '' ) {   
         $CurStu = 'All Students';  
         $OpSel5 = 'selected';  
     }  
     my $Ptr ='';  
 # ----------------------------------- Loading the Students Combobox  
     $Ptr .= '<br><b>Select Student</b>'."\n".  
            '<select name="student">'."\n".   
     '<option '.$OpSel5.'>All Students</option>';                               
     foreach my $key ( sort keys %StuBox ) {            
  $Ptr .= '<option';  
  if ($CurStu eq $key) {$Ptr .= ' selected';}       
         $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Create Student Report" />';  
     $r->print( $Ptr );  
     $r->rflush();  
 }  
   
 sub GetStatus {  
     $OpSel1='';  
     $OpSel2='';  
     $OpSel3='';  
     $OpSel4='';  
   
     if ( $ENV{'form.order'} eq 'Descending' ) { $OpSel2='selected'; }  
     else { $OpSel1 = 'selected'; }  
   
     my %myHeader = reverse( %Header );  
     $Pos = $myHeader{$ENV{'form.sort'}};  
     if ($Pos == 0) {  
  $OpSel1 = 'selected';  
  $ENV{'form.order'}='Ascendig';  
     }  
   
     $CurMap = $ENV{'form.maps'};  
     if ( $CurMap eq '' ) {   
  $CurMap = 'All Maps';  
  $OpSel3 = 'selected';  
     }  
     $CurSec = $ENV{'form.section'};  
     if ( $CurSec eq '' ) {   
  $CurSec = 'All Sections';  
         $OpSel4 = 'selected';  
     }  
 }  
   
   
 sub MapSecOptions {  
 # ----------------------------------- Loading the Maps Combobox  
     my $Ptr = '<br>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Return to Menu" />';  
     $Ptr .= '<br><b> Select &nbsp; Map &nbsp; &nbsp; </b>'."\n".  
            '<select name="maps">'."\n".   
     '<option '.$OpSel3.'>All Maps</option>';                               
     foreach my $key ( sort keys %maps ) {            
  $Ptr .= '<option';  
         if ($CurMap eq $key) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
   
 # ----------------------------------- Loading the Sections Combobox  
     $Ptr .= '<br><b>Select Section</b>'."\n".  
            '<select name="section">'."\n".   
     '<option '.$OpSel4.'>All Sections</option>';                               
     foreach my $key ( sort keys %section ) {            
  $Ptr .= '<option';  
         if ($CurSec eq $key) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$key."</option>"."\n";       
     }      }
     $Ptr .= '</select>'."\n";  
   
     $r->print( $Ptr );      # "Click" is asinine but it is probably not my place to change the world.
       $Str .= '<h2>Click on a students name or username to view their chart</h2>';
       $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
       $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
       foreach my $field (@Fields) {
           $Str .= '<th><a href="/adm/statistics?'.
               'reportSelected=student_assessment&'.
               'selectstudent=1&'.
               'sort='.$field.'">'.$field.
               '</a></th>';
       }
       $Str .= '</tr>'."\n";
       #
       my $alternate = 0;
       foreach my $student (@Students) { # @Students is a package variable
           my $sname = $student->{'username'}.':'.$student->{'domain'};
           if($alternate) {
               $Str .= '<tr bgcolor="#ffffe6">';
           } else {
               $Str .= '<tr bgcolor="#ffffc6">';
           }
           $alternate = ($alternate + 1) % 2;
           #
           foreach my $field (@Fields) {
               $Str .= '<td>';
               if ($field eq 'fullname' || $field eq 'username') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('student_assessment');
                   $Str .= '&sort='.&Apache::lonnet::escape($ENV{'form.sort'});
                   $Str .= '&SelectedStudent=';
                   $Str .= &Apache::lonnet::escape($sname).'">';
                   $Str .= $student->{$field}.'&nbsp';
                   $Str .= '</a>';
               } else {
                   $Str .= $student->{$field};
               }
               $Str .= '</td>';
           }
           $Str .= "</tr>\n";
       }
       $Str .= '</table></td></tr></table>'."\n";
       #
       $r->print($Str);
     $r->rflush();      $r->rflush();
       #
       return;
 }  }
   
   ##############################################
   ##############################################
   sub CreateMainMenu {
       #
       # Define menu data
       my @reports = ({ internal_name => 'problem_statistics',
                        name => &mt('Overall Problem Statistics'),
                        short_description => 
       &mt('Student performance statistics on all problems.'),
                    },
                      { internal_name => 'problem_analysis',
                        name => &mt('Detailed Problem Analysis'),
                        short_description => 
       &mt('Detailed statistics and graphs of student performance on problems.'),
                    },
                      { internal_name => 'submissiontime_analysis',
                        name => &mt('Submission Time Plots'),
                        short_description => 
       &mt('Display and analysis of submission times on assessments.'),
                    },
                      { internal_name => 'student_submission_reports',
                        name => &mt('Student Submission Reports'),
                        short_description => 
       &mt('Prepare Excel spreadsheets of student submissions.'),
                    },
                      { internal_name => 'correct_problems_plot',
                        name => &mt('Correct Problems Plot'),
                        short_description => 
       &mt('Display a histogram of student performance in the course.'),
                    },
   #                   { internal_name => 'student_assessment',
   #                     name => &mt('Problem Status Chart'),
   #                     short_description => 
   #    &mt('Brief view of each students performance in course.'),
   #                 },
                      # 'percentage'  => 'Correct-problems Plot',
                      # 'activitylog' => 'Activity Log',
                      );
       #
       # Create the menu
       my $Str;
       $Str .= '<h2>'.&mt('Please select a report to generate').'</h2>';
       foreach my $reportdata (@reports) {
           $Str .='    <h3><a href="/adm/statistics?reportSelected='.
               $reportdata->{'internal_name'}.'" >'.
               $reportdata->{'name'}."</a></h3>\n";
           $Str .= '    '.('&nbsp;'x8).$reportdata->{'short_description'}.
               "\n";
       }
       $Str .="</dl>\n";
       #
       return $Str;
   }
   
 # ================================================================ Main Handler  ##############################################
   ##############################################
 sub handler {  sub handler {
     $r=shift;      my $r=shift;
       my $c = $r->connection();
     if (&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {      #
 # ------------------------------------------- Set document type for header only      # Check for overloading
  if ($r->header_only) {      my $loaderror=&Apache::lonnet::overloaderror($r);
     if ($ENV{'browser.mathml'}) {      if ($loaderror) { return $loaderror; }
  $r->content_type('text/xml');      $loaderror=
     }          &Apache::lonnet::overloaderror($r,
     else {           $ENV{'course.'.$ENV{'request.course.id'}.'.home'});
  $r->content_type('text/html');      if ($loaderror) { return $loaderror; }
     }      #
     $r->send_http_header;      # Check for access
     return OK;      if (! &Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {
  }      
  my $requrl=$r->uri;  
 # ----------------------------------------------------------------- Tie db file  
   
  undef %hash;  
   
  if ($ENV{'request.course.fn'}) {  
     my $fn=$ENV{'request.course.fn'};  
     if (-e "$fn.db") {  
  if (tie(%hash,'GDBM_File',"$fn.db",&GDBM_READER,0640)) {  
 # ------------------------------------------------------------------- Hash tied  
     $r->content_type('text/html');  
     $r->send_http_header;  
     &Menu();  
  }  
  else {  
     $r->content_type('text/html');  
     $r->send_http_header;  
     $r->print('<html><body>Coursemap undefined.</body></html>');  
  }  
 # ------------------------------------------------------------------ Untie hash  
  unless (untie(%hash)) {  
     &Apache::lonnet::logthis("<font color=blue>WARNING: ".  
                             "Could not untie coursemap $fn (browse).</font>");   
  }  
   
 # -------------------------------------------------------------------- All done  
  return OK;  
 # ----------------------------------------------- Errors, hash could no be tied  
     }  
  }   
  else {  
     $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";  
     return HTTP_NOT_ACCEPTABLE;   
  }  
     }  
     else {  
         $ENV{'user.error.msg'}=          $ENV{'user.error.msg'}=
         $r->uri.":vgr:0:0:Cannot view grades for complete course";              $r->uri.":vgr:0:0:Cannot view grades for complete course";
           if (! &Apache::lonnet::allowed('vgr',
         return HTTP_NOT_ACCEPTABLE;                         $ENV{'request.course.id'}.'/'.$ENV{'request.course.sec'})) {
               $ENV{'user.error.msg'}=
                   $r->uri.":vgr:0:0:Cannot view grades with given role";
               return HTTP_NOT_ACCEPTABLE;
           }
       }
       #
       # Send the header
       &Apache::loncommon::no_cache($r);
       &Apache::loncommon::content_type($r,'text/html');
       $r->send_http_header;
       if ($r->header_only) { return OK; }
       #
       # Extract form elements from query string
       &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                               ['sort','reportSelected',
                                                'SelectedStudent']);
       #
       # Give the LON-CAPA page header
       $r->print('<html><head><title>'.
                 &mt('Course Statistics and Charts').
                 "</title></head>\n".
                 &Apache::loncommon::bodytag('Course Statistics and Charts'));
       $r->rflush();
       # 
       # Either print out a menu for them or send them to a report
       &Apache::lonhtmlcommon::clear_breadcrumbs();
       &Apache::lonhtmlcommon::add_breadcrumb({href=>'/adm/statistics',
                                               title=>'Statistics',
                                               text =>'Statistics',
                                               faq=>139,
                                               bug=>'Statistics and Charts'});
       if (! exists($ENV{'form.reportSelected'}) || 
           $ENV{'form.reportSelected'} eq '') {
           $r->print(&Apache::lonhtmlcommon::breadcrumbs
                     (undef,&mt('Statistics Main Page')).
                     &CreateMainMenu());
       } else {
       #
           if (! &Apache::lonmysql::verify_sql_connection()) {
               my $serveradmin = $r->dir_config('lonAdmEMail');
               $r->print('<h2><font color="Red">'.
                         &mt('Unable to connect to database!').
                         '</font></h2>');
               $r->print('<p>'.
                         &mt('Please notify the server administrator ').
                         '<b>'.$serveradmin.'</b></p>');
               $r->print('<p>'.
                         &mt('Course Statistics and Charts cannot be '.
                             'retrieved until the database is restarted.  '.
                             'Your data is intact but cannot be displayed '.
                             'at this time.').'</p>');
               $r->print('</body></html>');
               return;
           }
           #
           # Clean out the caches
           if (exists($ENV{'form.ClearCache'})) {
               &Apache::loncoursedata::delete_caches($ENV{'requres.course.id'});
           }
           #
           # Begin form output
           $r->print('<form name="Statistics" ');
           $r->print('method="post" action="/adm/statistics">');
           $r->rflush();
           #
           my $GoToPage = $ENV{'form.reportSelected'};
           #
           # Set up the statistics and chart environment
           &PrepareCourseData($r);
           #
           $r->print('<input type="hidden" name="reportSelected" value="'.
                     $GoToPage.'">');
           if($GoToPage eq 'activitylog') {
   #        &Apache::lonproblemstatistics::Activity();
           } elsif($GoToPage eq 'problem_statistics') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=problem_statistics',
                     text=>'Overall Problem Statistics'});
               &Apache::lonproblemstatistics::BuildProblemStatisticsPage($r,$c);
           } elsif($GoToPage eq 'problem_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=problem_analysis',
                     text=>'Detailed Problem Analysis'});
               &Apache::lonproblemanalysis::BuildProblemAnalysisPage($r,$c);
           } elsif($GoToPage eq 'submissiontime_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                         '/adm/statistics?reportselected=submissiontime_analysis',
                         text=>'Submission Time Plots'});
               &Apache::lonsubmissiontimeanalysis::BuildSubmissionTimePage($r,$c);
           } elsif($GoToPage eq 'student_submission_reports') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                     '/adm/statistics?reportselected=student_submission_reports',
                     text=>'Student Submission Reports'});
               &Apache::lonstudentsubmissions::BuildStudentSubmissionsPage($r,$c);
           } elsif($GoToPage eq 'correct_problems_plot') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=correct_problems_plot',
                     text=>'Correct Problems Plot'});
               &Apache::loncorrectproblemplot::BuildCorrectProblemsPage($r,$c);
           } elsif($GoToPage eq 'student_assessment') {
               &Apache::lonhtmlcommon::clear_breadcrumbs();
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=student_assessment',
                     text=>'Chart'});
               &Apache::lonstudentassessment::BuildStudentAssessmentPage($r,$c);
           }
           #
           $r->print("</form>\n");
     }      }
       $r->print("</body>\n</html>\n");
       $r->rflush();
       #
       return OK;
 }  }
   
 1;  1;
 __END__  
   
   #######################################################
   #######################################################
   
   =pod
   
   =back
   
   =cut
   
   #######################################################
   #######################################################
   
   __END__
   
Removed from v.1.13  
changed lines
  Added in v.1.102

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>