Diff for /loncom/interface/lonstatistics.pm between versions 1.8 and 1.60

version 1.8, 2002/03/06 23:56:13 version 1.60, 2003/02/25 20:47:47
Line 1 Line 1
 # The LearningOnline Network with CAPA  # The LearningOnline Network with CAPA
 # (Publication Handler  
 #  #
 # $Id$  # $Id$
 #  #
Line 26 Line 25
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
 # (Navigate problems for statistical reports  # (Navigate problems for statistical reports
 # YEAR=2001  #
 # 5/05,7/09,7/25/01,8/11,9/13,9/26,10/5,10/9,10/22,10/26 Behrouz Minaei  
 # 11/1, 11/4, 11/16, 12/14, 12/16, 12/18,12/20,12/31 Behrouz Minaei  
 # YEAR=2002  
 # 1/22, 2/1, 2/6, 2/25, 3/2, 3/6 Behrouz Minaei  
 ###  ###
   
 package Apache::lonstatistics;   =pod
   
   =head1 NAME
   
   lonstatistics
   
   =head1 SYNOPSIS
   
   Main handler for statistics and chart.
   
   =head1 PACKAGES USED
   
       use strict;
       use Apache::Constants qw(:common :http);
       use Apache::lonnet();
       use Apache::lonhomework;
       use Apache::loncommon;
       use Apache::loncoursedata;
       use Apache::lonhtmlcommon;
       use Apache::lonproblemanalysis;
       use Apache::lonproblemstatistics;
       use Apache::lonstudentassessment;
       use Apache::lonpercentage;
       use GDBM_File;
   
   =over 4
   
   =cut
   
   package Apache::lonstatistics;
   
 use strict;  use strict;
 use Apache::Constants qw(:common :http);  use Apache::Constants qw(:common :http);
 use Apache::lonnet();  use Apache::lonnet();
 use Apache::lonhomework;  use Apache::lonhomework;
 use HTML::TokeParser;  use Apache::loncommon;
   use Apache::loncoursedata;
   use Apache::lonhtmlcommon;
   use Apache::lonproblemanalysis;
   use Apache::lonproblemstatistics;
   use Apache::lonstudentassessment;
   use Apache::lonpercentage;
 use GDBM_File;  use GDBM_File;
   
 # -------------------------------------------------------------- Module Globals  use vars qw/@FullClasslist @Students @Sections @SelectedSections
 my %hash;      $curr_student $prev_student $next_student 
 my %CachData;      $top_map @Sequences @Assessments /;
 my %GraphDat;  
 my %maps;  
 my %mapsort;  
 my %section;  
 my %StuBox;  
 my %DiscFac;  
 my %DisUp;  
 my %DisLow;  
 my $UpCnt;  
 my $CurMap;  
 my $CurSec;  
 my $CurStu;  
 my @cols;  
 my @list;  
 my @students;  
 my $p_count;  
 my $Pos;  
 my $r;  
 my $OpSel1;  
 my $OpSel2;  
 my $OpSelDis1;  
 my $OpSelDis2;  
 my $OpSel3;  
 my $OpSel4;  
 my $GData;  
 my $cid;  
 my $firstres;  
 my $lastres;  
 my $DiscFlag;  
 my $HWN;  
 my $P_Order;  
 my %Header = (0,"Homework Sets Order",1,"#Stdnts",2,"Tries",3,"Mod",  
               4,"Mean",5,"#YES",6,"#yes",7,"%Wrng",8,"DoDiff",  
               9,"S.D.",10,"Skew.",11,"D.F.1st",12,"D.F.2nd");  
   
 #------- Processing upperlist and lowerlist according to each problem  
 sub ProcessDisc {  
     my @List = @_;  
     @List = sort (@List);  
     my $Count = $#List+1;  
     my $Prb;  
     my @Dis;  
     my $Slvd=0;  
     my $tmp;  
     my $Sum1=0;  
     my $Sum2=0;  
     my $nIdx=0;  
     my $nStud=0;  
     my %Proc;  
     undef %Proc;  
     while ($nIdx<$Count) {  
  ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
  @Dis=split(/\+/,$tmp);  
  my $Temp = $Prb;  
  do {  
     $nIdx++;  
     $nStud++;  
     $Sum1 += $Dis[0];  
     $Sum2 += $Dis[1];  
     ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
     @Dis=split(/\+/,$tmp);  
  } while ( $Prb eq $Temp && $nIdx < $Count );  
 # $Proc{$Temp}=($Sum1/$nStud).':'.$nStud;  
  $Proc{$Temp}=($Sum1/$nStud).':'.($Sum2/$nStud);  
 #        $r->print("$nIdx) $Temp --> ($nStud) $Proc{$Temp} <br>");  
  $Sum1=0;  
  $Sum2=0;  
  $nStud=0;  
     }  
     return %Proc;  
 }  
   
   #######################################################
   #######################################################
   
 #------- Creating Discimination factor     =pod
 sub Discriminant {  
     my $Count=0;  =item Package Variables
     foreach (keys(%DiscFac)){   
  $Count++;  =item @FullClasslist The full classlist
     }  
     $UpCnt = int(0.27*$Count);  =item @Students The students we are concerned with for this invocation
     my $low=0;  
     my $up=$Count-$UpCnt;  =item @Sections The sections available in this class
     my @UpList=();  
     my @LowList=();  =item $curr_student The student currently being examined
     $Count=0;  
     foreach my $key (sort(keys(%DiscFac))){   =item $prev_student The student previous in the classlist
  $Count++;      
         #$r->print("<br>$Count) $key = $DiscFac{$key}");  =item $next_student The student next in the classlist
  if ($low < $UpCnt || $Count > $up) {  
     $low++;  =over
     my $str=$DiscFac{$key};  
     foreach(split(/\:/,$str)){  =cut 
  if ($_) {  
     if ($low<$UpCnt){push(@LowList,$_);}  #######################################################
     else {push(@UpList,$_);}  #######################################################
  }  #
     }  # Classlist variables
  }  #
     }  my @FullClasslist;
     %DisUp=&ProcessDisc(@UpList);  my @Students;
     %DisLow=&ProcessDisc(@LowList);  my @Sections;
 }  my @SelectedSections;
   my $curr_student;
   my $prev_student;
   my $next_student;
   
      #######################################################
 sub NumericSort {            #######################################################
     $a <=> $b;  
   =pod
   
   =item &clear_classlist_variables()
   
   undef the following package variables:
   
   =over
   
   =item @FullClasslist
   
   =item @Students
   
   =item @Sections
   
   =item @SelectedSections
   
   =item $curr_student
   
   =item $prev_student
   
   =item $next_student
   
   =back
   
   =cut
   
   #######################################################
   #######################################################
   sub clear_classlist_variables {
       undef(@FullClasslist);
       undef(@Students);
       undef(@Sections);
       undef(@SelectedSections);
       undef($curr_student);
       undef($prev_student);
       undef($next_student);
 }  }
   
 # ------ Create different Student Report   #######################################################
 sub StudentReport {  #######################################################
   
     my ($sname,$sdom)=@_;  =pod
   
     if ( $sname eq 'All Students' ) {  =item &PrepareClasslist()
  $r->print( '<h3><font color=blue>WARNING:   
                     Please select a student</font></h3>' );  Build up the classlist information.  The classlist information is kept in
  return;  the following package variables:
     }  
     my $shome=&Apache::lonnet::homeserver($sname,$sdom);            =over
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$cid,$shome );  
     my %result = ();  =item @FullClasslist
     my $ResId;  
     my $PrOrd;  =item @Students
     my $Code;  
     my $Tries;  =item @Sections
     my $TotalTries = 0;  
     my $ParCr = 0;  =item @SelectedSections
     my $Wrongs;  
     my %TempHash;  =item $curr_student
     my $Version;  
     my $LatestVersion;  =item $prev_student
     my $PtrTry='';  
     my $PtrCod='';  =item $next_student
     my $SetNo=0;  
     my $Str = "\n".'<table border=2>'.  =back
               "\n".'<tr>'.  
               "\n".'<th> # </th>'.  
       "\n".'<th> Set Title </th>'.  
       "\n".'<th> Results </th>'.  
       "\n".'<th> Tries </th>'.  
       "\n".'</tr>';  
     unless ($reply=~/^error\:/) {  
         foreach (split(/\&/,$reply)){  
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));  
             $result{$name}=$value;  
         }  
         foreach my $CurCol (@cols) {  
     if (!$CurCol){  
  my $Set=&Apache::lonnet::declutter($hash{'map_id_'.$1});  
  if ( $Set ) {  
     $SetNo++;  
     $Str .= "\n"."<tr>".  
     "\n"."<td> $SetNo </td>".  
                             "\n"."<td> $Set </td>".  
                             "\n"."<td> $PtrCod </td>".  
                             "\n"."<td> $PtrTry</td>".  
                             "\n"."</tr>";  
  }  
  $PtrTry='';  
  $PtrCod='';  
  next;   
     }  
     ($PrOrd,$ResId)=split(/\:/,$CurCol);  
             $ResId=~/(\d+)\.(\d+)/;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     undef %TempHash;  
     foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))){  
  if ($_=~/^stores\_(\d+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = '-';    
  $TempHash{"$Part.PrOrd"} = $PrOrd+$PartNo;    
  $PartNo++;  
     }  
  }  
             }  
   
             my $Prob = $Map.'___'.$2.'___'.  $curr_student, $prev_student, and $next_student may not be defined, depending
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  upon the calling context.
             $Code='U';  
             $Tries = 0;  =cut
             $Wrongs = 0;  
      $LatestVersion = $result{"version:$Prob"};  #######################################################
     if ( $LatestVersion ) {  #######################################################
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  sub PrepareClasslist {
     my $vkeys = $result{"$Version:keys:$Prob"};      my $r = shift;
     my @keys = split(/\:/,$vkeys);      my %Sections;
         &clear_classlist_variables();
     foreach my $Key (@keys) {        #
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {      # Retrieve the classlist
     my $Part = $1;      my $cid  = $ENV{'request.course.id'};
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};      my $cdom = $ENV{'course.'.$cid.'.domain'};
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;       my $cnum = $ENV{'course.'.$cid.'.num'};
     $TotalTries += $Tries;      my ($classlist,$field_names) = &Apache::loncoursedata::get_classlist($cid,
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};                                                                    $cdom,$cnum);
     if ( $Val eq 'correct_by_student' )      if (exists($ENV{'form.Section'})) {
                                 { $Wrongs = $Tries - 1; $Code = 'Y'; }           if (ref($ENV{'form.Section'})) {
     elsif ( $Val eq 'correct_by_override' )              @SelectedSections = @$ENV{'form.Section'};
                                 { $Wrongs = $Tries - 1; $Code = 'y'; }                                      # Remove the empty sections
     elsif ( $Val eq 'incorrect_attempted' ||               for (my $i=0; $i<=$#SelectedSections; $i++) {
                                 $Val eq 'incorrect_by_override' )                  if ($SelectedSections[$i] =~ /^\s*$/) {
                 { $Wrongs = $Tries; $Code = 'N'; }                      splice(@SelectedSections,$i,1);
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }                  }
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "$TempHash{$part.'.Tries'}";  
                     $PtrCod .= "$TempHash{$part.'.Code'}";      
  }  
             }              }
     else {           } else {
  for(my $n=0; $n<$PartNo; $n++) {               if ($ENV{'form.Section'} !~ /^\s*$/) {
     if ($PtrTry ne '') {$PtrTry .= ',';}                  @SelectedSections = ($ENV{'form.Section'});
     $PtrTry .= "0";              }
                     $PtrCod .= "-";           }
  }      }
     }      @SelectedSections = ('any') if (! @SelectedSections);
       #
       # Process the classlist
       while (my ($student,$student_data) = each (%$classlist)) {
           my $studenthash = ();
           for (my $i=0; $i< scalar(@$field_names);$i++) {
               $studenthash->{$field_names->[$i]}=$student_data->[$i];
           }
           push (@FullClasslist,$studenthash);
           #
           # Build up a list of sections
           my $section = $studenthash->{'section'};
           if (! defined($section) || $section =~/^\s*$/ || $section == -1) {
               $studenthash->{'section'} = 'none';
               $section = $studenthash->{'section'};
           }
           $Sections{$section}++;
           #
           # Only put in the list those students we are interested in
           foreach my $sect (@SelectedSections) {
               if (($sect eq 'any') || ($section eq $sect)) {
                   push (@Students,$studenthash);
                   last;
               }
           }
       }
       #
       # Put the consolidated section data in the right place
       @Sections = sort {$a cmp $b} keys(%Sections);
       #
       # Sort the Students
       my $sortby = 'fullname';
       $sortby = $ENV{'form.sort'} if (exists($ENV{'form.sort'}));
       my @TmpStudents = sort { $a->{$sortby} cmp $b->{$sortby} ||
                                $a->{'fullname'} cmp $b->{'fullname'} } @Students;
   
       @Students = @TmpStudents;
       # 
       # Now deal with that current student thing....
       if (exists($ENV{'form.StudentAssessmentStudent'})) {
           my ($current_uname,$current_dom) = 
               split(':',$ENV{'form.StudentAssessmentStudent'});
           my $i;
           for ($i = 0; $i<=$#Students; $i++) {
               next if (($Students[$i]->{'username'} ne $current_uname) || 
                        ($Students[$i]->{'domain'}   ne $current_dom));
               $curr_student = $Students[$i];
               last; # If we get here, we have our student.
           }
           if ($i == 0) {
               $prev_student = 'none';
           } else {
               $prev_student = $Students[$i-1];
           }
           if ($i == $#Students) {
               $next_student = 'none';
           } else {
               $next_student = $Students[$i+1];
         }          }
     }      }
     $Str .= "\n".'</table>';  
     $r->print($Str);  
     $r->rflush();  
 }  }
   
 sub CreateTable {  #######################################################
     my $ColNo=0;  #######################################################
     foreach (keys(%Header)){   #
  $ColNo++;  # Course Sequences variables
     }   #
     my ($Hd, $Hid)=@_;  my $top_map;
     if ( $Hd == 1 ) {  my @Sequences;
  $r->print('<br><a href="'.$hash{'src_'.$Hid}.  my @Assessments;
                   '" target="_blank">'.$hash{'title_'.$Hid}.'</a>');  
     }  #######################################################
     my $Result = "\n".'<table border=2>';  #######################################################
     $Result .= '<tr><th>P#</th>'."\n";  
     for ( my $nIdx=0; $nIdx < $ColNo; $nIdx++ ) {   =pod
  $Result .= '<th>'.'<input type="submit" name="sort" value="'.  
                    $Header{$nIdx}.'" />'.'</th>'."\n";  =item &clear_sequence_variables()
   
   =cut
   
   #######################################################
   #######################################################
   sub clear_sequence_variables {
       undef($top_map);
       undef(@Sequences);
       undef(@Assessments);
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &PrepareCourseData($r)
   
   =cut
   
   #######################################################
   #######################################################
   sub PrepareCourseData {
       my ($r) = @_;
       &clear_sequence_variables();
       my ($top,$sequences,$assessments) = &Apache::loncoursedata::get_sequence_assessment_data();
       if (! defined($top) || ! ref($top)) {
           # There has been an error, better report it
           &Apache::lonnet::logthis('top is undefined');
           return;
       }
       $top_map = $top if (ref($top));
       @Sequences = @{$sequences} if (ref($sequences) eq 'ARRAY');
       @Assessments = @{$assessments} if (ref($assessments) eq 'HASH');
   
   =pod
   
       ##
       ## Debugging code
       ##
       foreach my $s (@Sequences) {
           next if ($s->{'title'} ne 'Bioenergetics: Enzyme Regulation');
           &Apache::lonnet::logthis('-----------------------------------');
           &Apache::lonnet::logthis('title      = '.$s->{'title'});
           &Apache::lonnet::logthis('symb       = '.$s->{'symb'});
           &Apache::lonnet::logthis('num_assess = '.$s->{'num_assess'});
           foreach my $a (@{$s->{'contents'}}) {
               &Apache::lonnet::logthis('   --------------------------------');
               &Apache::lonnet::logthis('   title      = '.$a->{'title'});
               &Apache::lonnet::logthis('   symb       = '.$a->{'symb'});
           }
     }      }
     $Result .= "\n".'</tr>'."\n";      
     $r->print( $Result );  
     $r->rflush();  
 }  
   
 sub CloseTable {  =cut
     $r->print("\n".'</table>'."\n");  
     $r->rflush();      return;
 }  
    
 # ------------------------------------------- Prepare Statistics Table  
 sub PreStatTable {  
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_statistics.db";  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     my $CachDisFac = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
      "_$ENV{'user.domain'}_$cid\_DiscFactor.db";  
     my $OpSel11='';  
     my $OpSel12='';  
     my $OpSel13='';  
     my $Status = $ENV{'form.status'};  
     if ( $Status eq 'Any' ) { $OpSel13='selected'; }  
     elsif ($Status eq 'Expired' ) { $OpSel12 = 'selected'; }  
     else { $OpSel11 = 'selected'; }  
   
     my $Ptr = '';  
     $Ptr .= '<br><b> Student Status: &nbsp; </b>'."\n".  
             '<select name="status">'.   
             '<option '.$OpSel11.' >Active</option>'."\n".  
             '<option '.$OpSel12.' >Expired</option>'."\n".  
     '<option '.$OpSel13.' >Any</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type=submit name=sort value="Recalculate Statistics"/>'."\n";  
   
     $Ptr .= '<br><b> Sorting Type: &nbsp; </b>'."\n".  
             '<select name="order"> <option '.$OpSel1.' >Ascending</option>'."\n".  
     '<option '.$OpSel2.'>Descending</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="DoDiff Graph" />'."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="%Wrong Graph" />'."\n";  
   
     $Ptr .= '<pre>'.  
     '<b>  #Stdnts</b>: Total Number of Students opened the problem.<br>'.   
     '<b>  Tries  </b>: Total Number of Tries for solving the problem.<br>'.   
     '<b>  Mod   </b> : Maximunm Number of Tries for solving the problem.<br>'.   
     '<b>  Mean   </b>: Average Number of the tries. [ Tries / #Stdnts ]<br>'.  
     '<b>  #YES   </b>: Number of students solved the problem correctly.<br>'.   
     '<b>  #yes   </b>: Number of students solved the problem by override.<br>'.  
     '<b>  %Wrng  </b>: Percentage of students tried to solve the problem but'.  
     ' still incorrect. [ 100*((#Stdnts-(#YES+#yes))/#Stdnts) ]<br>'.  
 #    '  DoDiff : Degree of Difficulty of the problem. [ Tries/(#YES+#yes+0.1) ]<br>'. Kashy formula  
     '<b>  DoDiff </b>: Degree of Difficulty of the problem. [ 1 - ((#YES+#yes) / Tries) ]<br>'. #Gerd formula  
     '<b>  S.D.  </b> : Standard Deviation of the tries.'.  
     '[ sqrt(sum((Xi - Mean)^2)) / (#Stdnts-1)'.  
     ' where Xi denotes every student\'s tries ]<br>'.  
     '<b>  Skew.  </b>: Skewness of the students tries.'.  
  ' [ (sqrt( sum((Xi - Mean)^3) / #Stdnts)) / (S.D.^3) ]<br>'.  
     '<b>  Dis.F. </b>: Discrimination Factor: A Standard for '.  
  'evaluating the problem according to a Criterion<br>'.  
  '<b>           [Applied Criterion in %27 Upper Students - '.  
  'Applied the same Criterion in %27 Lower Students]</b><br>'.  
     '<b>           1st </b>Criterion for Sorting the Students: '.  
  'Sum of Partial Credit Awarded / Total Number of Tries<br>'.  
     '<b>           2nd </b>Criterion for Sorting the Students: '.  
  'Total number of Correct Answers / Total Number of Tries'.  
             '</pre>';  
   
     $r->print($Ptr);  
     $r->rflush();  
   
     if ((-e "$CacheDB")&&($ENV{'form.sort'} ne 'Recalculate Statistics')) {  
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
     tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_READER,0640);  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     &Cache_Statistics();  
         }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
     else {  
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {  
     tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_WRCREAT,0640);  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     foreach (keys %DiscFac) {delete $CachData{$_};}  
     foreach (keys %CachData) {delete $CachData{$_};}  
     $DiscFlag=0;  
     &Build_Statistics();  
  }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
     #$r->print('Total instances of the problems : '.($p_count*($#students+1)));  
   
     untie(%CachData);  
     untie(%GraphDat);  
     untie(%DiscFac);         
 }  }
   
   ##############################################
   ##############################################
   
   =pod 
   
   =item &MapSelect($elementname,$status,$numvisible,$selected,$restriction) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sequences in the course.  The values of the sequences are the symbs.
   If the top sequence is selected, the value 'top' will result.
   
 # ------------------------------------- Find the section of student in a course  =over 4
   
 sub usection {  =item $elementname The name of the HTML form element
     my ($udom,$unam,$courseid,$ActiveFlag)=@_;  
     $courseid=~s/\_/\//g;  =item $status 'multiple' or 'single' selection box
     $courseid=~s/^(\w)/\/$1/;  
     foreach (split(/\&/,&Apache::lonnet::reply('dump:'.  =item $numvisible The number of options to be visible
              $udom.':'.$unam.':roles',  
              &Apache::lonnet::homeserver($unam,$udom)))){  =item $selected Array ref to the names of the already selected maps.
         my ($key,$value)=split(/\=/,$_);  If undef, $ENV{'form.'.$elementname} is used.  
         $key=&Apache::lonnet::unescape($key);  If $ENV{'form.'.$elementname} is also empty, none will be selected.
         if ($key=~/^$courseid(?:\/)*(\w+)*\_st$/) {  
             my $section=$1;  =item $restriction Code reference to subroutine which returns true or 
             if ($key eq $courseid.'_st') { $section=''; }  false.  The code must expect a reference to a sequence data structure.
     my ($dummy,$end,$start)=split(/\_/,&Apache::lonnet::unescape($value));  
     if ( $ActiveFlag ne 'Any' ) {  =back
  my $now=time;  
  my $notactive=0;  =cut
  if ($start) {  
     if ($now<$start) { $notactive=1; }  ##############################################
  }  ##############################################
  if ($end) {  sub MapSelect {
     if ($now>$end) { $notactive=1; }      my ($elementname,$status,$numvisible,$selected,$restriction)=@_;
  }      if ($numvisible < 1) {
  if ((($ActiveFlag eq 'Expired') && $notactive == 1) ||           return;
                     (($ActiveFlag eq 'Active') && $notactive == 0 ) ) {      }
     return $section;      #
  }      # Set up array of selected items
  else { return '-1'; }       my @Selected;
     }      if (! defined($selected)) {
     return $section;          if (exists($ENV{'form.'.$elementname})) {
               if (ref($ENV{'form.'.$elementname})) {
                   @Selected = @$ENV{'form.'.$elementname};
               } else {
                   @Selected = ($ENV{'form.'.$elementname});
               }
           } else {
               @Selected = ();
           }
       } else {
           if (ref($selected)) {
               @Selected = @$selected;
           } else {
               @Selected = ($selected);
           }
       }
       #
       # Set up the restriction call
       if (! defined($restriction)) {
           $restriction = sub { 1; };
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Loop through the sequences
       foreach my $s (@Sequences) {
           next if (! $restriction->($s));
           $Str .= '    <option value="'.$s->{'symb'}.'" ';
           foreach (@Selected) {
               if ($s->{'symb'} eq $_) {
                   $Str .= 'selected ';
                   last;
               }
         }          }
           $Str .= '>'.$s->{'title'}."</option>\n";
     }      }
     return '-1';      $Str .= "</select>\n";
       return $Str;
 }  }
   
   
 # ------ Dump the Student's DB file and handling the data for statistics table   ##############################################
   ##############################################
   
 sub ExtractStudentData {  =pod 
     my ($student,$coid)=@_;  
     my ($sname,$sdom) = split( /\:/, $student );  =item &SectionSelect($elementname,$status,$numvisible) 
     my $shome=&Apache::lonnet::homeserver( $sname,$sdom );            
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$coid,$shome );  Returns html for a selection box allowing the user to choose one (or more) 
     my %result = ();  of the sections in the course.  
     my $ResId;  
     my $PrOrd;  =over 4
     my $Dis = '';  
     my $Code;  =item $elementname The name of the HTML form element
     my $Tries;  
     my $ParCr;  =item $status 'multiple' or 'single' selection box
     my $TotalTries = 0;  
     my $TotalOpend = 0;  
     my $ProbSolved = 0;  
     my $ProbTot = 0;  
     my $TimeTot = 0;  
     my $TotParCr = 0;  
     my $Wrongs;  
     my %TempHash;  
     my $Version;  
     my $LatestVersion;  
     my $SecLimit;  
     my $MapLimit;  
     unless ($reply=~/^error\:/) {  
         foreach (split(/\&/,$reply)) {  
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));  
             $result{$name}=$value;  
         }  
         foreach my $CurCol(@cols) {  
     ($PrOrd,$ResId)=split(/\:/,$CurCol);  
     if ( !$CurCol ) { next; }  
             $ResId=~/(\d+)\.(\d+)/;  
     my $MapId=$1;  
     my $PrbId=$2;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$MapId} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     $Dis .= ':';  
     undef %TempHash;  
     foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {  
  if ($_=~/^stores\_(\d+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = 'U';    
  $TempHash{"$Part.PrOrd"} = $PrOrd+$PartNo;  
  $PartNo++;  
     }  
  }  
             }  
   
             my $Prob = $Map.'___'.$PrbId.'___'.  =item $numvisible The number of options to be visible
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
             $Code='U';  =item $selected Array ref to the names of the already selected sections.
             $Tries = 0;  If undef, $ENV{'form.'.$elementname} is used.  
     $ParCr = 0;  If $ENV{'form.'.$elementname} is also empty, none will be selected.
             $Wrongs = 0;  
      $LatestVersion = $result{"version:$Prob"};         =item $restriction Code reference to subroutine which returns true or 
   false.  The code must expect a reference to a sequence data structure.
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  =back
     my $vkeys = $result{"$Version:keys:$Prob"};  
     my @keys = split(/\:/,$vkeys);  =cut
     
     foreach my $Key (@keys) {    ##############################################
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {  ##############################################
     my $Part = $1;  sub SectionSelect {
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};      my ($elementname,$status,$numvisible)=@_;
     $ParCr = $result{"$Version:$Prob:resource.$Part.awarded"};      if ($numvisible < 1) {
     my $Time = $result{"$Version:$Prob:timestamp"};          return;
     $TempHash{"$Part.Time"} = ($Time) ? $Time : 0;      }
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;      #
     $TempHash{"$Part.ParCr"} = ($ParCr) ? $ParCr : 0;              # Build the form element
     $TotalTries += $TempHash{"$Part.Tries"};      my $Str = "\n";
     $TotParCr += $TempHash{"$Part.ParCr"};      $Str .= '<select name="'.$elementname.'" ';
 #$r->print($Version.'---'.$Prob.'==='.$Time.'<br>');      if ($status ne 'single') {
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};          $Str .= 'multiple="true" ';
     if ( $Val eq 'correct_by_student' )      }
                                { $Wrongs = $Tries - 1; $Code = 'C'; }       $Str .= 'size="'.$numvisible.'" >'."\n";
     elsif ( $Val eq 'correct_by_override' )      #
                                { $Wrongs = $Tries - 1; $Code = 'O'; }                              # Loop through the sequences
     elsif ( $Val eq 'incorrect_attempted' ||       foreach my $s (@Sections) {
                                 $Val eq 'incorrect_by_override' )          $Str .= '    <option value="'.$s.'" ';
                { $Wrongs = $Tries; $Code = 'I'; }          foreach (@SelectedSections) {
     $TempHash{"$Part.Code"} = $Code;              if ($s eq $_ || $_ =~ /^(any|all)$/) {
     $TempHash{"$Part.Wrongs"} = $Wrongs;                  $Str .= 'selected ';
  }                  last;
          }  
                 }   
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     my $Yes = 0;  
                     if ( $TempHash{$part.'.Code'} eq 'C' ||  
                          $TempHash{$part.'.Code'} eq 'O'  )   
        {$ProbSolved++;$Yes=1;}  
   
  #    my $ptr = "$hash{'title_'.$ResId}";  
     my $ptr = $TempHash{$part.'.PrOrd'}.':'.$ResId;  
   
     if ( $PartNo > 1 ) {                  
  $ptr .= "*(part $part)";  
  $Dis .= ':';  
     }  
     my $Fac = ($TempHash{"$part.Tries"}) ?   
                               ($TempHash{"$part.ParCr"}/$TempHash{"$part.Tries"}) : 0;  
     my $DisF;  
     if ( $Fac > 0 &&  $Fac < 1 ) {   
  $DisF = sprintf( "%.4f", $Fac );  
     }  
     else {$DisF = $Fac;}  
 #    $DisF .= '+'.$TempHash{"$part.Time"};  
     $TimeTot += $TempHash{"$part.Time"};  
     $Dis .= $TempHash{$part.'.PrOrd'}.'='.$DisF.'+'.$Yes;  
   
             #$r->print('<br>'.$DisFactor,'###',$DiscFac{$DisFactor});  
     $ptr .= ":$TempHash{$part.'.Tries'}".  
             ":$TempHash{$part.'.Wrongs'}".  
                             ":$TempHash{$part.'.Code'}";  
     push (@list, $ptr);  
     $TotalOpend++;  
     $ProbTot++;  
  }  
             }              }
     #else {           }
  #for(my $n=0; $n<$PartNo; $n++) {          $Str .= '>'.$s."</option>\n";
  #    push (@list, "$hash{'title_'.$ResId}*$ResId:0:0:U");  
  #    $ProbTot++;   
  #}  
     #}  
         }  
  if ( $TotalTries ) {  
     my $DisFac = ( $TotalTries ) ? ($TotParCr/$TotalTries) : 0;  
     my $DisFactor = sprintf( "%.4f", $DisFac );  
     $DiscFac{$DisFactor}=$Dis;  
             #$r->print('<br>'.$DisFactor,'###',$DiscFac{$DisFactor});  
     #my $time;  
     #if ($ProbSolved){  
  #$time = int(($TimeTot/$ProbSolved)-10000000);  
     #}  
     #$DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.  
             #          $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;  
  }  
     }      }
     #$r->print($sname.' PrCr= '.$TotParCr.' Slvd= '.$ProbSolved.' Tries='.$TotalTries.'<br>');      $Str .= "</select>\n";
       return $Str;
 }  }
   
   ##############################################
   ##############################################
   
 # ------------------------------------------------------------ Build page table  sub CheckFormElement {
 sub tracetable {      my ($cache, $ENVName, $cacheName, $default)=@_;
     my ($rid,$beenhere)=@_;  
     $rid=~/(\d+)\.(\d+)/;      if(defined($ENV{'form.'.$ENVName})) {
     $maps{&Apache::lonnet::declutter($hash{'map_id_'.$1})}='';#$hash{'title_'.$rid};           $cache->{$cacheName} = $ENV{'form.'.$ENVName};
     #$maps{$HWN}=$hash{'title_'.$rid};       } elsif(!defined($cache->{$cacheName})) {
     unless ($beenhere=~/\&$rid\&/) {          $cache->{$cacheName} = $default;
        $beenhere.=$rid.'&';       } else {
        if (defined($hash{'is_map_'.$rid})) {          $ENV{'form.'.$ENVName} = $cache->{$cacheName};
    my $cmap=$hash{'map_type_'.$hash{'map_pc_'.$hash{'src_'.$rid}}};      }
            if ( $cmap eq 'sequence' || $cmap eq 'page' ) {       return;
                $cols[$#cols+1]=0;  }
        $P_Order++;  
        $HWN=$P_Order;  sub ProcessFormData{
                $mapsort{$HWN} = $rid.':';       my ($cache)=@_;
                #$maps{&Apache::lonnet::declutter($hash{'src_'.$rid})}=   
                #      $hash{'title_'.$rid};       $cache->{'reportKey'} = 'false';
            }  
            if ((defined($hash{'map_start_'.$hash{'src_'.$rid}})) &&      &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                (defined($hash{'map_finish_'.$hash{'src_'.$rid}}))) {                                              ['download',
        my $frid=$hash{'map_finish_'.$hash{'src_'.$rid}};                                               'reportSelected',
                                                'StudentAssessmentStudent',
                &tracetable($hash{'map_start_'.$hash{'src_'.$rid}},                                               'ProblemStatisticsSort']);
    '&'.$frid.'&');      &CheckFormElement($cache, 'DownloadAll', 'DownloadAll', 'false');
       if ($cache->{'DownloadAll'} ne 'false') {
        $cols[$#cols+1]=($P_Order+1).':'.$frid;          # Clean the hell out of that cache!
                 # We cannot untie the hash at this scope (stupid libgd :( )
        my $meta=$hash{'src_'.$frid};          # So, remove every single key.  What a waste of time....
        my $PartNo = 0;          # Of course, if you are doing this you are probably resigned
                if ($meta) {          # to waiting a while.
    if ($meta=~/\.(problem|exam|quiz|assess|survey|form)$/) {          &Apache::lonnet::logthis("Cleaning out the cache file");
        foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {          while (my ($key,undef)=each(%$cache)) {
    if ($_=~/^stores\_(\d+)\_tries$/) {              next if ($key eq 'DownloadAll');
        &Apache::lonnet::metadata($meta,$_.'.part');              delete($cache->{$key});
        $P_Order++;          }
        $mapsort{$HWN} .= '&'.$P_Order;      }
        $PartNo++;      &CheckFormElement($cache, 'Status', 'Status', 'Active');
        $r->print('<br>'.$PartNo.'---'.$P_Order);      &CheckFormElement($cache, 'postdata', 'reportSelected', 'Class list');
    }      &CheckFormElement($cache, 'reportSelected', 'reportSelected', 
        }                        'Class list');
    }      $cache->{'reportSelected'} = 
                }          &Apache::lonnet::unescape($cache->{'reportSelected'});
    }      &CheckFormElement($cache, 'sort', 'sort', 'fullname');
        } else {      &CheckFormElement($cache, 'download', 'download', 'false');
    $cols[$#cols+1]=($P_Order+1).':'.$rid;      &CheckFormElement($cache, 'StatisticsMaps', 
    my $meta=$hash{'src_'.$rid};                        'StatisticsMaps', 'All Maps');
    my $PartNo = 0;      &CheckFormElement($cache, 'StatisticsProblemSelect',
            if ($meta) {        'StatisticsProblemSelect', 'All Problems');
        if ($meta=~/\.(problem|exam|quiz|assess|survey|form)$/) {      &CheckFormElement($cache, 'StatisticsPartSelect',
    foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {        'StatisticsPartSelect', 'All Parts');
        if ($_=~/^stores\_(\d+)\_tries$/) {      if(defined($ENV{'form.Section'})) {
    &Apache::lonnet::metadata($meta,$_.'.part');          my @sectionsSelected = (ref($ENV{'form.Section'}) ?
    $P_Order++;                                 @{$ENV{'form.Section'}} :
    $mapsort{$HWN} .= '&'.$P_Order;                                  ($ENV{'form.Section'}));
    $PartNo++;          $cache->{'sectionsSelected'} = join(':', @sectionsSelected);
        }      } elsif(!defined($cache->{'sectionsSelected'})) {
    }          $cache->{'sectionsSelected'} = $cache->{'sectionList'};
        }      }
    }  
        }      # student assessment
        if (defined($hash{'to_'.$rid})) {      if(defined($ENV{'form.CreateStudentAssessment'}) ||
           foreach (split(/\,/,$hash{'to_'.$rid})){         defined($ENV{'form.NextStudent'}) ||
               &tracetable($hash{'goesto_'.$_},$beenhere);         defined($ENV{'form.PreviousStudent'})) {
           }          $cache->{'reportSelected'} = 'Student Assessment';
        }      }
       if(defined($ENV{'form.NextStudent'})) {
           $cache->{'StudentAssessmentMove'} = 'next';
       } elsif(defined($ENV{'form.PreviousStudent'})) {
           $cache->{'StudentAssessmentMove'} = 'previous';
       } else {
           $cache->{'StudentAssessmentMove'} = 'selected';
       }
       &CheckFormElement($cache, 'StudentAssessmentStudent', 
                         'StudentAssessmentStudent', 'All Students');
       $cache->{'StudentAssessmentStudent'} = 
           &Apache::lonnet::unescape($cache->{'StudentAssessmentStudent'});
       &CheckFormElement($cache, 'DefaultColumns', 'DefaultColumns', 'false');
   
       # Problem analysis
       &CheckFormElement($cache, 'Interval', 'Interval', '1');
   
       # ProblemStatistcs
       &CheckFormElement($cache, 'DisplayCSVFormat',
                         'DisplayFormat', 'Display Table Format');
       &CheckFormElement($cache, 'ProblemStatisticsAscend',
                         'ProblemStatisticsAscend', 'Ascending');
       &CheckFormElement($cache, 'ProblemStatisticsSort',
                         'ProblemStatisticsSort', 'Homework Sets Order');
       &CheckFormElement($cache, 'DisplayLegend', 'DisplayLegend', 
         'Hide Legend');
       &CheckFormElement($cache, 'SortProblems', 'SortProblems', 
                         'Sort Within Sequence');
   
       # Search only form elements
       my @headingColumns=();
       my @sequenceColumns=();
       my $foundColumn = 0;
       if(defined($ENV{'form.ReselectColumns'})) {
           my @reselected = (ref($ENV{'form.ReselectColumns'}) ? 
                             @{$ENV{'form.ReselectColumns'}}
                             : ($ENV{'form.ReselectColumns'}));
           foreach (@reselected) {
               if(/HeadingColumn/) {
                   push(@headingColumns, $_);
                   $foundColumn = 1;
               } elsif(/SequenceColumn/) {
                   push(@sequenceColumns, $_);
                   $foundColumn = 1;
               }
           }
     }      }
 }  
   
 sub MySort {                $cache->{'reportKey'} = 'false';
     if ( $Pos > 0 ) {      if($cache->{'reportSelected'} eq 'Analyze') {
  if ($ENV{'form.order'} eq 'Descending') {$b <=> $a;}          $cache->{'reportKey'} = 'Analyze';
  else { $a <=> $b; }      } elsif($cache->{'reportSelected'} eq 'DoDiffGraph') {
     }          $cache->{'reportKey'} = 'DoDiffGraph';
     else {      } elsif($cache->{'reportSelected'} eq 'PercentWrongGraph') {
  if ($ENV{'form.order'} eq 'Descending') {$b cmp $a;}          $cache->{'reportKey'} = 'PercentWrongGraph';
  else { $a cmp $b; }      }
   
       if(defined($ENV{'form.DoDiffGraph'})) {
           $cache->{'reportSelected'} = 'DoDiffGraph';
           $cache->{'reportKey'} = 'DoDiffGraph';
       } elsif(defined($ENV{'form.PercentWrongGraph'})) {
           $cache->{'reportSelected'} = 'PercentWrongGraph';
           $cache->{'reportKey'} = 'PercentWrongGraph';
       }
   
       foreach (keys(%ENV)) {
           if(/form\.Analyze/) {
               $cache->{'reportSelected'} = 'Analyze';
               $cache->{'reportKey'} = 'Analyze';
               my $data;
               (undef, $data)=split(':::', $_);
               $cache->{'AnalyzeInfo'}=$data;
           } elsif(/form\.HeadingColumn/) {
               my $value = $_;
               $value =~ s/form\.//;
               push(@headingColumns, $value);
               $foundColumn=1;
           } elsif(/form\.SequenceColumn/) {
               my $value = $_;
               $value =~ s/form\.//;
               push(@sequenceColumns, $value);
               $foundColumn=1;
           }
       }
   
       if($foundColumn) {
           $cache->{'HeadingsFound'} = join(':', @headingColumns);
           $cache->{'SequencesFound'} = join(':', @sequenceColumns);;
     }      }
       if(!defined($cache->{'HeadingsFound'}) || 
          $cache->{'DefaultColumns'} ne 'false') {
           $cache->{'HeadingsFound'}='HeadingColumnFull Name';
       }
       if(!defined($cache->{'SequencesFound'}) ||
          $cache->{'DefaultColumns'} ne 'false') {
           $cache->{'SequencesFound'}='All Sequences';
       }
       $cache->{'DefaultColumns'} = 'false';
   
       return;
 }  }
   
 sub Build_Statistics {  =pod
     $r->print(<<ENDPOP);  
     <script>  
     popwin=open('','popwin','width=400,height=100');  
     popwin.document.writeln('<html><body bgcolor="#88DDFF">'+  
       '<title>LON-CAPA Statistics</title>'+  
       '<h4>Computation Progress</h4>'+  
       '<form name=popremain>'+  
       '<input type=text size=35 name=remaining value=Starting></form>'+  
       '</body></html>');  
     popwin.document.close();  
     </script>  
 ENDPOP  
   
     $r->rflush();  =item &SortStudents()
 # ---------------------------- Gathering the Data of students' tries  
     my $index;  
     for ($index=0;$index<=$#students;$index++) {  
 #----------- update progress  
         $r->print('<script>popwin.document.popremain.remaining.value="'.  
                   'Computing '.($index+1).'/'.($#students+1).': '.  
                   $students[$index].'";</script>');  
         $r->rflush();  
   
         &ExtractStudentData($students[$index],$cid);  Determines which students to display and in which order.  Which are 
     }  displayed are determined by their status(active/expired).  The order
   is determined by the sort button pressed (default to username).  The
   type of sorting is username, lastname, or section.
   
 # -------------------- sorting the Data  =over 4
     $r->print('<script>popwin.document.popremain.remaining.value="'.  
               'Calculating Discrimination Factors...";</script>');  Input: $students, $CacheData
   
     @list = sort (@list);  $students: A array pointer to a list of students (username:domain)
   
   $CacheData: A pointer to the hash tied to the cached data
     &Discriminant();  
   
     $OpSel2='';  
     $OpSel1='selected';  
       
     $p_count = 0;   
     my $nIdx = 0;  
     my $dummy;   
     my $p_val;  
     my $ResId;  
     my $NoElements = $#list + 1;  
 #-------------------------------- loop for data representation  
     foreach (sort keys %mapsort) {  
  my ($Hid,$pr)=split(/\:/,$mapsort{$_});  
  my @lpr=split(/\&/,$pr);  
  &CreateTable(1,$Hid);  
  for (my $i=1; $i<=$#lpr; $i++) {  
     my %storestats=();  
     my ($PrOrd,$Prob,$Tries,$Wrongs,$Code)=split(/\:/,$list[$nIdx]);  
     my $Temp = $Prob;  
     my $MxTries = 0;  
     my $TotalTries = 0;  
     my $YES = 0;  
     my $Incorrect = 0;  
     my $Override = 0;  
     my $StdNo = 0;  
     my @StdLst;  
     while ( $PrOrd == $lpr[$i] )   
     {  
  $nIdx++;  
  $StdNo++;  
  $StdLst[ $StdNo ] = $Tries;  
  $TotalTries += $Tries;  
  if ( $MxTries < $Tries ) { $MxTries = $Tries; }   
  if ( $Code eq 'C' ){ $YES++; }  
  elsif( $Code eq 'I' ) { $Incorrect++; }  
  elsif( $Code eq 'O' ) { $Override++; }  
  elsif( $Code eq 'U' ) { $StdNo--; }  
  ($PrOrd,$Prob,$Tries,$Wrongs,$Code)=split(/\:/,$list[$nIdx]);  
     }  
   
     $p_count++;  
     my $Dummy;  
     ($ResId,$Dummy)=split(/\*/,$Temp);  
   
     $Temp = '<a href="'.$hash{'src_'.$ResId}.  
                 '" target="_blank">'.$hash{'title_'.$ResId}.$Dummy.'</a>';  
       
     my $res = &Apache::lonnet::declutter($hash{'src_'.$ResId});  
     my $urlres=$res;  
   
     $ResId=~/(\d+)\.(\d+)/;  
     my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
     $urlres=$Map;  
    
     $res = '<a href="'.$hash{'src_'.$ResId}.'">'.$res.'</a>';  
     #$Map = '<a href="'.$Map.'">'.$res.'</a>';  
   
 #------------------------ Compute the Average of Tries about one problem  
     my $Average = ($StdNo) ? $TotalTries/$StdNo : 0;  
   
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___timestamp'}=time;         
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___stdno'}=$StdNo;  
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___avetries'}=$Average;  
      
 #-------------------------------- Compute percentage of Wrong tries  
     my $Wrong = ( $StdNo ) ? 100 * ( $Incorrect / $StdNo ) : 0;  
   
 #-------------------------------- Compute Standard Deviation  
     my $StdDev = 0;   
     if ( $StdNo > 1 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $StdDev += $Dif*$Dif;  
  }   
  $StdDev /= ( $StdNo - 1 );  
  $StdDev = sqrt( $StdDev );  
     }  
   
 #-------------------------------- Compute Degree of Difficulty  
     my $DoDiff = 0;  
     if( $TotalTries > 0 ) {  
  $DoDiff = 1 - ( ( $YES + $Override ) / $TotalTries );  
 #    $DoDiff =  ($TotalTries)/($YES + $Override+ 0.1);      
     }  
          
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___difficulty'}=$DoDiff;  
   
 #-------------------------------- Compute the Skewness  
     my $Skewness = 0;  
     my $Sum = 0;   
     if ( $StdNo > 0 && $StdDev > 0 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $Skewness += $Dif*$Dif*$Dif;  
  }   
  $Skewness /= $StdNo;  
     $Skewness /= $StdDev*$StdDev*$StdDev;  
     }  
   
 #--------------------- Compute the Discrimination Factors  
     my ($Up1,$Up2)=split(/\:/,$DisUp{$lpr[$i]});  
     my ($Lw1,$Lw2)=split(/\:/,$DisLow{$lpr[$i]});  
     my $Dis1 = $Up1 - $Lw1;  
     my $Dis2 = $Up2 - $Lw2;  
     my $_D1 = sprintf("%.2f", $Dis1);  
     my $_D2 = sprintf("%.2f", $Dis2);  
   
 #-----------------  Some restition in presenting the float numbers  
     my $Avg = sprintf( "%.2f", $Average );  
     my $Wrng = sprintf( "%.1f", $Wrong );  
     my $SD = sprintf( "%.1f", $StdDev );  
     my $DoD = sprintf( "%.2f", $DoDiff );  
     my $Sk = sprintf( "%.1f", $Skewness );  
     my $join = $PrOrd.':'.$Temp.':'.$StdNo.':'.  
                        $TotalTries.':'.$MxTries.':'.$Avg.':'.  
                        $YES.':'.$Override.':'.$Wrng.':'.$DoD.':'.  
        $SD.':'.$Sk.':'.$_D1.':'.$_D2.':'.$Prob;  
     $CachData{($p_count-1)}=$join;  
   
     $urlres=~/^(\w+)\/(\w+)/;  
     if ($StdNo) {   
  &Apache::lonnet::put('resevaldata',\%storestats,$1,$2);   
     }  
 #-------------------------------- Row of statistical table  
     if ( $DiscFlag == 0 ) {  
  &TableRow($join,$i,($p_count-1));  
     }   
  }  
  &CloseTable();  
     }  
 #--------------------- close Progress Line  
     $r->print('<script>popwin.close()</script>');  
     $r->rflush();   
 }  
   
 sub Cache_Statistics {  Output: \@order
     my @list = ();  
     my $Useful;  @order: An ordered list of students (username:domain)
     my $UnUseful;  
     my %myHeader = reverse( %Header );  =back
     $Pos = $myHeader{$ENV{'form.sort'}};  
     if ($Pos > 0) {$Pos++;}  =cut
     $p_count = 0;  
     foreach my $key( keys %CachData) {   sub SortStudents {
  my @Temp=split(/\:/,$CachData{$key});      my ($cache)=@_;
  if ( $Pos == 0 ) {  
     ($UnUseful,$Useful)=split(/\>/,$Temp[$Pos]);      my @students = split(':::',$cache->{'NamesOfStudents'});
  }      my @sorted1Students=();
  else {      foreach (@students) {
     $Useful = $Temp[$Pos];          if($cache->{'Status'} eq 'Any' || 
  }                $cache->{$_.':Status'} eq $cache->{'Status'}) {
  $list[$p_count]=$Useful.'&'.$CachData{$key};              push(@sorted1Students, $_);
         $p_count++;          }
     }  
   
     @list = sort MySort (@list);  
   
     my $nIdx=0;  
   
     if ( $Pos == 0 ) {  
  foreach (sort keys %mapsort) {  
     my ($Hid,$pr)=split(/\:/,$mapsort{$_});  
     &CreateTable(1,$Hid);  
     my @lpr=split(/\&/,$pr);  
     for (my $i=1; $i<=$#lpr; $i++) {  
  my($Pre, $Post) = split(/\&/,$list[$nIdx]);   
  &TableRow($Post,$i,$nIdx);  
  $nIdx++;  
     }  
     &CloseTable();  
  }  
     }  
     else {  
  &CreateTable(0);  
  for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
     my($Pre, $Post) = split(/\&/,$list[$nIdx]);   
     &TableRow($Post,$nIdx,$nIdx);  
  }   
  &CloseTable();  
     }      }
 }  
   
 sub TableRow {      my $sortBy = '';
     my ($Str,$Idx,$RealIdx)=@_;      if(defined($cache->{'sort'})) {
     my($PrOrd,$Temp,$StdNo,$TotalTries,$MxTries,$Avg,$YES,          $sortBy = ':'.$cache->{'sort'};
        $Override,$Wrng,$DoD,$SD,$Sk,$_D1,$_D2,$Prob)=split(/\:/,$Str);      } else {
     $r->print( "\n".'<tr>'.          $sortBy = ':fullname';
                "\n".'<td>'.($RealIdx+1).'</td>'.      }
                "\n".'<td>'.$Temp.'</td>'.      my @order = sort { lc($cache->{$a.$sortBy}) cmp lc($cache->{$b.$sortBy}) ||
                "\n".'<td bgcolor="#EEFFCC"> '.$StdNo.'</td>'.                         lc($cache->{$a.':fullname'}) cmp lc($cache->{$b.':fullname'}) } 
                "\n".'<td bgcolor="#EEFFCC">'.$TotalTries.'</td>'.                  @sorted1Students;
                "\n".'<td bgcolor="#EEFFCC">'.$MxTries.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF">'.$Avg.'</td>'.      return \@order;
                "\n".'<td bgcolor="#DDFFFF"> '.$YES.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF"> '.$Override.'</td>'.  
                "\n".'<td bgcolor="#FFDDDD"> '.$Wrng.'</td>'.  
                "\n".'<td bgcolor="#FFDDDD">'.$DoD.'</td>'.  
                "\n".'<td bgcolor="#DDFFDD"> '.$SD.'</td>'.  
                "\n".'<td bgcolor="#DDFFDD"> '.$Sk.'</td>'.  
                "\n".'<td bgcolor="#FFDDFF"> '.$_D1.'</td>'.  
                "\n".'<td bgcolor="#FFDDFF"> '.$_D2.'</td>'.  
                "\n".'</tr>' );  
     $GraphDat{$RealIdx}=$DoD.':'.$Wrng;  
 }  }
   
 # ------------------------------------------- Prepare data for Graphical chart  =pod
   
   =item &SpaceColumns()
   
   Determines the width of all the columns in the chart.  It is based on
   the max of the data for that column and its header.
   
   =over 4
   
   Input: $students, $studentInformation, $headings, $ChartDB
   
   $students: An array pointer to a list of students (username:domain)
   
   $studentInformatin: The type of data for the student information.  It is
   used as part of the key in $CacheData.
   
   $headings: The name of the student information columns.
   
   $ChartDB: The name of the cache database which is opened for read/write.
   
   Output: None - All data stored in cache.
   
   =back
   
 sub GetGraphData {  =cut
     my $Tag = shift;  
     my $Col;  sub SpaceColumns {
     my $data='';      my ($students,$studentInformation,$headings,$cache)=@_;
     my $count = 0;  
     my $Max = 0;      # Initialize Lengths
     my $cid=$ENV{'request.course.id'};      for(my $index=0; $index<(scalar @$headings); $index++) {
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".          my @titleLength=split(//,$headings->[$index]);
                   "_$ENV{'user.domain'}_$cid\_graph.db";          $cache->{$studentInformation->[$index].':columnWidth'}=
     foreach (keys %GraphDat) {delete $GraphDat{$_};}              scalar @titleLength;
     if (-e "$GraphDB") {  
  if (tie(%GraphDat,'GDBM_File',"$GraphDB",&GDBM_READER,0640)) {  
     if ( $Tag eq 'DoDiff Graph' ) {  
  $Tag = 'Degree-of-Difficulty';  
  $Col = 0;  
     }  
     else {  
  $Tag = 'Wrong-Percentage';  
  $Col = 1;  
     }  
     foreach (sort NumericSort keys %GraphDat) {   
  my @Temp=split(/\:/,$GraphDat{$_});  
                 my $inf = $Temp[$Col];   
  if ( $Max < $inf ) {$Max = $inf;}  
  $data .= $inf.',';  
  $count++;  
     }  
             untie(%GraphDat);  
     my $Course = $ENV{'course.'.$cid.'.description'};  
     $Course =~ s/\ /"_"/eg;  
     $GData=$Course.'&'.$Tag.'&'.$Max.'&'.$count.'&'.$data;  
   
  }  
  else {  
     $r->print("Unable to tie hash to db file");  
  }  
     }      }
 }  
   
       foreach my $name (@$students) {
           foreach (@$studentInformation) {
               my @dataLength=split(//,$cache->{$name.':'.$_});
               my $length=(scalar @dataLength);
               if($length > $cache->{$_.':columnWidth'}) {
                   $cache->{$_.':columnWidth'}=$length;
               }
           }
       }
   
 sub initial {      return;
 # --------------------------------- Initialize the global varaibles  
   undef @students;  
   undef @cols;  
   undef %maps;  
   undef %section;  
   undef %StuBox;  
   undef @list;  
   undef %CachData;  
   undef %GraphDat;  
   undef %DiscFac;  
   undef $CurMap;  
   undef $CurSec;  
   undef $CurStu;  
   undef $p_count;  
   undef $Pos;  
   undef $GData;  
   $DiscFlag=0;   
   $P_Order=100000;  
   $HWN=$P_Order;  
 }  }
   
   sub PrepareData {
       my ($c, $cacheDB, $studentInformation, $headings,$r)=@_;
   
 sub ClassList {      # Test for access to the cache data
       my $courseID=$ENV{'request.course.id'};
       my $isRecalculate=0;
       if(defined($ENV{'form.Recalculate'})) {
           $isRecalculate=1;
       }
   
     &GetStatus();      my $isCached = &Apache::loncoursedata::TestCacheData($cacheDB,
                                                            $isRecalculate);
       if($isCached < 0) {
           return "Unable to tie hash to db file.";
       }
   
     $cid=$ENV{'request.course.id'};      # Download class list information if not using cached data
     my $chome=$ENV{'course.'.$cid.'.home'};      my %cache;
     my ($cdom,$cnum)=split(/\_/,$cid);      unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_WRCREAT(),0640)) {
 # ----------------------- Get first and last resource, see if there is anything          return "Unable to tie hash to db file.";
     $firstres=$hash{'map_start_/res/'.$ENV{'request.course.uri'}};      }
     $lastres=$hash{'map_finish_/res/'.$ENV{'request.course.uri'}};  
     if (($firstres) && ($lastres)) {  
 # ----------------------------------------------------------------- Render page  
  my $classlst=&Apache::lonnet::reply  
                  ('dump:'.$cdom.':'.$cnum.':classlist',$chome);  
  my $StudNo = 0;  
  my $now=time;  
  unless ($classlst=~/^error\:/) {  
     foreach (sort split(/\&/,$classlst)) {  
  my ($name,$value)=split(/\=/,$_);  
  my ($end,$start)=split(/\:/,&Apache::lonnet::unescape($value));  
  $name=&Apache::lonnet::unescape($name);  
  my ($sname,$sdom)=split(/\:/,$name);  
  my $active=1;  
  my $Status=$ENV{'form.status'};  
  $Status = ($Status) ? $Status : 'Active';  
  if ( ( ($end) && $now > $end ) &&   
                      ( ($Status eq 'Active') ) ) { $active=0; }  
  if ( ($Status eq 'Expired') &&   
                      ($end == 0 || $now < $end) ) { $active=0; }  
  if ($active) {  
     my $thisindex=$#students+1;  
     $name=&Apache::lonnet::unescape($name);  
     $students[$thisindex]=$name;  
     my ($sname,$sdom)=split(/\:/,$name);  
   
     #my %reply=&Apache::lonnet::idrget($sdom,$sname);  
     #my $reply=&Apache::lonnet::reply('get:'.$sdom.':'.$sname.  
     #         ':environment:lastname&generation&firstname&middlename',  
     #         &Apache::lonnet::homeserver($sname,$sdom));  
     my $ssec=&usection($sdom,$sname,$cid,$Status);  
     if ($ssec==-1) {next;}  
     $ssec=($ssec) ? $ssec : '(none)';  
     #$ssec=(int($ssec)) ? int($ssec) : $ssec;  
     #$r->print($sname.'...'.$ssec.'<br>');  
     $section{$ssec}=$ssec;  
     if ($CurSec eq 'All Sections' || $ssec eq $CurSec) {  
  $students[$StudNo]=$name;  
  $StuBox{$sname}=$sdom;  
     }  
     $StudNo++;  
         }  
     }  
  }  
  else {  
     $r->print('<h1>Could not access course data</h1>');  
  }   
         $r->print("Total number of students : ".($#students+1));  
         $r->rflush();  
 # --------------- Find all assessments and put them into some linear-like order  
  &tracetable($firstres,'&'.$lastres.'&');  
   
 #    my $c=0;  #    if(!$isCached) {
 #    foreach (sort keys %mapsort) {          my $processTopResourceMapReturn=
 # $r->print('<br>'.$c.')'.$_.' ... '.$mapsort{$_});              &Apache::loncoursedata::ProcessTopResourceMap(\%cache, $c);
 # $c++;          if($processTopResourceMapReturn ne 'OK') {
 #    }              untie(%cache);
 #foreach(@cols) {              return $processTopResourceMapReturn;
 #    $c++;          }
 #    $r->print('<br>'.$cols[$c]);   #   }
 #}  
 #$r->print('<br> Count = '.$c);  
   
       if($c->aborted()) {
           untie(%cache);
           return 'aborted'; 
     }      }
   
 # ------------------------------------------------------------- End render page       my $classlist=&Apache::loncoursedata::DownloadClasslist($courseID,
     else {                                                  $cache{'ClasslistTimestamp'},
  $r->print('<h3>Undefined course sequence</h3>');                                                  $c);
       foreach (keys(%$classlist)) {
           if(/^(con_lost|error|no_such_host)/i) {
               untie(%cache);
               return "Error getting student data.";
           }
       }
   
       if($c->aborted()) {
           untie(%cache);
           return 'aborted'; 
       }
   
       # Active is a temporary solution, remember to change
       Apache::loncoursedata::ProcessClasslist(\%cache,$classlist,$courseID,$c);
       if($c->aborted()) {
           untie(%cache);
           return 'aborted'; 
       }
   
       &ProcessFormData(\%cache);
       my $students = &SortStudents(\%cache);
       &SpaceColumns($students, $studentInformation, $headings, \%cache);
       $cache{'updateTime:columnWidth'}=24;
   
       my $download = $cache{'download'};
       my $downloadAll = $cache{'DownloadAll'};
       my @allStudents=();
       if($download ne 'false') {
           $cache{'download'} = 'false';
       } elsif($downloadAll ne 'false') {
           $cache{'DownloadAll'} = 'false';
           if($downloadAll eq 'sorted') {
               @allStudents = @$students;
           } else {
               @allStudents = split(':::', $cache{'NamesOfStudents'});
           }
     }      }
     &MapSecOptions();  
 }  
   
       untie(%cache);
   
 sub Menu {      if($download ne 'false') {
     my $InpStr = $ENV{'form.sort'};          my @who = ($download);
     if ( $InpStr eq 'DoDiff Graph' || $InpStr eq '%Wrong Graph' ) {                if(&Apache::loncoursedata::DownloadStudentCourseData(\@who, 'false',
  &GetGraphData($InpStr);                                                               $cacheDB, 'true',
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" />');                                                               'false', $courseID,
     }                                                               $r, $c) ne 'OK') {
     else {              return 'Stop at download individual';
  $r->print('<html><head><title>LON-CAPA Statistics</title></head>');          }
       } elsif($downloadAll ne 'false') {
           if(&Apache::loncoursedata::DownloadStudentCourseData(\@allStudents,
         $r->print('<body bgcolor="#FFFFFF">'.                                                               'false',
                   '<script>window.focus(); window.width=500;window.height=500; </script>'.                                                               $cacheDB, 'true',
                   '<img align=right src=/adm/lonIcons/lonlogos.gif>');                                                               'true', $courseID,
 # ---------------------------------------------------------------- Course title                                                               $r, $c) ne 'OK') {
         $r->print('<h1> Course : "'.              return 'Stop at download all';
                   $ENV{'course.'.$ENV{'request.course.id'}.          }
                   '.description'}.'"</h1><h2>'.localtime().'</h2>');  
 # ------------------------------- This is going to take a while, produce output  
         $r->rflush();  
   
  $r->print("\n".'<form name=stat method=post action="/adm/statistics" >');  
   
  my $content = $ENV{'form.sort'};  
  if ($content eq '' || $content eq 'Return to Menu') {  
     my $Ptr = '<h3>';  
     $Ptr .= '<input type=submit name=sort value="Problem Evaluation"/>';  
     $Ptr .= '<br><br>';  
     $Ptr .= '<input type=submit name=sort value="Student Assessment"/>';  
     $Ptr .= '</h3>';  
     $r->print( $Ptr );  
       }  
  else {  
     &initial();  
     &ClassList();  
     if ( $content eq 'Discrimination' || #'Problem Evaluation' ||  
                  $content eq 'Recalculate Discrimintion Factor' ) {  
  &CreateDiscFac();  
     }  
     elsif ( $content eq 'Student Assessment' ||   
                     $content eq 'Create Student Report' ) {  
  &StudentOptions();  
  &StudentReport($CurStu,$StuBox{"$CurStu"});  
     }  
     else {  
  &PreStatTable();  
     }  
  }  
  $r->print("\n".'</form>'.  
                   "\n".'</body>'.  
                   "\n".'</html>');  
  $r->rflush();  
     }      }
 }  
   
 sub StudentOptions {      return ('OK', $students);
     my $OpSel5='';  
     $CurStu = $ENV{'form.student'};  
     if ( $CurStu eq '' ) {   
         $CurStu = 'All Students';  
         $OpSel5 = 'selected';  
     }  
     my $Ptr ='';  
 # ----------------------------------- Loading the Students Combobox  
     $Ptr .= '<br><b>Select Student</b>'."\n".  
            '<select name="student">'."\n".   
     '<option '.$OpSel5.'>All Students</option>';                               
     foreach my $key ( sort keys %StuBox ) {            
  $Ptr .= '<option';  
  if ($CurStu eq $key) {$Ptr .= ' selected';}       
         $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Create Student Report" />';  
     $r->print( $Ptr );  
     $r->rflush();  
 }  }
   
 sub GetStatus {  sub DisplayClasslist {
     $OpSel1='';      my ($r)=@_;
     $OpSel2='';      #
     $OpSel3='';      my @Fields = ('fullname','username','domain','id','section');
     $OpSel4='';      #
       my $Str='';
     if ( $ENV{'form.order'} eq 'Descending' ) { $OpSel2='selected'; }      $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
     else { $OpSel1 = 'selected'; }      $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
       foreach my $field (@Fields) {
     my %myHeader = reverse( %Header );          $Str .= '<th><a href="/adm/statistics?sort='.$field.'">'.$field.
     $Pos = $myHeader{$ENV{'form.sort'}};              '</a></th>';
     if ($Pos == 0) {      }
  $OpSel1 = 'selected';      $Str .= '</tr>'."\n";
  $ENV{'form.order'}='Ascendig';      #
     }      my $alternate = 0;
       foreach my $student (@Students) {
     $CurMap = $ENV{'form.maps'};          my $sname = $student->{'username'}.':'.$student->{'domain'};
     if ( $CurMap eq '' ) {           if($alternate) {
  $CurMap = 'All Maps';              $Str .= '<tr bgcolor="#ffffe6">';
  $OpSel3 = 'selected';          } else {
     }              $Str .= '<tr bgcolor="#ffffc6">';
     $CurSec = $ENV{'form.section'};          }
     if ( $CurSec eq '' ) {           $alternate = ($alternate + 1) % 2;
  $CurSec = 'All Sections';          #
         $OpSel4 = 'selected';          foreach my $field (@Fields) {
               $Str .= '<td>';
               if ($field eq 'fullname') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('Student Assessment');
                   $Str .= '&StudentAssessmentStudent=';
                   $Str .= &Apache::lonnet::escape($student->{$field}).'">';
                   $Str .= $student->{$field}.'&nbsp';
                   $Str .= '</a>';
               } else {
                   $Str .= $student->{$field};
               }
               $Str .= '</td>';
           }
           $Str .= "</tr>\n";
     }      }
       $Str .= '</table></td></tr></table>'."\n";
       #
       $r->print($Str);
       $r->rflush();
       #
       return;
 }  }
   
   sub BuildClasslist {
       my ($cacheDB,$students,$studentInformation,$headings,$r)=@_;
   
 sub MapSecOptions {      my %cache;
 # ----------------------------------- Loading the Maps Combobox      unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER(),0640)) {
     my $Ptr = '<br>';          return '<html><body>Unable to tie database.</body></html>';
     $Ptr .= '<br><input type="submit" name="sort" value="Return to Menu" />';      }
     $Ptr .= '<br><b> Select &nbsp; Map &nbsp; &nbsp; </b>'."\n".  
            '<select name="maps">'."\n".   #    my $Ptr = '';
     '<option '.$OpSel3.'>All Maps</option>';                               #    $Ptr .= '<table border="0"><tbody>';
     foreach my $key ( sort keys %maps ) {            #    $Ptr .= '<tr><td align="right"><b>Select Sections</b>';
  $Ptr .= '<option';  #    $Ptr .= '</td>'."\n";
         if ($CurMap eq $key) {$Ptr .= ' selected';}       #    $Ptr .= '<td align="left">'."\n";
  $Ptr .= '>'.$key."</option>\n";       #    my @sectionsSelected = split(':',$cache{'sectionsSelected'});
     }  #    my @sections = split(':',$cache{'sectionList'});
     $Ptr .= '</select>';  #    $Ptr .= &Apache::lonhtmlcommon::MultipleSectionSelect(\@sections,
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  #                                                          \@sectionsSelected,
   #                                                          'Statistics');
 # ----------------------------------- Loading the Sections Combobox  #    $Ptr .= '</td></tr></table><br>';
     $Ptr .= '<br><b>Select Section</b>'."\n".  #    $r->print($Ptr);
            '<select name="section">'."\n".   #    $r->rflush();
     '<option '.$OpSel4.'>All Sections</option>';                               #    my %mySections = ();
     foreach my $key ( sort keys %section ) {            #    foreach (@sections) { $mySections{$_} = 'True'; }
  $Ptr .= '<option';  #    $r->print("<br>$cache{'sectionsSelected'}<br>");
         if ($CurSec eq $key) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$key."</option>"."\n";           my $Str='';
       $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
       $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
   
       my $displayString = '<td align="left"><a href="/adm/statistics?';
       $displayString .= 'sort=LINKDATA">DISPLAYDATA&nbsp</a></td>'."\n";
       $Str .= &Apache::lonhtmlcommon::CreateHeadings(\%cache,
                                                      $studentInformation,
                                                      $headings, $displayString);
       $Str .= '</tr>'."\n";
   
       my $alternate=0;
       foreach (@$students) {
   #        if ($mySections{$cache{$_.':'.'section'}} ne 'True') {next;}
           my ($username, $domain) = split(':', $_);
           if($alternate) {
               $Str .= '<tr bgcolor="#ffffe6">';
           } else {
               $Str .= '<tr bgcolor="#ffffc6">';
           }
           $alternate = ($alternate + 1) % 2;
           foreach my $data (@$studentInformation) {
               $Str .= '<td>';
               if($data eq 'fullname') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('Student Assessment');
                   $Str .= '&StudentAssessmentStudent=';
                   $Str .= &Apache::lonnet::escape($cache{$_.':'.$data}).'">';
                   $Str .= $cache{$_.':'.$data}.'&nbsp';
                   $Str .= '</a>';
               } elsif($data eq 'updateTime') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('Class list');
                   $Str .= '&download='.$_.'">';
                   $Str .= $cache{$_.':'.$data}.'&nbsp';
                   $Str .= '&nbsp</a>';
               } else {
                   $Str .= $cache{$_.':'.$data}.'&nbsp';
               }
   
               $Str .= '</td>'."\n";
           }
     }      }
     $Ptr .= '</select>'."\n";  
   
     $r->print( $Ptr );      $Str .= '</tr>'."\n";
       $Str .= '</table></td></tr></table>'."\n";
       $r->print($Str);
     $r->rflush();      $r->rflush();
   
       untie(%cache);
   
       return;
 }  }
   
   sub CreateMainMenu {
       my ($status, $reports)=@_;
   
       my $Str = '';
   
       $Str .= '<table border="0"><tbody><tr>'."\n";
       $Str .= '<td></td><td></td>'."\n";
       $Str .= '<td align="center"><b>Select a Report</b></td>'."\n";
       $Str .= '<td align="center"><b>Student Status</b></td></tr>'."\n";
       $Str .= '<tr>'."\n";
       $Str .= '<td align="center"><input type="submit" name="Refresh" ';
       $Str .= 'value="Refresh" /></td>'."\n";
       $Str .= '<td align="center"><input type="submit" name="DownloadAll" ';
       $Str .= 'value="Update All Student Data" /></td>'."\n";
       $Str .= '<td align="center">';
       $Str .= '<select name="reportSelected" onchange="document.';
       $Str .= 'Statistics.submit()">'."\n";
   
       foreach (sort(keys(%$reports))) {
           next if($_ eq 'reportSelected');
           $Str .= '<option name="'.$_.'"';
           if($reports->{'reportSelected'} eq $reports->{$_}) {
               $Str .= ' selected=""';
           }
           $Str .= '>'.$reports->{$_}.'</option>'."\n";
       }
       $Str .= '</select></td>'."\n";
   
       $Str .= '<td align="center">';
       $Str .= &Apache::lonhtmlcommon::StatusOptions($status, 'Statistics');
       $Str .= '</td>'."\n";
   
       $Str .= '</tr></tbody></table>'."\n";
       $Str .= '<hr>'."\n";
   
       return $Str;
   }
   
   sub BuildStatistics {
       my ($r)=@_;
   
       my $c = $r->connection;
       my @studentInformation=('fullname','section','id','domain','username',
                               'updateTime');
       my @headings=('Full Name', 'Section', 'PID', 'Domain', 'User Name',
                     'Last Updated');
       my $spacing = '   ';
   
       my %reports = ('classlist'          => 'Class list',
                      'problem_statistics' => 'Problem Statistics',
                      'student_assessment' => 'Student Assessment',
      'percentage'         => 'Correct-problems Plot',
   #                   'activitylog'        => 'Activity Log',
                      'reportSelected'     => 'Class list');
   
       my %cache;
       my $courseID=$ENV{'request.course.id'};
       my $cacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".
                     "_$ENV{'user.domain'}_$courseID\_statistics.db";
   
       $r->print(&Apache::lonhtmlcommon::Title('Course Statistics and Charts'));
   
       my ($returnValue, $students) = &PrepareData($c, $cacheDB,
                                                   \@studentInformation,
                                                   \@headings,$r);
       if($returnValue ne 'OK') {
           $r->print($returnValue."\n".'</body></html>');
           return OK;
       }
       if(!$c->aborted()) {
           &Apache::loncoursedata::CheckForResidualDownload($cacheDB,
                                                            'true', 'true',
                                                            $courseID,
                                                            $r, $c);
       }
   
       my $GoToPage;
       if(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER(),0640)) {
           $GoToPage = $cache{'reportSelected'};
           $reports{'reportSelected'} = $cache{'reportSelected'};
           if(defined($cache{'reportKey'}) &&
              !exists($reports{$cache{'reportKey'}}) &&
              $cache{'reportKey'} ne 'false') {
               $reports{$cache{'reportKey'}} = $cache{'reportSelected'};
           }
   
           if(defined($cache{'OptionResponses'})) {
               $reports{'problem_analysis'} = 'Option Response Analysis';
           }
   
           $r->print('<form name="Statistics" ');
           $r->print('method="post" action="/adm/statistics">');
           $r->print(&CreateMainMenu($cache{'Status'}, \%reports));
           $r->rflush();
           untie(%cache);
       } else {
           $r->print('<html><body>Unable to tie database.</body></html>');
           return OK;
       }
   
       if($GoToPage eq 'Activity Log') {
           &Apache::lonproblemstatistics::Activity();
       } elsif($GoToPage eq 'Problem Statistics') {
           &Apache::lonproblemstatistics::BuildProblemStatisticsPage($cacheDB,
                                                                     $students,
                                                                     $courseID,
                                                                     $c,$r);
       } elsif($GoToPage eq 'Option Response Analysis') {
           &Apache::lonproblemanalysis::BuildProblemAnalysisPage($cacheDB, $r);
       } elsif($GoToPage eq 'Student Assessment') {
           &Apache::lonstudentassessment::BuildStudentAssessmentPage($cacheDB,
                                                             $students,
                                                             $courseID,
                                                             'Statistics',
                                                             \@headings,
                                                             $spacing,
                                                             \@studentInformation,
                                                             $r, $c);
       } elsif($GoToPage eq 'Analyze') {
           &Apache::lonproblemanalysis::BuildAnalyzePage($cacheDB, $students,
                                                         $courseID, $r);
       } elsif($GoToPage eq 'DoDiffGraph' || $GoToPage eq 'PercentWrongGraph') {
           my $courseDescription = $ENV{'course.'.$courseID.'.description'};
           $courseDescription =~ s/\ /"_"/eg;
           &Apache::lonproblemstatistics::BuildGraphicChart($GoToPage, $cacheDB,
                                                            $courseDescription,
                                                            $students, $courseID,
                                                            $r, $c);
       } elsif($GoToPage eq 'Class list') {
           &DisplayClasslist($r);
   #        &BuildClasslist($cacheDB, $students, \@studentInformation,
   #                        \@headings, $r);
       } elsif($GoToPage eq 'Correct-problems Plot') {
    &Apache::lonpercentage::BuildPercentageGraph($cacheDB, $students,
        $courseID, $c, $r);
       }
   
       $r->print('</form>'."\n");
       $r->print("\n".'</body>'."\n".'</html>');
       $r->rflush();
   
       return OK;
   }
   
 # ================================================================ Main Handler  # ================================================================ Main Handler
   
 sub handler {  sub handler {
     $r=shift;      my $r=shift;
   
     if (&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {  #    $jr = $r;
 # ------------------------------------------- Set document type for header only  
  if ($r->header_only) {  
     if ($ENV{'browser.mathml'}) {  
  $r->content_type('text/xml');  
     }   
     else {  
  $r->content_type('text/html');  
     }  
     $r->send_http_header;  
     return OK;  
  }      
  my $requrl=$r->uri;  
 # ----------------------------------------------------------------- Tie db file  
   
  undef %hash;      my $loaderror=&Apache::lonnet::overloaderror($r);
       if ($loaderror) { return $loaderror; }
       $loaderror=
          &Apache::lonnet::overloaderror($r,
            $ENV{'course.'.$ENV{'request.course.id'}.'.home'});
       if ($loaderror) { return $loaderror; }
   
  if ($ENV{'request.course.fn'}) {      unless(&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {
     my $fn=$ENV{'request.course.fn'};  
     if (-e "$fn.db") {  
  if (tie(%hash,'GDBM_File',"$fn.db",&GDBM_READER,0640)) {  
 # ------------------------------------------------------------------- Hash tied  
     $r->content_type('text/html');  
     $r->send_http_header;  
     &Menu();  
  }  
  else {  
     $r->content_type('text/html');  
     $r->send_http_header;  
     $r->print('<html><body>Coursemap undefined.</body></html>');  
  }  
 # ------------------------------------------------------------------ Untie hash  
  unless (untie(%hash)) {  
     &Apache::lonnet::logthis("<font color=blue>WARNING: ".  
                             "Could not untie coursemap $fn (browse).</font>");   
  }  
   
 # -------------------------------------------------------------------- All done  
  return OK;  
 # ----------------------------------------------- Errors, hash could no be tied  
     }  
  }   
  else {  
     $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";  
     return HTTP_NOT_ACCEPTABLE;   
  }  
     }  
     else {  
         $ENV{'user.error.msg'}=          $ENV{'user.error.msg'}=
         $r->uri.":vgr:0:0:Cannot view grades for complete course";          $r->uri.":vgr:0:0:Cannot view grades for complete course";
           return HTTP_NOT_ACCEPTABLE;
       }
   
         return HTTP_NOT_ACCEPTABLE;       # Set document type for header only
       if($r->header_only) {
           if ($ENV{'browser.mathml'}) {
               $r->content_type('text/xml');
           } else {
               $r->content_type('text/html');
           }
           &Apache::loncommon::no_cache($r);
           $r->send_http_header;
           return OK;
     }      }
   
       unless($ENV{'request.course.fn'}) {
    my $requrl=$r->uri;
           $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";
           return HTTP_NOT_ACCEPTABLE;
       }
   
       $r->content_type('text/html');
       $r->send_http_header;
   
       &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                               ['sort']);
   
       &PrepareClasslist($r);
   
       &PrepareCourseData($r);
   
       &BuildStatistics($r);
   
       return OK;
 }  }
 1;  1;
 __END__  
   
   =pod
   
   =back
   
   =cut
   
   __END__
   

Removed from v.1.8  
changed lines
  Added in v.1.60


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>