Diff for /loncom/interface/lonstatistics.pm between versions 1.22 and 1.63

version 1.22, 2002/05/29 17:58:45 version 1.63, 2003/03/03 19:17:51
Line 1 Line 1
 # The LearningOnline Network with CAPA  # The LearningOnline Network with CAPA
 # (Publication Handler  
 #  #
 # $Id$  # $Id$
 #  #
Line 26 Line 25
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
 # (Navigate problems for statistical reports  # (Navigate problems for statistical reports
 # YEAR=2001  
 # 5/5,7/9,7/25/1,8/11,9/13,9/26,10/5,10/9,10/22,10/26 Behrouz Minaei  
 # 11/1,11/4,11/16,12/14,12/16,12/18,12/20,12/31 Behrouz Minaei  
 # YEAR=2002  
 # 1/22,2/1,2/6,2/25,3/2,3/6,3/17,3/21,3/22,3/26,4/7,5/6 Behrouz Minaei  
 # 5/12,5/14,5/15,5/19,5/26 Behrouz Minaei  
 #  #
 ###  ###
   
 package Apache::lonstatistics;   =pod
   
 use strict;   =head1 NAME
   
   lonstatistics
   
   =head1 SYNOPSIS
   
   Main handler for statistics and chart.
   
   =head1 PACKAGES USED
   
       use strict;
       use Apache::Constants qw(:common :http);
       use Apache::lonnet();
       use Apache::lonhomework;
       use Apache::loncommon;
       use Apache::loncoursedata;
       use Apache::lonhtmlcommon;
       use Apache::lonproblemanalysis;
       use Apache::lonproblemstatistics;
       use Apache::lonstudentassessment;
       use Apache::lonpercentage;
       use GDBM_File;
   
   =over 4
   
   =cut
   
   package Apache::lonstatistics;
   
   use strict;
 use Apache::Constants qw(:common :http);  use Apache::Constants qw(:common :http);
   use vars qw(
       @FullClasslist 
       @Students
       @Sections 
       @SelectedSections
       %StudentData
       @StudentDataOrder
       @SelectedStudentData
       $top_map 
       @Sequences 
       @SelectedMaps
       @Assessments);
   
 use Apache::lonnet();  use Apache::lonnet();
 use Apache::lonhomework;  use Apache::lonhomework;
 use Apache::loncommon;  use Apache::loncommon;
 use HTML::TokeParser;  use Apache::loncoursedata;
   use Apache::lonhtmlcommon;
   use Apache::lonproblemanalysis();
   use Apache::lonproblemstatistics();
   use Apache::lonstudentassessment();
   use Apache::lonpercentage;
 use GDBM_File;  use GDBM_File;
   
 # -------------------------------------------------------------- Module Globals  
 my %hash;  #######################################################
 my %CachData;  #######################################################
 my %GraphDat;  
 my %OpResp;  =pod
 my %maps;  
 my %mapsort;  =item Package Variables
 my %section;  
 my %StuBox;  =item @FullClasslist The full classlist
 my %DiscFac;  
 my %DisUp;  =item @Students The students we are concerned with for this invocation
 my %DisLow;  
 my $UpCnt;  =item @Sections The sections available in this class
 my $CurMap;  
 my $CurSec;  =item $curr_student The student currently being examined
 my $CurStu;  
 my @cols;  =item $prev_student The student previous in the classlist
 my @list;  
 my @students;  =item $next_student The student next in the classlist
 my $p_count;  
 my $Pos;  =over
 my $r;  
 my $OpSel1;  =cut 
 my $OpSel2;  
 my $OpSel3;  #######################################################
 my $OpSel4;  #######################################################
 my $GData;  #
 my $cid;  # Classlist variables
 my $firstres;  #
 my $lastres;  my $curr_student;
 my $DiscFlag;  my $prev_student;
 my $HWN;  my $next_student;
 my $P_Order;  
 my %foil_to_concept;  #######################################################
 my @Concepts;  #######################################################
 my %ConceptData;  
 my %Header = (0,"Homework Sets Order",1,"#Stdnts",2,"Tries",3,"Mod",  =pod
               4,"Mean",5,"#YES",6,"#yes",7,"%Wrng",8,"DoDiff",  
               9,"S.D.",10,"Skew.",11,"D.F.1st",12,"D.F.2nd");  =item &clear_classlist_variables()
 my %Answer = ();  
   undef the following package variables:
   
 sub unescape {  =over
     my $str=shift;  
     $str =~ s/%([a-fA-F0-9][a-fA-F0-9])/pack("C",hex($1))/eg;  =item @FullClasslist
     return $str;  
 }  =item @Students
   
 sub Activity {  =item @Sections
     my $file="/home/minaeibi/minaei";  
     my $userid='billskat';  =item @SelectedSections
     $r->print("<br>Using $file");  
     $r->rflush();  =item %StudentData
     open(FILEID, "<$file");  
     my $line;  =item @StudentDataOrder
     my @allaccess;  
     while ($line=<FILEID>) {  =item @SelectedStudentData
  my ($time,$machine,$what)=split(':',$line);  
  #$r->print("time=$time machine=$machine:-> $what\n");  =item $curr_student
  #$r->rflush();  
  $what=&unescape($what);  =item $prev_student
  my @accesses=split('&',$what);  
  foreach my $access (@accesses) {  =item $next_student
     my ($date,$resource,$who,$domain,$post,@posts)=split(':',$access);  
     if ($who ne $userid) { next; }  =back
     #if (!$resource) { next; }  
     push (@allaccess,unescape($access));  =cut
     #print $machine;  
  }  #######################################################
     }  #######################################################
     @allaccess=sort(@allaccess);  sub clear_classlist_variables {
     my $Count=0;      undef(@FullClasslist);
     foreach my $access (@allaccess) {      undef(@Students);
  my ($date,$resource,$who,$domain,$post,@posts)=split(':',$access);      undef(@Sections);
  $Count++;      undef(@SelectedSections);
 # $r->print("$Count ".localtime($date)." $who $resource\n");      undef(%StudentData);
  $r->print("<br>$Count) $date: $who --> $resource");      undef(@SelectedStudentData);
  $r->rflush();      undef($curr_student);
  if ($post) {       undef($prev_student);
     $r->print("<br><b>Sent data ".join(':',unescape(@posts)).'</b>');      undef($next_student);
  }  
     }  
 }  }
   
   #######################################################
   #######################################################
   
   =pod
   
 sub InitAnalysis {  =item &PrepareClasslist()
     my ($rid, $student)=@_;  
     my ($uname,$udom)=split(/\:/,$student);  
     $rid=~/(\d+)\.(\d+)/;  
     my $symb=&Apache::lonnet::declutter($hash{'map_id_'.$1}).'___'.$2.'___'.  
      &Apache::lonnet::declutter($hash{'src_'.$rid});  
     my $URI = $hash{'src_'.$rid};  
     my $Answ=&Apache::lonnet::ssi($URI,('grade_target' => 'analyze',  
                                   'grade_username' => $uname,  
                                   'grade_domain' => $udom,  
                                   'grade_courseid' => $cid,  
                                   'grade_symb' => $symb));  
 #    my $Answ=&Apache::lonnet::ssi($URI,('grade_target' => 'analyze'));  
   
     (my $garbage,$Answ)=split(/_HASH_REF__/,$Answ,2);  
     %Answer=();  
     %Answer=&Apache::lonnet::str2hash($Answ);  
   
     my $parts='';  
     foreach my $elm (@{$Answer{"parts"}}) {  
  $parts.="$elm,";  
     }  
     chop($parts);  
     my $conc='';  
     foreach my $elm (@{$Answer{"$parts.concepts"}}) {  
  $conc.="$elm@";  
     }  
     chop($conc);  
   
     @Concepts=split(/\@/,$conc);  
     foreach my $concept (@{$Answer{"$parts.concepts"}}) {  
  foreach my $foil (@{$Answer{"$parts.concept.$concept"}}) {  
     $foil_to_concept{$foil} = $concept;  
     #$ConceptData{$foil} = $Answer{"$parts.foil.value.$foil"};  
  }  
     }  
     return $symb;  
 }  
   
   
 sub Interval {  
     my ($rid,$part,$symb)=@_;  
     my $Int=$ConceptData{"Interval"};  
     my $due = &Apache::lonnet::EXT('resource.$part.duedate',$symb)+1;  
     my $opn = &Apache::lonnet::EXT('resource.$part.opendate',$symb);  
     my $add=int(($due-$opn)/$Int);  
     $ConceptData{"Int.0"}=$opn;  
     for (my $i=1;$i<$Int;$i++) {  
  $ConceptData{"Int.$i"}=$opn+$i*$add;  
     }  
     $ConceptData{"Int.$Int"}=$due;       
     for (my $i=0;$i<$Int;$i++) {  
  for (my $n=0; $n<=$#Concepts; $n++ ) {  
     my $tmp=$Concepts[$n];  
     $ConceptData{"$tmp.$i.true"}=0;  
     $ConceptData{"$tmp.$i.false"}=0;  
  }  
     }  
 }  
   
   
 sub ShowOpGraph {  
     my ($InpStr, $Int_No)=@_;  
     my ($rid,$part)=split(/\:/,substr($InpStr,8));  
     $ConceptData{"Interval"}=$Int_No;  
     #Initialize the option response true answers  
     my $symb=&InitAnalysis($rid,$students[0]);  
     #compute the intervals  
     &Interval($rid,$part,$symb);  
     my $URI = $hash{'src_'.$rid};  
     my $Src = $hash{'title_'.$rid};  
     $Src =~ s/\ /"_"/eg;  
     $r->print('<br><b>'.$URI.'</b>');  
     $r->rflush();  
       
     #Java script Progress window  
     &Create_PrgWin();  
     &Update_PrgWin("Starting to analyze problem");  
     for (my $index=0;$index<=$#students;$index++) {  
  &Update_PrgWin($index);  
  &OpStatus($rid,$students[$index]);  
     }  
     &Close_PrgWin();  
   
     $r->print('<br>');  
     for (my $k=0; $k<$Int_No; $k++ ) {  
  &DrawGraph($k,$Src);  
     }  
     for (my $k=0; $k<$Int_No; $k++ ) {  
  &DrawTable($k);  
     }  
 #$Apache::lonxml::debug=1;  
 #&Apache::lonhomework::showhash(%ConceptData);  
 #$Apache::lonxml::debug=0;  
     my $Answ=&Apache::lonnet::ssi($URI);  
     $r->print("<br><b>Here you can see the Problem:</b><br>$Answ");  
 }  
   
   
 sub DrawTable {  
     my $k=shift;  
     my $Max=0;  
     my @data1;  
     my @data2;  
     my $Correct=0;  
     my $Wrong=0;  
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  my $tmp=$Concepts[$n];  
  $data1[$n]=$ConceptData{"$tmp.$k.true"};  
  $Correct+=$data1[$n];  
  $data2[$n]=$ConceptData{"$tmp.$k.false"};  
  $Wrong+=$data2[$n];  
  my $Sum=$data1[$n]+$data2[$n];  
  if ( $Max<$Sum ) {$Max=$Sum;}  
     }  
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  if ($data1[$n]+$data2[$n]<$Max) {  
     $data2[$n]+=$Max-($data1[$n]+$data2[$n]);  
  }  
     }  
     my $P_No = $#data1+1;  
 #    $r->print('<br><b>From: ['.localtime($ConceptData{'Int.'.($k-1)}).  
 #              '] To: ['.localtime($ConceptData{"Int.$k"}).']</b>');   
     my $Str = "\n".'<table border=2>'.  
               "\n".'<tr>'.  
               "\n".'<th> # </th>'.  
       "\n".'<th> Concept </th>'.  
       "\n".'<th> Correct </th>'.  
       "\n".'<th> Wrong </th>'.  
       "\n".'</tr>';  
   
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  $Str .= "\n"."<tr>".  
         "\n"."<td>".($n+1)."</td>".  
                 "\n"."<td bgcolor=#FFFFDD> ".$Concepts[$n]." </td>".  
                 "\n"."<td bgcolor=#DDFFDD> ".$data1[$n]." </td>".  
                 "\n"."<td bgcolor=#FFDDDD> ".$data2[$n]." </td>".  
                 "\n"."</tr>";  
     }  
     $Str.='<td></td><td><b>From:['.localtime($ConceptData{'Int.'.$k}).  
           '] To: ['.localtime($ConceptData{'Int.'.($k+1)}-1).  
           "]</b></td><td>$Correct</td><td>$Wrong</td>";  
   
     $Str .= "\n".'</table>';  Build up the classlist information.  The classlist information is kept in
   the following package variables:
   
     $r->print($Str);  =over
 #$Apache::lonxml::debug=1;  
 #&Apache::lonhomework::showhash(%ConceptData);  =item @FullClasslist
 #$Apache::lonxml::debug=0;  
 }  =item @Students
   
   =item @Sections
 sub DrawGraph {  
     my ($k,$Src)=@_;  =item @SelectedSections
     my $Max=0;  
     my @data1;  =item %StudentData
     my @data2;  
   =item @SelectedStudentData
     # Adjust Data and find the Max   
     for (my $n=0; $n<=$#Concepts; $n++ ) {  =item $curr_student
  my $tmp=$Concepts[$n];  
  $data1[$n]=$ConceptData{"$tmp.$k.true"};  =item $prev_student
  $data2[$n]=$ConceptData{"$tmp.$k.false"};  
  my $Sum=$data1[$n]+$data2[$n];  =item $next_student
  if ( $Max<$Sum ) {$Max=$Sum;}  
     }  =back
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  if ($data1[$n]+$data2[$n]<$Max) {  $curr_student, $prev_student, and $next_student may not be defined, depending
     $data2[$n]+=$Max-($data1[$n]+$data2[$n]);  upon the calling context.
  }  
     }  =cut
     my $P_No = $#data1+1;  
   #######################################################
     if ( $Max > 1 ) {   #######################################################
  $Max += (10 - $Max % 10);  sub PrepareClasslist {
  $Max = int($Max);      my $r = shift;
     } else { $Max = 1; }      my %Sections;
       &clear_classlist_variables();
           #
     my $Titr=($ConceptData{'Interval'}>1) ? $Src.'_interval_'.($k+1) : $Src;      # Retrieve the classlist
 #    $GData=$Titr.'&Concepts'.'&'.'Answers'.'&'.$Max.'&'.$P_No.'&'.$data1.'&'.$data2;      my $cid  = $ENV{'request.course.id'};
     $GData="$Titr&Concepts&Answers&$Max&$P_No&".      my $cdom = $ENV{'course.'.$cid.'.domain'};
            (join(',',@data1)).'&'.(join(',',@data2));      my $cnum = $ENV{'course.'.$cid.'.num'};
       my ($classlist,$field_names) = &Apache::loncoursedata::get_classlist($cid,
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" border=1/>');                                                                    $cdom,$cnum);
 }      if (exists($ENV{'form.Section'})) {
           if (ref($ENV{'form.Section'})) {
               @SelectedSections = @{$ENV{'form.Section'}};
 sub AnalyzeProblem {          } elsif ($ENV{'form.Section'} !~ /^\s*$/) {
     # selecting the number of intervals              @SelectedSections = ($ENV{'form.Section'});
     my $OpSel='';          }
     my $CurInt = $ENV{'form.interval'};      }
     if ($CurInt eq '') {$CurMap = '1';}      @SelectedSections = ('all') if (! @SelectedSections);
     my $Ptr = '<br><b>Select number of intervals</b>'."\n".      foreach (@SelectedSections) {
              '<select name="interval">'."\n";                                       if ($_ eq 'all') {
     for (my $n=1;$n<=7;$n++) {                        @SelectedSections = ('all');
  $Ptr .= '<option';          }
         if ($CurInt eq $n) {$Ptr .= ' selected';}           }
  $Ptr .= '>'.$n."</option>"."\n";           #
     }      # Set up %StudentData
     $Ptr .= '</select>'."\n";      @StudentDataOrder = qw/fullname username domain id section status/;
     $r->print( $Ptr );      foreach my $field (@StudentDataOrder) {
           $StudentData{$field}->{'title'} = $field;
     #the table of option response problems          $StudentData{$field}->{'base_width'} = length($field);
     $r->print('<br><b> Option Response Problems in this course:</b><br><br>');          $StudentData{$field}->{'width'} = 
     my $Str = "\n".'<table border=2>'.                                 $StudentData{$field}->{'base_width'};
               "\n".'<tr>'.      }
               "\n".'<th> # </th>'.  
       "\n".'<th> Problem Title </th>'.      #
       "\n".'<th> Resource </th>'.      # Process the classlist
       "\n".'<th> Address </th>'.      while (my ($student,$student_data) = each (%$classlist)) {
       "\n".'</tr>';          my $studenthash = ();
           for (my $i=0; $i< scalar(@$field_names);$i++) {
      my $P_No=1;              my $field = $field_names->[$i];
      foreach (sort keys %OpResp) {              # Store the data
  my ($rid,$part)=split(/\:/,$OpResp{$_});              $studenthash->{$field}=$student_data->[$i];
  my $Temp = '<a href="'.$hash{'src_'.$rid}.              # Keep track of the width of the fields
                     '" target="_blank">'.$hash{'title_'.$rid}.'</a>';              next if (! exists($StudentData{$field}));
  $Str .= "\n"."<tr>".              my $length = length($student_data->[$i]);
          "\n"."<td> $P_No </td>".              if ($StudentData{$field}->{'width'} < $length) {
                  "\n"."<td bgcolor=#DDFFDD> ".$Temp." </td>".                  $StudentData{$field}->{'width'} = $length; 
                  "\n"."<td bgcolor=#EEFFCC> ".$hash{'src_'.$rid}." </td>".              }
          "\n"."<td> ".'<input type="submit" name="sort" value="'.'Analyze_'.$rid.'" />'.'</td>'.          }
                  "\n"."</tr>";          push (@FullClasslist,$studenthash);
  $P_No++;          #
      }          # Build up a list of sections
      $Str .= "\n".'</table>';          my $section = $studenthash->{'section'};
      $Str .= "\n".'</form>';          if (! defined($section) || $section =~/^\s*$/ || $section == -1) {
      $r->print($Str);              $studenthash->{'section'} = 'none';
      $r->rflush();              $section = $studenthash->{'section'};
 }          }
           $Sections{$section}++;
           #
 sub Decide {          # Only put in the list those students we are interested in
     #deciding the true or false answer belongs to each interval          foreach my $sect (@SelectedSections) {
     my ($type,$foil,$time)=@_;               if (($sect eq 'all') || ($section eq $sect)) {
     my $k=0;                  push (@Students,$studenthash);
     while ($time>$ConceptData{'Int.'.($k+1)} &&                   last;
            $k<$ConceptData{'Interval'}) {$k++;}  
     $ConceptData{"$foil_to_concept{$foil}.$k.$type"}++;  
 }  
   
   
 #restore the student submissions and finding the result  
 sub OpStatus {  
     my ($rid,$student)=@_;  
     my ($uname,$udom)=split(/\:/,$student);  
     my $code='U';  
     $rid=~/(\d+)\.(\d+)/;  
     my $symb=&Apache::lonnet::declutter($hash{'map_id_'.$1}).'___'.$2.'___'.  
      &Apache::lonnet::declutter($hash{'src_'.$rid});  
     my %reshash=&Apache::lonnet::restore($symb,$cid,$udom,$uname);  
     my @True = ();  
     my @False = ();  
     my $flag=0;  
     if ($reshash{'version'}) {  
         my $tries=0;  
  &Apache::lonhomework::showhash(%Answer);  
  for (my $version=1;$version<=$reshash{'version'};$version++) {  
     my $time=$reshash{"$version:timestamp"};  
      
     foreach my $key (sort(split(/\:/,$reshash{$version.':keys'}))) {  
  if (($key=~/\.(\w+)\.(\w+)\.submission$/)) {  
     my $Id1 = $1; my $Id2 = $2;  
     #check if this is a repeat submission, if so skip it  
              if ($reshash{"$version:resource.$Id1.previous"}) { next; }  
     #if no solved this wasn't a real submission, ignore it  
     if (!defined($reshash{"$version:resource.$Id1.solved"})) {  
  &Apache::lonxml::debug("skipping ");  
  next;  
     }  
     my $Resp = $reshash{"$version:$key"};  
     my %submission=&Apache::lonnet::str2hash($Resp);  
     foreach (keys %submission) {  
  my $Ansr = $Answer{"$Id1.$Id2.foil.value.$_"};  
  if ($submission{$_}) {  
     if ($submission{$_} eq $Ansr) {  
  &Decide("true",$_,$time );  
     }  
     else {&Decide("false",$_,$time );}  
  }  
     }  
         }    
     }  
         }  
     }  
 }  
   
   
 #------- Processing upperlist and lowerlist according to each problem  
 sub ProcessDisc {  
     my @List = @_;  
     @List = sort (@List);  
     my $Count = $#List+1;  
     my $Prb;  
     my @Dis;  
     my $Slvd=0;  
     my $tmp;  
     my $Sum1=0;  
     my $Sum2=0;  
     my $nIdx=0;  
     my $nStud=0;  
     my %Proc;  
     undef %Proc;  
     while ($nIdx<$Count) {  
  ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
  @Dis=split(/\+/,$tmp);  
  my $Temp = $Prb;  
  do {  
     $nIdx++;  
     $nStud++;  
     $Sum1 += $Dis[0];  
     $Sum2 += $Dis[1];  
     ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
     @Dis=split(/\+/,$tmp);  
  } while ( $Prb eq $Temp && $nIdx < $Count );  
 # $Proc{$Temp}=($Sum1/$nStud).':'.$nStud;  
  $Proc{$Temp}=($Sum1/$nStud).':'.($Sum2/$nStud);  
 #       $r->print("$nIdx) $Temp --> ($nStud) $Proc{$Temp} <br>");  
  $Sum1=0;  
  $Sum2=0;  
  $nStud=0;  
     }  
     return %Proc;  
 }  
   
   
 #------- Creating Discimination factor     
 sub Discriminant {  
     my $Count=0;  
     foreach (keys(%DiscFac)){   
  $Count++;  
     }  
     $UpCnt = int(0.27*$Count);  
     my $low=0;  
     my $up=$Count-$UpCnt;  
     my @UpList=();  
     my @LowList=();  
     $Count=0;  
     foreach my $key (sort(keys(%DiscFac))){   
  $Count++;      
         #$r->print("<br>$Count) $key = $DiscFac{$key}");  
  if ($low < $UpCnt || $Count > $up) {  
     $low++;  
     my $str=$DiscFac{$key};  
     foreach(split(/\:/,$str)){  
  if ($_) {  
     if ($low<$UpCnt){push(@LowList,$_);}  
     else {push(@UpList,$_);}  
  }  
     }  
  }  
     }  
     %DisUp=&ProcessDisc(@UpList);  
     %DisLow=&ProcessDisc(@LowList);  
 }  
   
      
 sub NumericSort {            
     $a <=> $b;  
 }  
   
 # ------ Create different Student Report   
 sub StudentReport {  
     my ($sname,$sdom)=@_;  
     if ( $sname eq 'All Students' ) {  
  $r->print( '<h3><font color=blue>WARNING:   
                     Please select a student</font></h3>' );  
  return;  
     }  
     my %result = &Apache::lonnet::dump($cid,$sdom,$sname);  
     my $ResId;  
     my $PrOrd;  
     my $Code;  
     my $Tries;  
     my $TotalTries = 0;  
     my $ParCr = 0;  
     my $Wrongs;  
     my %TempHash;  
     my $Version;  
     my $LatestVersion;  
     my $PtrTry='';  
     my $PtrCod='';  
     my $SetNo=0;  
     my $Str = "\n".'<table border=2>'.  
               "\n".'<tr>'.  
               "\n".'<th> # </th>'.  
       "\n".'<th> Set Title </th>'.  
       "\n".'<th> Results </th>'.  
       "\n".'<th> Tries </th>'.  
       "\n".'</tr>';  
     my ($temp)=keys(%result);  
     unless ($temp=~/^error\:/) {  
         foreach my $CurCol (@cols) {  
     if (!$CurCol){  
  my $Set=&Apache::lonnet::declutter($hash{'map_id_'.$1});  
  if ( $Set ) {  
     $SetNo++;  
     $Str .= "\n"."<tr>".  
     "\n"."<td> $SetNo </td>".  
                             "\n"."<td> $Set </td>".  
                             "\n"."<td> $PtrCod </td>".  
                             "\n"."<td> $PtrTry</td>".  
                             "\n"."</tr>";  
  }  
  $PtrTry='';  
  $PtrCod='';  
  next;   
     }  
     ($PrOrd,$ResId)=split(/\:/,$CurCol);  
             $ResId=~/(\d+)\.(\d+)/;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     undef %TempHash;  
     foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))){  
  if ($_=~/^stores\_(\w+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = '-';    
  $TempHash{"$Part.PrOrd"} = $PrOrd+$PartNo;    
  $PartNo++;  
     }  
  }  
             }              }
           }
       }
       #
       # Put the consolidated section data in the right place
       @Sections = sort {$a cmp $b} keys(%Sections);
       unshift(@Sections,'all'); # Put 'all' at the front of the list
       #
       # Sort the Students
       my $sortby = 'fullname';
       $sortby = $ENV{'form.sort'} if (exists($ENV{'form.sort'}));
       my @TmpStudents = sort { $a->{$sortby} cmp $b->{$sortby} ||
                                $a->{'fullname'} cmp $b->{'fullname'} } @Students;
       @Students = @TmpStudents;
       # 
       # Now deal with that current student thing....
       if (exists($ENV{'form.StudentAssessmentStudent'})) {
           my ($current_uname,$current_dom) = 
               split(':',$ENV{'form.StudentAssessmentStudent'});
           my $i;
           for ($i = 0; $i<=$#Students; $i++) {
               next if (($Students[$i]->{'username'} ne $current_uname) || 
                        ($Students[$i]->{'domain'}   ne $current_dom));
               $curr_student = $Students[$i];
               last; # If we get here, we have our student.
           }
           if ($i == 0) {
               $prev_student = 'none';
           } else {
               $prev_student = $Students[$i-1];
           }
           if ($i == $#Students) {
               $next_student = 'none';
           } else {
               $next_student = $Students[$i+1];
           }
       }
       #
       if (exists($ENV{'form.StudentData'})) {
           if (ref($ENV{'form.StudentData'}) eq 'ARRAY') {
               @SelectedStudentData = @{$ENV{'form.StudentData'}};
           } else {
               @SelectedStudentData = ($ENV{'form.StudentData'});
           }
       } else {
           @SelectedStudentData = ('fullname');
       }
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               @SelectedStudentData = ('all');
               last;
           }
       }
       #
       return;
   }
   
   #######################################################
   #######################################################
   
             my $Prob = $Map.'___'.$2.'___'.  =pod
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
             $Code='U';  =item &current_student()
             $Tries = 0;  
             $Wrongs = 0;  Returns a pointer to a hash containing data about the currently
      $LatestVersion = $result{"version:$Prob"};  selected student.
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  =cut
     my $vkeys = $result{"$Version:keys:$Prob"};  
     my @keys = split(/\:/,$vkeys);  #######################################################
     #######################################################
     foreach my $Key (@keys) {    sub current_student { 
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {      if (defined($curr_student)) {
     my $Part = $1;          return $curr_student;
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};      } else {
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;           return 'All Students';
     $TotalTries += $Tries;      }
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};  }
     if ( $Val eq 'correct_by_student' )  
                                 { $Wrongs = $Tries - 1; $Code = 'Y'; }   #######################################################
     elsif ( $Val eq 'correct_by_override' )  #######################################################
                                 { $Wrongs = $Tries - 1; $Code = 'y'; }                          
     elsif ( $Val eq 'incorrect_attempted' ||   =pod
                                 $Val eq 'incorrect_by_override' )  
                 { $Wrongs = $Tries; $Code = 'N'; }  =item &previous_student()
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  Returns a pointer to a hash containing data about the student prior
  }  in the list of students.  Or something.  
          }  
   =cut
   
   #######################################################
   #######################################################
   sub previous_student { 
       if (defined($prev_student)) {
           return $prev_student;
       } else {
           return 'No Student Selected';
       }
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &next_student()
   
   Returns a pointer to a hash containing data about the next student
   to be viewed.
   
   =cut
   
   #######################################################
   #######################################################
   sub next_student { 
       if (defined($next_student)) {
           return $next_student;
       } else {
           return 'No Student Selected';
       }
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &clear_sequence_variables()
   
   =cut
   
   #######################################################
   #######################################################
   sub clear_sequence_variables {
       undef($top_map);
       undef(@Sequences);
       undef(@Assessments);
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &SetSelectedMaps($elementname)
   
   Sets the @SelectedMaps array from $ENV{'form.'.$elementname};
   
   =cut
   
   #######################################################
   #######################################################
   sub SetSelectedMaps {
       my $elementname = shift;
       if (exists($ENV{'form.'.$elementname})) {
           if (ref($ENV{'form.'.$elementname})) {
               @SelectedMaps = @{$ENV{'form.'.$elementname}};
           } else {
               @SelectedMaps = ($ENV{'form.'.$elementname});
           }
       } else {
           @SelectedMaps = ('all');
       }
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &PrepareCourseData($r)
   
   =cut
   
   #######################################################
   #######################################################
   sub PrepareCourseData {
       my ($r) = @_;
       &clear_sequence_variables();
       my ($top,$sequences,$assessments) = 
           &Apache::loncoursedata::get_sequence_assessment_data();
       if (! defined($top) || ! ref($top)) {
           # There has been an error, better report it
           &Apache::lonnet::logthis('top is undefined');
           return;
       }
       $top_map = $top if (ref($top));
       @Sequences = @{$sequences} if (ref($sequences) eq 'ARRAY');
       @Assessments = @{$assessments} if (ref($assessments) eq 'ARRAY');
       #
       # Compute column widths
       foreach my $seq (@Sequences) {
           my $name_length = length($seq->{'title'});
           my $num_parts = $seq->{'num_assess_parts'};
           #
           # The number of columns needed for the summation text: 
           #    " 1/5" = 1+3 columns, " 10/99" = 1+5 columns
           my $sum_length = 1+1+2*(length($num_parts));
           my $num_col = $num_parts+$sum_length;
           if ($num_col < $name_length) {
               $num_col = $name_length;
           }
           $seq->{'base_width'} = $name_length;
           $seq->{'width'} = $num_col;
       }
       return;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &log_sequence($sequence,$recursive,$padding)
   
   Write data about the sequence to a logfile.  If $recursive is not
   undef the data is written recursively.  $padding is used for recursive
   calls.
   
   =cut
   
   #######################################################
   #######################################################
   sub log_sequence {
       my ($seq,$recursive,$padding) = @_;
       $padding = '' if (! defined($padding));
       if (ref($seq) ne 'HASH') {
           &Apache::lonnet::logthis('log_sequence passed bad sequnce');
           return;
       }
       &Apache::lonnet::logthis($padding.'sequence '.$seq->{'title'});
       while (my($key,$value) = each(%$seq)) {
           next if ($key eq 'contents');
           if (ref($value) eq 'ARRAY') {
               for (my $i=0;$i< scalar(@$value);$i++) {
                   &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
                                            $value->[$i]);
               }
           } else {
               &Apache::lonnet::logthis($padding.$key.'='.$value);
           }
       }
       if (defined($recursive)) {
           &Apache::lonnet::logthis($padding.'-'x20);
           &Apache::lonnet::logthis($padding.'contains:');
           foreach my $item (@{$seq->{'contents'}}) {
               if ($item->{'type'} eq 'container') {
                   &log_sequence($item,$recursive,$padding.'    ');
               } else {
                   &Apache::lonnet::logthis($padding.'title = '.$item->{'title'});
                   while (my($key,$value) = each(%$item)) {
                       next if ($key eq 'title');
                       if (ref($value) eq 'ARRAY') {
                           for (my $i=0;$i< scalar(@$value);$i++) {
                               &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
                                                        $value->[$i]);
                           }
                       } else {
                           &Apache::lonnet::logthis($padding.$key.'='.$value);
                       }
                 }                  }
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "$TempHash{$part.'.Tries'}";  
                     $PtrCod .= "$TempHash{$part.'.Code'}";      
  }  
             }              }
     else {   
  for(my $n=0; $n<$PartNo; $n++) {   
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "0";  
                     $PtrCod .= "-";   
  }  
     }  
         }          }
           &Apache::lonnet::logthis($padding.'end contents of '.$seq->{'title'});
           &Apache::lonnet::logthis($padding.'-'x20);
     }      }
     $Str .= "\n".'</table>';      return;
     $r->print($Str);  
     $r->rflush();  
 }  }
   
 sub CreateTable {  ##############################################
     my ($Hd, $Hid)=@_;  ##############################################
     if ($ENV{'form.showcsv'}) {   
  if ( $Hd == 1 ) {  =pod 
     $r->print('<br>"'.$hash{'title_'.$Hid}.'","'.$hash{'src_'.$Hid}.'"');  
  }  =item &StudentDataSelect($elementname,$status,$numvisible,$selected)
  return;  
     }  Returns html for a selection box allowing the user to choose one (or more) 
     my $ColNo=0;  of the fields of student data available (fullname, username, id, section, etc)
     foreach (keys(%Header)){   
  $ColNo++;  =over 4
     }   
     if ( $Hd == 1 ) {  =item $elementname The name of the HTML form element
  $r->print('<br><a href="'.$hash{'src_'.$Hid}.  
                   '" target="_blank">'.$hash{'title_'.$Hid}.'</a>');  =item $status 'multiple' or 'single' selection box
     }  
     my $Result = "\n".'<table border=2>';  =item $numvisible The number of options to be visible
     $Result .= '<tr><th>P#</th>'."\n";  
     for ( my $nIdx=0; $nIdx < $ColNo; $nIdx++ ) {   =back
  $Result .= '<th>'.'<input type="submit" name="sort" value="'.  
                    $Header{$nIdx}.'" />'.'</th>'."\n";  =cut
   
   ##############################################
   ##############################################
   sub StudentDataSelect {
       my ($elementname,$status,$numvisible)=@_;
       if ($numvisible < 1) {
           return;
     }      }
     $Result .= "\n".'</tr>'."\n";          #
     $r->print( $Result );      # Build the form element
     $r->rflush();      my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Deal with 'all'
       $Str .= '    <option value="all" ';
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               $Str .= 'selected ';
               last;
           }
       }
       $Str .= ">all</option>\n";
       #
       # Loop through the student data fields
       foreach my $item (@StudentDataOrder) {
           $Str .= '    <option value="'.$item.'" ';
           foreach (@SelectedStudentData) {
               if ($item eq $_ ) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$item."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
 }  }
   
 sub CloseTable {  ##############################################
     if ($ENV{'form.showcsv'}) {  ##############################################
  return;  
     }      =pod 
     $r->print("\n".'</table>'."\n");  
     $r->rflush();  =item &MapSelect($elementname,$status,$numvisible,$restriction) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sequences in the course.  The values of the sequences are the symbs.
   If the top sequence is selected, the value 'top' will result.
   
   =over 4
   
   =item $elementname The name of the HTML form element
   
   =item $status 'multiple' or 'single' selection box
   
   =item $numvisible The number of options to be visible
   
   =item $restriction Code reference to subroutine which returns true or 
   false.  The code must expect a reference to a sequence data structure.
   
   =back
   
   =cut
   
   ##############################################
   ##############################################
   sub MapSelect {
       my ($elementname,$status,$numvisible,$restriction)=@_;
       if ($numvisible < 1) {
           return;
       }
       #
       # Set up array of selected items
       &SetSelectedMaps($elementname);
       #
       # Set up the restriction call
       if (! defined($restriction)) {
           $restriction = sub { 1; };
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Deal with 'all'
       foreach (@SelectedMaps) {
           if ($_ eq 'all') {
               @SelectedMaps = ('all');
               last;
           }
       }
       #
       # Put in option for 'all'
       $Str .= '    <option value="all" ';
       foreach (@SelectedMaps) {
           if ($_ eq 'all') {
               $Str .= 'selected ';
               last;
           }
       }
       $Str .= ">all</option>\n";
       #
       # Loop through the sequences
       foreach my $seq (@Sequences) {
           next if (! $restriction->($seq));
           $Str .= '    <option value="'.$seq->{'symb'}.'" ';
           foreach (@SelectedMaps) {
               if ($seq->{'symb'} eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$seq->{'title'}."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
 }  }
    
 # ------------------------------------------- Prepare Statistics Table  ##############################################
 sub PreStatTable {  ##############################################
   
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  =pod 
                   "_$ENV{'user.domain'}_$cid\_statistics.db";  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  =item &SectionSelect($elementname,$status,$numvisible) 
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     my $OpSel11='';  Returns html for a selection box allowing the user to choose one (or more) 
     my $OpSel12='';  of the sections in the course.  
     my $OpSel13='';  
     my $Status = $ENV{'form.status'};  =over 4
     if ( $Status eq 'Any' ) { $OpSel13='selected'; }  
     elsif ($Status eq 'Expired' ) { $OpSel12 = 'selected'; }  =item $elementname The name of the HTML form element
     else { $OpSel11 = 'selected'; }  
   =item $status 'multiple' or 'single' selection box
     my $Ptr = '';  
     $Ptr .= '<br><b> Student Status: &nbsp; </b>'."\n".  =item $numvisible The number of options to be visible
             '<select name="status">'.   
             '<option '.$OpSel11.' >Active</option>'."\n".  =item $selected Array ref to the names of the already selected sections.
             '<option '.$OpSel12.' >Expired</option>'."\n".  If undef, $ENV{'form.'.$elementname} is used.  
     '<option '.$OpSel13.' >Any</option> </select> '."\n";  If $ENV{'form.'.$elementname} is also empty, none will be selected.
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type=submit name=sort value="Recalculate Statistics"/>'."\n";  =item $restriction Code reference to subroutine which returns true or 
   false.  The code must expect a reference to a sequence data structure.
     $Ptr .= '<br><b> Sorting Type: &nbsp; </b>'."\n".  
             '<select name="order"> <option '.$OpSel1.' >Ascending</option>'."\n".  =back
     '<option '.$OpSel2.'>Descending</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  =cut
     $Ptr .= '<input type="submit" name="sort" value="DoDiff Graph" />'."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  ##############################################
     $Ptr .= '<input type="submit" name="sort" value="%Wrong Graph" />'."\n";  ##############################################
   sub SectionSelect {
     $Ptr .= '<pre>'.      my ($elementname,$status,$numvisible)=@_;
     '<b>  #Stdnts</b>: Total Number of Students opened the problem.<br>'.       if ($numvisible < 1) {
     '<b>  Tries  </b>: Total Number of Tries for solving the problem.<br>'.           return;
     '<b>  Mod    </b>: Maximunm Number of Tries for solving the problem.<br>'.       }
     '<b>  Mean   </b>: Average Number of the tries. [ Tries / #Stdnts ]<br>'.      #
     '<b>  #YES   </b>: Number of students solved the problem correctly.<br>'.       # Build the form element
     '<b>  #yes   </b>: Number of students solved the problem by override.<br>'.      my $Str = "\n";
     '<b>  %Wrng  </b>: Percentage of students tried to solve the problem but'.      $Str .= '<select name="'.$elementname.'" ';
     ' still incorrect. [ 100*((#Stdnts-(#YES+#yes))/#Stdnts) ]<br>'.      if ($status ne 'single') {
 #    '  DoDiff : Degree of Difficulty of the problem. [ Tries/(#YES+#yes+0.1) ]<br>'. Kashy formula          $Str .= 'multiple="true" ';
     '<b>  DoDiff </b>: Degree of Difficulty of the problem. [ 1 - ((#YES+#yes) / Tries) ]<br>'. #Gerd formula      }
     '<b>  S.D.  </b> : Standard Deviation of the tries.'.      $Str .= 'size="'.$numvisible.'" >'."\n";
     '[ sqrt(sum((Xi - Mean)^2)) / (#Stdnts-1)'.      #
     ' where Xi denotes every student\'s tries ]<br>'.      # Loop through the sequences
     '<b>  Skew.  </b>: Skewness of the students tries.'.      foreach my $s (@Sections) {
  ' [ (sqrt( sum((Xi - Mean)^3) / #Stdnts)) / (S.D.^3) ]<br>'.          $Str .= '    <option value="'.$s.'" ';
     '<b>  Dis.F. </b>: Discrimination Factor: A Standard for '.          foreach (@SelectedSections) {
  'evaluating the problem according to a Criterion<br>'.              if ($s eq $_) {
  '<b>           [Applied Criterion in %27 Upper Students - '.                  $Str .= 'selected ';
  'Applied the same Criterion in %27 Lower Students]</b><br>'.                  last;
     '<b>           1st Criterion</b> for Sorting the Students: '.  
  '<b>Sum of Partial Credit Awarded / Total Number of Tries</b><br>'.  
     '<b>           2nd Criterion</b> for Sorting the Students: '.  
  '<b>Total number of Correct Answers / Total Number of Tries</b>'.  
             '</pre>';  
   
     $r->print($Ptr);  
       
     $r->print('Output CSV format: <input type=checkbox name=showcsv onClick="submit()"');  
     if ($ENV{'form.showcsv'}) { $r->print(' checked'); }  
     $r->print('>');  
   
     $r->rflush();  
   
     if ((-e "$CacheDB")&&($ENV{'form.sort'} ne 'Recalculate Statistics')) {  
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     &Cache_Statistics();  
         }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
     else {  
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     foreach (keys %DiscFac) {delete $CachData{$_};}  
     foreach (keys %CachData) {delete $CachData{$_};}  
     $DiscFlag=0;  
     &Build_Statistics();  
  }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
   
 #    $r->print('Total instances of the problems : '.($p_count*($#students+1)));  
     untie(%CachData);  
     untie(%GraphDat);  
 }  
   
   
 # ------------------------------------- Find the section of student in a course  
   
 sub usection {  
     my ($udom,$unam,$courseid,$ActiveFlag)=@_;  
     $courseid=~s/\_/\//g;  
     $courseid=~s/^(\w)/\/$1/;  
   
     my %result=&Apache::lonnet::dump('roles',$udom,$unam);  
     foreach my $key (keys (%result)) {  
  my $value=$result{$key};  
         if ($key=~/^$courseid(?:\/)*(\w+)*\_st$/) {  
             my $section=$1;  
             if ($key eq $courseid.'_st') { $section=''; }  
     my ($dummy,$end,$start)=split(/\_/,$value);  
     if ( $ActiveFlag ne 'Any' ) {  
  my $now=time;  
  my $notactive=0;  
  if ($start) {  
     if ($now<$start) { $notactive=1; }  
  }  
  if ($end) {  
     if ($now>$end) { $notactive=1; }  
  }  
  if ((($ActiveFlag eq 'Expired') && $notactive == 1) ||   
                     (($ActiveFlag eq 'Active') && $notactive == 0 ) ) {  
     return $section;  
  }  
  else { return '-1'; }   
     }  
     return $section;  
         }  
     }  
     return '-1';  
 }  
   
   
 # ------ Dump the Student's DB file and handling the data for statistics table   
 sub ExtractStudentData {  
     my $student=shift;  
     my ($sname,$sdom) = split( /\:/, $student );  
     my %result = &Apache::lonnet::dump($cid,$sdom,$sname);  
     my $ResId;  
     my $PrOrd;  
     my $Dis = '';  
     my $Code;  
     my $Tries;  
     my $ParCr;  
     my $TotalTries = 0;  
     my $TotalOpend = 0;  
     my $ProbSolved = 0;  
     my $ProbTot = 0;  
     my $TimeTot = 0;  
     my $TotParCr = 0;  
     my $Wrongs;  
     my %TempHash;  
     my $Version;   
     my $LatestVersion;  
     my $SecLimit;  
     my $MapLimit;  
     my ($temp)=keys(%result);  
     unless ($temp=~/^error\:/) {  
         foreach my $CurCol(@cols) {  
     ($PrOrd,$ResId)=split(/\:/,$CurCol);  
     if ( !$CurCol ) { next; }  
             $ResId=~/(\d+)\.(\d+)/;  
     my $MapId=$1;  
     my $PrbId=$2;  
             my $MapOrg = $hash{'map_id_'.$MapId};  
             my $Map = &Apache::lonnet::declutter($MapOrg);  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     $Dis .= ':';  
     undef %TempHash;  
   
     foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {   
  if ($_=~/^stores\_(\w+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = 'U';    
  $TempHash{"$Part.PrOrd"} = $PrOrd+$PartNo;  
  $PartNo++;  
     }  
                     #my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
  }  
             }              }
             &Apache::lonnet::declutter( $hash{'src_'.$ResId} );          }
     my $URI = $hash{'src_'.$ResId};          $Str .= '>'.$s."</option>\n";
             my $Prob = $Map.'___'.$PrbId.'___'.      }
                        &Apache::lonnet::declutter($URI);      $Str .= "</select>\n";
             $Code='U';      return $Str;
             $Tries = 0;  }
     $ParCr = 0;  
             $Wrongs = 0;  ##############################################
      $LatestVersion = $result{"version:$Prob"};          ##############################################
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  sub CheckFormElement {
     my $vkeys = $result{"$Version:keys:$Prob"};      my ($cache, $ENVName, $cacheName, $default)=@_;
     my @keys = split(/\:/,$vkeys);  
     foreach my $Key (@keys) {        if(defined($ENV{'form.'.$ENVName})) {
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {          $cache->{$cacheName} = $ENV{'form.'.$ENVName};
     my $Part = $1;      } elsif(!defined($cache->{$cacheName})) {
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};          $cache->{$cacheName} = $default;
     $ParCr = $result{"$Version:$Prob:resource.$Part.awarded"};      } else {
     my $Time = $result{"$Version:$Prob:timestamp"};          $ENV{'form.'.$ENVName} = $cache->{$cacheName};
     $TempHash{"$Part.Time"} = ($Time) ? $Time : 0;      }
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;      return;
     $TempHash{"$Part.ParCr"} = ($ParCr) ? $ParCr : 0;          }
     $TotalTries += $TempHash{"$Part.Tries"};  
     $TotParCr += $TempHash{"$Part.ParCr"};  sub ProcessFormData{
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};      my ($cache)=@_;
     if ( $Val eq 'correct_by_student' )  
                                { $Wrongs = $Tries - 1; $Code = 'C'; }       $cache->{'reportKey'} = 'false';
     elsif ( $Val eq 'correct_by_override' )  
                                { $Wrongs = $Tries - 1; $Code = 'O'; }                              &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
     elsif ( $Val eq 'incorrect_attempted' ||                                               ['download',
                                 $Val eq 'incorrect_by_override' )                                               'reportSelected',
                { $Wrongs = $Tries; $Code = 'I'; }                                               'StudentAssessmentStudent',
     $TempHash{"$Part.Code"} = $Code;                                               'ProblemStatisticsSort']);
     $TempHash{"$Part.Wrongs"} = $Wrongs;      &CheckFormElement($cache, 'DownloadAll', 'DownloadAll', 'false');
  }      if ($cache->{'DownloadAll'} ne 'false') {
          }          # Clean the hell out of that cache!
                 }           # We cannot untie the hash at this scope (stupid libgd :( )
  for ( my $n = 0; $n < $PartNo; $n++ ) {            # So, remove every single key.  What a waste of time....
     my $part = $TempHash{$n};          # Of course, if you are doing this you are probably resigned
     my $Yes = 0;          # to waiting a while.
                     if ( $TempHash{$part.'.Code'} eq 'C' ||          &Apache::lonnet::logthis("Cleaning out the cache file");
                          $TempHash{$part.'.Code'} eq 'O'  )           while (my ($key,undef)=each(%$cache)) {
        {$ProbSolved++;$Yes=1;}              next if ($key eq 'DownloadAll');
               delete($cache->{$key});
  #    my $ptr = "$hash{'title_'.$ResId}";          }
     my $ptr = $TempHash{$part.'.PrOrd'}.'&'.$ResId;      }
       &CheckFormElement($cache, 'Status', 'Status', 'Active');
     if ( $PartNo > 1 ) {                      &CheckFormElement($cache, 'postdata', 'reportSelected', 'Class list');
  $ptr .= "*(part $part)";      &CheckFormElement($cache, 'reportSelected', 'reportSelected', 
  $Dis .= '&';                        'Class list');
     }      $cache->{'reportSelected'} = 
     my $Fac = ($TempHash{"$part.Tries"}) ?           &Apache::lonnet::unescape($cache->{'reportSelected'});
                               ($TempHash{"$part.ParCr"}/$TempHash{"$part.Tries"}) : 0;      &CheckFormElement($cache, 'sort', 'sort', 'fullname');
     my $DisF;      &CheckFormElement($cache, 'download', 'download', 'false');
     if ( $Fac > 0 &&  $Fac < 1 ) {       &CheckFormElement($cache, 'StatisticsMaps', 
  $DisF = sprintf( "%.4f", $Fac );                        'StatisticsMaps', 'All Maps');
     }      &CheckFormElement($cache, 'StatisticsProblemSelect',
     else {$DisF = $Fac;}        'StatisticsProblemSelect', 'All Problems');
 #    $DisF .= '+'.$TempHash{"$part.Time"};33333333      &CheckFormElement($cache, 'StatisticsPartSelect',
     $TimeTot += $TempHash{"$part.Time"};        'StatisticsPartSelect', 'All Parts');
     $Dis .= $TempHash{$part.'.PrOrd'}.'='.$DisF.'+'.$Yes;      if(defined($ENV{'form.Section'})) {
     $ptr .= "&$TempHash{$part.'.Tries'}".          my @sectionsSelected = (ref($ENV{'form.Section'}) ?
             "&$TempHash{$part.'.Wrongs'}".                                 @{$ENV{'form.Section'}} :
                             "&$TempHash{$part.'.Code'}";                                  ($ENV{'form.Section'}));
     push (@list, $ptr);          $cache->{'sectionsSelected'} = join(':', @sectionsSelected);
     $TotalOpend++;      } elsif(!defined($cache->{'sectionsSelected'})) {
     $ProbTot++;          $cache->{'sectionsSelected'} = $cache->{'sectionList'};
  }      }
   
       # student assessment
       if(defined($ENV{'form.CreateStudentAssessment'}) ||
          defined($ENV{'form.NextStudent'}) ||
          defined($ENV{'form.PreviousStudent'})) {
           $cache->{'reportSelected'} = 'Student Assessment';
       }
       if(defined($ENV{'form.NextStudent'})) {
           $cache->{'StudentAssessmentMove'} = 'next';
       } elsif(defined($ENV{'form.PreviousStudent'})) {
           $cache->{'StudentAssessmentMove'} = 'previous';
       } else {
           $cache->{'StudentAssessmentMove'} = 'selected';
       }
       &CheckFormElement($cache, 'StudentAssessmentStudent', 
                         'StudentAssessmentStudent', 'All Students');
       $cache->{'StudentAssessmentStudent'} = 
           &Apache::lonnet::unescape($cache->{'StudentAssessmentStudent'});
       &CheckFormElement($cache, 'DefaultColumns', 'DefaultColumns', 'false');
   
       # Problem analysis
       &CheckFormElement($cache, 'Interval', 'Interval', '1');
   
       # ProblemStatistcs
       &CheckFormElement($cache, 'DisplayCSVFormat',
                         'DisplayFormat', 'Display Table Format');
       &CheckFormElement($cache, 'ProblemStatisticsAscend',
                         'ProblemStatisticsAscend', 'Ascending');
       &CheckFormElement($cache, 'ProblemStatisticsSort',
                         'ProblemStatisticsSort', 'Homework Sets Order');
       &CheckFormElement($cache, 'DisplayLegend', 'DisplayLegend', 
         'Hide Legend');
       &CheckFormElement($cache, 'SortProblems', 'SortProblems', 
                         'Sort Within Sequence');
   
       # Search only form elements
       my @headingColumns=();
       my @sequenceColumns=();
       my $foundColumn = 0;
       if(defined($ENV{'form.ReselectColumns'})) {
           my @reselected = (ref($ENV{'form.ReselectColumns'}) ? 
                             @{$ENV{'form.ReselectColumns'}}
                             : ($ENV{'form.ReselectColumns'}));
           foreach (@reselected) {
               if(/HeadingColumn/) {
                   push(@headingColumns, $_);
                   $foundColumn = 1;
               } elsif(/SequenceColumn/) {
                   push(@sequenceColumns, $_);
                   $foundColumn = 1;
             }              }
     #else {           }
  #for(my $n=0; $n<$PartNo; $n++) {      }
  #    push (@list, "$TempHash{'0'.'.PrOrd'}.':'.$ResId:0:0:U");  
  #    $ProbTot++;   
  #}  
     #}  
         }  
  if ( $TotalTries ) {  
     my $DisFac = ( $TotalTries ) ? ($TotParCr/$TotalTries) : 0;  
     my $DisFactor = sprintf( "%.4f", $DisFac );  
     $DiscFac{$DisFactor}=$Dis;  
     #my $time;  
     #if ($ProbSolved){  
  #$time = int(($TimeTot/$ProbSolved)-10000000);  
     #}  
     #$DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.  
             #          $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;  
  }  
     }  
     #$r->print($sname.' PrCr= '.$TotParCr.' Slvd= '.$ProbSolved.' Tries='.$TotalTries.'<br>');  
 }  
   
   
   
 # ------------------------------------------------------------ Build page table  
 sub tracetable {  
     my ($rid,$beenhere)=@_;  
     my $IsMap=0;  
     $rid=~/(\d+)\.(\d+)/;  
     $maps{&Apache::lonnet::declutter($hash{'map_id_'.$1})}='';#$hash{'title_'.$rid};   
     #$maps{$HWN}=$hash{'title_'.$rid};   
     unless ($beenhere=~/\&$rid\&/) {  
        $beenhere.=$rid.'&';   
        if (defined($hash{'is_map_'.$rid})) {  
    my $cmap=$hash{'map_type_'.$hash{'map_pc_'.$hash{'src_'.$rid}}};  
            if ( $cmap eq 'sequence' || $cmap eq 'page' ) {   
                $cols[$#cols+1]=0;  
        $P_Order++;  
        $HWN=$P_Order;  
                $mapsort{$HWN} = $rid.':';  
        $IsMap=1;  
    
                #$maps{&Apache::lonnet::declutter($hash{'src_'.$rid})}=   
                #      $hash{'title_'.$rid};   
            }  
            if ((defined($hash{'map_start_'.$hash{'src_'.$rid}})) &&  
                (defined($hash{'map_finish_'.$hash{'src_'.$rid}}))) {  
        my $frid=$hash{'map_finish_'.$hash{'src_'.$rid}};  
   
                &tracetable($hash{'map_start_'.$hash{'src_'.$rid}},  
    '&'.$frid.'&');  
   
        $cols[$#cols+1]=($P_Order+1).':'.$frid;  
         
        my $meta=$hash{'src_'.$frid};  
        my $PartNo = 0;  
        my $Part;  
  #       if ($IsMap==0){  
                if ($meta) {  
    if ($meta=~/\.(problem|exam|quiz|assess|survey|form)$/) {  
        foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {  
    if ($_=~/^stores\_(\w+)\_tries$/) {  
        $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
        $P_Order++;  
        $mapsort{$HWN} .= '&'.$P_Order;  
        $PartNo++;  
        #$r->print('<br>'.$PartNo.'---'.$P_Order);  
    }  
    foreach my $K(split(/\,/,&Apache::lonnet::metadata($meta,'packages'))) {  
        if ($K=~/^optionresponse\_($Part)\_(\w+)$/) {  
    #$r->print('<br>'.$_.'...'.$P_Order.'---'.$Part);  
    $OpResp{$P_Order}="$frid:$Part";  
        }   
    }  
        }  
    }  
                }  
    }  
  #  }  
        } else {  
    $cols[$#cols+1]=($P_Order+1).':'.$rid;  
    my $meta=$hash{'src_'.$rid};  
    my $PartNo = 0;  
    if ($meta) {  
        if ($meta=~/\.(problem|exam|quiz|assess|survey|form)$/) {  
    foreach my $Key(split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {  
        if ($Key=~/^stores\_(\w+)\_tries$/) {  
    my $Part=&Apache::lonnet::metadata($meta,$Key.'.part');  
    $P_Order++;  
    $mapsort{$HWN} .= '&'.$P_Order;  
    $PartNo++;  
    foreach (split(/\,/,&Apache::lonnet::metadata($meta,'packages'))) {  
        if ($_=~/^optionresponse\_($Part)\_(\w+)$/) {  
    #$r->print('<br>'.$_.'...'.$P_Order.'---'.$Part);  
    $OpResp{$P_Order}="$rid:$Part";;  
        }   
      
    }  
   
        }  
    }  
        }  
    }         
        }  
        if (defined($hash{'to_'.$rid})) {  
           foreach (split(/\,/,$hash{'to_'.$rid})){  
               &tracetable($hash{'goesto_'.$_},$beenhere);  
           }  
        }  
     }  
 }  
   
 sub MySort {            
     if ( $Pos > 0 ) {  
  if ($ENV{'form.order'} eq 'Descending') {$b <=> $a;}  
  else { $a <=> $b; }  
     }  
     else {  
  if ($ENV{'form.order'} eq 'Descending') {$b cmp $a;}  
  else { $a cmp $b; }  
     }  
 }  
   
 sub Create_PrgWin {  
 #----------- Create progress  
     $r->print(<<ENDPOP);  
     <script>  
     popwin=open('','popwin','width=400,height=100');  
     popwin.document.writeln('<html><body bgcolor="#88DDFF">'+  
       '<title>LON-CAPA Statistics</title>'+  
       '<h4>Computation Progress</h4>'+  
       '<form name=popremain>'+  
       '<input type=text size=35 name=remaining value=Starting></form>'+  
       '</body></html>');  
     popwin.document.close();  
     </script>  
 ENDPOP  
   
     $r->rflush();      $cache->{'reportKey'} = 'false';
       if($cache->{'reportSelected'} eq 'Analyze') {
           $cache->{'reportKey'} = 'Analyze';
       } elsif($cache->{'reportSelected'} eq 'DoDiffGraph') {
           $cache->{'reportKey'} = 'DoDiffGraph';
       } elsif($cache->{'reportSelected'} eq 'PercentWrongGraph') {
           $cache->{'reportKey'} = 'PercentWrongGraph';
       }
   
       if(defined($ENV{'form.DoDiffGraph'})) {
           $cache->{'reportSelected'} = 'DoDiffGraph';
           $cache->{'reportKey'} = 'DoDiffGraph';
       } elsif(defined($ENV{'form.PercentWrongGraph'})) {
           $cache->{'reportSelected'} = 'PercentWrongGraph';
           $cache->{'reportKey'} = 'PercentWrongGraph';
       }
   
       foreach (keys(%ENV)) {
           if(/form\.Analyze/) {
               $cache->{'reportSelected'} = 'Analyze';
               $cache->{'reportKey'} = 'Analyze';
               my $data;
               (undef, $data)=split(':::', $_);
               $cache->{'AnalyzeInfo'}=$data;
           } elsif(/form\.HeadingColumn/) {
               my $value = $_;
               $value =~ s/form\.//;
               push(@headingColumns, $value);
               $foundColumn=1;
           } elsif(/form\.SequenceColumn/) {
               my $value = $_;
               $value =~ s/form\.//;
               push(@sequenceColumns, $value);
               $foundColumn=1;
           }
       }
   
       if($foundColumn) {
           $cache->{'HeadingsFound'} = join(':', @headingColumns);
           $cache->{'SequencesFound'} = join(':', @sequenceColumns);;
       }
       if(!defined($cache->{'HeadingsFound'}) || 
          $cache->{'DefaultColumns'} ne 'false') {
           $cache->{'HeadingsFound'}='HeadingColumnFull Name';
       }
       if(!defined($cache->{'SequencesFound'}) ||
          $cache->{'DefaultColumns'} ne 'false') {
           $cache->{'SequencesFound'}='All Sequences';
       }
       $cache->{'DefaultColumns'} = 'false';
   
       return;
 }  }
   
   ##################################################
   ##################################################
   
 sub Update_PrgWin {  =pod
 #----------- update progress  
     my $index = shift;  =item &SortStudents()
     $r->print('<script>popwin.document.popremain.remaining.value="'.  
               'Computing '.($index+1).'/'.($#students+1).': '.  Determines which students to display and in which order.  Which are 
               $students[$index].'";</script>');  displayed are determined by their status(active/expired).  The order
     $r->rflush();  is determined by the sort button pressed (default to username).  The
   type of sorting is username, lastname, or section.
   
   =over 4
   
   Input: $students, $CacheData
   
   $students: A array pointer to a list of students (username:domain)
   
   $CacheData: A pointer to the hash tied to the cached data
   
   Output: \@order
   
   @order: An ordered list of students (username:domain)
   
   =back
   
   =cut
   
   sub SortStudents {
       my ($cache)=@_;
   
       my @students = split(':::',$cache->{'NamesOfStudents'});
       my @sorted1Students=();
       foreach (@students) {
           if($cache->{'Status'} eq 'Any' || 
              $cache->{$_.':Status'} eq $cache->{'Status'}) {
               push(@sorted1Students, $_);
           }
       }
   
       my $sortBy = '';
       if(defined($cache->{'sort'})) {
           $sortBy = ':'.$cache->{'sort'};
       } else {
           $sortBy = ':fullname';
       }
       my @order = sort { lc($cache->{$a.$sortBy}) cmp lc($cache->{$b.$sortBy}) ||
                          lc($cache->{$a.':fullname'}) cmp lc($cache->{$b.':fullname'}) } 
                   @sorted1Students;
   
       return \@order;
 }  }
   
 sub Close_PrgWin {  =pod
 #--------------------- close Progress Line  
     $r->print('<script>popwin.close()</script>');  
     $r->rflush();   
 }  
   
 sub Build_Statistics {  
     &Create_PrgWin();  
 # ---------------------------- Gathering the Data of students' tries  
     for (my $index=0;$index<=$#students;$index++) {  
  &Update_PrgWin($index);  
         &ExtractStudentData($students[$index]);  
     }  
   
 # -------------------- sorting the Data  
     $r->print('<script>popwin.document.popremain.remaining.value="'.  
               'Calculating Discrimination Factors...";</script>');  
   
     @list = sort (@list);  
   
     &Discriminant();  
   
     $OpSel2='';  
     $OpSel1='selected';  
       
     $p_count = 0;   
     my $nIdx = 0;  
     my $dummy;   
     my $p_val;  
     my $ResId;  
     my $NoElements = $#list + 1;  
 #-------------------------------- loop for data representation  
     foreach (sort keys %mapsort) {  
  my ($Hid,$pr)=split(/\:/,$mapsort{$_});  
  my @lpr=split(/\&/,$pr);  
  &CreateTable(1,$Hid);  
  for (my $i=1; $i<=$#lpr; $i++) {  
     my %storestats=();  
     my ($PrOrd,$Prob,$Tries,$Wrongs,$Code)=split(/\&/,$list[$nIdx]);  
     my $Temp = $Prob;  
     my $MxTries = 0;  
     my $TotalTries = 0;  
     my $YES = 0;  
     my $Incorrect = 0;  
     my $Override = 0;  
     my $StdNo = 0;  
     my @StdLst;  
     while ( $PrOrd == $lpr[$i] )   
     {  
  $nIdx++;  
  $StdNo++;  
  $StdLst[ $StdNo ] = $Tries;  
  $TotalTries += $Tries;  
  if ( $MxTries < $Tries ) { $MxTries = $Tries; }   
  if ( $Code eq 'C' ){ $YES++; }  
  elsif( $Code eq 'I' ) { $Incorrect++; }  
  elsif( $Code eq 'O' ) { $Override++; }  
  elsif( $Code eq 'U' ) { $StdNo--; }  
  ($PrOrd,$Prob,$Tries,$Wrongs,$Code)=split(/\&/,$list[$nIdx]);  
     }  
   
     $p_count++;  
     my $Dummy;  
     ($ResId,$Dummy)=split(/\*/,$Temp);  
   
     $Temp = '<a href="'.$hash{'src_'.$ResId}.  
                 '" target="_blank">'.$hash{'title_'.$ResId}.$Dummy.'</a>';  
   
     my $res = &Apache::lonnet::declutter($hash{'src_'.$ResId});  
     my $urlres=$res;  
   
     $ResId=~/(\d+)\.(\d+)/;  
     my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
     $urlres=$Map;  
    
     $res = '<a href="'.$hash{'src_'.$ResId}.'">'.$res.'</a>';  
     #$Map = '<a href="'.$Map.'">'.$res.'</a>';  
   
 #------------------------ Compute the Average of Tries about one problem  
     my $Average = ($StdNo) ? $TotalTries/$StdNo : 0;  
   
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___timestamp'}=time;         
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___stdno'}=$StdNo;  
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___avetries'}=$Average;  
      
 #-------------------------------- Compute percentage of Wrong tries  
     my $Wrong = ( $StdNo ) ? 100 * ( $Incorrect / $StdNo ) : 0;  
   
 #-------------------------------- Compute Standard Deviation  
     my $StdDev = 0;   
     if ( $StdNo > 1 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $StdDev += $Dif*$Dif;  
  }   
  $StdDev /= ( $StdNo - 1 );  
  $StdDev = sqrt( $StdDev );  
     }  
   
 #-------------------------------- Compute Degree of Difficulty  
     my $DoDiff = 0;  
     if( $TotalTries > 0 ) {  
  $DoDiff = 1 - ( ( $YES + $Override ) / $TotalTries );  
 #    $DoDiff =  ($TotalTries)/($YES + $Override+ 0.1);      
     }  
          
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___difficulty'}=$DoDiff;  
   
 #-------------------------------- Compute the Skewness  
     my $Skewness = 0;  
     my $Sum = 0;   
     if ( $StdNo > 0 && $StdDev > 0 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $Skewness += $Dif*$Dif*$Dif;  
  }   
  $Skewness /= $StdNo;  
  $Skewness /= $StdDev*$StdDev*$StdDev;  
     }  
   
 #--------------------- Compute the Discrimination Factors  
     my ($Up1,$Up2)=split(/\:/,$DisUp{$lpr[$i]});  
     my ($Lw1,$Lw2)=split(/\:/,$DisLow{$lpr[$i]});  
     my $Dis1 = $Up1 - $Lw1;  
     my $Dis2 = $Up2 - $Lw2;  
     my $_D1 = sprintf("%.2f", $Dis1);  
     my $_D2 = sprintf("%.2f", $Dis2);  
   
 #-----------------  Some restition in presenting the float numbers  
     my $Avg = sprintf( "%.2f", $Average );  
     my $Wrng = sprintf( "%.1f", $Wrong );  
     my $SD = sprintf( "%.1f", $StdDev );  
     my $DoD = sprintf( "%.2f", $DoDiff );  
     my $Sk = sprintf( "%.1f", $Skewness );  
     my $join = $lpr[$i].'&'.$Temp.'&'.$StdNo.'&'.  
                        $TotalTries.'&'.$MxTries.'&'.$Avg.'&'.  
                        $YES.'&'.$Override.'&'.$Wrng.'&'.$DoD.'&'.  
        $SD.'&'.$Sk.'&'.$_D1.'&'.$_D2.'&'.  
                        $Prob;  
     $CachData{($p_count-1)}=$join;  
   
     $urlres=~/^(\w+)\/(\w+)/;  
     if ($StdNo) {   
  &Apache::lonnet::put('resevaldata',\%storestats,$1,$2);   
     }  
 #-------------------------------- Row of statistical table  
     if ( $DiscFlag == 0 ) {  
  &TableRow($join,$i,($p_count-1));  
     }   
  }  
  &CloseTable();  
     }  
     &Close_PrgWin();  
 }  
   
 sub Cache_Statistics {  
     my @list = ();  
     my $Useful;  
     my $UnUseful;  
 #    $r->print('<input type="hidden" name="show" value="excel" />'."\n");   
     my %myHeader = reverse( %Header );  
     $Pos = $myHeader{$ENV{'form.sort'}};  
     if ($Pos > 0) {$Pos++;}  
     $p_count = 0;  
     foreach my $key( keys %CachData) {   
  my @Temp=split(/\&/,$CachData{$key});  
  if ( $Pos == 0 ) {  
     ($UnUseful,$Useful)=split(/\>/,$Temp[$Pos]);  
  }  
  else {  
     $Useful = $Temp[$Pos];  
  }     
  $list[$p_count]=$Useful.'@'.$CachData{$key};  
         $p_count++;  
     }  
   
     @list = sort MySort (@list);  
   
     my $nIdx=0;  
   
     if ( $Pos == 0 ) {  
  foreach (sort keys %mapsort) {  
     my ($Hid,$pr)=split(/\:/,$mapsort{$_});  
     &CreateTable(1,$Hid);  
     my @lpr=split(/\&/,$pr);  
     for (my $i=1; $i<=$#lpr; $i++) {  
  my($Pre, $Post) = split(/\@/,$list[$nIdx]);   
  #$r->print('<br>'.$Pre.'---'.$Post);  
  &TableRow($Post,$i,$nIdx);  
  $nIdx++;  
     }  
     &CloseTable();  
  }  
     }  
     else {  
  &CreateTable(0);  
  for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
     my($Pre, $Post) = split(/\@/,$list[$nIdx]);   
     &TableRow($Post,$nIdx,$nIdx);  
  }   
  &CloseTable();  
     }  
 }  
   
 sub TableRow {  
     my ($Str,$Idx,$RealIdx)=@_;  
     my($PrOrd,$Temp,$StdNo,$TotalTries,$MxTries,$Avg,$YES,$Override,  
        $Wrng,$DoD,$SD,$Sk,$_D1,$_D2,$Prob)=split(/\&/,$Str);  
     if ($ENV{'form.showcsv'}) {  
         my ($ResId,$Dummy)=split(/\*/,$Prob);  
         my $Ptr =  "\n".'<br>'.  
                "\n".'"'.($RealIdx+1).'",'.  
                "\n".'"'.$hash{'title_'.$ResId}.$Dummy.'",'.  
                "\n".'"'.$hash{'src_'.$ResId}.'",'.  
                "\n".'"'.$StdNo.'",'.  
                "\n".'"'.$TotalTries.'",'.  
                "\n".'"'.$MxTries.'",'.  
                "\n".'"'.$Avg.'",'.  
                "\n".'"'.$YES.'",'.  
                "\n".'"'.$Override.'",'.  
                "\n".'"'.$Wrng.'",'.  
                "\n".'"'.$DoD.'",'.  
                "\n".'"'.$SD.'",'.  
                "\n".'"'.$Sk.'",'.  
                "\n".'"'.$_D1.'",'.  
        "\n".'"'.$_D2.'"';  
         $r->print("\n".$Ptr);  
     }  
     else{  
         my $Ptr =  "\n".'<tr>'.  
                "\n".'<td>'.($RealIdx+1).'</td>'.  
           #     "\n".'<td>'.$PrOrd.$Temp.'</td>'.  
                "\n".'<td>'.$Temp.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC"> '.$StdNo.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC">'.$TotalTries.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC">'.$MxTries.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF">'.$Avg.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF"> '.$YES.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF"> '.$Override.'</td>'.  
                "\n".'<td bgcolor="#FFDDDD"> '.$Wrng.'</td>'.  
                "\n".'<td bgcolor="#FFDDDD">'.$DoD.'</td>'.  
                "\n".'<td bgcolor="#DDFFDD"> '.$SD.'</td>'.  
                "\n".'<td bgcolor="#DDFFDD"> '.$Sk.'</td>'.  
                "\n".'<td bgcolor="#FFDDFF"> '.$_D1.'</td>'.  
        "\n".'<td bgcolor="#FFDDFF"> '.$_D2.'</td>';  
         $r->print("\n".$Ptr.'</tr>' );  
     }  
     $GraphDat{$RealIdx}=$DoD.':'.$Wrng;  
 }  
   
 # ------------------------------------------- Prepare data for Graphical chart  
   
 sub GetGraphData {  
     my $ylab = shift;  
     my $Col;  
     my $data='';  
     my $count = 0;  
     my $Max = 0;  
     my $cid=$ENV{'request.course.id'};  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     foreach (keys %GraphDat) {delete $GraphDat{$_};}  
     if (-e "$GraphDB") {  
  if (tie(%GraphDat,'GDBM_File',"$GraphDB",&GDBM_READER,0640)) {  
     if ( $ylab eq 'DoDiff Graph' ) {  
  $ylab = 'Degree-of-Difficulty';  
  $Col = 0;  
     }  
     else {  
  $ylab = 'Wrong-Percentage';  
  $Col = 1;  
     }  
     foreach (sort NumericSort keys %GraphDat) {   
  my @Temp=split(/\:/,$GraphDat{$_});  
                 my $inf = $Temp[$Col];   
  if ( $Max < $inf ) {$Max = $inf;}  
  $data .= $inf.',';  
  $count++;  
     }  
     if ( $Max > 1 ) {   
  $Max += (10 - $Max % 10);  
  $Max = int($Max);  
     }  
     else { $Max = 1; }  
             untie(%GraphDat);  
     my $Course = $ENV{'course.'.$cid.'.description'};  
     $Course =~ s/\ /"_"/eg;  
     $GData=$Course.'&'.'Problems'.'&'.$ylab.'&'.$Max.'&'.$count.'&'.$data;  
  }  
  else {  
     $r->print("Unable to tie hash to db file");  
  }  
     }  
 }  
   
   
 sub initial {  
 # --------------------------------- Initialize the global varaibles  
   undef @students;  
   undef @cols;  
   undef %maps;  
   undef %section;  
   undef %StuBox;  
   undef @list;  
   undef %CachData;  
   undef %GraphDat;  
   undef %DiscFac;  
   undef %OpResp;  
   undef %ConceptData;  
   undef $CurMap;  
   undef $CurSec;  
   undef $CurStu;  
   undef $p_count;  
   undef $Pos;  
   undef $GData;  
   $DiscFlag=0;   
   $P_Order=100000;  
   $HWN=$P_Order;  
 }  
   
 # my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
 #                  "_$ENV{'user.domain'}_$cid\_classlist.db";  
 # if (-e "$CacheDB") {  
 #    if (tie(%students,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
 # &CachClassList();  
 #    }  
 #            else {  
 #        $r->print("Unable to tie hash to db file");  
 #            }  
 #        }  
 #        else {  
 #    if (tie(%students,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {  
 #        &MakeClassList();  
 #    }  
 #            else {  
 #        $r->print("Unable to tie hash to db file");  
 #            }  
 #        }  
 #        untie(%students);  
   
   
 sub ClassList {  
   
     &GetStatus();  
   
     $cid=$ENV{'request.course.id'};  
     my ($cdom,$cnum)=split(/\_/,$cid);  
 # ----------------------- Get first and last resource, see if there is anything  
     $firstres=$hash{'map_start_/res/'.$ENV{'request.course.uri'}};  
     $lastres=$hash{'map_finish_/res/'.$ENV{'request.course.uri'}};  
     if (($firstres) && ($lastres)) {  
 # my %students = &Apache::lonnet::dump('classlist',$cdom,$cnum);  
 #    $Apache::lonxml::debug=1;  
 #    &Apache::lonhomework::showhash(%students);  
 #    $Apache::lonxml::debug=0;  
 # my $StudNo = 0;  
 # my $now=time;  
 # my ($temp)=keys(%students);  
 # unless ($temp=~/^error\:/) {  
 #    foreach my $KeyPoint(sort keys(%students)) {  
   
   
  my %classlist=&Apache::lonnet::dump('classlist',$cdom,$cnum);  
   
  my $StudNo = 0;  
  my $now=time;  
  foreach my $name (keys (%classlist)) {  
     my $value=$classlist{$name};  
     my ($end,$start)=split(/\:/,$value);  
     my $active=1;  
     my $Status=$ENV{'form.status'};  
     $Status = ($Status) ? $Status : 'Active';  
     if ( ( ($end) && $now > $end ) &&   
  ( ($Status eq 'Active') ) ) { $active=0; }  
     if ( ($Status eq 'Expired') &&   
  ($end == 0 || $now < $end) ) { $active=0; }  
     if ($active) {  
  my $thisindex=$#students+1;  
  $students[$thisindex]=$name;  
  my ($sname,$sdom)=split(/\:/,$name);  
  my $ssec=&usection($sdom,$sname,$cid,$Status);  
  if ($ssec==-1 || $ssec eq 'adm' ) {next;}  
  $ssec=($ssec) ? $ssec : '(none)';  
  #$ssec=(int($ssec)) ? int($ssec) : $ssec;  
  $section{$ssec}=$ssec;  
  if ($CurSec eq 'All Sections' || $ssec eq $CurSec) {  
     $students[$StudNo]=$name;  
     $StuBox{$sname}=$sdom;  
  }  
  $StudNo++;  
     }  
  }  
   
         $r->print("Total number of students : ".($#students+1));  =item &SpaceColumns()
         $r->rflush();  
 # --------------- Find all assessments and put them into some linear-like order  Determines the width of all the columns in the chart.  It is based on
  &tracetable($firstres,'&'.$lastres.'&');  the max of the data for that column and its header.
 #    my $c=0;  
 #    foreach (sort keys %mapsort) {  =over 4
 # $r->print('<br>'.$c.')'.$_.' ... '.$mapsort{$_});  
 # $c++;  Input: $students, $studentInformation, $headings, $ChartDB
 #    }  
 # my $c=1;  $students: An array pointer to a list of students (username:domain)
 # foreach (sort keys %OpResp) {  
 #    $r->print('<br>'.$c.')'.$_.' ... '.$OpResp{$_}.' ... '.$hash{'src_'.$OpResp{$_}});  $studentInformatin: The type of data for the student information.  It is
 #    $c++;  used as part of the key in $CacheData.
 # }  
   $headings: The name of the student information columns.
     }  
   $ChartDB: The name of the cache database which is opened for read/write.
 # ------------------------------------------------------------- End render page   
     else {  Output: None - All data stored in cache.
  $r->print('<h3>Undefined course sequence</h3>');  
     }  =back
 }  
   =cut
   
 sub Title {  sub SpaceColumns {
     $r->print('<html><head><title>LON-CAPA Statistics</title></head>');      my ($students,$studentInformation,$headings,$cache)=@_;
     $r->print('<body bgcolor="#FFFFFF">'.  
               '<script>window.focus(); window.width=500;window.height=500;</script>'.      # Initialize Lengths
               '<img align=right src=/adm/lonIcons/lonlogos.gif>');      for(my $index=0; $index<(scalar @$headings); $index++) {
 # ---------------------------------------------------------------- Course title          my @titleLength=split(//,$headings->[$index]);
     $r->print('<h1> Course : "'.          $cache->{$studentInformation->[$index].':columnWidth'}=
               $ENV{'course.'.$ENV{'request.course.id'}.              scalar @titleLength;
               '.description'}.'"</h1><h2>'.localtime().'</h2>');      }
 # ------------------------------- This is going to take a while, produce output  
     $r->rflush();      foreach my $name (@$students) {
 }          foreach (@$studentInformation) {
               my @dataLength=split(//,$cache->{$name.':'.$_});
               my $length=(scalar @dataLength);
 sub CreateForm {              if($length > $cache->{$_.':columnWidth'}) {
     $r->print("\n".'<form name=stat method=post action="/adm/statistics" >');                  $cache->{$_.':columnWidth'}=$length;
     my $content = $ENV{'form.sort'};              }
     if (!($ENV{'form.showcsv'}) &&           }
         ($content eq '' || $content eq 'Return to Menu')) {      }
  my $Ptr = '<h3>';  
  $Ptr .= '<input type=submit name=sort value="Problem Stats"/>';      return;
  $Ptr .= '<br><br>';  }
  $Ptr .= '<input type=submit name=sort value="Problem Analysis"/>';  
  $Ptr .= '<br><br>';  sub PrepareData {
  $Ptr .= '<input type=submit name=sort value="Student Assessment"/>';      my ($c, $cacheDB, $studentInformation, $headings,$r)=@_;
  $Ptr .= '</h3>';  
  #$Ptr .= '<input type=submit name=sort value="Activity Log"/>';      # Test for access to the cache data
  #$Ptr .= '</h3>';      my $courseID=$ENV{'request.course.id'};
  $r->print( $Ptr );      my $isRecalculate=0;
     }      if(defined($ENV{'form.Recalculate'})) {
     else {          $isRecalculate=1;
  &ClassList();      }
  if ( $content eq 'Student Assessment' ||   
      $content eq 'Create Student Report' ) {      my $isCached = &Apache::loncoursedata::TestCacheData($cacheDB,
     &MapSecOptions();                                                           $isRecalculate);
     &StudentOptions();      if($isCached < 0) {
     &StudentReport($CurStu,$StuBox{"$CurStu"});          return "Unable to tie hash to db file.";
  }      }
  elsif ( $content eq 'Problem Analysis' ) {  
     &AnalyzeProblem();      # Download class list information if not using cached data
  }      my %cache;
  else {      unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_WRCREAT(),0640)) {
     &MapSecOptions();          return "Unable to tie hash to db file.";
     &PreStatTable();  
  }  
     }  
 }  
   
   
 sub Menu {  
     &initial();  
 #    $Apache::lonxml::debug=1;  
 #    &Apache::lonhomework::showhash(%ENV);  
 #    $Apache::lonxml::debug=0;  
     &Title();  
     my $InpStr = $ENV{'form.sort'};  
     if ($InpStr eq 'Activity Log') {  
  &Activity();  
     }      
     elsif ($InpStr=~/^Analyze\_/) {  
  &ClassList();  
  &ShowOpGraph($InpStr,$ENV{'form.interval'});  
     }  
     elsif ( $InpStr eq 'DoDiff Graph' || $InpStr eq '%Wrong Graph' ) {        
  &GetGraphData($InpStr);  
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" />');  
     }  
     else {  
  &CreateForm();  
  $r->print("\n".'</form>');  
     }      }
     $r->print("\n".'</body>'.  
       "\n".'</html>');  #    if(!$isCached) {
           my $processTopResourceMapReturn=
               &Apache::loncoursedata::ProcessTopResourceMap(\%cache, $c);
           if($processTopResourceMapReturn ne 'OK') {
               untie(%cache);
               return $processTopResourceMapReturn;
           }
    #   }
   
       if($c->aborted()) {
           untie(%cache);
           return 'aborted'; 
       }
   
       my $classlist=&Apache::loncoursedata::DownloadClasslist($courseID,
                                                   $cache{'ClasslistTimestamp'},
                                                   $c);
       foreach (keys(%$classlist)) {
           if(/^(con_lost|error|no_such_host)/i) {
               untie(%cache);
               return "Error getting student data.";
           }
       }
   
       if($c->aborted()) {
           untie(%cache);
           return 'aborted'; 
       }
   
       # Active is a temporary solution, remember to change
       Apache::loncoursedata::ProcessClasslist(\%cache,$classlist,$courseID,$c);
       if($c->aborted()) {
           untie(%cache);
           return 'aborted'; 
       }
   
       &ProcessFormData(\%cache);
       my $students = &SortStudents(\%cache);
       &SpaceColumns($students, $studentInformation, $headings, \%cache);
       $cache{'updateTime:columnWidth'}=24;
   
       my $download = $cache{'download'};
       my $downloadAll = $cache{'DownloadAll'};
       my @allStudents=();
       if($download ne 'false') {
           $cache{'download'} = 'false';
       } elsif($downloadAll ne 'false') {
           $cache{'DownloadAll'} = 'false';
           if($downloadAll eq 'sorted') {
               @allStudents = @$students;
           } else {
               @allStudents = split(':::', $cache{'NamesOfStudents'});
           }
       }
   
       untie(%cache);
   
       if($download ne 'false') {
           my @who = ($download);
           if(&Apache::loncoursedata::DownloadStudentCourseData(\@who, 'false',
                                                                $cacheDB, 'true',
                                                                'false', $courseID,
                                                                $r, $c) ne 'OK') {
               return 'Stop at download individual';
           }
       } elsif($downloadAll ne 'false') {
           if(&Apache::loncoursedata::DownloadStudentCourseData(\@allStudents,
                                                                'false',
                                                                $cacheDB, 'true',
                                                                'true', $courseID,
                                                                $r, $c) ne 'OK') {
               return 'Stop at download all';
           }
       }
   
       return ('OK', $students);
   }
   
   sub DisplayClasslist {
       my ($r)=@_;
       #
       my @Fields = ('fullname','username','domain','id','section');
       #
       my $Str='';
       $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
       $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
       foreach my $field (@Fields) {
           $Str .= '<th><a href="/adm/statistics?sort='.$field.'">'.$field.
               '</a></th>';
       }
       $Str .= '</tr>'."\n";
       #
       my $alternate = 0;
       foreach my $student (@Students) {
           my $sname = $student->{'username'}.':'.$student->{'domain'};
           if($alternate) {
               $Str .= '<tr bgcolor="#ffffe6">';
           } else {
               $Str .= '<tr bgcolor="#ffffc6">';
           }
           $alternate = ($alternate + 1) % 2;
           #
           foreach my $field (@Fields) {
               $Str .= '<td>';
               if ($field eq 'fullname') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('Student Assessment');
                   $Str .= '&StudentAssessmentStudent=';
                   $Str .= &Apache::lonnet::escape($sname).'">';
                   $Str .= $student->{$field}.'&nbsp';
                   $Str .= '</a>';
               } else {
                   $Str .= $student->{$field};
               }
               $Str .= '</td>';
           }
           $Str .= "</tr>\n";
       }
       $Str .= '</table></td></tr></table>'."\n";
       #
       $r->print($Str);
     $r->rflush();      $r->rflush();
       #
       return;
 }  }
   
   sub BuildClasslist {
       my ($cacheDB,$students,$studentInformation,$headings,$r)=@_;
   
 sub StudentOptions {      my %cache;
     my $OpSel5='';      unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER(),0640)) {
     $CurStu = $ENV{'form.student'};          return '<html><body>Unable to tie database.</body></html>';
     if ( $CurStu eq '' ) {       }
         $CurStu = 'All Students';  
         $OpSel5 = 'selected';  #    my $Ptr = '';
     }  #    $Ptr .= '<table border="0"><tbody>';
     my $Ptr ='';  #    $Ptr .= '<tr><td align="right"><b>Select Sections</b>';
 # ----------------------------------- Loading the Students Combobox  #    $Ptr .= '</td>'."\n";
     $Ptr .= '<br><b>Select Student</b>'."\n".  #    $Ptr .= '<td align="left">'."\n";
            '<select name="student">'."\n".   #    my @sectionsSelected = split(':',$cache{'sectionsSelected'});
     '<option '.$OpSel5.'>All Students</option>';                               #    my @sections = split(':',$cache{'sectionList'});
     foreach my $key ( sort keys %StuBox ) {            #    $Ptr .= &Apache::lonhtmlcommon::MultipleSectionSelect(\@sections,
  $Ptr .= '<option';  #                                                          \@sectionsSelected,
  if ($CurStu eq $key) {$Ptr .= ' selected';}       #                                                          'Statistics');
         $Ptr .= '>'.$key."</option>\n";       #    $Ptr .= '</td></tr></table><br>';
     }  #    $r->print($Ptr);
     $Ptr .= '</select>';  #    $r->rflush();
     $Ptr .= '<br><input type="submit" name="sort" value="Create Student Report" />';  #    my %mySections = ();
     $r->print( $Ptr );  #    foreach (@sections) { $mySections{$_} = 'True'; }
     $r->rflush();  #    $r->print("<br>$cache{'sectionsSelected'}<br>");
 }  
       my $Str='';
       $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
 sub GetStatus {      $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
     $OpSel1='';  
     $OpSel2='';      my $displayString = '<td align="left"><a href="/adm/statistics?';
     $OpSel3='';      $displayString .= 'sort=LINKDATA">DISPLAYDATA&nbsp</a></td>'."\n";
     $OpSel4='';      $Str .= &Apache::lonhtmlcommon::CreateHeadings(\%cache,
                                                      $studentInformation,
     if ( $ENV{'form.order'} eq 'Descending' ) { $OpSel2='selected'; }                                                     $headings, $displayString);
     else { $OpSel1 = 'selected'; }      $Str .= '</tr>'."\n";
   
     my %myHeader = reverse( %Header );      my $alternate=0;
     $Pos = $myHeader{$ENV{'form.sort'}};      foreach (@$students) {
     if ($Pos == 0) {  #        if ($mySections{$cache{$_.':'.'section'}} ne 'True') {next;}
  $OpSel1 = 'selected';          my ($username, $domain) = split(':', $_);
  $ENV{'form.order'}='Ascendig';          if($alternate) {
     }              $Str .= '<tr bgcolor="#ffffe6">';
           } else {
     $CurMap = $ENV{'form.maps'};              $Str .= '<tr bgcolor="#ffffc6">';
     if ( $CurMap eq '' ) {           }
  $CurMap = 'All Maps';          $alternate = ($alternate + 1) % 2;
  $OpSel3 = 'selected';          foreach my $data (@$studentInformation) {
     }              $Str .= '<td>';
     $CurSec = $ENV{'form.section'};              if($data eq 'fullname') {
     if ( $CurSec eq '' ) {                   $Str .= '<a href="/adm/statistics?reportSelected=';
  $CurSec = 'All Sections';                  $Str .= &Apache::lonnet::escape('Student Assessment');
         $OpSel4 = 'selected';                  $Str .= '&StudentAssessmentStudent=';
     }                  $Str .= &Apache::lonnet::escape($cache{$_.':'.$data}).'">';
 }                  $Str .= $cache{$_.':'.$data}.'&nbsp';
                   $Str .= '</a>';
               } elsif($data eq 'updateTime') {
 sub MapSecOptions {                  $Str .= '<a href="/adm/statistics?reportSelected=';
 # ----------------------------------- Loading the Maps Combobox                  $Str .= &Apache::lonnet::escape('Class list');
     my $Ptr = '<br>';                  $Str .= '&download='.$_.'">';
     $Ptr .= '<input type="submit" name="sort" value="Return to Menu" />';                  $Str .= $cache{$_.':'.$data}.'&nbsp';
     $Ptr .= '<br><b> Select &nbsp; Map &nbsp; &nbsp; </b>'."\n".                  $Str .= '&nbsp</a>';
            '<select name="maps">'."\n".               } else {
     '<option '.$OpSel3.'>All Maps</option>';                                               $Str .= $cache{$_.':'.$data}.'&nbsp';
     foreach my $key ( sort keys %maps ) {                        }
  $Ptr .= '<option';  
         if ($CurMap eq $key) {$Ptr .= ' selected';}                   $Str .= '</td>'."\n";
  $Ptr .= '>'.$key."</option>\n";               }
     }  
     $Ptr .= '</select>';  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
   
 # ----------------------------------- Loading the Sections Combobox  
     $Ptr .= '<br><b>Select Section</b>'."\n".  
            '<select name="section">'."\n".   
     '<option '.$OpSel4.'>All Sections</option>';                               
     foreach my $key ( sort keys %section ) {            
  $Ptr .= '<option';  
         if ($CurSec eq $key) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$key."</option>"."\n";       
     }      }
     $Ptr .= '</select>'."\n";  
   
     $r->print( $Ptr );      $Str .= '</tr>'."\n";
       $Str .= '</table></td></tr></table>'."\n";
       $r->print($Str);
     $r->rflush();      $r->rflush();
   
       untie(%cache);
   
       return;
 }  }
   
   sub CreateMainMenu {
       my ($status, $reports)=@_;
   
       my $Str = '';
   
       $Str .= '<table border="0"><tbody><tr>'."\n";
       $Str .= '<td></td>'."\n";
       $Str .= '<td align="center"><b>Select a Report</b></td>'."\n";
       $Str .= '<td align="center"><b>Student Status</b></td></tr>'."\n";
       $Str .= '<tr>'."\n";
       $Str .= '<td align="center"><input type="submit" name="Refresh" ';
       $Str .= 'value="Update Display" /></td>'."\n";
       $Str .= '<td align="center">';
       $Str .= '<select name="reportSelected" onchange="document.';
       $Str .= 'Statistics.submit()">'."\n";
   
       foreach (sort(keys(%$reports))) {
           next if($_ eq 'reportSelected');
           $Str .= '<option name="'.$_.'"';
           if($reports->{'reportSelected'} eq $reports->{$_}) {
               $Str .= ' selected=""';
           }
           $Str .= '>'.$reports->{$_}.'</option>'."\n";
       }
       $Str .= '</select></td>'."\n";
   
       $Str .= '<td align="center">';
       $Str .= &Apache::lonhtmlcommon::StatusOptions($status, 'Statistics');
       $Str .= '</td>'."\n";
   
       $Str .= '</tr></tbody></table>'."\n";
       $Str .= '<hr>'."\n";
   
       return $Str;
   }
   
   sub BuildStatistics {
       my ($r)=@_;
   
       my $c = $r->connection;
       my @studentInformation=('fullname','section','id','domain','username',
                               'updateTime');
       my @headings=('Full Name', 'Section', 'PID', 'Domain', 'User Name',
                     'Last Updated');
       my $spacing = '   ';
   
       my %reports = ('classlist'          => 'Class list',
                      'problem_statistics' => 'Problem Statistics',
                      'student_assessment' => 'Student Assessment',
      'percentage'         => 'Correct-problems Plot',
   #                   'activitylog'        => 'Activity Log',
                      'reportSelected'     => 'Class list');
   
       my %cache;
       my $courseID=$ENV{'request.course.id'};
       my $cacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".
                     "_$ENV{'user.domain'}_$courseID\_statistics.db";
   
       $r->print(&Apache::lonhtmlcommon::Title('Course Statistics and Charts'));
   
       my ($returnValue, $students) = &PrepareData($c, $cacheDB,
                                                   \@studentInformation,
                                                   \@headings,$r);
       if($returnValue ne 'OK') {
           $r->print($returnValue."\n".'</body></html>');
           return OK;
       }
       if(!$c->aborted()) {
           &Apache::loncoursedata::CheckForResidualDownload($cacheDB,
                                                            'true', 'true',
                                                            $courseID,
                                                            $r, $c);
       }
   
       my $GoToPage;
       if(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER(),0640)) {
           $GoToPage = $cache{'reportSelected'};
           $reports{'reportSelected'} = $cache{'reportSelected'};
           if(defined($cache{'reportKey'}) &&
              !exists($reports{$cache{'reportKey'}}) &&
              $cache{'reportKey'} ne 'false') {
               $reports{$cache{'reportKey'}} = $cache{'reportSelected'};
           }
   
           if(defined($cache{'OptionResponses'})) {
               $reports{'problem_analysis'} = 'Option Response Analysis';
           }
   
           $r->print('<form name="Statistics" ');
           $r->print('method="post" action="/adm/statistics">');
           $r->print(&CreateMainMenu($cache{'Status'}, \%reports));
           $r->rflush();
           untie(%cache);
       } else {
           $r->print('<html><body>Unable to tie database.</body></html>');
           return OK;
       }
   
       if($GoToPage eq 'Activity Log') {
           &Apache::lonproblemstatistics::Activity();
       } elsif($GoToPage eq 'Problem Statistics') {
           &Apache::lonproblemstatistics::BuildProblemStatisticsPage($cacheDB,
                                                                     $students,
                                                                     $courseID,
                                                                     $c,$r);
       } elsif($GoToPage eq 'Option Response Analysis') {
           &Apache::lonproblemanalysis::BuildProblemAnalysisPage($cacheDB, $r);
       } elsif($GoToPage eq 'Student Assessment') {
           &Apache::lonstudentassessment::BuildStudentAssessmentPage($r, $c);
       } elsif($GoToPage eq 'Analyze') {
           &Apache::lonproblemanalysis::BuildAnalyzePage($cacheDB, $students,
                                                         $courseID, $r);
       } elsif($GoToPage eq 'DoDiffGraph' || $GoToPage eq 'PercentWrongGraph') {
           my $courseDescription = $ENV{'course.'.$courseID.'.description'};
           $courseDescription =~ s/\ /"_"/eg;
           &Apache::lonproblemstatistics::BuildGraphicChart($GoToPage, $cacheDB,
                                                            $courseDescription,
                                                            $students, $courseID,
                                                            $r, $c);
       } elsif($GoToPage eq 'Class list') {
           &DisplayClasslist($r);
   #        &BuildClasslist($cacheDB, $students, \@studentInformation,
   #                        \@headings, $r);
       } elsif($GoToPage eq 'Correct-problems Plot') {
    &Apache::lonpercentage::BuildPercentageGraph($cacheDB, $students,
        $courseID, $c, $r);
       }
   
       $r->print('</form>'."\n");
       $r->print("\n".'</body>'."\n".'</html>');
       $r->rflush();
   
       return OK;
   }
   
 # ================================================================ Main Handler  # ================================================================ Main Handler
   
 sub handler {  sub handler {
     $r=shift;      my $r=shift;
   
     if (&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {  #    $jr = $r;
 # ------------------------------------------- Set document type for header only  
  if ($r->header_only) {  
     if ($ENV{'browser.mathml'}) {  
  $r->content_type('text/xml');  
     }   
     else {  
  $r->content_type('text/html');  
     }  
     $r->send_http_header;  
     return OK;  
  }      
  my $requrl=$r->uri;  
 # ----------------------------------------------------------------- Tie db file  
   
  undef %hash;      my $loaderror=&Apache::lonnet::overloaderror($r);
       if ($loaderror) { return $loaderror; }
       $loaderror=
          &Apache::lonnet::overloaderror($r,
            $ENV{'course.'.$ENV{'request.course.id'}.'.home'});
       if ($loaderror) { return $loaderror; }
   
  if ($ENV{'request.course.fn'}) {      unless(&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {
     my $fn=$ENV{'request.course.fn'};  
     if (-e "$fn.db") {  
  if (tie(%hash,'GDBM_File',"$fn.db",&GDBM_READER,0640)) {  
 # ------------------------------------------------------------------- Hash tied  
     $r->content_type('text/html');  
     $r->send_http_header;  
     &Menu();  
  }  
  else {  
     $r->content_type('text/html');  
     $r->send_http_header;  
     $r->print('<html><body>Coursemap undefined.</body></html>');  
  }  
 # ------------------------------------------------------------------ Untie hash  
  unless (untie(%hash)) {  
     &Apache::lonnet::logthis("<font color=blue>WARNING: ".  
                             "Could not untie coursemap $fn (browse).</font>");   
  }  
   
 # -------------------------------------------------------------------- All done  
  return OK;  
 # ----------------------------------------------- Errors, hash could no be tied  
     }  
  }   
  else {  
     $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";  
     return HTTP_NOT_ACCEPTABLE;   
  }  
     }  
     else {  
         $ENV{'user.error.msg'}=          $ENV{'user.error.msg'}=
         $r->uri.":vgr:0:0:Cannot view grades for complete course";          $r->uri.":vgr:0:0:Cannot view grades for complete course";
           return HTTP_NOT_ACCEPTABLE;
       }
   
       # Set document type for header only
       if($r->header_only) {
           if ($ENV{'browser.mathml'}) {
               $r->content_type('text/xml');
           } else {
               $r->content_type('text/html');
           }
           &Apache::loncommon::no_cache($r);
           $r->send_http_header;
           return OK;
       }
   
         return HTTP_NOT_ACCEPTABLE;       unless($ENV{'request.course.fn'}) {
    my $requrl=$r->uri;
           $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";
           return HTTP_NOT_ACCEPTABLE;
     }      }
   
       $r->content_type('text/html');
       $r->send_http_header;
   
       &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                               ['sort',
                                                'StudentAssessmentStudent']);
   
       &PrepareClasslist($r);
   
       &PrepareCourseData($r);
   
       &BuildStatistics($r);
   
       return OK;
 }  }
 1;  1;
   
   =pod
   
   =back
   
   =cut
   
 __END__  __END__
   

Removed from v.1.22  
changed lines
  Added in v.1.63


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>