Diff for /loncom/interface/lonstatistics.pm between versions 1.1 and 1.92

version 1.1, 2002/02/04 16:08:26 version 1.92, 2003/12/24 21:54:58
Line 1 Line 1
 # The LearningOnline Network with CAPA  # The LearningOnline Network with CAPA
 # (Publication Handler  
 #  #
 # $Id$  # $Id$
 #  #
Line 26 Line 25
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
 # (Navigate problems for statistical reports  # (Navigate problems for statistical reports
 # YEAR=2001  #
 # 5/05/01, 7/09/01, 7/25/01, 8/11/01,9/13/01, 9/26/01 Behrouz Minaei  
 # 10/5/01, 10/9/01, 10/22/01, 10/26/01 Behrouz Minaei  
 # 11/1/01, 11/4/01, 11/16/01 Behrouz Minaei  
 # 12/14/01, 12/16/01, 12/18/01,12/20/01,12/31/01 Behrouz Minaei  
 # YEAR=2002  
 # 1/22/02,2/1/02  
 ###  ###
   
   =pod
   
   =head1 NAME
   
   lonstatistics
   
   =head1 SYNOPSIS
   
   Main handler for statistics and chart.
   
   =head1 PACKAGES USED
   
       use strict;
       use Apache::Constants qw(:common :http);
       use Apache::lonnet();
       use Apache::lonhomework;
       use Apache::loncommon;
       use Apache::loncoursedata;
       use Apache::lonhtmlcommon;
       use Apache::lonproblemanalysis;
       use Apache::lonsubmissiontimeanalysis;
       use Apache::lonproblemstatistics;
       use Apache::lonstudentassessment;
       use Apache::lonpercentage;
       use Apache::lonmysql;
   =over 4
   
   =cut
   
 package Apache::lonstatistics;  package Apache::lonstatistics;
   
 use strict;  use strict;
 use Apache::Constants qw(:common :http);  use Apache::Constants qw(:common :http);
   use vars qw(
       @FullClasslist 
       @Students
       @Sections 
       @SelectedSections
       %StudentData
       @StudentDataOrder
       @SelectedStudentData
       $top_map 
       @Sequences 
       @SelectedMaps
       @Assessments);
   
 use Apache::lonnet();  use Apache::lonnet();
 use Apache::lonhomework;  use Apache::lonhomework;
 use Apache::loncommon();  use Apache::loncommon;
 use HTML::TokeParser;  use Apache::loncoursedata;
 use GDBM_File;  use Apache::lonhtmlcommon;
 use Benchmark;  use Apache::lonproblemanalysis();
   use Apache::lonsubmissiontimeanalysis();
 # -------------------------------------------------------------- Module Globals  use Apache::lonproblemstatistics();
 my %hash;  use Apache::lonstudentassessment();
 my %CachData;  use Apache::lonpercentage;
 my %GraphDat;  use Apache::lonmysql;
 my %maps;  use Apache::lonlocal;
 my %section;  use Time::HiRes;
 my %StuBox;  
 my %DiscFac;  #######################################################
 my $CurMap;  #######################################################
 my $CurSec;  
 my $CurStu;  =pod
 my @cols;  
 my @list;  =item Package Variables
 my @students;  
 my $p_count;  =item @FullClasslist The full classlist
 my $Pos;  
 my $r;  =item @Students The students we are concerned with for this invocation
 my $OpSel1;  
 my $OpSel2;  =item @Sections The sections available in this class
 my $OpSelDis1;  
 my $OpSelDis2;  =item $curr_student The student currently being examined
 my $CurDis=0;  
 my $OpSel3;  =item $prev_student The student previous in the classlist
 my $OpSel4;  
 my $GData;  =item $next_student The student next in the classlist
 my $cid;  
 my $firstres;  =over
 my $lastres;  
 my $DiscFlag=0;  =cut 
   
 my %Header = (0,"Problem Title",1,"#Stdnts",2,"Tries",3,"Mod",  #######################################################
               4,"Mean",5,"#YES",6,"#yes",7,"%Wrng",8,"S.D.",  #######################################################
               9,"Skew.",10,"DoDiff",11,"Map");  #
 #             9,"Skew.",10,"DoDiff",11,"Dis.F.",12,"Resourse URL");  # Classlist variables
   #
 my %class = ();  my $curr_student;
   my $prev_student;
 my @LS;  my $next_student;
 my @LF;  
   #######################################################
 sub GetBin {  #######################################################
     my ($Index1,$Index2,$String,$C)=@_;  
     my @step = 5;  =pod
     my @L=($C eq 'S') ? @LS : @LF;  
     my $Count=$#L+1;  =item &clear_classlist_variables()
     $r->print("<br>zone   $C ------ $String ");  
     for(my $n=0;$n<$Count;$n++){    undef the following package variables:
  my @t=split(/\:/,$L[$n]);  
         $r->print("<br>$t[$Index1] $t[$Index2]");  =over
     }  
 }  =item @FullClasslist
   
 sub GetUniqe {  =item @Students
     my ($Index,$String,$C)=@_;  
     my @step = 5;  =item @Sections
     my @L=($C eq 'S') ? @LS : @LF;  
     my $Count=$#L+1;  =item @SelectedSections
     my @List=();  
     for(my $n=0;$n<$Count;$n++){    =item %StudentData
  my @t=split(/\:/,$L[$n]);  
  push(@List,$t[$Index]);  =item @StudentDataOrder
         #$r->print("<br>$t[$Index]");  
     }  =item @SelectedStudentData
     @List = sort NumSort(@List);  
   =item $curr_student
     $r->print("<br>zone   $C ------ $String ");  
     my $nIdx=0;  =item $prev_student
     my $nPrb=0;  
     my %Proc;  =item $next_student
     undef %Proc;  
     while ( $nIdx < $Count ) {  =back
  my $Focus=$List[$nIdx];  
  my $Temp = $Focus;  =cut
  do {  
     $nIdx++;  #######################################################
     $nPrb++;  #######################################################
     $Focus=$List[$nIdx];  sub clear_classlist_variables {
     #$Proc{$name}=$Focus;      undef(@FullClasslist);
  } while ( $Focus == $Temp && $nIdx < $Count );      undef(@Students);
         $r->print("<br>$Temp --> $nPrb");      undef(@Sections);
  $nPrb=0;      undef(@SelectedSections);
     }      undef(%StudentData);
     return %Proc;      undef(@SelectedStudentData);
 }      undef($curr_student);
       undef($prev_student);
 sub GetUniq {      undef($next_student);
     my ($Index,$String)=@_;  
     my @step = 5;  
     my $Count=0;  
     my @List=();  
     my @temp=();  
     foreach (keys(%DiscFac)){    
  $Count++;  
  my @temp1=split(/\:/,$_);  
         @temp=($temp1[$Index],@temp1);  
  push(@List,join(':',@temp));  
     }  
     @List = sort NumericSort(@List);  
   
     $r->print("<br><br>zone ($Index) ------ $String ----- / $temp[3]");  
     my $nIdx=0;  
     my $nPrb=0;  
     my %Proc;  
     undef %Proc;  
     while ( $nIdx < $Count ) {  
  my ($Focus,$Dummy,$name)=split(/\:/,$List[$nIdx]);  
  my $Temp = $Focus;  
  $Proc{$name}=$Focus;  
  do {  
     $nIdx++;  
     $nPrb++;  
     ($Focus,$Dummy,$name)=split(/\:/,$List[$nIdx]);  
     $Proc{$name}=$Focus;  
  } while ( $Focus == $Temp && $nIdx < $Count );  
         $r->print("<br>$Temp --> $nPrb");  
  $nPrb=0;  
     }  
     return %Proc;  
 }  
   
 sub NumericSort {            
     $a <=> $b;  
 }  
   
   
 #------- Classification    
 sub Classify {  
     my $Count=0;  
     my @List=();  
 #    foreach(keys %class){  
 #        $r->print("<br>$_ --> $class{$_}");  
 #    }  
    # $DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.  
             #          $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;  
     @LS=();  
     @LF=();  
     my $cf=0;  
     my $cs=0;  
     foreach (keys(%DiscFac)){    
  my @l=split(/\:/,$_);  
  if ($class{$l[1]}){  
     if( $class{$l[1]} == 4 ) {  
  $cs++;  
  push(@LS,('S:'.$l[6].':'.$l[0].':'.$l[5].':'.$l[4].':'.$l[3].':'.$class{$l[1]}));  
     }      
     elsif ( $class{$l[1]} < 3 ) {  
  $cf++;  
  push(@LF,('F:'.$l[6].':'.$l[0].':'.$l[5].':'.$l[4].':'.$l[3].':'.$class{$l[1]}));  
     }  
  }  
     }  
       
     $r->print("<br>zone successful");  
     for(my $n=0;$n<$cs;$n++){  
  $r->print('<br>'.$LS[$n]);  
     }  
   
     $r->print("<br>zone failed");  
     for(my $n=0;$n<$cf;$n++){  
  $r->print('<br>'.$LF[$n]);  
     }  
    
 #    my %Disc = &GetUniqe(@List,5,"Discrimination Factor");      
 #    my %Opnd = &GetUniq(@List,3,"Total Opened");  
 #    my %Trys = &GetUniq(@Lsit4,"Total Tries");  
 #    my %Slvd = &GetUniq(5,"Problems Solved");  
   
    # my (@L, $Index,$String)=@_;  
     my %Time = &GetUniqe(1,"Time",'S');  
     &GetUniqe(1,"Time",'F');  
     &GetUniqe(2,"Discrimination Factor",'S');      
     &GetUniqe(2,"Discrimination Factor",'F');  
     &GetUniqe(3,"Solved",'S');  
     &GetUniqe(3,"Solved",'F');  
     &GetUniqe(4,"Tries",'S');  
     &GetUniqe(4,"Tries",'F');      
   
     &GetBin(1,2, "  Time ... Discriminat",'S');  
     &GetBin(1,2, "  Time ... Discriminat",'F');  
     &GetBin(1,3, "  Time ... Solved",'S');  
     &GetBin(1,3, "  Time ... Solved",'F');  
     &GetBin(1,4, "  Time ... Tries",'S');  
     &GetBin(1,4, "  Time ... Tries",'F');  
     &GetBin(2,3, "  Discriminant ... Solved",'S');  
     &GetBin(2,3, "  Discriminant ... Solved",'F');  
     &GetBin(2,4, "  Discriminant ... Tries",'S');  
     &GetBin(2,4, "  Discriminant ... Tries",'F');  
     &GetBin(3,4, "  Solved ... Tries",'S');  
     &GetBin(3,4, "  solved ... Tries",'F');  
 #    foreach (keys(%Disc)) {  
 #        $r->print("<br>: $Disc{$_} --> $Slvd{$_}");  
  #   }   
  #   $r->print("<br>..........Discriminant ...  Time................");  
  ##   foreach (keys(%Disc)) {  
  #       $r->print("<br>$Disc{$_} --> $Time{$_}");  
   #  }   
   #  $r->print("<br>..........Time ...  Solved.......................");  
   #  foreach (keys(%Disc)) {  
   #      $r->print("<br>$Disc{$_} --> $Slvd{$_}");  
   #  }    
 }  
   
 #------- Processing upperlist and lowerlist according to each problem  
 sub ProcessDisc {  
     my @List = @_;  
     @List = sort (@List);  
     my $Count = $#List+1;  
     my $Prb;  
     my @Dis;  
     my $Slvd=0;  
     my $tmp;  
     my $Sum=0;  
     my $nIdx=0;  
     my $nStud=0;  
     my %Proc;  
     undef %Proc;  
     while ($nIdx<$Count) {  
  ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
  @Dis=split(/\+/,$tmp);  
  my $Temp = $Prb;  
  do {  
     $nIdx++;  
     $nStud++;  
     $Sum += $Dis[$CurDis];  
     ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
     @Dis=split(/\+/,$tmp);  
  } while ( $Prb eq $Temp && $nIdx < $Count );  
 # $Proc{$Temp}=$Sum.':'.$nStud;  
  $Proc{$Temp}=($Sum/$nStud).':'.$nStud;  
 #        $r->print("$nIdx) $Temp --> ($nPrb) $Proc{$Temp} <br>");  
  $Sum=0;  
  $nStud=0;  
     }  
     return %Proc;  
 }  
   
 #------- Creating Discimination factor table    
 sub DiscriminationTable {  
     my $Count=0;  
     foreach (keys(%DiscFac)){   
  $Count++;  
     }  
     my $UpCnt = int(0.27*$Count);  
     $r->print("<br><br>".  
               "Current map: <b>\"$CurMap\"</b> &nbsp;&nbsp;&nbsp; ".  
               "Current Section: <b>\"$CurSec\" </b>&nbsp;&nbsp;&nbsp;".  
               "Number of valid students: <b>$Count</b>".  
               "<br>The <b>Upper 27%</b> has <b>$UpCnt</b> records.".  
               "&nbsp;&nbsp;The <b>Lower 27%</b> has <b>$UpCnt</b> records <br>".  
               "The Criterion of sorting the students: ".   
               "<b>( Sum of Partial Credits Awarded / ".  
               "Total Number of Tries )</b>".  
               " <br><br>");  
     $r->rflush();  
     my $low=0;  
     my $up=$Count-$UpCnt;  
     my @UpList=();  
     my @LowList=();  
     $Count=0;  
     foreach my $key (sort(keys(%DiscFac))){   
  $Count++;      
 #        $r->print("$Count) $key <br>");  
   
  if ($low < $UpCnt || $Count > $up) {  
     $low++;  
     my $str=$DiscFac{$key};  
 #            $r->print("$Count) $str <br>");  
     foreach(split(/\:/,$str)){  
  if ($_) {  
     if ($low<$UpCnt){push(@LowList,$_);}  
     else {push(@UpList,$_);}  
  }  
     }  
  }  
     }  
   
     my %Up=&ProcessDisc(@UpList);  
     my %Low=&ProcessDisc(@LowList);  
   
     my @list = ();  
     my $Useful;  
     my $UnUseful;  
     $p_count = 0;  
   
     foreach my $key( keys %CachData) {   
  my @Temp=split(/\:/,$CachData{$key});  
  ($UnUseful,$Useful)=split(/\>/,$Temp[0]);     
  $list[$p_count]=$Useful.'&'.$CachData{$key};  
         $p_count++;  
     }  
   
     @list = sort MySort (@list);  
   
     my $Result = "\n".'<table border=2>';  
     $Result .= "\n".'<tr><th>P#</th>';   
     $Result .= "\n".'<th>'.$Header{0}.'</th>';  
     $Result .= "\n".'<th>'.'Discrimination Factor'.'</th>';  
     $Result .= "\n".'<th>'.'%Upper Award'.'</th>';  
     $Result .= "\n".'<th>'.'%Lower Award'.'</th>';  
     $Result .= "\n".'<th>'.'Upper Records'.'</th>';  
     $Result .= "\n".'<th>'.'Lower Records'.'</th>';  
     $Result .= "\n".'<th>'.'%Degree of Difficulty'.'</th>';  
     $Result .= "\n".'</tr>';      
     $r->print( $Result );  
   
     for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
  my( $Pre, $Post ) = split(/\&/,$list[$nIdx]);   
  my ($Temp,$MxTries,$StdNo,$TotalTries,$YES,$Override,  
             $Wrng,$Avg,$SD,$Sk,$DoD,$res,$Prob)=split(/\:/,$Post);  
  my ($UpDis,$UpNo)=split(/\:/,$Up{$Prob});  
  my ($LwDis,$LwNo)=split(/\:/,$Low{$Prob});  
  $UpNo = ($UpNo) ? $UpNo : 0;  
  $LwNo = ($LwNo) ? $LwNo : 0;  
  my $U_Dis = sprintf("%.4f", $UpDis)*100;  
  my $L_Dis = sprintf("%.4f", $LwDis)*100;  
  my $DisFac = $UpDis - $LwDis;  
  my $_Dis = sprintf("%.4f", $DisFac)*100;  
         $r->print( "\n".'<tr>'.  
                    "\n".'<td>'.($nIdx+1).'</td>'.  
                    "\n".'<td>'.$Temp.'</td>'.  
                    "\n".'<td>'.$_Dis.'</td>'.  
                    "\n".'<td>'.$U_Dis.'</td>'.  
                    "\n".'<td>'.$L_Dis.'</td>'.  
                    "\n".'<td>'.$UpNo.'</td>'.  
                    "\n".'<td>'.$LwNo.'</td>'.  
                    "\n".'<td>'.($DoD).'</td>'.  
                    "\n".'</tr>' );  
     }   
     $r->print("\n".'</table>');  
     $r->rflush();  
 }  }
   
 sub CreateDiscFac {  #######################################################
   #######################################################
   
   =pod
   
   =item &PrepareClasslist()
   
   Build up the classlist information.  The classlist information is kept in
   the following package variables:
   
   =over
   
   =item @FullClasslist
   
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  =item @Students
                   "_$ENV{'user.domain'}_$cid\_statistics.db";  
     my $CachDisFac = "/home/httpd/perl/tmp/$ENV{'user.name'}".  =item @Sections
      "_$ENV{'user.domain'}_$cid\_DiscFactor.db";  
   =item @SelectedSections
     my $ptr='';  
 #    $ptr .= '<br><b> Discrimination Criterion: &nbsp; </b>'."\n".  =item %StudentData
 #            '<select name="DisType"> <option '.$OpSelDis1.'>  Total Numebr of Correct Answers </option>'."\n".  
 #    '<option '.$OpSelDis2.'></option>Sum of Partial Awarded Credits / Total Number of Tries  </select> '."\n";            =item @SelectedStudentData
     $ptr .= '<br><input type="submit" name="sort" '.  
             'value="Recalculate Discrimintion Factor" />';  =item $curr_student
     $r->print($ptr);  
   =item $prev_student
     if ((-e "$CacheDB")&&  
          ($ENV{'form.sort'} ne 'Recalculate Discrimintion Factor')) {  =item $next_student
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
             tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_READER,0640);  =back
             #&DiscriminationTable();  
     &Classify();   $curr_student, $prev_student, and $next_student may not be defined, depending
         }   upon the calling context.
         else {$r->print("Unable to tie hash to db file");}  
     }  =cut
     else {  
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {  #######################################################
     tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_WRCREAT,0640);  #######################################################
     foreach (keys %CachData) {delete $CachData{$_};}  sub PrepareClasslist {
     foreach (keys %DiscFac) {delete $DiscFac{$_};}      my %Sections;
     $DiscFlag=1;      &clear_classlist_variables();
     &Build_Statistics();      #
     $DiscFlag=0;      # Retrieve the classlist
             &DiscriminationTable();       my $cid  = $ENV{'request.course.id'};
  }      my $cdom = $ENV{'course.'.$cid.'.domain'};
         else {$r->print("Unable to tie hash to db file");}      my $cnum = $ENV{'course.'.$cid.'.num'};
     }      my ($classlist,$field_names) = &Apache::loncoursedata::get_classlist($cid,
     untie(%CachData);                                                                    $cdom,$cnum);
     untie(%DiscFac);      if (exists($ENV{'form.Section'})) {
 }              if (ref($ENV{'form.Section'})) {
               @SelectedSections = @{$ENV{'form.Section'}};
           } elsif ($ENV{'form.Section'} !~ /^\s*$/) {
 # ------ Create different Student Report               @SelectedSections = ($ENV{'form.Section'});
 sub StudentReport {          }
     my ($sname,$sdom)=@_;      }
     if ( $sname eq 'All Students' ) {      @SelectedSections = ('all') if (! @SelectedSections);
  $r->print( '<h3><font color=blue>WARNING:       foreach (@SelectedSections) {
                     Please select a student</font></h3>' );          if ($_ eq 'all') {
  return;              @SelectedSections = ('all');
     }          }
     my $shome=&Apache::lonnet::homeserver( $sname,$sdom );                }
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$cid,$shome );      #
     my %result = ();      # Deal with instructors with restricted section access
     my $ResId;      if ($ENV{'request.course.sec'} !~ /^\s*$/) {
     my $Code;          @SelectedSections = ($ENV{'request.course.sec'});
     my $Tries;      }
     my $TotalTries = 0;      #
     my $ParCr = 0;      # Set up %StudentData
     my $Wrongs;      @StudentDataOrder = qw/fullname username domain id section status/;
     my %TempHash;      foreach my $field (@StudentDataOrder) {
     my $Version;          $StudentData{$field}->{'title'} = $field;
     my $LatestVersion;          $StudentData{$field}->{'base_width'} = length($field);
     my $PtrTry='';          $StudentData{$field}->{'width'} = 
     my $PtrCod='';                                 $StudentData{$field}->{'base_width'};
     my $SetNo=0;      }
     my $Str = "\n".'<table border=2>'.      #
               "\n".'<tr>'.      # get the status requested
               "\n".'<th> # </th>'.      my $requested_status = 'Active';
       "\n".'<th> Set Title </th>'.      $requested_status = $ENV{'form.Status'} if (exists($ENV{'form.Status'}));
       "\n".'<th> Results </th>'.      #
       "\n".'<th> Tries </th>'.      # Process the classlist
       "\n".'</tr>';      while (my ($student,$student_data) = each (%$classlist)) {
     unless ($reply=~/^error\:/) {          my $studenthash = ();
         map {          for (my $i=0; $i< scalar(@$field_names);$i++) {
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));              my $field = $field_names->[$i];
             $result{$name}=$value;              # Store the data
         } split(/\&/,$reply);;              $studenthash->{$field}=$student_data->[$i];
         foreach $ResId (@cols) {              # Keep track of the width of the fields
     if ( !$ResId ) {              next if (! exists($StudentData{$field}));
  my $Set=&Apache::lonnet::declutter($hash{'map_id_'.$1});              my $length = length($student_data->[$i]);
  if ( $Set ) {              if ($StudentData{$field}->{'width'} < $length) {
     $SetNo++;                  $StudentData{$field}->{'width'} = $length; 
     $Str .= "\n"."<tr>".              }
     "\n"."<td> $SetNo </td>".          }
                             "\n"."<td> $Set </td>".          push (@FullClasslist,$studenthash);
                             "\n"."<td> $PtrCod </td>".          #
                             "\n"."<td> $PtrTry</td>".          # Build up a list of sections
                             "\n"."</tr>";          my $section = $studenthash->{'section'};
  }          if (! defined($section) || $section =~/^\s*$/ || $section == -1) {
  $PtrTry='';              $studenthash->{'section'} = 'none';
  $PtrCod='';              $section = $studenthash->{'section'};
  next;           }
     }          $Sections{$section}++;
             $ResId=~/(\d+)\.(\d+)/;          #
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );          # Only put in the list those students we are interested in
             if ( $CurMap ne 'All Maps' ) {          foreach my $sect (@SelectedSections) {
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);              if ( (($sect eq 'all') || 
  if ( $Map ne $ResMap ) { next; }                    ($section eq $sect)) &&
     }                   (($studenthash->{'status'} eq $requested_status) || 
     my $meta=$hash{'src_'.$ResId};                    ($requested_status eq 'Any')) 
     my $PartNo = 0;                   ){
     undef %TempHash;                  push (@Students,$studenthash);
     map {                  last;
  if ($_=~/^stores\_(\d+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = '-';    
  $PartNo++;  
     }  
  }  
             } split(/\,/,&Apache::lonnet::metadata($meta,'keys'));  
   
             my $Prob = $Map.'___'.$2.'___'.  
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
             $Code='U';  
             $Tries = 0;  
             $Wrongs = 0;  
      $LatestVersion = $result{"version:$Prob"};         
   
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  
     my $vkeys = $result{"$Version:keys:$Prob"};  
     my @keys = split(/\:/,$vkeys);  
     
     foreach my $Key (@keys) {    
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {  
     my $Part = $1;  
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};  
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;   
     $TotalTries += $Tries;  
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};  
     if ( $Val eq 'correct_by_student' )  
                                 { $Wrongs = $Tries - 1; $Code = 'Y'; }   
     elsif ( $Val eq 'correct_by_override' )  
                                 { $Wrongs = $Tries - 1; $Code = 'y'; }                          
     elsif ( $Val eq 'incorrect_attempted' ||   
                                 $Val eq 'incorrect_by_override' )  
                 { $Wrongs = $Tries; $Code = 'N'; }  
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }   
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "$TempHash{$part.'.Tries'}";  
                     $PtrCod .= "$TempHash{$part.'.Code'}";      
  }  
             }              }
     else {   
  for(my $n=0; $n<$PartNo; $n++) {   
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "0";  
                     $PtrCod .= "-";   
  }  
     }  
         }          }
     }      }
     $Str .= "\n".'</table>';      #
     $r->print($Str);      # Put the consolidated section data in the right place
     $r->rflush();      if ($ENV{'request.course.sec'} !~ /^\s*$/) {
           @Sections = ($ENV{'request.course.sec'});
       } else {
           @Sections = sort {$a cmp $b} keys(%Sections);
           unshift(@Sections,'all'); # Put 'all' at the front of the list
       }
       #
       # Sort the Students
       my $sortby = 'fullname';
       $sortby = $ENV{'form.sort'} if (exists($ENV{'form.sort'}));
       my @TmpStudents = sort { $a->{$sortby} cmp $b->{$sortby} ||
                                $a->{'fullname'} cmp $b->{'fullname'} } @Students;
       @Students = @TmpStudents;
       # 
       # Now deal with that current student thing....
       $curr_student = undef;
       if (exists($ENV{'form.SelectedStudent'})) {
           my ($current_uname,$current_dom) = 
               split(':',$ENV{'form.SelectedStudent'});
           my $i;
           for ($i = 0; $i<=$#Students; $i++) {
               next if (($Students[$i]->{'username'} ne $current_uname) || 
                        ($Students[$i]->{'domain'}   ne $current_dom));
               $curr_student = $Students[$i];
               last; # If we get here, we have our student.
           }
           if (defined($curr_student)) {
               if ($i == 0) {
                   $prev_student = undef;
               } else {
                   $prev_student = $Students[$i-1];
               }
               if ($i == $#Students) {
                   $next_student = undef;
               } else {
                   $next_student = $Students[$i+1];
               }
           }
       }
       #
       if (exists($ENV{'form.StudentData'})) {
           if (ref($ENV{'form.StudentData'}) eq 'ARRAY') {
               @SelectedStudentData = @{$ENV{'form.StudentData'}};
           } else {
               @SelectedStudentData = ($ENV{'form.StudentData'});
           }
       } else {
           @SelectedStudentData = ('username');
       }
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               @SelectedStudentData = ('all');
               last;
           }
       }
       #
       return;
 }  }
   
   
   #######################################################
   #######################################################
   
   =pod
   
   =item get_students
   
   Returns a list of the selected students
   
 # ------------------------------------------- Prepare Statistics Table  =cut
 sub PreStatTable {  
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  #######################################################
                   "_$ENV{'user.domain'}_$cid\_statistics.db";  #######################################################
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  sub get_students {
                   "_$ENV{'user.domain'}_$cid\_graph.db";      if (! @Students) {
     my $CachDisFac = "/home/httpd/perl/tmp/$ENV{'user.name'}".          &PrepareClasslist()
      "_$ENV{'user.domain'}_$cid\_DiscFactor.db";  
     $r->print('<br><input type="submit" name="sort" value="Recalculate Statistics" />');  
   
     my $Ptr = '';  
   
     $Ptr .= '<br><b> Sorting Type: &nbsp; </b>'."\n".  
             '<select name="order"> <option '.$OpSel1.' >Ascending</option>'."\n".  
     '<option '.$OpSel2.'>Descending</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="DoDiff Graph" />'."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="%Wrong Graph" />'."\n";  
   
     $Ptr .= '<pre>'.  
     '  #Stdnts: Total Number of Students opened the problem.<br>'.   
     '  Tries  : Total Number of Tries for solving the problem.<br>'.   
     '  Mod    : Maximunm Number of Tries for solving the problem.<br>'.   
     '  Mean   : Average Number of the tries. [ Tries / #Stdns ]<br>'.  
     '  #YES   : Number of students solved the problem correctly.<br>'.   
     '  #yes   : Number of students solved the problem by override.<br>'.  
     '  %Wrng  : Percentage of students tried to solve the problem but still incorrect. [ 100*((#Stdnts-(#YES+#yes))/#Stdnts) ]<br>'.  
     '  S.D.   : Standard Deviation of the tries.[ sqrt(sum((Xi - Mean)^2)) / (#Stdnts-1) where Xi is every student\'s tries ]<br>'.  
     '  Skew.  : Skewness of the students tries. [ (sqrt( sum((Xi - Mean)^3) / #Stdnts)) / (S.D.^3) ]<br>'.  
 #    '  DoDiff : Degree of Difficulty of the problem. [ Tries/(#YES+#yes+0.1) ]<br>'.  
     '  DoDiff : Degree of Difficulty of the problem. [ 1 - ((#YES+#yes) / Tries) ]<br>'.  
 #    '  Dis.F. : Discrimination Factor. [ Sum of Partial Credits Awarded / Total Number of Tries in %27 upper and lower students]</b>'.  
             '</pre>';  
   
     $r->print($Ptr);  
     $r->rflush();  
         
     my $Result = "\n".'<table border=2>';  
     $Result .= '<tr><th>P#</th>'."\n";  
     for ( my $nIdx=0; $nIdx < 12; $nIdx++ ) {   
  $Result .= '<th>'.'<input type="submit" name="sort" value="'.  
                    $Header{$nIdx}.'" />'.'</th>'."\n";  
     }      }
     $Result .= "\n".'</tr>'."\n";          return @Students;
     $r->print( $Result );  }
     $r->rflush();  
   #######################################################
   #######################################################
   
   =pod
   
   =item &current_student()
   
   Returns a pointer to a hash containing data about the currently
   selected student.
   
   =cut
   
   #######################################################
   #######################################################
   sub current_student { 
       return $curr_student;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &previous_student()
   
   Returns a pointer to a hash containing data about the student prior
   in the list of students.  Or something.  
   
   =cut
   
   #######################################################
   #######################################################
   sub previous_student { 
       return $prev_student;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &next_student()
   
   Returns a pointer to a hash containing data about the next student
   to be viewed.
   
   =cut
   
   #######################################################
   #######################################################
   sub next_student { 
       return $next_student;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &clear_sequence_variables()
   
   =cut
   
   #######################################################
   #######################################################
   sub clear_sequence_variables {
       undef($top_map);
       undef(@Sequences);
       undef(@Assessments);
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &SetSelectedMaps($elementname)
   
   Sets the @SelectedMaps array from $ENV{'form.'.$elementname};
   
   =cut
   
   #######################################################
   #######################################################
   sub SetSelectedMaps {
       my $elementname = shift;
       if (exists($ENV{'form.'.$elementname})) {
           if (ref($ENV{'form.'.$elementname})) {
               @SelectedMaps = @{$ENV{'form.'.$elementname}};
           } else {
               @SelectedMaps = ($ENV{'form.'.$elementname});
           }
       } else {
           @SelectedMaps = ('all');
       }
   }
   
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &Sequences_with_Assess()
   
   Returns an array containing the subset of @Sequences which contain
   assessments.
   
   =cut
   
     if ((-e "$CacheDB")&&($ENV{'form.sort'} ne 'Recalculate Statistics')) {  #######################################################
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  #######################################################
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  sub Sequences_with_Assess {
     &Cache_Statistics();      my @Sequences_to_Show;
         }      foreach my $map_symb (@SelectedMaps) {
         else {          foreach my $sequence (@Sequences) {
     $r->print("Unable to tie hash to db file");              next if ($sequence->{'symb'} ne $map_symb && $map_symb ne 'all');
         }              next if ($sequence->{'num_assess'} < 1);
     }              push (@Sequences_to_Show,$sequence);
     else {          }
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {      }
     tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_WRCREAT,0640);      return @Sequences_to_Show;
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  }
     foreach (keys %DiscFac) {delete $CachData{$_};}  
     foreach (keys %CachData) {delete $CachData{$_};}  #######################################################
     $DiscFlag=0;  #######################################################
     &Build_Statistics();  
  }  =pod
         else {  
     $r->print("Unable to tie hash to db file");  =item &PrepareCourseData($r)
         }  
     }  =cut
     #$r->print('Total instances of the problems : '.($p_count*($#students+1)));  
   #######################################################
     untie(%CachData);  #######################################################
     untie(%GraphDat);  sub PrepareCourseData {
     untie(%DiscFac);      my ($r) = @_;
       &clear_sequence_variables();
     $r->print("\n".'</table>'."\n");      my ($top,$sequences,$assessments) = 
     $r->rflush();                  &Apache::loncoursedata::get_sequence_assessment_data();
 }      if (! defined($top) || ! ref($top)) {
           # There has been an error, better report it
           &Apache::lonnet::logthis('top is undefined');
 # ------------------------------------- Find the section of student in a course          return;
       }
 sub usection {      $top_map = $top if (ref($top));
     my ($udom,$unam,$courseid)=@_;      @Sequences = @{$sequences} if (ref($sequences) eq 'ARRAY');
     $courseid=~s/\_/\//g;      @Assessments = @{$assessments} if (ref($assessments) eq 'ARRAY');
     $courseid=~s/^(\w)/\/$1/;      #
     map {      # Compute column widths
         my ($key,$value)=split(/\=/,$_);      foreach my $seq (@Sequences) {
         $key=&Apache::lonnet::unescape($key);          my $name_length = length($seq->{'title'});
         if ($key=~/^$courseid(?:\/)*(\w+)*\_st$/) {          my $num_parts = $seq->{'num_assess_parts'};
             my $section=$1;          #
             if ($key eq $courseid.'_st') { $section=''; }          # Use 3 digits for each the sum and total, which means 7 total...
     my ($dummy,$end,$start)=split(/\_/,&Apache::lonnet::unescape($value));          my $num_col = $num_parts+7;
             $section=($section) ? $section : '(none)';          if ($num_col < $name_length) {
             $section=(int($section)) ? int($section) : $section;              $num_col = $name_length;
 #            $r->print($unam.'...'.$section.'<br>');          }
     return $section;          $seq->{'base_width'} = $name_length;
         }          $seq->{'width'} = $num_col;
     } split(/\&/,&Apache::lonnet::reply('dump:'.$udom.':'.$unam.':roles',      }
                         &Apache::lonnet::homeserver($unam,$udom)));      return;
     return '';  }
 }  
   #######################################################
   #######################################################
 # ------ Dump the Student's DB file and handling the data for statistics table   
   =pod
 sub ExtractStudentData {  
     my ($student,$coid)=@_;  =item &log_sequence($sequence,$recursive,$padding)
     my ($sname,$sdom) = split( /\:/, $student );  
     my $shome=&Apache::lonnet::homeserver( $sname,$sdom );            Write data about the sequence to a logfile.  If $recursive is not
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$coid,$shome );  undef the data is written recursively.  $padding is used for recursive
     my %result = ();  calls.
     my $ResId;  
     my $Dis = '';  =cut
     my $Code;  
     my $Tries;  #######################################################
     my $ParCr;  #######################################################
     my $TotalTries = 0;  sub log_sequence {
     my $TotalOpend = 0;      my ($seq,$recursive,$padding) = @_;
     my $ProbSolved = 0;      $padding = '' if (! defined($padding));
     my $ProbTot = 0;      if (ref($seq) ne 'HASH') {
     my $TimeTot = 0;          &Apache::lonnet::logthis('log_sequence passed bad sequnce');
     my $TotParCr = 0;          return;
     my $Wrongs;      }
     my %TempHash;      &Apache::lonnet::logthis($padding.'sequence '.$seq->{'title'});
     my $Version;      while (my($key,$value) = each(%$seq)) {
     my $LatestVersion;          next if ($key eq 'contents');
     my $SecLimit;          if (ref($value) eq 'ARRAY') {
     my $MapLimit;              for (my $i=0;$i< scalar(@$value);$i++) {
     unless ($reply=~/^error\:/) {                  &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
         map {                                           $value->[$i]);
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));  
             $result{$name}=$value;  
 #$r->print($name.'='.$value.'<br>');  
         } split(/\&/,$reply);  
         foreach $ResId (@cols) {  
     if ( !$ResId ) { next; }  
             $ResId=~/(\d+)\.(\d+)/;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     $Dis .= ':';  
     undef %TempHash;  
     map {  
  if ($_=~/^stores\_(\d+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = 'U';    
  $PartNo++;  
     }  
  }  
             } split(/\,/,&Apache::lonnet::metadata($meta,'keys'));  
   
             my $Prob = $Map.'___'.$2.'___'.  
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
             $Code='U';  
             $Tries = 0;  
     $ParCr = 0;  
             $Wrongs = 0;  
      $LatestVersion = $result{"version:$Prob"};         
   
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  
     my $vkeys = $result{"$Version:keys:$Prob"};  
     my @keys = split(/\:/,$vkeys);  
     
     foreach my $Key (@keys) {    
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {  
     my $Part = $1;  
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};  
     $ParCr = $result{"$Version:$Prob:resource.$Part.awarded"};  
     my $Time = $result{"$Version:$Prob:timestamp"};  
     $TempHash{"$Part.Time"} = ($Time) ? $Time : 0;  
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;  
     $TempHash{"$Part.ParCr"} = ($ParCr) ? $ParCr : 0;          
     $TotalTries += $TempHash{"$Part.Tries"};  
     $TotParCr += $TempHash{"$Part.ParCr"};  
 #$r->print($Version.'---'.$Prob.'==='.$Time.'<br>');  
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};  
     if ( $Val eq 'correct_by_student' )  
                                { $Wrongs = $Tries - 1; $Code = 'C'; }   
     elsif ( $Val eq 'correct_by_override' )  
                                { $Wrongs = $Tries - 1; $Code = 'O'; }                          
     elsif ( $Val eq 'incorrect_attempted' ||   
                                 $Val eq 'incorrect_by_override' )  
                { $Wrongs = $Tries; $Code = 'I'; }  
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }   
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     my $Yes = 0;  
                     if ( $TempHash{$part.'.Code'} eq 'C' ||  
                          $TempHash{$part.'.Code'} eq 'O'  )   
        {$ProbSolved++;$Yes=1;}      
     my $ptr = "$hash{'title_'.$ResId}";  
     if ( $PartNo > 1 ) {                  
  $ptr .= " (part $part)";  
  $Dis .= ':';  
     }  
     my $Fac = ($TempHash{"$part.Tries"}) ?   
                               ($TempHash{"$part.ParCr"}/$TempHash{"$part.Tries"}) : 0;  
     my $DisF;  
     if ( $Fac > 0 &&  $Fac < 1 ) {   
  $DisF = sprintf( "%.4f", $Fac );  
     }  
     else {$DisF = $Fac;}  
 #    $DisF .= '+'.$TempHash{"$part.Time"};  
     $TimeTot += $TempHash{"$part.Time"};  
     $Dis .= $ptr.'*'.$ResId.'='.$DisF.'+'.$Yes;  
     $ptr .= "*$ResId:$TempHash{$part.'.Tries'}".  
             ":$TempHash{$part.'.Wrongs'}".  
                             ":$TempHash{$part.'.Code'}";      
 #$r->print($sname.' -- '.$ptr.'--- timestamp='.$TempHash{"$part.Time"}.'<br>');  
     push (@list, $ptr);  
     $TotalOpend++;  
     $ProbTot++;  
  }  
             }              }
     else {           } else {
  for(my $n=0; $n<$PartNo; $n++) {              &Apache::lonnet::logthis($padding.$key.'='.$value);
     push (@list, "$hash{'title_'.$ResId}*$ResId:0:0:U");          }
     $ProbTot++;       }
  }      if (defined($recursive)) {
     }          &Apache::lonnet::logthis($padding.'-'x20);
         }          &Apache::lonnet::logthis($padding.'contains:');
  if ( $TotalTries ) {          foreach my $item (@{$seq->{'contents'}}) {
     my $DisFac = ( $TotalTries ) ? ($TotParCr/$TotalTries) : 0;              if ($item->{'type'} eq 'container') {
 #    my $DisFactor = int(sprintf( "%.4f", $DisFac ) * 100);                  &log_sequence($item,$recursive,$padding.'    ');
     my $DisFactor = sprintf( "%.4f", $DisFac );              } else {
     my $time;                  &Apache::lonnet::logthis($padding.'title = '.$item->{'title'});
     if ($ProbSolved){                  while (my($key,$value) = each(%$item)) {
  $time = int(($TimeTot/$ProbSolved)/10000000);                      next if ($key eq 'title');
     }                      if (ref($value) eq 'ARRAY') {
     $DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.                          for (my $i=0;$i< scalar(@$value);$i++) {
                       $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;                              &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
 #$r->print($DisFactor.$sname.'<br> --- Dis= '.$Dis.'<br>');                                                       $value->[$i]);
  }                          }
     }                      } else {
     #$r->print($sname.' PrCr= '.$TotParCr.' Slvd= '.$ProbSolved.' Tries='.$TotalTries.'<br>');                          &Apache::lonnet::logthis($padding.$key.'='.$value);
 }                      }
                   }
               }
 # ------------------------------------------------------------ Build page table          }
 sub tracetable {          &Apache::lonnet::logthis($padding.'end contents of '.$seq->{'title'});
     my ($rid,$beenhere)=@_;          &Apache::lonnet::logthis($padding.'-'x20);
     $rid=~/(\d+)\.(\d+)/;      }
     $maps{&Apache::lonnet::declutter($hash{'map_id_'.$1})}='';#$hash{'title_'.$rid};       return;
     unless ($beenhere=~/\&$rid\&/) {  }
        $beenhere.=$rid.'&';   
        if (defined($hash{'is_map_'.$rid})) {  
    my $cmap=$hash{'map_type_'.$hash{'map_pc_'.$hash{'src_'.$rid}}};  
            if ( $cmap eq 'sequence' || $cmap eq 'page' ) {   
                $cols[$#cols+1]=0;  
                #$maps{&Apache::lonnet::declutter($hash{'src_'.$rid})}=   
                #      $hash{'title_'.$rid};   
            }  
            if ((defined($hash{'map_start_'.$hash{'src_'.$rid}})) &&  
                (defined($hash{'map_finish_'.$hash{'src_'.$rid}}))) {  
               my $frid=$hash{'map_finish_'.$hash{'src_'.$rid}};  
   
                 &tracetable($hash{'map_start_'.$hash{'src_'.$rid}},  
                 '&'.$frid.'&');  
   
               if ($hash{'src_'.$frid}) {  
                  if ($hash{'src_'.$frid}=~  
                                  /\.(problem|exam|quiz|assess|survey|form)$/) {  
      $cols[$#cols+1]=$frid;  
                  }  
       }  
    }  
        } else {  
           if ($hash{'src_'.$rid}) {  
              if ($hash{'src_'.$rid}=~  
                                  /\.(problem|exam|quiz|assess|survey|form)$/) {  
          $cols[$#cols+1]=$rid;  
              }  
           }  
        }  
        if (defined($hash{'to_'.$rid})) {  
           map {  
               &tracetable($hash{'goesto_'.$_},$beenhere);  
           } split(/\,/,$hash{'to_'.$rid});  
        }  
     }  
 }  
   
 sub MySort {            
     if ( $Pos > 0 && $Pos < 11 ) {  
  if ($ENV{'form.order'} eq 'Descending') {$b <=> $a;}  
  else { $a <=> $b; }  
     }  
     else {  
  if ($ENV{'form.order'} eq 'Descending') {$b cmp $a;}  
  else { $a cmp $b; }  
     }  
 }  
   
 sub Build_Statistics {  
     $r->print(<<ENDPOP);  
 <script>  
     popwin=open('','popwin','width=400,height=100');  
     popwin.document.writeln('<html><body bgcolor="#8cee8c">'+  
       '<title>LON-CAPA Statistics</title>'+  
       '<h4>Computation Progress</h4>'+  
       '<form name=popremain>'+  
       '<input type=text size=35 name=remaining value=Starting></form>'+  
       '</body></html>');  
     popwin.document.close();  
 </script>  
 ENDPOP  
   
     $r->rflush();  ##############################################
 # ---------------------------- Gathering the Data of students' tries  ##############################################
     my $index;  
     for ($index=0;$index<=$#students;$index++) {  =pod 
 #----------- update progress  
         $r->print('<script>popwin.document.popremain.remaining.value="'.  =item &StudentDataSelect($elementname,$status,$numvisible,$selected)
                   'Computing '.($index+1).'/'.($#students+1).': '.  
                   $students[$index].'";</script>');  Returns html for a selection box allowing the user to choose one (or more) 
         $r->rflush();  of the fields of student data available (fullname, username, id, section, etc)
   
   =over 4
   
   =item $elementname The name of the HTML form element
   
   =item $status 'multiple' or 'single' selection box
   
   =item $numvisible The number of options to be visible
   
         &ExtractStudentData($students[$index],$cid);  =back
   
   =cut
   
   ##############################################
   ##############################################
   sub StudentDataSelect {
       my ($elementname,$status,$numvisible)=@_;
       if ($numvisible < 1) {
           return;
     }      }
 #--------------------- close Progress Line      #
     $r->print('<script>popwin.close()</script>');      # Build the form element
     $r->rflush();       my $Str = "\n";
 # -------------------- sorting the Data      $Str .= '<select name="'.$elementname.'" ';
     @list = sort(@list);      if ($status ne 'single') {
     $OpSel2='';          $Str .= 'multiple="true" ';
     $OpSel1='selected';      }
           $Str .= 'size="'.$numvisible.'" >'."\n";
     $p_count = 0;       #
     my $nIdx = 0;      # Deal with 'all'
     my $dummy;       $Str .= '    <option value="all" ';
     my $p_val;      foreach (@SelectedStudentData) {
     my $ResId;          if ($_ eq 'all') {
     my $NoElements = $#list + 1;              $Str .= 'selected ';
 #-------------------------------- loop for data representation              last;
     while ( $nIdx < $NoElements ) {          }
         my %storestats=();      }
  my ($Prob,$Tries,$Wrongs,$Code)=split(/\:/,$list[$nIdx]);      $Str .= ">all</option>\n";
  my $Temp = $Prob;      #
  my $MxTries = 0;      # Loop through the student data fields
  my $TotalTries = 0;      foreach my $item (@StudentDataOrder) {
  my $YES = 0;          $Str .= '    <option value="'.$item.'" ';
  my $Incorrect = 0;          foreach (@SelectedStudentData) {
  my $Override = 0;              if ($item eq $_ ) {
  my $StdNo = 0;                  $Str .= 'selected ';
  my @StdLst;                   last;
  do {              }
     $nIdx++;          }
     $StdNo++;          $Str .= '>'.$item."</option>\n";
     $StdLst[ $StdNo ] = $Tries;  
     $TotalTries += $Tries;  
     if ( $MxTries < $Tries ) { $MxTries = $Tries; }   
     if ( $Code eq 'C' ){ $YES++; }  
     elsif( $Code eq 'I' ) { $Incorrect++; }  
     elsif( $Code eq 'O' ) { $Override++; }  
     elsif( $Code eq 'U' ) { $StdNo--; }  
     ($Prob,$Tries,$Wrongs,$Code)=split(/\:/,$list[$nIdx]);  
  } while ( $Prob eq $Temp && $nIdx < $NoElements );  
   
  $p_count++;  
   
  ($Temp,$ResId)=split(/\*/,$Temp);  
   
         $Temp = '<a href="'.$hash{'src_'.$ResId}.'" target="_blank">'.$Temp.'</a>';  
       
  my $res = &Apache::lonnet::declutter($hash{'src_'.$ResId});  
         my $urlres=$res;  
   
         $ResId=~/(\d+)\.(\d+)/;  
         my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
         $urlres=$Map;  
    
   
         $res = '<a href="'.$hash{'src_'.$ResId}.'">'.$res.'</a>';  
   
         #$Map = '<a href="'.$Map.'">'.$res.'</a>';  
   
 #------------------------ Compute the Average of Tries about one problem  
  my $Average = ($StdNo) ? $TotalTries/$StdNo : 0;  
   
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___timestamp'}=time;         
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___stdno'}=$StdNo;  
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___avetries'}=$Average;  
      
 #-------------------------------- Compute percentage of Wrong tries  
  my $Wrong = ( $StdNo ) ? 100 * ( $Incorrect / $StdNo ) : 0;  
   
 #-------------------------------- Compute Standard Deviation  
  my $StdDev = 0;   
  if ( $StdNo > 1 ) {  
     for ( my $n = 0; $n < $StdNo; $n++ ) {  
                 my $Dif = $StdLst[ $n ]-$Average;  
  $StdDev += $Dif*$Dif;  
     }   
     $StdDev /= ( $StdNo - 1 );  
     $StdDev = sqrt( $StdDev );  
  }  
   
 #-------------------------------- Compute Degree of Difficulty  
  my $DoDiff = 0;  
  if( $TotalTries > 0 ) {  
     $DoDiff = 1 - ( ( $YES + $Override ) / $TotalTries );  
 #    $DoDiff =  ($TotalTries)/($YES + $Override+ 0.1);      
  }  
          
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___difficulty'}=$DoDiff;  
   
 #-------------------------------- Compute the Skewness  
  my $Skewness = 0;  
         my $Sum = 0;   
  if ( $StdNo > 0 && $StdDev > 0 ) {  
     for ( my $n = 0; $n < $StdNo; $n++ ) {  
                 my $Dif = $StdLst[ $n ]-$Average;  
  $Skewness += $Dif*$Dif*$Dif;  
     }   
     $Skewness /= $StdNo;  
     $Skewness /= $StdDev*$StdDev*$StdDev;  
  }  
 #-----------------  Some restition in presenting the float numbers  
  my $Avg = sprintf( "%.2f", $Average );  
  my $Wrng = sprintf( "%.1f", $Wrong );  
  my $SD = sprintf( "%.1f", $StdDev );  
  my $DoD = sprintf( "%.2f", $DoDiff );  
  my $Sk = sprintf( "%.1f", $Skewness );  
       
  $CachData{($p_count-1)}=$Temp.':'.$StdNo.':'.$TotalTries.':'.  
                                 $MxTries.':'.$Avg.':'.$YES.':'.  
                                 $Override.':'.$Wrng.':'.$SD.':'.  
                                 $Sk.':'.$DoD.':'.$Map.':'.$Prob;  
   
         $urlres=~/^(\w+)\/(\w+)/;  
         if ($StdNo) {   
            &Apache::lonnet::put('resevaldata',\%storestats,$1,$2);   
         }  
   
 #-------------------------------- Row of statistical table  
         if ( $DiscFlag == 0 ) {  
     $r->print( "\n".'<tr>'.  
                "\n".'<td>'.$p_count.'</td>'.  
                "\n".'<td>'.$Temp.'</td>'.  
                "\n".'<td>'.$StdNo.'</td>'.  
                "\n".'<td>'.$TotalTries.'</td>'.  
                "\n".'<td>'.$MxTries.'</td>'.  
                "\n".'<td>'.$Avg.'</td>'.  
                "\n".'<td>'.$YES.'</td>'.  
                "\n".'<td>'.$Override.'</td>'.  
                "\n".'<td>'.$Wrng.'</td>'.  
                "\n".'<td>'.$SD.'</td>'.  
                "\n".'<td>'.$Sk.'</td>'.  
                "\n".'<td>'.$DoD.'</td>'.  
                "\n".'<td>'.$Map.'</td>'.  
                        "\n".'</tr>' );  
     $GraphDat{$nIdx}=$DoD.':'.$Wrng;  
  }   
     }  
 }  
   
   
 sub Cache_Statistics {  
     my @list = ();  
     my $Useful;  
     my $UnUseful;  
     my %myHeader = reverse( %Header );  
     $Pos = $myHeader{$ENV{'form.sort'}};  
     $p_count = 0;  
   
     foreach my $key( keys %CachData) {   
  my @Temp=split(/\:/,$CachData{$key});  
  if ( $Pos == 0 || $Pos == 11 ) {  
     ($UnUseful,$Useful)=split(/\>/,$Temp[$Pos]);  
  }  
  else {  
     $Useful = $Temp[$Pos];  
  }     
  $list[$p_count]=$Useful.'&'.$CachData{$key};  
         $p_count++;  
     }  
   
     @list = sort MySort (@list);  
   
     for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
  my( $Pre, $Post ) = split(/\&/,$list[$nIdx]);   
  my ($Temp,$StdNo,$TotalTries,$MxTries,$Avg,$YES,  
             $Override,$Wrng,$SD,$Sk,$DoD,$res,$Prob)=split(/\:/,$Post);  
  $r->print( "\n".'<tr>'.  
                "\n".'<td>'.($nIdx+1).'</td>'.  
                "\n".'<td>'.$Temp.'</td>'.  
                "\n".'<td>'.$StdNo.'</td>'.  
                "\n".'<td>'.$TotalTries.'</td>'.  
                "\n".'<td>'.$MxTries.'</td>'.  
                "\n".'<td>'.$Avg.'</td>'.  
                "\n".'<td>'.$YES.'</td>'.  
                "\n".'<td>'.$Override.'</td>'.  
                "\n".'<td>'.$Wrng.'</td>'.  
                "\n".'<td>'.$SD.'</td>'.  
                "\n".'<td>'.$Sk.'</td>'.  
                "\n".'<td>'.$DoD.'</td>'.  
                "\n".'<td>'.$res.'</td>'.  
                "\n".'</tr>' );  
  $GraphDat{$nIdx}=$DoD.':'.$Wrng;  
     }   
 }  
   
 # ------------------------------------------- Prepare data for Graphical chart  
   
 sub GetGraphData {  
     my $Tag = shift;  
     my $Col;  
     my $data='';  
     my $count = 0;  
     my $Max = 0;  
     my $cid=$ENV{'request.course.id'};  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     foreach (keys %GraphDat) {delete $GraphDat{$_};}  
     if (-e "$GraphDB") {  
  if (tie(%GraphDat,'GDBM_File',"$GraphDB",&GDBM_READER,0640)) {  
     if ( $Tag eq 'DoDiff Graph' ) {  
  $Tag = 'Degree-of-Difficulty';  
  $Col = 0;  
     }  
     else {  
  $Tag = 'Wrong-Percentage';  
  $Col = 1;  
     }  
     foreach (sort NumericSort keys %GraphDat) {   
  my @Temp=split(/\:/,$GraphDat{$_});  
                 my $inf = $Temp[$Col];   
  if ( $Max < $inf ) {$Max = $inf;}  
  $data .= $inf.',';  
  $count++;  
     }  
             untie(%GraphDat);  
     my $Course = $ENV{'course.'.$cid.'.description'};  
     $Course =~ s/\ /"_"/eg;  
     $GData=$Course.'&'.$Tag.'&'.$Max.'&'.$count.'&'.$data;  
   
  }  
  else {  
     $r->print("Unable to tie hash to db file");  
  }  
     }  
 }  
   
   
 sub initial {  
 # --------------------------------- Initialize the global varaibles  
   undef @students;  
   undef @cols;  
   undef %maps;  
   undef %section;  
   undef %StuBox;  
   undef @list;  
   undef %CachData;  
   undef %GraphDat;  
   undef %DiscFac;  
   undef $CurMap;  
   undef $CurSec;  
   undef $CurStu;  
   undef $p_count;  
   undef $Pos;  
   undef $GData;  
 }  
   
   
 sub ClassList {  
   
     &GetStatus();  
   
     $cid=$ENV{'request.course.id'};  
     my $chome=$ENV{'course.'.$cid.'.home'};  
     my ($cdom,$cnum)=split(/\_/,$cid);  
 # ----------------------- Get first and last resource, see if there is anything  
     $firstres=$hash{'map_start_/res/'.$ENV{'request.course.uri'}};  
     $lastres=$hash{'map_finish_/res/'.$ENV{'request.course.uri'}};  
     if (($firstres) && ($lastres)) {  
 # ----------------------------------------------------------------- Render page  
  my $classlst=&Apache::lonnet::reply  
                  ('dump:'.$cdom.':'.$cnum.':classlist',$chome);  
  my $StudNo = 0;  
  unless ($classlst=~/^error\:/) {  
     foreach (sort split(/\&/,$classlst)) {  
  my ($name,$value)=split(/\=/,$_);  
  my ($end,$start)=split(/\:/,&Apache::lonnet::unescape($value));  
  $name=&Apache::lonnet::unescape($name);  
  my ($sname,$sdom)=split(/\:/,$name);  
  my $ssec=&Apache::lonnet::usection($sdom,$sname,$cid);  
                 if ($ssec==-1) {next;}  
  $ssec=($ssec) ? $ssec : '(none)';  
  $ssec=(int($ssec)) ? int($ssec) : $ssec;  
  #$r->print($sname.'...'.$ssec.'<br>');  
  $section{$ssec}=$ssec;  
  if ($CurSec eq 'All Sections' || $ssec eq $CurSec) {  
     $students[$StudNo]=$name;  
     $StuBox{$sname}=$ssec;  
  }  
  $StudNo++;  
     }  
  }  
  else {  
     $r->print('<h1>Could not access course data</h1>');  
  }  
         $r->print("Total number of students : ".($#students+1));  
         $r->rflush();  
 # --------------- Find all assessments and put them into some linear-like order  
  &tracetable($firstres,'&'.$lastres.'&');  
     }      }
       $Str .= "</select>\n";
       return $Str;
   }
   
   ##############################################
   ##############################################
   
   =pod 
   
   =item &MapSelect($elementname,$status,$numvisible,$restriction) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sequences in the course.  The values of the sequences are the symbs.
   If the top sequence is selected, the value 'top' will result.
   
   =over 4
   
   =item $elementname The name of the HTML form element
   
   =item $status 'multiple' or 'single' selection box
   
 # ------------------------------------------------------------- End render page   =item $numvisible The number of options to be visible
     else {  
  $r->print('<h3>Undefined course sequence</h3>');  =item $restriction Code reference to subroutine which returns true or 
     }  false.  The code must expect a reference to a sequence data structure.
     &MapSecOptions();  
 }  =back
   
   =cut
 sub Menu {  
     my $InpStr = $ENV{'form.sort'};  ##############################################
     if ( $InpStr eq 'DoDiff Graph' || $InpStr eq '%Wrong Graph' ) {        ##############################################
  &GetGraphData($InpStr);  sub MapSelect {
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" />');      my ($elementname,$status,$numvisible,$restriction)=@_;
     }      if ($numvisible < 1) {
     else {          return;
  $r->print('<html><head><title>LON-CAPA Statistics</title></head>');      }
       #
       # Set up array of selected items
         $r->print('<body bgcolor="#FFFFFF">'.      &SetSelectedMaps($elementname);
                   '<script>window.focus(); window.width=500;window.height=500; </script>'.      #
                   '<img align=right src=/adm/lonIcons/lonlogos.gif>');      # Set up the restriction call
 # ---------------------------------------------------------------- Course title      if (! defined($restriction)) {
         $r->print('<h1> Course : "'.          $restriction = sub { 1; };
                   $ENV{'course.'.$ENV{'request.course.id'}.      }
                   '.description'}.'"</h1><h2>'.localtime().'</h2>');      #
 # ------------------------------- This is going to take a while, produce output      # Build the form element
         $r->rflush();      my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
  $r->print("\n".'<form name=stat method=post action="/adm/statistics" >');      if ($status ne 'single') {
           $Str .= 'multiple="true" ';
  my $content = $ENV{'form.sort'};      }
  if ($content eq '' || $content eq 'Return to Menu') {      $Str .= 'size="'.$numvisible.'" >'."\n";
     my $Ptr = '<h3>';      #
     $Ptr .= '<input type=submit name=sort value="Problem Evaluation"/>';#General Statistics"/>';      # Deal with 'all'
     $Ptr .= '<br><br>';      foreach (@SelectedMaps) {
     $Ptr .= '<input type=submit name=sort value="Student Assessment"/>';          if ($_ eq 'all') {
     $Ptr .= '<br><br>';              @SelectedMaps = ('all');
 #    $Ptr .= '<input type=submit name=sort value=Discrimination>';#"Problem Evaluation"/>';              last;
     $Ptr .= '</h3>';          }
     $r->print( $Ptr );  
       }  
  else {  
     &initial();  
     &ClassList();  
     if ( $content eq 'Discrimination' || #'Problem Evaluation' ||  
                  $content eq 'Recalculate Discrimintion Factor' ) {  
  &CreateDiscFac();  
     }  
     elsif ( $content eq 'Student Assessment' ||   
                     $content eq 'Create Student Report' ) {  
  &StudentOptions();  
  &StudentReport($CurStu,$StuBox{"$CurStu"});  
     }  
     else {  
  &PreStatTable();  
     }  
  }  
  $r->print("\n".'</form>'.  
                   "\n".'</body>'.  
                   "\n".'</html>');  
  $r->rflush();  
     }  
 }  
   
 sub StudentOptions {  
     my $OpSel5='';  
     $CurStu = $ENV{'form.student'};  
     if ( $CurStu eq '' ) {   
         $CurStu = 'All Students';  
         $OpSel5 = 'selected';  
     }  
     my $Ptr ='';  
 # ----------------------------------- Loading the Students Combobox  
     $Ptr .= '<br><b>Select Student</b>'."\n".  
            '<select name="student">'."\n".   
     '<option '.$OpSel5.'>All Students</option>';                               
     foreach my $key ( sort keys %StuBox ) {            
  $Ptr .= '<option';  
  if ($CurStu eq $key) {$Ptr .= ' selected';}       
         $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Create Student Report" />';  
     $r->print( $Ptr );  
     $r->rflush();  
 }  
   
 sub GetStatus {  
   
     $OpSelDis1='';  
     $OpSelDis2='';  
     $OpSel1='';  
     $OpSel2='';  
     $OpSel3='';  
     $OpSel4='';  
   
 #    if ( $ENV{'form.DisType'} eq 'Total Number of Correct Answers' ) {   
 # $OpSelDis1='selected';   
 # $CurDis=0;  
 #    }  
 #    else { $OpSel2 = 'selected'; $CurDis = 1;}  
   
     if ( $ENV{'form.order'} eq 'Descending' ) { $OpSel2='selected'; }  
     else { $OpSel1 = 'selected'; }  
     $CurMap = $ENV{'form.maps'};  
     if ( $CurMap eq '' ) {   
  $CurMap = 'All Maps';  
  $OpSel3 = 'selected';  
     }  
     $CurSec = $ENV{'form.section'};  
     if ( $CurSec eq '' ) {   
  $CurSec = 'All Sections';  
         $OpSel4 = 'selected';  
     }  
 }  
   
   
 sub MapSecOptions {  
 # ----------------------------------- Loading the Maps Combobox  
     my $Ptr = '<br>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Return to Menu" />';  
     $Ptr .= '<br><b> Select &nbsp; Map &nbsp; &nbsp; </b>'."\n".  
            '<select name="maps">'."\n".   
     '<option '.$OpSel3.'>All Maps</option>';                               
     foreach my $key ( sort keys %maps ) {            
  $Ptr .= '<option';  
         if ($CurMap eq $key) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
   
 # ----------------------------------- Loading the Sections Combobox  
     $Ptr .= '<br><b>Select Section</b>'."\n".  
            '<select name="section">'."\n".   
     '<option '.$OpSel4.'>All Sections</option>';                               
     foreach my $key ( sort keys %section ) {            
  $Ptr .= '<option';  
         if ($CurSec eq $key) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$key."</option>"."\n";       
     }      }
     $Ptr .= '</select>'."\n";      #
       # Put in option for 'all'
       $Str .= '    <option value="all" ';
       foreach (@SelectedMaps) {
           if ($_ eq 'all') {
               $Str .= 'selected ';
               last;
           }
       }
       $Str .= ">all</option>\n";
       #
       # Loop through the sequences
       foreach my $seq (@Sequences) {
           next if (! $restriction->($seq));
           $Str .= '    <option value="'.$seq->{'symb'}.'" ';
           foreach (@SelectedMaps) {
               if ($seq->{'symb'} eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$seq->{'title'}."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
   }
   
   ##############################################
   ##############################################
   
     $r->print( $Ptr );  =pod 
   
   =item &SectionSelect($elementname,$status,$numvisible) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sections in the course.  
   
   Uses the package variables @Sections and @SelectedSections
   =over 4
   
   =item $elementname The name of the HTML form element
   
   =item $status 'multiple' or 'single' selection box
   
   =item $numvisible The number of options to be visible
   
   =back
   
   =cut
   
   ##############################################
   ##############################################
   sub SectionSelect {
       my ($elementname,$status,$numvisible)=@_;
       if ($numvisible < 1) {
           return;
       }
       #
       # Make sure we have the data we need to continue
       if (! @Sections) {
           &PrepareClasslist()
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Loop through the sequences
       foreach my $s (@Sections) {
           $Str .= '    <option value="'.$s.'" ';
           foreach (@SelectedSections) {
               if ($s eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$s."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
   }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &CreateAndParseOutputSelector()
   
   Construct a selection list of options for output and parse output selections.
   
   =cut
   
   #######################################################
   #######################################################
   sub OutputDescriptions {
       my (@OutputOptions) = @_;
       my $Str = '';
       $Str .= "<h2>Output Modes</h2>\n";
       $Str .= "<dl>\n";
       foreach my $outputmode (@OutputOptions) {
    $Str .="    <dt>".$outputmode->{'name'}."</dt>\n";
    $Str .="        <dd>".$outputmode->{'description'}."</dd>\n";
       }
       $Str .= "</dl>\n";
       return $Str;
   }
   
   sub CreateAndParseOutputSelector {
       my ($elementname,$default,@OutputOptions) = @_;
       my $output_mode;
       my $show;
       my $Str = '';
       #
       # Format for output options is 'mode, restrictions';
       my $selected = $default;
       if (exists($ENV{'form.'.$elementname})) {
           if (ref($ENV{'form.'.$elementname} eq 'ARRAY')) {
               $selected = $ENV{'form.'.$elementname}->[0];
           } else {
               $selected = $ENV{'form.'.$elementname};
           }
       }
       #
       # Set package variables describing output mode
       $output_mode = 'html';
       $show        = 'all';
       foreach my $option (@OutputOptions) {
           next if ($option->{'value'} ne $selected);
           $output_mode = $option->{'mode'};
           $show        = $option->{'show'};
       }
       #
       # Build the form element
       $Str = qq/<select size="5" name="$elementname">/;
       foreach my $option (@OutputOptions) {
           if (exists($option->{'special'}) && 
               $option->{'special'} =~ /do not show/) {
               next;
           }
           $Str .= "\n".'    <option value="'.$option->{'value'}.'"';
           $Str .= " selected " if ($option->{'value'} eq $selected);
           $Str .= ">".&mt($option->{'name'})."<\/option>";
       }
       $Str .= "\n</select>";
       return ($Str,$output_mode,$show);
   }
   
   ###############################################
   ###############################################
   
   =pod 
   
   =item &Gather_Student_Data()
   
   Ensures all student data is up to date.
   
   =cut
   
   ###############################################
   ###############################################
   sub Gather_Student_Data {
       my ($r) = @_;
       my $c = $r->connection();
       #
       &Apache::loncoursedata::clear_internal_caches();
       #
       my @Sequences = &Apache::lonstatistics::Sequences_with_Assess();
       #
       my @Students = @Apache::lonstatistics::Students;
       #
       # Open the progress window
       my %prog_state=&Apache::lonhtmlcommon::Create_PrgWin
           ($r,'Statistics Compilation Status',
            'Statistics Compilation Progress', scalar(@Students));
       #
       while (my $student = shift @Students) {
           return if ($c->aborted());
           my ($status,undef) = &Apache::loncoursedata::ensure_current_data
               ($student->{'username'},$student->{'domain'},
                $ENV{'request.course.id'});
           &Apache::lonhtmlcommon::Increment_PrgWin($r,\%prog_state,
                                                    &mt('last student'));
       }
       &Apache::lonhtmlcommon::Close_PrgWin($r,\%prog_state);
     $r->rflush();      $r->rflush();
 }  }
   
   ###############################################
   ###############################################
   
 # ================================================================ Main Handler  =pod 
   
 sub handler {  =item &Gather_Full_Student_Data()
     $r=shift;  
   Ensures all student data is up to date.
   
     if (&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {  =cut
 # ------------------------------------------- Set document type for header only  
  if ($r->header_only) {  ###############################################
     if ($ENV{'browser.mathml'}) {  ###############################################
  $r->content_type('text/xml');  sub Gather_Full_Student_Data {
     }       my ($r) = @_;
     else {      my $c = $r->connection();
  $r->content_type('text/html');      #
     }      &Apache::loncoursedata::clear_internal_caches();
     &Apache::loncommon::no_cache($r);      #
     $r->send_http_header;      my @Students = @Apache::lonstatistics::Students;
     return OK;      #
  }          # Open the progress window
  my $requrl=$r->uri;      my %prog_state=&Apache::lonhtmlcommon::Create_PrgWin
 # ----------------------------------------------------------------- Tie db file          ($r,&mt('Student Data Compilation Status'),
            &mt('Student Data Compilation Progress'), scalar(@Students));
  undef %hash;      #
       while (my $student = shift @Students) {
  if ($ENV{'request.course.fn'}) {          return if ($c->aborted());
     my $fn=$ENV{'request.course.fn'};          my ($status,undef) = &Apache::loncoursedata::ensure_current_full_data
     if (-e "$fn.db") {              ($student->{'username'},$student->{'domain'},
  if (tie(%hash,'GDBM_File',"$fn.db",&GDBM_READER,0640)) {               $ENV{'request.course.id'});
 # ------------------------------------------------------------------- Hash tied          &Apache::lonhtmlcommon::Increment_PrgWin($r,\%prog_state,
     $r->content_type('text/html');                                                   &mt('last student'));
     $r->send_http_header;  
     &Menu();  
  }  
  else {  
     $r->content_type('text/html');  
     $r->send_http_header;  
     $r->print('<html><body>Coursemap undefined.</body></html>');  
  }  
 # ------------------------------------------------------------------ Untie hash  
  unless (untie(%hash)) {  
     &Apache::lonnet::logthis("<font color=blue>WARNING: ".  
                             "Could not untie coursemap $fn (browse).</font>");   
  }  
   
 # -------------------------------------------------------------------- All done  
  return OK;  
 # ----------------------------------------------- Errors, hash could no be tied  
     }  
  }   
  else {  
     $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";  
     return HTTP_NOT_ACCEPTABLE;   
  }  
     }      }
     else {      &Apache::lonhtmlcommon::Close_PrgWin($r,\%prog_state);
         $ENV{'user.error.msg'}=      $r->rflush();
         $r->uri.":vgr:0:0:Cannot view grades for complete course";  }
   
         return HTTP_NOT_ACCEPTABLE;   ##################################################
   ##################################################
   sub DisplayClasslist {
       my ($r)=@_;
       #
       my @Fields = ('fullname','username','domain','id','section');
       #
       my $Str='';
       if (! @Students) {
           if ($SelectedSections[0] eq 'all') { 
               if (lc($ENV{'form.Status'}) eq 'any') {
                   $Str .= '<h2>There are no students in the course.</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'active') {
                   $Str .= '<h2>There are no currently enrolled students in '.
                       'the course.</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
                   $Str .= '<h2>There are no previously enrolled '.
                       'students in the course.</h2>';
               }
           } else { 
               my $sections;
               if (@SelectedSections == 1) {
                   $sections = 'section '.$SelectedSections[0];
               } elsif (@SelectedSections > 2) {
                   $sections = 'sections '.join(', ',@SelectedSections);
                   $sections =~ s/, ([^,])*$/, and $1/;
               } else {
                   $sections = 'sections '.join(' and ',@SelectedSections);
               }
               if (lc($ENV{'form.Status'}) eq 'any') {
                   $Str .= '<h2>There are no students in '.$sections.'.</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'active') {
                   $Str .= '<h2>There are no currently enrolled students '.
                       'in '.$sections.'.</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
                   $Str .= '<h2>There are no previously enrolled students '.
                       'in '.$sections.'.</h2>';
               }
           }
           $Str.= '<a href="/adm/statistics?reportSelected=student_assessment">'.
               'Return to the chart.</a>';
           $r->print($Str);
           $r->rflush();
           return;
       }
   
       # "Click" is asinine but it is probably not my place to change the world.
       $Str .= '<h2>Click on a students name or username to view their chart</h2>';
       $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
       $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
       foreach my $field (@Fields) {
           $Str .= '<th><a href="/adm/statistics?reportSelected=classlist&sort='.$field.'">'.$field.
               '</a></th>';
       }
       $Str .= '</tr>'."\n";
       #
       my $alternate = 0;
       foreach my $student (@Students) { # @Students is a package variable
           my $sname = $student->{'username'}.':'.$student->{'domain'};
           if($alternate) {
               $Str .= '<tr bgcolor="#ffffe6">';
           } else {
               $Str .= '<tr bgcolor="#ffffc6">';
           }
           $alternate = ($alternate + 1) % 2;
           #
           foreach my $field (@Fields) {
               $Str .= '<td>';
               if ($field eq 'fullname' || $field eq 'username') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('student_assessment');
                   $Str .= '&sort='.&Apache::lonnet::escape($ENV{'form.sort'});
                   $Str .= '&SelectedStudent=';
                   $Str .= &Apache::lonnet::escape($sname).'">';
                   $Str .= $student->{$field}.'&nbsp';
                   $Str .= '</a>';
               } else {
                   $Str .= $student->{$field};
               }
               $Str .= '</td>';
           }
           $Str .= "</tr>\n";
       }
       $Str .= '</table></td></tr></table>'."\n";
       #
       $r->print($Str);
       $r->rflush();
       #
       return;
   }
   
   ##############################################
   ##############################################
   sub CreateMainMenu {
       #
       # Define menu data
       my @reports = ({ internal_name => 'problem_statistics',
                        name => &mt('Overall Problem Statistics'),
                        short_description => 
       &mt('Student performance statistics on all problems.'),
                    },
                      { internal_name => 'problem_analysis',
                        name => &mt('Detailed Problem Analysis'),
                        short_description => 
       &mt('Detailed statistics and graphs of student performance on problems.'),
                    },
                      { internal_name => 'submissiontime_analysis',
                        name => &mt('Submission Time Analysis'),
                        short_description => 
       &mt('Display and analysis of submission times on assessments.'),
                    },
   #                   { internal_name => 'student_assessment',
   #                     name => &mt('Problem Status Chart'),
   #                     short_description => 
   #    &mt('Brief view of each students performance in course.'),
   #                 },
                      # 'percentage'  => 'Correct-problems Plot',
                      # 'activitylog' => 'Activity Log',
                      );
       #
       # Create the menu
       my $Str;
       $Str .= '<h1>'.&mt('Please select a report to generate').'</h1>';
       foreach my $reportdata (@reports) {
           $Str .='    <h3><a href="/adm/statistics?reportSelected='.
               $reportdata->{'internal_name'}.'" >'.
               $reportdata->{'name'}."</a></h3>\n";
           $Str .= '    '.('&nbsp;'x8).$reportdata->{'short_description'}.
               "\n";
       }
       $Str .="</dl>\n";
       #
       return $Str;
   }
   
   ##############################################
   ##############################################
   sub handler {
       my $r=shift;
       my $c = $r->connection();
       #
       # Check for overloading
       my $loaderror=&Apache::lonnet::overloaderror($r);
       if ($loaderror) { return $loaderror; }
       $loaderror=
          &Apache::lonnet::overloaderror($r,
            $ENV{'course.'.$ENV{'request.course.id'}.'.home'});
       if ($loaderror) { return $loaderror; }
       #
       # Check for access
       if (! &Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {
           $ENV{'user.error.msg'}=
               $r->uri.":vgr:0:0:Cannot view grades for complete course";
           if (! &Apache::lonnet::allowed('vgr',
                         $ENV{'request.course.id'}.'/'.$ENV{'request.course.sec'})) {
               $ENV{'user.error.msg'}=
                   $r->uri.":vgr:0:0:Cannot view grades with given role";
               return HTTP_NOT_ACCEPTABLE;
           }
       }
       #
       # Send the header
       &Apache::loncommon::no_cache($r);
       &Apache::loncommon::content_type($r,'text/html');
       $r->send_http_header;
       if ($r->header_only) { return OK; }
       #
       # Extract form elements from query string
       &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                               ['sort','reportSelected',
                                                'SelectedStudent']);
       #
       # Give the LON-CAPA page header
       $r->print(&Apache::lonhtmlcommon::Title('Course Statistics and Charts'));
       $r->rflush();
       # 
       # Either print out a menu for them or send them to a report
       if (! exists($ENV{'form.reportSelected'}) || 
           $ENV{'form.reportSelected'} eq '') {
           $r->print(&CreateMainMenu());
       } else {
       #
           if (! &Apache::lonmysql::verify_sql_connection()) {
               my $serveradmin = $r->dir_config('lonAdmEMail');
               $r->print('<h2><font color="Red">'.
                         &mt('Unable to connect to database!').
                         '</font></h2>');
               $r->print('<p>'.
                         &mt('Please notify the server administrator ').
                         '<b>'.$serveradmin.'</b></p>');
               $r->print('<p>'.
                         &mt('Course Statistics and Charts cannot be '.
                             'retrieved until the database is restarted.  '.
                             'Your data is intact but cannot be displayed '.
                             'at this time.').'</p>');
               $r->print('</body></html>');
               return;
           }
           #
           # Clean out the caches
           if (exists($ENV{'form.ClearCache'})) {
               &Apache::loncoursedata::delete_caches($ENV{'requres.course.id'});
           }
           #
           # Begin form output
           $r->print('<form name="Statistics" ');
           $r->print('method="post" action="/adm/statistics">');
           $r->rflush();
           #
           my $GoToPage = $ENV{'form.reportSelected'};
           #
           # Set up the statistics and chart environment
           &PrepareCourseData($r);
           #
           $r->print('<input type="hidden" name="reportSelected" value="'.
                     $GoToPage.'">');
           if($GoToPage eq 'activitylog') {
   #        &Apache::lonproblemstatistics::Activity();
           } elsif($GoToPage eq 'problem_statistics') {
               &Apache::lonproblemstatistics::BuildProblemStatisticsPage($r,$c);
           } elsif($GoToPage eq 'problem_analysis') {
               &Apache::lonproblemanalysis::BuildProblemAnalysisPage($r,$c);
           } elsif($GoToPage eq 'submissiontime_analysis') {
               &Apache::lonsubmissiontimeanalysis::BuildSubmissionTimePage($r,$c);
           } elsif($GoToPage eq 'student_assessment') {
               &Apache::lonstudentassessment::BuildStudentAssessmentPage($r,$c);
           } elsif($GoToPage eq 'DoDiffGraph' || $GoToPage eq 'PercentWrongGraph') {
   #        &Apache::lonproblemstatistics::BuildGraphicChart($r,$c);
           } elsif($GoToPage eq 'Correct-problems Plot') {
               # &Apache::lonpercentage::BuildPercentageGraph($r,$c);
           }
           #
           $r->print("</form>\n");
     }      }
       $r->print("</body>\n</html>\n");
       $r->rflush();
       #
       return OK;
 }  }
   
 1;  1;
 __END__  
   
   #######################################################
   #######################################################
   
   =pod
   
   =back
   
   =cut
   
   #######################################################
   #######################################################
   
   __END__
   

Removed from v.1.1  
changed lines
  Added in v.1.92


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>