[BACK]Return to lonstatistics.pm CVS log [TXT] [DIR] Up to [LON-CAPA] / loncom / interface

Diff for /loncom/interface/lonstatistics.pm between versions 1.3 and 1.117

version 1.3, 2002/02/06 16:38:04 version 1.117, 2005/02/25 23:23:47
Line 1 Line 1
 # The LearningOnline Network with CAPA  # The LearningOnline Network with CAPA
 # (Publication Handler  
 #  #
 # $Id$  # $Id$
 #  #
Line 26 Line 25
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
 # (Navigate problems for statistical reports  # (Navigate problems for statistical reports
 # YEAR=2001  #
 # 5/05/01, 7/09/01, 7/25/01, 8/11/01,9/13/01, 9/26/01 Behrouz Minaei  
 # 10/5/01, 10/9/01, 10/22/01, 10/26/01 Behrouz Minaei  
 # 11/1/01, 11/4/01, 11/16/01 Behrouz Minaei  
 # 12/14/01, 12/16/01, 12/18/01,12/20/01,12/31/01 Behrouz Minaei  
 # YEAR=2002  
 # 1/22/02,2/1/02 Behrouz Minaei  
 ###  ###
   
 package Apache::lonstatistics;   =pod
   
   =head1 NAME
   
   lonstatistics
   
   =head1 SYNOPSIS
   
   Main handler for statistics and chart.
   
   =over 4
   
   =cut
   
   package Apache::lonstatistics;
   
 use strict;  use strict;
 use Apache::Constants qw(:common :http);  use Apache::Constants qw(:common :http);
   use vars qw(
       @FullClasslist 
       @Students
       @Sections 
       @SelectedSections
       %StudentData
       @StudentDataOrder
       @SelectedStudentData
       $enrollment_status);
   
 use Apache::lonnet();  use Apache::lonnet();
 use Apache::lonhomework;  use Apache::lonhomework;
 use HTML::TokeParser;  use Apache::loncommon;
 use GDBM_File;  use Apache::loncoursedata;
 #use Benchmark;  use Apache::lonhtmlcommon;
   use Apache::lonmysql;
 # -------------------------------------------------------------- Module Globals  use Apache::lonlocal;
 my %hash;  use Time::HiRes;
 my %CachData;  #
 my %GraphDat;  # Statistics Packages
 my %maps;  use Apache::lonproblemanalysis();
 my @mapsort;  use Apache::lonsubmissiontimeanalysis();
 my %section;  use Apache::loncorrectproblemplot();
 my %StuBox;  use Apache::lonproblemstatistics();
 my %DiscFac;  use Apache::lonstudentassessment();
 my $CurMap;  use Apache::lonpercentage;
 my $CurSec;  use Apache::lonstudentsubmissions();
 my $CurStu;  use Apache::lonsurveyreports();
 my @cols;  
 my @list;  #######################################################
 my @students;  #######################################################
 my $p_count;  
 my $Pos;  =pod
 my $r;  
 my $OpSel1;  =item Package Variables
 my $OpSel2;  
 my $OpSelDis1;  =item @FullClasslist The full classlist
 my $OpSelDis2;  
 my $CurDis=0;  =item @Students The students we are concerned with for this invocation
 my $OpSel3;  
 my $OpSel4;  =item @Sections The sections available in this class
 my $GData;  
 my $cid;  =item $curr_student The student currently being examined
 my $firstres;  
 my $lastres;  =item $prev_student The student previous in the classlist
 my $DiscFlag=0;  
 my $HWN=0;  =item $next_student The student next in the classlist
   
 my %Header = (0,"Problem Title",1,"#Stdnts",2,"Tries",3,"Mod",  =over
               4,"Mean",5,"#YES",6,"#yes",7,"%Wrng",8,"S.D.",  
               9,"Skew.",10,"DoDiff",11,"Map");  =cut 
 #             9,"Skew.",10,"DoDiff",11,"Dis.F.",12,"Resourse URL");  
   #######################################################
   #######################################################
   #
   # Classlist variables
   #
   my $curr_student;
   my $prev_student;
   my $next_student;
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &clear_classlist_variables()
   
   undef the following package variables:
   
   =over
   
   =item @FullClasslist
   
   =item @Students
   
   =item @Sections
   
   =item @SelectedSections
   
   =item %StudentData
   
   =item @StudentDataOrder
   
 sub NumericSort {            =item @SelectedStudentData
     $a <=> $b;  
   =item $curr_student
   
   =item $prev_student
   
   =item $next_student
   
   =back
   
   =cut
   
   #######################################################
   #######################################################
   sub clear_classlist_variables {
       undef(@FullClasslist);
       undef(@Students);
       undef(@Sections);
       undef(@SelectedSections);
       undef(%StudentData);
       undef(@SelectedStudentData);
       undef($curr_student);
       undef($prev_student);
       undef($next_student);
 }  }
   
 # ------ Create different Student Report   #######################################################
 sub StudentReport {  #######################################################
     my ($sname,$sdom)=@_;  
     if ( $sname eq 'All Students' ) {  =pod
  $r->print( '<h3><font color=blue>WARNING:   
                     Please select a student</font></h3>' );  =item &PrepareClasslist()
  return;  
     }  Build up the classlist information.  The classlist information is kept in
     my $shome=&Apache::lonnet::homeserver( $sname,$sdom );            the following package variables:
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$cid,$shome );  
     my %result = ();  =over
     my $ResId;  
     my $Code;  =item @FullClasslist
     my $Tries;  
     my $TotalTries = 0;  =item @Students
     my $ParCr = 0;  
     my $Wrongs;  =item @Sections
     my %TempHash;  
     my $Version;  =item @SelectedSections
     my $LatestVersion;  
     my $PtrTry='';  =item %StudentData
     my $PtrCod='';  
     my $SetNo=0;  =item @SelectedStudentData
     my $Str = "\n".'<table border=2>'.  
               "\n".'<tr>'.  =item $curr_student
               "\n".'<th> # </th>'.  
       "\n".'<th> Set Title </th>'.  =item $prev_student
       "\n".'<th> Results </th>'.  
       "\n".'<th> Tries </th>'.  =item $next_student
       "\n".'</tr>';  
     unless ($reply=~/^error\:/) {  =back
         map {  
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));  $curr_student, $prev_student, and $next_student may not be defined, depending
             $result{$name}=$value;  upon the calling context.
         } split(/\&/,$reply);;  
         foreach $ResId (@cols) {  =cut
     if ( !$ResId ) {  
  my $Set=&Apache::lonnet::declutter($hash{'map_id_'.$1});  #######################################################
  if ( $Set ) {  #######################################################
     $SetNo++;  sub PrepareClasslist {
     $Str .= "\n"."<tr>".      my %Sections;
     "\n"."<td> $SetNo </td>".      &clear_classlist_variables();
                             "\n"."<td> $Set </td>".      #
                             "\n"."<td> $PtrCod </td>".      # Retrieve the classlist
                             "\n"."<td> $PtrTry</td>".      my $cid  = $ENV{'request.course.id'};
                             "\n"."</tr>";      my $cdom = $ENV{'course.'.$cid.'.domain'};
  }      my $cnum = $ENV{'course.'.$cid.'.num'};
  $PtrTry='';      my ($classlist,$field_names) = &Apache::loncoursedata::get_classlist($cid,
  $PtrCod='';                                                                    $cdom,$cnum);
  next;       if (exists($ENV{'form.Section'})) {
     }          if (ref($ENV{'form.Section'})) {
             $ResId=~/(\d+)\.(\d+)/;              @SelectedSections = @{$ENV{'form.Section'}};
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );          } elsif ($ENV{'form.Section'} !~ /^\s*$/) {
             if ( $CurMap ne 'All Maps' ) {              @SelectedSections = ($ENV{'form.Section'});
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);          }
  if ( $Map ne $ResMap ) { next; }      }
     }      @SelectedSections = ('all') if (! @SelectedSections);
     my $meta=$hash{'src_'.$ResId};      foreach (@SelectedSections) {
     my $PartNo = 0;          if ($_ eq 'all') {
     undef %TempHash;              @SelectedSections = ('all');
     map {          }
  if ($_=~/^stores\_(\d+)\_tries$/) {      }
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');      #
     if ( $TempHash{"$Part"} eq '' ) {       # Deal with instructors with restricted section access
  $TempHash{"$Part"} = $Part;      if ($ENV{'request.course.sec'} !~ /^\s*$/) {
  $TempHash{$PartNo}=$Part;          @SelectedSections = ($ENV{'request.course.sec'});
  $TempHash{"$Part.Code"} = '-';        }
  $PartNo++;      #
     }      # Set up %StudentData
  }      @StudentDataOrder = qw/fullname username domain id section status comments/;
             } split(/\,/,&Apache::lonnet::metadata($meta,'keys'));      foreach my $field (@StudentDataOrder) {
           $StudentData{$field}->{'title'} = &mt($field);
             my $Prob = $Map.'___'.$2.'___'.          $StudentData{$field}->{'base_width'} = length(&mt($field));
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );          $StudentData{$field}->{'width'} = 
             $Code='U';                                 $StudentData{$field}->{'base_width'};
             $Tries = 0;      }
             $Wrongs = 0;      #
      $LatestVersion = $result{"version:$Prob"};             # get the status requested
       $enrollment_status = 'Active';
     if ( $LatestVersion ) {      $enrollment_status = $ENV{'form.Status'} if (exists($ENV{'form.Status'}));
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {      #
     my $vkeys = $result{"$Version:keys:$Prob"};      # Process the classlist
     my @keys = split(/\:/,$vkeys);      while (my ($student,$student_data) = each (%$classlist)) {
             my $studenthash = ();
     foreach my $Key (@keys) {            for (my $i=0; $i< scalar(@$field_names);$i++) {
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {              my $field = $field_names->[$i];
     my $Part = $1;              # Store the data
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};              $studenthash->{$field}=$student_data->[$i];
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;               # Keep track of the width of the fields
     $TotalTries += $Tries;              next if (! exists($StudentData{$field}));
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};              my $length = length($student_data->[$i]);
     if ( $Val eq 'correct_by_student' )              if ($StudentData{$field}->{'width'} < $length) {
                                 { $Wrongs = $Tries - 1; $Code = 'Y'; }                   $StudentData{$field}->{'width'} = $length; 
     elsif ( $Val eq 'correct_by_override' )              }
                                 { $Wrongs = $Tries - 1; $Code = 'y'; }                                  }
     elsif ( $Val eq 'incorrect_attempted' ||           push (@FullClasslist,$studenthash);
                                 $Val eq 'incorrect_by_override' )          #
                 { $Wrongs = $Tries; $Code = 'N'; }          # Build up a list of sections
     $TempHash{"$Part.Code"} = $Code;          my $section = $studenthash->{'section'};
     $TempHash{"$Part.Wrongs"} = $Wrongs;          if (! defined($section) || $section =~/^\s*$/ || $section == -1) {
  }              $studenthash->{'section'} = 'none';
          }              $section = $studenthash->{'section'};
                 }           }
  for ( my $n = 0; $n < $PartNo; $n++ ) {            $Sections{$section}++;
     my $part = $TempHash{$n};          #
     if ($PtrTry ne '') {$PtrTry .= ',';}          # Only put in the list those students we are interested in
     $PtrTry .= "$TempHash{$part.'.Tries'}";          foreach my $sect (@SelectedSections) {
                     $PtrCod .= "$TempHash{$part.'.Code'}";                  if ( (($sect eq 'all') || 
  }                    ($section eq $sect)) &&
                    (($studenthash->{'status'} eq $enrollment_status) || 
                     ($enrollment_status eq 'Any')) 
                    ){
                   push (@Students,$studenthash);
                   last;
             }              }
     else {   
  for(my $n=0; $n<$PartNo; $n++) {   
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "0";  
                     $PtrCod .= "-";   
  }  
     }  
         }          }
     }      }
     $Str .= "\n".'</table>';      #
     $r->print($Str);      # Put the consolidated section data in the right place
     $r->rflush();      if ($ENV{'request.course.sec'} !~ /^\s*$/) {
           @Sections = ($ENV{'request.course.sec'});
       } else {
           @Sections = sort {$a cmp $b} keys(%Sections);
           unshift(@Sections,'all'); # Put 'all' at the front of the list
       }
       #
       # Sort the Students
       my $sortby = 'fullname';
       $sortby = $ENV{'form.sort'} if (exists($ENV{'form.sort'}));
       my @TmpStudents = sort { $a->{$sortby} cmp $b->{$sortby} ||
                                $a->{'fullname'} cmp $b->{'fullname'} } @Students;
       @Students = @TmpStudents;
       # 
       # Now deal with that current student thing....
       $curr_student = undef;
       if (exists($ENV{'form.SelectedStudent'})) {
           my ($current_uname,$current_dom) = 
               split(':',$ENV{'form.SelectedStudent'});
           my $i;
           for ($i = 0; $i<=$#Students; $i++) {
               next if (($Students[$i]->{'username'} ne $current_uname) || 
                        ($Students[$i]->{'domain'}   ne $current_dom));
               $curr_student = $Students[$i];
               last; # If we get here, we have our student.
           }
           if (defined($curr_student)) {
               if ($i == 0) {
                   $prev_student = undef;
               } else {
                   $prev_student = $Students[$i-1];
               }
               if ($i == $#Students) {
                   $next_student = undef;
               } else {
                   $next_student = $Students[$i+1];
               }
           }
       }
       #
       if (exists($ENV{'form.StudentData'})) {
           if (ref($ENV{'form.StudentData'}) eq 'ARRAY') {
               @SelectedStudentData = @{$ENV{'form.StudentData'}};
           } else {
               @SelectedStudentData = ($ENV{'form.StudentData'});
           }
       } else {
           @SelectedStudentData = ('username');
       }
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               @SelectedStudentData = ('all');
               last;
           }
       }
       #
       return;
 }  }
   
   
 # ------------------------------------------- Prepare Statistics Table  #######################################################
 sub PreStatTable {  #######################################################
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_statistics.db";  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     my $CachDisFac = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
      "_$ENV{'user.domain'}_$cid\_DiscFactor.db";  
     $r->print('<br><input type="submit" name="sort" value="Recalculate Statistics" />');  
   
     my $Ptr = '';  
   
     $Ptr .= '<br><b> Sorting Type: &nbsp; </b>'."\n".  
             '<select name="order"> <option '.$OpSel1.' >Ascending</option>'."\n".  
     '<option '.$OpSel2.'>Descending</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="DoDiff Graph" />'."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="%Wrong Graph" />'."\n";  
   
     $Ptr .= '<pre>'.  
     '  #Stdnts: Total Number of Students opened the problem.<br>'.   
     '  Tries  : Total Number of Tries for solving the problem.<br>'.   
     '  Mod    : Maximunm Number of Tries for solving the problem.<br>'.   
     '  Mean   : Average Number of the tries. [ Tries / #Stdns ]<br>'.  
     '  #YES   : Number of students solved the problem correctly.<br>'.   
     '  #yes   : Number of students solved the problem by override.<br>'.  
     '  %Wrng  : Percentage of students tried to solve the problem but'.  
     ' still incorrect. [ 100*((#Stdnts-(#YES+#yes))/#Stdnts) ]<br>'.  
     '  S.D.   : Standard Deviation of the tries.'.  
     '[ sqrt(sum((Xi - Mean)^2)) / (#Stdnts-1)'.  
     ' where Xi is every student\'s tries ]<br>'.  
     '  Skew.  : Skewness of the students tries.'.  
     ' [ (sqrt( sum((Xi - Mean)^3) / #Stdnts)) / (S.D.^3) ]<br>'.  
 #    '  DoDiff : Degree of Difficulty of the problem. [ Tries/(#YES+#yes+0.1) ]<br>'.  
     '  DoDiff : Degree of Difficulty of the problem. [ 1 - ((#YES+#yes) / Tries) ]<br>'.  
 #    '  Dis.F. : Discrimination Factor. [ Sum of Partial Credits Awarded / Total Number of Tries in %27 upper and lower students]</b>'.  
             '</pre>';  
   
     $r->print($Ptr);  
     $r->rflush();  
         
     my $Result = "\n".'<table border=2>';  
     $Result .= '<tr><th>P#</th>'."\n";  
     for ( my $nIdx=0; $nIdx < 12; $nIdx++ ) {   
  $Result .= '<th>'.'<input type="submit" name="sort" value="'.  
                    $Header{$nIdx}.'" />'.'</th>'."\n";  
     }  
     $Result .= "\n".'</tr>'."\n";      
     $r->print( $Result );  
     $r->rflush();  
   
     if ((-e "$CacheDB")&&($ENV{'form.sort'} ne 'Recalculate Statistics')) {  =pod
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     &Cache_Statistics();  
         }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
     else {  
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {  
     tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_WRCREAT,0640);  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     foreach (keys %DiscFac) {delete $CachData{$_};}  
     foreach (keys %CachData) {delete $CachData{$_};}  
     $DiscFlag=0;  
     &Build_Statistics();  
  }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
     #$r->print('Total instances of the problems : '.($p_count*($#students+1)));  
   
     untie(%CachData);  
     untie(%GraphDat);  
     untie(%DiscFac);  
   
     $r->print("\n".'</table>'."\n");  =item get_students
     $r->rflush();          
 }  
   
   Returns a list of the selected students
   
 # ------------------------------------- Find the section of student in a course  =cut
   
 sub usection {  #######################################################
     my ($udom,$unam,$courseid)=@_;  #######################################################
     $courseid=~s/\_/\//g;  sub get_students {
     $courseid=~s/^(\w)/\/$1/;      if (! @Students) {
     map {          &PrepareClasslist()
         my ($key,$value)=split(/\=/,$_);      }
         $key=&Apache::lonnet::unescape($key);      return @Students;
         if ($key=~/^$courseid(?:\/)*(\w+)*\_st$/) {  
             my $section=$1;  
             if ($key eq $courseid.'_st') { $section=''; }  
     my ($dummy,$end,$start)=split(/\_/,&Apache::lonnet::unescape($value));  
             $section=($section) ? $section : '(none)';  
             $section=(int($section)) ? int($section) : $section;  
 #            $r->print($unam.'...'.$section.'<br>');  
     return $section;  
         }  
     } split(/\&/,&Apache::lonnet::reply('dump:'.$udom.':'.$unam.':roles',  
                         &Apache::lonnet::homeserver($unam,$udom)));  
     return '';  
 }  }
   
   #######################################################
   #######################################################
   
 # ------ Dump the Student's DB file and handling the data for statistics table   =pod
   
 sub ExtractStudentData {  =item &current_student()
     my ($student,$coid)=@_;  
     my ($sname,$sdom) = split( /\:/, $student );  Returns a pointer to a hash containing data about the currently
     my $shome=&Apache::lonnet::homeserver( $sname,$sdom );            selected student.
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$coid,$shome );  
     my %result = ();  =cut
     my $ResId;  
     my $Dis = '';  #######################################################
     my $Code;  #######################################################
     my $Tries;  sub current_student { 
     my $ParCr;      return $curr_student;
     my $TotalTries = 0;  
     my $TotalOpend = 0;  
     my $ProbSolved = 0;  
     my $ProbTot = 0;  
     my $TimeTot = 0;  
     my $TotParCr = 0;  
     my $Wrongs;  
     my %TempHash;  
     my $Version;  
     my $LatestVersion;  
     my $SecLimit;  
     my $MapLimit;  
     unless ($reply=~/^error\:/) {  
         map {  
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));  
             $result{$name}=$value;  
 #$r->print($name.'='.$value.'<br>');  
         } split(/\&/,$reply);  
         foreach $ResId (@cols) {  
     if ( !$ResId ) { next; }  
             $ResId=~/(\d+)\.(\d+)/;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     $Dis .= ':';  
     undef %TempHash;  
     map {  
  if ($_=~/^stores\_(\d+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = 'U';    
  $PartNo++;  
     }  
  }  
             } split(/\,/,&Apache::lonnet::metadata($meta,'keys'));  
   
             my $Prob = $Map.'___'.$2.'___'.  
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
             $Code='U';  
             $Tries = 0;  
     $ParCr = 0;  
             $Wrongs = 0;  
      $LatestVersion = $result{"version:$Prob"};         
   
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  
     my $vkeys = $result{"$Version:keys:$Prob"};  
     my @keys = split(/\:/,$vkeys);  
     
     foreach my $Key (@keys) {    
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {  
     my $Part = $1;  
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};  
     $ParCr = $result{"$Version:$Prob:resource.$Part.awarded"};  
     my $Time = $result{"$Version:$Prob:timestamp"};  
     $TempHash{"$Part.Time"} = ($Time) ? $Time : 0;  
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;  
     $TempHash{"$Part.ParCr"} = ($ParCr) ? $ParCr : 0;          
     $TotalTries += $TempHash{"$Part.Tries"};  
     $TotParCr += $TempHash{"$Part.ParCr"};  
 #$r->print($Version.'---'.$Prob.'==='.$Time.'<br>');  
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};  
     if ( $Val eq 'correct_by_student' )  
                                { $Wrongs = $Tries - 1; $Code = 'C'; }   
     elsif ( $Val eq 'correct_by_override' )  
                                { $Wrongs = $Tries - 1; $Code = 'O'; }                          
     elsif ( $Val eq 'incorrect_attempted' ||   
                                 $Val eq 'incorrect_by_override' )  
                { $Wrongs = $Tries; $Code = 'I'; }  
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }   
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     my $Yes = 0;  
                     if ( $TempHash{$part.'.Code'} eq 'C' ||  
                          $TempHash{$part.'.Code'} eq 'O'  )   
        {$ProbSolved++;$Yes=1;}      
     my $ptr = "$hash{'title_'.$ResId}";  
     if ( $PartNo > 1 ) {                  
  $ptr .= " (part $part)";  
  $Dis .= ':';  
     }  
     my $Fac = ($TempHash{"$part.Tries"}) ?   
                               ($TempHash{"$part.ParCr"}/$TempHash{"$part.Tries"}) : 0;  
     my $DisF;  
     if ( $Fac > 0 &&  $Fac < 1 ) {   
  $DisF = sprintf( "%.4f", $Fac );  
     }  
     else {$DisF = $Fac;}  
 #    $DisF .= '+'.$TempHash{"$part.Time"};  
     $TimeTot += $TempHash{"$part.Time"};  
     $Dis .= $ptr.'*'.$ResId.'='.$DisF.'+'.$Yes;  
     $ptr .= "*$ResId:$TempHash{$part.'.Tries'}".  
             ":$TempHash{$part.'.Wrongs'}".  
                             ":$TempHash{$part.'.Code'}";      
 #$r->print($sname.' -- '.$ptr.'--- timestamp='.$TempHash{"$part.Time"}.'<br>');  
     push (@list, $ptr);  
     $TotalOpend++;  
     $ProbTot++;  
  }  
             }  
     else {   
  for(my $n=0; $n<$PartNo; $n++) {  
     push (@list, "$hash{'title_'.$ResId}*$ResId:0:0:U");  
     $ProbTot++;   
  }  
     }  
         }  
  if ( $TotalTries ) {  
     my $DisFac = ( $TotalTries ) ? ($TotParCr/$TotalTries) : 0;  
 #    my $DisFactor = int(sprintf( "%.4f", $DisFac ) * 100);  
     my $DisFactor = sprintf( "%.4f", $DisFac );  
     my $time;  
     if ($ProbSolved){  
  $time = int(($TimeTot/$ProbSolved)/10000000);  
     }  
     $DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.  
                       $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;  
 #$r->print($DisFactor.$sname.'<br> --- Dis= '.$Dis.'<br>');  
  }  
     }  
     #$r->print($sname.' PrCr= '.$TotParCr.' Slvd= '.$ProbSolved.' Tries='.$TotalTries.'<br>');  
 }  }
   
   #######################################################
   #######################################################
   
 # ------------------------------------------------------------ Build page table  =pod
 sub tracetable {  
     my ($rid,$beenhere)=@_;  =item &previous_student()
     $rid=~/(\d+)\.(\d+)/;  
     $maps{&Apache::lonnet::declutter($hash{'map_id_'.$1})}='';#$hash{'title_'.$rid};   Returns a pointer to a hash containing data about the student prior
     unless ($beenhere=~/\&$rid\&/) {  in the list of students.  Or something.  
        $beenhere.=$rid.'&';   
        if (defined($hash{'is_map_'.$rid})) {  =cut
    my $cmap=$hash{'map_type_'.$hash{'map_pc_'.$hash{'src_'.$rid}}};  
            if ( $cmap eq 'sequence' || $cmap eq 'page' ) {   #######################################################
                $cols[$#cols+1]=0;  #######################################################
        $HWN++;  sub previous_student { 
                $mapsort[$HWN]=$rid.$hash{'title_'.$rid};       return $prev_student;
                #$maps{&Apache::lonnet::declutter($hash{'src_'.$rid})}=   
                #      $hash{'title_'.$rid};   
            }  
            if ((defined($hash{'map_start_'.$hash{'src_'.$rid}})) &&  
                (defined($hash{'map_finish_'.$hash{'src_'.$rid}}))) {  
               my $frid=$hash{'map_finish_'.$hash{'src_'.$rid}};  
   
                 &tracetable($hash{'map_start_'.$hash{'src_'.$rid}},  
                 '&'.$frid.'&');  
   
               if ($hash{'src_'.$frid}) {  
                  if ($hash{'src_'.$frid}=~  
                                  /\.(problem|exam|quiz|assess|survey|form)$/) {  
      $cols[$#cols+1]=$frid;  
      $mapsort[$HWN] .= '&'.$frid;  
                  }  
       }  
    }  
        } else {  
           if ($hash{'src_'.$rid}) {  
              if ($hash{'src_'.$rid}=~  
                                  /\.(problem|exam|quiz|assess|survey|form)$/) {  
          $cols[$#cols+1]=$rid;  
  $mapsort[$HWN] .= '&'.$rid;  
              }  
           }  
        }  
        if (defined($hash{'to_'.$rid})) {  
           map {  
               &tracetable($hash{'goesto_'.$_},$beenhere);  
           } split(/\,/,$hash{'to_'.$rid});  
        }  
     }  
 }  }
   
 sub MySort {            #######################################################
     if ( $Pos > 0 && $Pos < 11 ) {  #######################################################
  if ($ENV{'form.order'} eq 'Descending') {$b <=> $a;}  
  else { $a <=> $b; }  =pod
     }  
     else {  =item &next_student()
  if ($ENV{'form.order'} eq 'Descending') {$b cmp $a;}  
  else { $a cmp $b; }  Returns a pointer to a hash containing data about the next student
     }  to be viewed.
   
   =cut
   
   #######################################################
   #######################################################
   sub next_student { 
       return $next_student;
 }  }
   
 sub Build_Statistics {  ##############################################
     $r->print(<<ENDPOP);  ##############################################
 <script>  
     popwin=open('','popwin','width=400,height=100');  
     popwin.document.writeln('<html><body bgcolor="#8cee8c">'+  
       '<title>LON-CAPA Statistics</title>'+  
       '<h4>Computation Progress</h4>'+  
       '<form name=popremain>'+  
       '<input type=text size=35 name=remaining value=Starting></form>'+  
       '</body></html>');  
     popwin.document.close();  
 </script>  
 ENDPOP  
   
     $r->rflush();  =pod 
 # ---------------------------- Gathering the Data of students' tries  
     my $index;  
     for ($index=0;$index<=$#students;$index++) {  
 #----------- update progress  
         $r->print('<script>popwin.document.popremain.remaining.value="'.  
                   'Computing '.($index+1).'/'.($#students+1).': '.  
                   $students[$index].'";</script>');  
         $r->rflush();  
   
         &ExtractStudentData($students[$index],$cid);  =item &StudentDataSelect($elementname,$status,$numvisible,$selected)
     }  
 #--------------------- close Progress Line  
     $r->print('<script>popwin.close()</script>');  
     $r->rflush();   
 # -------------------- sorting the Data  
     @list = sort(@list);  
     $OpSel2='';  
     $OpSel1='selected';  
       
     $p_count = 0;   
     my $nIdx = 0;  
     my $dummy;   
     my $p_val;  
     my $ResId;  
     my $NoElements = $#list + 1;  
 #-------------------------------- loop for data representation  
     while ( $nIdx < $NoElements ) {  
         my %storestats=();  
  my ($Prob,$Tries,$Wrongs,$Code)=split(/\:/,$list[$nIdx]);  
  my $Temp = $Prob;  
  my $MxTries = 0;  
  my $TotalTries = 0;  
  my $YES = 0;  
  my $Incorrect = 0;  
  my $Override = 0;  
  my $StdNo = 0;  
  my @StdLst;   
  do {  
     $nIdx++;  
     $StdNo++;  
     $StdLst[ $StdNo ] = $Tries;  
     $TotalTries += $Tries;  
     if ( $MxTries < $Tries ) { $MxTries = $Tries; }   
     if ( $Code eq 'C' ){ $YES++; }  
     elsif( $Code eq 'I' ) { $Incorrect++; }  
     elsif( $Code eq 'O' ) { $Override++; }  
     elsif( $Code eq 'U' ) { $StdNo--; }  
     ($Prob,$Tries,$Wrongs,$Code)=split(/\:/,$list[$nIdx]);  
  } while ( $Prob eq $Temp && $nIdx < $NoElements );  
   
  $p_count++;  Returns html for a selection box allowing the user to choose one (or more) 
   of the fields of student data available (fullname, username, id, section, etc)
   
  ($Temp,$ResId)=split(/\*/,$Temp);  =over 4
   
         $Temp = '<a href="'.$hash{'src_'.$ResId}.'" target="_blank">'.$Temp.'</a>';  =item $elementname The name of the HTML form element
       
  my $res = &Apache::lonnet::declutter($hash{'src_'.$ResId});  
         my $urlres=$res;  
   
         $ResId=~/(\d+)\.(\d+)/;  =item $status 'multiple' or 'single' selection box
         my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
         $urlres=$Map;  
    
   
         $res = '<a href="'.$hash{'src_'.$ResId}.'">'.$res.'</a>';  
   
         #$Map = '<a href="'.$Map.'">'.$res.'</a>';  
   
 #------------------------ Compute the Average of Tries about one problem  
  my $Average = ($StdNo) ? $TotalTries/$StdNo : 0;  
   
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___timestamp'}=time;         
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___stdno'}=$StdNo;  
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___avetries'}=$Average;  
      
 #-------------------------------- Compute percentage of Wrong tries  
  my $Wrong = ( $StdNo ) ? 100 * ( $Incorrect / $StdNo ) : 0;  
   
 #-------------------------------- Compute Standard Deviation  
  my $StdDev = 0;   
  if ( $StdNo > 1 ) {  
     for ( my $n = 0; $n < $StdNo; $n++ ) {  
                 my $Dif = $StdLst[ $n ]-$Average;  
  $StdDev += $Dif*$Dif;  
     }   
     $StdDev /= ( $StdNo - 1 );  
     $StdDev = sqrt( $StdDev );  
  }  
   
 #-------------------------------- Compute Degree of Difficulty  
  my $DoDiff = 0;  
  if( $TotalTries > 0 ) {  
     $DoDiff = 1 - ( ( $YES + $Override ) / $TotalTries );  
 #    $DoDiff =  ($TotalTries)/($YES + $Override+ 0.1);      
  }  
          
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___difficulty'}=$DoDiff;  
   
 #-------------------------------- Compute the Skewness  
  my $Skewness = 0;  
         my $Sum = 0;   
  if ( $StdNo > 0 && $StdDev > 0 ) {  
     for ( my $n = 0; $n < $StdNo; $n++ ) {  
                 my $Dif = $StdLst[ $n ]-$Average;  
  $Skewness += $Dif*$Dif*$Dif;  
     }   
     $Skewness /= $StdNo;  
     $Skewness /= $StdDev*$StdDev*$StdDev;  
  }  
 #-----------------  Some restition in presenting the float numbers  
  my $Avg = sprintf( "%.2f", $Average );  
  my $Wrng = sprintf( "%.1f", $Wrong );  
  my $SD = sprintf( "%.1f", $StdDev );  
  my $DoD = sprintf( "%.2f", $DoDiff );  
  my $Sk = sprintf( "%.1f", $Skewness );  
       
  $CachData{($p_count-1)}=$Temp.':'.$StdNo.':'.$TotalTries.':'.  
                                 $MxTries.':'.$Avg.':'.$YES.':'.  
                                 $Override.':'.$Wrng.':'.$SD.':'.  
                                 $Sk.':'.$DoD.':'.$Map.':'.$Prob;  
   
         $urlres=~/^(\w+)\/(\w+)/;  
         if ($StdNo) {   
            &Apache::lonnet::put('resevaldata',\%storestats,$1,$2);   
         }  
   
 #-------------------------------- Row of statistical table  
         if ( $DiscFlag == 0 ) {  
     $r->print( "\n".'<tr>'.  
                "\n".'<td>'.$p_count.'</td>'.  
                "\n".'<td>'.$Temp.'</td>'.  
                "\n".'<td>'.$StdNo.'</td>'.  
                "\n".'<td>'.$TotalTries.'</td>'.  
                "\n".'<td>'.$MxTries.'</td>'.  
                "\n".'<td>'.$Avg.'</td>'.  
                "\n".'<td>'.$YES.'</td>'.  
                "\n".'<td>'.$Override.'</td>'.  
                "\n".'<td>'.$Wrng.'</td>'.  
                "\n".'<td>'.$SD.'</td>'.  
                "\n".'<td>'.$Sk.'</td>'.  
                "\n".'<td>'.$DoD.'</td>'.  
                "\n".'<td>'.$Map.'</td>'.  
                        "\n".'</tr>' );  
     $GraphDat{$nIdx}=$DoD.':'.$Wrng;  
  }   
     }  
 }  
   
   =item $numvisible The number of options to be visible
   
 sub Cache_Statistics {  =back
     my @list = ();  
     my $Useful;  
     my $UnUseful;  
     my %myHeader = reverse( %Header );  
     $Pos = $myHeader{$ENV{'form.sort'}};  
     $p_count = 0;  
   
     foreach my $key( keys %CachData) {   
  my @Temp=split(/\:/,$CachData{$key});  
  if ( $Pos == 0 || $Pos == 11 ) {  
     ($UnUseful,$Useful)=split(/\>/,$Temp[$Pos]);  
  }  
  else {  
     $Useful = $Temp[$Pos];  
  }     
  $list[$p_count]=$Useful.'&'.$CachData{$key};  
         $p_count++;  
     }  
   
     @list = sort MySort (@list);  
   
     for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
  my( $Pre, $Post ) = split(/\&/,$list[$nIdx]);   
  my ($Temp,$StdNo,$TotalTries,$MxTries,$Avg,$YES,  
             $Override,$Wrng,$SD,$Sk,$DoD,$res,$Prob)=split(/\:/,$Post);  
  $r->print( "\n".'<tr>'.  
                "\n".'<td>'.($nIdx+1).'</td>'.  
                "\n".'<td  bgcolor="#FFFFFF">'.$Temp.'</td>'.  
                "\n".'<td>'.$StdNo.'</td>'.  
                "\n".'<td>'.$TotalTries.'</td>'.  
                "\n".'<td>'.$MxTries.'</td>'.  
                "\n".'<td>'.$Avg.'</td>'.  
                "\n".'<td>'.$YES.'</td>'.  
                "\n".'<td>'.$Override.'</td>'.  
                "\n".'<td>'.$Wrng.'</td>'.  
                "\n".'<td>'.$SD.'</td>'.  
                "\n".'<td>'.$Sk.'</td>'.  
                "\n".'<td>'.$DoD.'</td>'.  
                "\n".'<td>'.$res.'</td>'.  
                "\n".'</tr>' );  
  $GraphDat{$nIdx}=$DoD.':'.$Wrng;  
     }   
 }  
   
 # ------------------------------------------- Prepare data for Graphical chart  =cut
   
 sub GetGraphData {  ##############################################
     my $Tag = shift;  ##############################################
     my $Col;  sub StudentDataSelect {
     my $data='';      my ($elementname,$status,$numvisible)=@_;
     my $count = 0;      if ($numvisible < 1) {
     my $Max = 0;          return;
     my $cid=$ENV{'request.course.id'};  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     foreach (keys %GraphDat) {delete $GraphDat{$_};}  
     if (-e "$GraphDB") {  
  if (tie(%GraphDat,'GDBM_File',"$GraphDB",&GDBM_READER,0640)) {  
     if ( $Tag eq 'DoDiff Graph' ) {  
  $Tag = 'Degree-of-Difficulty';  
  $Col = 0;  
     }  
     else {  
  $Tag = 'Wrong-Percentage';  
  $Col = 1;  
     }  
     foreach (sort NumericSort keys %GraphDat) {   
  my @Temp=split(/\:/,$GraphDat{$_});  
                 my $inf = $Temp[$Col];   
  if ( $Max < $inf ) {$Max = $inf;}  
  $data .= $inf.',';  
  $count++;  
     }  
             untie(%GraphDat);  
     my $Course = $ENV{'course.'.$cid.'.description'};  
     $Course =~ s/\ /"_"/eg;  
     $GData=$Course.'&'.$Tag.'&'.$Max.'&'.$count.'&'.$data;  
   
  }  
  else {  
     $r->print("Unable to tie hash to db file");  
  }  
     }      }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Deal with 'all'
       $Str .= '    <option value="all" ';
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               $Str .= 'selected ';
               last;
           }
       }
       $Str .= ">all</option>\n";
       #
       # Loop through the student data fields
       foreach my $item (@StudentDataOrder) {
           $Str .= '    <option value="'.$item.'" ';
           foreach (@SelectedStudentData) {
               if ($item eq $_ ) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$item."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
 }  }
   
   #######################################################
   #######################################################
   
 sub initial {  =pod
 # --------------------------------- Initialize the global varaibles  
   undef @students;  =item &get_selected_maps($elementname)
   undef @cols;  
   undef %maps;  Input: Name of the <select> form element used to specify the maps.
   undef %section;  
   undef %StuBox;  Returns: Array of symbs of selected maps or the description 'all'.
   undef @list;     If form.$elementname does not exist, 'all' is returned.
   undef %CachData;  
   undef %GraphDat;  =cut
   undef %DiscFac;  
   undef $CurMap;  #######################################################
   undef $CurSec;  #######################################################
   undef $CurStu;  sub get_selected_maps {
   undef $p_count;      my ($elementname) = @_;
   undef $Pos;      my @selected_maps;
   undef $GData;      if (exists($ENV{'form.'.$elementname})) {
           if (ref($ENV{'form.'.$elementname})) {
               @selected_maps = @{$ENV{'form.'.$elementname}};
           } else {
               @selected_maps = ($ENV{'form.'.$elementname});
           }
       } else {
           @selected_maps = ('all');
       }
       return @selected_maps;
 }  }
   
   
 sub ClassList {  #######################################################
   #######################################################
   
     &GetStatus();  =pod
   
     $cid=$ENV{'request.course.id'};  =item &selected_sequences_with_assessments
     my $chome=$ENV{'course.'.$cid.'.home'};  
     my ($cdom,$cnum)=split(/\_/,$cid);  
 # ----------------------- Get first and last resource, see if there is anything  
     $firstres=$hash{'map_start_/res/'.$ENV{'request.course.uri'}};  
     $lastres=$hash{'map_finish_/res/'.$ENV{'request.course.uri'}};  
     if (($firstres) && ($lastres)) {  
 # ----------------------------------------------------------------- Render page  
  my $classlst=&Apache::lonnet::reply  
                  ('dump:'.$cdom.':'.$cnum.':classlist',$chome);  
  my $StudNo = 0;  
  unless ($classlst=~/^error\:/) {  
     foreach (sort split(/\&/,$classlst)) {  
  my ($name,$value)=split(/\=/,$_);  
  my ($end,$start)=split(/\:/,&Apache::lonnet::unescape($value));  
  $name=&Apache::lonnet::unescape($name);  
  my ($sname,$sdom)=split(/\:/,$name);  
  my $ssec=&Apache::lonnet::usection($sdom,$sname,$cid);  
                 if ($ssec==-1) {next;}  
  $ssec=($ssec) ? $ssec : '(none)';  
  $ssec=(int($ssec)) ? int($ssec) : $ssec;  
  #$r->print($sname.'...'.$ssec.'<br>');  
  $section{$ssec}=$ssec;  
  if ($CurSec eq 'All Sections' || $ssec eq $CurSec) {  
     $students[$StudNo]=$name;  
     $StuBox{$sname}=$ssec;  
  }  
  $StudNo++;  
     }  
  }  
  else {  
     $r->print('<h1>Could not access course data</h1>');  
  }   
         $r->print("Total number of students : ".($#students+1));  
         $r->rflush();  
 # --------------- Find all assessments and put them into some linear-like order  
  &tracetable($firstres,'&'.$lastres.'&');  
   
 #my $c=0;  Retrieve the sequences which were selected by the user to show.  
 #foreach(@mapsort) {  
 #    $c++;  
 #    $r->print('<br>'.$mapsort[$c]);  
 #}  
 #$r->print('<br> Count = '.$c);  
   
   Input: $mode: scalar.  Either 'selected' or 'all'.  If not specified,
       'selected' is used.
   
   Returns: an array containing a navmap object and navmap resources, 
       or an array containing a scalar with an error message.
   
   =cut
   
   #######################################################
   #######################################################
   sub selected_sequences_with_assessments {
       my ($mode) = @_;
       $mode = 'selected' if (! defined($mode));
       my $navmap = Apache::lonnavmaps::navmap->new();
       if (!defined($navmap)) {
           return ('Can not open Coursemap');
       }
       #
       my @sequences = $navmap->retrieveResources(undef,
                                                  sub { shift->is_map(); },1,0,1);
       my @sequences_with_assessments;
       for my $sequence ($navmap->getById('0.0'), @sequences) {
    if ($navmap->hasResource($sequence,sub { shift->is_problem(); }, 0)){
               push(@sequences_with_assessments,$sequence);
           }
     }      }
       #
       my @sequences_to_show;
       foreach my $sequence (@sequences_with_assessments) {
           if ($mode eq 'all') {
               push (@sequences_to_show,$sequence);
           } elsif ($mode eq 'selected') {
               foreach my $map_symb (&get_selected_maps('Maps')) {
                   if ($sequence->symb eq $map_symb || $map_symb eq 'all'){
                       push (@sequences_to_show,$sequence);
                       last; # Only put it in once
                   }
               }
           }
   
 # ------------------------------------------------------------- End render page   
     else {  
  $r->print('<h3>Undefined course sequence</h3>');  
     }      }
     &MapSecOptions();      return $navmap,@sequences_to_show;
 }  }
   
   ##############################################
   ##############################################
   
   =pod 
   
   =item &map_select($elementname,$status,$numvisible,$restriction) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sequences in the course.  The values of the sequences are the symbs.
   If the top sequence is selected, the value 'top' will result.
   
   =over 4
   
   =item $elementname The name of the HTML form element
   
   =item $status 'multiple' or 'single' selection box
   
   =item $numvisible The number of options to be visible
   
   =back
   
 sub Menu {  =cut
     my $InpStr = $ENV{'form.sort'};  
     if ( $InpStr eq 'DoDiff Graph' || $InpStr eq '%Wrong Graph' ) {        ##############################################
  &GetGraphData($InpStr);  ##############################################
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" />');  sub map_select {
     }      my ($elementname,$status,$numvisible)=@_;
     else {      if ($numvisible < 1) {
  $r->print('<html><head><title>LON-CAPA Statistics</title></head>');          return;
       }
       #
         $r->print('<body bgcolor="#FFFFFF">'.      # Set up array of selected items
                   '<script>window.focus(); window.width=500;window.height=500; </script>'.      my @selected_maps = &get_selected_maps($elementname);
                   '<img align=right src=/adm/lonIcons/lonlogos.gif>');      #
 # ---------------------------------------------------------------- Course title      # Build the form element
         $r->print('<h1> Course : "'.      my $form = "\n";
                   $ENV{'course.'.$ENV{'request.course.id'}.      $form .= '<select name="'.$elementname.'" ';
                   '.description'}.'"</h1><h2>'.localtime().'</h2>');      if ($status ne 'single') {
 # ------------------------------- This is going to take a while, produce output          $form .= 'multiple="true" ';
         $r->rflush();      }
       $form .= 'size="'.$numvisible.'" >'."\n";
  $r->print("\n".'<form name=stat method=post action="/adm/statistics" >');      #
       # Deal with 'all'
  my $content = $ENV{'form.sort'};      foreach (@selected_maps) {
  if ($content eq '' || $content eq 'Return to Menu') {          if ($_ eq 'all') {
     my $Ptr = '<h3>';              @selected_maps = ('all');
     $Ptr .= '<input type=submit name=sort value="Problem Evaluation"/>';#General Statistics"/>';              last;
     $Ptr .= '<br><br>';          }
     $Ptr .= '<input type=submit name=sort value="Student Assessment"/>';      }
     $Ptr .= '<br><br>';      #
 #    $Ptr .= '<input type=submit name=sort value=Discrimination>';#"Problem Evaluation"/>';      # Put in option for 'all'
     $Ptr .= '</h3>';      $form .= '    <option value="all" ';
     $r->print( $Ptr );      foreach (@selected_maps) {
       }          if ($_ eq 'all') {
  else {              $form .= 'selected ';
     &initial();              last;
     &ClassList();          }
     if ( $content eq 'Discrimination' || #'Problem Evaluation' ||  
                  $content eq 'Recalculate Discrimintion Factor' ) {  
  &CreateDiscFac();  
     }  
     elsif ( $content eq 'Student Assessment' ||   
                     $content eq 'Create Student Report' ) {  
  &StudentOptions();  
  &StudentReport($CurStu,$StuBox{"$CurStu"});  
     }  
     else {  
  &PreStatTable();  
     }  
  }  
  $r->print("\n".'</form>'.  
                   "\n".'</body>'.  
                   "\n".'</html>');  
  $r->rflush();  
     }      }
       $form .= ">all</option>\n";
       #
       # Loop through the sequences
       my @sequences = &selected_sequences_with_assessments('all');
       my $navmap;
       if (!ref($sequences[0])) {
           return $sequences[0];
       } else {
           $navmap = shift(@sequences);
       }
       foreach my $seq (@sequences){
           $form .= '    <option value="'.$seq->symb.'" ';
           foreach (@selected_maps) {
               if ($seq->symb eq $_) {
                   $form .= 'selected ';
                   last;
               }
           }
           $form .= '>'.$seq->compTitle."</option>\n";
       }
       $form .= "</select>\n";
       return $form;
 }  }
   
 sub StudentOptions {  ##############################################
     my $OpSel5='';  ##############################################
     $CurStu = $ENV{'form.student'};  
     if ( $CurStu eq '' ) {   =pod 
         $CurStu = 'All Students';  
         $OpSel5 = 'selected';  
     }  
     my $Ptr ='';  
 # ----------------------------------- Loading the Students Combobox  
     $Ptr .= '<br><b>Select Student</b>'."\n".  
            '<select name="student">'."\n".   
     '<option '.$OpSel5.'>All Students</option>';                               
     foreach my $key ( sort keys %StuBox ) {            
  $Ptr .= '<option';  
  if ($CurStu eq $key) {$Ptr .= ' selected';}       
         $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Create Student Report" />';  
     $r->print( $Ptr );  
     $r->rflush();  
 }  
   
 sub GetStatus {  =item &SectionSelect($elementname,$status,$numvisible) 
   
     $OpSelDis1='';  Returns html for a selection box allowing the user to choose one (or more) 
     $OpSelDis2='';  of the sections in the course.  
     $OpSel1='';  
     $OpSel2='';  Uses the package variables @Sections and @SelectedSections
     $OpSel3='';  =over 4
     $OpSel4='';  
   =item $elementname The name of the HTML form element
 #    if ( $ENV{'form.DisType'} eq 'Total Number of Correct Answers' ) {   
 # $OpSelDis1='selected';   =item $status 'multiple' or 'single' selection box
 # $CurDis=0;  
 #    }  =item $numvisible The number of options to be visible
 #    else { $OpSel2 = 'selected'; $CurDis = 1;}  
   =back
     if ( $ENV{'form.order'} eq 'Descending' ) { $OpSel2='selected'; }  
     else { $OpSel1 = 'selected'; }  =cut
     $CurMap = $ENV{'form.maps'};  
     if ( $CurMap eq '' ) {   ##############################################
  $CurMap = 'All Maps';  ##############################################
  $OpSel3 = 'selected';  sub SectionSelect {
     }      my ($elementname,$status,$numvisible)=@_;
     $CurSec = $ENV{'form.section'};      if ($numvisible < 1) {
     if ( $CurSec eq '' ) {           return;
  $CurSec = 'All Sections';      }
         $OpSel4 = 'selected';      #
       # Make sure we have the data we need to continue
       if (! @Sections) {
           &PrepareClasslist()
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Loop through the sequences
       foreach my $s (@Sections) {
           $Str .= '    <option value="'.$s.'" ';
           foreach (@SelectedSections) {
               if ($s eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$s."</option>\n";
     }      }
       $Str .= "</select>\n";
       return $Str;
 }  }
   
   ##################################################
 sub MapSecOptions {  ##################################################
 # ----------------------------------- Loading the Maps Combobox  sub DisplayClasslist {
     my $Ptr = '<br>';      my ($r)=@_;
     $Ptr .= '<br><input type="submit" name="sort" value="Return to Menu" />';      &Apache::lonhtmlcommon::add_breadcrumb
     $Ptr .= '<br><b> Select &nbsp; Map &nbsp; &nbsp; </b>'."\n".          ({text=>'Select One Student'});
            '<select name="maps">'."\n".       #
     '<option '.$OpSel3.'>All Maps</option>';                                   # Output some of the standard interface components
     foreach my $key ( sort keys %maps ) {                my $Str;
  $Ptr .= '<option';      $Str .= &Apache::lonhtmlcommon::breadcrumbs(undef,'Select One Student');
         if ($CurMap eq $key) {$Ptr .= ' selected';}           $Str .= '<p><table cellspacing="5">'."\n";
  $Ptr .= '>'.$key."</option>\n";           $Str .= '<tr>';
     }      $Str .= '<th align="center"><b>'.&mt('Sections').'</b></th>';
     $Ptr .= '</select>';      $Str .= '<th align="center"><b>'.&mt('Enrollment Status').'</b></th>';
     $Ptr .= '&nbsp;&nbsp;&nbsp;';      $Str .= '</tr>'.$/;
       $Str .= '<tr>';
 # ----------------------------------- Loading the Sections Combobox      $Str .= '<td>'.
     $Ptr .= '<br><b>Select Section</b>'."\n".          &Apache::lonstatistics::SectionSelect('Section','multiple',5).
            '<select name="section">'."\n".           '</td>';
     '<option '.$OpSel4.'>All Sections</option>';                                   $Str .= '<td>'.
     foreach my $key ( sort keys %section ) {                    &Apache::lonhtmlcommon::StatusOptions(undef,undef,5).
  $Ptr .= '<option';          '</td>';
         if ($CurSec eq $key) {$Ptr .= ' selected';}           
  $Ptr .= '>'.$key."</option>"."\n";           $Str .= '</tr>'.$/;
       $Str .= '</table></p>';
       $Str .= '<input type="submit" name="selectstudent" value="'.
           &mt('Update Display').'" />';
       $r->print($Str);
       $r->rflush();
       #
       my @Fields = ('fullname','username','domain','id','section','status');
       #
       $Str = '';
       if (! @Students) {
           if ($SelectedSections[0] eq 'all') { 
               if (lc($ENV{'form.Status'}) eq 'any') {
                   $Str .= '<h2>'.
                       &mt('There are no students in the course.').
                       '</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'active') {
                   $Str .= '<h2>'.
                   &mt('There are no currently enrolled students in the course.').
                       '</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
                   $Str .= '<h2>'.
                       &mt('There are no previously enrolled students in the course.').
                           '</h2>';
               }
           } else { 
               my $sections;
               if (lc($ENV{'form.Status'}) eq 'any') {
                   $Str .= '<h2>'.
                       &mt('There are no students in the selected sections.').
                       '</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'active') {
                   $Str .= '<h2>'.
                       &mt('There are no currently enrolled students in the selected sections.').
                       '</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
                   $Str .= '<h2>'.
                       &mt('There are no previously enrolled students in the selected sections.').
                       '</h2>';
               }
           }
           $Str.= '<a href="/adm/statistics?reportSelected=student_assessment">'.
               &mt('Click here to return to the chart').'</a>';
           $r->print($Str);
           $r->rflush();
           return;
     }      }
     $Ptr .= '</select>'."\n";  
   
     $r->print( $Ptr );      # "Click" is asinine but it is probably not my place to change the world.
       $Str .= '<h2>Click on a students name or username to view their chart</h2>';
       $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
       $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
       foreach my $field (@Fields) {
           $Str .= '<th><a href="/adm/statistics?'.
               'reportSelected=student_assessment&'.
               'selectstudent=1&'.
               'sort='.$field.'">'.&mt($field).
               '</a></th>';
       }
       $Str .= '</tr>'."\n";
       #
       my $alternate = 0;
       foreach my $student (@Students) { # @Students is a package variable
           my $sname = $student->{'username'}.':'.$student->{'domain'};
           if($alternate) {
               $Str .= '<tr bgcolor="#ffffe6">';
           } else {
               $Str .= '<tr bgcolor="#ffffc6">';
           }
           $alternate = ($alternate + 1) % 2;
           #
           foreach my $field (@Fields) {
               $Str .= '<td>';
               if ($field eq 'fullname' || $field eq 'username') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('student_assessment');
                   $Str .= '&sort='.&Apache::lonnet::escape($ENV{'form.sort'});
                   $Str .= '&SelectedStudent=';
                   $Str .= &Apache::lonnet::escape($sname).'">';
                   $Str .= $student->{$field}.'&nbsp';
                   $Str .= '</a>';
               } elsif ($field eq 'status') {
                   $Str .= &mt($student->{$field});
               } else {
                   $Str .= $student->{$field};
               }
               $Str .= '</td>';
           }
           $Str .= "</tr>\n";
       }
       $Str .= '</table></td></tr></table>'."\n";
       #
       $r->print($Str);
     $r->rflush();      $r->rflush();
       #
       return;
 }  }
   
   ##############################################
   ##############################################
   sub CreateMainMenu {
       #
       # Define menu data
       my @reports = ({ internal_name => 'problem_statistics',
                        name => &mt('Overall Problem Statistics'),
                        short_description => 
       &mt('Student performance statistics on all problems.'),
                    },
                      { internal_name => 'problem_analysis',
                        name => &mt('Detailed Problem Analysis'),
                        short_description => 
       &mt('Detailed statistics and graphs of student performance on problems.'),
                    },
                      { internal_name => 'submissiontime_analysis',
                        name => &mt('Submission Time Plots'),
                        short_description => 
       &mt('Display and analysis of submission times on assessments.'),
                    },
                      { internal_name => 'student_submission_reports',
                        name => &mt('Student Submission Reports'),
                        short_description => 
       &mt('Prepare reports of student submissions.'),
                    },
                      { internal_name => 'survey_reports',
                        name => &mt('Survey Reports'),
                        short_description => 
       &mt('Prepare reports on survey results.'),
                    },
                      { internal_name => 'correct_problems_plot',
                        name => &mt('Correct Problems Plot'),
                        short_description => 
       &mt('Display a histogram of student performance in the course.'),
                    },
   #                   { internal_name => 'student_assessment',
   #                     name => &mt('Problem Status Chart'),
   #                     short_description => 
   #    &mt('Brief view of each students performance in course.'),
   #                 },
                      # 'percentage'  => 'Correct-problems Plot',
                      # 'activitylog' => 'Activity Log',
                      );
       #
       # Create the menu
       my $Str;
       $Str .= '<h2>'.&mt('Please select a report to generate').'</h2>';
       foreach my $reportdata (@reports) {
           $Str .='    <h3><a href="/adm/statistics?reportSelected='.
               $reportdata->{'internal_name'}.'" >'.
               $reportdata->{'name'}."</a></h3>\n";
           $Str .= '    '.('&nbsp;'x8).$reportdata->{'short_description'}.
               "\n";
       }
       $Str .="</dl>\n";
       #
       return $Str;
   }
   
 # ================================================================ Main Handler  ##############################################
   ##############################################
 sub handler {  sub handler {
     $r=shift;      my $r=shift;
       my $c = $r->connection();
     if (&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {      #
 # ------------------------------------------- Set document type for header only      # Check for overloading
  if ($r->header_only) {      my $loaderror=&Apache::lonnet::overloaderror($r);
     if ($ENV{'browser.mathml'}) {      if ($loaderror) { return $loaderror; }
  $r->content_type('text/xml');      $loaderror=
     }          &Apache::lonnet::overloaderror($r,
     else {           $ENV{'course.'.$ENV{'request.course.id'}.'.home'});
  $r->content_type('text/html');      if ($loaderror) { return $loaderror; }
     }      #
     $r->send_http_header;      # Check for access
     return OK;      if (! &Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {
  }      
  my $requrl=$r->uri;  
 # ----------------------------------------------------------------- Tie db file  
   
  undef %hash;  
   
  if ($ENV{'request.course.fn'}) {  
     my $fn=$ENV{'request.course.fn'};  
     if (-e "$fn.db") {  
  if (tie(%hash,'GDBM_File',"$fn.db",&GDBM_READER,0640)) {  
 # ------------------------------------------------------------------- Hash tied  
     $r->content_type('text/html');  
     $r->send_http_header;  
     &Menu();  
  }  
  else {  
     $r->content_type('text/html');  
     $r->send_http_header;  
     $r->print('<html><body>Coursemap undefined.</body></html>');  
  }  
 # ------------------------------------------------------------------ Untie hash  
  unless (untie(%hash)) {  
     &Apache::lonnet::logthis("<font color=blue>WARNING: ".  
                             "Could not untie coursemap $fn (browse).</font>");   
  }  
   
 # -------------------------------------------------------------------- All done  
  return OK;  
 # ----------------------------------------------- Errors, hash could no be tied  
     }  
  }   
  else {  
     $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";  
     return HTTP_NOT_ACCEPTABLE;   
  }  
     }  
     else {  
         $ENV{'user.error.msg'}=          $ENV{'user.error.msg'}=
         $r->uri.":vgr:0:0:Cannot view grades for complete course";              $r->uri.":vgr:0:0:Cannot view grades for complete course";
           if (! &Apache::lonnet::allowed('vgr',
         return HTTP_NOT_ACCEPTABLE;                         $ENV{'request.course.id'}.'/'.$ENV{'request.course.sec'})) {
               $ENV{'user.error.msg'}=
                   $r->uri.":vgr:0:0:Cannot view grades with given role";
               return HTTP_NOT_ACCEPTABLE;
           }
       }
       #
       # Send the header
       &Apache::loncommon::no_cache($r);
       &Apache::loncommon::content_type($r,'text/html');
       $r->send_http_header;
       if ($r->header_only) { return OK; }
       #
       # Extract form elements from query string
       &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                               ['sort','reportSelected',
                                                'SelectedStudent']);
       #
       # Give the LON-CAPA page header
       my $style = <<ENDSTYLE;
   <style type="text/css">
       ul.sub_studentans { list-style-type: none }
       ul.sub_correctans { list-style-type: none }
       tr.even           { background-color: \#CCCCCC }
       td.essay          { border: 1px solid gray; }
   </style>
   ENDSTYLE
       my $html=&Apache::lonxml::xmlbegin();
       $r->print($html.'<head><title>'.
                 &mt('Course Statistics and Charts').
                 '</title>'.$style.
                 "</head>\n".
                 &Apache::loncommon::bodytag('Course Statistics and Charts'));
       $r->rflush();
       # 
       # Either print out a menu for them or send them to a report
       &Apache::lonhtmlcommon::clear_breadcrumbs();
       &Apache::lonhtmlcommon::add_breadcrumb({href=>'/adm/statistics',
                                               title=>'Statistics',
                                               text =>'Statistics',
                                               faq=>139,
                                               bug=>'Statistics and Charts'});
       if (! exists($ENV{'form.reportSelected'}) || 
           $ENV{'form.reportSelected'} eq '') {
           $r->print(&Apache::lonhtmlcommon::breadcrumbs
                     (undef,&mt('Statistics Main Page')).
                     &CreateMainMenu());
       } else {
       #
           if (! &Apache::lonmysql::verify_sql_connection()) {
               my $serveradmin = $r->dir_config('lonAdmEMail');
               $r->print('<h2><font color="Red">'.
                         &mt('Unable to connect to database!').
                         '</font></h2>');
               $r->print('<p>'.
                         &mt('Please notify the server administrator ').
                         '<b>'.$serveradmin.'</b></p>');
               $r->print('<p>'.
                         &mt('Course Statistics and Charts cannot be '.
                             'retrieved until the database is restarted.  '.
                             'Your data is intact but cannot be displayed '.
                             'at this time.').'</p>');
               $r->print('</body></html>');
               return;
           }
           #
           # Clean out the caches
           if (exists($ENV{'form.ClearCache'})) {
               &Apache::loncoursedata::delete_caches($ENV{'requres.course.id'});
           }
           #
           # Begin form output
           $r->print('<form name="Statistics" ');
           $r->print('method="post" action="/adm/statistics">');
           $r->rflush();
           #
           my $GoToPage = $ENV{'form.reportSelected'};
           #
           $r->print('<input type="hidden" name="reportSelected" value="'.
                     $GoToPage.'">');
           if($GoToPage eq 'activitylog') {
   #        &Apache::lonproblemstatistics::Activity();
           } elsif($GoToPage eq 'problem_statistics') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=problem_statistics',
                     text=>'Overall Problem Statistics'});
               &Apache::lonproblemstatistics::BuildProblemStatisticsPage($r,$c);
           } elsif($GoToPage eq 'problem_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=problem_analysis',
                     text=>'Detailed Problem Analysis'});
               &Apache::lonproblemanalysis::BuildProblemAnalysisPage($r,$c);
           } elsif($GoToPage eq 'submissiontime_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                         '/adm/statistics?reportselected=submissiontime_analysis',
                         text=>'Submission Time Plots'});
               &Apache::lonsubmissiontimeanalysis::BuildSubmissionTimePage($r,$c);
           } elsif($GoToPage eq 'student_submission_reports') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                     '/adm/statistics?reportselected=student_submission_reports',
                     text=>'Student Submission Reports'});
               &Apache::lonstudentsubmissions::BuildStudentSubmissionsPage($r,$c);
           } elsif($GoToPage eq 'survey_reports') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                     '/adm/statistics?reportselected=survey_reports',
                     text=>'Survey Reports'});
               &Apache::lonsurveyreports::BuildSurveyReportsPage($r,$c);
           } elsif($GoToPage eq 'correct_problems_plot') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=correct_problems_plot',
                     text=>'Correct Problems Plot'});
               &Apache::loncorrectproblemplot::BuildCorrectProblemsPage($r,$c);
           } elsif($GoToPage eq 'student_assessment') {
               &Apache::lonhtmlcommon::clear_breadcrumbs();
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=student_assessment',
                     text=>'Chart'});
               &Apache::lonstudentassessment::BuildStudentAssessmentPage($r,$c);
           }
           #
           $r->print("</form>\n");
     }      }
       $r->print("</body>\n</html>\n");
       $r->rflush();
       #
       return OK;
 }  }
   
 1;  1;
 __END__  
   
   #######################################################
   #######################################################
   
   =pod
   
   =back
   
   =cut
   
   #######################################################
   #######################################################
   
   __END__
   
Removed from v.1.3  
changed lines
  Added in v.1.117

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>