[BACK]Return to lonstatistics.pm CVS log [TXT] [DIR] Up to [LON-CAPA] / loncom / interface

Diff for /loncom/interface/lonstatistics.pm between versions 1.2 and 1.148.2.7

version 1.2, 2002/02/05 12:24:45 version 1.148.2.7, 2010/12/05 17:27:30
Line 1 Line 1
 # The LearningOnline Network with CAPA  # The LearningOnline Network with CAPA
 # (Publication Handler  
 #  #
 # $Id$  # $Id$
 #  #
Line 26 Line 25
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
 # (Navigate problems for statistical reports  # (Navigate problems for statistical reports
 # YEAR=2001  #
 # 5/05/01, 7/09/01, 7/25/01, 8/11/01,9/13/01, 9/26/01 Behrouz Minaei  
 # 10/5/01, 10/9/01, 10/22/01, 10/26/01 Behrouz Minaei  
 # 11/1/01, 11/4/01, 11/16/01 Behrouz Minaei  
 # 12/14/01, 12/16/01, 12/18/01,12/20/01,12/31/01 Behrouz Minaei  
 # YEAR=2002  
 # 1/22/02,2/1/02  
 ###  ###
   
   
   
 package Apache::lonstatistics;  package Apache::lonstatistics;
   
 use strict;  use strict;
 use Apache::Constants qw(:common :http);  use Apache::Constants qw(:common :http);
 use Apache::lonnet();  use vars qw(
       @FullClasslist 
       @Students
       @Sections
       @Groups 
       %StudentData
       @StudentDataOrder
       @SelectedStudentData
       $enrollment_status);
   
   use Apache::lonnet;
 use Apache::lonhomework;  use Apache::lonhomework;
 use HTML::TokeParser;  use Apache::loncommon;
 use GDBM_File;  use Apache::loncoursedata;
 use Benchmark;  use Apache::lonhtmlcommon;
   use Apache::lonmysql;
 # -------------------------------------------------------------- Module Globals  use Apache::lonlocal;
 my %hash;  use Apache::longroup;
 my %CachData;  use Time::HiRes;
 my %GraphDat;  #
 my %maps;  # Statistics Packages
 my @mapsort;  use Apache::lonproblemanalysis();
 my %section;  use Apache::lonsubmissiontimeanalysis();
 my %StuBox;  use Apache::loncorrectproblemplot();
 my %DiscFac;  use Apache::lonproblemstatistics();
 my $CurMap;  use Apache::lonstudentassessment();
 my $CurSec;  use Apache::lonpercentage;
 my $CurStu;  use Apache::lonstudentsubmissions();
 my @cols;  use Apache::lonsurveyreports();
 my @list;  use Apache::longradinganalysis();
 my @students;  use LONCAPA;
 my $p_count;  
 my $Pos;  #
 my $r;  # Classlist variables
 my $OpSel1;  #
 my $OpSel2;  my $curr_student;
 my $OpSelDis1;  my $prev_student;
 my $OpSelDis2;  my $next_student;
 my $CurDis=0;  
 my $OpSel3;  
 my $OpSel4;  sub clear_classlist_variables {
 my $GData;      undef(@FullClasslist);
 my $cid;      undef(@Students);
 my $firstres;      undef(@Sections);
 my $lastres;      undef(@Groups);
 my $DiscFlag=0;      undef(%StudentData);
 my $HWN=0;      undef(@SelectedStudentData);
       undef($curr_student);
 my %Header = (0,"Problem Title",1,"#Stdnts",2,"Tries",3,"Mod",      undef($prev_student);
               4,"Mean",5,"#YES",6,"#yes",7,"%Wrng",8,"S.D.",      undef($next_student);
               9,"Skew.",10,"DoDiff",11,"Map");  }
 #             9,"Skew.",10,"DoDiff",11,"Dis.F.",12,"Resourse URL");  
   
 my %class = qw(  sub PrepareClasslist {
 );      my %Sections;
       &clear_classlist_variables();
 my @LS;      #
 my @LF;      # Retrieve the classlist
       my $cid  = $env{'request.course.id'};
 sub GetBin {      my $cdom = $env{'course.'.$cid.'.domain'};
     my ($Index1,$Index2,$String,$C)=@_;      my $cnum = $env{'course.'.$cid.'.num'};
     my @step = 5;      my ($classlist,$field_names) = &Apache::loncoursedata::get_classlist($cdom,
     my @L=($C eq 'S') ? @LS : @LF;   $cnum);
     my $Count=$#L+1;      my @selected_sections = &get_selected_sections();
     $r->print("<br>zone   $C ------ $String ");      my @selected_groups = &get_selected_groups();
     for(my $n=0;$n<$Count;$n++){        #
  my @t=split(/\:/,$L[$n]);      # Deal with instructors with restricted section access
         $r->print("<br>$t[$Index1] $t[$Index2]");      if ($env{'request.course.sec'} !~ /^\s*$/) {
           @selected_sections = ($env{'request.course.sec'});
       }
       #
       # Set up %StudentData
       @StudentDataOrder = qw/fullname username domain id section status groups comments/;
       foreach my $field (@StudentDataOrder) {
           $StudentData{$field}->{'title'} = &mt($field);
           $StudentData{$field}->{'base_width'} = length(&mt($field));
           $StudentData{$field}->{'width'} = 
                                  $StudentData{$field}->{'base_width'};
       }
       #
       # get the status requested
       $enrollment_status = 'Active';
       $enrollment_status = $env{'form.Status'} if (exists($env{'form.Status'}));
       #
       # Get groupmembership
       my ($classgroups,$studentgroups);
       my %curr_groups = &Apache::longroup::coursegroups($cdom,$cnum);
       if (%curr_groups) {
           ($classgroups,$studentgroups) = 
       &Apache::loncoursedata::get_group_memberships($classlist,
                                                             $field_names,
     $cdom,$cnum);
       }
       my $now = time;
   
       # Process the classlist
       while (my ($student,$student_data) = each (%$classlist)) {
           my $studenthash = ();
           for (my $i=0; $i< scalar(@$field_names);$i++) {
               my $field = $field_names->[$i];
               # Store the data
               $studenthash->{$field}=$student_data->[$i];
               # Keep track of the width of the fields
               next if (! exists($StudentData{$field}));
               my $length = length($student_data->[$i]);
               if ($StudentData{$field}->{'width'} < $length) {
                   $StudentData{$field}->{'width'} = $length; 
               }
           }
           my @studentsgroups = &Apache::loncoursedata::get_students_groups
                                                      ($student,$enrollment_status,
                                                       $classgroups);
           if (@studentsgroups) {
               $studenthash->{'groups'} = join(', ',@studentsgroups);
               $studenthash->{'groupref'} = \@studentsgroups;
           } else {
               $studenthash->{'groups'} = 'none';
               $studenthash->{'groupref'} = []; 
           }
           push (@FullClasslist,$studenthash);
           #
           # Build up a list of sections
           my $section = $studenthash->{'section'};
           if (! defined($section) || $section =~/^\s*$/ || $section == -1) {
               $studenthash->{'section'} = 'none';
               $section = $studenthash->{'section'};
           }
           $Sections{$section}++;
           #
           # Only put in the list those students we are interested in
           foreach my $sect (@selected_sections) {
               if ( (($sect eq 'all') || 
                     ($section eq $sect)) &&
                    (($studenthash->{'status'} eq $enrollment_status) || 
                     ($enrollment_status eq 'Any')) 
                    ){
                   my $groupcheck = 0;
                   if (grep(/^all$/,@selected_groups)) {
                       push(@Students,$studenthash);
                       last;
                   } elsif (grep(/^none$/,@selected_groups)) {
                       if ($studenthash->{'groups'} eq 'none') {
                           push(@Students,$studenthash);
                           last;
                       }     
                   } else {
                       foreach my $group (@selected_groups) {
                           if (grep(/^$group$/,@studentsgroups)) {
                               push(@Students,$studenthash);
                               $groupcheck = 1;
                               last;
                           }
                       }
                       if ($groupcheck) {
                           last;
                       }
                   }
               }
           }
     }      }
       #
       # Put the consolidated section data in the right place
       if ($env{'request.course.sec'} !~ /^\s*$/) {
           @Sections = ($env{'request.course.sec'});
       } else {
           @Sections = sort {
       if ($a == $a && $b == $b ) { return $a <=> $b; }
       return $a cmp $b;
    } keys(%Sections);
   
           unshift(@Sections,'all'); # Put 'all' at the front of the list
       }
       # Sort the groups
       @Groups = sort {$a cmp $b} keys(%{$studentgroups});
       unshift(@Groups,'all'); # Put 'all' at the front of the list
   
       #
       # Sort the Students
       my $sortby = 'fullname';
       $sortby = $env{'form.sort'} if (exists($env{'form.sort'}));
       my @TmpStudents = sort { lc($a->{$sortby}) cmp lc($b->{$sortby}) ||
                                lc($a->{'fullname'}) cmp lc($b->{'fullname'}) ||
        lc($a->{'username'}) cmp lc($b->{'username'}) } @Students;
       @Students = @TmpStudents;
       # 
       # Now deal with that current student thing....
       $curr_student = undef;
       if (exists($env{'form.SelectedStudent'})) {
           my ($current_uname,$current_dom) = 
               split(':',$env{'form.SelectedStudent'});
           my $i;
           for ($i = 0; $i<=$#Students; $i++) {
               next if (($Students[$i]->{'username'} ne $current_uname) || 
                        ($Students[$i]->{'domain'}   ne $current_dom));
               $curr_student = $Students[$i];
               last; # If we get here, we have our student.
           }
           if (defined($curr_student)) {
               if ($i == 0) {
                   $prev_student = undef;
               } else {
                   $prev_student = $Students[$i-1];
               }
               if ($i == $#Students) {
                   $next_student = undef;
               } else {
                   $next_student = $Students[$i+1];
               }
           }
       }
       #
       if (exists($env{'form.StudentData'})) {
    @SelectedStudentData = 
       &Apache::loncommon::get_env_multiple('form.StudentData');
       } else {
           @SelectedStudentData = ('username');
       }
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               @SelectedStudentData = ('all');
               last;
           }
       }
       #
       return;
 }  }
   
 sub GetUniqe {  
     my ($Index,$String,$C)=@_;  sub get_selected_sections {
     my @step = 5;      my @selected_sections = 
     my @L=($C eq 'S') ? @LS : @LF;   &Apache::loncommon::get_env_multiple('form.Section');
     my $Count=$#L+1;      @selected_sections = ('all') if (! @selected_sections);
     my @List=();      foreach (@selected_sections) {
     for(my $n=0;$n<$Count;$n++){            if ($_ eq 'all') {
  my @t=split(/\:/,$L[$n]);              @selected_sections = ('all');
  push(@List,$t[$Index]);          }
         #$r->print("<br>$t[$Index]");  
     }  
     @List = sort NumSort(@List);  
   
     $r->print("<br>zone   $C ------ $String ");  
     my $nIdx=0;  
     my $nPrb=0;  
     my %Proc;  
     undef %Proc;  
     while ( $nIdx < $Count ) {  
  my $Focus=$List[$nIdx];  
  my $Temp = $Focus;  
  do {  
     $nIdx++;  
     $nPrb++;  
     $Focus=$List[$nIdx];  
     #$Proc{$name}=$Focus;  
  } while ( $Focus == $Temp && $nIdx < $Count );  
         $r->print("<br>$Temp --> $nPrb");  
  $nPrb=0;  
     }      }
     return %Proc;      #
       # Deal with instructors with restricted section access
       if ($env{'request.course.sec'} !~ /^\s*$/) {
           @selected_sections = ($env{'request.course.sec'});
       }
       return @selected_sections;
 }  }
   
 sub GetUniq {  
     my ($Index,$String)=@_;  sub get_selected_groups {
     my @step = 5;      my @selected_groups =
     my $Count=0;          &Apache::loncommon::get_env_multiple('form.Group');
     my @List=();      @selected_groups = ('all') if (! @selected_groups);
     my @temp=();      foreach my $grp (@selected_groups) {
     foreach (keys(%DiscFac)){            if ($grp eq 'all') {
  $Count++;              @selected_groups = ('all');
  my @temp1=split(/\:/,$_);              last;
         @temp=($temp1[$Index],@temp1);          }
  push(@List,join(':',@temp));  
     }  
     @List = sort NumericSort(@List);  
   
     $r->print("<br><br>zone ($Index) ------ $String ----- / $temp[3]");  
     my $nIdx=0;  
     my $nPrb=0;  
     my %Proc;  
     undef %Proc;  
     while ( $nIdx < $Count ) {  
  my ($Focus,$Dummy,$name)=split(/\:/,$List[$nIdx]);  
  my $Temp = $Focus;  
  $Proc{$name}=$Focus;  
  do {  
     $nIdx++;  
     $nPrb++;  
     ($Focus,$Dummy,$name)=split(/\:/,$List[$nIdx]);  
     $Proc{$name}=$Focus;  
  } while ( $Focus == $Temp && $nIdx < $Count );  
         $r->print("<br>$Temp --> $nPrb");  
  $nPrb=0;  
     }      }
     return %Proc;      return @selected_groups;
 }  }
                                                                                       
   
   
 sub NumericSort {            sub section_and_enrollment_description {
     $a <=> $b;      my ($mode) = @_;
       if (! defined($mode)) { $mode = 'localized'; }
       my @sections = &Apache::lonstatistics::get_selected_sections();
       my @groups = &Apache::lonstatistics::get_selected_groups();
       my $description;
       if ($mode eq 'localized') {
           $description = &mt('Unable to determine section, groups and access status');
       } elsif ($mode eq 'plaintext') {
           $description = 'Unable to determine section, groups and access status';
       } else {
           $description = 'Bad parameter passed to lonstatistics::section_and_enrollment_description';
           &Apache::lonnet::logthis($description);
       }
       $description = &section_or_group_text($mode,'section',@sections).
    ' '.&section_or_group_text($mode,'group',@groups);
       if ($mode eq 'localized') {
           $description .= ' '.&mt($env{'form.Status'}.' access status.');
       } elsif ($mode eq 'plaintext') {
           $description .= ' '.$env{'form.Status'}.' access status.';
       }
       return $description;
 }  }
   
   
 #------- Classification    
 sub Classify {  
     my $Count=0;  
     my @List=();  
 #    foreach(keys %class){  
 #        $r->print("<br>$_ --> $class{$_}");  
 #    }  
    # $DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.  
             #          $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;  
     @LS=();  
     @LF=();  
     my $cf=0;  
     my $cs=0;  
     foreach (keys(%DiscFac)){    
  my @l=split(/\:/,$_);  
  if ($class{$l[1]}){  
     if( $class{$l[1]} == 4 ) {  
  $cs++;  
  push(@LS,('S:'.$l[6].':'.$l[0].':'.$l[5].':'.$l[4].':'.$l[3].':'.$class{$l[1]}));  
     }      
     elsif ( $class{$l[1]} < 3 ) {  
  $cf++;  
  push(@LF,('F:'.$l[6].':'.$l[0].':'.$l[5].':'.$l[4].':'.$l[3].':'.$class{$l[1]}));  
     }  
  }  
     }  
       
     $r->print("<br>zone successful");  
     for(my $n=0;$n<$cs;$n++){  
  $r->print('<br>'.$LS[$n]);  
     }  
   
     $r->print("<br>zone failed");  
     for(my $n=0;$n<$cf;$n++){  sub section_or_group_text {
  $r->print('<br>'.$LF[$n]);      my ($mode,$type,@items) = @_;
       my $text;
       my %phrases = ();
       %{$phrases{'section'}} = (
                                 single => 'Section',
                                 all => 'All sections',
                                 plural => 'Sections',
                                );
       %{$phrases{'group'}} = (
                                 single => 'Group',
                                 all => 'All groups',
                                 plural => 'Groups',
                                );
       if (scalar(@items) == 1 && $items[0] ne 'all') {
           if ($mode eq 'localized') {
               $text = &mt($phrases{$type}{single}.' [_1].',$items[0]);
           } elsif ($mode eq 'plaintext') {
               $text = $phrases{$type}{single}.' '.$items[0].'.';
   
           }
       } elsif (scalar(@items) && $items[0] eq 'all') {
           if ($mode eq 'localized') {
               $text = &mt($phrases{$type}{all}.'.');
           } elsif ($mode eq 'plaintext') {
               $text = $phrases{$type}{all}.'.';
           }
       } elsif (scalar(@items)) {
           my $lastitem = pop(@items);
           if ($mode eq 'localized') {
               $text = &mt($phrases{$type}{plural}.' [_1] and [_2].',
                           join(', ',@items),$lastitem);
           } elsif ($mode eq 'plaintext') {
               $text = $phrases{$type}{plural}.' '.join(', ',@items).' and '.
                       $lastitem.'.';
           }
     }      }
        return $text;
 #    my %Disc = &GetUniqe(@List,5,"Discrimination Factor");      
 #    my %Opnd = &GetUniq(@List,3,"Total Opened");  
 #    my %Trys = &GetUniq(@Lsit4,"Total Tries");  
 #    my %Slvd = &GetUniq(5,"Problems Solved");  
   
    # my (@L, $Index,$String)=@_;  
   
     my %Time = &GetUniqe(1,"Time",'S');  
     &GetUniqe(1,"Time",'F');  
     &GetUniqe(2,"Discrimination Factor",'S');      
     &GetUniqe(2,"Discrimination Factor",'F');  
     &GetUniqe(3,"Solved",'S');  
     &GetUniqe(3,"Solved",'F');  
     &GetUniqe(4,"Tries",'S');  
     &GetUniqe(4,"Tries",'F');      
   
     &GetBin(1,2, "  Time ... Discriminat",'S');  
     &GetBin(1,2, "  Time ... Discriminat",'F');  
     &GetBin(1,3, "  Time ... Solved",'S');  
     &GetBin(1,3, "  Time ... Solved",'F');  
     &GetBin(1,4, "  Time ... Tries",'S');  
     &GetBin(1,4, "  Time ... Tries",'F');  
     &GetBin(2,3, "  Discriminant ... Solved",'S');  
     &GetBin(2,3, "  Discriminant ... Solved",'F');  
     &GetBin(2,4, "  Discriminant ... Tries",'S');  
     &GetBin(2,4, "  Discriminant ... Tries",'F');  
     &GetBin(3,4, "  Solved ... Tries",'S');  
     &GetBin(3,4, "  solved ... Tries",'F');  
 #    foreach (keys(%Disc)) {  
 #        $r->print("<br>: $Disc{$_} --> $Slvd{$_}");  
  #   }   
  #   $r->print("<br>..........Discriminant ...  Time................");  
  ##   foreach (keys(%Disc)) {  
  #       $r->print("<br>$Disc{$_} --> $Time{$_}");  
   #  }   
   #  $r->print("<br>..........Time ...  Solved.......................");  
   #  foreach (keys(%Disc)) {  
   #      $r->print("<br>$Disc{$_} --> $Slvd{$_}");  
   #  }    
 }  }
   
 #------- Processing upperlist and lowerlist according to each problem  
 sub ProcessDisc {  sub get_students {
     my @List = @_;      if (! @Students) {
     @List = sort (@List);          &PrepareClasslist()
     my $Count = $#List+1;  
     my $Prb;  
     my @Dis;  
     my $Slvd=0;  
     my $tmp;  
     my $Sum=0;  
     my $nIdx=0;  
     my $nStud=0;  
     my %Proc;  
     undef %Proc;  
     while ($nIdx<$Count) {  
  ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
  @Dis=split(/\+/,$tmp);  
  my $Temp = $Prb;  
  do {  
     $nIdx++;  
     $nStud++;  
     $Sum += $Dis[$CurDis];  
     ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
     @Dis=split(/\+/,$tmp);  
  } while ( $Prb eq $Temp && $nIdx < $Count );  
 # $Proc{$Temp}=$Sum.':'.$nStud;  
  $Proc{$Temp}=($Sum/$nStud).':'.$nStud;  
 #        $r->print("$nIdx) $Temp --> ($nPrb) $Proc{$Temp} <br>");  
  $Sum=0;  
  $nStud=0;  
     }      }
     return %Proc;      return @Students;
 }  }
   
 #------- Creating Discimination factor table    
 sub DiscriminationTable {  
     my $Count=0;  
     foreach (keys(%DiscFac)){   
  $Count++;  
     }  
     my $UpCnt = int(0.27*$Count);  
     $r->print("<br><br>".  
               "Current map: <b>\"$CurMap\"</b> &nbsp;&nbsp;&nbsp; ".  
               "Current Section: <b>\"$CurSec\" </b>&nbsp;&nbsp;&nbsp;".  
               "Number of valid students: <b>$Count</b>".  
               "<br>The <b>Upper 27%</b> has <b>$UpCnt</b> records.".  
               "&nbsp;&nbsp;The <b>Lower 27%</b> has <b>$UpCnt</b> records <br>".  
               "The Criterion of sorting the students: ".   
               "<b>( Sum of Partial Credits Awarded / ".  
               "Total Number of Tries )</b>".  
               " <br><br>");  
     $r->rflush();  
     my $low=0;  
     my $up=$Count-$UpCnt;  
     my @UpList=();  
     my @LowList=();  
     $Count=0;  
     foreach my $key (sort(keys(%DiscFac))){   
  $Count++;      
 #        $r->print("$Count) $key <br>");  
   
  if ($low < $UpCnt || $Count > $up) {  
     $low++;  
     my $str=$DiscFac{$key};  
 #            $r->print("$Count) $str <br>");  
     foreach(split(/\:/,$str)){  
  if ($_) {  
     if ($low<$UpCnt){push(@LowList,$_);}  
     else {push(@UpList,$_);}  
  }  
     }  
  }  
     }  
   
     my %Up=&ProcessDisc(@UpList);  
     my %Low=&ProcessDisc(@LowList);  
   
     my @list = ();  sub current_student { 
     my $Useful;      return $curr_student;
     my $UnUseful;  
     $p_count = 0;  
   
     foreach my $key( keys %CachData) {   
  my @Temp=split(/\:/,$CachData{$key});  
  ($UnUseful,$Useful)=split(/\>/,$Temp[0]);     
  $list[$p_count]=$Useful.'&'.$CachData{$key};  
         $p_count++;  
     }  
   
     @list = sort MySort (@list);  
   
     my $Result = "\n".'<table border=2>';  
     $Result .= "\n".'<tr><th>P#</th>';   
     $Result .= "\n".'<th>'.$Header{0}.'</th>';  
     $Result .= "\n".'<th>'.'Discrimination Factor'.'</th>';  
     $Result .= "\n".'<th>'.'%Upper Award'.'</th>';  
     $Result .= "\n".'<th>'.'%Lower Award'.'</th>';  
     $Result .= "\n".'<th>'.'Upper Records'.'</th>';  
     $Result .= "\n".'<th>'.'Lower Records'.'</th>';  
     $Result .= "\n".'<th>'.'%Degree of Difficulty'.'</th>';  
     $Result .= "\n".'</tr>';      
     $r->print( $Result );  
   
     for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
  my( $Pre, $Post ) = split(/\&/,$list[$nIdx]);   
  my ($Temp,$MxTries,$StdNo,$TotalTries,$YES,$Override,  
             $Wrng,$Avg,$SD,$Sk,$DoD,$res,$Prob)=split(/\:/,$Post);  
  my ($UpDis,$UpNo)=split(/\:/,$Up{$Prob});  
  my ($LwDis,$LwNo)=split(/\:/,$Low{$Prob});  
  $UpNo = ($UpNo) ? $UpNo : 0;  
  $LwNo = ($LwNo) ? $LwNo : 0;  
  my $U_Dis = sprintf("%.4f", $UpDis)*100;  
  my $L_Dis = sprintf("%.4f", $LwDis)*100;  
  my $DisFac = $UpDis - $LwDis;  
  my $_Dis = sprintf("%.4f", $DisFac)*100;  
         $r->print( "\n".'<tr>'.  
                    "\n".'<td>'.($nIdx+1).'</td>'.  
                    "\n".'<td>'.$Temp.'</td>'.  
                    "\n".'<td>'.$_Dis.'</td>'.  
                    "\n".'<td>'.$U_Dis.'</td>'.  
                    "\n".'<td>'.$L_Dis.'</td>'.  
                    "\n".'<td>'.$UpNo.'</td>'.  
                    "\n".'<td>'.$LwNo.'</td>'.  
                    "\n".'<td>'.$DoD.'</td>'.  
                    "\n".'</tr>' );  
     }   
     $r->print("\n".'</table>');  
     $r->rflush();  
 }  }
   
 sub CreateDiscFac {  
   
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_statistics.db";  sub previous_student { 
     my $CachDisFac = "/home/httpd/perl/tmp/$ENV{'user.name'}".      return $prev_student;
      "_$ENV{'user.domain'}_$cid\_DiscFactor.db";  }
   
     my $ptr='';  
 #    $ptr .= '<br><b> Discrimination Criterion: &nbsp; </b>'."\n".  
 #            '<select name="DisType"> <option '.$OpSelDis1.'>  Total Numebr of Correct Answers </option>'."\n".  sub next_student { 
 #    '<option '.$OpSelDis2.'></option>Sum of Partial Awarded Credits / Total Number of Tries  </select> '."\n";                return $next_student;
     $ptr .= '<br><input type="submit" name="sort" '.  }
             'value="Recalculate Discrimintion Factor" />';  
     $r->print($ptr);  
   
     if ((-e "$CacheDB")&&  sub StudentDataSelect {
          ($ENV{'form.sort'} ne 'Recalculate Discrimintion Factor')) {      my ($elementname,$status,$numvisible)=@_;
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {      if ($numvisible < 1) {
             tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_READER,0640);          return;
             #&DiscriminationTable();      }
     &Classify();       #
         }       # Build the form element
         else {$r->print("Unable to tie hash to db file");}      my $Str = "\n";
     }      $Str .= '<select name="'.$elementname.'" ';
     else {      if ($status ne 'single') {
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {          $Str .= 'multiple="multiple" ';
     tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_WRCREAT,0640);      }
     foreach (keys %CachData) {delete $CachData{$_};}      $Str .= 'size="'.$numvisible.'" >'."\n";
     foreach (keys %DiscFac) {delete $DiscFac{$_};}      #
     $DiscFlag=1;      # Deal with 'all'
     &Build_Statistics();      $Str .= '    <option value="all" ';
     $DiscFlag=0;      foreach (@SelectedStudentData) {
             &DiscriminationTable();           if ($_ eq 'all') {
  }              $Str .= 'selected ';
         else {$r->print("Unable to tie hash to db file");}              last;
           }
     }      }
     untie(%CachData);      $Str .= ">all</option>\n";
     untie(%DiscFac);      #
 }          # Loop through the student data fields
       foreach my $item (@StudentDataOrder) {
           $Str .= '    <option value="'.$item.'" ';
 # ------ Create different Student Report           foreach (@SelectedStudentData) {
 sub StudentReport {              if ($item eq $_ ) {
     my ($sname,$sdom)=@_;                  $Str .= 'selected ';
     if ( $sname eq 'All Students' ) {                  last;
  $r->print( '<h3><font color=blue>WARNING:   
                     Please select a student</font></h3>' );  
  return;  
     }  
     my $shome=&Apache::lonnet::homeserver( $sname,$sdom );            
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$cid,$shome );  
     my %result = ();  
     my $ResId;  
     my $Code;  
     my $Tries;  
     my $TotalTries = 0;  
     my $ParCr = 0;  
     my $Wrongs;  
     my %TempHash;  
     my $Version;  
     my $LatestVersion;  
     my $PtrTry='';  
     my $PtrCod='';  
     my $SetNo=0;  
     my $Str = "\n".'<table border=2>'.  
               "\n".'<tr>'.  
               "\n".'<th> # </th>'.  
       "\n".'<th> Set Title </th>'.  
       "\n".'<th> Results </th>'.  
       "\n".'<th> Tries </th>'.  
       "\n".'</tr>';  
     unless ($reply=~/^error\:/) {  
         map {  
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));  
             $result{$name}=$value;  
         } split(/\&/,$reply);;  
         foreach $ResId (@cols) {  
     if ( !$ResId ) {  
  my $Set=&Apache::lonnet::declutter($hash{'map_id_'.$1});  
  if ( $Set ) {  
     $SetNo++;  
     $Str .= "\n"."<tr>".  
     "\n"."<td> $SetNo </td>".  
                             "\n"."<td> $Set </td>".  
                             "\n"."<td> $PtrCod </td>".  
                             "\n"."<td> $PtrTry</td>".  
                             "\n"."</tr>";  
  }  
  $PtrTry='';  
  $PtrCod='';  
  next;   
     }  
             $ResId=~/(\d+)\.(\d+)/;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     undef %TempHash;  
     map {  
  if ($_=~/^stores\_(\d+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = '-';    
  $PartNo++;  
     }  
  }  
             } split(/\,/,&Apache::lonnet::metadata($meta,'keys'));  
   
             my $Prob = $Map.'___'.$2.'___'.  
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
             $Code='U';  
             $Tries = 0;  
             $Wrongs = 0;  
      $LatestVersion = $result{"version:$Prob"};         
   
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  
     my $vkeys = $result{"$Version:keys:$Prob"};  
     my @keys = split(/\:/,$vkeys);  
     
     foreach my $Key (@keys) {    
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {  
     my $Part = $1;  
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};  
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;   
     $TotalTries += $Tries;  
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};  
     if ( $Val eq 'correct_by_student' )  
                                 { $Wrongs = $Tries - 1; $Code = 'Y'; }   
     elsif ( $Val eq 'correct_by_override' )  
                                 { $Wrongs = $Tries - 1; $Code = 'y'; }                          
     elsif ( $Val eq 'incorrect_attempted' ||   
                                 $Val eq 'incorrect_by_override' )  
                 { $Wrongs = $Tries; $Code = 'N'; }  
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }   
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "$TempHash{$part.'.Tries'}";  
                     $PtrCod .= "$TempHash{$part.'.Code'}";      
  }  
             }              }
     else {   
  for(my $n=0; $n<$PartNo; $n++) {   
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "0";  
                     $PtrCod .= "-";   
  }  
     }  
         }          }
           $Str .= '>'.$item."</option>\n";
     }      }
     $Str .= "\n".'</table>';      $Str .= "</select>\n";
     $r->print($Str);      return $Str;
     $r->rflush();  
 }  }
   
   
   
   sub get_selected_maps {
 # ------------------------------------------- Prepare Statistics Table      my ($elementname) = @_;
 sub PreStatTable {      my @selected_maps = 
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".   &Apache::loncommon::get_env_multiple('form.'.$elementname);
                   "_$ENV{'user.domain'}_$cid\_statistics.db";      @selected_maps = ('all') if (! @selected_maps);
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".      foreach my $map (@selected_maps) {
                   "_$ENV{'user.domain'}_$cid\_graph.db";          if ($map eq 'all') {
     my $CachDisFac = "/home/httpd/perl/tmp/$ENV{'user.name'}".              @selected_maps = ('all');
      "_$ENV{'user.domain'}_$cid\_DiscFactor.db";              last;
     $r->print('<br><input type="submit" name="sort" value="Recalculate Statistics" />');          }
   
     my $Ptr = '';  
   
     $Ptr .= '<br><b> Sorting Type: &nbsp; </b>'."\n".  
             '<select name="order"> <option '.$OpSel1.' >Ascending</option>'."\n".  
     '<option '.$OpSel2.'>Descending</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="DoDiff Graph" />'."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="%Wrong Graph" />'."\n";  
   
     $Ptr .= '<pre>'.  
     '  #Stdnts: Total Number of Students opened the problem.<br>'.   
     '  Tries  : Total Number of Tries for solving the problem.<br>'.   
     '  Mod    : Maximunm Number of Tries for solving the problem.<br>'.   
     '  Mean   : Average Number of the tries. [ Tries / #Stdns ]<br>'.  
     '  #YES   : Number of students solved the problem correctly.<br>'.   
     '  #yes   : Number of students solved the problem by override.<br>'.  
     '  %Wrng  : Percentage of students tried to solve the problem but'.  
     ' still incorrect. [ 100*((#Stdnts-(#YES+#yes))/#Stdnts) ]<br>'.  
     '  S.D.   : Standard Deviation of the tries.'.  
     '[ sqrt(sum((Xi - Mean)^2)) / (#Stdnts-1)'.  
     ' where Xi is every student\'s tries ]<br>'.  
     '  Skew.  : Skewness of the students tries.'.  
     ' [ (sqrt( sum((Xi - Mean)^3) / #Stdnts)) / (S.D.^3) ]<br>'.  
 #    '  DoDiff : Degree of Difficulty of the problem. [ Tries/(#YES+#yes+0.1) ]<br>'.  
     '  DoDiff : Degree of Difficulty of the problem. [ 1 - ((#YES+#yes) / Tries) ]<br>'.  
 #    '  Dis.F. : Discrimination Factor. [ Sum of Partial Credits Awarded / Total Number of Tries in %27 upper and lower students]</b>'.  
             '</pre>';  
   
     $r->print($Ptr);  
     $r->rflush();  
         
     my $Result = "\n".'<table border=2>';  
     $Result .= '<tr><th>P#</th>'."\n";  
     for ( my $nIdx=0; $nIdx < 12; $nIdx++ ) {   
  $Result .= '<th>'.'<input type="submit" name="sort" value="'.  
                    $Header{$nIdx}.'" />'.'</th>'."\n";  
     }      }
     $Result .= "\n".'</tr>'."\n";          return @selected_maps;
     $r->print( $Result );  }
     $r->rflush();  
   
     if ((-e "$CacheDB")&&($ENV{'form.sort'} ne 'Recalculate Statistics')) {  
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     &Cache_Statistics();  sub selected_sequences_with_assessments {
         }      my ($mode) = @_;
         else {      $mode = 'selected' if (! defined($mode));
     $r->print("Unable to tie hash to db file");      my $navmap = Apache::lonnavmaps::navmap->new();
         }      if (!defined($navmap)) {
     }          return ('Can not open Coursemap');
     else {      }
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {      #
     tie(%DiscFac,'GDBM_File',$CachDisFac,&GDBM_WRCREAT,0640);      my $mapurl;
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);      if (&Apache::loncommon::needs_gci_custom()) {
     foreach (keys %DiscFac) {delete $CachData{$_};}          my $cid = $env{'request.course.id'};
     foreach (keys %CachData) {delete $CachData{$_};}          if ($cid) {
     $DiscFlag=0;              my $cdom = $env{'course.'.$cid.'.domain'};
     &Build_Statistics();              if ($cdom =~ /^\w+citest$/) {
  }                  my $sequence = &Apache::loncommon::get_citest_map($cdom);
         else {                  my $cnum = $env{'course.'.$cid.'.num'};  
     $r->print("Unable to tie hash to db file");                  if ($sequence) {
                       $mapurl = '/uploaded/'.$cdom.'/'.$cnum.'/'.$sequence;
                   }
               }
           }
       }
       my @sequences = $navmap->retrieveResources($mapurl,
                                                  sub { shift->is_map(); },1,0,1);
       unless (&Apache::loncommon::needs_gci_custom()) {
           my $toplevelseq = $navmap->getById('0.0');
           if (!grep(/^\Q$toplevelseq\E$/,@sequences)) {
               unshift(@sequences,$toplevelseq);
         }          }
     }      }
     #$r->print('Total instances of the problems : '.($p_count*($#students+1)));  
   
     untie(%CachData);      my @sequences_with_assessments;
     untie(%GraphDat);      foreach my $sequence (@sequences) {
     untie(%DiscFac);   if ($navmap->hasResource($sequence,sub { shift->is_problem(); },0,1)){
               push(@sequences_with_assessments,$sequence);
           }
       }
       #
       my @sequences_to_show;
       foreach my $sequence (@sequences_with_assessments) {
           if ($mode eq 'all') {
               push (@sequences_to_show,$sequence);
           } elsif ($mode eq 'selected') {
               foreach my $map_symb (&get_selected_maps('Maps')) {
                   if ($sequence->symb eq $map_symb || $map_symb eq 'all'){
                       push (@sequences_to_show,$sequence);
                       last; # Only put it in once
                   }
               }
           }
   
     $r->print("\n".'</table>'."\n");      }
     $r->rflush();              return $navmap,@sequences_to_show;
 }  }
   
   
 # ------------------------------------- Find the section of student in a course  sub map_select {
       my ($elementname,$status,$numvisible)=@_;
 sub usection {      if ($numvisible < 1) {
     my ($udom,$unam,$courseid)=@_;          return;
     $courseid=~s/\_/\//g;      }
     $courseid=~s/^(\w)/\/$1/;      #
     map {      # Set up array of selected items
         my ($key,$value)=split(/\=/,$_);      my @selected_maps = &get_selected_maps($elementname);
         $key=&Apache::lonnet::unescape($key);      #
         if ($key=~/^$courseid(?:\/)*(\w+)*\_st$/) {      # Build the form element
             my $section=$1;      my $form = "\n";
             if ($key eq $courseid.'_st') { $section=''; }      $form .= '<select name="'.$elementname.'" ';
     my ($dummy,$end,$start)=split(/\_/,&Apache::lonnet::unescape($value));      if ($status ne 'single') {
             $section=($section) ? $section : '(none)';          $form .= 'multiple="multiple" ';
             $section=(int($section)) ? int($section) : $section;      }
 #            $r->print($unam.'...'.$section.'<br>');      $form .= 'size="'.$numvisible.'" >'."\n";
     return $section;      unless (&Apache::loncommon::needs_gci_custom()) {
         }          #
     } split(/\&/,&Apache::lonnet::reply('dump:'.$udom.':'.$unam.':roles',          # Put in option for 'all'
                         &Apache::lonnet::homeserver($unam,$udom)));          $form .= '    <option value="all" ';
     return '';          if ($selected_maps[0] eq 'all') {
               $form .= 'selected ';
           }
           $form .= ">all</option>\n";
       }
       #
       # Loop through the sequences
       my @sequences = &selected_sequences_with_assessments('all');
       my $navmap;
       if (!ref($sequences[0])) {
           return $sequences[0];
       } else {
           $navmap = shift(@sequences);
       }
       foreach my $seq (@sequences){
           $form .= '    <option value="'.$seq->symb.'" ';
           if ((&Apache::loncommon::needs_gci_custom()) && (@selected_maps == 1)) {
               $form .= 'selected ';
           } else {
               foreach (@selected_maps) {
                   if ($seq->symb eq $_) {
                       $form .= 'selected ';
                       last;
                   }
               }
           }
           $form .= '>'.$seq->compTitle."</option>\n";
       }
       $form .= "</select>\n";
       return $form;
 }  }
   
   
 # ------ Dump the Student's DB file and handling the data for statistics table   sub SectionSelect {
       my ($elementname,$status,$numvisible)=@_;
       if ($numvisible < 1) {
           return;
       }
       #
       # Make sure we have the data we need to continue
       if (! @Sections) {
           &PrepareClasslist()
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="multiple" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Loop through the sequences
       foreach my $s (@Sections) {
           $Str .= '    <option value="'.$s.'" ';
           foreach (&get_selected_sections()) {
               if ($s eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$s."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
   }
   
   
 sub ExtractStudentData {  sub GroupSelect {
     my ($student,$coid)=@_;      my ($elementname,$status,$numvisible)=@_;
     my ($sname,$sdom) = split( /\:/, $student );      if ($numvisible < 1) {
     my $shome=&Apache::lonnet::homeserver( $sname,$sdom );                    return;
     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.':'.$coid,$shome );      }
     my %result = ();      #
     my $ResId;      # Make sure we have the data we need to continue
     my $Dis = '';      if (! @Groups) {
     my $Code;          &PrepareClasslist();
     my $Tries;      }
     my $ParCr;      #
     my $TotalTries = 0;      # Build the form element
     my $TotalOpend = 0;      my $Str = "\n";
     my $ProbSolved = 0;      $Str .= '<select name="'.$elementname.'" ';
     my $ProbTot = 0;      if ($status ne 'single') {
     my $TimeTot = 0;          $Str .= 'multiple="multiple" ';
     my $TotParCr = 0;      }
     my $Wrongs;      $Str .= 'size="'.$numvisible.'" >'."\n";
     my %TempHash;      #
     my $Version;      # Loop through the groups
     my $LatestVersion;      foreach my $s (@Groups) {
     my $SecLimit;          $Str .= '    <option value="'.$s.'" ';
     my $MapLimit;          foreach my $group (&get_selected_groups()) {
     unless ($reply=~/^error\:/) {              if ($s eq $group) {
         map {                  $Str .= 'selected ';
             my ($name,$value)=split(/\=/,&Apache::lonnet::unescape($_));                  last;
             $result{$name}=$value;  
 #$r->print($name.'='.$value.'<br>');  
         } split(/\&/,$reply);  
         foreach $ResId (@cols) {  
     if ( !$ResId ) { next; }  
             $ResId=~/(\d+)\.(\d+)/;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     $Dis .= ':';  
     undef %TempHash;  
     map {  
  if ($_=~/^stores\_(\d+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = 'U';    
  $PartNo++;  
     }  
  }  
             } split(/\,/,&Apache::lonnet::metadata($meta,'keys'));  
   
             my $Prob = $Map.'___'.$2.'___'.  
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  
             $Code='U';  
             $Tries = 0;  
     $ParCr = 0;  
             $Wrongs = 0;  
      $LatestVersion = $result{"version:$Prob"};         
   
     if ( $LatestVersion ) {  
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {  
     my $vkeys = $result{"$Version:keys:$Prob"};  
     my @keys = split(/\:/,$vkeys);  
     
     foreach my $Key (@keys) {    
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {  
     my $Part = $1;  
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};  
     $ParCr = $result{"$Version:$Prob:resource.$Part.awarded"};  
     my $Time = $result{"$Version:$Prob:timestamp"};  
     $TempHash{"$Part.Time"} = ($Time) ? $Time : 0;  
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;  
     $TempHash{"$Part.ParCr"} = ($ParCr) ? $ParCr : 0;          
     $TotalTries += $TempHash{"$Part.Tries"};  
     $TotParCr += $TempHash{"$Part.ParCr"};  
 #$r->print($Version.'---'.$Prob.'==='.$Time.'<br>');  
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};  
     if ( $Val eq 'correct_by_student' )  
                                { $Wrongs = $Tries - 1; $Code = 'C'; }   
     elsif ( $Val eq 'correct_by_override' )  
                                { $Wrongs = $Tries - 1; $Code = 'O'; }                          
     elsif ( $Val eq 'incorrect_attempted' ||   
                                 $Val eq 'incorrect_by_override' )  
                { $Wrongs = $Tries; $Code = 'I'; }  
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }   
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     my $Yes = 0;  
                     if ( $TempHash{$part.'.Code'} eq 'C' ||  
                          $TempHash{$part.'.Code'} eq 'O'  )   
        {$ProbSolved++;$Yes=1;}      
     my $ptr = "$hash{'title_'.$ResId}";  
     if ( $PartNo > 1 ) {                  
  $ptr .= " (part $part)";  
  $Dis .= ':';  
     }  
     my $Fac = ($TempHash{"$part.Tries"}) ?   
                               ($TempHash{"$part.ParCr"}/$TempHash{"$part.Tries"}) : 0;  
     my $DisF;  
     if ( $Fac > 0 &&  $Fac < 1 ) {   
  $DisF = sprintf( "%.4f", $Fac );  
     }  
     else {$DisF = $Fac;}  
 #    $DisF .= '+'.$TempHash{"$part.Time"};  
     $TimeTot += $TempHash{"$part.Time"};  
     $Dis .= $ptr.'*'.$ResId.'='.$DisF.'+'.$Yes;  
     $ptr .= "*$ResId:$TempHash{$part.'.Tries'}".  
             ":$TempHash{$part.'.Wrongs'}".  
                             ":$TempHash{$part.'.Code'}";      
 #$r->print($sname.' -- '.$ptr.'--- timestamp='.$TempHash{"$part.Time"}.'<br>');  
     push (@list, $ptr);  
     $TotalOpend++;  
     $ProbTot++;  
  }  
             }              }
     else {           }
  for(my $n=0; $n<$PartNo; $n++) {          $Str .= '>'.$s."</option>\n";
     push (@list, "$hash{'title_'.$ResId}*$ResId:0:0:U");  
     $ProbTot++;   
  }  
     }  
         }  
  if ( $TotalTries ) {  
     my $DisFac = ( $TotalTries ) ? ($TotParCr/$TotalTries) : 0;  
 #    my $DisFactor = int(sprintf( "%.4f", $DisFac ) * 100);  
     my $DisFactor = sprintf( "%.4f", $DisFac );  
     my $time;  
     if ($ProbSolved){  
  $time = int(($TimeTot/$ProbSolved)/10000000);  
     }  
     $DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.  
                       $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;  
 #$r->print($DisFactor.$sname.'<br> --- Dis= '.$Dis.'<br>');  
  }  
     }      }
     #$r->print($sname.' PrCr= '.$TotParCr.' Slvd= '.$ProbSolved.' Tries='.$TotalTries.'<br>');      $Str .= "</select>\n";
 }  }
   
   
 # ------------------------------------------------------------ Build page table  
 sub tracetable {  
     my ($rid,$beenhere)=@_;  sub DisplayClasslist {
     $rid=~/(\d+)\.(\d+)/;      my ($r)=@_;
     $maps{&Apache::lonnet::declutter($hash{'map_id_'.$1})}='';#$hash{'title_'.$rid};       &Apache::lonhtmlcommon::add_breadcrumb
     unless ($beenhere=~/\&$rid\&/) {          ({text=>'Select One Student'});
        $beenhere.=$rid.'&';       #
        if (defined($hash{'is_map_'.$rid})) {      # Output some of the standard interface components
    my $cmap=$hash{'map_type_'.$hash{'map_pc_'.$hash{'src_'.$rid}}};      my $Str;
            if ( $cmap eq 'sequence' || $cmap eq 'page' ) {       $Str .= &Apache::lonhtmlcommon::breadcrumbs('Select One Student');
                $cols[$#cols+1]=0;      $Str .= '<p><table cellspacing="5">'."\n";
        $HWN++;      $Str .= '<tr>';
                $mapsort[$HWN]=$rid.$hash{'title_'.$rid};       $Str .= '<th align="center"><b>'.&mt('Sections').'</b></th>';
                #$maps{&Apache::lonnet::declutter($hash{'src_'.$rid})}=       $Str .= '<th align="center"><b>'.&mt('Groups').'</b></th>';
                #      $hash{'title_'.$rid};       $Str .= '<th align="center"><b>'.&mt('Access Status').'</b></th>';
            }      $Str .= '</tr>'.$/;
            if ((defined($hash{'map_start_'.$hash{'src_'.$rid}})) &&      $Str .= '<tr>';
                (defined($hash{'map_finish_'.$hash{'src_'.$rid}}))) {      $Str .= '<td>'.
               my $frid=$hash{'map_finish_'.$hash{'src_'.$rid}};          &Apache::lonstatistics::SectionSelect('Section','multiple',5).
           '</td>';
                 &tracetable($hash{'map_start_'.$hash{'src_'.$rid}},      $Str .=  '<td>'.
                 '&'.$frid.'&');          &Apache::lonstatistics::GroupSelect('Group','multiple',5).
           '</td>';
               if ($hash{'src_'.$frid}) {      $Str .= '<td>'.
                  if ($hash{'src_'.$frid}=~          &Apache::lonhtmlcommon::StatusOptions(undef,undef,5).
                                  /\.(problem|exam|quiz|assess|survey|form)$/) {          '</td>';
      $cols[$#cols+1]=$frid;      
      $mapsort[$HWN] .= '&'.$frid;      $Str .= '</tr>'.$/;
                  }      $Str .= '</table></p>';
       }      $Str .= '<input type="submit" name="selectstudent" value="'.
    }          &mt('Update Display').'" />';
        } else {      $r->print($Str);
           if ($hash{'src_'.$rid}) {      $r->rflush();
              if ($hash{'src_'.$rid}=~      #
                                  /\.(problem|exam|quiz|assess|survey|form)$/) {      my @Fields = ('fullname','username','domain','id','section','status','groups');
          $cols[$#cols+1]=$rid;      #
  $mapsort[$HWN] .= '&'.$rid;      $Str = '';
              }      my @selected_sections = &get_selected_sections();
           }      if (! @Students) {
        }          if ($selected_sections[0] eq 'all') { 
        if (defined($hash{'to_'.$rid})) {              if (lc($env{'form.Status'}) eq 'active') {
           map {                  $Str .= '<p class="LC_info">'.
               &tracetable($hash{'goesto_'.$_},$beenhere);                  &mt('There are no currently enrolled students in the course.').
           } split(/\,/,$hash{'to_'.$rid});                      '</p>';
        }              } elsif (lc($env{'form.Status'}) eq 'expired') {
                   $Str .= '<p class="LC_info">'.
                       &mt('There are no previously enrolled students in the course.').
                           '</p>';
               } elsif (lc($env{'form.Status'}) eq 'future') {
                   $Str .= '<p class="LC_info">'.
                       &mt('There are no students with future access in the course.').
                           '</p>';
               } else { # 'any' and any others
                  $Str .= '<p class="LC_info">'.
                       &mt('There are no students in the course.').
                       '</p>';
               }
           } else { 
               if (lc($env{'form.Status'}) eq 'active') {
                   $Str .= '<p class="LC_info">'.
                       &mt('There are no currently enrolled students in the selected sections.').
                       '</p>';
               } elsif (lc($env{'form.Status'}) eq 'expired') {
                   $Str .= '<p class="LC_info">'.
                       &mt('There are no previously enrolled students in the selected sections.').
                       '</p>';
               } elsif (lc($env{'form.Status'}) eq 'future') {
                   $Str .= '<p class="LC_info">'.
                       &mt('There are no students with future access in the selected sections.').
                           '</p>';
               } else { # 'any' and any others
                   $Str .= '<p class="LC_info">'.
                       &mt('There are no students in the selected sections.').
                       '</p>';
               }
           }
           $Str.= '<p>'
                 .'<a href="/adm/statistics?reportSelected=student_assessment">'
                 .&mt('Return to the chart').'</a>'
                 .'</p>';
           $r->print($Str);
           $r->rflush();
           return;
     }      }
   
       $Str .= '<h2>'.&mt('Select One Student').'</h2>'
              .'<p>'.&mt("Click on a student's name or username to view their chart").'</p>'
              .&Apache::loncommon::start_data_table()
              .&Apache::loncommon::start_data_table_header_row();
       foreach my $field (@Fields) {
           $Str .= '<th><a href="/adm/statistics?'.
               'reportSelected=student_assessment&'.
               'selectstudent=1&'.
               'sort='.$field.'">'.&mt($field).
               '</a></th>';
       }
       $Str .= &Apache::loncommon::end_data_table_header_row();
       #
       foreach my $student (@Students) { # @Students is a package variable
           my $sname = $student->{'username'}.':'.$student->{'domain'};
           $Str .= &Apache::loncommon::start_data_table_row();
           #
           foreach my $field (@Fields) {
               $Str .= '<td>';
               if ($field eq 'fullname' || $field eq 'username') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &escape('student_assessment');
                   $Str .= '&sort='.&escape($env{'form.sort'});
                   $Str .= '&SelectedStudent=';
                   $Str .= &escape($sname).'">';
                   $Str .= $student->{$field}.'&nbsp;';
                   $Str .= '</a>';
               } elsif ($field eq 'status') {
                   $Str .= &mt($student->{$field});
               } else {
                   $Str .= $student->{$field};
               }
               $Str .= '</td>';
           }
           $Str .= &Apache::loncommon::end_data_table_row();
       }
       $Str .= &Apache::loncommon::end_data_table();
       #
       $r->print($Str);
       $r->rflush();
       #
       return;
 }  }
   
 sub MySort {            
     if ( $Pos > 0 && $Pos < 11 ) {  
  if ($ENV{'form.order'} eq 'Descending') {$b <=> $a;}  sub CreateMainMenu {
  else { $a <=> $b; }      #
     }      # Define menu data
     else {      my @reports = (
  if ($ENV{'form.order'} eq 'Descending') {$b cmp $a;}      {categorytitle => 'Statistics and Analyses',
  else { $a cmp $b; }           items => [
               {url => '/adm/statistics?reportSelected=problem_statistics',
    permission => 'F',
                icon => 'document-open.png',
                linktext => ('Overall Problem Statistics'),
                linktitle => ('Student performance statistics on all problems.')},
          
               {url => '/adm/statistics?reportSelected=problem_analysis',
    permission => 'F',
                icon => 'edit-find.png',
                linktext => ('Detailed Problem Analysis'),
                linktitle => ('Detailed statistics and graphs of student performance on problems.')},
            ]},
           {categorytitle => 'Plots',
            items => [
               {url => '/adm/statistics?reportSelected=submissiontime_analysis',
    permission => 'F',
                icon => 'subtimpl.png',
                linktext => ('Submission Time Plots'),
                linktitle => ('Display and analysis of submission times on assessments.')},
         
               {url => '/adm/statistics?reportSelected=correct_problems_plot',
    permission => 'F',
                icon => 'coprplot.png',
                linktext => ('Correct Problems Plot'),
                linktitle => ('Display a histogram of student performance in the course.')},
            ]});
       if (&Apache::loncommon::needs_gci_custom()) {
           push(@reports,
           {categorytitle => 'Reports',
            items => [
               {url => '/adm/statistics?reportSelected=student_submission_reports',
                            permission => 'F',
                icon => 'edit-copy.png',
                linktext => ('Student Submission Reports'),
                linktitle => ('Prepare reports of student submissions.')},
            ]});
       } else {
           push(@reports,
           {categorytitle => 'Reports',
            items => [
               {url => '/adm/statistics?reportSelected=student_submission_reports',
    permission => 'F',
                icon => 'edit-copy.png',
                linktext => ('Student Submission Reports'),
                linktitle => ('Prepare reports of student submissions.')},
                       
               {url => '/adm/statistics?reportSelected=survey_reports',
    permission => 'F',
                icon => 'docs.png',
    linktext => ('Survey Reports'),
                linktitle => ('Prepare reports on survey results.')},
            ]});
     }      }
       
   return &Apache::lonhtmlcommon::generate_menu(@reports);
    
 }  }
   
 sub Build_Statistics {  sub handler {
     $r->print(<<ENDPOP);      my $r=shift;
 <script>      my $c = $r->connection();
     popwin=open('','popwin','width=400,height=100');      #
     popwin.document.writeln('<html><body bgcolor="#8cee8c">'+      # Check for overloading
       '<title>LON-CAPA Statistics</title>'+      my $loaderror=&Apache::lonnet::overloaderror($r);
       '<h4>Computation Progress</h4>'+      if ($loaderror) { return $loaderror; }
       '<form name=popremain>'+      $loaderror=
       '<input type=text size=35 name=remaining value=Starting></form>'+         &Apache::lonnet::overloaderror($r,
       '</body></html>');           $env{'course.'.$env{'request.course.id'}.'.home'});
     popwin.document.close();      if ($loaderror) { return $loaderror; }
 </script>      #
 ENDPOP      # Check for access
       if (! &Apache::lonnet::allowed('vgr',$env{'request.course.id'})) {
           $env{'user.error.msg'}=
               $r->uri.":vgr:0:0:Cannot view grades for complete course";
           if (! &Apache::lonnet::allowed('vgr',
                         $env{'request.course.id'}.'/'.$env{'request.course.sec'})) {
               $env{'user.error.msg'}=
                   $r->uri.":vgr:0:0:Cannot view grades with given role";
               return HTTP_NOT_ACCEPTABLE;
           }
       }
       #
       # Send the header
       &Apache::loncommon::no_cache($r);
       &Apache::loncommon::content_type($r,'text/html');
       $r->send_http_header;
       if ($r->header_only) { return OK; }
       my $gcicustom = &Apache::loncommon::needs_gci_custom();
       if ($gcicustom) {
           my $now = time;
           my $cnum = $env{'course.'.$env{'request.course.id'}.'.num'};
           my $cdom = $env{'course.'.$env{'request.course.id'}.'.domain'};
           my $courseopt=&Apache::lonnet::get_courseresdata($cnum,$cdom);
           my $duedate = $courseopt->{$env{'request.course.id'}.'.0.duedate'};
           if ((!$duedate) || ($duedate > $now)) {
               my $brcrum = [{href=> '/adm/statistics',
                              text=> 'Statistics',}];
               my $args = {bread_crumbs           => $brcrum,
                           bread_crumbs_component => 'Statistics Main Page'};
               $r->print(&Apache::loncommon::start_page('Course Statistics',undef,$args));
               $r->print('<h3>'.&mt('Display of statistics').'</h3>');
               if ($duedate > $now) { 
                   $r->print('<p>'.&mt('Aggregate test performance data will be available after the Concept Test end date: [_1].',
                            &Apache::lonlocal::locallocaltime($duedate)).'</p>');
               } else {
                   $r->print('<p>'.
                             &mt('Aggregate test performance data unavailable without definition of an end date for the Concept Test.').'</p>');
               }
               $r->print(&Apache::loncommon::end_page());
               return OK;
           }
       }
   
       #
       # Extract form elements from query string
       &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                               ['sort','reportSelected',
                                                'SelectedStudent']);
       #
       # Give the LON-CAPA page header
       my $style = <<ENDSTYLE;
   <style type="text/css">
       ul.sub_studentans { list-style-type: none }
       ul.sub_correctans { list-style-type: none }
       tr.even           { background-color: \#CCCCCC }
       td.essay          { border: 1px solid gray; }
   </style>
   ENDSTYLE
         
       $r->print(&Apache::loncommon::start_page('Course Statistics and Charts',
        $style));
     $r->rflush();      $r->rflush();
 # ---------------------------- Gathering the Data of students' tries      # 
     my $index;      # Either print out a menu for them or send them to a report
     for ($index=0;$index<=$#students;$index++) {      &Apache::lonhtmlcommon::clear_breadcrumbs();
 #----------- update progress      &Apache::lonhtmlcommon::add_breadcrumb({href=>'/adm/statistics',
         $r->print('<script>popwin.document.popremain.remaining.value="'.                                              title=>'Statistics',
                   'Computing '.($index+1).'/'.($#students+1).': '.                                              text =>'Statistics',
                   $students[$index].'";</script>');                                              faq=>139,
                                               bug=>'Statistics and Charts'});
       if (! exists($env{'form.reportSelected'}) || 
           $env{'form.reportSelected'} eq '') {
           $r->print(&Apache::lonhtmlcommon::breadcrumbs('Statistics Main Page').
                     &CreateMainMenu());
       } else {
       #
           if (! &Apache::lonmysql::verify_sql_connection()) {
               my $serveradmin = $r->dir_config('lonAdmEMail');
               $r->print('<h2 class="LC_error">'.
                         &mt('Unable to connect to database!').
                         '</h2>');
               $r->print('<p>'
                        .&mt('Please notify the server administrator [_1]',
                            ,'<b>'.$serveradmin.'</b>')
                        .'</p>');
               $r->print('<p>'.
                         &mt('Course Statistics and Charts cannot be '.
                             'retrieved until the database is restarted. '.
                             'Your data is intact but cannot be displayed '.
                             'at this time.').'</p>');
               $r->print(&Apache::loncommon::end_page());
               return;
           }
           #
           # Clean out the caches
           if (exists($env{'form.ClearCache'})) {
               &Apache::loncoursedata::delete_caches($env{'requres.course.id'});
           }
           #
           # Begin form output
           $r->print('<form name="Statistics" ');
           $r->print('method="post" action="/adm/statistics">');
         $r->rflush();          $r->rflush();
           #
         &ExtractStudentData($students[$index],$cid);          my $GoToPage = $env{'form.reportSelected'};
           #
           $r->print('<input type="hidden" name="reportSelected" value="'.
                     $GoToPage.'">');
           if($GoToPage eq 'activitylog') {
   #        &Apache::lonproblemstatistics::Activity();
           } elsif($GoToPage eq 'problem_statistics') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=problem_statistics',
                     text=>'Overall Problem Statistics'});
               &Apache::lonproblemstatistics::BuildProblemStatisticsPage($r,$c);
           } elsif($GoToPage eq 'problem_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=problem_analysis',
                     text=>'Detailed Problem Analysis'});
               &Apache::lonproblemanalysis::BuildProblemAnalysisPage($r,$c);
           } elsif($GoToPage eq 'submissiontime_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                         '/adm/statistics?reportselected=submissiontime_analysis',
                         text=>'Submission Time Plots'});
               &Apache::lonsubmissiontimeanalysis::BuildSubmissionTimePage($r,$c);
           } elsif($GoToPage eq 'student_submission_reports') {
               &Apache::lonhtmlcommon::add_breadcrumb
               ({href=>
                 '/adm/statistics?reportselected=student_submission_reports',
                 text=>'Student Submission Reports'});
               &Apache::lonstudentsubmissions::BuildStudentSubmissionsPage($r,$c);
           } elsif($GoToPage eq 'survey_reports') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                     '/adm/statistics?reportselected=survey_reports',
                     text=>'Survey Reports'});
               &Apache::lonsurveyreports::BuildSurveyReportsPage($r,$c);
           } elsif($GoToPage eq 'correct_problems_plot') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=correct_problems_plot',
                     text=>'Correct Problems Plot'});
               &Apache::loncorrectproblemplot::BuildCorrectProblemsPage($r,$c);
           } elsif($GoToPage eq 'student_assessment') {
               &Apache::lonhtmlcommon::clear_breadcrumbs();
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=student_assessment',
                     text=>'Chart'});
               if ($gcicustom) {
                   $r->print(&mt('Only aggregate performance data are available for Concept Tests.'));  
               } else {
                   &Apache::lonstudentassessment::BuildStudentAssessmentPage($r,$c);
               }
           } elsif($GoToPage eq 'grading_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=grading_anaylsis',
                     text=>'Grading Analysis'});
               &Apache::longradinganalysis::build_grading_analysis_page($r,$c);
    }
           #
           $r->print("</form>\n");
     }      }
 #--------------------- close Progress Line      $r->print(&Apache::loncommon::end_page());
     $r->print('<script>popwin.close()</script>');      $r->rflush();
     $r->rflush();       #
 # -------------------- sorting the Data      return OK;
     @list = sort(@list);  }
     $OpSel2='';  
     $OpSel1='selected';  
       
     $p_count = 0;   
     my $nIdx = 0;  
     my $dummy;   
     my $p_val;  
     my $ResId;  
     my $NoElements = $#list + 1;  
 #-------------------------------- loop for data representation  
     while ( $nIdx < $NoElements ) {  
         my %storestats=();  
  my ($Prob,$Tries,$Wrongs,$Code)=split(/\:/,$list[$nIdx]);  
  my $Temp = $Prob;  
  my $MxTries = 0;  
  my $TotalTries = 0;  
  my $YES = 0;  
  my $Incorrect = 0;  
  my $Override = 0;  
  my $StdNo = 0;  
  my @StdLst;   
  do {  
     $nIdx++;  
     $StdNo++;  
     $StdLst[ $StdNo ] = $Tries;  
     $TotalTries += $Tries;  
     if ( $MxTries < $Tries ) { $MxTries = $Tries; }   
     if ( $Code eq 'C' ){ $YES++; }  
     elsif( $Code eq 'I' ) { $Incorrect++; }  
     elsif( $Code eq 'O' ) { $Override++; }  
     elsif( $Code eq 'U' ) { $StdNo--; }  
     ($Prob,$Tries,$Wrongs,$Code)=split(/\:/,$list[$nIdx]);  
  } while ( $Prob eq $Temp && $nIdx < $NoElements );  
   
  $p_count++;  1;
   
  ($Temp,$ResId)=split(/\*/,$Temp);  __END__
   
         $Temp = '<a href="'.$hash{'src_'.$ResId}.'" target="_blank">'.$Temp.'</a>';  =pod
       
  my $res = &Apache::lonnet::declutter($hash{'src_'.$ResId});  
         my $urlres=$res;  
   
         $ResId=~/(\d+)\.(\d+)/;  =head1 NAME
         my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
         $urlres=$Map;  
    
   
         $res = '<a href="'.$hash{'src_'.$ResId}.'">'.$res.'</a>';  lonstatistics
   
         #$Map = '<a href="'.$Map.'">'.$res.'</a>';  =head1 SYNOPSIS
   
 #------------------------ Compute the Average of Tries about one problem  Main handler for statistics and chart.
  my $Average = ($StdNo) ? $TotalTries/$StdNo : 0;  
   
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___timestamp'}=time;         This is part of the LearningOnline Network with CAPA project
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___stdno'}=$StdNo;  described at http://www.lon-capa.org.
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___avetries'}=$Average;  
      
 #-------------------------------- Compute percentage of Wrong tries  
  my $Wrong = ( $StdNo ) ? 100 * ( $Incorrect / $StdNo ) : 0;  
   
 #-------------------------------- Compute Standard Deviation  
  my $StdDev = 0;   
  if ( $StdNo > 1 ) {  
     for ( my $n = 0; $n < $StdNo; $n++ ) {  
                 my $Dif = $StdLst[ $n ]-$Average;  
  $StdDev += $Dif*$Dif;  
     }   
     $StdDev /= ( $StdNo - 1 );  
     $StdDev = sqrt( $StdDev );  
  }  
   
 #-------------------------------- Compute Degree of Difficulty  
  my $DoDiff = 0;  
  if( $TotalTries > 0 ) {  
     $DoDiff = 1 - ( ( $YES + $Override ) / $TotalTries );  
 #    $DoDiff =  ($TotalTries)/($YES + $Override+ 0.1);      
  }  
          
         $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___difficulty'}=$DoDiff;  
   
 #-------------------------------- Compute the Skewness  =head1 PACKAGE VARIABLES
  my $Skewness = 0;  
         my $Sum = 0;   
  if ( $StdNo > 0 && $StdDev > 0 ) {  
     for ( my $n = 0; $n < $StdNo; $n++ ) {  
                 my $Dif = $StdLst[ $n ]-$Average;  
  $Skewness += $Dif*$Dif*$Dif;  
     }   
     $Skewness /= $StdNo;  
     $Skewness /= $StdDev*$StdDev*$StdDev;  
  }  
 #-----------------  Some restition in presenting the float numbers  
  my $Avg = sprintf( "%.2f", $Average );  
  my $Wrng = sprintf( "%.1f", $Wrong );  
  my $SD = sprintf( "%.1f", $StdDev );  
  my $DoD = sprintf( "%.2f", $DoDiff );  
  my $Sk = sprintf( "%.1f", $Skewness );  
       
  $CachData{($p_count-1)}=$Temp.':'.$StdNo.':'.$TotalTries.':'.  
                                 $MxTries.':'.$Avg.':'.$YES.':'.  
                                 $Override.':'.$Wrng.':'.$SD.':'.  
                                 $Sk.':'.$DoD.':'.$Map.':'.$Prob;  
   
         $urlres=~/^(\w+)\/(\w+)/;  
         if ($StdNo) {   
            &Apache::lonnet::put('resevaldata',\%storestats,$1,$2);   
         }  
   
 #-------------------------------- Row of statistical table  
         if ( $DiscFlag == 0 ) {  
     $r->print( "\n".'<tr>'.  
                "\n".'<td>'.$p_count.'</td>'.  
                "\n".'<td>'.$Temp.'</td>'.  
                "\n".'<td>'.$StdNo.'</td>'.  
                "\n".'<td>'.$TotalTries.'</td>'.  
                "\n".'<td>'.$MxTries.'</td>'.  
                "\n".'<td>'.$Avg.'</td>'.  
                "\n".'<td>'.$YES.'</td>'.  
                "\n".'<td>'.$Override.'</td>'.  
                "\n".'<td>'.$Wrng.'</td>'.  
                "\n".'<td>'.$SD.'</td>'.  
                "\n".'<td>'.$Sk.'</td>'.  
                "\n".'<td>'.$DoD.'</td>'.  
                "\n".'<td>'.$Map.'</td>'.  
                        "\n".'</tr>' );  
     $GraphDat{$nIdx}=$DoD.':'.$Wrng;  
  }   
     }  
 }  
   
   =over
   
 sub Cache_Statistics {  =item @FullClasslist The full classlist
     my @list = ();  
     my $Useful;  
     my $UnUseful;  
     my %myHeader = reverse( %Header );  
     $Pos = $myHeader{$ENV{'form.sort'}};  
     $p_count = 0;  
   
     foreach my $key( keys %CachData) {   
  my @Temp=split(/\:/,$CachData{$key});  
  if ( $Pos == 0 || $Pos == 11 ) {  
     ($UnUseful,$Useful)=split(/\>/,$Temp[$Pos]);  
  }  
  else {  
     $Useful = $Temp[$Pos];  
  }     
  $list[$p_count]=$Useful.'&'.$CachData{$key};  
         $p_count++;  
     }  
   
     @list = sort MySort (@list);  
   
     for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
  my( $Pre, $Post ) = split(/\&/,$list[$nIdx]);   
  my ($Temp,$StdNo,$TotalTries,$MxTries,$Avg,$YES,  
             $Override,$Wrng,$SD,$Sk,$DoD,$res,$Prob)=split(/\:/,$Post);  
  $r->print( "\n".'<tr>'.  
                "\n".'<td>'.($nIdx+1).'</td>'.  
                "\n".'<td  bgcolor="#FFFFFF">'.$Temp.'</td>'.  
                "\n".'<td>'.$StdNo.'</td>'.  
                "\n".'<td>'.$TotalTries.'</td>'.  
                "\n".'<td>'.$MxTries.'</td>'.  
                "\n".'<td>'.$Avg.'</td>'.  
                "\n".'<td>'.$YES.'</td>'.  
                "\n".'<td>'.$Override.'</td>'.  
                "\n".'<td>'.$Wrng.'</td>'.  
                "\n".'<td>'.$SD.'</td>'.  
                "\n".'<td>'.$Sk.'</td>'.  
                "\n".'<td>'.$DoD.'</td>'.  
                "\n".'<td>'.$res.'</td>'.  
                "\n".'</tr>' );  
  $GraphDat{$nIdx}=$DoD.':'.$Wrng;  
     }   
 }  
   
 # ------------------------------------------- Prepare data for Graphical chart  =item @Students The students we are concerned with for this invocation
   
 sub GetGraphData {  =item @Sections The sections available in this class
     my $Tag = shift;  
     my $Col;  
     my $data='';  
     my $count = 0;  
     my $Max = 0;  
     my $cid=$ENV{'request.course.id'};  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     foreach (keys %GraphDat) {delete $GraphDat{$_};}  
     if (-e "$GraphDB") {  
  if (tie(%GraphDat,'GDBM_File',"$GraphDB",&GDBM_READER,0640)) {  
     if ( $Tag eq 'DoDiff Graph' ) {  
  $Tag = 'Degree-of-Difficulty';  
  $Col = 0;  
     }  
     else {  
  $Tag = 'Wrong-Percentage';  
  $Col = 1;  
     }  
     foreach (sort NumericSort keys %GraphDat) {   
  my @Temp=split(/\:/,$GraphDat{$_});  
                 my $inf = $Temp[$Col];   
  if ( $Max < $inf ) {$Max = $inf;}  
  $data .= $inf.',';  
  $count++;  
     }  
             untie(%GraphDat);  
     my $Course = $ENV{'course.'.$cid.'.description'};  
     $Course =~ s/\ /"_"/eg;  
     $GData=$Course.'&'.$Tag.'&'.$Max.'&'.$count.'&'.$data;  
   
  }  =item @Groups The groups available in the class
  else {  
     $r->print("Unable to tie hash to db file");  
  }  
     }  
 }  
   
   =item $curr_student The student currently being examined
   
 sub initial {  =item $prev_student The student previous in the classlist
 # --------------------------------- Initialize the global varaibles  
   undef @students;  
   undef @cols;  
   undef %maps;  
   undef %section;  
   undef %StuBox;  
   undef @list;  
   undef %CachData;  
   undef %GraphDat;  
   undef %DiscFac;  
   undef $CurMap;  
   undef $CurSec;  
   undef $CurStu;  
   undef $p_count;  
   undef $Pos;  
   undef $GData;  
 }  
   
   =item $next_student The student next in the classlist
   
 sub ClassList {  =back
   
     &GetStatus();  =head1 SUBROUTINES
   
     $cid=$ENV{'request.course.id'};  =over
     my $chome=$ENV{'course.'.$cid.'.home'};  
     my ($cdom,$cnum)=split(/\_/,$cid);  
 # ----------------------- Get first and last resource, see if there is anything  
     $firstres=$hash{'map_start_/res/'.$ENV{'request.course.uri'}};  
     $lastres=$hash{'map_finish_/res/'.$ENV{'request.course.uri'}};  
     if (($firstres) && ($lastres)) {  
 # ----------------------------------------------------------------- Render page  
  my $classlst=&Apache::lonnet::reply  
                  ('dump:'.$cdom.':'.$cnum.':classlist',$chome);  
  my $StudNo = 0;  
  unless ($classlst=~/^error\:/) {  
     foreach (sort split(/\&/,$classlst)) {  
  my ($name,$value)=split(/\=/,$_);  
  my ($end,$start)=split(/\:/,&Apache::lonnet::unescape($value));  
  $name=&Apache::lonnet::unescape($name);  
  my ($sname,$sdom)=split(/\:/,$name);  
  my $ssec=&Apache::lonnet::usection($sdom,$sname,$cid);  
                 if ($ssec==-1) {next;}  
  $ssec=($ssec) ? $ssec : '(none)';  
  $ssec=(int($ssec)) ? int($ssec) : $ssec;  
  #$r->print($sname.'...'.$ssec.'<br>');  
  $section{$ssec}=$ssec;  
  if ($CurSec eq 'All Sections' || $ssec eq $CurSec) {  
     $students[$StudNo]=$name;  
     $StuBox{$sname}=$ssec;  
  }  
  $StudNo++;  
     }  
  }  
  else {  
     $r->print('<h1>Could not access course data</h1>');  
  }   
         $r->print("Total number of students : ".($#students+1));  
         $r->rflush();  
 # --------------- Find all assessments and put them into some linear-like order  
  &tracetable($firstres,'&'.$lastres.'&');  
   
 #my $c=0;  =item &clear_classlist_variables()
 #foreach(@mapsort) {  
 #    $c++;  
 #    $r->print('<br>'.$mapsort[$c]);  
 #}  
 #$r->print('<br> Count = '.$c);  
   
     }  undef the following package variables:
   
 # ------------------------------------------------------------- End render page   =over 4
     else {  
  $r->print('<h3>Undefined course sequence</h3>');  
     }  
     &MapSecOptions();  
 }  
   
   =item * @FullClasslist
   
 sub Menu {  =item * @Students
     my $InpStr = $ENV{'form.sort'};  
     if ( $InpStr eq 'DoDiff Graph' || $InpStr eq '%Wrong Graph' ) {        
  &GetGraphData($InpStr);  
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" />');  
     }  
     else {  
  $r->print('<html><head><title>LON-CAPA Statistics</title></head>');  
   
   
         $r->print('<body bgcolor="#FFFFFF">'.  
                   '<script>window.focus(); window.width=500;window.height=500; </script>'.  
                   '<img align=right src=/adm/lonIcons/lonlogos.gif>');  
 # ---------------------------------------------------------------- Course title  
         $r->print('<h1> Course : "'.  
                   $ENV{'course.'.$ENV{'request.course.id'}.  
                   '.description'}.'"</h1><h2>'.localtime().'</h2>');  
 # ------------------------------- This is going to take a while, produce output  
         $r->rflush();  
   
  $r->print("\n".'<form name=stat method=post action="/adm/statistics" >');  
   
  my $content = $ENV{'form.sort'};  
  if ($content eq '' || $content eq 'Return to Menu') {  
     my $Ptr = '<h3>';  
     $Ptr .= '<input type=submit name=sort value="Problem Evaluation"/>';#General Statistics"/>';  
     $Ptr .= '<br><br>';  
     $Ptr .= '<input type=submit name=sort value="Student Assessment"/>';  
     $Ptr .= '<br><br>';  
 #    $Ptr .= '<input type=submit name=sort value=Discrimination>';#"Problem Evaluation"/>';  
     $Ptr .= '</h3>';  
     $r->print( $Ptr );  
       }  
  else {  
     &initial();  
     &ClassList();  
     if ( $content eq 'Discrimination' || #'Problem Evaluation' ||  
                  $content eq 'Recalculate Discrimintion Factor' ) {  
  &CreateDiscFac();  
     }  
     elsif ( $content eq 'Student Assessment' ||   
                     $content eq 'Create Student Report' ) {  
  &StudentOptions();  
  &StudentReport($CurStu,$StuBox{"$CurStu"});  
     }  
     else {  
  &PreStatTable();  
     }  
  }  
  $r->print("\n".'</form>'.  
                   "\n".'</body>'.  
                   "\n".'</html>');  
  $r->rflush();  
     }  
 }  
   
 sub StudentOptions {  =item * @Sections
     my $OpSel5='';  
     $CurStu = $ENV{'form.student'};  
     if ( $CurStu eq '' ) {   
         $CurStu = 'All Students';  
         $OpSel5 = 'selected';  
     }  
     my $Ptr ='';  
 # ----------------------------------- Loading the Students Combobox  
     $Ptr .= '<br><b>Select Student</b>'."\n".  
            '<select name="student">'."\n".   
     '<option '.$OpSel5.'>All Students</option>';                               
     foreach my $key ( sort keys %StuBox ) {            
  $Ptr .= '<option';  
  if ($CurStu eq $key) {$Ptr .= ' selected';}       
         $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Create Student Report" />';  
     $r->print( $Ptr );  
     $r->rflush();  
 }  
   
 sub GetStatus {  =item * @Groups
   
     $OpSelDis1='';  =item * %StudentData
     $OpSelDis2='';  
     $OpSel1='';  
     $OpSel2='';  
     $OpSel3='';  
     $OpSel4='';  
   
 #    if ( $ENV{'form.DisType'} eq 'Total Number of Correct Answers' ) {   
 # $OpSelDis1='selected';   
 # $CurDis=0;  
 #    }  
 #    else { $OpSel2 = 'selected'; $CurDis = 1;}  
   
     if ( $ENV{'form.order'} eq 'Descending' ) { $OpSel2='selected'; }  
     else { $OpSel1 = 'selected'; }  
     $CurMap = $ENV{'form.maps'};  
     if ( $CurMap eq '' ) {   
  $CurMap = 'All Maps';  
  $OpSel3 = 'selected';  
     }  
     $CurSec = $ENV{'form.section'};  
     if ( $CurSec eq '' ) {   
  $CurSec = 'All Sections';  
         $OpSel4 = 'selected';  
     }  
 }  
   
   =item * @StudentDataOrder
   
 sub MapSecOptions {  =item * @SelectedStudentData
 # ----------------------------------- Loading the Maps Combobox  
     my $Ptr = '<br>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Return to Menu" />';  
     $Ptr .= '<br><b> Select &nbsp; Map &nbsp; &nbsp; </b>'."\n".  
            '<select name="maps">'."\n".   
     '<option '.$OpSel3.'>All Maps</option>';                               
     foreach my $key ( sort keys %maps ) {            
  $Ptr .= '<option';  
         if ($CurMap eq $key) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
   
 # ----------------------------------- Loading the Sections Combobox  
     $Ptr .= '<br><b>Select Section</b>'."\n".  
            '<select name="section">'."\n".   
     '<option '.$OpSel4.'>All Sections</option>';                               
     foreach my $key ( sort keys %section ) {            
  $Ptr .= '<option';  
         if ($CurSec eq $key) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$key."</option>"."\n";       
     }  
     $Ptr .= '</select>'."\n";  
   
     $r->print( $Ptr );  =item * $curr_student
     $r->rflush();  
 }  
   
   =item * $prev_student
   
 # ================================================================ Main Handler  =item * $next_student
   
 sub handler {  =back
     $r=shift;  
   
     if (&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {  =item &PrepareClasslist()
 # ------------------------------------------- Set document type for header only  
  if ($r->header_only) {  
     if ($ENV{'browser.mathml'}) {  
  $r->content_type('text/xml');  
     }   
     else {  
  $r->content_type('text/html');  
     }  
     $r->send_http_header;  
     return OK;  
  }      
  my $requrl=$r->uri;  
 # ----------------------------------------------------------------- Tie db file  
   
  undef %hash;  
   
  if ($ENV{'request.course.fn'}) {  
     my $fn=$ENV{'request.course.fn'};  
     if (-e "$fn.db") {  
  if (tie(%hash,'GDBM_File',"$fn.db",&GDBM_READER,0640)) {  
 # ------------------------------------------------------------------- Hash tied  
     $r->content_type('text/html');  
     $r->send_http_header;  
     &Menu();  
  }  
  else {  
     $r->content_type('text/html');  
     $r->send_http_header;  
     $r->print('<html><body>Coursemap undefined.</body></html>');  
  }  
 # ------------------------------------------------------------------ Untie hash  
  unless (untie(%hash)) {  
     &Apache::lonnet::logthis("<font color=blue>WARNING: ".  
                             "Could not untie coursemap $fn (browse).</font>");   
  }  
   
 # -------------------------------------------------------------------- All done  
  return OK;  
 # ----------------------------------------------- Errors, hash could no be tied  
     }  
  }   
  else {  
     $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";  
     return HTTP_NOT_ACCEPTABLE;   
  }  
     }  
     else {  
         $ENV{'user.error.msg'}=  
         $r->uri.":vgr:0:0:Cannot view grades for complete course";  
   
         return HTTP_NOT_ACCEPTABLE;   Build up the classlist information.  The classlist information is kept in
     }  the following package variables:
 }  
 1;  =over 4 
 __END__  
   =item * @FullClasslist
   
   =item * @Students
   
   =item * @Sections
   
   =item * @Groups 
   
   =item * %StudentData
   
   =item * @SelectedStudentData
   
   =item * $curr_student
   
   =item * $prev_student
   
   =item * $next_student
   
   =back
   
   $curr_student, $prev_student, and $next_student may not be defined, depending
   upon the calling context.
   
   =item get_selected_sections()
   
   Returns an array of the selected sections
   
   =item get_selected_groups()
                                                                                       
   Returns an array of the selected groups
   
   =item &section_and_enrollment_description()
   
   Returns a string describing the currently selected section(s), group(s) and 
   access status.  
   
   Inputs: mode = 'plaintext' or 'localized'  (defaults to 'localized')
       'plaintext' is used for example in Excel spreadsheets.
   Returns: scalar description string.
   
   =item section_or_group_text()
   
   =item get_students()
   
   Returns a list of the selected students
   
   =item &current_student()
   
   Returns a pointer to a hash containing data about the currently
   selected student.
   
   =item &previous_student()
   
   Returns a pointer to a hash containing data about the student prior
   in the list of students.  Or something. 
   
   =item &next_student()
   
   Returns a pointer to a hash containing data about the next student
   to be viewed. 
   
   =item &StudentDataSelect($elementname,$status,$numvisible,$selected)
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the fields of student data available (fullname, username, id, section, etc)
   
   =over 4
   
   =item * $elementname The name of the HTML form element
   
   =item * $status 'multiple' or 'single' selection box
   
   =item * $numvisible The number of options to be visible
   
   =back
   
   =item &get_selected_maps($elementname)
   
   Input: Name of the <select> form element used to specify the maps.
   
   Returns: Array of symbs of selected maps or the description 'all'.
      If form.$elementname does not exist, 'all' is returned.
   
   =item &selected_sequences_with_assessments()
   
   Retrieve the sequences which were selected by the user to show.  
   
   Input: $mode: scalar.  Either 'selected' or 'all'.  If not specified,
       'selected' is used.
   
   Returns: an array containing a navmap object and navmap resources, 
       or an array containing a scalar with an error message.
   
   =item &map_select($elementname,$status,$numvisible,$restriction) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sequences in the course.  The values of the sequences are the symbs.
   If the top sequence is selected, the value 'top' will result.
   
   =over 4
   
   =item * $elementname The name of the HTML form element
   
   =item * $status 'multiple' or 'single' selection box
   
   =item * $numvisible The number of options to be visible
   
   =back
   
   =item &SectionSelect($elementname,$status,$numvisible) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sections in the course.  
   
   Uses the package variables @Sections
   
   =over 4
   
   =item * $elementname The name of the HTML form element
   
   =item * $status 'multiple' or 'single' selection box
   
   =item * $numvisible The number of options to be visible
   
   =back
   
   =item &GroupSelect($elementname,$status,$numvisible)
                                                                                       
   Returns html for a selection box allowing the user to choose one (or more)
   of the groups in the course.
                                                                                       
   Uses the package variables @Groups
   
   =over 4
                                                                                       
   =item * $elementname The name of the HTML form element
                                                                                       
   =item * $status 'multiple' or 'single' selection box
                                                                                       
   =item * $numvisible The number of options to be visible
                                                                                       
   =back
   
   =item CreateMainMenu()
   
   =back
   
   =cut
   
Removed from v.1.2  
changed lines
  Added in v.1.148.2.7

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>