Diff for /loncom/interface/lonstatistics.pm between versions 1.17 and 1.113

version 1.17, 2002/05/13 16:41:46 version 1.113, 2005/02/01 15:15:28
Line 1 Line 1
 # The LearningOnline Network with CAPA  # The LearningOnline Network with CAPA
 # (Publication Handler  
 #  #
 # $Id$  # $Id$
 #  #
Line 26 Line 25
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
 # (Navigate problems for statistical reports  # (Navigate problems for statistical reports
 # YEAR=2001  
 # 5/5,7/9,7/25/1,8/11,9/13,9/26,10/5,10/9,10/22,10/26 Behrouz Minaei  
 # 11/1,11/4,11/16,12/14,12/16,12/18,12/20,12/31 Behrouz Minaei  
 # YEAR=2002  
 # 1/22,2/1,2/6,2/25,3/2,3/6,3/17,3/21,3/22,3/26,4/7,5/6,5/12 Behrouz Minaei  
 #  #
 ###  ###
   
 package Apache::lonstatistics;   =pod
   
 use strict;   =head1 NAME
   
   lonstatistics
   
   =head1 SYNOPSIS
   
   Main handler for statistics and chart.
   
   =over 4
   
   =cut
   
   package Apache::lonstatistics;
   
   use strict;
 use Apache::Constants qw(:common :http);  use Apache::Constants qw(:common :http);
   use vars qw(
       @FullClasslist 
       @Students
       @Sections 
       @SelectedSections
       %StudentData
       @StudentDataOrder
       @SelectedStudentData
       $top_map 
       @Sequences 
       @SelectedMaps
       @Assessments
       $enrollment_status);
   
 use Apache::lonnet();  use Apache::lonnet();
 use Apache::lonhomework;  use Apache::lonhomework;
 use Apache::loncommon;  use Apache::loncommon;
 use HTML::TokeParser;  use Apache::loncoursedata;
 use GDBM_File;  use Apache::lonhtmlcommon;
   use Apache::lonmysql;
   use Apache::lonlocal;
   use Time::HiRes;
   #
   # Statistics Packages
   use Apache::lonproblemanalysis();
   use Apache::lonsubmissiontimeanalysis();
   use Apache::loncorrectproblemplot();
   use Apache::lonproblemstatistics();
   use Apache::lonstudentassessment();
   use Apache::lonpercentage;
   use Apache::lonstudentsubmissions();
   use Apache::lonsurveyreports();
   
 # -------------------------------------------------------------- Module Globals  #######################################################
 my %hash;  #######################################################
 my %CachData;  
 my %GraphDat;  =pod
 my %OpResp;  
 my %maps;  =item Package Variables
 my %mapsort;  
 my %section;  =item @FullClasslist The full classlist
 my %StuBox;  
 my %DiscFac;  =item @Students The students we are concerned with for this invocation
 my %DisUp;  
 my %DisLow;  =item @Sections The sections available in this class
 my $UpCnt;  
 my $CurMap;  =item $curr_student The student currently being examined
 my $CurSec;  
 my $CurStu;  =item $prev_student The student previous in the classlist
 my @cols;  
 my @list;  =item $next_student The student next in the classlist
 my @students;  
 my $p_count;  =over
 my $Pos;  
 my $r;  =cut 
 my $OpSel1;  
 my $OpSel2;  #######################################################
 my $OpSel3;  #######################################################
 my $OpSel4;  #
 my $GData;  # Classlist variables
 my $cid;  #
 my $firstres;  my $curr_student;
 my $lastres;  my $prev_student;
 my $DiscFlag;  my $next_student;
 my $HWN;  
 my $P_Order;  #######################################################
 my %foil_to_concept;  #######################################################
 my @Concepts;  
 my %ConceptData;  =pod
 my %Header = (0,"Homework Sets Order",1,"#Stdnts",2,"Tries",3,"Mod",  
               4,"Mean",5,"#YES",6,"#yes",7,"%Wrng",8,"DoDiff",  =item &clear_classlist_variables()
               9,"S.D.",10,"Skew.",11,"D.F.1st",12,"D.F.2nd");  
 my @shown;  undef the following package variables:
   
 sub InitAnalysis {  =over
     my ($rid, $student)=@_;  
     my ($uname,$udom)=split(/\:/,$student);  =item @FullClasslist
     $rid=~/(\d+)\.(\d+)/;  
     my $symb=&Apache::lonnet::declutter($hash{'map_id_'.$1}).'___'.$2.'___'.  =item @Students
      &Apache::lonnet::declutter($hash{'src_'.$rid});  
     my $URI = $hash{'src_'.$rid};  =item @Sections
     my $Answ=&Apache::lonnet::ssi($URI,('grade_target' => 'analyze',  
                                   'grade_username' => $uname,  =item @SelectedSections
                                   'grade_domain' => $udom,  
                                   'grade_courseid' => $cid,  =item %StudentData
                                   'grade_symb' => $symb));  
 #    my $Answ=&Apache::lonnet::ssi($URI,('grade_target' => 'analyze'));  =item @StudentDataOrder
   
     (my $garbage,$Answ)=split(/_HASH_REF__/,$Answ,2);  =item @SelectedStudentData
     my %Answer=();  
     %Answer=&Apache::lonnet::str2hash($Answ);  =item $curr_student
   
     my $parts='';  =item $prev_student
     foreach my $elm (@{$Answer{"parts"}}) {  
  $parts.="$elm,";  =item $next_student
     }  
     chop($parts);  =back
     my $conc='';  
     foreach my $elm (@{$Answer{"$parts.concepts"}}) {  =cut
  $conc.="$elm@";  
     }  #######################################################
     chop($conc);  #######################################################
   sub clear_classlist_variables {
     @Concepts=split(/\@/,$conc);      undef(@FullClasslist);
     my $show='';      undef(@Students);
     foreach my $elm (@{$Answer{"$parts.shown"}}) {      undef(@Sections);
  $show.="$elm@";      undef(@SelectedSections);
     }      undef(%StudentData);
     chop($show);      undef(@SelectedStudentData);
     @shown=split(/\@/,$show);      undef($curr_student);
 #    $r->print("<br> shown:".$show);#    $r->rflush();      undef($prev_student);
     foreach my $concept (@{$Answer{"$parts.concepts"}}) {      undef($next_student);
  foreach my $foil (@{$Answer{"$parts.concept.$concept"}}) {  
     $foil_to_concept{$foil} = $concept;  
     $ConceptData{$foil} = $Answer{"$parts.foil.value.$foil"};  
  }  
     }  
     return $symb;  
 }  }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &PrepareClasslist()
   
   Build up the classlist information.  The classlist information is kept in
   the following package variables:
   
   =over
   
   =item @FullClasslist
   
   =item @Students
   
   =item @Sections
   
   =item @SelectedSections
   
   =item %StudentData
   
   =item @SelectedStudentData
   
   =item $curr_student
   
 sub Interval {  =item $prev_student
     my ($rid,$part,$symb)=@_;  
     my $Int=$ConceptData{"Interval"};  =item $next_student
     my $due = &Apache::lonnet::EXT('resource.$part.duedate',$symb)+1;  
     my $opn = &Apache::lonnet::EXT('resource.$part.opendate',$symb);  =back
     my $add=int(($due-$opn)/$Int);  
 #$r->print("<br> $opn, to $due add=$add  int=$Int");#$r->rflush();  $curr_student, $prev_student, and $next_student may not be defined, depending
     $ConceptData{"Int.0"}=$opn;  upon the calling context.
     for (my $i=1;$i<$Int;$i++) {  
  $ConceptData{"Int.$i"}=$opn+$i*$add;  =cut
     }  
     $ConceptData{"Int.$Int"}=$due;       #######################################################
     for (my $i=0;$i<$Int;$i++) {  #######################################################
  for (my $n=0; $n<=$#Concepts; $n++ ) {  sub PrepareClasslist {
     my $tmp=$Concepts[$n];      my %Sections;
     $ConceptData{"$tmp.$i.true"}=0;      &clear_classlist_variables();
     $ConceptData{"$tmp.$i.false"}=0;      #
  }      # Retrieve the classlist
       my $cid  = $ENV{'request.course.id'};
       my $cdom = $ENV{'course.'.$cid.'.domain'};
       my $cnum = $ENV{'course.'.$cid.'.num'};
       my ($classlist,$field_names) = &Apache::loncoursedata::get_classlist($cid,
                                                                     $cdom,$cnum);
       if (exists($ENV{'form.Section'})) {
           if (ref($ENV{'form.Section'})) {
               @SelectedSections = @{$ENV{'form.Section'}};
           } elsif ($ENV{'form.Section'} !~ /^\s*$/) {
               @SelectedSections = ($ENV{'form.Section'});
           }
       }
       @SelectedSections = ('all') if (! @SelectedSections);
       foreach (@SelectedSections) {
           if ($_ eq 'all') {
               @SelectedSections = ('all');
           }
       }
       #
       # Deal with instructors with restricted section access
       if ($ENV{'request.course.sec'} !~ /^\s*$/) {
           @SelectedSections = ($ENV{'request.course.sec'});
       }
       #
       # Set up %StudentData
       @StudentDataOrder = qw/fullname username domain id section status comments/;
       foreach my $field (@StudentDataOrder) {
           $StudentData{$field}->{'title'} = &mt($field);
           $StudentData{$field}->{'base_width'} = length(&mt($field));
           $StudentData{$field}->{'width'} = 
                                  $StudentData{$field}->{'base_width'};
       }
       #
       # get the status requested
       $enrollment_status = 'Active';
       $enrollment_status = $ENV{'form.Status'} if (exists($ENV{'form.Status'}));
       #
       # Process the classlist
       while (my ($student,$student_data) = each (%$classlist)) {
           my $studenthash = ();
           for (my $i=0; $i< scalar(@$field_names);$i++) {
               my $field = $field_names->[$i];
               # Store the data
               $studenthash->{$field}=$student_data->[$i];
               # Keep track of the width of the fields
               next if (! exists($StudentData{$field}));
               my $length = length($student_data->[$i]);
               if ($StudentData{$field}->{'width'} < $length) {
                   $StudentData{$field}->{'width'} = $length; 
               }
           }
           push (@FullClasslist,$studenthash);
           #
           # Build up a list of sections
           my $section = $studenthash->{'section'};
           if (! defined($section) || $section =~/^\s*$/ || $section == -1) {
               $studenthash->{'section'} = 'none';
               $section = $studenthash->{'section'};
           }
           $Sections{$section}++;
           #
           # Only put in the list those students we are interested in
           foreach my $sect (@SelectedSections) {
               if ( (($sect eq 'all') || 
                     ($section eq $sect)) &&
                    (($studenthash->{'status'} eq $enrollment_status) || 
                     ($enrollment_status eq 'Any')) 
                    ){
                   push (@Students,$studenthash);
                   last;
               }
           }
     }      }
       #
       # Put the consolidated section data in the right place
       if ($ENV{'request.course.sec'} !~ /^\s*$/) {
           @Sections = ($ENV{'request.course.sec'});
       } else {
           @Sections = sort {$a cmp $b} keys(%Sections);
           unshift(@Sections,'all'); # Put 'all' at the front of the list
       }
       #
       # Sort the Students
       my $sortby = 'fullname';
       $sortby = $ENV{'form.sort'} if (exists($ENV{'form.sort'}));
       my @TmpStudents = sort { $a->{$sortby} cmp $b->{$sortby} ||
                                $a->{'fullname'} cmp $b->{'fullname'} } @Students;
       @Students = @TmpStudents;
       # 
       # Now deal with that current student thing....
       $curr_student = undef;
       if (exists($ENV{'form.SelectedStudent'})) {
           my ($current_uname,$current_dom) = 
               split(':',$ENV{'form.SelectedStudent'});
           my $i;
           for ($i = 0; $i<=$#Students; $i++) {
               next if (($Students[$i]->{'username'} ne $current_uname) || 
                        ($Students[$i]->{'domain'}   ne $current_dom));
               $curr_student = $Students[$i];
               last; # If we get here, we have our student.
           }
           if (defined($curr_student)) {
               if ($i == 0) {
                   $prev_student = undef;
               } else {
                   $prev_student = $Students[$i-1];
               }
               if ($i == $#Students) {
                   $next_student = undef;
               } else {
                   $next_student = $Students[$i+1];
               }
           }
       }
       #
       if (exists($ENV{'form.StudentData'})) {
           if (ref($ENV{'form.StudentData'}) eq 'ARRAY') {
               @SelectedStudentData = @{$ENV{'form.StudentData'}};
           } else {
               @SelectedStudentData = ($ENV{'form.StudentData'});
           }
       } else {
           @SelectedStudentData = ('username');
       }
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               @SelectedStudentData = ('all');
               last;
           }
       }
       #
       return;
 }  }
   
   
 sub ShowOpGraph {  #######################################################
   #######################################################
   
     my ($InpStr, $Int_No)=@_;  =pod
   
     $r->print(<<ENDPOP);  =item get_students
     <script language="JavaScript">  
   
     function display(name) {  Returns a list of the selected students
  document.forms.displayform.elements.dis.value=name;  
  window.status=name;  =cut
     }  
     function cleardisplay() {  #######################################################
  document.forms.displayform.elements.dis.value='';  #######################################################
  window.status='No Concept in particular';  sub get_students {
     }      if (! @Students) {
           &PrepareClasslist()
     </script>  
 ENDPOP  
   
     my ($rid,$part)=split(/\:/,substr($InpStr,8));  
     $ConceptData{"Interval"}=$Int_No;  
     my $symb=&InitAnalysis($rid,$students[0]);  
     &Interval($rid,$part,$symb);  
     my $URI = $hash{'src_'.$rid};  
     my $Src = $hash{'title_'.$rid};  
     $Src =~ s/\ /"_"/eg;  
     $r->print('<br><b>'.$URI.'</b>');  
     for (my $n=1; $n<=$#Concepts+1; $n++ ) {  
  my $tmp=$Concepts[$n-1];  
  $tmp =~ s/</" less than "/eg;  
  $r->print("<br><b>Concept $n</b>:$tmp");  
     }      }
     $r->rflush();      return @Students;
       
     &Create_PrgWin();  
     &Update_PrgWin("Starting to analyze problem");  
     for (my $index=0;$index<=$#students;$index++) {  
  &Update_PrgWin($index);  
  &OpStatus($rid,$students[$index]);  
     }  
     &Close_PrgWin();  
   
     for (my $k=0; $k<$Int_No; $k++ ) {  
   my $data1='';   
  my $data2='';  
  &DrawGraph(&AdjustData($k).'+'.$Src.'+'.($k+1));  
     }  
 #$Apache::lonxml::debug=1;  
 #&Apache::lonhomework::showhash(%ConceptData);  
 #$Apache::lonxml::debug=0;  
     my $Answ=&Apache::lonnet::ssi($URI);  
     $r->print("<br><b>Here you can see the Problem:</b><br>$Answ");  
 }  }
   
 sub AdjustData {  #######################################################
     my $k=shift;  #######################################################
     my $Max=0;  
     my @data1;  =pod
     my @data2;  
     for (my $n=0; $n<=$#Concepts; $n++ ) {  =item &current_student()
  my $tmp=$Concepts[$n];  
  $data1[$n]=$ConceptData{"$tmp.$k.true"};  Returns a pointer to a hash containing data about the currently
  $data2[$n]=$ConceptData{"$tmp.$k.false"};  selected student.
  my $Sum=$data1[$n]+$data2[$n];  
  if ( $Max<$Sum ) {$Max=$Sum;}  =cut
  $ConceptData{"$tmp.true"}+=$data1[$n];  
  $ConceptData{"$tmp.false"}+=$data2[$n];  #######################################################
     }  #######################################################
     for (my $n=0; $n<=$#Concepts; $n++ ) {  sub current_student { 
  if ($data1[$n]+$data2[$n]<$Max) {      return $curr_student;
     $data2[$n]+=$Max-($data1[$n]+$data2[$n]);  
  }  
     }  
     return join(',',@data1).'+'.  
            join(',',@data2).'+'.  
            $Max.'+'.($#data1+1);  
 }  }
   
   #######################################################
   #######################################################
   
 sub DrawGraph {  =pod
     my $data=shift;  
     my($data1,$data2,$Max,$P_No,$Src,$k)=split(/\+/,$data);  =item &previous_student()
   
     my $Str="\n".'<table border=1>'.  Returns a pointer to a hash containing data about the student prior
             "\n".'<tr>'.  in the list of students.  Or something.  
     "\n".'<th> Correct Answers </th>'.  
     "\n".'<th> Wrong Answers </th>'.  =cut
     "\n".'<th> From </th>'.  
     "\n".'<th> To </th>'.  #######################################################
     "\n".'</tr>'.  #######################################################
     "\n"."<tr>".  sub previous_student { 
     "\n"."<td> $data1 </td>".      return $prev_student;
             "\n"."<td> $data2 </td>".  
             "\n"."<td> ".localtime($ConceptData{'Int.'.($k-1)})." </td>".  
             "\n"."<td> ".localtime($ConceptData{'Int.'.$k}-1)." </td>".  
             "\n"."</tr></table>";  
     $r->print($Str);  
 #    $r->print('<br><b>Correct Answers:</b> '.$data1.  
 #              '<br><b>Wrong Answers: </b>'.$data2);   
 #    $r->print('<br><b>From: </b>'.localtime($ConceptData{'Int.'.($k-1)}).  
 #              '<br><b>To: </b>'.localtime($ConceptData{"Int.$k"}));   
   
 #   if ( $Max > 1 ) {   
 # $Max += (10 - $Max % 10);  
 # $Max = int($Max);  
 #   }  
 #   else { $Max = 1; }  
     my $Titr=($ConceptData{'Interval'}>1) ? $Src.'_interval_'.$k : $Src;  
     $GData=$Titr.'&'.'Concepts'.'&'.'Answers'.'&'.$Max.'&'.$P_No.'&'.$data1.'&'.$data2;  
     if($ConceptData{'Interval'}>1){  
  $r->print('<br><IMG src="/cgi-bin/graph.gif?'.$GData.'" />');  
  return;  
     }  
     $r->print('<br>Move your mouse over a bar to find out the concept');   
     my $ptr='';  
     $ptr.="\n".'<form method="post" action="" name="displayform"> <input type=text name="dis" size=80> </form>';  
     $ptr.="\n".'<p><img src=/cgi-bin/graph.gif?'.$GData.  
           ' usemap="#Map" border=1>'.  
           "\n".'<map name="Map">';  
     my $gap=12;  
     my $Size=340;  
     my $barsize=($P_No) ? int($Size/$P_No) : 1;  
     for (my $i=0; $i<$P_No; $i++) {  
  my $x1=80+$gap*$i+($i*$barsize);  
  my $x2=$x1+$barsize;  
  my $y1=25;  
  my $y2=350;  
  my $j=$i+1;  
  $ptr.="\n".'<area shape="rect" coords='.$x1.','.$y1.','.$x2.','.$y2.' onMouseOver="display('."'Concept $j: $Concepts[$i]'".'); " href="javascript:alert('."'Concept $j: $Concepts[$i]'".');">';  
     }   
     $ptr.="\n".'<area shape="default" onMouseOver="cleardisplay(); " href="javascript:alert('.'No Concept  in particular'.');">';  
     $ptr.="\n".'</map></p>';  
     $r->print('<br>'.$ptr.'<br>');  
 }  }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &next_student()
   
 sub AnalyzeProblem {  Returns a pointer to a hash containing data about the next student
 # -------------------------------- Selecting the number of intervals  to be viewed.
     my $OpSel='';  
     my $CurInt = $ENV{'form.interval'};  =cut
     if ($CurInt eq '') {$CurMap = '1';}  
     my $Ptr = '<b>Select number of intervals</b>'."\n".  #######################################################
              '<select name="interval">'."\n";                               #######################################################
     for (my $n=1;$n<=7;$n++) {            sub next_student { 
  $Ptr .= '<option';      return $next_student;
         if ($CurInt eq $n) {$Ptr .= ' selected';}       
  $Ptr .= '>'.$n."</option>"."\n";       
     }  
     $Ptr .= '</select>'."\n";  
     $r->print( $Ptr );  
   
     $r->print('<br><b> Option Response Problems in this course:</b><br><br>');  
     my $Str = "\n".'<table border=2>'.  
               "\n".'<tr>'.  
               "\n".'<th> # </th>'.  
       "\n".'<th> Problem Title </th>'.  
       "\n".'<th> Resouse </th>'.  
       "\n".'<th> Address </th>'.  
       "\n".'</tr>';  
   
      my $P_No=1;  
      foreach (sort keys %OpResp) {  
  my ($rid,$part)=split(/\:/,$OpResp{$_});  
  my $Temp = '<a href="'.$hash{'src_'.$rid}.  
                     '" target="_blank">'.$hash{'title_'.$rid}.'</a>';  
  $Str .= "\n"."<tr>".  
          "\n"."<td> $P_No </td>".  
                  "\n"."<td bgcolor=#DDFFDD> ".$Temp." </td>".  
                  "\n"."<td bgcolor=#EEFFCC> ".$hash{'src_'.$rid}." </td>".  
          "\n"."<td> ".'<input type="submit" name="sort" value="'.'Analyze_'.$rid.'" />'.'</td>'.  
                  "\n"."</tr>";  
  $P_No++;  
      }  
      $Str .= "\n".'</table>';  
      $Str .= "\n".'</form>';  
      $r->print($Str);  
      $r->rflush();  
 }  }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &clear_sequence_variables()
   
 sub Decide {  =cut
     my ($type,$foil,$time)=@_;   
     my $k=0;  #######################################################
     while ($time>$ConceptData{'Int.'.($k+1)} &&   #######################################################
            $k<$ConceptData{'Interval'}) {$k++;}  sub clear_sequence_variables {
     $ConceptData{"$foil_to_concept{$foil}.$k.$type"}++;      undef($top_map);
       undef(@Sequences);
       undef(@Assessments);
 }  }
   
   #######################################################
   #######################################################
   
   =pod
   
   =item &SetSelectedMaps($elementname)
   
 sub OpStatus {  Sets the @SelectedMaps array from $ENV{'form.'.$elementname};
     my ($rid,$student)=@_;  
     my ($uname,$udom)=split(/\:/,$student);  =cut
     my $code='U';  
     $rid=~/(\d+)\.(\d+)/;  #######################################################
     my $symb=&Apache::lonnet::declutter($hash{'map_id_'.$1}).'___'.$2.'___'.  #######################################################
      &Apache::lonnet::declutter($hash{'src_'.$rid});  sub SetSelectedMaps {
     my %reshash=&Apache::lonnet::restore($symb,$cid,$udom,$uname);      my $elementname = shift;
     my @True = ();      if (exists($ENV{'form.'.$elementname})) {
     my @False = ();          if (ref($ENV{'form.'.$elementname})) {
     my $flag=0;              @SelectedMaps = @{$ENV{'form.'.$elementname}};
     @shown=();          } else {
     if ($reshash{'version'}) {              @SelectedMaps = ($ENV{'form.'.$elementname});
  for (my $version=1;$version<=$reshash{'version'};$version++) {  
     my $time=$reshash{"$version:timestamp"};  
     foreach (sort(split(/\:/,$reshash{$version.':keys'}))) {  
  if (($_=~/\.(\w+)\.(\w+)\.submission$/)) {  
     #my $Id1=$1; my $Id2=$2;  
     my $Resp = $reshash{$_};  
     my %submission=&Apache::lonnet::str2hash($Resp);  
     foreach (keys %submission) {  
  my $Ansr = $ConceptData{"$_"};  
  #my $Ansr = $Answer{"$Id1.$Id2.foil.value.$_"};  
  #$r->print("<br>shown: ".join(',',@shown)." size=$#shown");       
  if ($submission{$_}) {  
     #if($#shown==-1){  
  #my @str=split(/\&/,$Resp);  
  #my $garb;  
  #for(my $j=0;$j<=$#str;$j++){  
  #    ($shown[$j],$garb)=split(/\=/,$str[$j]);  
  #}  
  ##$r->print("<br>shown: ".join(',',@shown)." size=$#shown");       
     #}  
     if ($submission{$_} eq $Ansr) {  
  &Decide("true",$_,$time );  
     }  
     else {&Decide("false",$_,$time );}  
  }  
  #else {  
  #    if ($#shown==-1 && $flag==0) {  
  # $flag++;  
  # &InitAnalysis($rid,$student);  
  #    }  
  #    my @erl=split(/\:/,$_);  
  #    for (my $i=0;$i<=$#shown; $i++){  
  # my $Ans=$Answer{"$Id1.$Id2.foil.value.$shown[$i]"};  
  # if ($erl[$i] eq $Ans) {  
  #    &Decide("true",$shown[$i],$time);  
  # }  
  # else {&Decide("false",$shown[$i],$time);}  
  #    }  
  #}  
     }  
         }    
     }  
         }          }
       } else {
           @SelectedMaps = ('all');
     }      }
 }  }
   
   
 #------- Processing upperlist and lowerlist according to each problem  #######################################################
 sub ProcessDisc {  #######################################################
     my @List = @_;  
     @List = sort (@List);  
     my $Count = $#List+1;  
     my $Prb;  
     my @Dis;  
     my $Slvd=0;  
     my $tmp;  
     my $Sum1=0;  
     my $Sum2=0;  
     my $nIdx=0;  
     my $nStud=0;  
     my %Proc;  
     undef %Proc;  
     while ($nIdx<$Count) {  
  ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
  @Dis=split(/\+/,$tmp);  
  my $Temp = $Prb;  
  do {  
     $nIdx++;  
     $nStud++;  
     $Sum1 += $Dis[0];  
     $Sum2 += $Dis[1];  
     ($Prb,$tmp)=split(/\=/,$List[$nIdx]);  
     @Dis=split(/\+/,$tmp);  
  } while ( $Prb eq $Temp && $nIdx < $Count );  
 # $Proc{$Temp}=($Sum1/$nStud).':'.$nStud;  
  $Proc{$Temp}=($Sum1/$nStud).':'.($Sum2/$nStud);  
 #       $r->print("$nIdx) $Temp --> ($nStud) $Proc{$Temp} <br>");  
  $Sum1=0;  
  $Sum2=0;  
  $nStud=0;  
     }  
     return %Proc;  
 }  
   
   =pod
   
 #------- Creating Discimination factor     =item &Sequences_with_Assess()
 sub Discriminant {  
     my $Count=0;  
     foreach (keys(%DiscFac)){   
  $Count++;  
     }  
     $UpCnt = int(0.27*$Count);  
     my $low=0;  
     my $up=$Count-$UpCnt;  
     my @UpList=();  
     my @LowList=();  
     $Count=0;  
     foreach my $key (sort(keys(%DiscFac))){   
  $Count++;      
         #$r->print("<br>$Count) $key = $DiscFac{$key}");  
  if ($low < $UpCnt || $Count > $up) {  
     $low++;  
     my $str=$DiscFac{$key};  
     foreach(split(/\:/,$str)){  
  if ($_) {  
     if ($low<$UpCnt){push(@LowList,$_);}  
     else {push(@UpList,$_);}  
  }  
     }  
  }  
     }  
     %DisUp=&ProcessDisc(@UpList);  
     %DisLow=&ProcessDisc(@LowList);  
 }  
   
      Returns an array containing the subset of @Sequences which contain
 sub NumericSort {            assessments.
     $a <=> $b;  
 }  
   
 # ------ Create different Student Report   =cut
 sub StudentReport {  
     my ($sname,$sdom)=@_;  
     if ( $sname eq 'All Students' ) {  
  $r->print( '<h3><font color=blue>WARNING:   
                     Please select a student</font></h3>' );  
  return;  
     }  
     my %result = &Apache::lonnet::dump($cid,$sdom,$sname);  
     my $ResId;  
     my $PrOrd;  
     my $Code;  
     my $Tries;  
     my $TotalTries = 0;  
     my $ParCr = 0;  
     my $Wrongs;  
     my %TempHash;  
     my $Version;  
     my $LatestVersion;  
     my $PtrTry='';  
     my $PtrCod='';  
     my $SetNo=0;  
     my $Str = "\n".'<table border=2>'.  
               "\n".'<tr>'.  
               "\n".'<th> # </th>'.  
       "\n".'<th> Set Title </th>'.  
       "\n".'<th> Results </th>'.  
       "\n".'<th> Tries </th>'.  
       "\n".'</tr>';  
     my ($temp)=keys(%result);  
     unless ($temp=~/^error\:/) {  
         foreach my $CurCol (@cols) {  
     if (!$CurCol){  
  my $Set=&Apache::lonnet::declutter($hash{'map_id_'.$1});  
  if ( $Set ) {  
     $SetNo++;  
     $Str .= "\n"."<tr>".  
     "\n"."<td> $SetNo </td>".  
                             "\n"."<td> $Set </td>".  
                             "\n"."<td> $PtrCod </td>".  
                             "\n"."<td> $PtrTry</td>".  
                             "\n"."</tr>";  
  }  
  $PtrTry='';  
  $PtrCod='';  
  next;   
     }  
     ($PrOrd,$ResId)=split(/\:/,$CurCol);  
             $ResId=~/(\d+)\.(\d+)/;  
             my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     undef %TempHash;  
     foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))){  
  if ($_=~/^stores\_(\w+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = '-';    
  $TempHash{"$Part.PrOrd"} = $PrOrd+$PartNo;    
  $PartNo++;  
     }  
  }  
             }  
   
             my $Prob = $Map.'___'.$2.'___'.  #######################################################
                        &Apache::lonnet::declutter( $hash{'src_'.$ResId} );  #######################################################
             $Code='U';  sub Sequences_with_Assess {
             $Tries = 0;      my ($mode) = @_;
             $Wrongs = 0;      $mode = 'selected' if (! defined($mode));
      $LatestVersion = $result{"version:$Prob"};      my @Sequences_to_Show;
     if ( $LatestVersion ) {      foreach my $sequence (@Sequences) {
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {          next if ($sequence->{'num_assess'} < 1);
     my $vkeys = $result{"$Version:keys:$Prob"};          if ($mode eq 'all') {
     my @keys = split(/\:/,$vkeys);              push (@Sequences_to_Show,$sequence);
             } elsif ($mode eq 'selected') {
     foreach my $Key (@keys) {                foreach my $map_symb (@SelectedMaps) {
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {                  if ($sequence->{'symb'} eq $map_symb || $map_symb eq 'all'){
     my $Part = $1;                      push (@Sequences_to_Show,$sequence);
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};                      last; # Only put it in once
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;   
     $TotalTries += $Tries;  
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};  
     if ( $Val eq 'correct_by_student' )  
                                 { $Wrongs = $Tries - 1; $Code = 'Y'; }   
     elsif ( $Val eq 'correct_by_override' )  
                                 { $Wrongs = $Tries - 1; $Code = 'y'; }                          
     elsif ( $Val eq 'incorrect_attempted' ||   
                                 $Val eq 'incorrect_by_override' )  
                 { $Wrongs = $Tries; $Code = 'N'; }  
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }                  }
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "$TempHash{$part.'.Tries'}";  
                     $PtrCod .= "$TempHash{$part.'.Code'}";      
  }  
             }              }
     else {   
  for(my $n=0; $n<$PartNo; $n++) {   
     if ($PtrTry ne '') {$PtrTry .= ',';}  
     $PtrTry .= "0";  
                     $PtrCod .= "-";   
  }  
     }  
         }          }
     }  
     $Str .= "\n".'</table>';  
     $r->print($Str);  
     $r->rflush();  
 }  
   
 sub CreateTable {  
     my $ColNo=0;  
     foreach (keys(%Header)){   
  $ColNo++;  
     }   
     my ($Hd, $Hid)=@_;  
     if ( $Hd == 1 ) {  
  $r->print('<br><a href="'.$hash{'src_'.$Hid}.  
                   '" target="_blank">'.$hash{'title_'.$Hid}.'</a>');  
     }  
     my $Result = "\n".'<table border=2>';  
     $Result .= '<tr><th>P#</th>'."\n";  
     for ( my $nIdx=0; $nIdx < $ColNo; $nIdx++ ) {   
  $Result .= '<th>'.'<input type="submit" name="sort" value="'.  
                    $Header{$nIdx}.'" />'.'</th>'."\n";  
     }      }
     $Result .= "\n".'</tr>'."\n";          return @Sequences_to_Show;
     $r->print( $Result );  
     $r->rflush();  
 }  }
   
 sub CloseTable {  #######################################################
     $r->print("\n".'</table>'."\n");  #######################################################
     $r->rflush();  
 }  
    
 # ------------------------------------------- Prepare Statistics Table  
 sub PreStatTable {  
     my $CacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_statistics.db";  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     my $OpSel11='';  
     my $OpSel12='';  
     my $OpSel13='';  
     my $Status = $ENV{'form.status'};  
     if ( $Status eq 'Any' ) { $OpSel13='selected'; }  
     elsif ($Status eq 'Expired' ) { $OpSel12 = 'selected'; }  
     else { $OpSel11 = 'selected'; }  
   
     my $Ptr = '';  
     $Ptr .= '<br><b> Student Status: &nbsp; </b>'."\n".  
             '<select name="status">'.   
             '<option '.$OpSel11.' >Active</option>'."\n".  
             '<option '.$OpSel12.' >Expired</option>'."\n".  
     '<option '.$OpSel13.' >Any</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type=submit name=sort value="Recalculate Statistics"/>'."\n";  
   
     $Ptr .= '<br><b> Sorting Type: &nbsp; </b>'."\n".  
             '<select name="order"> <option '.$OpSel1.' >Ascending</option>'."\n".  
     '<option '.$OpSel2.'>Descending</option> </select> '."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="DoDiff Graph" />'."\n";  
     $Ptr .= '&nbsp;&nbsp;&nbsp;';  
     $Ptr .= '<input type="submit" name="sort" value="%Wrong Graph" />'."\n";  
   
     $Ptr .= '<pre>'.  
     '<b>  #Stdnts</b>: Total Number of Students opened the problem.<br>'.   
     '<b>  Tries  </b>: Total Number of Tries for solving the problem.<br>'.   
     '<b>  Mod   </b> : Maximunm Number of Tries for solving the problem.<br>'.   
     '<b>  Mean   </b>: Average Number of the tries. [ Tries / #Stdnts ]<br>'.  
     '<b>  #YES   </b>: Number of students solved the problem correctly.<br>'.   
     '<b>  #yes   </b>: Number of students solved the problem by override.<br>'.  
     '<b>  %Wrng  </b>: Percentage of students tried to solve the problem but'.  
     ' still incorrect. [ 100*((#Stdnts-(#YES+#yes))/#Stdnts) ]<br>'.  
 #    '  DoDiff : Degree of Difficulty of the problem. [ Tries/(#YES+#yes+0.1) ]<br>'. Kashy formula  
     '<b>  DoDiff </b>: Degree of Difficulty of the problem. [ 1 - ((#YES+#yes) / Tries) ]<br>'. #Gerd formula  
     '<b>  S.D.  </b> : Standard Deviation of the tries.'.  
     '[ sqrt(sum((Xi - Mean)^2)) / (#Stdnts-1)'.  
     ' where Xi denotes every student\'s tries ]<br>'.  
     '<b>  Skew.  </b>: Skewness of the students tries.'.  
  ' [ (sqrt( sum((Xi - Mean)^3) / #Stdnts)) / (S.D.^3) ]<br>'.  
     '<b>  Dis.F. </b>: Discrimination Factor: A Standard for '.  
  'evaluating the problem according to a Criterion<br>'.  
  '<b>           [Applied Criterion in %27 Upper Students - '.  
  'Applied the same Criterion in %27 Lower Students]</b><br>'.  
     '<b>           1st Criterion</b> for Sorting the Students: '.  
  '<b>Sum of Partial Credit Awarded / Total Number of Tries</b><br>'.  
     '<b>           2nd Criterion</b> for Sorting the Students: '.  
  '<b>Total number of Correct Answers / Total Number of Tries</b>'.  
             '</pre>';  
   
     $r->print($Ptr);  
     $r->rflush();  
   
     if ((-e "$CacheDB")&&($ENV{'form.sort'} ne 'Recalculate Statistics')) {  
  if (tie(%CachData,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     &Cache_Statistics();  
         }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
     else {  
  if (tie(%CachData,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {  
     tie(%GraphDat,'GDBM_File',$GraphDB,&GDBM_WRCREAT,0640);  
     foreach (keys %DiscFac) {delete $CachData{$_};}  
     foreach (keys %CachData) {delete $CachData{$_};}  
     $DiscFlag=0;  
     &Build_Statistics();  
  }  
         else {  
     $r->print("Unable to tie hash to db file");  
         }  
     }  
   
 #    $r->print('Total instances of the problems : '.($p_count*($#students+1)));  
     untie(%CachData);  
     untie(%GraphDat);  
 }  
   
   =pod
   
 # ------------------------------------- Find the section of student in a course  =item &PrepareCourseData($r)
   
 sub usection {  =cut
     my ($udom,$unam,$courseid,$ActiveFlag)=@_;  
     $courseid=~s/\_/\//g;  #######################################################
     $courseid=~s/^(\w)/\/$1/;  #######################################################
     foreach (split(/\&/,&Apache::lonnet::reply('dump:'.  sub PrepareCourseData {
              $udom.':'.$unam.':roles',      my ($r) = @_;
              &Apache::lonnet::homeserver($unam,$udom)))){      &clear_sequence_variables();
         my ($key,$value)=split(/\=/,$_);      my ($top,$sequences,$assessments) = 
         $key=&Apache::lonnet::unescape($key);          &Apache::loncoursedata::get_sequence_assessment_data();
         if ($key=~/^$courseid(?:\/)*(\w+)*\_st$/) {      if (! defined($top) || ! ref($top)) {
             my $section=$1;          # There has been an error, better report it
             if ($key eq $courseid.'_st') { $section=''; }          &Apache::lonnet::logthis('top is undefined');
     my ($dummy,$end,$start)=split(/\_/,&Apache::lonnet::unescape($value));          return;
     if ( $ActiveFlag ne 'Any' ) {  
  my $now=time;  
  my $notactive=0;  
  if ($start) {  
     if ($now<$start) { $notactive=1; }  
  }  
  if ($end) {  
     if ($now>$end) { $notactive=1; }  
  }  
  if ((($ActiveFlag eq 'Expired') && $notactive == 1) ||   
                     (($ActiveFlag eq 'Active') && $notactive == 0 ) ) {  
     return $section;  
  }  
  else { return '-1'; }   
     }  
     return $section;  
         }  
     }      }
     return '-1';      $top_map = $top if (ref($top));
       @Sequences = @{$sequences} if (ref($sequences) eq 'ARRAY');
       @Assessments = @{$assessments} if (ref($assessments) eq 'ARRAY');
       return;
 }  }
   
   #######################################################
   #######################################################
   
   =pod
   
 # ------ Dump the Student's DB file and handling the data for statistics table   =item &log_sequence($sequence,$recursive,$padding)
 sub ExtractStudentData {  
     my $student=shift;  Write data about the sequence to a logfile.  If $recursive is not
     my ($sname,$sdom) = split( /\:/, $student );  undef the data is written recursively.  $padding is used for recursive
     my %result = &Apache::lonnet::dump($cid,$sdom,$sname);  calls.
     my $ResId;  
     my $PrOrd;  =cut
     my $Dis = '';  
     my $Code;  #######################################################
     my $Tries;  #######################################################
     my $ParCr;  sub log_sequence {
     my $TotalTries = 0;      my ($seq,$recursive,$padding) = @_;
     my $TotalOpend = 0;      $padding = '' if (! defined($padding));
     my $ProbSolved = 0;      if (ref($seq) ne 'HASH') {
     my $ProbTot = 0;          &Apache::lonnet::logthis('log_sequence passed bad sequnce');
     my $TimeTot = 0;          return;
     my $TotParCr = 0;      }
     my $Wrongs;      &Apache::lonnet::logthis($padding.'sequence '.$seq->{'title'});
     my %TempHash;      while (my($key,$value) = each(%$seq)) {
     my $Version;           next if ($key eq 'contents');
     my $LatestVersion;          if (ref($value) eq 'ARRAY') {
     my $SecLimit;              for (my $i=0;$i< scalar(@$value);$i++) {
     my $MapLimit;                  &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
     my ($temp)=keys(%result);                                           $value->[$i]);
     unless ($temp=~/^error\:/) {  
         foreach my $CurCol(@cols) {  
     ($PrOrd,$ResId)=split(/\:/,$CurCol);  
     if ( !$CurCol ) { next; }  
             $ResId=~/(\d+)\.(\d+)/;  
     my $MapId=$1;  
     my $PrbId=$2;  
             my $MapOrg = $hash{'map_id_'.$MapId};  
             my $Map = &Apache::lonnet::declutter($MapOrg);  
             if ( $CurMap ne 'All Maps' ) {  
  my ( $ResMap, $NameMap ) = split(/\=/,$CurMap);  
  if ( $Map ne $ResMap ) { next; }  
     }  
     my $meta=$hash{'src_'.$ResId};  
     my $PartNo = 0;  
     $Dis .= ':';  
     undef %TempHash;  
   
     foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {   
  if ($_=~/^stores\_(\w+)\_tries$/) {  
                     my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
     if ( $TempHash{"$Part"} eq '' ) {   
  $TempHash{"$Part"} = $Part;  
  $TempHash{$PartNo}=$Part;  
  $TempHash{"$Part.Code"} = 'U';    
  $TempHash{"$Part.PrOrd"} = $PrOrd+$PartNo;  
  $PartNo++;  
     }  
                     #my $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
  }  
             }              }
             &Apache::lonnet::declutter( $hash{'src_'.$ResId} );          } else {
     my $URI = $hash{'src_'.$ResId};              &Apache::lonnet::logthis($padding.$key.'='.$value);
             my $Prob = $Map.'___'.$PrbId.'___'.          }
                        &Apache::lonnet::declutter($URI);      }
             $Code='U';      if (defined($recursive)) {
             $Tries = 0;          &Apache::lonnet::logthis($padding.'-'x20);
     $ParCr = 0;          &Apache::lonnet::logthis($padding.'contains:');
             $Wrongs = 0;          foreach my $item (@{$seq->{'contents'}}) {
      $LatestVersion = $result{"version:$Prob"};                      if ($item->{'type'} eq 'container') {
     if ( $LatestVersion ) {                  &log_sequence($item,$recursive,$padding.'    ');
  for ( my $Version=1; $Version<=$LatestVersion; $Version++ ) {              } else {
     my $vkeys = $result{"$Version:keys:$Prob"};                  &Apache::lonnet::logthis($padding.'title = '.$item->{'title'});
     my @keys = split(/\:/,$vkeys);                  while (my($key,$value) = each(%$item)) {
     foreach my $Key (@keys) {                        next if ($key eq 'title');
  if (($Key=~/\.(\w+)\.solved$/) && ($Key!~/^\d+\:/)) {                      if (ref($value) eq 'ARRAY') {
     my $Part = $1;                          for (my $i=0;$i< scalar(@$value);$i++) {
     $Tries = $result{"$Version:$Prob:resource.$Part.tries"};                              &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
     $ParCr = $result{"$Version:$Prob:resource.$Part.awarded"};                                                       $value->[$i]);
     my $Time = $result{"$Version:$Prob:timestamp"};                          }
     $TempHash{"$Part.Time"} = ($Time) ? $Time : 0;                      } else {
     $TempHash{"$Part.Tries"} = ($Tries) ? $Tries : 0;                          &Apache::lonnet::logthis($padding.$key.'='.$value);
     $TempHash{"$Part.ParCr"} = ($ParCr) ? $ParCr : 0;                              }
     $TotalTries += $TempHash{"$Part.Tries"};                  }
     $TotParCr += $TempHash{"$Part.ParCr"};  
     my $Val = $result{"$Version:$Prob:resource.$Part.solved"};  
     if ( $Val eq 'correct_by_student' )  
                                { $Wrongs = $Tries - 1; $Code = 'C'; }   
     elsif ( $Val eq 'correct_by_override' )  
                                { $Wrongs = $Tries - 1; $Code = 'O'; }                          
     elsif ( $Val eq 'incorrect_attempted' ||   
                                 $Val eq 'incorrect_by_override' )  
                { $Wrongs = $Tries; $Code = 'I'; }  
     $TempHash{"$Part.Code"} = $Code;  
     $TempHash{"$Part.Wrongs"} = $Wrongs;  
  }  
          }  
                 }   
  for ( my $n = 0; $n < $PartNo; $n++ ) {    
     my $part = $TempHash{$n};  
     my $Yes = 0;  
                     if ( $TempHash{$part.'.Code'} eq 'C' ||  
                          $TempHash{$part.'.Code'} eq 'O'  )   
        {$ProbSolved++;$Yes=1;}  
   
  #    my $ptr = "$hash{'title_'.$ResId}";  
     my $ptr = $TempHash{$part.'.PrOrd'}.'&'.$ResId;  
   
     if ( $PartNo > 1 ) {                  
  $ptr .= "*(part $part)";  
  $Dis .= '&';  
     }  
     my $Fac = ($TempHash{"$part.Tries"}) ?   
                               ($TempHash{"$part.ParCr"}/$TempHash{"$part.Tries"}) : 0;  
     my $DisF;  
     if ( $Fac > 0 &&  $Fac < 1 ) {   
  $DisF = sprintf( "%.4f", $Fac );  
     }  
     else {$DisF = $Fac;}  
 #    $DisF .= '+'.$TempHash{"$part.Time"};33333333  
     $TimeTot += $TempHash{"$part.Time"};  
     $Dis .= $TempHash{$part.'.PrOrd'}.'='.$DisF.'+'.$Yes;  
     $ptr .= "&$TempHash{$part.'.Tries'}".  
             "&$TempHash{$part.'.Wrongs'}".  
                             "&$TempHash{$part.'.Code'}";  
     push (@list, $ptr);  
     $TotalOpend++;  
     $ProbTot++;  
  }  
             }              }
     #else {           }
  #for(my $n=0; $n<$PartNo; $n++) {          &Apache::lonnet::logthis($padding.'end contents of '.$seq->{'title'});
  #    push (@list, "$TempHash{'0'.'.PrOrd'}.':'.$ResId:0:0:U");          &Apache::lonnet::logthis($padding.'-'x20);
  #    $ProbTot++;   
  #}  
     #}  
         }  
  if ( $TotalTries ) {  
     my $DisFac = ( $TotalTries ) ? ($TotParCr/$TotalTries) : 0;  
     my $DisFactor = sprintf( "%.4f", $DisFac );  
     $DiscFac{$DisFactor}=$Dis;  
     #my $time;  
     #if ($ProbSolved){  
  #$time = int(($TimeTot/$ProbSolved)-10000000);  
     #}  
     #$DiscFac{($DisFactor.':'.$sname.':'.$ProbTot.':'.$TotalOpend.':'.  
             #          $TotalTries.':'.$ProbSolved.':'.$time)}=$Dis;  
  }  
     }      }
     #$r->print($sname.' PrCr= '.$TotParCr.' Slvd= '.$ProbSolved.' Tries='.$TotalTries.'<br>');      return;
 }  }
   
   ##############################################
   ##############################################
   
 # ------------------------------------------------------------ Build page table  =pod 
 sub tracetable {  
     my ($rid,$beenhere)=@_;  
     my $IsMap=0;  
     $rid=~/(\d+)\.(\d+)/;  
     $maps{&Apache::lonnet::declutter($hash{'map_id_'.$1})}='';#$hash{'title_'.$rid};   
     #$maps{$HWN}=$hash{'title_'.$rid};   
     unless ($beenhere=~/\&$rid\&/) {  
        $beenhere.=$rid.'&';   
        if (defined($hash{'is_map_'.$rid})) {  
    my $cmap=$hash{'map_type_'.$hash{'map_pc_'.$hash{'src_'.$rid}}};  
            if ( $cmap eq 'sequence' || $cmap eq 'page' ) {   
                $cols[$#cols+1]=0;  
        $P_Order++;  
        $HWN=$P_Order;  
                $mapsort{$HWN} = $rid.':';  
        $IsMap=1;  
    
                #$maps{&Apache::lonnet::declutter($hash{'src_'.$rid})}=   
                #      $hash{'title_'.$rid};   
            }  
            if ((defined($hash{'map_start_'.$hash{'src_'.$rid}})) &&  
                (defined($hash{'map_finish_'.$hash{'src_'.$rid}}))) {  
        my $frid=$hash{'map_finish_'.$hash{'src_'.$rid}};  
   
                &tracetable($hash{'map_start_'.$hash{'src_'.$rid}},  
    '&'.$frid.'&');  
   
        $cols[$#cols+1]=($P_Order+1).':'.$frid;  
         
        my $meta=$hash{'src_'.$frid};  
        my $PartNo = 0;  
        my $Part;  
  #       if ($IsMap==0){  
                if ($meta) {  
    if ($meta=~/\.(problem|exam|quiz|assess|survey|form)$/) {  
        foreach (split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {  
    if ($_=~/^stores\_(\w+)\_tries$/) {  
        $Part=&Apache::lonnet::metadata($meta,$_.'.part');  
        $P_Order++;  
        $mapsort{$HWN} .= '&'.$P_Order;  
        $PartNo++;  
        #$r->print('<br>'.$PartNo.'---'.$P_Order);  
    }  
    foreach my $K(split(/\,/,&Apache::lonnet::metadata($meta,'packages'))) {  
        if ($K=~/^optionresponse\_($Part)\_(\w+)$/) {  
    #$r->print('<br>'.$_.'...'.$P_Order.'---'.$Part);  
    $OpResp{$P_Order}="$frid:$Part";  
        }   
    }  
        }  
    }  
                }  
    }  
  #  }  
        } else {  
    $cols[$#cols+1]=($P_Order+1).':'.$rid;  
    my $meta=$hash{'src_'.$rid};  
    my $PartNo = 0;  
    if ($meta) {  
        if ($meta=~/\.(problem|exam|quiz|assess|survey|form)$/) {  
    foreach my $Key(split(/\,/,&Apache::lonnet::metadata($meta,'keys'))) {  
        if ($Key=~/^stores\_(\w+)\_tries$/) {  
    my $Part=&Apache::lonnet::metadata($meta,$Key.'.part');  
    $P_Order++;  
    $mapsort{$HWN} .= '&'.$P_Order;  
    $PartNo++;  
    foreach (split(/\,/,&Apache::lonnet::metadata($meta,'packages'))) {  
        if ($_=~/^optionresponse\_($Part)\_(\w+)$/) {  
    #$r->print('<br>'.$_.'...'.$P_Order.'---'.$Part);  
    $OpResp{$P_Order}="$rid:$Part";;  
        }   
      
    }  
   
        }  
    }  
        }  
    }         
        }  
        if (defined($hash{'to_'.$rid})) {  
           foreach (split(/\,/,$hash{'to_'.$rid})){  
               &tracetable($hash{'goesto_'.$_},$beenhere);  
           }  
        }  
     }  
 }  
   
 sub MySort {            =item &StudentDataSelect($elementname,$status,$numvisible,$selected)
     if ( $Pos > 0 ) {  
  if ($ENV{'form.order'} eq 'Descending') {$b <=> $a;}  
  else { $a <=> $b; }  
     }  
     else {  
  if ($ENV{'form.order'} eq 'Descending') {$b cmp $a;}  
  else { $a cmp $b; }  
     }  
 }  
   
 sub Create_PrgWin {  Returns html for a selection box allowing the user to choose one (or more) 
 #----------- Create progress  of the fields of student data available (fullname, username, id, section, etc)
     $r->print(<<ENDPOP);  
     <script>  
     popwin=open('','popwin','width=400,height=100');  
     popwin.document.writeln('<html><body bgcolor="#88DDFF">'+  
       '<title>LON-CAPA Statistics</title>'+  
       '<h4>Computation Progress</h4>'+  
       '<form name=popremain>'+  
       '<input type=text size=35 name=remaining value=Starting></form>'+  
       '</body></html>');  
     popwin.document.close();  
     </script>  
 ENDPOP  
   
     $r->rflush();  =over 4
 }  
   
   =item $elementname The name of the HTML form element
   
 sub Update_PrgWin {  =item $status 'multiple' or 'single' selection box
 #----------- update progress  
     my $index = shift;  
     $r->print('<script>popwin.document.popremain.remaining.value="'.  
               'Computing '.($index+1).'/'.($#students+1).': '.  
               $students[$index].'";</script>');  
     $r->rflush();  
 }  
   
 sub Close_PrgWin {  =item $numvisible The number of options to be visible
 #--------------------- close Progress Line  
     $r->print('<script>popwin.close()</script>');  
     $r->rflush();   
 }  
   
 sub Build_Statistics {  =back
     &Create_PrgWin();  
 # ---------------------------- Gathering the Data of students' tries  =cut
     for (my $index=0;$index<=$#students;$index++) {  
  &Update_PrgWin($index);  
         &ExtractStudentData($students[$index]);  
     }  
   
 # -------------------- sorting the Data  
     $r->print('<script>popwin.document.popremain.remaining.value="'.  
               'Calculating Discrimination Factors...";</script>');  
   
     @list = sort (@list);  
   
   
     &Discriminant();  
   
     $OpSel2='';  
     $OpSel1='selected';  
       
     $p_count = 0;   
     my $nIdx = 0;  
     my $dummy;   
     my $p_val;  
     my $ResId;  
     my $NoElements = $#list + 1;  
 #-------------------------------- loop for data representation  
     foreach (sort keys %mapsort) {  
  my ($Hid,$pr)=split(/\:/,$mapsort{$_});  
  my @lpr=split(/\&/,$pr);  
  &CreateTable(1,$Hid);  
  for (my $i=1; $i<=$#lpr; $i++) {  
     my %storestats=();  
     my ($PrOrd,$Prob,$Tries,$Wrongs,$Code)=split(/\&/,$list[$nIdx]);  
     my $Temp = $Prob;  
     my $MxTries = 0;  
     my $TotalTries = 0;  
     my $YES = 0;  
     my $Incorrect = 0;  
     my $Override = 0;  
     my $StdNo = 0;  
     my @StdLst;  
     while ( $PrOrd == $lpr[$i] )   
     {  
  $nIdx++;  
  $StdNo++;  
  $StdLst[ $StdNo ] = $Tries;  
  $TotalTries += $Tries;  
  if ( $MxTries < $Tries ) { $MxTries = $Tries; }   
  if ( $Code eq 'C' ){ $YES++; }  
  elsif( $Code eq 'I' ) { $Incorrect++; }  
  elsif( $Code eq 'O' ) { $Override++; }  
  elsif( $Code eq 'U' ) { $StdNo--; }  
  ($PrOrd,$Prob,$Tries,$Wrongs,$Code)=split(/\&/,$list[$nIdx]);  
     }  
   
     $p_count++;  
     my $Dummy;  
     ($ResId,$Dummy)=split(/\*/,$Temp);  
   
     $Temp = '<a href="'.$hash{'src_'.$ResId}.  
                 '" target="_blank">'.$hash{'title_'.$ResId}.$Dummy.'</a>';  
   
     my $res = &Apache::lonnet::declutter($hash{'src_'.$ResId});  
     my $urlres=$res;  
   
     $ResId=~/(\d+)\.(\d+)/;  
     my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
     $urlres=$Map;  
    
     $res = '<a href="'.$hash{'src_'.$ResId}.'">'.$res.'</a>';  
     #$Map = '<a href="'.$Map.'">'.$res.'</a>';  
   
 #------------------------ Compute the Average of Tries about one problem  
     my $Average = ($StdNo) ? $TotalTries/$StdNo : 0;  
   
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___timestamp'}=time;         
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___stdno'}=$StdNo;  
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___avetries'}=$Average;  
      
 #-------------------------------- Compute percentage of Wrong tries  
     my $Wrong = ( $StdNo ) ? 100 * ( $Incorrect / $StdNo ) : 0;  
   
 #-------------------------------- Compute Standard Deviation  
     my $StdDev = 0;   
     if ( $StdNo > 1 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $StdDev += $Dif*$Dif;  
  }   
  $StdDev /= ( $StdNo - 1 );  
  $StdDev = sqrt( $StdDev );  
     }  
   
 #-------------------------------- Compute Degree of Difficulty  
     my $DoDiff = 0;  
     if( $TotalTries > 0 ) {  
  $DoDiff = 1 - ( ( $YES + $Override ) / $TotalTries );  
 #    $DoDiff =  ($TotalTries)/($YES + $Override+ 0.1);      
     }  
          
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___difficulty'}=$DoDiff;  
   
 #-------------------------------- Compute the Skewness  
     my $Skewness = 0;  
     my $Sum = 0;   
     if ( $StdNo > 0 && $StdDev > 0 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $Skewness += $Dif*$Dif*$Dif;  
  }   
  $Skewness /= $StdNo;  
  $Skewness /= $StdDev*$StdDev*$StdDev;  
     }  
   
 #--------------------- Compute the Discrimination Factors  
     my ($Up1,$Up2)=split(/\:/,$DisUp{$lpr[$i]});  
     my ($Lw1,$Lw2)=split(/\:/,$DisLow{$lpr[$i]});  
     my $Dis1 = $Up1 - $Lw1;  
     my $Dis2 = $Up2 - $Lw2;  
     my $_D1 = sprintf("%.2f", $Dis1);  
     my $_D2 = sprintf("%.2f", $Dis2);  
   
 #-----------------  Some restition in presenting the float numbers  
     my $Avg = sprintf( "%.2f", $Average );  
     my $Wrng = sprintf( "%.1f", $Wrong );  
     my $SD = sprintf( "%.1f", $StdDev );  
     my $DoD = sprintf( "%.2f", $DoDiff );  
     my $Sk = sprintf( "%.1f", $Skewness );  
     my $join = $lpr[$i].'&'.$Temp.'&'.$StdNo.'&'.  
                        $TotalTries.'&'.$MxTries.'&'.$Avg.'&'.  
                        $YES.'&'.$Override.'&'.$Wrng.'&'.$DoD.'&'.  
        $SD.'&'.$Sk.'&'.$_D1.'&'.$_D2.'&'.  
                        $Prob;  
     $CachData{($p_count-1)}=$join;  
   
     $urlres=~/^(\w+)\/(\w+)/;  
     if ($StdNo) {   
  &Apache::lonnet::put('resevaldata',\%storestats,$1,$2);   
     }  
 #-------------------------------- Row of statistical table  
     if ( $DiscFlag == 0 ) {  
  &TableRow($join,$i,($p_count-1));  
     }   
  }  
  &CloseTable();  
     }  
     &Close_PrgWin();  
 }  
   
 sub Cache_Statistics {  ##############################################
     my @list = ();  ##############################################
     my $Useful;  sub StudentDataSelect {
     my $UnUseful;      my ($elementname,$status,$numvisible)=@_;
     my %myHeader = reverse( %Header );      if ($numvisible < 1) {
     $Pos = $myHeader{$ENV{'form.sort'}};          return;
     if ($Pos > 0) {$Pos++;}      }
     $p_count = 0;      #
     foreach my $key( keys %CachData) {       # Build the form element
  my @Temp=split(/\&/,$CachData{$key});      my $Str = "\n";
  if ( $Pos == 0 ) {      $Str .= '<select name="'.$elementname.'" ';
     ($UnUseful,$Useful)=split(/\>/,$Temp[$Pos]);      if ($status ne 'single') {
  }          $Str .= 'multiple="true" ';
  else {      }
     $Useful = $Temp[$Pos];      $Str .= 'size="'.$numvisible.'" >'."\n";
  }         #
  $list[$p_count]=$Useful.'@'.$CachData{$key};      # Deal with 'all'
         $p_count++;      $Str .= '    <option value="all" ';
     }      foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
     @list = sort MySort (@list);              $Str .= 'selected ';
               last;
     my $nIdx=0;          }
       }
     if ( $Pos == 0 ) {      $Str .= ">all</option>\n";
  foreach (sort keys %mapsort) {      #
     my ($Hid,$pr)=split(/\:/,$mapsort{$_});      # Loop through the student data fields
     &CreateTable(1,$Hid);      foreach my $item (@StudentDataOrder) {
     my @lpr=split(/\&/,$pr);          $Str .= '    <option value="'.$item.'" ';
     for (my $i=1; $i<=$#lpr; $i++) {          foreach (@SelectedStudentData) {
  my($Pre, $Post) = split(/\@/,$list[$nIdx]);               if ($item eq $_ ) {
  #$r->print('<br>'.$Pre.'---'.$Post);                  $Str .= 'selected ';
  &TableRow($Post,$i,$nIdx);                  last;
  $nIdx++;              }
     }          }
     &CloseTable();          $Str .= '>'.$item."</option>\n";
  }  
     }  
     else {  
  &CreateTable(0);  
  for ( my $nIdx = 0; $nIdx < $p_count; $nIdx++ ) {  
     my($Pre, $Post) = split(/\@/,$list[$nIdx]);   
     &TableRow($Post,$nIdx,$nIdx);  
  }   
  &CloseTable();  
     }      }
       $Str .= "</select>\n";
       return $Str;
 }  }
   
 sub TableRow {  ##############################################
     my ($Str,$Idx,$RealIdx)=@_;  ##############################################
     my($PrOrd,$Temp,$StdNo,$TotalTries,$MxTries,$Avg,$YES,$Override,  
        $Wrng,$DoD,$SD,$Sk,$_D1,$_D2,$Prob)=split(/\&/,$Str);  
     my $Ptr =  "\n".'<tr>'.  
                "\n".'<td>'.($RealIdx+1).'</td>'.  
           #     "\n".'<td>'.$PrOrd.$Temp.'</td>'.  
                "\n".'<td>'.$Temp.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC"> '.$StdNo.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC">'.$TotalTries.'</td>'.  
                "\n".'<td bgcolor="#EEFFCC">'.$MxTries.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF">'.$Avg.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF"> '.$YES.'</td>'.  
                "\n".'<td bgcolor="#DDFFFF"> '.$Override.'</td>'.  
                "\n".'<td bgcolor="#FFDDDD"> '.$Wrng.'</td>'.  
                "\n".'<td bgcolor="#FFDDDD">'.$DoD.'</td>'.  
                "\n".'<td bgcolor="#DDFFDD"> '.$SD.'</td>'.  
                "\n".'<td bgcolor="#DDFFDD"> '.$Sk.'</td>'.  
                "\n".'<td bgcolor="#FFDDFF"> '.$_D1.'</td>'.  
        "\n".'<td bgcolor="#FFDDFF"> '.$_D2.'</td>';  
     $r->print("\n".$Ptr.'</tr>' );  
     $GraphDat{$RealIdx}=$DoD.':'.$Wrng;  
 }  
   
 # ------------------------------------------- Prepare data for Graphical chart  =pod 
   
 sub GetGraphData {  =item &MapSelect($elementname,$status,$numvisible,$restriction) 
     my $ylab = shift;  
     my $Col;  
     my $data='';  
     my $count = 0;  
     my $Max = 0;  
     my $cid=$ENV{'request.course.id'};  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     foreach (keys %GraphDat) {delete $GraphDat{$_};}  
     if (-e "$GraphDB") {  
  if (tie(%GraphDat,'GDBM_File',"$GraphDB",&GDBM_READER,0640)) {  
     if ( $ylab eq 'DoDiff Graph' ) {  
  $ylab = 'Degree-of-Difficulty';  
  $Col = 0;  
     }  
     else {  
  $ylab = 'Wrong-Percentage';  
  $Col = 1;  
     }  
     foreach (sort NumericSort keys %GraphDat) {   
  my @Temp=split(/\:/,$GraphDat{$_});  
                 my $inf = $Temp[$Col];   
  if ( $Max < $inf ) {$Max = $inf;}  
  $data .= $inf.',';  
  $count++;  
     }  
     if ( $Max > 1 ) {   
  $Max += (10 - $Max % 10);  
  $Max = int($Max);  
     }  
     else { $Max = 1; }  
             untie(%GraphDat);  
     my $Course = $ENV{'course.'.$cid.'.description'};  
     $Course =~ s/\ /"_"/eg;  
     $GData=$Course.'&'.'Problems'.'&'.$ylab.'&'.$Max.'&'.$count.'&'.$data;  
  }  
  else {  
     $r->print("Unable to tie hash to db file");  
  }  
     }  
 }  
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sequences in the course.  The values of the sequences are the symbs.
   If the top sequence is selected, the value 'top' will result.
   
 sub initial {  =over 4
 # --------------------------------- Initialize the global varaibles  
   undef @students;  
   undef @cols;  
   undef %maps;  
   undef %section;  
   undef %StuBox;  
   undef @list;  
   undef %CachData;  
   undef %GraphDat;  
   undef %DiscFac;  
   undef %OpResp;  
   undef %ConceptData;  
   undef $CurMap;  
   undef $CurSec;  
   undef $CurStu;  
   undef $p_count;  
   undef $Pos;  
   undef $GData;  
   $DiscFlag=0;   
   $P_Order=100000;  
   $HWN=$P_Order;  
 }  
   
   =item $elementname The name of the HTML form element
   
 sub ClassList {  =item $status 'multiple' or 'single' selection box
   
     &GetStatus();  =item $numvisible The number of options to be visible
   
     $cid=$ENV{'request.course.id'};  =item $restriction Code reference to subroutine which returns true or 
     my $chome=$ENV{'course.'.$cid.'.home'};  false.  The code must expect a reference to a sequence data structure.
     my ($cdom,$cnum)=split(/\_/,$cid);  
 # ----------------------- Get first and last resource, see if there is anything  
     $firstres=$hash{'map_start_/res/'.$ENV{'request.course.uri'}};  
     $lastres=$hash{'map_finish_/res/'.$ENV{'request.course.uri'}};  
     if (($firstres) && ($lastres)) {  
 # ----------------------------------------------------------------- Render page  
  my $classlst=&Apache::lonnet::reply  
                  ('dump:'.$cdom.':'.$cnum.':classlist',$chome);  
  my $StudNo = 0;  
  my $now=time;  
  unless ($classlst=~/^error\:/) {  
     foreach (sort split(/\&/,$classlst)) {  
  my ($name,$value)=split(/\=/,$_);  
  my ($end,$start)=split(/\:/,&Apache::lonnet::unescape($value));  
  $name=&Apache::lonnet::unescape($name);  
  my ($sname,$sdom)=split(/\:/,$name);  
  my $active=1;  
  my $Status=$ENV{'form.status'};  
  $Status = ($Status) ? $Status : 'Active';  
  if ( ( ($end) && $now > $end ) &&   
                      ( ($Status eq 'Active') ) ) { $active=0; }  
  if ( ($Status eq 'Expired') &&   
                      ($end == 0 || $now < $end) ) { $active=0; }  
 #//new  
 # $Status = 'Any';  
 #end new  
  if ($active) {  
     my $thisindex=$#students+1;  
     $name=&Apache::lonnet::unescape($name);  
     $students[$thisindex]=$name;  
     my ($sname,$sdom)=split(/\:/,$name);  
     #my %reply=&Apache::lonnet::idrget($sdom,$sname);  
     #my $reply=&Apache::lonnet::reply('get:'.$sdom.':'.$sname.  
     #         ':environment:lastname&generation&firstname&middlename',  
     #         &Apache::lonnet::homeserver($sname,$sdom));  
     my $ssec=&usection($sdom,$sname,$cid,$Status);  
 #    if ($ssec==-1 ) {next;}  
     if ($ssec==-1 || $ssec eq 'adm' ) {next;}  
     $ssec=($ssec) ? $ssec : '(none)';  
     #$ssec=(int($ssec)) ? int($ssec) : $ssec;  
     $section{$ssec}=$ssec;  
     if ($CurSec eq 'All Sections' || $ssec eq $CurSec) {  
  $students[$StudNo]=$name;  
  $StuBox{$sname}=$sdom;  
     }  
     $StudNo++;  
         }  
     }  
  }  
  else {  
     $r->print('<h1>Could not access course data</h1>');  
  }   
         $r->print("Total number of students : ".($#students+1));  
         $r->rflush();  
 # --------------- Find all assessments and put them into some linear-like order  
  &tracetable($firstres,'&'.$lastres.'&');  
 #    my $c=0;  
 #    foreach (sort keys %mapsort) {  
 # $r->print('<br>'.$c.')'.$_.' ... '.$mapsort{$_});  
 # $c++;  
 #    }  
 # my $c=1;  
 # foreach (sort keys %OpResp) {  
 #    $r->print('<br>'.$c.')'.$_.' ... '.$OpResp{$_}.' ... '.$hash{'src_'.$OpResp{$_}});  
 #    $c++;  
 # }  
   
     }  =back
   
   =cut
   
 # ------------------------------------------------------------- End render page   ##############################################
     else {  ##############################################
  $r->print('<h3>Undefined course sequence</h3>');  sub MapSelect {
       my ($elementname,$status,$numvisible,$restriction)=@_;
       if ($numvisible < 1) {
           return;
       }
       #
       # Set up array of selected items
       &SetSelectedMaps($elementname);
       #
       # Set up the restriction call
       if (! defined($restriction)) {
           $restriction = sub { 1; };
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Deal with 'all'
       foreach (@SelectedMaps) {
           if ($_ eq 'all') {
               @SelectedMaps = ('all');
               last;
           }
       }
       #
       # Put in option for 'all'
       $Str .= '    <option value="all" ';
       foreach (@SelectedMaps) {
           if ($_ eq 'all') {
               $Str .= 'selected ';
               last;
           }
     }      }
       $Str .= ">all</option>\n";
       #
       # Loop through the sequences
       foreach my $seq (@Sequences) {
           next if (! $restriction->($seq));
           $Str .= '    <option value="'.$seq->{'symb'}.'" ';
           foreach (@SelectedMaps) {
               if ($seq->{'symb'} eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$seq->{'title'}."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
 }  }
   
   ##############################################
   ##############################################
   
 sub Title {  =pod 
     $r->print('<html><head><title>LON-CAPA Statistics</title></head>');  
     $r->print('<body bgcolor="#FFFFFF">'.  
               '<script>window.focus(); window.width=500;window.height=500;</script>'.  
               '<img align=right src=/adm/lonIcons/lonlogos.gif>');  
 # ---------------------------------------------------------------- Course title  
     $r->print('<h1> Course : "'.  
               $ENV{'course.'.$ENV{'request.course.id'}.  
               '.description'}.'"</h1><h2>'.localtime().'</h2>');  
 # ------------------------------- This is going to take a while, produce output  
     $r->rflush();  
 }  
   
 sub CreateForm {  =item &SectionSelect($elementname,$status,$numvisible) 
     $r->print("\n".'<form name=stat method=post action="/adm/statistics" >');  
     my $content = $ENV{'form.sort'};  
     if ($content eq '' || $content eq 'Return to Menu') {  
  my $Ptr = '<h3>';  
  $Ptr .= '<input type=submit name=sort value="Problem Stats"/>';  
  $Ptr .= '<br><br>';  
  $Ptr .= '<input type=submit name=sort value="Problem Analysis"/>';  
  $Ptr .= '<br><br>';  
  $Ptr .= '<input type=submit name=sort value="Student Assessment"/>';  
  $Ptr .= '</h3>';  
  $r->print( $Ptr );  
     }  
     else {  
  if ( $content eq 'Student Assessment' ||   
      $content eq 'Create Student Report' ) {  
     &MapSecOptions();  
     &StudentOptions();  
     &StudentReport($CurStu,$StuBox{"$CurStu"});  
  }  
  elsif ( $content eq 'Problem Analysis' ) {  
     &AnalyzeProblem();  
  }  
  else {  
     &MapSecOptions();  
     &PreStatTable();  
  }  
     }  
 }  
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sections in the course.  
   
 sub Menu {  Uses the package variables @Sections and @SelectedSections
     &initial();  =over 4
     &Title();  
     &ClassList();  
     my $InpStr = $ENV{'form.sort'};  
     if ($InpStr=~/^Analyze\_/) {  
  &ShowOpGraph($InpStr,$ENV{'form.interval'});  
     }  
     elsif ( $InpStr eq 'DoDiff Graph' || $InpStr eq '%Wrong Graph' ) {        
  &GetGraphData($InpStr);  
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" />');  
     }  
     else {  
  &CreateForm();  
  $r->print("\n".'</form>');  
     }  
     $r->print("\n".'</body>'.  
       "\n".'</html>');  
     $r->rflush();  
 }  
   
 sub StudentOptions {  =item $elementname The name of the HTML form element
     my $OpSel5='';  
     $CurStu = $ENV{'form.student'};  =item $status 'multiple' or 'single' selection box
     if ( $CurStu eq '' ) {   
         $CurStu = 'All Students';  =item $numvisible The number of options to be visible
         $OpSel5 = 'selected';  
     }  =back
     my $Ptr ='';  
 # ----------------------------------- Loading the Students Combobox  
     $Ptr .= '<br><b>Select Student</b>'."\n".  
            '<select name="student">'."\n".   
     '<option '.$OpSel5.'>All Students</option>';                               
     foreach my $key ( sort keys %StuBox ) {            
  $Ptr .= '<option';  
  if ($CurStu eq $key) {$Ptr .= ' selected';}       
         $Ptr .= '>'.$key."</option>\n";       
     }  
     $Ptr .= '</select>';  
     $Ptr .= '<br><input type="submit" name="sort" value="Create Student Report" />';  
     $r->print( $Ptr );  
     $r->rflush();  
 }  
   
   =cut
   
 sub GetStatus {  ##############################################
     $OpSel1='';  ##############################################
     $OpSel2='';  sub SectionSelect {
     $OpSel3='';      my ($elementname,$status,$numvisible)=@_;
     $OpSel4='';      if ($numvisible < 1) {
           return;
     if ( $ENV{'form.order'} eq 'Descending' ) { $OpSel2='selected'; }  
     else { $OpSel1 = 'selected'; }  
   
     my %myHeader = reverse( %Header );  
     $Pos = $myHeader{$ENV{'form.sort'}};  
     if ($Pos == 0) {  
  $OpSel1 = 'selected';  
  $ENV{'form.order'}='Ascendig';  
     }  
   
     $CurMap = $ENV{'form.maps'};  
     if ( $CurMap eq '' ) {   
  $CurMap = 'All Maps';  
  $OpSel3 = 'selected';  
     }  
     $CurSec = $ENV{'form.section'};  
     if ( $CurSec eq '' ) {   
  $CurSec = 'All Sections';  
         $OpSel4 = 'selected';  
     }      }
       #
       # Make sure we have the data we need to continue
       if (! @Sections) {
           &PrepareClasslist()
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Loop through the sequences
       foreach my $s (@Sections) {
           $Str .= '    <option value="'.$s.'" ';
           foreach (@SelectedSections) {
               if ($s eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$s."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
 }  }
   
   ##################################################
 sub MapSecOptions {  ##################################################
 # ----------------------------------- Loading the Maps Combobox  sub DisplayClasslist {
     my $Ptr = '<br>';      my ($r)=@_;
     $Ptr .= '<br><input type="submit" name="sort" value="Return to Menu" />';      &Apache::lonhtmlcommon::add_breadcrumb
     $Ptr .= '<br><b> Select &nbsp; Map &nbsp; &nbsp; </b>'."\n".          ({text=>'Select One Student'});
            '<select name="maps">'."\n".       #
     '<option '.$OpSel3.'>All Maps</option>';                                   # Output some of the standard interface components
     foreach my $key ( sort keys %maps ) {                my $Str;
  $Ptr .= '<option';      $Str .= &Apache::lonhtmlcommon::breadcrumbs(undef,'Select One Student');
         if ($CurMap eq $key) {$Ptr .= ' selected';}           $Str .= '<p><table cellspacing="5">'."\n";
  $Ptr .= '>'.$key."</option>\n";           $Str .= '<tr>';
     }      $Str .= '<th align="center"><b>'.&mt('Sections').'</b></th>';
     $Ptr .= '</select>';      $Str .= '<th align="center"><b>'.&mt('Enrollment Status').'</b></th>';
     $Ptr .= '&nbsp;&nbsp;&nbsp;';      $Str .= '</tr>'.$/;
       $Str .= '<tr>';
 # ----------------------------------- Loading the Sections Combobox      $Str .= '<td>'.
     $Ptr .= '<br><b>Select Section</b>'."\n".          &Apache::lonstatistics::SectionSelect('Section','multiple',5).
            '<select name="section">'."\n".           '</td>';
     '<option '.$OpSel4.'>All Sections</option>';                                   $Str .= '<td>'.
     foreach my $key ( sort keys %section ) {                    &Apache::lonhtmlcommon::StatusOptions(undef,undef,5).
  $Ptr .= '<option';          '</td>';
         if ($CurSec eq $key) {$Ptr .= ' selected';}           
  $Ptr .= '>'.$key."</option>"."\n";           $Str .= '</tr>'.$/;
       $Str .= '</table></p>';
       $Str .= '<input type="submit" name="selectstudent" value="'.
           &mt('Update Display').'" />';
       $r->print($Str);
       $r->rflush();
       #
       my @Fields = ('fullname','username','domain','id','section','status');
       #
       $Str = '';
       if (! @Students) {
           if ($SelectedSections[0] eq 'all') { 
               if (lc($ENV{'form.Status'}) eq 'any') {
                   $Str .= '<h2>'.
                       &mt('There are no students in the course.').
                       '</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'active') {
                   $Str .= '<h2>'.
                   &mt('There are no currently enrolled students in the course.').
                       '</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
                   $Str .= '<h2>'.
                       &mt('There are no previously enrolled students in the course.').
                           '</h2>';
               }
           } else { 
               my $sections;
               if (lc($ENV{'form.Status'}) eq 'any') {
                   $Str .= '<h2>'.
                       &mt('There are no students in the selected sections.').
                       '</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'active') {
                   $Str .= '<h2>'.
                       &mt('There are no currently enrolled students in the selected sections.').
                       '</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
                   $Str .= '<h2>'.
                       &mt('There are no previously enrolled students in the selected sections.').
                       '</h2>';
               }
           }
           $Str.= '<a href="/adm/statistics?reportSelected=student_assessment">'.
               &mt('Click here to return to the chart').'</a>';
           $r->print($Str);
           $r->rflush();
           return;
     }      }
     $Ptr .= '</select>'."\n";  
   
     $r->print( $Ptr );      # "Click" is asinine but it is probably not my place to change the world.
       $Str .= '<h2>Click on a students name or username to view their chart</h2>';
       $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
       $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
       foreach my $field (@Fields) {
           $Str .= '<th><a href="/adm/statistics?'.
               'reportSelected=student_assessment&'.
               'selectstudent=1&'.
               'sort='.$field.'">'.&mt($field).
               '</a></th>';
       }
       $Str .= '</tr>'."\n";
       #
       my $alternate = 0;
       foreach my $student (@Students) { # @Students is a package variable
           my $sname = $student->{'username'}.':'.$student->{'domain'};
           if($alternate) {
               $Str .= '<tr bgcolor="#ffffe6">';
           } else {
               $Str .= '<tr bgcolor="#ffffc6">';
           }
           $alternate = ($alternate + 1) % 2;
           #
           foreach my $field (@Fields) {
               $Str .= '<td>';
               if ($field eq 'fullname' || $field eq 'username') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('student_assessment');
                   $Str .= '&sort='.&Apache::lonnet::escape($ENV{'form.sort'});
                   $Str .= '&SelectedStudent=';
                   $Str .= &Apache::lonnet::escape($sname).'">';
                   $Str .= $student->{$field}.'&nbsp';
                   $Str .= '</a>';
               } elsif ($field eq 'status') {
                   $Str .= &mt($student->{$field});
               } else {
                   $Str .= $student->{$field};
               }
               $Str .= '</td>';
           }
           $Str .= "</tr>\n";
       }
       $Str .= '</table></td></tr></table>'."\n";
       #
       $r->print($Str);
     $r->rflush();      $r->rflush();
       #
       return;
 }  }
   
   ##############################################
   ##############################################
   sub CreateMainMenu {
       #
       # Define menu data
       my @reports = ({ internal_name => 'problem_statistics',
                        name => &mt('Overall Problem Statistics'),
                        short_description => 
       &mt('Student performance statistics on all problems.'),
                    },
                      { internal_name => 'problem_analysis',
                        name => &mt('Detailed Problem Analysis'),
                        short_description => 
       &mt('Detailed statistics and graphs of student performance on problems.'),
                    },
                      { internal_name => 'submissiontime_analysis',
                        name => &mt('Submission Time Plots'),
                        short_description => 
       &mt('Display and analysis of submission times on assessments.'),
                    },
                      { internal_name => 'student_submission_reports',
                        name => &mt('Student Submission Reports'),
                        short_description => 
       &mt('Prepare reports of student submissions.'),
                    },
                      { internal_name => 'survey_reports',
                        name => &mt('Survey Reports'),
                        short_description => 
       &mt('Prepare reports on survey results.'),
                    },
                      { internal_name => 'correct_problems_plot',
                        name => &mt('Correct Problems Plot'),
                        short_description => 
       &mt('Display a histogram of student performance in the course.'),
                    },
   #                   { internal_name => 'student_assessment',
   #                     name => &mt('Problem Status Chart'),
   #                     short_description => 
   #    &mt('Brief view of each students performance in course.'),
   #                 },
                      # 'percentage'  => 'Correct-problems Plot',
                      # 'activitylog' => 'Activity Log',
                      );
       #
       # Create the menu
       my $Str;
       $Str .= '<h2>'.&mt('Please select a report to generate').'</h2>';
       foreach my $reportdata (@reports) {
           $Str .='    <h3><a href="/adm/statistics?reportSelected='.
               $reportdata->{'internal_name'}.'" >'.
               $reportdata->{'name'}."</a></h3>\n";
           $Str .= '    '.('&nbsp;'x8).$reportdata->{'short_description'}.
               "\n";
       }
       $Str .="</dl>\n";
       #
       return $Str;
   }
   
 # ================================================================ Main Handler  ##############################################
   ##############################################
 sub handler {  sub handler {
     $r=shift;      my $r=shift;
       my $c = $r->connection();
     if (&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {      #
 # ------------------------------------------- Set document type for header only      # Check for overloading
  if ($r->header_only) {      my $loaderror=&Apache::lonnet::overloaderror($r);
     if ($ENV{'browser.mathml'}) {      if ($loaderror) { return $loaderror; }
  $r->content_type('text/xml');      $loaderror=
     }          &Apache::lonnet::overloaderror($r,
     else {           $ENV{'course.'.$ENV{'request.course.id'}.'.home'});
  $r->content_type('text/html');      if ($loaderror) { return $loaderror; }
     }      #
     $r->send_http_header;      # Check for access
     return OK;      if (! &Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {
  }      
  my $requrl=$r->uri;  
 # ----------------------------------------------------------------- Tie db file  
   
  undef %hash;  
   
  if ($ENV{'request.course.fn'}) {  
     my $fn=$ENV{'request.course.fn'};  
     if (-e "$fn.db") {  
  if (tie(%hash,'GDBM_File',"$fn.db",&GDBM_READER,0640)) {  
 # ------------------------------------------------------------------- Hash tied  
     $r->content_type('text/html');  
     $r->send_http_header;  
     &Menu();  
  }  
  else {  
     $r->content_type('text/html');  
     $r->send_http_header;  
     $r->print('<html><body>Coursemap undefined.</body></html>');  
  }  
 # ------------------------------------------------------------------ Untie hash  
  unless (untie(%hash)) {  
     &Apache::lonnet::logthis("<font color=blue>WARNING: ".  
                             "Could not untie coursemap $fn (browse).</font>");   
  }  
   
 # -------------------------------------------------------------------- All done  
  return OK;  
 # ----------------------------------------------- Errors, hash could no be tied  
     }  
  }   
  else {  
     $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";  
     return HTTP_NOT_ACCEPTABLE;   
  }  
     }  
     else {  
         $ENV{'user.error.msg'}=          $ENV{'user.error.msg'}=
         $r->uri.":vgr:0:0:Cannot view grades for complete course";              $r->uri.":vgr:0:0:Cannot view grades for complete course";
           if (! &Apache::lonnet::allowed('vgr',
         return HTTP_NOT_ACCEPTABLE;                         $ENV{'request.course.id'}.'/'.$ENV{'request.course.sec'})) {
               $ENV{'user.error.msg'}=
                   $r->uri.":vgr:0:0:Cannot view grades with given role";
               return HTTP_NOT_ACCEPTABLE;
           }
       }
       #
       # Send the header
       &Apache::loncommon::no_cache($r);
       &Apache::loncommon::content_type($r,'text/html');
       $r->send_http_header;
       if ($r->header_only) { return OK; }
       #
       # Extract form elements from query string
       &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                               ['sort','reportSelected',
                                                'SelectedStudent']);
       #
       # Give the LON-CAPA page header
       my $style = <<ENDSTYLE;
   <style type="text/css">
       ul.sub_studentans { list-style-type: none }
       ul.sub_correctans { list-style-type: none }
       tr.even           { background-color: \#CCCCCC }
       td.essay          { border: 1px solid gray; }
   </style>
   ENDSTYLE
       $r->print('<html><head><title>'.
                 &mt('Course Statistics and Charts').
                 '</title>'.$style.
                 "</head>\n".
                 &Apache::loncommon::bodytag('Course Statistics and Charts'));
       $r->rflush();
       # 
       # Either print out a menu for them or send them to a report
       &Apache::lonhtmlcommon::clear_breadcrumbs();
       &Apache::lonhtmlcommon::add_breadcrumb({href=>'/adm/statistics',
                                               title=>'Statistics',
                                               text =>'Statistics',
                                               faq=>139,
                                               bug=>'Statistics and Charts'});
       if (! exists($ENV{'form.reportSelected'}) || 
           $ENV{'form.reportSelected'} eq '') {
           $r->print(&Apache::lonhtmlcommon::breadcrumbs
                     (undef,&mt('Statistics Main Page')).
                     &CreateMainMenu());
       } else {
       #
           if (! &Apache::lonmysql::verify_sql_connection()) {
               my $serveradmin = $r->dir_config('lonAdmEMail');
               $r->print('<h2><font color="Red">'.
                         &mt('Unable to connect to database!').
                         '</font></h2>');
               $r->print('<p>'.
                         &mt('Please notify the server administrator ').
                         '<b>'.$serveradmin.'</b></p>');
               $r->print('<p>'.
                         &mt('Course Statistics and Charts cannot be '.
                             'retrieved until the database is restarted.  '.
                             'Your data is intact but cannot be displayed '.
                             'at this time.').'</p>');
               $r->print('</body></html>');
               return;
           }
           #
           # Clean out the caches
           if (exists($ENV{'form.ClearCache'})) {
               &Apache::loncoursedata::delete_caches($ENV{'requres.course.id'});
           }
           #
           # Begin form output
           $r->print('<form name="Statistics" ');
           $r->print('method="post" action="/adm/statistics">');
           $r->rflush();
           #
           my $GoToPage = $ENV{'form.reportSelected'};
           #
           # Set up the statistics and chart environment
           &PrepareCourseData($r);
           #
           $r->print('<input type="hidden" name="reportSelected" value="'.
                     $GoToPage.'">');
           if($GoToPage eq 'activitylog') {
   #        &Apache::lonproblemstatistics::Activity();
           } elsif($GoToPage eq 'problem_statistics') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=problem_statistics',
                     text=>'Overall Problem Statistics'});
               &Apache::lonproblemstatistics::BuildProblemStatisticsPage($r,$c);
           } elsif($GoToPage eq 'problem_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=problem_analysis',
                     text=>'Detailed Problem Analysis'});
               &Apache::lonproblemanalysis::BuildProblemAnalysisPage($r,$c);
           } elsif($GoToPage eq 'submissiontime_analysis') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                         '/adm/statistics?reportselected=submissiontime_analysis',
                         text=>'Submission Time Plots'});
               &Apache::lonsubmissiontimeanalysis::BuildSubmissionTimePage($r,$c);
           } elsif($GoToPage eq 'student_submission_reports') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                     '/adm/statistics?reportselected=student_submission_reports',
                     text=>'Student Submission Reports'});
               &Apache::lonstudentsubmissions::BuildStudentSubmissionsPage($r,$c);
           } elsif($GoToPage eq 'survey_reports') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>
                     '/adm/statistics?reportselected=survey_reports',
                     text=>'Survey Reports'});
               &Apache::lonsurveyreports::BuildSurveyReportsPage($r,$c);
           } elsif($GoToPage eq 'correct_problems_plot') {
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=correct_problems_plot',
                     text=>'Correct Problems Plot'});
               &Apache::loncorrectproblemplot::BuildCorrectProblemsPage($r,$c);
           } elsif($GoToPage eq 'student_assessment') {
               &Apache::lonhtmlcommon::clear_breadcrumbs();
               &Apache::lonhtmlcommon::add_breadcrumb
                   ({href=>'/adm/statistics?reportselected=student_assessment',
                     text=>'Chart'});
               &Apache::lonstudentassessment::BuildStudentAssessmentPage($r,$c);
           }
           #
           $r->print("</form>\n");
     }      }
       $r->print("</body>\n</html>\n");
       $r->rflush();
       #
       return OK;
 }  }
   
 1;  1;
   
   #######################################################
   #######################################################
   
   =pod
   
   =back
   
   =cut
   
   #######################################################
   #######################################################
   
 __END__  __END__
   

Removed from v.1.17  
changed lines
  Added in v.1.113


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>