Diff for /loncom/interface/lonstatistics.pm between versions 1.29 and 1.63

version 1.29, 2002/07/22 20:35:05 version 1.63, 2003/03/03 19:17:51
Line 1 Line 1
 # The LearningOnline Network with CAPA  # The LearningOnline Network with CAPA
 # (Publication Handler  
 #  #
 # $Id$  # $Id$
 #  #
Line 26 Line 25
 # http://www.lon-capa.org/  # http://www.lon-capa.org/
 #  #
 # (Navigate problems for statistical reports  # (Navigate problems for statistical reports
 # YEAR=2001  
 # 5/5,7/9,7/25/1,8/11,9/13,9/26,10/5,10/9,10/22,10/26 Behrouz Minaei  
 # 11/1,11/4,11/16,12/14,12/16,12/18,12/20,12/31 Behrouz Minaei  
 # YEAR=2002  
 # 1/22,2/1,2/6,2/25,3/2,3/6,3/17,3/21,3/22,3/26,4/7,5/6 Behrouz Minaei  
 # 5/12,5/14,5/15,5/19,5/26,7/16  Behrouz Minaei  
 #  #
 ###  ###
   
 package Apache::lonstatistics;   =pod
   
   =head1 NAME
   
   lonstatistics
   
   =head1 SYNOPSIS
   
   Main handler for statistics and chart.
   
   =head1 PACKAGES USED
   
       use strict;
       use Apache::Constants qw(:common :http);
       use Apache::lonnet();
       use Apache::lonhomework;
       use Apache::loncommon;
       use Apache::loncoursedata;
       use Apache::lonhtmlcommon;
       use Apache::lonproblemanalysis;
       use Apache::lonproblemstatistics;
       use Apache::lonstudentassessment;
       use Apache::lonpercentage;
       use GDBM_File;
   
   =over 4
   
   =cut
   
   package Apache::lonstatistics;
   
 use strict;   use strict;
 use Apache::Constants qw(:common :http);  use Apache::Constants qw(:common :http);
   use vars qw(
       @FullClasslist 
       @Students
       @Sections 
       @SelectedSections
       %StudentData
       @StudentDataOrder
       @SelectedStudentData
       $top_map 
       @Sequences 
       @SelectedMaps
       @Assessments);
   
 use Apache::lonnet();  use Apache::lonnet();
 use Apache::lonhomework;  use Apache::lonhomework;
 use Apache::loncommon;  use Apache::loncommon;
 use Apache::loncoursedata;  use Apache::loncoursedata;
 use Apache::lonhtmlcommon;  use Apache::lonhtmlcommon;
 use Apache::lonchart;  use Apache::lonproblemanalysis();
 use HTML::TokeParser;  use Apache::lonproblemstatistics();
   use Apache::lonstudentassessment();
   use Apache::lonpercentage;
 use GDBM_File;  use GDBM_File;
   
 # -------------------------------------------------------------- Module Globals  
 my %hash;  
 my %CachData;  
 my %GraphDat;  
 my $r;  
 my $GData;  
 my %color;  
 my %foil_to_concept;  
 my @Concepts;  
 my %ConceptData;  
 my %Answer=();  
 my %mapsort;  
   
 my %Activity=();  
 my %Grade=();  
 my %DoDiff=();  
 my %Discuss=();  
 my $TotalDiscuss=0;  
 my $TotalDiscuss_=0;  
   
   
 sub LoadDiscussion {  
 #    my $symb=shift;  
 #    $r->print('<br>$cid ... '.$symb);  
 #    my %contrib=&Apache::lonnet::dump('msu_2964385f9033c63msul1','msu','2964385f9033c63msul1');  
     my $cid=$ENV{'request.course.id'};  
     my %contrib=&Apache::lonnet::dump(  
                 $ENV{'request.course.id'},  
                 $ENV{'course.'.$ENV{'request.course.id'}.'.domain'},  
                 $ENV{'course.'.$ENV{'request.course.id'}.'.num'});  
                               
     foreach my $temp(keys %contrib) {  
  if ($temp=~/^version/) {  
     my $ver=$contrib{$temp};  
     my ($dummy,$prb)=split(':',$temp);  
     for (my $idx=1; $idx<=$ver; $idx++ ) {  
  my $name=$contrib{"$idx:$prb:sendername"};  
  $Discuss{"$name:$prb"}=$idx;  
     }  
  }  
     }         
 #   $r->print('<br>cid='.$cid);  
 #    my %contrib=&Apache::lonnet::restore($symb,$cid,  
 # $ENV{$cid.'.domain'},  
 # $ENV{'course.'.$cid.'.num'});  
   
 #    $Apache::lonxml::debug=1;  
 #    &Apache::lonhomework::showhash(%Discuss);  
 #    $Apache::lonxml::debug=0;  
 }  
   
 sub LoadDoDiffFile {  
     my $file="/home/minaeibi/183d.txt";  
     open(FILEID, "<$file");  
     my $line=<FILEID>;  
     %DoDiff=();  
     my @Act=split('&',$line);  
       
 #    $r->print('<br>'.$#Act);  
     for(my $n=0;$n<=$#Act;$n++){  
        my ($res,$Degree)=split('@',$Act[$n]);  
       $DoDiff{$res}=$Degree;  
     }  
 }  
   
   
 sub LoadClassFile {  
     my $file="/home/minaeibi/class.txt";  
     open(FILEID, "<$file");  
     my $line;  
     %Grade=();  
     while ($line=<FILEID>) {  
         my ($id,$ex1,$ex2,$ex3,$ex4,$hw,$final,$grade)=split(' ',$line);  
         $Grade{$id}=$grade;  
     }  
 }  
   
   
 #------- Classification    
 sub Classify {  
     my ($DiscFac, $students)=@_;  
     &LoadClassFile();  
     my $Count=0;  
     my @List=();  
     my @LS=();  
     my @LF=();  
     my @LM=();  
     my $cf=0;  
     my $cs=0;  
     my $cm=0;  
     foreach (keys(%$DiscFac)){    
  my @l=split(/\:/,$_);  
  if (!($students->{$l[1]})) {next;}  
  my $Grade=$Grade{$students->{$l[1]}};  
  if( $Grade > 3 ) {  
     $cs++;  
     push(@LS,("$l[6],$l[5],$l[4],$l[7],$l[8],$l[9],Successful"));  
  } elsif ( $Grade > 2 ) {  
     $cm++;  
     push(@LM,("$l[6],$l[5],$l[4],$l[7],$l[8],$l[9],Average"));  
  } else {  
     $cf++;  
     push(@LF,("$l[6],$l[5],$l[4],$l[7],$l[8],$l[9],Failed"));  
  }  
     }      
     for(my $n=0;$n<$cs;$n++){$r->print('<br>'.$LS[$n]);}  
     for(my $n=0;$n<$cm;$n++){$r->print('<br>'.$LM[$n]);}    
     for(my $n=0;$n<$cf;$n++){$r->print('<br>'.$LF[$n]);}  
 }   
   
   
 sub ProcAct {  
     # return;  
     my ($Act,$Submit)=@_;  
     my @Act=split(/\@/,$Act);  
     @Act = sort(@Act);  
   
     ##$r->print('<br>'.$#Act);  
     ##for(my $n=0;$n<=$#Act;$n++){  
 ## $r->print('<br>n='.$n.')'.$Act[$n]);  
 ##    }  
   
 #    my $Beg=$Act[0];  
     my $Dif=$Submit-$Act[0];  
     $Dif = ($Dif>0) ? ($Dif/3600) : 0;   
   
 #    $r->print('<br>Access Number = '.$#Act.'<br>Submit Time='.$Submit.'<br>First Access='.$Act[0].'<br>Last Access='.$Act[$#Act].'<br> Submit - First = <b>'.$Dif.'</b>');  
   
   
 #time spent for solving the problem             
 #    $r->print('<br>Def'.($Act[$#Act-1]-$Act[0]));  
   
     return $Dif;  
 }  
   
   
   
 sub LoadActivityLog {  
 #    my $CacheDB = "/home/minaeibi/act183.log.cache";  
     my $CacheDB = "/home/httpd/perl/tmp/act183.log.cache";  
       
     if (-e "$CacheDB") {  
  if (tie(%Activity,'GDBM_File',"$CacheDB",&GDBM_READER,0640)) {  
     return;  
         }  
         else {  
     $r->print("Unable to tie log Cache hash to db file");  
         }  
     }  
     else {  
  if (tie(%Activity,'GDBM_File',$CacheDB,&GDBM_WRCREAT,0640)) {  
     foreach (keys %Activity) {delete $Activity{$_};}  
     &Build_log();   
  }  
         else {  
     $r->print("Unable to tie log Build hash to db file");  
         }  
     }  
 }  
   
 sub Build_log {  
     my $file="/home/minaeibi/act183.log";  
     open(FILEID, "<$file");  
     my $line;  
     my $count=0;  
     while ($line=<FILEID>) {  
  my ($time,$machine,$what)=split(':',$line);  
  $what=&Apache::lonnet::unescape($what);  
  my @accesses=split('&',$what);  
              
  foreach my $access (@accesses) {  
   
     $count++;  
   
     my ($date,$resource,$who,$domain,$post,@posts)=split(':',$access);  
     if (!$resource) { next; }  
     my $res=&Apache::lonnet::unescape($resource);  
     if (($res =~ /\.problem/)) {  
  $Activity{$who.':'.$res}.=$date.'@';  
                 #$r->print('<br>'.$time.':'.$who.'---'.$res);  
  &Update_PrgInit($count);  
   
     }  
  }  
     }  
   
 # my $c=1;  
 # foreach (sort keys %Activity) {  
 #     $r->print('<br>'.$c.')'.$_.' ... '.$Activity{$_});  
 #     $c++;  
 # }  
   
 }  
   
 sub Activity {  
 #    $rid=~/(\d+)\.(\d+)/;  
 #    my $MapId=$1;  
 #    my $PrbId=$2;  
 #    my $MapOrg = $hash{'map_id_'.$MapId};  
 #    my $Map = &Apache::lonnet::declutter($MapOrg);  
 #    my $URI = $hash{'src_'.$rid};  
 #    my $Symb = $Map.'___'.$PrbId.'___'.&Apache::lonnet::declutter($URI);  
     my $file="/home/minaeibi/activity.log";  
     my $userid='adamsde1';  
     $r->print("<br>Using $file");  
     $r->rflush();  
     open(FILEID, "<$file");  
     my $line;  
     my @allaccess;  
     my $Count=0;  
     while ($line=<FILEID>) {  
  my ($time,$machine,$what)=split(':',$line);  
  $what=&Apache::lonnet::unescape($what);  
  my @accesses=split('&',$what);  
  foreach my $access (@accesses) {  
     my ($date,$resource,$who,$domain,$post,@posts)=split(':',$access);  
     #if ($who ne $userid) { next; }  
     if (!$resource) { next; }  
     my $res=&Apache::lonnet::unescape($resource);  
     if (($res =~ /\.(sequence|problem|htm|html|page)/)) {  
      $Count++;  
  $r->print("<br>$Count) ".localtime($date).": $who --> $res");  
 #        if ($post) {   
 #    $Count++;  
 #    $r->print("<br><b>$Count) Sent data ".join(':',  
 #                              &Apache::lonnet::unescape(@posts)).'</b>');  
 # }  
  $r->rflush();  
     }  
     #push (@allaccess,unescape($access));  
     #print $machine;  
  }  
     }  
 #    @allaccess=sort(@allaccess);  
 #    $Count=0;  
 #    foreach my $access (@allaccess) {  
 # my ($date,$resource,$who,$domain,$post,@posts)=split(':',$access);  
 # $Count++;  
 # $r->print("<br>$Count) $date: $who --> $resource");  
 # $r->rflush();  
 # if ($post) {   
 #    $r->print("<br><b>Sent data ".join(':',unescape(@posts)).'</b>');  
 # }  
 #    }  
 }  
   
   
 sub InitAnalysis {  
     my ($uri,$part,$problem,$student,$courseID)=@_;  
     my ($uname,$udom)=split(/\:/,$student);  
   
   
     # Render the student's view of the problem.  $Answ is the problem   
     # Stringafied  
     my $Answ=&Apache::lonnet::ssi($uri,('grade_target' => 'analyze',  
                                   'grade_username' => $uname,  
                                   'grade_domain' => $udom,  
                                   'grade_courseid' => $courseID,  
                                   'grade_symb' => $problem));  
 #    my $Answ=&Apache::lonnet::ssi($URI,('grade_target' => 'analyze'));  
   
 #    (my $garbage,$Answ)=split(/_HASH_REF__/,$Answ,2);  
     %Answer=();  
     %Answer=&Apache::lonnet::str2hash($Answ);  
   
     my $parts='';  
     foreach my $elm (@{$Answer{"parts"}}) {  
  $parts.="$elm,";  
     }  
     chop($parts);  
     my $conc='';  
     foreach my $elm (@{$Answer{"$parts.concepts"}}) {  
  $conc.="$elm@";  
     }  
     chop($conc);  
   
     @Concepts=split(/\@/,$conc);  
     foreach my $concept (@{$Answer{"$parts.concepts"}}) {  
  foreach my $foil (@{$Answer{"$parts.concept.$concept"}}) {  
     $foil_to_concept{$foil} = $concept;  
     #$ConceptData{$foil} = $Answer{"$parts.foil.value.$foil"};  
  }  
     }  
   
     return;  #######################################################
 }  #######################################################
   
   =pod
   
 sub Interval {  =item Package Variables
     my ($part,$symb)=@_;  
     my $Int=$ConceptData{"Interval"};  
     my $due = &Apache::lonnet::EXT('resource.$part.duedate',$symb)+1;  
     my $opn = &Apache::lonnet::EXT('resource.$part.opendate',$symb);  
     my $add=int(($due-$opn)/$Int);  
     $ConceptData{"Int.0"}=$opn;  
     for (my $i=1;$i<$Int;$i++) {  
  $ConceptData{"Int.$i"}=$opn+$i*$add;  
     }  
     $ConceptData{"Int.$Int"}=$due;       
     for (my $i=0;$i<$Int;$i++) {  
  for (my $n=0; $n<=$#Concepts; $n++ ) {  
     my $tmp=$Concepts[$n];  
     $ConceptData{"$tmp.$i.true"}=0;  
     $ConceptData{"$tmp.$i.false"}=0;  
  }  
     }  
 }  
   
   =item @FullClasslist The full classlist
   
 sub ShowOpGraph {  =item @Students The students we are concerned with for this invocation
     my ($cache, $students, $courseID)=@_;  
     my $uri      = $cache->{'AnalyzeURI'};  
     my $part     = $cache->{'AnalyzePart'};  
     my $problem  = $cache->{'AnalyzeProblem'};  
     my $title    = $cache->{'AnalyzeTitle'};  
     my $interval = $cache->{'Interval'};  
     $ConceptData{"Interval"} = $interval;  
   
     #Initialize the option response true answers  =item @Sections The sections available in this class
     &InitAnalysis($uri, $part, $problem, $students->[0],$courseID);  
   
     #compute the intervals  =item $curr_student The student currently being examined
     &Interval($part,$problem);  
   
     $title =~ s/\ /"_"/eg;  =item $prev_student The student previous in the classlist
     $r->print('<br><b>'.$uri.'</b>');  
     $r->rflush();  
            
     #Java script Progress window  
     &Create_PrgWin();  
     &Update_PrgWin("Starting-to-analyze-problem");  
     for (my $index=0;$index<(scalar @$students);$index++) {  
  &Update_PrgWin($index);  
  &OpStatus($problem,$students->[$index],$courseID);  
     }  
     &Close_PrgWin();  
   
     $r->print('<br>');  
     for (my $k=0; $k<$interval; $k++ ) {  
  &DrawGraph($k,$title);  
     }  
     for (my $k=0; $k<$interval; $k++ ) {  
  &DrawTable($k);  
     }  
 #$Apache::lonxml::debug=1;  
 #&Apache::lonhomework::showhash(%ConceptData);  
 #$Apache::lonxml::debug=0;  
     my $Answ=&Apache::lonnet::ssi($uri);  
     $r->print("<br><b>Here you can see the Problem:</b><br>$Answ");  
 }  
   
   
 sub DrawTable {  
     my $k=shift;  
     my $Max=0;  
     my @data1;  
     my @data2;  
     my $Correct=0;  
     my $Wrong=0;  
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  my $tmp=$Concepts[$n];  
  $data1[$n]=$ConceptData{"$tmp.$k.true"};  
  $Correct+=$data1[$n];  
  $data2[$n]=$ConceptData{"$tmp.$k.false"};  
  $Wrong+=$data2[$n];  
  my $Sum=$data1[$n]+$data2[$n];  
  if ( $Max<$Sum ) {$Max=$Sum;}  
     }  
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  if ($data1[$n]+$data2[$n]<$Max) {  
     $data2[$n]+=$Max-($data1[$n]+$data2[$n]);  
  }  
     }  
     my $P_No = $#data1+1;  
 #    $r->print('<br><b>From: ['.localtime($ConceptData{'Int.'.($k-1)}).  
 #              '] To: ['.localtime($ConceptData{"Int.$k"}).']</b>');   
     my $Str = "\n".'<table border=2>'.  
               "\n".'<tr>'.  
               "\n".'<th> # </th>'.  
       "\n".'<th> Concept </th>'.  
       "\n".'<th> Correct </th>'.  
       "\n".'<th> Wrong </th>'.  
       "\n".'</tr>';  
   
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  $Str .= "\n"."<tr>".  
         "\n"."<td>".($n+1)."</td>".  
                 "\n".'<td bgcolor='.$color{"yellow"}.'> '.$Concepts[$n]." </td>".  
                 "\n".'<td bgcolor='.$color{"green"}.'> '.$data1[$n]." </td>".  
                 "\n".'<td bgcolor='.$color{"red"}.'> '.$data2[$n]." </td>".  
                 "\n"."</tr>";  
     }  
     $Str.='<td></td><td><b>From:['.localtime($ConceptData{'Int.'.$k}).  
           '] To: ['.localtime($ConceptData{'Int.'.($k+1)}-1).  
           "]</b></td><td>$Correct</td><td>$Wrong</td>";  
   
     $Str .= "\n".'</table>';  =item $next_student The student next in the classlist
   
     $r->print($Str);  =over
 #$Apache::lonxml::debug=1;  
 #&Apache::lonhomework::showhash(%ConceptData);  
 #$Apache::lonxml::debug=0;  
 }  
   
   
 sub DrawGraph {  
     my ($k,$Src)=@_;  
     my $Max=0;  
     my @data1;  
     my @data2;  
   
     # Adjust Data and find the Max   
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  my $tmp=$Concepts[$n];  
  $data1[$n]=$ConceptData{"$tmp.$k.true"};  
  $data2[$n]=$ConceptData{"$tmp.$k.false"};  
  my $Sum=$data1[$n]+$data2[$n];  
  if ( $Max<$Sum ) {$Max=$Sum;}  
     }  
     for (my $n=0; $n<=$#Concepts; $n++ ) {  
  if ($data1[$n]+$data2[$n]<$Max) {  
     $data2[$n]+=$Max-($data1[$n]+$data2[$n]);  
  }  
     }  
     my $P_No = $#data1+1;  
   
     if ( $Max > 1 ) {   
  $Max += (10 - $Max % 10);  
  $Max = int($Max);  
     } else { $Max = 1; }  
   
     my $Titr=($ConceptData{'Interval'}>1) ? $Src.'_interval_'.($k+1) : $Src;  
 #    $GData=$Titr.'&Concepts'.'&'.'Answers'.'&'.$Max.'&'.$P_No.'&'.$data1.'&'.$data2;  
     $GData="$Titr&Concepts&Answers&$Max&$P_No&".  
            (join(',',@data1)).'&'.(join(',',@data2));  
   
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$GData.'" border=1/>');  
 }  
   
   
 sub Decide {  
     #deciding the true or false answer belongs to each interval  
     my ($type,$foil,$time)=@_;   
     my $k=0;  
     while ($time>$ConceptData{'Int.'.($k+1)} &&   
            $k<$ConceptData{'Interval'}) {$k++;}  
     $ConceptData{"$foil_to_concept{$foil}.$k.$type"}++;  
 }  
   
 #restore the student submissions and finding the result  
 sub OpStatus {  
     my ($problem, $student, $courseID)=@_;  
     my ($username,$userdomain)=split(/':'/,$student);  
     my $code='U';  
     my %reshash=&Apache::lonnet::restore($problem, $courseID, $userdomain,   
                                          $username);  
     my @True = ();  
     my @False = ();  
     my $flag=0;  
     if ($reshash{'version'}) {  
         my $tries=0;  
  &Apache::lonhomework::showhash(%Answer);  
  for (my $version=1;$version<=$reshash{'version'};$version++) {  
     my $time=$reshash{"$version:timestamp"};  
      
     foreach my $key (sort(split(/\:/,$reshash{$version.':keys'}))) {  
  if (($key=~/\.(\w+)\.(\w+)\.submission$/)) {  
     my $Id1 = $1; my $Id2 = $2;  
     #check if this is a repeat submission, if so skip it  
              if ($reshash{"$version:resource.$Id1.previous"}) { next; }  
     #if no solved this wasn't a real submission, ignore it  
     if (!defined($reshash{"$version:resource.$Id1.solved"})) {  
  &Apache::lonxml::debug("skipping ");  
  next;  
     }  
     my $Resp = $reshash{"$version:$key"};  
     my %submission=&Apache::lonnet::str2hash($Resp);  
     foreach (keys %submission) {  
  my $Ansr = $Answer{"$Id1.$Id2.foil.value.$_"};  
  if ($submission{$_}) {  
     if ($submission{$_} eq $Ansr) {  
  &Decide("true",$_,$time );  
     }  
     else {&Decide("false",$_,$time );}  
  }  
     }  
         }    
     }  
         }  
     }  
 }  
   
   =cut 
   
 #---- END Analyze Web Page ----------------------------------------------  #######################################################
   #######################################################
 #---- Problem Statistics Web Page ---------------------------------------  #
   # Classlist variables
 #------- Processing upperlist and lowerlist according to each problem  #
 sub ProcessDiscriminant {  my $curr_student;
     my ($List) = @_;  my $prev_student;
     my @sortedList = sort (@$List);  my $next_student;
     my $Count = scalar @sortedList;  
     my $Problem;  
     my @Dis;  
     my $Slvd=0;  
     my $tmp;  
     my $Sum1=0;  
     my $Sum2=0;  
     my $nIndex=0;  
     my $nStudent=0;  
     my %Proc=undef;  
     while ($nIndex<$Count) {  
  ($Problem,$tmp)=split(/\=/,$sortedList[$nIndex]);  
  @Dis=split(/\+/,$tmp);  
  my $Temp = $Problem;  
  do {  
     $nIndex++;  
     $nStudent++;  
     $Sum1 += $Dis[0];  
     $Sum2 += $Dis[1];  
     ($Problem,$tmp)=split(/\=/,$sortedList[$nIndex]);  
     @Dis=split(/\+/,$tmp);  
  } while ( $Problem eq $Temp && $nIndex < $Count );  
 # $Proc{$Temp}=($Sum1/$nStudent).':'.$nStudent;  
  $Proc{$Temp}=($Sum1/$nStudent).':'.($Sum2/$nStudent);  
 #       $r->print("$nIndex) $Temp --> ($nStudent) $Proc{$Temp} <br>");  
  $Sum1=0;  
  $Sum2=0;  
  $nStudent=0;  
     }  
   
     return %Proc;  
 }  
   
   
   
 #------- Creating Discimination factor     
 sub Discriminant {  
     my ($discriminantFactor)=@_;  
     my @discriminantKeys=keys(%$discriminantFactor);  
     my $Count = scalar @discriminantKeys;  
   
     my $UpCnt = int(0.27*$Count);  
     my $low=0;  
     my $up=$Count-$UpCnt;  
     my @UpList=();  
     my @LowList=();  
   
     $Count=0;  
     foreach my $key (sort(@discriminantKeys)) {   
  $Count++;      
  if($low < $UpCnt || $Count > $up) {  
             $low++;  
             my $str=$discriminantFactor->{$key};  
             foreach(split(/\:/,$str)){  
                 if($_) {  
                     if($low<$UpCnt) { push(@LowList,$_); }  
                     else            { push(@UpList,$_);  }  
                 }  
             }  
         }  
     }  
     my %DisUp =  &ProcessDiscriminant(\@UpList);  
     my %DisLow = &ProcessDiscriminant(\@LowList);  
   
     return (\%DisUp, \%DisLow);  #######################################################
 }  #######################################################
   
      =pod
 sub NumericSort {            
     $a <=> $b;  
 }  
   
   =item &clear_classlist_variables()
   
 sub CreateProblemStatisticsTableHeading {  undef the following package variables:
     my ($displayFormat,$sequenceSource,$sequenceTitle,$headings)=@_;  
     if($displayFormat eq 'Display CSV Format') {  
         $r->print('<br>"'.$sequenceTitle.'","');  
         $r->print($sequenceSource.'"');  
  return;  
     }  
   
     $r->print('<br><a href="'.$sequenceSource.  =over
               '" target="_blank">'.$sequenceTitle.'</a>');  
   
     my $Result = "\n".'<table border=2><tr><th>P#</th>'."\n";  =item @FullClasslist
     for(my $nIndex=0; $nIndex < (scalar (keys %$headings)); $nIndex++) {   
  $Result .= '<th>'.'<input type="submit" name="';  
         $Result .= 'ProblemStatisticsHeading" value="';  
         $Result .= $headings->{$nIndex}.'" />'.'</th>'."\n";  
     }  
     $Result .= "\n".'</tr>'."\n";      
     $r->print($Result);  
     $r->rflush();  
 }  
   
 sub CloseTable {  =item @Students
     my ($cache)=@_;  
     if($cache->{'DisplayFormat'} eq 'Display CSV Format') {  =item @Sections
  return;  
     }      =item @SelectedSections
     $r->print("\n".'</table>'."\n");  
     $r->rflush();  =item %StudentData
   
   =item @StudentDataOrder
   
   =item @SelectedStudentData
   
   =item $curr_student
   
   =item $prev_student
   
   =item $next_student
   
   =back
   
   =cut
   
   #######################################################
   #######################################################
   sub clear_classlist_variables {
       undef(@FullClasslist);
       undef(@Students);
       undef(@Sections);
       undef(@SelectedSections);
       undef(%StudentData);
       undef(@SelectedStudentData);
       undef($curr_student);
       undef($prev_student);
       undef($next_student);
 }  }
   
   #######################################################
   #######################################################
   
    =pod
 # ------ Dump the Student's DB file and handling the data for statistics table   
 sub ExtractStudentData {  
     my ($cache,$name,$list)=@_;  
     my %discriminantFactor;  
   
     my $totalTries = 0;  
     my $totalAwarded = 0;  
     my $tempProblemOrder=0;  
     my $spent=0;  
     my $spent_yes=0;  
     my $TotDiscuss=0;  
     my $TotalOpend = 0;  
     my $ProbSolved = 0;  
     my $ProbTot = 0;  
     my $TotFirst = 0;  
     my $TimeTot = 0;  
     my $Discussed=0;  
   
     foreach my $sequence (split(':', $cache->{'orderedSequences'})) {  
         if($cache->{'ProblemStatisticsMap'} ne 'All Maps'  &&  
            $cache->{'ProblemStatisticsMap'} ne $cache->{$sequence.':title'}) {  
             next;  
         }  
   
         my $Dis = '';  
         foreach my $problemID (split(':', $cache->{$sequence.':problems'})) {  
             my $problem = $cache->{$problemID.':problem'};  
             my $LatestVersion = $cache->{$name.':version:'.$problem};  
   
             # Output dashes for all the parts of this problem if there  
             # is no version information about the current problem.  
             #if(!$LatestVersion) {  
             #    foreach my $part (split(/\:/,$cache->{$sequence.':'.  
             #                                          $problemID.  
             #                                          ':parts'})) {  
             #        $codes    .= "-,";  
             #        $attempts .= "0,";   
             #    }  
             #    next;  
             #}  
   
             my %partData=undef;  
             # Initialize part data, display skips correctly  
             # Skip refers to when a student made no submissions on that  
             # part/problem.  
             foreach my $part (split(/\:/,$cache->{$sequence.':'.  
                                                   $problemID.  
                                                   ':parts'})) {  
                 $partData{$part.':tries'}=0;  
                 $partData{$part.':code'}='-';  
             }  
   
             # Looping through all the versions of each part, starting with the  =item &PrepareClasslist()
             # oldest version.  Basically, it gets the most recent   
             # set of grade data for each part.  
     for(my $Version=1; $Version<=$LatestVersion; $Version++) {  
                 foreach my $part (split(/\:/,$cache->{$sequence.':'.  
                                                       $problemID.  
                                                       ':parts'})) {  
   
                     if(!defined($cache->{$name.":$Version:$problem".  
                                                ":resource.$part.solved"})) {  
                         # No grade for this submission, so skip  
                         next;  
                     }  
   
                     my $tries=0;  Build up the classlist information.  The classlist information is kept in
                     my $time=0;  the following package variables:
                     my $awarded=0;  
     $Discussed=0;  
                     my $code='U';  
   
                     $awarded = $cache->{$name.  
                                         "$Version:$problem:resource.".  
                                         "$part.awarded"};  
                     $partData{$part.':awarded'} = ($awarded) ? $awarded : 0;  
                     $totalAwarded += $awarded;  
   
                     $tries = $cache->{$name.":$Version:$problem".  
                                       ":resource.$part.tries"};  
                     $partData{$part.':tries'} = ($tries) ? $tries : 0;  
                     $partData{$part.':wrong'} = $partData{$part.':tries'};  
                     $totalTries += $tries;  
   
                     my $val = $cache->{$name.":$Version:$problem".  
                                        ":resource.$part.solved"};  
                     if    ($val eq 'correct_by_student')   {$code = 'C';}   
                     elsif ($val eq 'correct_by_override')  {$code = 'O';}  
                     elsif ($val eq 'incorrect_attempted')  {$code = 'I';}   
                     elsif ($val eq 'incorrect_by_override'){$code = 'I';}  
                     elsif ($val eq 'excused')              {$code = 'x';}  
                     $partData{$part.':code'}=$code;  
   
                     if($partData{$part.':wrong'} ne 0 &&   
                        ($code eq 'C' || $code eq 'O')) {  
                         $partData{$part.':wrong'}--;  
                     }  
                 }  
             }  
   
             # Loop through all the parts for the current problem in the   =over
             # correct order and prepare the output  
             foreach (split(/\:/,$cache->{$sequence.':'.$problemID.  
                                          ':parts'})) {  
                 my $Yes = 0;  
                 if($partData{$_.':code'} eq 'C' ||   
                    $partData{$_.':code'} eq 'O') {  
                     $Yes=1;  
                 }  
                 #my $ptr = "$hash{'title_'.$ResId}";  
                 my $ptr = $tempProblemOrder.'&'.$problemID;  
   
                 if($_ > 1) {  =item @FullClasslist
                     $ptr .= "*(part $_)";  
                     $Dis .= '&';  
                 }  
   
  my ($pr_no,$dod)=split('&',$ptr);  =item @Students
  my $DoDiff=$DoDiff{$dod};  
 #               $r->print('<br>'.$name.'---'.$ptr.'==='.$DoDiff);  
   
                 my $Fac = ($partData{$_.':Tries'}) ?   
                     ($partData{$_.':awarded'}/$partData{$_.':tries'}) : 0;  
                 my $DisF;  
                 if($Fac > 0 &&  $Fac < 1) {   
                     $DisF = sprintf( "%.4f", $Fac );  
                 } else {  
                     $DisF = $Fac;  
                 }  
   
                 if ($Discuss{"$name:$problem"}) {  =item @Sections
     $TotDiscuss++;  
                     $Discussed=1;  
                 }  
                 my $time = $cache->{"$name:$LatestVersion:$problem:timestamp"};  
                 $Dis .= $tempProblemOrder.'='.$DisF.'+'.$Yes;  
                 $ptr .= '&'.$partData{$_.'.Tries'}.  
                         '&'.$partData{$_.'.Wrongs'}.  
                         '&'.$partData{$_.'.Code'};  
                 push (@$list, $ptr."&$Discussed");  
   
 #### if ($DoDiff>0.85) {  =item @SelectedSections
   
                 $TimeTot += $time;  =item %StudentData
   
                 if ($Yes==1 && $partData{$_.'.Tries'}==1) {  =item @SelectedStudentData
     $TotFirst++;  
                 }  =item $curr_student
  my $Acts= $Activity{$name.':'.$problem};  
  if ($Acts) {  =item $prev_student
     my $Pt=&ProcAct( $Acts, $time );  
     #my ($spe,$beg) = split(/\+/,$Pt);  =item $next_student
                     my $spe= $Pt;  
     if ($Yes==1) {$spent_yes += $spe;}  =back
     $spent += $spe;  
     #$Beg += $beg;  
 #                   $r->print('<br>'.$name.'---'.$problem.'---'.$spe);  
  }  
  $TotalOpend++;  
  $ProbTot++;  
   
                 $tempProblemOrder++;  $curr_student, $prev_student, and $next_student may not be defined, depending
   upon the calling context.
   
   =cut
   
   #######################################################
   #######################################################
   sub PrepareClasslist {
       my $r = shift;
       my %Sections;
       &clear_classlist_variables();
       #
       # Retrieve the classlist
       my $cid  = $ENV{'request.course.id'};
       my $cdom = $ENV{'course.'.$cid.'.domain'};
       my $cnum = $ENV{'course.'.$cid.'.num'};
       my ($classlist,$field_names) = &Apache::loncoursedata::get_classlist($cid,
                                                                     $cdom,$cnum);
       if (exists($ENV{'form.Section'})) {
           if (ref($ENV{'form.Section'})) {
               @SelectedSections = @{$ENV{'form.Section'}};
           } elsif ($ENV{'form.Section'} !~ /^\s*$/) {
               @SelectedSections = ($ENV{'form.Section'});
           }
       }
       @SelectedSections = ('all') if (! @SelectedSections);
       foreach (@SelectedSections) {
           if ($_ eq 'all') {
               @SelectedSections = ('all');
           }
       }
       #
       # Set up %StudentData
       @StudentDataOrder = qw/fullname username domain id section status/;
       foreach my $field (@StudentDataOrder) {
           $StudentData{$field}->{'title'} = $field;
           $StudentData{$field}->{'base_width'} = length($field);
           $StudentData{$field}->{'width'} = 
                                  $StudentData{$field}->{'base_width'};
       }
   
       #
       # Process the classlist
       while (my ($student,$student_data) = each (%$classlist)) {
           my $studenthash = ();
           for (my $i=0; $i< scalar(@$field_names);$i++) {
               my $field = $field_names->[$i];
               # Store the data
               $studenthash->{$field}=$student_data->[$i];
               # Keep track of the width of the fields
               next if (! exists($StudentData{$field}));
               my $length = length($student_data->[$i]);
               if ($StudentData{$field}->{'width'} < $length) {
                   $StudentData{$field}->{'width'} = $length; 
               }
           }
           push (@FullClasslist,$studenthash);
           #
           # Build up a list of sections
           my $section = $studenthash->{'section'};
           if (! defined($section) || $section =~/^\s*$/ || $section == -1) {
               $studenthash->{'section'} = 'none';
               $section = $studenthash->{'section'};
           }
           $Sections{$section}++;
           #
           # Only put in the list those students we are interested in
           foreach my $sect (@SelectedSections) {
               if (($sect eq 'all') || ($section eq $sect)) {
                   push (@Students,$studenthash);
                   last;
             }              }
         }          }
  my $pstr;  
         if($totalTries) {  
     my $DisFac = ($totalAwarded/$totalTries);  
     my $DisFactor = sprintf( "%.4f", $DisFac );  
             my $TS = sprintf( "%.2f", $spent );  
             my $TS_yes = sprintf( "%.2f", $spent_yes );  
    # $DiscFac{$DisFactor}=$Dis;  
     $pstr=$DisFactor.':'.$name.':'.$ProbTot.':'.$TotalOpend.':'.  
                   $totalTries.':'.$ProbSolved.':'.$TotFirst.':'.  
                   $TS_yes.':'.$TS.':'.$TotDiscuss;  
     $discriminantFactor{$pstr}=$Dis;  
  }  
     }      }
       #
     return (\%discriminantFactor);      # Put the consolidated section data in the right place
       @Sections = sort {$a cmp $b} keys(%Sections);
       unshift(@Sections,'all'); # Put 'all' at the front of the list
       #
       # Sort the Students
       my $sortby = 'fullname';
       $sortby = $ENV{'form.sort'} if (exists($ENV{'form.sort'}));
       my @TmpStudents = sort { $a->{$sortby} cmp $b->{$sortby} ||
                                $a->{'fullname'} cmp $b->{'fullname'} } @Students;
       @Students = @TmpStudents;
       # 
       # Now deal with that current student thing....
       if (exists($ENV{'form.StudentAssessmentStudent'})) {
           my ($current_uname,$current_dom) = 
               split(':',$ENV{'form.StudentAssessmentStudent'});
           my $i;
           for ($i = 0; $i<=$#Students; $i++) {
               next if (($Students[$i]->{'username'} ne $current_uname) || 
                        ($Students[$i]->{'domain'}   ne $current_dom));
               $curr_student = $Students[$i];
               last; # If we get here, we have our student.
           }
           if ($i == 0) {
               $prev_student = 'none';
           } else {
               $prev_student = $Students[$i-1];
           }
           if ($i == $#Students) {
               $next_student = 'none';
           } else {
               $next_student = $Students[$i+1];
           }
       }
       #
       if (exists($ENV{'form.StudentData'})) {
           if (ref($ENV{'form.StudentData'}) eq 'ARRAY') {
               @SelectedStudentData = @{$ENV{'form.StudentData'}};
           } else {
               @SelectedStudentData = ($ENV{'form.StudentData'});
           }
       } else {
           @SelectedStudentData = ('fullname');
       }
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               @SelectedStudentData = ('all');
               last;
           }
       }
       #
       return;
 }  }
   
   #######################################################
   #######################################################
   
 =pod  =pod
 sub MySort {            
     if ( $Pos > 0 ) {  
  if ($ENV{'form.order'} eq 'Descending') {$b <=> $a;}  
  else { $a <=> $b; }  
     }  
     else {  
  if ($ENV{'form.order'} eq 'Descending') {$b cmp $a;}  
  else { $a cmp $b; }  
     }  
 }  
 =cut  
   
 sub BuildStatisticsTable {  =item &current_student()
     my ($cache,$discriminantFactor,$list,$headings,$students)=@_;  
   
 #6666666  Returns a pointer to a hash containing data about the currently
 #    my $file="/home/httpd/perl/tmp/183d.txt";  selected student.
 #    open(OUT, ">$file");  
 #6666666  
     &Create_PrgWin();  
 ##777777  
 ##    &LoadActivityLog();  
 ##    $r->print('<script>popwin.document.popremain.remaining.value="'.  
 ##              'Loading Discussion...";</script>');  
 ##    &LoadDoDiffFile();  
     &LoadDiscussion();  
   
     my $p_count = 0;  
     my $nIndex = 0;  
     my $dummy;  
     my $p_val;  
     my $ResId;  
     my $NoElements = scalar @$list;  
   
     foreach my $sequence (split(':', $cache->{'orderedSequences'})) {  
         if($cache->{'ProblemStatisticsMap'} ne 'All Maps'  &&  
            $cache->{'ProblemStatisticsMap'} ne $cache->{$sequence.':title'}) {  
             next;  
         }  
   
  &CreateProblemStatisticsTableHeading($cache->{'DisplayFormat'},  
                                              $cache->{$sequence.':source'},   
                                              $cache->{$sequence.':title'},  
                                              $headings);  
   
 ##777777  
 ##    &Classify($discriminantFactor, $students);  
   
   
  my ($Hid,$pr)=split(/\:/,$mapsort{$_});  
  my @lpr=split(/\&/,$pr);  
  for (my $i=1; $i<=$#lpr; $i++) {  
     my %storestats=();  
     my ($PrOrd,$Prob,$Tries,$Wrongs,$Code,$Disc)=split(/\&/,$list->[$nIndex]);  
     my $Temp = $Prob;  
     my $MxTries = 0;  
     my $TotalTries = 0;  
     my $YES = 0;  
     my $Incorrect = 0;  
     my $Override = 0;  
     my $StdNo = 0;  
     my $DiscNo=0;  
     my @StdLst;  
     while ( $PrOrd == $lpr[$i] )   
     {  
  $nIndex++;  
  $StdNo++;  
  $StdLst[ $StdNo ] = $Tries;  
  $TotalTries += $Tries;  
  if ( $MxTries < $Tries ) { $MxTries = $Tries; }   
  if ( $Code eq 'C' ){ $YES++; }  
  elsif( $Code eq 'I' ) { $Incorrect++; }  
  elsif( $Code eq 'O' ) { $Override++; }  
  elsif( $Code eq 'U' ) { $StdNo--; }  
  ($PrOrd,$Prob,$Tries,$Wrongs,$Code,$Disc)=split(/\&/,$list->[$nIndex]);  
     }  
   
     $p_count++;  
     my $Dummy;  
     ($ResId,$Dummy)=split(/\*/,$Temp);  
   
     $Temp = '<a href="'.$hash{'src_'.$ResId}.  
                 '" target="_blank">'.$hash{'title_'.$ResId}.$Dummy.'</a>';  
   
     my $res = &Apache::lonnet::declutter($hash{'src_'.$ResId});  
     my $urlres=$res;  
   
     $ResId=~/(\d+)\.(\d+)/;  
     my $Map = &Apache::lonnet::declutter( $hash{'map_id_'.$1} );  
     $urlres=$Map;  
    
     $res = '<a href="'.$hash{'src_'.$ResId}.'">'.$res.'</a>';  
     #$Map = '<a href="'.$Map.'">'.$res.'</a>';  
   
 #------------------------ Compute the Average of Tries about one problem  
     my $Average = ($StdNo) ? $TotalTries/$StdNo : 0;  
   
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___timestamp'}=time;         
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___stdno'}=$StdNo;  
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___avetries'}=$Average;  
      
 #-------------------------------- Compute percentage of Wrong tries  
     my $Wrong = ( $StdNo ) ? 100 * ( $Incorrect / $StdNo ) : 0;  
   
 #-------------------------------- Compute Standard Deviation  
     my $StdDev = 0;   
     if ( $StdNo > 1 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $StdDev += $Dif*$Dif;  
  }   
  $StdDev /= ( $StdNo - 1 );  
  $StdDev = sqrt( $StdDev );  
     }  
   
 #-------------------------------- Compute Degree of Difficulty  
     my $DoDiff = 0;  
     if( $TotalTries > 0 ) {  
  $DoDiff = 1 - ( ( $YES + $Override ) / $TotalTries );  
 #    $DoDiff =  ($TotalTries)/($YES + $Override+ 0.1);      
     }  
          
     $storestats{$ENV{'request.course.id'}.'___'.$urlres.'___difficulty'}=$DoDiff;  
   
 #-------------------------------- Compute the Skewness  
     my $Skewness = 0;  
     my $Sum = 0;   
     if ( $StdNo > 0 && $StdDev > 0 ) {  
  for ( my $n = 0; $n < $StdNo; $n++ ) {  
     my $Dif = $StdLst[ $n ]-$Average;  
     $Skewness += $Dif*$Dif*$Dif;  
  }   
  $Skewness /= $StdNo;  
  $Skewness /= $StdDev*$StdDev*$StdDev;  
     }  
   
 #--------------------- Compute the Discrimination Factors  
             my ($Up1,$Up2)=split(/\:/,':');#jason$DisUp->{$lpr[$i]});  
     my ($Lw1,$Lw2)=split(/\:/,':');#jason$DisLow->{$lpr[$i]});  
     my $Dis1 = $Up1 - $Lw1;  
     my $Dis2 = $Up2 - $Lw2;  
     my $_D1 = sprintf("%.2f", $Dis1);  
     my $_D2 = sprintf("%.2f", $Dis2);  
   
 #-----------------  Some restition in presenting the float numbers  
     my $Avg = sprintf( "%.2f", $Average );  
     my $Wrng = sprintf( "%.1f", $Wrong );  
     my $SD = sprintf( "%.1f", $StdDev );  
     my $DoD = sprintf( "%.2f", $DoDiff );  
     my $Sk = sprintf( "%.1f", $Skewness );  
     my $join = $lpr[$i].'&'.$Temp.'&'.$StdNo.'&'.  
                        $TotalTries.'&'.$MxTries.'&'.$Avg.'&'.  
                        $YES.'&'.$Override.'&'.$Wrng.'&'.$DoD.'&'.  
        $SD.'&'.$Sk.'&'.$_D1.'&'.$_D2.'&'.  
                        $DiscNo.'&'.$Prob;  
     $CachData{($p_count-1)}=$join;  
   
 #6666666  
 #    $r->print('<br>'.$out.'&'.$DoD);  
 #            print (OUT $out.'@'.$DoD.'&');  
 #6666666  
   
     $urlres=~/^(\w+)\/(\w+)/;  
     if ($StdNo) {   
  &Apache::lonnet::put('resevaldata',\%storestats,$1,$2);   
     }  
 #-------------------------------- Row of statistical table  
             &TableRow($cache,$join,$i,($p_count-1));  
  }  
  &CloseTable($cache);  
     }  
     &Close_PrgWin();  
 #666666  
 #    close( OUT );  
 #666666  
 }  
   
 =pod  =cut
 sub Cache_Statistics {  
     my ($cache)=@_;  #######################################################
     my @list = ();  #######################################################
     my $Useful;  sub current_student { 
     my $UnUseful;      if (defined($curr_student)) {
 #    $r->print('<input type="hidden" name="show" value="excel" />'."\n");           return $curr_student;
     my %myHeader = reverse( %Header );      } else {
     $Pos = $myHeader{$ENV{'form.sort'}};          return 'All Students';
     if ($Pos > 0) {$Pos++;}  
     my $p_count = 0;  
     foreach my $key( keys %CachData) {   
  my @Temp=split(/\&/,$CachData{$key});  
  if ( $Pos == 0 ) {  
     ($UnUseful,$Useful)=split(/\>/,$Temp[$Pos]);  
  }  
  else {  
     $Useful = $Temp[$Pos];  
  }     
  $list[$p_count]=$Useful.'@'.$CachData{$key};  
         $p_count++;  
     }  
   
     @list = sort MySort (@list);  
   
     my $nIndex=0;  
   
     if ( $Pos == 0 ) {  
  foreach (sort keys %mapsort) {  
     my ($Hid,$pr)=split(/\:/,$mapsort{$_});  
     &CreateProblemStatisticsTableHeading($cache,1,$Hid);  
     my @lpr=split(/\&/,$pr);  
     for (my $i=1; $i<=$#lpr; $i++) {  
  my($Pre, $Post) = split(/\@/,$list[$nIndex]);   
  #$r->print('<br>'.$Pre.'---'.$Post);  
  &TableRow($cache,$Post,$i,$nIndex);  
  $nIndex++;  
     }  
     &CloseTable($cache);  
  }  
     }  
     else {  
  &CreateProblemStatisticsTableHeading($cache,0);  
  for ( my $nIndex = 0; $nIndex < $p_count; $nIndex++ ) {  
     my($Pre, $Post) = split(/\@/,$list[$nIndex]);   
     &TableRow($cache,$Post,$nIndex,$nIndex);  
  }   
  &CloseTable($cache);  
     }      }
 }  }
 =cut   
   
   #######################################################
   #######################################################
   
   =pod
   
 sub TableRow {  =item &previous_student()
     my ($Str,$Idx,$RealIdx)=@_;  
     my($PrOrd,$Temp,$StdNo,$TotalTries,$MxTries,$Avg,$YES,$Override,  Returns a pointer to a hash containing data about the student prior
        $Wrng,$DoD,$SD,$Sk,$_D1,$_D2,$DiscNo,$Prob)=split(/\&/,$Str);  in the list of students.  Or something.  
     if ($ENV{'form.showcsv'}) {  
         my ($ResId,$Dummy)=split(/\*/,$Prob);  =cut
         my $Ptr =  "\n".'<br>'.  
                "\n".'"'.($RealIdx+1).'",'.  #######################################################
                "\n".'"'.$hash{'title_'.$ResId}.$Dummy.'",'.  #######################################################
                "\n".'"'.$hash{'src_'.$ResId}.'",'.  sub previous_student { 
                "\n".'"'.$StdNo.'",'.      if (defined($prev_student)) {
                "\n".'"'.$TotalTries.'",'.          return $prev_student;
                "\n".'"'.$MxTries.'",'.      } else {
                "\n".'"'.$Avg.'",'.          return 'No Student Selected';
                "\n".'"'.$YES.'",'.  
                "\n".'"'.$Override.'",'.  
                "\n".'"'.$Wrng.'",'.  
                "\n".'"'.$DoD.'",'.  
                "\n".'"'.$SD.'",'.  
                "\n".'"'.$Sk.'",'.  
                "\n".'"'.$_D1.'",'.  
        "\n".'"'.$_D2.'"'.  
        "\n".'"'.$DiscNo.'"';  
   
         $r->print("\n".$Ptr);  
     }  
     else{  
         my $Ptr =  "\n".'<tr>'.  
                "\n".'<td>'.($RealIdx+1).'</td>'.  
           #     "\n".'<td>'.$PrOrd.$Temp.'</td>'.  
                "\n".'<td>'.$Temp.'</td>'.  
                "\n".'<td bgcolor='.$color{"yellow"}.'> '.$StdNo.'</td>'.  
                "\n".'<td bgcolor='.$color{"yellow"}.'>'.$TotalTries.'</td>'.  
                "\n".'<td bgcolor='.$color{"yellow"}.'>'.$MxTries.'</td>'.  
                "\n".'<td bgcolor='.$color{"gb"}.'>'.$Avg.'</td>'.  
                "\n".'<td bgcolor='.$color{"gb"}.'> '.$YES.'</td>'.  
                "\n".'<td bgcolor='.$color{"gb"}.'> '.$Override.'</td>'.  
                "\n".'<td bgcolor='.$color{"red"}.'> '.$Wrng.'</td>'.  
                "\n".'<td bgcolor='.$color{"red"}.'> '.$DoD.'</td>'.  
                "\n".'<td bgcolor='.$color{"green"}.'> '.$SD.'</td>'.  
                "\n".'<td bgcolor='.$color{"green"}.'> '.$Sk.'</td>'.  
                "\n".'<td bgcolor='.$color{"purple"}.'> '.$_D1.'</td>'.  
        "\n".'<td bgcolor='.$color{"purple"}.'> '.$_D2.'</td>'.  
                "\n".'<td bgcolor='.$color{"yellow"}.'> '.$DiscNo.'</td>';  
         $r->print("\n".$Ptr.'</tr>' );  
     }      }
     $GraphDat{$RealIdx}=$DoD.':'.$Wrng;  
 }  }
   
 sub StatusOptions {  #######################################################
     my ($cache)=@_;  #######################################################
   
     my $Status = $cache->{'Status'};  =pod
     my $OpSel1 = '';  
     my $OpSel2 = '';  
     my $OpSel3 = '';  
   
     if($Status eq 'Any')         { $OpSel3 = ' selected'; }  
     elsif($Status eq 'Expired' ) { $OpSel2 = ' selected'; }  
     else                         { $OpSel1 = ' selected'; }  
   
     my $Ptr = '';  
     $Ptr .= '<tr><td align="right"><b>Student Status:</b></td>'."\n";  
     $Ptr .= '<td align="left"><select name="Status">';  
     $Ptr .= '<option'.$OpSel1.'>Active</option>'."\n";  
     $Ptr .= '<option'.$OpSel2.'>Expired</option>'."\n";  
     $Ptr .= '<option'.$OpSel3.'>Any</option>'."\n";  
     $Ptr .= '</select></td></tr>'."\n";  
   
     return $Ptr;  =item &next_student()
 }  
   
 sub AscendOrderOptions {  Returns a pointer to a hash containing data about the next student
     my ($cache)=@_;  to be viewed.
   
     my $order = $cache->{'Ascend'};  =cut
     my $OpSel1 = '';  
     my $OpSel2 = '';  
   
     if($order eq 'Ascending') {  #######################################################
         $OpSel1 = ' selected';  #######################################################
   sub next_student { 
       if (defined($next_student)) {
           return $next_student;
     } else {      } else {
         $OpSel2 = ' selected';          return 'No Student Selected';
     }      }
   }
   
     my $Ptr = '';  #######################################################
     $Ptr .= '<tr><td align="right"><b>Sorting Type:</b></td>'."\n";  #######################################################
     $Ptr .= '<td align="left"><select name="Ascend">'."\n";  
     $Ptr .= '<option'.$OpSel1.'>Ascending</option>'."\n".  =pod
     '<option'.$OpSel2.'>Descending</option>'."\n";  
     $Ptr .= '</select></td></tr>'."\n";  =item &clear_sequence_variables()
   
   =cut
   
     return $Ptr;  #######################################################
   #######################################################
   sub clear_sequence_variables {
       undef($top_map);
       undef(@Sequences);
       undef(@Assessments);
 }  }
   
 sub ProblemStatisticsButtons {  #######################################################
     my ($cache)=@_;  #######################################################
   
   =pod
   
   =item &SetSelectedMaps($elementname)
   
   Sets the @SelectedMaps array from $ENV{'form.'.$elementname};
   
   =cut
   
     my $Ptr = '<tr><td></td><td align="left">';  #######################################################
     $Ptr .= '<input type=submit name="ProblemStatisticsRecalculate" ';  #######################################################
     $Ptr .= 'value="Recalculate Statistics"/>'."\n";  sub SetSelectedMaps {
     $Ptr .= '&nbsp;&nbsp;&nbsp;';      my $elementname = shift;
     $Ptr .= '<input type="submit" name="DoDiffGraph" ';      if (exists($ENV{'form.'.$elementname})) {
     $Ptr .= 'value="DoDiff Graph" />'."\n";          if (ref($ENV{'form.'.$elementname})) {
     $Ptr .= '&nbsp;&nbsp;&nbsp;';              @SelectedMaps = @{$ENV{'form.'.$elementname}};
     $Ptr .= '<input type="submit" name="PercentWrongGraph" ';          } else {
     $Ptr .= 'value="%Wrong Graph" />'."\n";              @SelectedMaps = ($ENV{'form.'.$elementname});
     $Ptr .= '&nbsp;&nbsp;&nbsp;';          }
     $Ptr .= '<input type="submit" name="DisplayCSVFormat" ';  
     if($cache->{'DisplayFormat'} eq 'Display CSV Format') {  
         $Ptr .= 'value="Display CSV Format" />'."\n";  
     } else {      } else {
         $Ptr .= 'value="Display Table Format" />'."\n";          @SelectedMaps = ('all');
     }      }
     $Ptr .= '</td></tr>';  
   
     return $Ptr;  
 }  }
   
 sub ProblemStatisticsLegend {  #######################################################
     my $Ptr = '';  #######################################################
     $Ptr = '<table border="0">';  
     $Ptr .= '<tr><td>';  =pod
     $Ptr .= '<b>#Stdnts</b>:</td>';  
     $Ptr .= '<td>Total Number of Students opened the problem.';  =item &PrepareCourseData($r)
     $Ptr .= '</td></tr><tr><td>';  
     $Ptr .= '<b>Tries</b>:</td>';  =cut
     $Ptr .= '<td>Total Number of Tries for solving the problem.';  
     $Ptr .= '</td></tr><tr><td>';  #######################################################
     $Ptr .= '<b>Mod</b>:</td>';  #######################################################
     $Ptr .= '<td>Maximunm Number of Tries for solving the problem.';  sub PrepareCourseData {
     $Ptr .= '</td></tr><tr><td>';      my ($r) = @_;
     $Ptr .= '<b>Mean</b>:</td>';      &clear_sequence_variables();
     $Ptr .= '<td>Average Number of the tries. [ Tries / #Stdnts ]';      my ($top,$sequences,$assessments) = 
     $Ptr .= '</td></tr><tr><td>';          &Apache::loncoursedata::get_sequence_assessment_data();
     $Ptr .= '<b>#YES</b>:</td>';      if (! defined($top) || ! ref($top)) {
     $Ptr .= '<td>Number of students solved the problem correctly.';          # There has been an error, better report it
     $Ptr .= '</td></tr><tr><td>';          &Apache::lonnet::logthis('top is undefined');
     $Ptr .= '<b>#yes</b>:</td>';          return;
     $Ptr .= '<td>Number of students solved the problem by override.';  
     $Ptr .= '</td></tr><tr><td>';  
     $Ptr .= '<b>%Wrng</b>:</td>';  
     $Ptr .= '<td>Percentage of students tried to solve the problem ';  
     $Ptr .= 'but still incorrect. [ 100*((#Stdnts-(#YES+#yes))/#Stdnts) ]';  
     $Ptr .= '</td></tr><tr><td>';  
 #    Kashy formula  
 #    '<b>  DoDiff </b>: Degree of Difficulty of the problem.<br>'.  
 #    '[ Tries/(#YES+#yes+0.1) ]<br>'.  
     #Gerd formula  
     $Ptr .= '<b>DoDiff</b>:</td>';  
     $Ptr .= '<td>Degree of Difficulty of the problem.  ';  
     $Ptr .= '[ 1 - ((#YES+#yes) / Tries) ]';  
     $Ptr .= '</td></tr><tr><td>';  
     $Ptr .= '<b>S.D.</b>:</td>';  
     $Ptr .= '<td>Standard Deviation of the tries.  ';  
     $Ptr .= '[ sqrt(sum((Xi - Mean)^2)) / (#Stdnts-1) ';  
     $Ptr .= 'where Xi denotes every student\'s tries ]';  
     $Ptr .= '</td></tr><tr><td>';  
     $Ptr .= '<b>Skew.</b>:</td>';  
     $Ptr .= '<td>Skewness of the students tries.';  
     $Ptr .= '[(sqrt( sum((Xi - Mean)^3) / #Stdnts)) / (S.D.^3)]';  
     $Ptr .= '</td></tr><tr><td>';  
     $Ptr .= '<b>Dis.F.</b>:</td>';  
     $Ptr .= '<td>Discrimination Factor: A Standard for evaluating the ';  
     $Ptr .= 'problem according to a Criterion<br>';  
     $Ptr .= '<b>[Applied Criterion in %27 Upper Students - ';  
     $Ptr .= 'Applied the same Criterion in %27 Lower Students]</b><br>';  
     $Ptr .= '<b>1st Criterion</b> for Sorting the Students: ';  
     $Ptr .= '<b>Sum of Partial Credit Awarded / Total Number of Tries</b><br>';  
     $Ptr .= '<b>2nd Criterion</b> for Sorting the Students: ';  
     $Ptr .= '<b>Total number of Correct Answers / Total Number of Tries</b>';  
     $Ptr .= '</td></tr>';  
     $Ptr .= '<tr><td><b>Disc.</b></td>';  
     $Ptr .= '<td>Number of Students had at least one discussion.';  
     $Ptr .= '</td></tr></table>';  
   
     return $Ptr;  
 }  
   
 #---- END Problem Statistics Web Page ----------------------------------------  
   
 #---- Problem Statistics Graph Web Page --------------------------------------  
   
 # ------------------------------------------- Prepare data for Graphical chart  
   
 sub GetGraphData {  
     my $ylab = shift;  
     my $Col;  
     my $data='';  
     my $count = 0;  
     my $Max = 0;  
     my $cid=$ENV{'request.course.id'};  
     my $GraphDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$cid\_graph.db";  
     foreach (keys %GraphDat) {delete $GraphDat{$_};}  
     if (-e "$GraphDB") {  
  if (tie(%GraphDat,'GDBM_File',"$GraphDB",&GDBM_READER,0640)) {  
     if ( $ylab eq 'DoDiff Graph' ) {  
  $ylab = 'Degree-of-Difficulty';  
  $Col = 0;  
     }  
     else {  
  $ylab = 'Wrong-Percentage';  
  $Col = 1;  
     }  
     foreach (sort NumericSort keys %GraphDat) {   
  my @Temp=split(/\:/,$GraphDat{$_});  
                 my $inf = $Temp[$Col];   
  if ( $Max < $inf ) {$Max = $inf;}  
  $data .= $inf.',';  
  $count++;  
     }  
     if ( $Max > 1 ) {   
  $Max += (10 - $Max % 10);  
  $Max = int($Max);  
     }  
     else { $Max = 1; }  
             untie(%GraphDat);  
     my $Course = $ENV{'course.'.$cid.'.description'};  
     $Course =~ s/\ /"_"/eg;  
     $GData=$Course.'&'.'Problems'.'&'.$ylab.'&'.$Max.'&'.$count.'&'.$data;  
  }  
  else {  
     $r->print("Unable to tie hash to db file");  
  }  
     }      }
       $top_map = $top if (ref($top));
       @Sequences = @{$sequences} if (ref($sequences) eq 'ARRAY');
       @Assessments = @{$assessments} if (ref($assessments) eq 'ARRAY');
       #
       # Compute column widths
       foreach my $seq (@Sequences) {
           my $name_length = length($seq->{'title'});
           my $num_parts = $seq->{'num_assess_parts'};
           #
           # The number of columns needed for the summation text: 
           #    " 1/5" = 1+3 columns, " 10/99" = 1+5 columns
           my $sum_length = 1+1+2*(length($num_parts));
           my $num_col = $num_parts+$sum_length;
           if ($num_col < $name_length) {
               $num_col = $name_length;
           }
           $seq->{'base_width'} = $name_length;
           $seq->{'width'} = $num_col;
       }
       return;
 }  }
 #---- Problem Analysis Web Page ----------------------------------------------  
   
 sub IntervalOptions {  #######################################################
     my ($cache)=@_;  #######################################################
   
   =pod
   
   =item &log_sequence($sequence,$recursive,$padding)
   
   Write data about the sequence to a logfile.  If $recursive is not
   undef the data is written recursively.  $padding is used for recursive
   calls.
   
   =cut
   
     my $interval = 1;  #######################################################
     for(my $n=1; $n<=7; $n++) {  #######################################################
         if($cache->{'Interval'} == $n) {  sub log_sequence {
             $interval = $n;      my ($seq,$recursive,$padding) = @_;
       $padding = '' if (! defined($padding));
       if (ref($seq) ne 'HASH') {
           &Apache::lonnet::logthis('log_sequence passed bad sequnce');
           return;
       }
       &Apache::lonnet::logthis($padding.'sequence '.$seq->{'title'});
       while (my($key,$value) = each(%$seq)) {
           next if ($key eq 'contents');
           if (ref($value) eq 'ARRAY') {
               for (my $i=0;$i< scalar(@$value);$i++) {
                   &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
                                            $value->[$i]);
               }
           } else {
               &Apache::lonnet::logthis($padding.$key.'='.$value);
         }          }
     }      }
       if (defined($recursive)) {
     my $Ptr = '<br><b>Select number of intervals</b>'."\n".          &Apache::lonnet::logthis($padding.'-'x20);
              '<select name="Interval">'."\n";          &Apache::lonnet::logthis($padding.'contains:');
     for(my $n=1; $n<=7;$ n++) {          foreach my $item (@{$seq->{'contents'}}) {
  $Ptr .= '<option';              if ($item->{'type'} eq 'container') {
         if($interval == $n) {                  &log_sequence($item,$recursive,$padding.'    ');
             $Ptr .= ' selected';              } else {
                   &Apache::lonnet::logthis($padding.'title = '.$item->{'title'});
                   while (my($key,$value) = each(%$item)) {
                       next if ($key eq 'title');
                       if (ref($value) eq 'ARRAY') {
                           for (my $i=0;$i< scalar(@$value);$i++) {
                               &Apache::lonnet::logthis($padding.$key.'['.$i.']='.
                                                        $value->[$i]);
                           }
                       } else {
                           &Apache::lonnet::logthis($padding.$key.'='.$value);
                       }
                   }
               }
         }          }
  $Ptr .= '>'.$n."</option>"."\n";          &Apache::lonnet::logthis($padding.'end contents of '.$seq->{'title'});
           &Apache::lonnet::logthis($padding.'-'x20);
     }      }
     $Ptr .= '</select>'."\n";      return;
   
     return $Ptr;  
 }  }
   
 sub OptionResponseTable {  ##############################################
     my ($cache)=@_;  ##############################################
     my $Str = '';  
     $Str .= '<br><b> Option Response Problems in this course:</b>'."\n";  
     $Str .= '<br><br>'."\n";  
     $Str .= "<table border=2><tr><th> \# </th><th> Problem Title </th>";  
     $Str .= '<th> Resource </th><th> Analysis  </th></tr>'."\n";  
   
     my $number=1;  
     foreach (split(':::',$cache->{'OptionResponses'})) {  
         my ($uri,$title,$part,$problem)=split('::',$_);  
         my $Temp = '<a href="'.$uri.'" target="_blank">'.$title.'</a>';  
         $Str .= '<tr>';  
         $Str .= '<td> '.$number.' </td>';  
         $Str .= '<td bgcolor="'.$color{"green"}.'"> '.$Temp.' </td>';  
         $Str .= '<td bgcolor="'.$color{"yellow"}.'"> '.$uri.' </td>';  
         $Str .= '<td><input type="submit" name="Analyze:::'.$uri.':::';  
         $Str .= $title.':::'.$part.':::'.$problem.'" value="';  
         $Str .= 'Analyze" /></td></tr>'."\n";  
         $number++;  
     }  
     $Str .= '</table>'."\n";  
   
     return $Str;  =pod 
 }  
   
 #---- END Problem Analysis Web Page ------------------------------------------  =item &StudentDataSelect($elementname,$status,$numvisible,$selected)
   
 #---- Student Assessment Web Page --------------------------------------------  Returns html for a selection box allowing the user to choose one (or more) 
   of the fields of student data available (fullname, username, id, section, etc)
   
 # ------ Create different Student Report   =over 4
 sub StudentReport {  
     my ($cache, $name)=@_;  
   
     my $Str = '';  =item $elementname The name of the HTML form element
     if($cache->{$name.':error'} =~ /course/) {  
         my ($username)=split(':',$name);  
         $Str .= '<b><font color="blue">No course data for student </font>';  
         $Str .= '<font color="red">'.$username.'.</font></b><br>';  
         return $Str;  
     }  
   
     $Str .= "<table border=2><tr><th> \# </th><th> Set Title </th>";  
     $Str .= '<th> Results </th><th> Tries </th></tr>'."\n";  
   
     my $codes;  
     my $attempts;  
     foreach my $sequence (split(':', $cache->{'orderedSequences'})) {  
         if($cache->{'StudentAssessmentMap'} ne 'All Maps'  &&  
            $cache->{'StudentAssessmentMap'} ne $cache->{$sequence.':title'}) {  
             next;  
         }  
   
         $Str .= '<tr><td>'.$sequence.'</td>';  
         $Str .= '<td>'.$cache->{$sequence.':title'}.'</td>';  
   
         $codes = '';  
         $attempts = '';  
         foreach my $problemID (split(':', $cache->{$sequence.':problems'})) {  
             my $problem = $cache->{$problemID.':problem'};  
             my $LatestVersion = $cache->{$name.':version:'.$problem};  
   
             # Output dashes for all the parts of this problem if there  
             # is no version information about the current problem.  
             if(!$LatestVersion) {  
                 foreach my $part (split(/\:/,$cache->{$sequence.':'.  
                                                       $problemID.  
                                                       ':parts'})) {  
     $codes    .= "-,";  
                     $attempts .= "0,";   
                 }  
                 next;  
             }  
   
             my %partData=undef;  =item $status 'multiple' or 'single' selection box
             # Initialize part data, display skips correctly  
             # Skip refers to when a student made no submissions on that  
             # part/problem.  
             foreach my $part (split(/\:/,$cache->{$sequence.':'.  
                                                   $problemID.  
                                                   ':parts'})) {  
                 $partData{$part.':tries'}=0;  
                 $partData{$part.':code'}='-';  
             }  
   
             # Looping through all the versions of each part, starting with the  =item $numvisible The number of options to be visible
             # oldest version.  Basically, it gets the most recent   
             # set of grade data for each part.  
     for(my $Version=1; $Version<=$LatestVersion; $Version++) {  
                 foreach my $part (split(/\:/,$cache->{$sequence.':'.  
                                                       $problemID.  
                                                       ':parts'})) {  
   
                     if(!defined($cache->{$name.":$Version:$problem".  
                                                ":resource.$part.solved"})) {  
                         # No grade for this submission, so skip  
                         next;  
                     }  
   
                     my $tries=0;  =back
                     my $code='U';  
   
                     $tries = $cache->{$name.":$Version:$problem".  =cut
                                       ":resource.$part.tries"};  
                     $partData{$part.':tries'}=($tries) ? $tries : 0;  
   
                     my $val = $cache->{$name.":$Version:$problem".  
                                        ":resource.$part.solved"};  
                     if    ($val eq 'correct_by_student')   {$code = 'Y';}   
                     elsif ($val eq 'correct_by_override')  {$code = 'y';}  
                     elsif ($val eq 'incorrect_attempted')  {$code = 'N';}   
                     elsif ($val eq 'incorrect_by_override'){$code = 'N';}  
                     elsif ($val eq 'excused')              {$code = 'x';}  
                     $partData{$part.':code'}=$code;  
                 }  
             }  
   
             # Loop through all the parts for the current problem in the   ##############################################
             # correct order and prepare the output  ##############################################
             foreach (split(/\:/,$cache->{$sequence.':'.$problemID.  sub StudentDataSelect {
                                          ':parts'})) {      my ($elementname,$status,$numvisible)=@_;
                 $codes    .= $partData{$_.':code'}.',';      if ($numvisible < 1) {
                 $attempts .= $partData{$_.':tries'}.',';           return;
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Deal with 'all'
       $Str .= '    <option value="all" ';
       foreach (@SelectedStudentData) {
           if ($_ eq 'all') {
               $Str .= 'selected ';
               last;
           }
       }
       $Str .= ">all</option>\n";
       #
       # Loop through the student data fields
       foreach my $item (@StudentDataOrder) {
           $Str .= '    <option value="'.$item.'" ';
           foreach (@SelectedStudentData) {
               if ($item eq $_ ) {
                   $Str .= 'selected ';
                   last;
             }              }
         }          }
         $codes    =~ s/,$//;          $Str .= '>'.$item."</option>\n";
         $attempts =~ s/,$//;  
         $Str .= '<td>'.$codes.'</td>';  
         $Str .= '<td>'.$attempts.'</td>';  
         $Str .= '</tr>'."\n";  
     }      }
       $Str .= "</select>\n";
       return $Str;
   }
   
   ##############################################
   ##############################################
   
     $Str .= '</table>'."\n";  =pod 
   
   =item &MapSelect($elementname,$status,$numvisible,$restriction) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sequences in the course.  The values of the sequences are the symbs.
   If the top sequence is selected, the value 'top' will result.
   
   =over 4
   
   =item $elementname The name of the HTML form element
   
   =item $status 'multiple' or 'single' selection box
   
   =item $numvisible The number of options to be visible
   
   =item $restriction Code reference to subroutine which returns true or 
   false.  The code must expect a reference to a sequence data structure.
   
   =back
   
   =cut
   
   ##############################################
   ##############################################
   sub MapSelect {
       my ($elementname,$status,$numvisible,$restriction)=@_;
       if ($numvisible < 1) {
           return;
       }
       #
       # Set up array of selected items
       &SetSelectedMaps($elementname);
       #
       # Set up the restriction call
       if (! defined($restriction)) {
           $restriction = sub { 1; };
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Deal with 'all'
       foreach (@SelectedMaps) {
           if ($_ eq 'all') {
               @SelectedMaps = ('all');
               last;
           }
       }
       #
       # Put in option for 'all'
       $Str .= '    <option value="all" ';
       foreach (@SelectedMaps) {
           if ($_ eq 'all') {
               $Str .= 'selected ';
               last;
           }
       }
       $Str .= ">all</option>\n";
       #
       # Loop through the sequences
       foreach my $seq (@Sequences) {
           next if (! $restriction->($seq));
           $Str .= '    <option value="'.$seq->{'symb'}.'" ';
           foreach (@SelectedMaps) {
               if ($seq->{'symb'} eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$seq->{'title'}."</option>\n";
       }
       $Str .= "</select>\n";
     return $Str;      return $Str;
 }  }
   
 #---- END Student Assessment Web Page ----------------------------------------  ##############################################
   ##############################################
   
   =pod 
   
 #---- Menu Web Page ----------------------------------------------------------  =item &SectionSelect($elementname,$status,$numvisible) 
   
   Returns html for a selection box allowing the user to choose one (or more) 
   of the sections in the course.  
   
   =over 4
   
 #---- END Menu Web Page ------------------------------------------------------  =item $elementname The name of the HTML form element
   
 #---- HELPER FUNCTIONS -------------------------------------------------------  =item $status 'multiple' or 'single' selection box
   
   =item $numvisible The number of options to be visible
   
   =item $selected Array ref to the names of the already selected sections.
   If undef, $ENV{'form.'.$elementname} is used.  
   If $ENV{'form.'.$elementname} is also empty, none will be selected.
   
   =item $restriction Code reference to subroutine which returns true or 
   false.  The code must expect a reference to a sequence data structure.
   
   =back
   
   =cut
   
   ##############################################
   ##############################################
   sub SectionSelect {
       my ($elementname,$status,$numvisible)=@_;
       if ($numvisible < 1) {
           return;
       }
       #
       # Build the form element
       my $Str = "\n";
       $Str .= '<select name="'.$elementname.'" ';
       if ($status ne 'single') {
           $Str .= 'multiple="true" ';
       }
       $Str .= 'size="'.$numvisible.'" >'."\n";
       #
       # Loop through the sequences
       foreach my $s (@Sections) {
           $Str .= '    <option value="'.$s.'" ';
           foreach (@SelectedSections) {
               if ($s eq $_) {
                   $Str .= 'selected ';
                   last;
               }
           }
           $Str .= '>'.$s."</option>\n";
       }
       $Str .= "</select>\n";
       return $Str;
   }
   
   ##############################################
   ##############################################
   
 sub CheckFormElement {  sub CheckFormElement {
     my ($cache, $ENVName, $cacheName, $default)=@_;      my ($cache, $ENVName, $cacheName, $default)=@_;
Line 1474  sub CheckFormElement { Line 757  sub CheckFormElement {
         $cache->{$cacheName} = $ENV{'form.'.$ENVName};          $cache->{$cacheName} = $ENV{'form.'.$ENVName};
     } elsif(!defined($cache->{$cacheName})) {      } elsif(!defined($cache->{$cacheName})) {
         $cache->{$cacheName} = $default;          $cache->{$cacheName} = $default;
       } else {
           $ENV{'form.'.$ENVName} = $cache->{$cacheName};
     }      }
   
     return;      return;
 }  }
   
Line 1485  sub ProcessFormData{ Line 769  sub ProcessFormData{
     $cache->{'reportKey'} = 'false';      $cache->{'reportKey'} = 'false';
   
     &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},      &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                             ['sort','download']);                                              ['download',
                                                'reportSelected',
                                                'StudentAssessmentStudent',
                                                'ProblemStatisticsSort']);
       &CheckFormElement($cache, 'DownloadAll', 'DownloadAll', 'false');
       if ($cache->{'DownloadAll'} ne 'false') {
           # Clean the hell out of that cache!
           # We cannot untie the hash at this scope (stupid libgd :( )
           # So, remove every single key.  What a waste of time....
           # Of course, if you are doing this you are probably resigned
           # to waiting a while.
           &Apache::lonnet::logthis("Cleaning out the cache file");
           while (my ($key,undef)=each(%$cache)) {
               next if ($key eq 'DownloadAll');
               delete($cache->{$key});
           }
       }
     &CheckFormElement($cache, 'Status', 'Status', 'Active');      &CheckFormElement($cache, 'Status', 'Status', 'Active');
     &CheckFormElement($cache, 'postdata', 'reportSelected', 'Class list');      &CheckFormElement($cache, 'postdata', 'reportSelected', 'Class list');
     &CheckFormElement($cache, 'reportSelected', 'reportSelected',       &CheckFormElement($cache, 'reportSelected', 'reportSelected', 
                       'Class list');                        'Class list');
     &CheckFormElement($cache, 'DownloadAll', 'DownloadAll', 'false');      $cache->{'reportSelected'} = 
           &Apache::lonnet::unescape($cache->{'reportSelected'});
     &CheckFormElement($cache, 'sort', 'sort', 'fullname');      &CheckFormElement($cache, 'sort', 'sort', 'fullname');
     &CheckFormElement($cache, 'download', 'download', 'false');      &CheckFormElement($cache, 'download', 'download', 'false');
       &CheckFormElement($cache, 'StatisticsMaps', 
                         'StatisticsMaps', 'All Maps');
       &CheckFormElement($cache, 'StatisticsProblemSelect',
         'StatisticsProblemSelect', 'All Problems');
       &CheckFormElement($cache, 'StatisticsPartSelect',
         'StatisticsPartSelect', 'All Parts');
       if(defined($ENV{'form.Section'})) {
           my @sectionsSelected = (ref($ENV{'form.Section'}) ?
                                  @{$ENV{'form.Section'}} :
                                   ($ENV{'form.Section'}));
           $cache->{'sectionsSelected'} = join(':', @sectionsSelected);
       } elsif(!defined($cache->{'sectionsSelected'})) {
           $cache->{'sectionsSelected'} = $cache->{'sectionList'};
       }
   
       # student assessment
     if(defined($ENV{'form.CreateStudentAssessment'}) ||      if(defined($ENV{'form.CreateStudentAssessment'}) ||
        defined($ENV{'form.NextStudent'}) ||         defined($ENV{'form.NextStudent'}) ||
        defined($ENV{'form.PreviousStudent'})) {         defined($ENV{'form.PreviousStudent'})) {
Line 1506  sub ProcessFormData{ Line 822  sub ProcessFormData{
     } else {      } else {
         $cache->{'StudentAssessmentMove'} = 'selected';          $cache->{'StudentAssessmentMove'} = 'selected';
     }      }
     &CheckFormElement($cache, 'StudentAssessmentMap', 'StudentAssessmentMap',   
                       'All Maps');  
     &CheckFormElement($cache, 'StudentAssessmentStudent',       &CheckFormElement($cache, 'StudentAssessmentStudent', 
                       'StudentAssessmentStudent', 'No Student Selected');                        'StudentAssessmentStudent', 'All Students');
       $cache->{'StudentAssessmentStudent'} = 
     foreach (keys(%ENV)) {          &Apache::lonnet::unescape($cache->{'StudentAssessmentStudent'});
         if(/form\.Analyze:::/) {      &CheckFormElement($cache, 'DefaultColumns', 'DefaultColumns', 'false');
 #            $cache->{'reportSelected'} = 'Analyze';  
 #            $cache->{'reportKey'} = 'Problem Analysis';      # Problem analysis
             my ($uri, $title, $part, $problem);      &CheckFormElement($cache, 'Interval', 'Interval', '1');
             (undef, $uri, $title, $part, $problem)=split(':::', $_);  
             $cache->{'AnalyzeURI'}     = $uri;      # ProblemStatistcs
             $cache->{'AnalyzeTitle'}   = $title;      &CheckFormElement($cache, 'DisplayCSVFormat',
             $cache->{'AnalyzePart'}    = $part;                        'DisplayFormat', 'Display Table Format');
             $cache->{'AnalyzeProblem'} = $problem;      &CheckFormElement($cache, 'ProblemStatisticsAscend',
                                     'ProblemStatisticsAscend', 'Ascending');
             &CheckFormElement($cache, 'Interval', 'Interval', '1');      &CheckFormElement($cache, 'ProblemStatisticsSort',
                         'ProblemStatisticsSort', 'Homework Sets Order');
       &CheckFormElement($cache, 'DisplayLegend', 'DisplayLegend', 
         'Hide Legend');
       &CheckFormElement($cache, 'SortProblems', 'SortProblems', 
                         'Sort Within Sequence');
   
       # Search only form elements
       my @headingColumns=();
       my @sequenceColumns=();
       my $foundColumn = 0;
       if(defined($ENV{'form.ReselectColumns'})) {
           my @reselected = (ref($ENV{'form.ReselectColumns'}) ? 
                             @{$ENV{'form.ReselectColumns'}}
                             : ($ENV{'form.ReselectColumns'}));
           foreach (@reselected) {
               if(/HeadingColumn/) {
                   push(@headingColumns, $_);
                   $foundColumn = 1;
               } elsif(/SequenceColumn/) {
                   push(@sequenceColumns, $_);
                   $foundColumn = 1;
               }
         }          }
     }      }
   
     return;      $cache->{'reportKey'} = 'false';
       if($cache->{'reportSelected'} eq 'Analyze') {
           $cache->{'reportKey'} = 'Analyze';
       } elsif($cache->{'reportSelected'} eq 'DoDiffGraph') {
           $cache->{'reportKey'} = 'DoDiffGraph';
       } elsif($cache->{'reportSelected'} eq 'PercentWrongGraph') {
           $cache->{'reportKey'} = 'PercentWrongGraph';
       }
   
     # Select page to display      if(defined($ENV{'form.DoDiffGraph'})) {
     if(defined($ENV{'form.ProblemStatistics'}) ||          $cache->{'reportSelected'} = 'DoDiffGraph';
        defined($ENV{'form.ProblemStatisticsRecalculate'}) ||           $cache->{'reportKey'} = 'DoDiffGraph';
        defined($ENV{'form.DisplayCSVFormat'})) {  
         $cache->{'GoToPage'} = 'ProblemStatistics';  
         &CheckFormElement($cache, 'DisplayCSVFormat',  
                           'DisplayFormat', 'Display Table Format');  
         &CheckFormElement($cache, 'Ascend','ProblemStatisticsAscend',  
                           'Ascending');  
         &CheckFormElement($cache, 'Maps', 'ProblemStatisticsMap',   
                           'All Maps');  
     } elsif(defined($ENV{'form.ProblemAnalysis'})) {  
         $cache->{'GoToPage'} = 'ProblemAnalysis';  
         &CheckFormElement($cache, 'Interval', 'Interval', '1');  
     } elsif(defined($ENV{'form.DoDiffGraph'})) {  
         $cache->{'GoToPage'} = 'DoDiffGraph';  
     } elsif(defined($ENV{'form.PercentWrongGraph'})) {      } elsif(defined($ENV{'form.PercentWrongGraph'})) {
         $cache->{'GoToPage'} = 'PercentWrongGraph';          $cache->{'reportSelected'} = 'PercentWrongGraph';
     } elsif(defined($ENV{'form.ActivityLog'})) {          $cache->{'reportKey'} = 'PercentWrongGraph';
         $cache->{'GoToPage'} = 'ActivityLog';  
     } else {  
         $cache->{'GoToPage'} = 'Menu';  
     }      }
   
     &CheckFormElement($cache, 'Status', 'Status', 'Active');      foreach (keys(%ENV)) {
           if(/form\.Analyze/) {
               $cache->{'reportSelected'} = 'Analyze';
               $cache->{'reportKey'} = 'Analyze';
               my $data;
               (undef, $data)=split(':::', $_);
               $cache->{'AnalyzeInfo'}=$data;
           } elsif(/form\.HeadingColumn/) {
               my $value = $_;
               $value =~ s/form\.//;
               push(@headingColumns, $value);
               $foundColumn=1;
           } elsif(/form\.SequenceColumn/) {
               my $value = $_;
               $value =~ s/form\.//;
               push(@sequenceColumns, $value);
               $foundColumn=1;
           }
       }
   
       if($foundColumn) {
           $cache->{'HeadingsFound'} = join(':', @headingColumns);
           $cache->{'SequencesFound'} = join(':', @sequenceColumns);;
       }
       if(!defined($cache->{'HeadingsFound'}) || 
          $cache->{'DefaultColumns'} ne 'false') {
           $cache->{'HeadingsFound'}='HeadingColumnFull Name';
       }
       if(!defined($cache->{'SequencesFound'}) ||
          $cache->{'DefaultColumns'} ne 'false') {
           $cache->{'SequencesFound'}='All Sequences';
       }
       $cache->{'DefaultColumns'} = 'false';
   
     return;      return;
 }  }
   
   ##################################################
   ##################################################
   
 =pod  =pod
   
 =item &SortStudents()  =item &SortStudents()
Line 1597  sub SortStudents { Line 959  sub SortStudents {
     my $sortBy = '';      my $sortBy = '';
     if(defined($cache->{'sort'})) {      if(defined($cache->{'sort'})) {
         $sortBy = ':'.$cache->{'sort'};          $sortBy = ':'.$cache->{'sort'};
       } else {
           $sortBy = ':fullname';
     }      }
     my @order = sort { $cache->{$a.$sortBy} cmp $cache->{$b.$sortBy} ||      my @order = sort { lc($cache->{$a.$sortBy}) cmp lc($cache->{$b.$sortBy}) ||
                        $cache->{$a.':fullname'} cmp $cache->{$b.':fullname'} }                          lc($cache->{$a.':fullname'}) cmp lc($cache->{$b.':fullname'}) } 
                 @sorted1Students;                  @sorted1Students;
   
     return \@order;      return \@order;
 }  }
   
   =pod
   
   =item &SpaceColumns()
   
   Determines the width of all the columns in the chart.  It is based on
   the max of the data for that column and its header.
   
   =over 4
   
   Input: $students, $studentInformation, $headings, $ChartDB
   
   $students: An array pointer to a list of students (username:domain)
   
   $studentInformatin: The type of data for the student information.  It is
   used as part of the key in $CacheData.
   
   $headings: The name of the student information columns.
   
   $ChartDB: The name of the cache database which is opened for read/write.
   
   Output: None - All data stored in cache.
   
   =back
   
   =cut
   
   sub SpaceColumns {
       my ($students,$studentInformation,$headings,$cache)=@_;
   
       # Initialize Lengths
       for(my $index=0; $index<(scalar @$headings); $index++) {
           my @titleLength=split(//,$headings->[$index]);
           $cache->{$studentInformation->[$index].':columnWidth'}=
               scalar @titleLength;
       }
   
       foreach my $name (@$students) {
           foreach (@$studentInformation) {
               my @dataLength=split(//,$cache->{$name.':'.$_});
               my $length=(scalar @dataLength);
               if($length > $cache->{$_.':columnWidth'}) {
                   $cache->{$_.':columnWidth'}=$length;
               }
           }
       }
   
       return;
   }
   
 sub PrepareData {  sub PrepareData {
     my ($c, $cacheDB)=@_;      my ($c, $cacheDB, $studentInformation, $headings,$r)=@_;
   
     # Test for access to the cache data      # Test for access to the cache data
     my $courseID=$ENV{'request.course.id'};      my $courseID=$ENV{'request.course.id'};
Line 1615  sub PrepareData { Line 1028  sub PrepareData {
         $isRecalculate=1;          $isRecalculate=1;
     }      }
   
     my $isCached = &Apache::loncoursedata::TestCacheData($cacheDB,       my $isCached = &Apache::loncoursedata::TestCacheData($cacheDB,
                                                          $isRecalculate);                                                           $isRecalculate);
     if($isCached < 0) {      if($isCached < 0) {
         return "Unable to tie hash to db file.";          return "Unable to tie hash to db file.";
Line 1623  sub PrepareData { Line 1036  sub PrepareData {
   
     # Download class list information if not using cached data      # Download class list information if not using cached data
     my %cache;      my %cache;
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_WRCREAT,0640)) {      unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_WRCREAT(),0640)) {
         return "Unable to tie hash to db file.";          return "Unable to tie hash to db file.";
     }      }
   
     if(!$isCached) {  #    if(!$isCached) {
         my $processTopResourceMapReturn=          my $processTopResourceMapReturn=
             &Apache::loncoursedata::ProcessTopResourceMap(\%cache, $c);              &Apache::loncoursedata::ProcessTopResourceMap(\%cache, $c);
         if($processTopResourceMapReturn ne 'OK') {          if($processTopResourceMapReturn ne 'OK') {
             untie(%cache);              untie(%cache);
             return $processTopResourceMapReturn;              return $processTopResourceMapReturn;
         }          }
     }   #   }
   
     if($c->aborted()) {      if($c->aborted()) {
         untie(%cache);          untie(%cache);
Line 1665  sub PrepareData { Line 1078  sub PrepareData {
   
     &ProcessFormData(\%cache);      &ProcessFormData(\%cache);
     my $students = &SortStudents(\%cache);      my $students = &SortStudents(\%cache);
       &SpaceColumns($students, $studentInformation, $headings, \%cache);
       $cache{'updateTime:columnWidth'}=24;
   
     if($cache{'download'} ne 'false') {      my $download = $cache{'download'};
         my $who = $cache{'download'};      my $downloadAll = $cache{'DownloadAll'};
         my $courseData =       my @allStudents=();
             &Apache::loncoursedata::DownloadStudentCourseInformation(      if($download ne 'false') {
                                              $who, $courseID,   
                                              $cache{$who.':lastDownloadTime'});  
         &Apache::loncoursedata::ProcessStudentData(\%cache, $courseData, $who);  
         $cache{'download'} = 'false';          $cache{'download'} = 'false';
     } elsif($cache{'DownloadAll'} ne 'false') {      } elsif($downloadAll ne 'false') {
         my @allStudents;          $cache{'DownloadAll'} = 'false';
         if($cache{'DownloadAll'} eq 'sorted') {          if($downloadAll eq 'sorted') {
             @allStudents = @$students;              @allStudents = @$students;
         } else {          } else {
             @allStudents = split(':::', $cache{'NamesOfStudents'});              @allStudents = split(':::', $cache{'NamesOfStudents'});
         }          }
         foreach (@allStudents) {  
             my $courseData =   
                 &Apache::loncoursedata::DownloadStudentCourseInformation(  
                                              $_, $courseID,   
                                              $cache{$_.':lastDownloadTime'});  
             &Apache::loncoursedata::ProcessStudentData(\%cache, $courseData,   
                                                        $_);  
             if($c->aborted()) {  
                 untie(%cache);  
                 return 'aborted';   
             }  
         }  
         $cache{'DownloadAll'} = 'false';  
     }  
   
     if($c->aborted()) {  
         untie(%cache);  
         return 'aborted';   
     }  
   
     if($c->aborted()) {  
         untie(%cache);  
         return 'aborted';   
     }      }
   
     untie(%cache);      untie(%cache);
   
     return ('OK', $students);      if($download ne 'false') {
 }          my @who = ($download);
           if(&Apache::loncoursedata::DownloadStudentCourseData(\@who, 'false',
 # Create progress                                                               $cacheDB, 'true',
 sub Create_PrgWin {                                                               'false', $courseID,
     $r->print(<<ENDPOP);                                                               $r, $c) ne 'OK') {
     <script>              return 'Stop at download individual';
     popwin=open('','popwin','width=400,height=100');          }
     popwin.document.writeln('<html><body bgcolor="#88DDFF">'+      } elsif($downloadAll ne 'false') {
       '<title>LON-CAPA Statistics</title>'+          if(&Apache::loncoursedata::DownloadStudentCourseData(\@allStudents,
       '<h4>Computation Progress</h4>'+                                                               'false',
       '<form name=popremain>'+                                                               $cacheDB, 'true',
       '<input type=text size=35 name=remaining value=Starting></form>'+                                                               'true', $courseID,
       '</body></html>');                                                               $r, $c) ne 'OK') {
     popwin.document.close();              return 'Stop at download all';
     </script>  
 ENDPOP  
   
     $r->rflush();  
 }  
   
 # update progress  
 sub Update_PrgWin {  
     my ($totalStudents,$index,$name)=@_;  
     $r->print('<script>popwin.document.popremain.remaining.value="'.  
               'Computing '.$index.'/'.$totalStudents.': '.  
               $name.'";</script>');  
     $r->rflush();  
 }  
   
 # close Progress Line  
 sub Close_PrgWin {  
     $r->print('<script>popwin.close()</script>');  
     $r->rflush();   
 }  
   
 # For loading the colored table for display or un-colored for print  
 sub setbgcolor {  
     my $PrintTable=shift;  
     undef %color;  
     if ($PrintTable){  
  $color{"gb"}="#FFFFFF";  
  $color{"red"}="#FFFFFF";  
  $color{"yellow"}="#FFFFFF";  
  $color{"green"}="#FFFFFF";  
  $color{"purple"}="#FFFFFF";  
     } else {  
  $color{"gb"}="#DDFFFF";  
  $color{"red"}="#FFDDDD";  
  $color{"yellow"}="#EEFFCC";  
  $color{"green"}="#DDFFDD";  
  $color{"purple"}="#FFDDFF";  
     }  
   
     return;  
 }  
   
 sub initial {  
     undef %hash;  
     undef %CachData;  
     undef %GraphDat;  
     undef %ConceptData;  
     undef $GData;  
 }  
   
 #---- END HELPER FUNCTIONS ---------------------------------------------------  
   
 sub BuildProblemStatisticsPage {  
     my ($cacheDB, $students, $courseID, $c)=@_;  
   
     my %cache;  
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER,0640)) {  
         $r->print('<html><body>Unable to tie database.</body></html>');  
         return;  
     }  
   
     my $Ptr = '';  
     $Ptr .= '<table border="0"><tbody>';  
     $Ptr .= '<tr><td align="right"><b>Select Map</b></td>'."\n";  
     $Ptr .= '<td align="left">';  
     $Ptr .= &Apache::lonhtmlcommon::MapOptions(\%cache, 'ProblemStatistics');  
     $Ptr .= '</td></tr>'."\n";  
     $r->print($Ptr);  
     $r->print(&AscendOrderOptions());  
     $r->print(&ProblemStatisticsButtons(\%cache));  
     $r->print('</table>');  
   
     $r->print(&ProblemStatisticsLegend());  
   
     untie(%cache);  
     foreach (@$students) {  
         my $courseData =   
             &Apache::loncoursedata::DownloadStudentCourseInformation($_,   
                                                                     $courseID);  
         last if ($c->aborted());  
         if(tie(%cache,'GDBM_File',$cacheDB,&GDBM_WRCREAT,0640)) {  
             &Apache::loncoursedata::ProcessStudentData(\%cache,   
                                                        $courseData, $_);  
             untie(%cache);  
         }          }
     }      }
     if($c->aborted()) { return; }  
   
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER,0640)) {  
         $r->print('<html><body>Unable to tie database.</body></html>');  
         return;  
     }  
     my $discriminantFactor;  
     my @list=();  
     foreach (@$students) {  
         $discriminantFactor = &ExtractStudentData(\%cache, $_, \@list);  
     }  
   
     my ($upper, $lower) = &Discriminant($discriminantFactor);  
     my %Header = (0,"Homework Sets Order",1,"#Stdnts",2,"Tries",3,"Mod",  
                   4,"Mean",5,"#YES",6,"#yes",7,"%Wrng",8,"DoDiff",  
                   9,"S.D.",10,"Skew.",11,"D.F.1st",12,"D.F.2nd", 13, "Disc.");  
     &BuildStatisticsTable(\%cache, $discriminantFactor, \@list, \%Header,   
                            $students);  
   
     untie(%cache);  
   
     return;  
 }  
   
 sub BuildDiffGraph {  
     my ($courseID)=@_;  
   
     my $graphData = &GetGraphData('DiffGraph', $courseID);  
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$graphData.'" />');  
   
     return;  
 }  
   
 sub BuildWrongGraph {  
     my ($courseID)=@_;  
   
     my $graphData = &GetGraphData('WrongGraph', $courseID);  
     $r->print('<IMG src="/cgi-bin/graph.gif?'.$graphData.'" />');  
   
     return;  
 }  
   
 sub BuildAnalyzePage {  
     my ($cacheDB, $students, $courseID)=@_;  
   
     my %cache;  
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER,0640)) {  
         $r->print('<html><body>Unable to tie database.</body></html>');  
         return;  
     }  
   
     &ShowOpGraph(\%cache, $students, $courseID);  
   
     untie(%cache);  
   
     return;  
 }  
   
 sub BuildProblemAnalysisPage {  
     my ($cacheDB)=@_;  
   
     my %cache;  
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER,0640)) {  
         $r->print('<html><body>Unable to tie database.</body></html>');  
         return;  
     }  
   
     $r->print(&IntervalOptions());  
     $r->print(&OptionResponseTable(\%cache));  
   
     untie(%cache);      return ('OK', $students);
   
     return;  
 }  }
   
 sub BuildStudentAssessmentPage {  sub DisplayClasslist {
     my ($cacheDB, $students, $courseID, $c)=@_;      my ($r)=@_;
       #
     my %cache;      my @Fields = ('fullname','username','domain','id','section');
       #
     my $Ptr = '';      my $Str='';
     $Ptr .= '<table border="0"><tbody>';      $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
     $r->print($Ptr);      $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
       foreach my $field (@Fields) {
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER,0640)) {          $Str .= '<th><a href="/adm/statistics?sort='.$field.'">'.$field.
         $r->print('<html><body>Unable to tie database.</body></html>');              '</a></th>';
         return;  
     }      }
       $Str .= '</tr>'."\n";
     my $selectedName = $cache{'StudentAssessmentStudent'};      #
     for(my $index=0;       my $alternate = 0;
         ($selectedName ne 'All Students') && ($index<(scalar @$students));       foreach my $student (@Students) {
         $index++) {          my $sname = $student->{'username'}.':'.$student->{'domain'};
         my $fullname = $cache{$students->[$index].':fullname'};          if($alternate) {
         if($fullname eq $selectedName) {              $Str .= '<tr bgcolor="#ffffe6">';
             if($cache{'StudentAssessmentMove'} eq 'next') {          } else {
                 if($index == ((scalar @$students) - 1)) {              $Str .= '<tr bgcolor="#ffffc6">';
                     $selectedName = $students->[0];          }
                 } else {          $alternate = ($alternate + 1) % 2;
                     $selectedName = $students->[$index+1];          #
                 }          foreach my $field (@Fields) {
             } elsif($cache{'StudentAssessmentMove'} eq 'previous') {              $Str .= '<td>';
                 if($index == 0) {              if ($field eq 'fullname') {
                     $selectedName = $students->[-1];                  $Str .= '<a href="/adm/statistics?reportSelected=';
                 } else {                  $Str .= &Apache::lonnet::escape('Student Assessment');
                     $selectedName = $students->[$index-1];                  $Str .= '&StudentAssessmentStudent=';
                 }                  $Str .= &Apache::lonnet::escape($sname).'">';
                   $Str .= $student->{$field}.'&nbsp';
                   $Str .= '</a>';
             } else {              } else {
                 $selectedName = $students->[$index];                  $Str .= $student->{$field};
             }              }
             last;              $Str .= '</td>';
         }  
     }  
   
     $Ptr .= '<tr><td align="right"><b>Select Map</b></td>'."\n";  
     $Ptr .= '<td align="left">';  
     $Ptr .= &Apache::lonhtmlcommon::MapOptions(\%cache, 'StudentAssessment');  
     $Ptr .= '</td></tr>'."\n";  
     $Ptr .= '<tr><td align="right"><b>Select Student</b></td>'."\n";  
     $Ptr .= '<td align="left">'."\n";  
     $Ptr .= &Apache::lonhtmlcommon::StudentOptions(\%cache, $students,   
                                                    $selectedName,   
                                                    'StudentAssessment');  
     $Ptr .= '</td></tr>'."\n";  
     untie(%cache);  
   
     $Ptr .= '<tr><td></td><td align="left">';  
     $Ptr .= '<input type="submit" name="CreateStudentAssessment" ';  
     $Ptr .= 'value="Create Student Report" />';  
     $Ptr .= '&nbsp&nbsp&nbsp';  
     $Ptr .= '<input type="submit" name="PreviousStudent" ';  
     $Ptr .= 'value="Previous Student" />';  
     $Ptr .= '&nbsp&nbsp&nbsp';  
     $Ptr .= '<input type="submit" name="NextStudent" ';  
     $Ptr .= 'value="Next Student" />';  
     $Ptr .= '&nbsp&nbsp&nbsp';  
     $Ptr .= '</td></tr></tbody></table>'."\n";  
     $r->print($Ptr);  
   
     if($selectedName eq 'No Student Selected') {  
  $r->print('<h3><font color=blue>WARNING: ');  
         $r->print('Please select a student</font></h3>');  
         return;  
     }  
   
     my $selected=0;  
     foreach (@$students) {  
         next if ($_ ne $selectedName &&   
                  $selectedName ne 'All Students');  
         $selected = 1;  
         my $courseData =   
             &Apache::loncoursedata::DownloadStudentCourseInformation($_,   
                                                                     $courseID);  
         last if ($c->aborted());  
         if(tie(%cache,'GDBM_File',$cacheDB,&GDBM_WRCREAT,0640)) {  
             &Apache::loncoursedata::ProcessStudentData(\%cache,   
                                                        $courseData, $_);  
             if(!$c->aborted()) { $r->print(&StudentReport(\%cache, $_)); }  
             untie(%cache);  
         }          }
           $Str .= "</tr>\n";
     }      }
     if($selected == 0) {      $Str .= '</table></td></tr></table>'."\n";
  $r->print('<h3><font color=blue>WARNING: ');      #
         $r->print('Please select a student</font></h3>');      $r->print($Str);
         return;      $r->rflush();
     }      #
   
     return;      return;
 }  }
   
 sub BuildClasslist {  sub BuildClasslist {
     my ($cacheDB,$students,$studentInformation,$headings,$spacePadding)=@_;      my ($cacheDB,$students,$studentInformation,$headings,$r)=@_;
   
     my %cache;      my %cache;
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER,0640)) {      unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER(),0640)) {
         return '<html><body>Unable to tie database.</body></html>';          return '<html><body>Unable to tie database.</body></html>';
     }      }
   
   #    my $Ptr = '';
   #    $Ptr .= '<table border="0"><tbody>';
   #    $Ptr .= '<tr><td align="right"><b>Select Sections</b>';
   #    $Ptr .= '</td>'."\n";
   #    $Ptr .= '<td align="left">'."\n";
   #    my @sectionsSelected = split(':',$cache{'sectionsSelected'});
   #    my @sections = split(':',$cache{'sectionList'});
   #    $Ptr .= &Apache::lonhtmlcommon::MultipleSectionSelect(\@sections,
   #                                                          \@sectionsSelected,
   #                                                          'Statistics');
   #    $Ptr .= '</td></tr></table><br>';
   #    $r->print($Ptr);
   #    $r->rflush();
   #    my %mySections = ();
   #    foreach (@sections) { $mySections{$_} = 'True'; }
   #    $r->print("<br>$cache{'sectionsSelected'}<br>");
   
     my $Str='';      my $Str='';
     $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";      $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
     $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";      $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
   
     my $displayString = '<td align="left"><a href="/adm/statistics?';      my $displayString = '<td align="left"><a href="/adm/statistics?';
     $displayString .= 'sort=LINKDATA">DISPLAYDATA&nbsp</a></td>'."\n";      $displayString .= 'sort=LINKDATA">DISPLAYDATA&nbsp</a></td>'."\n";
     $Str .= &Apache::lonhtmlcommon::CreateStudentInformationHeadings(\%cache,      $Str .= &Apache::lonhtmlcommon::CreateHeadings(\%cache,
                                                            $studentInformation,                                                     $studentInformation,
                                                            $headings,                                                     $headings, $displayString);
                                                            $displayString);  
     $Str .= '<td align="left">';  
     $Str .= '<a href="/adm/statistics?sort=lastDownloadTime">';  
     $Str .= 'Last Updated&nbsp&nbsp</a></td>'."\n";  
     $Str .= '</tr>'."\n";      $Str .= '</tr>'."\n";
   
     my $alternate=0;      my $alternate=0;
     foreach (@$students) {      foreach (@$students) {
   #        if ($mySections{$cache{$_.':'.'section'}} ne 'True') {next;}
         my ($username, $domain) = split(':', $_);          my ($username, $domain) = split(':', $_);
         if($alternate) {          if($alternate) {
             $Str .= '<tr bgcolor="#ffffe6"><td>';              $Str .= '<tr bgcolor="#ffffe6">';
         } else {          } else {
             $Str .= '<tr bgcolor="#ffffc6"><td>';              $Str .= '<tr bgcolor="#ffffc6">';
         }          }
         $alternate = ($alternate + 1) % 2;          $alternate = ($alternate + 1) % 2;
         foreach my $data (@$studentInformation) {          foreach my $data (@$studentInformation) {
               $Str .= '<td>';
             if($data eq 'fullname') {              if($data eq 'fullname') {
                 $Str .= '<a href="/adm/statistics?reportSelected=';                  $Str .= '<a href="/adm/statistics?reportSelected=';
                 $Str .= &Apache::lonnet::escape('Student Assessment').'">';                  $Str .= &Apache::lonnet::escape('Student Assessment');
             }                  $Str .= '&StudentAssessmentStudent=';
                   $Str .= &Apache::lonnet::escape($cache{$_.':'.$data}).'">';
             $Str .= $cache{$_.':'.$data}.'&nbsp';                  $Str .= $cache{$_.':'.$data}.'&nbsp';
   
             if($data eq 'fullname') {  
                 $Str .= '</a>';                  $Str .= '</a>';
               } elsif($data eq 'updateTime') {
                   $Str .= '<a href="/adm/statistics?reportSelected=';
                   $Str .= &Apache::lonnet::escape('Class list');
                   $Str .= '&download='.$_.'">';
                   $Str .= $cache{$_.':'.$data}.'&nbsp';
                   $Str .= '&nbsp</a>';
               } else {
                   $Str .= $cache{$_.':'.$data}.'&nbsp';
             }              }
   
             $Str .= '</td><td>';              $Str .= '</td>'."\n";
         }  
   
         $Str .= '<a href="/adm/statistics?download='.$_.'">';  
         my $downloadTime = $cache{$_.':lastDownloadTime'};  
         if($downloadTime ne 'Not downloaded') {  
             $downloadTime = localtime($downloadTime);  
         }          }
         $Str .= $downloadTime;  
   
         $Str .= '&nbsp</a></td></tr>'."\n";  
     }      }
   
       $Str .= '</tr>'."\n";
     $Str .= '</table></td></tr></table>'."\n";      $Str .= '</table></td></tr></table>'."\n";
       $r->print($Str);
       $r->rflush();
   
     untie(%cache);      untie(%cache);
   
       return;
   }
   
   sub CreateMainMenu {
       my ($status, $reports)=@_;
   
       my $Str = '';
   
       $Str .= '<table border="0"><tbody><tr>'."\n";
       $Str .= '<td></td>'."\n";
       $Str .= '<td align="center"><b>Select a Report</b></td>'."\n";
       $Str .= '<td align="center"><b>Student Status</b></td></tr>'."\n";
       $Str .= '<tr>'."\n";
       $Str .= '<td align="center"><input type="submit" name="Refresh" ';
       $Str .= 'value="Update Display" /></td>'."\n";
       $Str .= '<td align="center">';
       $Str .= '<select name="reportSelected" onchange="document.';
       $Str .= 'Statistics.submit()">'."\n";
   
       foreach (sort(keys(%$reports))) {
           next if($_ eq 'reportSelected');
           $Str .= '<option name="'.$_.'"';
           if($reports->{'reportSelected'} eq $reports->{$_}) {
               $Str .= ' selected=""';
           }
           $Str .= '>'.$reports->{$_}.'</option>'."\n";
       }
       $Str .= '</select></td>'."\n";
   
       $Str .= '<td align="center">';
       $Str .= &Apache::lonhtmlcommon::StatusOptions($status, 'Statistics');
       $Str .= '</td>'."\n";
   
       $Str .= '</tr></tbody></table>'."\n";
       $Str .= '<hr>'."\n";
   
     return $Str;      return $Str;
 }  }
   
Line 2046  sub BuildStatistics { Line 1285  sub BuildStatistics {
     my ($r)=@_;      my ($r)=@_;
   
     my $c = $r->connection;      my $c = $r->connection;
     my @studentInformation=('fullname','section','id','domain','username');      my @studentInformation=('fullname','section','id','domain','username',
     my @headings=('Full Name', 'Section', 'PID', 'Domain', 'User Name');                              'updateTime');
     my $spacePadding = '   ';      my @headings=('Full Name', 'Section', 'PID', 'Domain', 'User Name',
                     'Last Updated');
       my $spacing = '   ';
   
     my %reports = ('classlist'          => 'Class list',      my %reports = ('classlist'          => 'Class list',
                    'problem_statistics' => 'Problem Statistics',                     'problem_statistics' => 'Problem Statistics',
                    'student_assessment' => 'Student Assessment',                     'student_assessment' => 'Student Assessment',
      'percentage'         => 'Correct-problems Plot',
   #                   'activitylog'        => 'Activity Log',
                    'reportSelected'     => 'Class list');                     'reportSelected'     => 'Class list');
   
     my %cache;      my %cache;
Line 2059  sub BuildStatistics { Line 1303  sub BuildStatistics {
     my $cacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".      my $cacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".
                   "_$ENV{'user.domain'}_$courseID\_statistics.db";                    "_$ENV{'user.domain'}_$courseID\_statistics.db";
   
     &setbgcolor(0);      $r->print(&Apache::lonhtmlcommon::Title('Course Statistics and Charts'));
     my ($returnValue, $students) = &PrepareData($c, $cacheDB);  
       my ($returnValue, $students) = &PrepareData($c, $cacheDB,
                                                   \@studentInformation,
                                                   \@headings,$r);
     if($returnValue ne 'OK') {      if($returnValue ne 'OK') {
         $r->print('<html><body>'.$returnValue."\n".'</body></html>');          $r->print($returnValue."\n".'</body></html>');
         return OK;          return OK;
     }      }
       if(!$c->aborted()) {
           &Apache::loncoursedata::CheckForResidualDownload($cacheDB,
                                                            'true', 'true',
                                                            $courseID,
                                                            $r, $c);
       }
   
     my $GoToPage;      my $GoToPage;
     if(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER,0640)) {      if(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER(),0640)) {
         $GoToPage = $cache{'reportSelected'};          $GoToPage = $cache{'reportSelected'};
         $reports{'reportSelected'} = $cache{'reportSelected'};          $reports{'reportSelected'} = $cache{'reportSelected'};
 #        if(defined($cache{'reportKey'}) && $cache{'reportKey'} ne 'false') {          if(defined($cache{'reportKey'}) &&
 #            $reports{$cache{'reportKey'}} = $cache{'reportSelected'};             !exists($reports{$cache{'reportKey'}}) &&
 #        }             $cache{'reportKey'} ne 'false') {
               $reports{$cache{'reportKey'}} = $cache{'reportSelected'};
           }
   
         if(defined($cache{'OptionResponses'})) {          if(defined($cache{'OptionResponses'})) {
             $reports{'problem_analysis'} = 'Problem Analysis';              $reports{'problem_analysis'} = 'Option Response Analysis';
         }          }
   
         $r->print(&Apache::lonhtmlcommon::Title('LON-CAPA Statistics'));  
         $r->print('<form name="Statistics" ');          $r->print('<form name="Statistics" ');
         $r->print('method="post" action="/adm/statistics">');          $r->print('method="post" action="/adm/statistics">');
         $r->print(&Apache::lonhtmlcommon::CreateStatisticsMainMenu(          $r->print(&CreateMainMenu($cache{'Status'}, \%reports));
                                                              $cache{'Status'},           $r->rflush();
                                                              \%reports));  
         untie(%cache);          untie(%cache);
     } else {      } else {
         $r->print('<html><body>Unable to tie database.</body></html>');          $r->print('<html><body>Unable to tie database.</body></html>');
Line 2091  sub BuildStatistics { Line 1344  sub BuildStatistics {
     }      }
   
     if($GoToPage eq 'Activity Log') {      if($GoToPage eq 'Activity Log') {
         &Activity();          &Apache::lonproblemstatistics::Activity();
     } elsif($GoToPage eq 'Problem Statistics') {      } elsif($GoToPage eq 'Problem Statistics') {
         &BuildProblemStatisticsPage($cacheDB, $students, $courseID, $c);          &Apache::lonproblemstatistics::BuildProblemStatisticsPage($cacheDB,
     } elsif($GoToPage eq 'Problem Analysis') {                                                                    $students,
         &BuildProblemAnalysisPage($cacheDB);                                                                    $courseID,
                                                                     $c,$r);
       } elsif($GoToPage eq 'Option Response Analysis') {
           &Apache::lonproblemanalysis::BuildProblemAnalysisPage($cacheDB, $r);
     } elsif($GoToPage eq 'Student Assessment') {      } elsif($GoToPage eq 'Student Assessment') {
         &BuildStudentAssessmentPage($cacheDB, $students, $courseID, $c);          &Apache::lonstudentassessment::BuildStudentAssessmentPage($r, $c);
     } elsif($GoToPage eq 'Analyze') {      } elsif($GoToPage eq 'Analyze') {
         &BuildAnalyzePage($cacheDB, $students, $courseID);          &Apache::lonproblemanalysis::BuildAnalyzePage($cacheDB, $students,
     } elsif($GoToPage eq 'DoDiffGraph') {                                                        $courseID, $r);
         &BuildDiffGraph($courseID);      } elsif($GoToPage eq 'DoDiffGraph' || $GoToPage eq 'PercentWrongGraph') {
     } elsif($GoToPage eq 'PercentWrongGraph') {          my $courseDescription = $ENV{'course.'.$courseID.'.description'};
         &BuildWrongGraph($courseID);          $courseDescription =~ s/\ /"_"/eg;
           &Apache::lonproblemstatistics::BuildGraphicChart($GoToPage, $cacheDB,
                                                            $courseDescription,
                                                            $students, $courseID,
                                                            $r, $c);
     } elsif($GoToPage eq 'Class list') {      } elsif($GoToPage eq 'Class list') {
         $r->print(&BuildClasslist($cacheDB, $students, \@studentInformation,          &DisplayClasslist($r);
                                   \@headings, $spacePadding));  #        &BuildClasslist($cacheDB, $students, \@studentInformation,
   #                        \@headings, $r);
       } elsif($GoToPage eq 'Correct-problems Plot') {
    &Apache::lonpercentage::BuildPercentageGraph($cacheDB, $students,
        $courseID, $c, $r);
     }      }
   
     $r->print('</form>'."\n");      $r->print('</form>'."\n");
Line 2119  sub BuildStatistics { Line 1383  sub BuildStatistics {
 # ================================================================ Main Handler  # ================================================================ Main Handler
   
 sub handler {  sub handler {
     $r=shift;      my $r=shift;
     &initial();  
   #    $jr = $r;
   
       my $loaderror=&Apache::lonnet::overloaderror($r);
       if ($loaderror) { return $loaderror; }
       $loaderror=
          &Apache::lonnet::overloaderror($r,
            $ENV{'course.'.$ENV{'request.course.id'}.'.home'});
       if ($loaderror) { return $loaderror; }
   
     unless(&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {      unless(&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {
         $ENV{'user.error.msg'}=          $ENV{'user.error.msg'}=
         $r->uri.":vgr:0:0:Cannot view grades for complete course";          $r->uri.":vgr:0:0:Cannot view grades for complete course";
         return HTTP_NOT_ACCEPTABLE;           return HTTP_NOT_ACCEPTABLE;
     }      }
   
     # Set document type for header only      # Set document type for header only
Line 2143  sub handler { Line 1415  sub handler {
     unless($ENV{'request.course.fn'}) {      unless($ENV{'request.course.fn'}) {
  my $requrl=$r->uri;   my $requrl=$r->uri;
         $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";          $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";
         return HTTP_NOT_ACCEPTABLE;           return HTTP_NOT_ACCEPTABLE;
     }      }
   
     $r->content_type('text/html');      $r->content_type('text/html');
     $r->send_http_header;      $r->send_http_header;
   
       &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                               ['sort',
                                                'StudentAssessmentStudent']);
   
       &PrepareClasslist($r);
   
       &PrepareCourseData($r);
   
     &BuildStatistics($r);      &BuildStatistics($r);
   
     return OK;      return OK;
 }  }
 1;  1;
   
   =pod
   
   =back
   
   =cut
   
 __END__  __END__
   

Removed from v.1.29  
changed lines
  Added in v.1.63


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>