[BACK]Return to lonstatistics.pm CVS log [TXT] [DIR] Up to [LON-CAPA] / loncom / interface

Diff for /loncom/interface/lonstatistics.pm between versions 1.64 and 1.92

version 1.64, 2003/03/07 18:46:38 version 1.92, 2003/12/24 21:54:58
Line 48  Main handler for statistics and chart. Line 48  Main handler for statistics and chart.
     use Apache::loncoursedata;      use Apache::loncoursedata;
     use Apache::lonhtmlcommon;      use Apache::lonhtmlcommon;
     use Apache::lonproblemanalysis;      use Apache::lonproblemanalysis;
       use Apache::lonsubmissiontimeanalysis;
     use Apache::lonproblemstatistics;      use Apache::lonproblemstatistics;
     use Apache::lonstudentassessment;      use Apache::lonstudentassessment;
     use Apache::lonpercentage;      use Apache::lonpercentage;
     use GDBM_File;      use Apache::lonmysql;
   
 =over 4  =over 4
   
 =cut  =cut
Line 80  use Apache::loncommon; Line 80  use Apache::loncommon;
 use Apache::loncoursedata;  use Apache::loncoursedata;
 use Apache::lonhtmlcommon;  use Apache::lonhtmlcommon;
 use Apache::lonproblemanalysis();  use Apache::lonproblemanalysis();
   use Apache::lonsubmissiontimeanalysis();
 use Apache::lonproblemstatistics();  use Apache::lonproblemstatistics();
 use Apache::lonstudentassessment();  use Apache::lonstudentassessment();
 use Apache::lonpercentage;  use Apache::lonpercentage;
 use GDBM_File;  use Apache::lonmysql;
   use Apache::lonlocal;
   use Time::HiRes;
   
 #######################################################  #######################################################
 #######################################################  #######################################################
Line 207  upon the calling context. Line 209  upon the calling context.
 #######################################################  #######################################################
 #######################################################  #######################################################
 sub PrepareClasslist {  sub PrepareClasslist {
     my $r = shift;  
     my %Sections;      my %Sections;
     &clear_classlist_variables();      &clear_classlist_variables();
     #      #
Line 231  sub PrepareClasslist { Line 232  sub PrepareClasslist {
         }          }
     }      }
     #      #
       # Deal with instructors with restricted section access
       if ($ENV{'request.course.sec'} !~ /^\s*$/) {
           @SelectedSections = ($ENV{'request.course.sec'});
       }
       #
     # Set up %StudentData      # Set up %StudentData
     @StudentDataOrder = qw/fullname username domain id section status/;      @StudentDataOrder = qw/fullname username domain id section status/;
     foreach my $field (@StudentDataOrder) {      foreach my $field (@StudentDataOrder) {
Line 239  sub PrepareClasslist { Line 245  sub PrepareClasslist {
         $StudentData{$field}->{'width'} =           $StudentData{$field}->{'width'} = 
                                $StudentData{$field}->{'base_width'};                                 $StudentData{$field}->{'base_width'};
     }      }
       #
       # get the status requested
       my $requested_status = 'Active';
       $requested_status = $ENV{'form.Status'} if (exists($ENV{'form.Status'}));
     #      #
     # Process the classlist      # Process the classlist
     while (my ($student,$student_data) = each (%$classlist)) {      while (my ($student,$student_data) = each (%$classlist)) {
Line 267  sub PrepareClasslist { Line 276  sub PrepareClasslist {
         #          #
         # Only put in the list those students we are interested in          # Only put in the list those students we are interested in
         foreach my $sect (@SelectedSections) {          foreach my $sect (@SelectedSections) {
             if (($sect eq 'all') || ($section eq $sect)) {              if ( (($sect eq 'all') || 
                     ($section eq $sect)) &&
                    (($studenthash->{'status'} eq $requested_status) || 
                     ($requested_status eq 'Any')) 
                    ){
                 push (@Students,$studenthash);                  push (@Students,$studenthash);
                 last;                  last;
             }              }
Line 275  sub PrepareClasslist { Line 288  sub PrepareClasslist {
     }      }
     #      #
     # Put the consolidated section data in the right place      # Put the consolidated section data in the right place
     @Sections = sort {$a cmp $b} keys(%Sections);      if ($ENV{'request.course.sec'} !~ /^\s*$/) {
     unshift(@Sections,'all'); # Put 'all' at the front of the list          @Sections = ($ENV{'request.course.sec'});
       } else {
           @Sections = sort {$a cmp $b} keys(%Sections);
           unshift(@Sections,'all'); # Put 'all' at the front of the list
       }
     #      #
     # Sort the Students      # Sort the Students
     my $sortby = 'fullname';      my $sortby = 'fullname';
Line 286  sub PrepareClasslist { Line 303  sub PrepareClasslist {
     @Students = @TmpStudents;      @Students = @TmpStudents;
     #       # 
     # Now deal with that current student thing....      # Now deal with that current student thing....
     if (exists($ENV{'form.StudentAssessmentStudent'})) {      $curr_student = undef;
       if (exists($ENV{'form.SelectedStudent'})) {
         my ($current_uname,$current_dom) =           my ($current_uname,$current_dom) = 
             split(':',$ENV{'form.StudentAssessmentStudent'});              split(':',$ENV{'form.SelectedStudent'});
         my $i;          my $i;
         for ($i = 0; $i<=$#Students; $i++) {          for ($i = 0; $i<=$#Students; $i++) {
             next if (($Students[$i]->{'username'} ne $current_uname) ||               next if (($Students[$i]->{'username'} ne $current_uname) || 
Line 296  sub PrepareClasslist { Line 314  sub PrepareClasslist {
             $curr_student = $Students[$i];              $curr_student = $Students[$i];
             last; # If we get here, we have our student.              last; # If we get here, we have our student.
         }          }
         if ($i == 0) {          if (defined($curr_student)) {
             $prev_student = 'none';              if ($i == 0) {
         } else {                  $prev_student = undef;
             $prev_student = $Students[$i-1];              } else {
         }                  $prev_student = $Students[$i-1];
         if ($i == $#Students) {              }
             $next_student = 'none';              if ($i == $#Students) {
         } else {                  $next_student = undef;
             $next_student = $Students[$i+1];              } else {
                   $next_student = $Students[$i+1];
               }
         }          }
     }      }
     #      #
Line 315  sub PrepareClasslist { Line 335  sub PrepareClasslist {
             @SelectedStudentData = ($ENV{'form.StudentData'});              @SelectedStudentData = ($ENV{'form.StudentData'});
         }          }
     } else {      } else {
         @SelectedStudentData = ('fullname');          @SelectedStudentData = ('username');
     }      }
     foreach (@SelectedStudentData) {      foreach (@SelectedStudentData) {
         if ($_ eq 'all') {          if ($_ eq 'all') {
Line 327  sub PrepareClasslist { Line 347  sub PrepareClasslist {
     return;      return;
 }  }
   
   
   #######################################################
   #######################################################
   
   =pod
   
   =item get_students
   
   Returns a list of the selected students
   
   =cut
   
   #######################################################
   #######################################################
   sub get_students {
       if (! @Students) {
           &PrepareClasslist()
       }
       return @Students;
   }
   
 #######################################################  #######################################################
 #######################################################  #######################################################
   
Line 342  selected student. Line 383  selected student.
 #######################################################  #######################################################
 #######################################################  #######################################################
 sub current_student {   sub current_student { 
     if (defined($curr_student)) {      return $curr_student;
         return $curr_student;  
     } else {  
         return 'All Students';  
     }  
 }  }
   
 #######################################################  #######################################################
Line 364  in the list of students.  Or something. Line 401  in the list of students.  Or something.
 #######################################################  #######################################################
 #######################################################  #######################################################
 sub previous_student {   sub previous_student { 
     if (defined($prev_student)) {      return $prev_student;
         return $prev_student;  
     } else {  
         return 'No Student Selected';  
     }  
 }  }
   
 #######################################################  #######################################################
Line 386  to be viewed. Line 419  to be viewed.
 #######################################################  #######################################################
 #######################################################  #######################################################
 sub next_student {   sub next_student { 
     if (defined($next_student)) {      return $next_student;
         return $next_student;  
     } else {  
         return 'No Student Selected';  
     }  
 }  }
   
 #######################################################  #######################################################
Line 493  sub PrepareCourseData { Line 522  sub PrepareCourseData {
         my $name_length = length($seq->{'title'});          my $name_length = length($seq->{'title'});
         my $num_parts = $seq->{'num_assess_parts'};          my $num_parts = $seq->{'num_assess_parts'};
         #          #
         # The number of columns needed for the summation text:           # Use 3 digits for each the sum and total, which means 7 total...
         #    " 1/5" = 1+3 columns, " 10/99" = 1+5 columns          my $num_col = $num_parts+7;
         my $sum_length = 1+1+2*(length($num_parts));  
         my $num_col = $num_parts+$sum_length;  
         if ($num_col < $name_length) {          if ($num_col < $name_length) {
             $num_col = $name_length;              $num_col = $name_length;
         }          }
Line 724  sub MapSelect { Line 751  sub MapSelect {
 Returns html for a selection box allowing the user to choose one (or more)   Returns html for a selection box allowing the user to choose one (or more) 
 of the sections in the course.    of the sections in the course.  
   
   Uses the package variables @Sections and @SelectedSections
 =over 4  =over 4
   
 =item $elementname The name of the HTML form element  =item $elementname The name of the HTML form element
Line 732  of the sections in the course. Line 760  of the sections in the course.
   
 =item $numvisible The number of options to be visible  =item $numvisible The number of options to be visible
   
 =item $selected Array ref to the names of the already selected sections.  
 If undef, $ENV{'form.'.$elementname} is used.    
 If $ENV{'form.'.$elementname} is also empty, none will be selected.  
   
 =item $restriction Code reference to subroutine which returns true or   
 false.  The code must expect a reference to a sequence data structure.  
   
 =back  =back
   
 =cut  =cut
Line 751  sub SectionSelect { Line 772  sub SectionSelect {
         return;          return;
     }      }
     #      #
       # Make sure we have the data we need to continue
       if (! @Sections) {
           &PrepareClasslist()
       }
       #
     # Build the form element      # Build the form element
     my $Str = "\n";      my $Str = "\n";
     $Str .= '<select name="'.$elementname.'" ';      $Str .= '<select name="'.$elementname.'" ';
Line 774  sub SectionSelect { Line 800  sub SectionSelect {
     return $Str;      return $Str;
 }  }
   
 ##############################################  #######################################################
 ##############################################  #######################################################
   
 sub CheckFormElement {  
     my ($cache, $ENVName, $cacheName, $default)=@_;  
   
     if(defined($ENV{'form.'.$ENVName})) {  
         $cache->{$cacheName} = $ENV{'form.'.$ENVName};  
     } elsif(!defined($cache->{$cacheName})) {  
         $cache->{$cacheName} = $default;  
     } else {  
         $ENV{'form.'.$ENVName} = $cache->{$cacheName};  
     }  
     return;  
 }  
   
 sub ProcessFormData{  
     my ($cache)=@_;  
   
     $cache->{'reportKey'} = 'false';  
   
     &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},  
                                             ['download',  
                                              'reportSelected',  
                                              'StudentAssessmentStudent',  
                                              'ProblemStatisticsSort']);  
     &CheckFormElement($cache, 'DownloadAll', 'DownloadAll', 'false');  
     if ($cache->{'DownloadAll'} ne 'false') {  
         # Clean the hell out of that cache!  
         # We cannot untie the hash at this scope (stupid libgd :( )  
         # So, remove every single key.  What a waste of time....  
         # Of course, if you are doing this you are probably resigned  
         # to waiting a while.  
         &Apache::lonnet::logthis("Cleaning out the cache file");  
         while (my ($key,undef)=each(%$cache)) {  
             next if ($key eq 'DownloadAll');  
             delete($cache->{$key});  
         }  
     }  
     &CheckFormElement($cache, 'Status', 'Status', 'Active');  
     &CheckFormElement($cache, 'postdata', 'reportSelected', 'Class list');  
     &CheckFormElement($cache, 'reportSelected', 'reportSelected',   
                       'Class list');  
     $cache->{'reportSelected'} =   
         &Apache::lonnet::unescape($cache->{'reportSelected'});  
     &CheckFormElement($cache, 'sort', 'sort', 'fullname');  
     &CheckFormElement($cache, 'download', 'download', 'false');  
     &CheckFormElement($cache, 'StatisticsMaps',   
                       'StatisticsMaps', 'All Maps');  
     &CheckFormElement($cache, 'StatisticsProblemSelect',  
       'StatisticsProblemSelect', 'All Problems');  
     &CheckFormElement($cache, 'StatisticsPartSelect',  
       'StatisticsPartSelect', 'All Parts');  
     if(defined($ENV{'form.Section'})) {  
         my @sectionsSelected = (ref($ENV{'form.Section'}) ?  
                                @{$ENV{'form.Section'}} :  
                                 ($ENV{'form.Section'}));  
         $cache->{'sectionsSelected'} = join(':', @sectionsSelected);  
     } elsif(!defined($cache->{'sectionsSelected'})) {  
         $cache->{'sectionsSelected'} = $cache->{'sectionList'};  
     }  
   
     # student assessment  
     if(defined($ENV{'form.CreateStudentAssessment'}) ||  
        defined($ENV{'form.NextStudent'}) ||  
        defined($ENV{'form.PreviousStudent'})) {  
         $cache->{'reportSelected'} = 'Student Assessment';  
     }  
     if(defined($ENV{'form.NextStudent'})) {  
         $cache->{'StudentAssessmentMove'} = 'next';  
     } elsif(defined($ENV{'form.PreviousStudent'})) {  
         $cache->{'StudentAssessmentMove'} = 'previous';  
     } else {  
         $cache->{'StudentAssessmentMove'} = 'selected';  
     }  
     &CheckFormElement($cache, 'StudentAssessmentStudent',   
                       'StudentAssessmentStudent', 'All Students');  
     $cache->{'StudentAssessmentStudent'} =   
         &Apache::lonnet::unescape($cache->{'StudentAssessmentStudent'});  
     &CheckFormElement($cache, 'DefaultColumns', 'DefaultColumns', 'false');  
   
     # Problem analysis  
     &CheckFormElement($cache, 'Interval', 'Interval', '1');  
   
     # ProblemStatistcs  
     &CheckFormElement($cache, 'DisplayCSVFormat',  
                       'DisplayFormat', 'Display Table Format');  
     &CheckFormElement($cache, 'ProblemStatisticsAscend',  
                       'ProblemStatisticsAscend', 'Ascending');  
     &CheckFormElement($cache, 'ProblemStatisticsSort',  
                       'ProblemStatisticsSort', 'Homework Sets Order');  
     &CheckFormElement($cache, 'DisplayLegend', 'DisplayLegend',   
       'Hide Legend');  
     &CheckFormElement($cache, 'SortProblems', 'SortProblems',   
                       'Sort Within Sequence');  
   
     # Search only form elements  
     my @headingColumns=();  
     my @sequenceColumns=();  
     my $foundColumn = 0;  
     if(defined($ENV{'form.ReselectColumns'})) {  
         my @reselected = (ref($ENV{'form.ReselectColumns'}) ?   
                           @{$ENV{'form.ReselectColumns'}}  
                           : ($ENV{'form.ReselectColumns'}));  
         foreach (@reselected) {  
             if(/HeadingColumn/) {  
                 push(@headingColumns, $_);  
                 $foundColumn = 1;  
             } elsif(/SequenceColumn/) {  
                 push(@sequenceColumns, $_);  
                 $foundColumn = 1;  
             }  
         }  
     }  
   
     $cache->{'reportKey'} = 'false';  
     if($cache->{'reportSelected'} eq 'Analyze') {  
         $cache->{'reportKey'} = 'Analyze';  
     } elsif($cache->{'reportSelected'} eq 'DoDiffGraph') {  
         $cache->{'reportKey'} = 'DoDiffGraph';  
     } elsif($cache->{'reportSelected'} eq 'PercentWrongGraph') {  
         $cache->{'reportKey'} = 'PercentWrongGraph';  
     }  
   
     if(defined($ENV{'form.DoDiffGraph'})) {  
         $cache->{'reportSelected'} = 'DoDiffGraph';  
         $cache->{'reportKey'} = 'DoDiffGraph';  
     } elsif(defined($ENV{'form.PercentWrongGraph'})) {  
         $cache->{'reportSelected'} = 'PercentWrongGraph';  
         $cache->{'reportKey'} = 'PercentWrongGraph';  
     }  
   
     foreach (keys(%ENV)) {  
         if(/form\.Analyze/) {  
             $cache->{'reportSelected'} = 'Analyze';  
             $cache->{'reportKey'} = 'Analyze';  
             my $data;  
             (undef, $data)=split(':::', $_);  
             $cache->{'AnalyzeInfo'}=$data;  
         } elsif(/form\.HeadingColumn/) {  
             my $value = $_;  
             $value =~ s/form\.//;  
             push(@headingColumns, $value);  
             $foundColumn=1;  
         } elsif(/form\.SequenceColumn/) {  
             my $value = $_;  
             $value =~ s/form\.//;  
             push(@sequenceColumns, $value);  
             $foundColumn=1;  
         }  
     }  
   
     if($foundColumn) {  
         $cache->{'HeadingsFound'} = join(':', @headingColumns);  
         $cache->{'SequencesFound'} = join(':', @sequenceColumns);;  
     }  
     if(!defined($cache->{'HeadingsFound'}) ||   
        $cache->{'DefaultColumns'} ne 'false') {  
         $cache->{'HeadingsFound'}='HeadingColumnFull Name';  
     }  
     if(!defined($cache->{'SequencesFound'}) ||  
        $cache->{'DefaultColumns'} ne 'false') {  
         $cache->{'SequencesFound'}='All Sequences';  
     }  
     $cache->{'DefaultColumns'} = 'false';  
   
     return;  
 }  
   
 ##################################################  
 ##################################################  
   
 =pod  =pod
   
 =item &SortStudents()  =item &CreateAndParseOutputSelector()
   
 Determines which students to display and in which order.  Which are   
 displayed are determined by their status(active/expired).  The order  
 is determined by the sort button pressed (default to username).  The  
 type of sorting is username, lastname, or section.  
   
 =over 4  
   
 Input: $students, $CacheData  
   
 $students: A array pointer to a list of students (username:domain)  
   
 $CacheData: A pointer to the hash tied to the cached data  
   
 Output: \@order  Construct a selection list of options for output and parse output selections.
   
 @order: An ordered list of students (username:domain)  
   
 =back  
   
 =cut  =cut
   
 sub SortStudents {  #######################################################
     my ($cache)=@_;  #######################################################
   sub OutputDescriptions {
       my (@OutputOptions) = @_;
       my $Str = '';
       $Str .= "<h2>Output Modes</h2>\n";
       $Str .= "<dl>\n";
       foreach my $outputmode (@OutputOptions) {
    $Str .="    <dt>".$outputmode->{'name'}."</dt>\n";
    $Str .="        <dd>".$outputmode->{'description'}."</dd>\n";
       }
       $Str .= "</dl>\n";
       return $Str;
   }
   
     my @students = split(':::',$cache->{'NamesOfStudents'});  sub CreateAndParseOutputSelector {
     my @sorted1Students=();      my ($elementname,$default,@OutputOptions) = @_;
     foreach (@students) {      my $output_mode;
         if($cache->{'Status'} eq 'Any' ||       my $show;
            $cache->{$_.':Status'} eq $cache->{'Status'}) {      my $Str = '';
             push(@sorted1Students, $_);      #
       # Format for output options is 'mode, restrictions';
       my $selected = $default;
       if (exists($ENV{'form.'.$elementname})) {
           if (ref($ENV{'form.'.$elementname} eq 'ARRAY')) {
               $selected = $ENV{'form.'.$elementname}->[0];
           } else {
               $selected = $ENV{'form.'.$elementname};
         }          }
     }      }
       #
     my $sortBy = '';      # Set package variables describing output mode
     if(defined($cache->{'sort'})) {      $output_mode = 'html';
         $sortBy = ':'.$cache->{'sort'};      $show        = 'all';
     } else {      foreach my $option (@OutputOptions) {
         $sortBy = ':fullname';          next if ($option->{'value'} ne $selected);
           $output_mode = $option->{'mode'};
           $show        = $option->{'show'};
     }      }
     my @order = sort { lc($cache->{$a.$sortBy}) cmp lc($cache->{$b.$sortBy}) ||      #
                        lc($cache->{$a.':fullname'}) cmp lc($cache->{$b.':fullname'}) }       # Build the form element
                 @sorted1Students;      $Str = qq/<select size="5" name="$elementname">/;
       foreach my $option (@OutputOptions) {
     return \@order;          if (exists($option->{'special'}) && 
               $option->{'special'} =~ /do not show/) {
               next;
           }
           $Str .= "\n".'    <option value="'.$option->{'value'}.'"';
           $Str .= " selected " if ($option->{'value'} eq $selected);
           $Str .= ">".&mt($option->{'name'})."<\/option>";
       }
       $Str .= "\n</select>";
       return ($Str,$output_mode,$show);
 }  }
   
 =pod  ###############################################
   ###############################################
 =item &SpaceColumns()  
   
 Determines the width of all the columns in the chart.  It is based on  
 the max of the data for that column and its header.  
   
 =over 4  
   
 Input: $students, $studentInformation, $headings, $ChartDB  
   
 $students: An array pointer to a list of students (username:domain)  =pod 
   
 $studentInformatin: The type of data for the student information.  It is  
 used as part of the key in $CacheData.  
   
 $headings: The name of the student information columns.  
   
 $ChartDB: The name of the cache database which is opened for read/write.  
   
 Output: None - All data stored in cache.  =item &Gather_Student_Data()
   
 =back  Ensures all student data is up to date.
   
 =cut  =cut
   
 sub SpaceColumns {  ###############################################
     my ($students,$studentInformation,$headings,$cache)=@_;  ###############################################
   sub Gather_Student_Data {
     # Initialize Lengths      my ($r) = @_;
     for(my $index=0; $index<(scalar @$headings); $index++) {      my $c = $r->connection();
         my @titleLength=split(//,$headings->[$index]);      #
         $cache->{$studentInformation->[$index].':columnWidth'}=      &Apache::loncoursedata::clear_internal_caches();
             scalar @titleLength;      #
     }      my @Sequences = &Apache::lonstatistics::Sequences_with_Assess();
       #
     foreach my $name (@$students) {      my @Students = @Apache::lonstatistics::Students;
         foreach (@$studentInformation) {      #
             my @dataLength=split(//,$cache->{$name.':'.$_});      # Open the progress window
             my $length=(scalar @dataLength);      my %prog_state=&Apache::lonhtmlcommon::Create_PrgWin
             if($length > $cache->{$_.':columnWidth'}) {          ($r,'Statistics Compilation Status',
                 $cache->{$_.':columnWidth'}=$length;           'Statistics Compilation Progress', scalar(@Students));
             }      #
         }      while (my $student = shift @Students) {
           return if ($c->aborted());
           my ($status,undef) = &Apache::loncoursedata::ensure_current_data
               ($student->{'username'},$student->{'domain'},
                $ENV{'request.course.id'});
           &Apache::lonhtmlcommon::Increment_PrgWin($r,\%prog_state,
                                                    &mt('last student'));
     }      }
       &Apache::lonhtmlcommon::Close_PrgWin($r,\%prog_state);
     return;      $r->rflush();
 }  }
   
 sub PrepareData {  ###############################################
     my ($c, $cacheDB, $studentInformation, $headings,$r)=@_;  ###############################################
   
     # Test for access to the cache data  =pod 
     my $courseID=$ENV{'request.course.id'};  
     my $isRecalculate=0;  
     if(defined($ENV{'form.Recalculate'})) {  
         $isRecalculate=1;  
     }  
   
     my $isCached = &Apache::loncoursedata::TestCacheData($cacheDB,  
                                                          $isRecalculate);  
     if($isCached < 0) {  
         return "Unable to tie hash to db file.";  
     }  
   
     # Download class list information if not using cached data  
     my %cache;  
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_WRCREAT(),0640)) {  
         return "Unable to tie hash to db file.";  
     }  
   
 #    if(!$isCached) {  
         my $processTopResourceMapReturn=  
             &Apache::loncoursedata::ProcessTopResourceMap(\%cache, $c);  
         if($processTopResourceMapReturn ne 'OK') {  
             untie(%cache);  
             return $processTopResourceMapReturn;  
         }  
  #   }  
   
     if($c->aborted()) {  
         untie(%cache);  
         return 'aborted';   
     }  
   
     my $classlist=&Apache::loncoursedata::DownloadClasslist($courseID,  
                                                 $cache{'ClasslistTimestamp'},  
                                                 $c);  
     foreach (keys(%$classlist)) {  
         if(/^(con_lost|error|no_such_host)/i) {  
             untie(%cache);  
             return "Error getting student data.";  
         }  
     }  
   
     if($c->aborted()) {  
         untie(%cache);  
         return 'aborted';   
     }  
   
     # Active is a temporary solution, remember to change  =item &Gather_Full_Student_Data()
     Apache::loncoursedata::ProcessClasslist(\%cache,$classlist,$courseID,$c);  
     if($c->aborted()) {  
         untie(%cache);  
         return 'aborted';   
     }  
   
     &ProcessFormData(\%cache);  Ensures all student data is up to date.
     my $students = &SortStudents(\%cache);  
     &SpaceColumns($students, $studentInformation, $headings, \%cache);  
     $cache{'updateTime:columnWidth'}=24;  
   
     my $download = $cache{'download'};  =cut
     my $downloadAll = $cache{'DownloadAll'};  
     my @allStudents=();  
     if($download ne 'false') {  
         $cache{'download'} = 'false';  
     } elsif($downloadAll ne 'false') {  
         $cache{'DownloadAll'} = 'false';  
         if($downloadAll eq 'sorted') {  
             @allStudents = @$students;  
         } else {  
             @allStudents = split(':::', $cache{'NamesOfStudents'});  
         }  
     }  
   
     untie(%cache);  
   
     if($download ne 'false') {  ###############################################
         my @who = ($download);  ###############################################
         if(&Apache::loncoursedata::DownloadStudentCourseData(\@who, 'false',  sub Gather_Full_Student_Data {
                                                              $cacheDB, 'true',      my ($r) = @_;
                                                              'false', $courseID,      my $c = $r->connection();
                                                              $r, $c) ne 'OK') {      #
             return 'Stop at download individual';      &Apache::loncoursedata::clear_internal_caches();
         }      #
     } elsif($downloadAll ne 'false') {      my @Students = @Apache::lonstatistics::Students;
         if(&Apache::loncoursedata::DownloadStudentCourseData(\@allStudents,      #
                                                              'false',      # Open the progress window
                                                              $cacheDB, 'true',      my %prog_state=&Apache::lonhtmlcommon::Create_PrgWin
                                                              'true', $courseID,          ($r,&mt('Student Data Compilation Status'),
                                                              $r, $c) ne 'OK') {           &mt('Student Data Compilation Progress'), scalar(@Students));
             return 'Stop at download all';      #
         }      while (my $student = shift @Students) {
           return if ($c->aborted());
           my ($status,undef) = &Apache::loncoursedata::ensure_current_full_data
               ($student->{'username'},$student->{'domain'},
                $ENV{'request.course.id'});
           &Apache::lonhtmlcommon::Increment_PrgWin($r,\%prog_state,
                                                    &mt('last student'));
     }      }
       &Apache::lonhtmlcommon::Close_PrgWin($r,\%prog_state);
     return ('OK', $students);      $r->rflush();
 }  }
   
   ##################################################
   ##################################################
 sub DisplayClasslist {  sub DisplayClasslist {
     my ($r)=@_;      my ($r)=@_;
     #      #
     my @Fields = ('fullname','username','domain','id','section');      my @Fields = ('fullname','username','domain','id','section');
     #      #
     my $Str='';      my $Str='';
       if (! @Students) {
           if ($SelectedSections[0] eq 'all') { 
               if (lc($ENV{'form.Status'}) eq 'any') {
                   $Str .= '<h2>There are no students in the course.</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'active') {
                   $Str .= '<h2>There are no currently enrolled students in '.
                       'the course.</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
                   $Str .= '<h2>There are no previously enrolled '.
                       'students in the course.</h2>';
               }
           } else { 
               my $sections;
               if (@SelectedSections == 1) {
                   $sections = 'section '.$SelectedSections[0];
               } elsif (@SelectedSections > 2) {
                   $sections = 'sections '.join(', ',@SelectedSections);
                   $sections =~ s/, ([^,])*$/, and $1/;
               } else {
                   $sections = 'sections '.join(' and ',@SelectedSections);
               }
               if (lc($ENV{'form.Status'}) eq 'any') {
                   $Str .= '<h2>There are no students in '.$sections.'.</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'active') {
                   $Str .= '<h2>There are no currently enrolled students '.
                       'in '.$sections.'.</h2>';
               } elsif (lc($ENV{'form.Status'}) eq 'expired') {
                   $Str .= '<h2>There are no previously enrolled students '.
                       'in '.$sections.'.</h2>';
               }
           }
           $Str.= '<a href="/adm/statistics?reportSelected=student_assessment">'.
               'Return to the chart.</a>';
           $r->print($Str);
           $r->rflush();
           return;
       }
   
       # "Click" is asinine but it is probably not my place to change the world.
       $Str .= '<h2>Click on a students name or username to view their chart</h2>';
     $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";      $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";
     $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";      $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";
     foreach my $field (@Fields) {      foreach my $field (@Fields) {
         $Str .= '<th><a href="/adm/statistics?sort='.$field.'">'.$field.          $Str .= '<th><a href="/adm/statistics?reportSelected=classlist&sort='.$field.'">'.$field.
             '</a></th>';              '</a></th>';
     }      }
     $Str .= '</tr>'."\n";      $Str .= '</tr>'."\n";
     #      #
     my $alternate = 0;      my $alternate = 0;
     foreach my $student (@Students) {      foreach my $student (@Students) { # @Students is a package variable
         my $sname = $student->{'username'}.':'.$student->{'domain'};          my $sname = $student->{'username'}.':'.$student->{'domain'};
         if($alternate) {          if($alternate) {
             $Str .= '<tr bgcolor="#ffffe6">';              $Str .= '<tr bgcolor="#ffffe6">';
Line 1171  sub DisplayClasslist { Line 1012  sub DisplayClasslist {
         #          #
         foreach my $field (@Fields) {          foreach my $field (@Fields) {
             $Str .= '<td>';              $Str .= '<td>';
             if ($field eq 'fullname') {              if ($field eq 'fullname' || $field eq 'username') {
                 $Str .= '<a href="/adm/statistics?reportSelected=';                  $Str .= '<a href="/adm/statistics?reportSelected=';
                 $Str .= &Apache::lonnet::escape('Student Assessment');                  $Str .= &Apache::lonnet::escape('student_assessment');
                 $Str .= '&StudentAssessmentStudent=';                  $Str .= '&sort='.&Apache::lonnet::escape($ENV{'form.sort'});
                   $Str .= '&SelectedStudent=';
                 $Str .= &Apache::lonnet::escape($sname).'">';                  $Str .= &Apache::lonnet::escape($sname).'">';
                 $Str .= $student->{$field}.'&nbsp';                  $Str .= $student->{$field}.'&nbsp';
                 $Str .= '</a>';                  $Str .= '</a>';
Line 1193  sub DisplayClasslist { Line 1035  sub DisplayClasslist {
     return;      return;
 }  }
   
 sub BuildClasslist {  ##############################################
     my ($cacheDB,$students,$studentInformation,$headings,$r)=@_;  ##############################################
   
     my %cache;  
     unless(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER(),0640)) {  
         return '<html><body>Unable to tie database.</body></html>';  
     }  
   
 #    my $Ptr = '';  
 #    $Ptr .= '<table border="0"><tbody>';  
 #    $Ptr .= '<tr><td align="right"><b>Select Sections</b>';  
 #    $Ptr .= '</td>'."\n";  
 #    $Ptr .= '<td align="left">'."\n";  
 #    my @sectionsSelected = split(':',$cache{'sectionsSelected'});  
 #    my @sections = split(':',$cache{'sectionList'});  
 #    $Ptr .= &Apache::lonhtmlcommon::MultipleSectionSelect(\@sections,  
 #                                                          \@sectionsSelected,  
 #                                                          'Statistics');  
 #    $Ptr .= '</td></tr></table><br>';  
 #    $r->print($Ptr);  
 #    $r->rflush();  
 #    my %mySections = ();  
 #    foreach (@sections) { $mySections{$_} = 'True'; }  
 #    $r->print("<br>$cache{'sectionsSelected'}<br>");  
   
     my $Str='';  
     $Str .= '<table border="0"><tr><td bgcolor="#777777">'."\n";  
     $Str .= '<table border="0" cellpadding="3"><tr bgcolor="#e6ffff">'."\n";  
   
     my $displayString = '<td align="left"><a href="/adm/statistics?';  
     $displayString .= 'sort=LINKDATA">DISPLAYDATA&nbsp</a></td>'."\n";  
     $Str .= &Apache::lonhtmlcommon::CreateHeadings(\%cache,  
                                                    $studentInformation,  
                                                    $headings, $displayString);  
     $Str .= '</tr>'."\n";  
   
     my $alternate=0;  
     foreach (@$students) {  
 #        if ($mySections{$cache{$_.':'.'section'}} ne 'True') {next;}  
         my ($username, $domain) = split(':', $_);  
         if($alternate) {  
             $Str .= '<tr bgcolor="#ffffe6">';  
         } else {  
             $Str .= '<tr bgcolor="#ffffc6">';  
         }  
         $alternate = ($alternate + 1) % 2;  
         foreach my $data (@$studentInformation) {  
             $Str .= '<td>';  
             if($data eq 'fullname') {  
                 $Str .= '<a href="/adm/statistics?reportSelected=';  
                 $Str .= &Apache::lonnet::escape('Student Assessment');  
                 $Str .= '&StudentAssessmentStudent=';  
                 $Str .= &Apache::lonnet::escape($cache{$_.':'.$data}).'">';  
                 $Str .= $cache{$_.':'.$data}.'&nbsp';  
                 $Str .= '</a>';  
             } elsif($data eq 'updateTime') {  
                 $Str .= '<a href="/adm/statistics?reportSelected=';  
                 $Str .= &Apache::lonnet::escape('Class list');  
                 $Str .= '&download='.$_.'">';  
                 $Str .= $cache{$_.':'.$data}.'&nbsp';  
                 $Str .= '&nbsp</a>';  
             } else {  
                 $Str .= $cache{$_.':'.$data}.'&nbsp';  
             }  
   
             $Str .= '</td>'."\n";  
         }  
     }  
   
     $Str .= '</tr>'."\n";  
     $Str .= '</table></td></tr></table>'."\n";  
     $r->print($Str);  
     $r->rflush();  
   
     untie(%cache);  
   
     return;  
 }  
   
 sub CreateMainMenu {  sub CreateMainMenu {
     my ($status, $reports)=@_;      #
       # Define menu data
     my $Str = '';      my @reports = ({ internal_name => 'problem_statistics',
                        name => &mt('Overall Problem Statistics'),
     $Str .= '<table border="0"><tbody><tr>'."\n";                       short_description => 
     $Str .= '<td></td>'."\n";      &mt('Student performance statistics on all problems.'),
     $Str .= '<td align="center"><b>Select a Report</b></td>'."\n";                   },
     $Str .= '<td align="center"><b>Student Status</b></td></tr>'."\n";                     { internal_name => 'problem_analysis',
     $Str .= '<tr>'."\n";                       name => &mt('Detailed Problem Analysis'),
     $Str .= '<td align="center"><input type="submit" name="Refresh" ';                       short_description => 
     $Str .= 'value="Update Display" /></td>'."\n";      &mt('Detailed statistics and graphs of student performance on problems.'),
     $Str .= '<td align="center">';                   },
     $Str .= '<select name="reportSelected" onchange="document.';                     { internal_name => 'submissiontime_analysis',
     $Str .= 'Statistics.submit()">'."\n";                       name => &mt('Submission Time Analysis'),
                        short_description => 
     foreach (sort(keys(%$reports))) {      &mt('Display and analysis of submission times on assessments.'),
         next if($_ eq 'reportSelected');                   },
         $Str .= '<option name="'.$_.'"';  #                   { internal_name => 'student_assessment',
         if($reports->{'reportSelected'} eq $reports->{$_}) {  #                     name => &mt('Problem Status Chart'),
             $Str .= ' selected=""';  #                     short_description => 
         }  #    &mt('Brief view of each students performance in course.'),
         $Str .= '>'.$reports->{$_}.'</option>'."\n";  #                 },
     }                     # 'percentage'  => 'Correct-problems Plot',
     $Str .= '</select></td>'."\n";                     # 'activitylog' => 'Activity Log',
                      );
     $Str .= '<td align="center">';      #
     $Str .= &Apache::lonhtmlcommon::StatusOptions($status, 'Statistics');      # Create the menu
     $Str .= '</td>'."\n";      my $Str;
       $Str .= '<h1>'.&mt('Please select a report to generate').'</h1>';
     $Str .= '</tr></tbody></table>'."\n";      foreach my $reportdata (@reports) {
     $Str .= '<hr>'."\n";          $Str .='    <h3><a href="/adm/statistics?reportSelected='.
               $reportdata->{'internal_name'}.'" >'.
     return $Str;              $reportdata->{'name'}."</a></h3>\n";
 }          $Str .= '    '.('&nbsp;'x8).$reportdata->{'short_description'}.
               "\n";
 sub BuildStatistics {  
     my ($r)=@_;  
   
     my $c = $r->connection;  
     my @studentInformation=('fullname','section','id','domain','username',  
                             'updateTime');  
     my @headings=('Full Name', 'Section', 'PID', 'Domain', 'User Name',  
                   'Last Updated');  
     my $spacing = '   ';  
   
     my %reports = ('classlist'          => 'Class list',  
                    'problem_statistics' => 'Problem Statistics',  
                    'student_assessment' => 'Student Assessment',  
    'percentage'         => 'Correct-problems Plot',  
 #                   'activitylog'        => 'Activity Log',  
                    'reportSelected'     => 'Class list');  
   
     my %cache;  
     my $courseID=$ENV{'request.course.id'};  
     my $cacheDB = "/home/httpd/perl/tmp/$ENV{'user.name'}".  
                   "_$ENV{'user.domain'}_$courseID\_statistics.db";  
   
     $r->print(&Apache::lonhtmlcommon::Title('Course Statistics and Charts'));  
   
     my ($returnValue, $students) = &PrepareData($c, $cacheDB,  
                                                 \@studentInformation,  
                                                 \@headings,$r);  
     if($returnValue ne 'OK') {  
         $r->print($returnValue."\n".'</body></html>');  
         return OK;  
     }  
     if(!$c->aborted()) {  
         &Apache::loncoursedata::CheckForResidualDownload($cacheDB,  
                                                          'true', 'true',  
                                                          $courseID,  
                                                          $r, $c);  
     }  
   
     my $GoToPage;  
     if(tie(%cache,'GDBM_File',$cacheDB,&GDBM_READER(),0640)) {  
         $GoToPage = $cache{'reportSelected'};  
         $reports{'reportSelected'} = $cache{'reportSelected'};  
         if(defined($cache{'reportKey'}) &&  
            !exists($reports{$cache{'reportKey'}}) &&  
            $cache{'reportKey'} ne 'false') {  
             $reports{$cache{'reportKey'}} = $cache{'reportSelected'};  
         }  
   
         if(defined($cache{'OptionResponses'})) {  
             $reports{'problem_analysis'} = 'Option Response Analysis';  
         }  
   
         $r->print('<form name="Statistics" ');  
         $r->print('method="post" action="/adm/statistics">');  
         $r->print(&CreateMainMenu($cache{'Status'}, \%reports));  
         $r->rflush();  
         untie(%cache);  
     } else {  
         $r->print('<html><body>Unable to tie database.</body></html>');  
         return OK;  
     }  
   
     if($GoToPage eq 'Activity Log') {  
         &Apache::lonproblemstatistics::Activity();  
     } elsif($GoToPage eq 'Problem Statistics') {  
         &Apache::lonproblemstatistics::BuildProblemStatisticsPage($cacheDB,  
                                                                   $students,  
                                                                   $courseID,  
                                                                   $c,$r);  
     } elsif($GoToPage eq 'Option Response Analysis') {  
         &Apache::lonproblemanalysis::BuildProblemAnalysisPage($cacheDB, $r);  
     } elsif($GoToPage eq 'Student Assessment') {  
         &Apache::lonstudentassessment::BuildStudentAssessmentPage($r, $c);  
     } elsif($GoToPage eq 'Analyze') {  
         &Apache::lonproblemanalysis::BuildAnalyzePage($cacheDB, $students,  
                                                       $courseID, $r);  
     } elsif($GoToPage eq 'DoDiffGraph' || $GoToPage eq 'PercentWrongGraph') {  
         my $courseDescription = $ENV{'course.'.$courseID.'.description'};  
         $courseDescription =~ s/\ /"_"/eg;  
         &Apache::lonproblemstatistics::BuildGraphicChart($GoToPage, $cacheDB,  
                                                          $courseDescription,  
                                                          $students, $courseID,  
                                                          $r, $c);  
     } elsif($GoToPage eq 'Class list') {  
         &DisplayClasslist($r);  
 #        &BuildClasslist($cacheDB, $students, \@studentInformation,  
 #                        \@headings, $r);  
     } elsif($GoToPage eq 'Correct-problems Plot') {  
  &Apache::lonpercentage::BuildPercentageGraph($cacheDB, $students,  
      $courseID, $c, $r);  
     }      }
       $Str .="</dl>\n";
     $r->print('</form>'."\n");      #
     $r->print("\n".'</body>'."\n".'</html>');      return $Str;
     $r->rflush();  
   
     return OK;  
 }  }
   
 # ================================================================ Main Handler  ##############################################
   ##############################################
 sub handler {  sub handler {
     my $r=shift;      my $r=shift;
       my $c = $r->connection();
 #    $jr = $r;      #
       # Check for overloading
     my $loaderror=&Apache::lonnet::overloaderror($r);      my $loaderror=&Apache::lonnet::overloaderror($r);
     if ($loaderror) { return $loaderror; }      if ($loaderror) { return $loaderror; }
     $loaderror=      $loaderror=
        &Apache::lonnet::overloaderror($r,         &Apache::lonnet::overloaderror($r,
          $ENV{'course.'.$ENV{'request.course.id'}.'.home'});           $ENV{'course.'.$ENV{'request.course.id'}.'.home'});
     if ($loaderror) { return $loaderror; }      if ($loaderror) { return $loaderror; }
       #
     unless(&Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {      # Check for access
       if (! &Apache::lonnet::allowed('vgr',$ENV{'request.course.id'})) {
         $ENV{'user.error.msg'}=          $ENV{'user.error.msg'}=
         $r->uri.":vgr:0:0:Cannot view grades for complete course";              $r->uri.":vgr:0:0:Cannot view grades for complete course";
         return HTTP_NOT_ACCEPTABLE;          if (! &Apache::lonnet::allowed('vgr',
     }                        $ENV{'request.course.id'}.'/'.$ENV{'request.course.sec'})) {
               $ENV{'user.error.msg'}=
     # Set document type for header only                  $r->uri.":vgr:0:0:Cannot view grades with given role";
     if($r->header_only) {              return HTTP_NOT_ACCEPTABLE;
         if ($ENV{'browser.mathml'}) {  
             $r->content_type('text/xml');  
         } else {  
             $r->content_type('text/html');  
         }          }
         &Apache::loncommon::no_cache($r);  
         $r->send_http_header;  
         return OK;  
     }      }
       #
     unless($ENV{'request.course.fn'}) {      # Send the header
  my $requrl=$r->uri;      &Apache::loncommon::no_cache($r);
         $ENV{'user.error.msg'}="$requrl:bre:0:0:Course not initialized";      &Apache::loncommon::content_type($r,'text/html');
         return HTTP_NOT_ACCEPTABLE;  
     }  
   
     $r->content_type('text/html');  
     $r->send_http_header;      $r->send_http_header;
       if ($r->header_only) { return OK; }
       #
       # Extract form elements from query string
     &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},      &Apache::loncommon::get_unprocessed_cgi($ENV{'QUERY_STRING'},
                                             ['sort',                                              ['sort','reportSelected',
                                              'StudentAssessmentStudent']);                                               'SelectedStudent']);
       #
     &PrepareClasslist($r);      # Give the LON-CAPA page header
       $r->print(&Apache::lonhtmlcommon::Title('Course Statistics and Charts'));
     &PrepareCourseData($r);      $r->rflush();
       # 
     &BuildStatistics($r);      # Either print out a menu for them or send them to a report
       if (! exists($ENV{'form.reportSelected'}) || 
           $ENV{'form.reportSelected'} eq '') {
           $r->print(&CreateMainMenu());
       } else {
       #
           if (! &Apache::lonmysql::verify_sql_connection()) {
               my $serveradmin = $r->dir_config('lonAdmEMail');
               $r->print('<h2><font color="Red">'.
                         &mt('Unable to connect to database!').
                         '</font></h2>');
               $r->print('<p>'.
                         &mt('Please notify the server administrator ').
                         '<b>'.$serveradmin.'</b></p>');
               $r->print('<p>'.
                         &mt('Course Statistics and Charts cannot be '.
                             'retrieved until the database is restarted.  '.
                             'Your data is intact but cannot be displayed '.
                             'at this time.').'</p>');
               $r->print('</body></html>');
               return;
           }
           #
           # Clean out the caches
           if (exists($ENV{'form.ClearCache'})) {
               &Apache::loncoursedata::delete_caches($ENV{'requres.course.id'});
           }
           #
           # Begin form output
           $r->print('<form name="Statistics" ');
           $r->print('method="post" action="/adm/statistics">');
           $r->rflush();
           #
           my $GoToPage = $ENV{'form.reportSelected'};
           #
           # Set up the statistics and chart environment
           &PrepareCourseData($r);
           #
           $r->print('<input type="hidden" name="reportSelected" value="'.
                     $GoToPage.'">');
           if($GoToPage eq 'activitylog') {
   #        &Apache::lonproblemstatistics::Activity();
           } elsif($GoToPage eq 'problem_statistics') {
               &Apache::lonproblemstatistics::BuildProblemStatisticsPage($r,$c);
           } elsif($GoToPage eq 'problem_analysis') {
               &Apache::lonproblemanalysis::BuildProblemAnalysisPage($r,$c);
           } elsif($GoToPage eq 'submissiontime_analysis') {
               &Apache::lonsubmissiontimeanalysis::BuildSubmissionTimePage($r,$c);
           } elsif($GoToPage eq 'student_assessment') {
               &Apache::lonstudentassessment::BuildStudentAssessmentPage($r,$c);
           } elsif($GoToPage eq 'DoDiffGraph' || $GoToPage eq 'PercentWrongGraph') {
   #        &Apache::lonproblemstatistics::BuildGraphicChart($r,$c);
           } elsif($GoToPage eq 'Correct-problems Plot') {
               # &Apache::lonpercentage::BuildPercentageGraph($r,$c);
           }
           #
           $r->print("</form>\n");
       }
       $r->print("</body>\n</html>\n");
       $r->rflush();
       #
     return OK;      return OK;
 }  }
   
 1;  1;
   
   #######################################################
   #######################################################
   
 =pod  =pod
   
 =back  =back
   
 =cut  =cut
   
   #######################################################
   #######################################################
   
 __END__  __END__
   
Removed from v.1.64  
changed lines
  Added in v.1.92

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>