Diff for /loncom/interface/statistics/lonsubmissiontimeanalysis.pm between versions 1.10 and 1.32

version 1.10, 2004/01/19 21:31:08 version 1.32, 2011/01/17 00:19:41
Line 28 Line 28
 package Apache::lonsubmissiontimeanalysis;  package Apache::lonsubmissiontimeanalysis;
   
 use strict;  use strict;
 use Apache::lonnet();  use Apache::lonnet;
 use Apache::loncommon();  use Apache::loncommon();
 use Apache::lonhtmlcommon();  use Apache::lonhtmlcommon();
   use Apache::lonquickgrades();
 use Apache::loncoursedata();  use Apache::loncoursedata();
 use Apache::lonstatistics;  use Apache::lonstatistics;
 use Apache::lonstathelpers;  use Apache::lonstathelpers;
 use Apache::lonlocal;  use Apache::lonlocal;
 use HTML::Entities();  use HTML::Entities();
 use Time::Local();  use Time::Local();
 use Spreadsheet::WriteExcel();  
   
 my $plotcolors = ['#33ff00',   my $plotcolors = ['#33ff00', 
                   '#ff33cc', '#990000', '#aaaa66', '#663399', '#ff9933',                    '#ff33cc', '#990000', '#aaaa66', '#663399', '#ff9933',
Line 45  my $plotcolors = ['#33ff00', Line 45  my $plotcolors = ['#33ff00',
                   ];                     ]; 
   
 my @SubmitButtons = (  my @SubmitButtons = (
                      { name => 'ProblemAnalyis',                       { name => 'PrevProblemAnalysis',
                          text => 'Previous Problem' },
                        { name => 'ProblemAnalysis',
                        text => 'Analyze Problem Again' },                         text => 'Analyze Problem Again' },
                        { name => 'NextProblemAnalysis',
                          text => 'Next Problem' },
                      { name => 'SelectAnother',                       { name => 'SelectAnother',
                        text => 'Choose a different resource' },                         text => 'Choose a different Problem' },
                      );                       );
   
 sub BuildSubmissionTimePage {  sub BuildSubmissionTimePage {
Line 63  sub BuildSubmissionTimePage { Line 67  sub BuildSubmissionTimePage {
     #      #
     &Apache::lonstatistics::PrepareClasslist();          &Apache::lonstatistics::PrepareClasslist();    
     #      #
     $r->print('<h2>'.&mt('Submission Time Plots').'</h2>');      $r->print(&Apache::lonhtmlcommon::breadcrumbs('Submission Time Plots'));
       &Apache::lonquickgrades::startGradeScreen($r,'statistics');
     $r->print(&CreateInterface());      $r->print(&CreateInterface());
     #      #
     my @Students = @Apache::lonstatistics::Students;      my @Students = @Apache::lonstatistics::Students;
     #      #
     if (@Students < 1) {      if (@Students < 1) {
         $r->print('<h2>There are no students in the sections selected</h2>');          $r->print('<div class="LC_warning">'
                    .&mt('There are no students in the sections selected.'
                    .'</div>')
           );
     }      }
     #      #
     &Apache::loncoursedata::clear_internal_caches();      my @CacheButtonHTML = 
     if (exists($ENV{'form.ClearCache'}) ||           &Apache::lonstathelpers::manage_caches($r,'Statistics','stats_status');
         exists($ENV{'form.updatecaches'}) ||  
         (exists($ENV{'form.firstanalysis'}) &&  
          $ENV{'form.firstanalysis'} ne 'no')) {  
         &Apache::lonstatistics::Gather_Full_Student_Data($r);  
     }  
     if (! exists($ENV{'form.firstanalysis'})) {  
         $r->print('<input type="hidden" name="firstanalysis" value="yes" />');  
     } else {  
         $r->print('<input type="hidden" name="firstanalysis" value="no" />');  
     }  
     $r->rflush();      $r->rflush();
     #      #
     if (! exists($ENV{'form.problemchoice'}) ||      if (! exists($env{'form.problemchoice'}) ||
         exists($ENV{'form.SelectAnother'})) {          exists($env{'form.SelectAnother'})) {
         $r->print('<input type="submit" name="" value="'.          my $submit_button = '<input type="submit" name="" value="'.
                   &mt('Graph Problem Submission Times').'" />');  #           &mt('Graph Problem Submission Times').'" />';
         $r->print('&nbsp;'x5);              &mt('Generate Graph').'" />';
           $r->print($submit_button.'&nbsp;'x5);
         $r->print('<h3>'.&mt('Please select a problem to analyze').'</h3>');          $r->print('<h3>'.&mt('Please select a problem to analyze').'</h3>');
         $r->print(&ProblemSelector());          $r->print(&Apache::lonstathelpers::problem_selector('.',
                                                               $submit_button));
     } else {      } else {
         foreach my $button (@SubmitButtons) {          foreach my $button (@SubmitButtons) {
             $r->print('<input type="submit" name="'.$button->{'name'}.'" '.              $r->print('<input type="submit" name="'.$button->{'name'}.'" '.
                       'value="'.&mt($button->{'text'}).'" />');                        'value="'.&mt($button->{'text'}).'" />');
             $r->print('&nbsp;'x5);              $r->print('&nbsp;'x5);
         }          }
           foreach my $html (@CacheButtonHTML) {
               $r->print($html.('&nbsp;'x5));
           }
           $r->rflush();
           #
           # Determine which problem we are to analyze
           my $current_problem = &Apache::lonstathelpers::get_target_from_id
               ($env{'form.problemchoice'});
           #
           my ($navmap,$prev,$curr,$next) = 
               &Apache::lonstathelpers::get_prev_curr_next($current_problem,
                                                           '.',
                                                           'part');
           if (exists($env{'form.PrevProblemAnalysis'}) && defined($prev)) {
               $current_problem = $prev;
           } elsif (exists($env{'form.NextProblemAnalysis'}) && defined($next)) {
               $current_problem = $next;
           } else {
               $current_problem = $curr;
           }
           #
           # Store the current problem choice and send it out in the form
           $env{'form.problemchoice'} = 
               &Apache::lonstathelpers::make_target_id($current_problem);
         $r->print('<input type="hidden" name="problemchoice" value="'.          $r->print('<input type="hidden" name="problemchoice" value="'.
                   $ENV{'form.problemchoice'}.'" />');                    $env{'form.problemchoice'}.'" />');
         #          #
         $r->print('<hr />');          $r->print('<hr />');
         #  
         my ($symb,$part) = &get_problem_symb(  
                   &Apache::lonnet::unescape($ENV{'form.problemchoice'}));  
         $r->rflush();          $r->rflush();
         #          #
         my $resource = &get_resource_from_symb($symb);          my $resource = $current_problem->{'resource'};
         if (! defined($resource)) {          if (! defined($resource)) {
             $r->print('resource is undefined');              $r->print('<div class="LC_warning">'
                        .&mt('Resource is undefined.')
                        .'</div>'
               );
         } else {          } else {
             $r->print('<h1>'.$resource->{'title'}.'</h1>');              $r->print('<h1>'.$resource->compTitle.'</h1>');
             $r->print('<h3>'.$resource->{'src'}.'</h3>');              $r->print('<h3>'.$resource->src.'</h3>');
               $r->print('<h4>'.
                    &Apache::lonstatistics::section_and_enrollment_description().
                         '</h4>');
             $r->rflush();              $r->rflush();
               $r->print('<hr />');
             $r->print(&Apache::lonstathelpers::render_resource($resource));              $r->print(&Apache::lonstathelpers::render_resource($resource));
               $r->print('<hr /><br />');
             $r->rflush();              $r->rflush();
             $r->print(&analyze_times($r,$resource,\@Students,$part));      if (@Students) {    
    $r->print(&analyze_times($r,$resource->symb,\@Students,
    $current_problem->{'part'}));
       }
         }          }
         $r->print('<hr />');          $r->print('<hr />');
     }      }
Line 142  sub get_week_start { Line 174  sub get_week_start {
 }  }
   
 sub analyze_times {  sub analyze_times {
     my ($r,$resource,$students,$part) = @_;      my ($r,$symb,$students,$part) = @_;
       my $htmltable;
     #      #
     # Convenience arrays      # Convenience arrays
     my @FullWeekDay = (qw/Sunday Monday Tuesday Wednesday Thursday Friday      my @FullWeekDay = (qw/Sunday Monday Tuesday Wednesday Thursday Friday
Line 153  sub analyze_times { Line 186  sub analyze_times {
     my $html; # holds results of analysis      my $html; # holds results of analysis
     # Get the data      # Get the data
     my $SubData = &Apache::loncoursedata::get_response_time_data      my $SubData = &Apache::loncoursedata::get_response_time_data
         ($students,$resource->{'symb'},$part);          ([&Apache::lonstatistics::get_selected_sections()],
            [&Apache::lonstatistics::get_selected_groups()],
            $Apache::lonstatistics::enrollment_status,
            $symb,$part);
     if (! defined($SubData) || ! ref($SubData)) {      if (! defined($SubData) || ! ref($SubData)) {
         $html.= '<h2>There is no submission data for this problem</h2>';          $html.= '<div class="LC_warning">'
                  .&mt('There is no submission data for this problem at all.')
                  .'</div>';
         return $html;          return $html;
     }      }
     my $NumSub = scalar(@{$SubData});      my $NumSub = scalar(@{$SubData});
     if (! @{$SubData}) {      if (! @{$SubData}) {
         $html.= '<h2>There is no submission data for this problem</h2>';          $html.= '<div class="LC_warning">'
                  .&mt('There is no submission data for this problem.')
                  .'</div>';
         return $html;          return $html;
     }      }
     # Process the data      # Process the data
Line 176  sub analyze_times { Line 216  sub analyze_times {
     my $endtime = $day_start;      my $endtime = $day_start;
     #      #
     # Initialize loop variables      # Initialize loop variables
     my $max;      my $max;            # The sum of @Ydata
     my @Ydata=(0);      my @Ydata=(0);      # number of submissions
     my @AnsData=(0);      my @AnsData=(0);    # number of correct submissions
     my @Xlabel=($WeekDay[$wday]);      my @Xlabel=($WeekDay[$wday]); # Labels of itmes
     my $cumulative_answers = 0;      my @BinEnd;                   # The end time of each bin
       my $cumulative_answers = 0;   # The sum of @AnsData
       my %students;       # which students have attempted the problem?
     #      #
     foreach my $row (@$SubData) {      foreach my $row (@$SubData) {
         my $subtime = &get_time_from_row($row);          my $subtime = &get_time_from_row($row);
         while ($subtime > $endtime && $endtime < time) {          while ($subtime > $endtime && $endtime < time) {
             # Create a new bin              # Create a new bin
             $bincount++;              $bincount++;
             $Ydata[$bincount]=0;              $Ydata[$bincount]   = 0;
             $AnsData[$bincount]=$AnsData[$bincount-1];              $AnsData[$bincount] = 0;
             $endtime += $binsize;              $endtime += $binsize;
               push(@BinEnd,$endtime);
             if ($bincount % (86400/$binsize) == 0) {              if ($bincount % (86400/$binsize) == 0) {
                 $wday++;                  $wday++;
                 $wday %= 7;                  $wday %= 7;
Line 202  sub analyze_times { Line 245  sub analyze_times {
         $max = $Ydata[$bincount] if ($max < $Ydata[$bincount]);          $max = $Ydata[$bincount] if ($max < $Ydata[$bincount]);
         $AnsData[$bincount] += &successful_submission($row);          $AnsData[$bincount] += &successful_submission($row);
         $cumulative_answers += &successful_submission($row);          $cumulative_answers += &successful_submission($row);
           $students{$row->[&Apache::loncoursedata::RT_student_id()]}++;
     }      }
     foreach my $maximum (10,15,20,25,30,40,50,60,70,80,90,100,      #
                           120,150,200,250,300,350,400,450,500,      # Pad the data to a full day
                           600,700,800,900,1000,1100,1200,1500,2000,  
                           2500,3000,4000,5000) {  
         if ($max < $maximum) {  
             $max = $maximum;  
             last;  
         }  
     }  
     while ($bincount % $bins_per_day != 0) {      while ($bincount % $bins_per_day != 0) {
         $bincount++;          $bincount++;
         $Ydata[$bincount]=0;          $Ydata[$bincount]=0;
         $AnsData[$bincount]=$AnsData[$bincount-1];          $AnsData[$bincount]=0;
         $endtime += $binsize;          $endtime += $binsize;
           push(@BinEnd,$endtime);
         if ($bincount % (86400/$binsize) == 0) {          if ($bincount % (86400/$binsize) == 0) {
             $wday ++;              $wday ++;
             $wday %= 7;              $wday %= 7;
Line 225  sub analyze_times { Line 263  sub analyze_times {
             $Xlabel[$bincount] = '';              $Xlabel[$bincount] = '';
         }          }
     }      }
     my $numstudents = scalar(@$students);      my $numstudents = scalar(keys(%students));
     for (my $i=0;$i<=$#AnsData;$i++) {      #
         $AnsData[$i] = int(100*($AnsData[$i]/$numstudents));      # Determine a nice maximum value to use
       foreach my $maximum (10,15,20,25,30,40,50,60,70,80,90,100,
                             120,150,200,250,300,350,400,450,500,
                             600,700,800,900,1000,1100,1200,1500,2000,
                             2500,3000,4000,5000) {
           if ($max < $maximum) {
               $max = $maximum;
               last;
           }
       }
       #
       # Build the data table
       $htmltable = '<p>'.
           '<table rules="groups" frame="border" '.
           'summary="Student submission data">'.
           '<thead>'.
           '<tr>'.
           '<th valign="bottom">'.&mt('Begin').'</th>'.
           '<th>'.('&nbsp;'x3).'</th>'.
           '<th valign="bottom">'.&mt('End').'</th>'.
           '<th valign="bottom">'.&mt('Submissions (plotted)').'</th>'.
           '<th>'.('&nbsp;'x3).'</th>'.
           '<th valign="bottom">'.&mt('Correct Submissions (not plotted)').'</th>'.
           '<th>'.('&nbsp;'x3).'</th>'.
           '<th valign="bottom">'.&mt('Cumulative Correct of those attempting the problem (not plotted)').'</th>'.
           '<th>'.('&nbsp;'x3).'</th>'.
           '<th valign="bottom">'.&mt('Cumulative Percent Correct of those attempting the problem (not plotted)').'</th>'.
           '<th>'.('&nbsp;'x3).'</th>'.
           '<th valign="bottom">'.&mt('Cumulative Percent Correct of selected students (plotted)').'</th>'.
           '</tr>'.
           '</thead>'.
           '<tbody>';
       my @CumulativeCorrect=(0);
       my @corr_as_percent_of_selected;
       my @corr_as_percent_of_answering;
       for (my $i=0;$i<=$#Ydata;$i++) {
           $CumulativeCorrect[$i]=$CumulativeCorrect[-1]+$AnsData[$i];
           $corr_as_percent_of_answering[$i] = 
               sprintf('%3.1f',100*$CumulativeCorrect[$i]/$numstudents);
           $corr_as_percent_of_selected[$i] = 
               sprintf('%3.1f',100*$CumulativeCorrect[$i]/scalar(@$students));
           if ($Ydata[$i] != 0) {
               next if (! defined($BinEnd[$i]) || $BinEnd[$i] == 0);
               $htmltable .= 
                   '<tr>'.
                   '<td align="right"><span class="LC_nobreak">'.
                   &Apache::lonlocal::locallocaltime($BinEnd[$i]-$binsize).
                   '</span></td>'.
                   '<td>&nbsp;</td>'.
                   '<td align="right"><span class="LC_nobreak">'.
                       &Apache::lonlocal::locallocaltime($BinEnd[$i]).'</td>'.
                   '</span></td>'.
                   '<td align="right">'.$Ydata[$i].('&nbsp;'x3).'</td>'.
                   '<td>&nbsp;</td>'.
                   '<td align="right">'.$AnsData[$i].('&nbsp;'x3).'</td>'.
                   '<td>&nbsp;</td>'.
                   '<td align="right">'.$CumulativeCorrect[$i].'</td>'.
                   '<td>&nbsp;</td>'.
                   '<td align="right">'.$corr_as_percent_of_answering[$i].'</td>'.
                   '<td>&nbsp;</td>'.
                   '<td align="right">'.$corr_as_percent_of_selected[$i].'</td>'.
                   '</tr>'.$/;
           }
     }      }
     my $title = 'Number of Submissions and Number Correct';      $htmltable .= '</tbody></table></p>';
       #
       # Build the plot
       my $title = '';#'Number of Submissions and Number Correct';
     my $xlabel;      my $xlabel;
     (undef,undef,undef,$mday,$month,$year,$wday) = localtime($day_start);      (undef,undef,undef,$mday,$month,$year,$wday) = localtime($day_start);
     $xlabel .= $FullWeekDay[$wday].' '.      $xlabel .= $FullWeekDay[$wday].' '.
Line 241  sub analyze_times { Line 344  sub analyze_times {
     if ($width < 250) {      if ($width < 250) {
         $width = 250;          $width = 250;
     }      }
       #
     $html .= &Apache::loncommon::DrawXYYGraph($title,      $html .= &Apache::loncommon::DrawXYYGraph($title,
                                               $xlabel,                                                $xlabel,
                                               'Submissions vs Time',                                                'Submissions vs Time',
                                               $plotcolors,                                                $plotcolors,
                                               \@Xlabel,                                                \@Xlabel,
                                               \@Ydata,                                                \@Ydata,0,$max,
                                               0,$max,                                                \@corr_as_percent_of_selected,0,100,
                                               \@AnsData,  
                                               0,100,  
                                               (xskip => $bins_per_day,                                                (xskip => $bins_per_day,
                                                x_ticks => $bins_per_day,                                                 x_ticks => $bins_per_day,
                                                x_tick_offset => $bins_per_day,                                                 x_tick_offset => $bins_per_day,
Line 260  sub analyze_times { Line 362  sub analyze_times {
                      'data.2.label'=>'Percent correct',                       'data.2.label'=>'Percent correct',
                                                )                                                 )
                                               );                                                );
     $html .= '<br />';      $html .= '<br />'.$htmltable;
     return $html;      return $html;
 }  }
   
Line 270  sub successful_submission { Line 372  sub successful_submission {
         return $row->[&Apache::loncoursedata::RT_awarded()];          return $row->[&Apache::loncoursedata::RT_awarded()];
     }      }
     return undef;      return undef;
     return 0;  
 }  }
   
 sub get_time_from_row {  sub get_time_from_row {
Line 306  sub Process_Row { Line 407  sub Process_Row {
 sub CreateInterface {  sub CreateInterface {
     ##      ##
     ## Environment variable initialization      ## Environment variable initialization
     if (! exists$ENV{'form.AnalyzeOver'}) {      if (! exists$env{'form.AnalyzeOver'}) {
         $ENV{'form.AnalyzeOver'} = 'Tries';          $env{'form.AnalyzeOver'} = 'Tries';
     }      }
     ##      ##
     ## Build the menu      ## Build the menu
     my $Str = '';      my $Str = '';
     $Str .= '<table cellspacing="5">'."\n";      $Str .= '<p>';
     $Str .= '<tr>';      $Str .= &Apache::loncommon::start_data_table();
     $Str .= '<td align="center"><b>'.&mt('Sections').'</b></td>';      $Str .= &Apache::loncommon::start_data_table_header_row();
     $Str .= '<td align="center"><b>'.&mt('Enrollment Status').'</b></td>';      $Str .= '<th>'.&mt('Sections').'</th>';
     $Str .= '<td align="center">&nbsp;</td>';      $Str .= '<th>'.&mt('Groups').'</th>';
     $Str .= '</tr>'."\n";      $Str .= '<th>'.&mt('Access Status').'</th>';
       $Str .= &Apache::loncommon::end_data_table_header_row();
     ##      ##
     ##       ## 
     $Str .= '<tr><td align="center">'."\n";      $Str .= &Apache::loncommon::start_data_table_row();
     $Str .= &Apache::lonstatistics::SectionSelect('Section','multiple',5);      $Str .= '<td align="center">'."\n";
       $Str .= &Apache::lonstatistics::SectionSelect('Section','multiple',4);
       $Str .= '</td>';
       #
       $Str .= '<td align="center">'."\n";
       $Str .= &Apache::lonstatistics::GroupSelect('Group','multiple',4);
     $Str .= '</td>';      $Str .= '</td>';
     #      #
     $Str .= '<td align="center">';      $Str .= '<td align="center">';
     $Str .= &Apache::lonhtmlcommon::StatusOptions(undef,undef,5);      $Str .= &Apache::lonhtmlcommon::StatusOptions(undef,undef,4);
     $Str .= '</td>';      $Str .= '</td>';
     #      #
     my $only_seq_with_assessments = sub {       $Str .= &Apache::loncommon::end_data_table_row();
         my $s=shift;      $Str .= &Apache::loncommon::end_data_table();
         if ($s->{'num_assess'} < 1) {       #
             return 0;      $Str .= '<p><span class="LC_nobreak">'
         } else {              .&mt('Status: [_1]',
             return 1;                      '<input type="text" name="stats_status"'
         }                     .' size="60" value="" readonly="readonly" />')
     };             .'</span></p>';
     &Apache::lonstatistics::MapSelect('Maps','multiple,all',5,      $Str .= '</p>';
                                               $only_seq_with_assessments);  
     ##  
     ##      ##
     $Str .= '</tr>'."\n";  
     $Str .= '</table>'."\n";  
     return $Str;      return $Str;
 }  }
   
 sub ProblemSelector {  
     my $Str;  
     $Str = "<table>\n";  
     foreach my $seq (&Apache::lonstatistics::Sequences_with_Assess()) {  
         next if ($seq->{'num_assess'}<1);  
         my $seq_str = '';  
         foreach my $res (@{$seq->{'contents'}}) {  
             next if ($res->{'type'} ne 'assessment');  
             if (@{$res->{'parts'}} == 1) {  
                 my $value = &Apache::lonnet::escape($res->{'symb'}.':'.  
                                                     $res->{'parts'}->[0]);  
                 my $checked;  
                 if ($ENV{'form.problemchoice'} eq $value) {  
                     $checked = 'checked ';  
                 }  
                 my $title = $res->{'title'};  
                 if (! defined($title) || $title eq '') {  
                     ($title) = ($res->{'src'} =~ m:/([^/]*)$:);  
                 }  
 #                &Apache::lonnet::logthis('title = :'.$title.':');  
                 $seq_str .= '<tr><td>'.  
   '<input type="radio" name="problemchoice" value="'.$value.'" '.$checked.'/>'.  
   '</td><td>'.  
   '<a href="'.$res->{'src'}.'">'.$title.'</a> ';  
             } else {  
                 my $title = $res->{'title'};  
                 if (! defined($title) || $title eq '') {  
                     ($title) = ($res->{'src'} =~ m:/([^/]*)$:);  
                 }  
                 $seq_str .= '<tr><td>'.  
                     '&nbsp;'.'</td><td>'.  
                     '<a href="'.$res->{'src'}.'">'.$title.'</a>'.  
                     "</td></tr>\n";  
                 foreach my $part (@{$res->{'parts'}}) {  
                     my $value = &Apache::lonnet::escape  
                                                ($res->{'symb'}.':'.$part);  
                     my $checked;  
                     if ($ENV{'form.problemchoice'} eq $value) {  
                         $checked = 'checked ';  
                     }  
                     $seq_str .= '<tr><td>'.  
   '<input type="radio" name="problemchoice" value="'.$value.'" '.$checked.'/>'.  
   '</td><td>'.('&nbsp;'x5).'part '.$part."</td></tr>\n";  
                 }  
             }  
         }  
         if ($seq_str ne '') {  
             $Str .= '<tr><td>&nbsp</td><td><b>'.$seq->{'title'}.'</b></td>'.  
                 "</tr>\n".$seq_str;  
         }  
     }  
     $Str .= "</table>\n";  
     return $Str;  
 }  
   
 #########################################################  
 #########################################################  
 ##  
 ##      Misc functions (ought to be put in a module)  
 ##  
 #########################################################  
 #########################################################  
 sub get_problem_symb {  
     my $problemstring = shift();  
     my ($symb,$partid) = ($problemstring=~ /^(.*):([^:]*)$/);  
     return ($symb,$partid);  
 }  
   
 sub get_resource_from_symb {  
     my ($symb) = @_;  
     foreach my $seq (&Apache::lonstatistics::Sequences_with_Assess()) {  
         foreach my $res (@{$seq->{'contents'}}) {  
             if ($res->{'symb'} eq $symb) {  
                 return $res;  
             }  
         }  
     }  
     return undef;  
 }  
   
 1;  1;
   
 __END__  __END__

Removed from v.1.10  
changed lines
  Added in v.1.32


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>