Diff for /loncom/interface/multidownload.pl between versions 1.40 and 1.43

version 1.40, 2017/11/03 18:08:54 version 1.43, 2020/09/02 14:52:08
Line 31  use LONCAPA::loncgi; Line 31  use LONCAPA::loncgi;
 use File::Path;  use File::Path;
 use File::Basename;  use File::Basename;
 use File::Copy;  use File::Copy;
   use Archive::Zip qw( :ERROR_CODES );
 use Apache::lonhtmlcommon();  use Apache::lonhtmlcommon();
 use Apache::lonnavmaps();  use Apache::lonnavmaps();
 use Apache::loncommon();  use Apache::loncommon();
Line 38  use Apache::lonlocal; Line 39  use Apache::lonlocal;
 use Apache::lonmsg();  use Apache::lonmsg();
 use Apache::lonnet;  use Apache::lonnet;
 use LONCAPA::Enrollment;  use LONCAPA::Enrollment;
   use LONCAPA;
 use strict;  use strict;
   
 sub is_flat {  sub is_flat {
Line 74  sub get_part_resp_path { Line 76  sub get_part_resp_path {
 $|=1;  $|=1;
 &Apache::lonlocal::get_language_handle();  &Apache::lonlocal::get_language_handle();
 &Apache::loncommon::content_type(undef,'text/html');  &Apache::loncommon::content_type(undef,'text/html');
 my ($nocookie,$identifier,$unique_path,$scope);  my ($nocookie,$identifier,$unique_path,$scope,$unique_user);
 if (! &LONCAPA::loncgi::check_cookie_and_load_env()) {  if (! &LONCAPA::loncgi::check_cookie_and_load_env()) {
     print(&LONCAPA::loncgi::missing_cookie_msg());      print(&LONCAPA::loncgi::missing_cookie_msg());
     $nocookie = 1;      $nocookie = 1;
Line 89  unless ($nocookie) { Line 91  unless ($nocookie) {
         $identifier = $ENV{'QUERY_STRING'};          $identifier = $ENV{'QUERY_STRING'};
         $unique_path = $identifier.time();          $unique_path = $identifier.time();
     }      }
       if (($env{'user.name'} =~ /^$LONCAPA::match_username$/) &&
           ($env{'user.domain'} =~ /^$LONCAPA::match_domain$/)) {
           $unique_user = $env{'user.name'}.':'.$env{'user.domain'};
       }
     print(&Apache::loncommon::start_page('Multiple Downloads'));      print(&Apache::loncommon::start_page('Multiple Downloads'));
 }  }
 if ($scope eq '') {  if ($scope eq '') {
Line 101  if ($scope eq '') { Line 107  if ($scope eq '') {
             print(&mt('You are not authorized to download student submissions.'));              print(&mt('You are not authorized to download student submissions.'));
         }          }
     }      }
   } elsif ($unique_user eq '') {
       unless ($nocookie) {
           if (&Apache::lonnet::allowed('vgr',$scope) eq 'F') {
               print(&mt('Characters in your username and/or domain prevent download of submissions.'));
           } else {
               print(&mt('You are not authorized to download student submissions.'));
           }
       }
 } elsif (&Apache::lonnet::allowed('vgr',$scope) eq 'F') {  } elsif (&Apache::lonnet::allowed('vgr',$scope) eq 'F') {
     my $symb = $env{'cgi.'.$identifier.'.symb'};      my $symb = $env{'cgi.'.$identifier.'.symb'};
     my $navmap = Apache::lonnavmaps::navmap->new();      my $navmap = Apache::lonnavmaps::navmap->new();
Line 109  if ($scope eq '') { Line 123  if ($scope eq '') {
     my ($flat_part, $flat_resp) = &is_flat($partlist, $res);      my ($flat_part, $flat_resp) = &is_flat($partlist, $res);
     my ($zipout) = ($symb =~ /^.*\/(.+)\.problem$/);      my ($zipout) = ($symb =~ /^.*\/(.+)\.problem$/);
     $zipout =~ s/\s/_/g;      $zipout =~ s/\s/_/g;
       $zipout =~ s/[^\w.\-]+//g;
     $zipout .= "$identifier.zip";      $zipout .= "$identifier.zip";
     my $courseid = $env{'request.course.id'};      my $courseid = $env{'request.course.id'};
     my @stuchecked = split(/\n/,$env{'cgi.'.$identifier.'.students'});      my @stuchecked = split(/\n/,$env{'cgi.'.$identifier.'.students'});
     my $number_of_students = scalar(@stuchecked);      my $number_of_students = scalar(@stuchecked);
     my %prog_state=&Apache::lonhtmlcommon::Create_PrgWin('',$number_of_students);      my %prog_state=&Apache::lonhtmlcommon::Create_PrgWin('',$number_of_students);
     my @parts = split(/\n/,$env{'cgi.'.$identifier.'.parts'});      my @parts = split(/\n/,$env{'cgi.'.$identifier.'.parts'});
     my $doc_zip_root = $Apache::lonnet::perlvar{'lonZipDir'};      my @getparts;
     my $uname = $env{'user.name'};      if (ref($partlist) eq 'ARRAY') {
     my $udom = $env{'user.domain'};          if (@parts) {
     my $unique_user = $uname.":".$udom;              foreach my $posspart (@{$partlist}) {
     my $manifest;                  if (grep(/^\Q$posspart\E$/,@parts)) {
     &mkpath($doc_zip_root."/zipdir/$unique_user/$unique_path",0,0700);                      unless (grep(/^\Q$posspart\E$/,@getparts)) {
     if (open(MANIFEST, ">$doc_zip_root/zipdir/$unique_user/$unique_path/manifest.txt")) {                          push(@getparts,$posspart);
         $manifest = 1;                      }
         print MANIFEST (&mt("Zip file generated on [_1]",&Apache::lonlocal::locallocaltime(time()))."\n");                  }
         print MANIFEST (&mt("Course: [_1]",$env{"course.$courseid.description"})."\n");              }
         print MANIFEST (&mt("Problem: [_1]",$res->compTitle)."\n");          } else {
         print MANIFEST (&mt("Files contained in this zip:")."\n");              @getparts = @{$partlist};
     } else {          }
         &Apache::lonnet::logthis("Problem making manifest");  
     }      }
     my $file_problem = 0;      if (!@getparts) {
     my $current_student = 0;          print(&mt('No problem parts specified for retrieval of submissions.'));
     foreach my $stu (@stuchecked) {      } elsif (!$number_of_students) {
         $current_student ++;          print(&mt('No students selected for retrieval of submissions.'));
         &Apache::lonhtmlcommon::Update_PrgWin('',\%prog_state,&mt("Processing student [_1] of [_2]",$current_student,$number_of_students));      } else {
         my %files_saved;          my $doc_zip_root = $Apache::lonnet::perlvar{'lonZipDir'};
         my ($stuname,$studom,$fullname) = split(/:/,$stu);          my $manifest;
         my %record = &Apache::lonnet::restore($symb,$courseid,$studom,$stuname);          unless (-d "$doc_zip_root/zipdir/$unique_user/$unique_path") {
         my $port_url = '/uploaded/'.$studom.'/'.$stuname.'/portfolio';              &File::Path::mkpath($doc_zip_root."/zipdir/$unique_user/$unique_path",0,0700);
         if ($manifest) {  
             print MANIFEST ($fullname."\n");  
         }          }
                    if (open(MANIFEST,'>',"$doc_zip_root/zipdir/$unique_user/$unique_path/manifest.txt")) {
         my $submission_count = 0;              $manifest = 1;
         foreach my $partid (@$partlist) {              print MANIFEST (&mt("Zip file generated on [_1]",&Apache::lonlocal::locallocaltime(time()))."\n");
             my @ids = $res->responseIds($partid);              print MANIFEST (&mt("Course: [_1]",$env{"course.$courseid.description"})."\n");
             foreach my $respid (@ids) {              print MANIFEST (&mt("Problem: [_1]",$res->compTitle)."\n");
                 my $part_resp_path = &get_part_resp_path($flat_part,$flat_resp, $partid, $respid);              print MANIFEST (&mt("Files contained in this zip:")."\n");
                 &mkpath($doc_zip_root."/zipdir/$unique_user/$unique_path/$stuname/$part_resp_path",0,0700);          } else {
                 foreach my $origin ('portfiles','uploadedurl') {              &Apache::lonnet::logthis("Problem making manifest");
                     my @files;          }
                     if ($record{"resource.$partid.$respid.$origin"} ne '') {          my $file_problem = 0;
                         if ($origin eq 'portfiles') {          my $current_student = 0;
                             @files = (split(',',$record{"resource.$partid.$respid.$origin"}));          foreach my $stu (@stuchecked) {
                         } else {              $current_student ++;
                             @files = ($record{"resource.$partid.$respid.$origin"});              &Apache::lonhtmlcommon::Update_PrgWin('',\%prog_state,&mt("Processing student [_1] of [_2]",$current_student,$number_of_students));
                         }              my %files_saved;
                     }              my ($stuname,$studom,$fullname) = split(/:/,$stu);
                     foreach my $file (@files) {              my %record = &Apache::lonnet::restore($symb,$courseid,$studom,$stuname);
                         if ($origin eq 'portfiles') {               my $port_url = '/uploaded/'.$studom.'/'.$stuname.'/portfolio';
                             $file = $port_url.$file;              if ($manifest) {
                         }                  print MANIFEST ($fullname."\n");
                         my ($file_name_only) = ($file =~ m{.*/([^/]+)$});              }
                         if ($manifest) {  
                             print MANIFEST ("\t$file_name_only (".&mt("Part [_1]",$partid).              my $submission_count = 0;
                                             ") (".&mt("Response [_1]",$respid).")"."\n");              foreach my $partid (@getparts) {
                   my @ids = $res->responseIds($partid);
                   foreach my $respid (@ids) {
                       my $part_resp_path = &get_part_resp_path($flat_part,$flat_resp, $partid, $respid);
                       &File::Path::mkpath($doc_zip_root."/zipdir/$unique_user/$unique_path/$stuname/$part_resp_path",0,0700);
                       foreach my $origin ('portfiles','uploadedurl') {
                           my @files;
                           if ($record{"resource.$partid.$respid.$origin"} ne '') {
                               if ($origin eq 'portfiles') {
                                   @files = (split(',',$record{"resource.$partid.$respid.$origin"}));
                               } else {
                                   @files = ($record{"resource.$partid.$respid.$origin"});
                               }
                         }                          }
                         $submission_count ++;                          foreach my $file (@files) {
                         &Apache::lonnet::repcopy($file);                              if ($origin eq 'portfiles') { 
                         my $source = &Apache::lonnet::filelocation("",$file);                                  $file = $port_url.$file;
                         my $destination = "$doc_zip_root/zipdir/$unique_user/$unique_path/$stuname$part_resp_path/$file_name_only";                              }
                         if (exists($files_saved{$destination})) {                              my ($file_name_only) = ($file =~ m{.*/([^/]+)$});
                             # file has already been saved once                              if ($manifest) {
                             my ($file_name,$file_ext) =                                   print MANIFEST ("\t$file_name_only (".&mt("Part [_1]",$partid).
                                 ($destination =~ /(^.*)(\..+$)/);                                                  ") (".&mt("Response [_1]",$respid).")"."\n");
                             $destination = $file_name.$files_saved{$destination}.$file_ext;                              }
                               $submission_count ++;
                               &Apache::lonnet::repcopy($file);
                               my $source = &Apache::lonnet::filelocation("",$file);
                               my $destination = "$doc_zip_root/zipdir/$unique_user/$unique_path/$stuname$part_resp_path/$file_name_only";
                               if (exists($files_saved{$destination})) {
                                   # file has already been saved once
                                   my ($file_name,$file_ext) = 
                                       ($destination =~ /(^.*)(\..+$)/);
                                   $destination = $file_name.$files_saved{$destination}.$file_ext;
                                   $files_saved{$destination}++;
                               }
                             $files_saved{$destination}++;                              $files_saved{$destination}++;
                         }                              if (!&copy($source,$destination)) {
                         $files_saved{$destination}++;                                  if (!$file_problem) {
                         if (!&copy($source,$destination)) {                                      print('<br /><span class="LC_error">'.&mt("Unable to create: ")."</span><br />");
                             if (!$file_problem) {                                      $file_problem = 1;
                                 print('<br /><span class="LC_error">'.&mt("Unable to create: ")."</span><br />");                                  }
                                 $file_problem = 1;                                  print('<span class="LC_filename">'."$stuname/part$partid/resp$respid/$file_name_only".'</span><br />');
                             }                              }
                             print('<span class="LC_filename">'."$stuname/part$partid/resp$respid/$file_name_only".'</span><br />');  
                         }                          }
                     }                      }
                 }                  }
             }              }
               if ((!$submission_count) && ($manifest)) {
                   print MANIFEST ("\t".&mt("No Files Submitted")."\n");
               }
         }          }
         if ((!$submission_count) && ($manifest)) {          if ($manifest) {
             print MANIFEST ("\t".&mt("No Files Submitted")."\n");              close(MANIFEST);
           }
           my $madezip;
           unless (-d "$doc_zip_root/zipout/$unique_user") {
               &File::Path::mkpath($doc_zip_root."/zipout/$unique_user",0,0700);
           }
           if ((-d "$doc_zip_root/zipout/$unique_user") &&
               (-d "$doc_zip_root/zipdir/$unique_user/$unique_path")) {
               if (!-e "$doc_zip_root/zipout/$unique_user/$zipout") {
                   my $zip = Archive::Zip->new();
                   $zip->addTree("$doc_zip_root/zipdir/$unique_user/$unique_path");
                   if ($zip->writeToFileNamed("$doc_zip_root/zipout/$unique_user/$zipout") == AZ_OK) {
                       $madezip = 1;
                   }
               } else {
                   $madezip = 1;
                   # should happen only if user reloads page
                   &Apache::lonnet::logthis("$zipout is already there");
               }
               &File::Path::remove_tree("$doc_zip_root/zipdir/$unique_user/$unique_path",{ safe => 1, });
           }
           &Apache::lonhtmlcommon::Close_PrgWin('',\%prog_state);
           if ($madezip) {
               print('<p><a href="/zipspool/zipout/'.$unique_user.'/'.$zipout.'">'.
                     &mt("Click to download").'</a></p><br />');
           } else {
               print('<p class="LC_error">'.
                     &mt('Failed to create zip archive of student submissions').
                     '</p>');
         }          }
     }  
       
     &mkpath($doc_zip_root."/zipout/$unique_user",0,0700);  
     my $statement;  
     if (! -e "$doc_zip_root/zipout/$unique_user/$zipout") {  
         $statement = "cd $doc_zip_root/zipdir/$unique_user/$unique_path\n";  
         $statement .= "zip -r $doc_zip_root/zipout/$unique_user/$zipout * > /dev/null";  
         system($statement);  
     } else {  
         # should happen only if user reloads page   
         &Apache::lonnet::logthis("$zipout is already there");  
     }  
     $statement = "rm -rf $doc_zip_root/zipdir/$unique_user/$unique_path";  
     system($statement);  
     &Apache::lonhtmlcommon::Close_PrgWin('',\%prog_state);  
     print('<p><a href="/zipspool/zipout/'.$unique_user.'/'.$zipout.'">'.  
             &mt("Click to download").'</a></p><br />');  
     if ($manifest) {  
         close(MANIFEST);  
     }      }
 } else {  } else {
     print(&mt('You are not authorized to download student submissions.'));      print('<p class="LC_error">'.
             &mt('You are not authorized to download student submissions.').
             '</p>');
 }  }
 unless ($nocookie) {  unless ($nocookie) {
     print(&Apache::loncommon::end_page());      print(&Apache::loncommon::end_page());

Removed from v.1.40  
changed lines
  Added in v.1.43


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>