[BACK]Return to refresh_courseids_db.pl CVS log [TXT] [DIR] Up to [LON-CAPA] / loncom / misc

Diff for /loncom/misc/refresh_courseids_db.pl between versions 1.2 and 1.9

version 1.2, 2010/03/15 20:13:14 version 1.9, 2010/12/16 17:03:48
Line 54  use strict; Line 54  use strict;
 use lib '/home/httpd/lib/perl/';  use lib '/home/httpd/lib/perl/';
 use Apache::lonnet;  use Apache::lonnet;
 use Apache::loncommon;  use Apache::loncommon;
   use Apache::lonuserstate;
   use Apache::loncoursedata;
   use Apache::lonnavmaps;
 use LONCAPA qw(:DEFAULT :match);  use LONCAPA qw(:DEFAULT :match);
   
 exit if ($Apache::lonnet::perlvar{'lonRole'} ne 'library');  exit if ($Apache::lonnet::perlvar{'lonRole'} ne 'library');
   
   use vars qw( %checkparms %checkresponsetypes %checkcrstypes %anonsurvey %randomizetry );
   
 #  Make sure this process is running from user=www  #  Make sure this process is running from user=www
 my $wwwid=getpwnam('www');  my $wwwid=getpwnam('www');
 if ($wwwid!=$<) {  if ($wwwid!=$<) {
Line 73  open(my $fh,'>>'.$Apache::lonnet::perlva Line 78  open(my $fh,'>>'.$Apache::lonnet::perlva
 print $fh "==== refresh_courseids_db.pl Run ".localtime()."====\n";  print $fh "==== refresh_courseids_db.pl Run ".localtime()."====\n";
   
 my @domains = sort(&Apache::lonnet::current_machine_domains());  my @domains = sort(&Apache::lonnet::current_machine_domains());
   my @ids=&Apache::lonnet::current_machine_ids();
   
   &build_release_hashes();
   $env{'allowed.bre'} = 'F';
   
 foreach my $dom (@domains) {  foreach my $dom (@domains) {
     my %courseshash;      my %courseshash;
     my @ids=&Apache::lonnet::current_machine_ids();  
     my %currhash = &Apache::lonnet::courseiddump($dom,'.',1,'.','.','.',1,\@ids,'.');      my %currhash = &Apache::lonnet::courseiddump($dom,'.',1,'.','.','.',1,\@ids,'.');
       my %lastaccess = &Apache::lonnet::courselastaccess($dom,undef,\@ids);
     my $dir = $Apache::lonnet::perlvar{lonUsersDir}.'/'.$dom;      my $dir = $Apache::lonnet::perlvar{lonUsersDir}.'/'.$dom;
     my %domdesign = &Apache::loncommon::get_domainconf($dom);      my %domdesign = &Apache::loncommon::get_domainconf($dom);
     my $autoassign = $domdesign{$dom.'.autoassign.co-owners'};      my $autoassign = $domdesign{$dom.'.autoassign.co-owners'};
     &recurse_courses($dom,$dir,0,\%courseshash,\%currhash,$autoassign,$fh);      &recurse_courses($dom,$dir,0,\%courseshash,\%currhash,\%lastaccess,$autoassign,$fh);
     foreach my $lonhost (keys(%courseshash)) {      foreach my $lonhost (keys(%courseshash)) {
         if (ref($courseshash{$lonhost}) eq 'HASH') {          if (ref($courseshash{$lonhost}) eq 'HASH') {
             if (&Apache::lonnet::courseidput($dom,$courseshash{$lonhost},$lonhost,'notime') eq 'ok') {              if (&Apache::lonnet::courseidput($dom,$courseshash{$lonhost},$lonhost,'notime') eq 'ok') {
Line 92  foreach my $dom (@domains) { Line 102  foreach my $dom (@domains) {
     }      }
 }  }
   
   delete($env{'allowed.bre'});
   
 ## Finished!  ## Finished!
 print $fh "==== refresh_courseids.db completed ".localtime()." ====\n";  print $fh "==== refresh_courseids.db completed ".localtime()." ====\n";
 close($fh);  close($fh);
   
 sub recurse_courses {  sub recurse_courses {
     my ($cdom,$dir,$depth,$courseshash,$currhash,$autoassign,$fh) = @_;      my ($cdom,$dir,$depth,$courseshash,$currhash,$lastaccess,$autoassign,$fh) = @_;
     next unless (ref($currhash) eq 'HASH');      next unless (ref($currhash) eq 'HASH');
     if (-d $dir) {      if (-d $dir) {
         opendir(DIR,$dir);          opendir(DIR,$dir);
Line 107  sub recurse_courses { Line 119  sub recurse_courses {
         foreach my $item (@contents) {          foreach my $item (@contents) {
             if ($depth < 4) {              if ($depth < 4) {
                 &recurse_courses($cdom,$dir.'/'.$item,$depth,$courseshash,                  &recurse_courses($cdom,$dir.'/'.$item,$depth,$courseshash,
                                  $currhash,$autoassign,$fh);                                   $currhash,$lastaccess,$autoassign,$fh);
             } elsif ($item =~ /^$match_courseid$/) {              } elsif ($item =~ /^$match_courseid$/) {
                 my $cnum = $item;                  my $cnum = $item;
                 my $cid = $cdom.'_'.$cnum;                  my $cid = $cdom.'_'.$cnum;
Line 140  sub recurse_courses { Line 152  sub recurse_courses {
                 }                  }
                 my $chome = &Apache::lonnet::homeserver($cnum,$cdom);                  my $chome = &Apache::lonnet::homeserver($cnum,$cdom);
                 my $owner = $courseinfo{'internal.courseowner'};                  my $owner = $courseinfo{'internal.courseowner'};
                 my (%roleshash,$gotcc);                  my $twodaysago = time - 172800;
                   my (%roleshash,$gotcc,$reqdmajor,$reqdminor);
                 if ($owner eq '') {                  if ($owner eq '') {
                     %roleshash = &Apache::lonnet::get_my_roles($cnum,$cdom,undef,undef,['cc'],undef,undef,1);                      %roleshash = &Apache::lonnet::get_my_roles($cnum,$cdom,undef,undef,['cc'],undef,undef,1);
                     $gotcc = 1;                      $gotcc = 1;
Line 165  sub recurse_courses { Line 178  sub recurse_courses {
                 my $creator = $courseinfo{'internal.creator'};                  my $creator = $courseinfo{'internal.creator'};
                 my $creationcontext = $courseinfo{'internal.creationcontext'};                  my $creationcontext = $courseinfo{'internal.creationcontext'};
                 my $inst_code = $courseinfo{'internal.coursecode'};                  my $inst_code = $courseinfo{'internal.coursecode'};
                   my $releaserequired = $courseinfo{'internal.releaserequired'};
                 $inst_code = '' if (!defined($inst_code));                  $inst_code = '' if (!defined($inst_code));
                 $owner = '' if (!defined($owner));                  $owner = '' if (!defined($owner));
                 if ($created eq '') {                  if ($created eq '') {
Line 187  sub recurse_courses { Line 201  sub recurse_courses {
                             my @stats = stat("$dir/$cnum/passwd");                              my @stats = stat("$dir/$cnum/passwd");
                             $created = $stats[9];                              $created = $stats[9];
                         }                          }
                         my %lastaccess =                           if ($lastaccess->{$cid}) {
                             &Apache::lonnet::courselastaccess($cdom,$cnum);  
                         if ($lastaccess{$cid}) {  
                             if ($created eq '') {                              if ($created eq '') {
                                 $created = $lastaccess{$cid};                                  $created = $lastaccess->{$cid};
                             } elsif ($lastaccess{$cid} < $created) {                              } elsif ($lastaccess->{$cid} < $created) {
                                 $created = $lastaccess{$cid};                                  $created = $lastaccess->{$cid};
                             }                              }
                         }                          }
                         unless ($created eq '') {                          unless ($created eq '') {
Line 201  sub recurse_courses { Line 213  sub recurse_courses {
                         }                          }
                     }                      }
                 }                  }
                    
                   if (($chome ne '')  && ($lastaccess->{$cid} > $twodaysago)) {
                       $env{'request.course.id'} = $cdom.'_'.$cnum;
                       $env{'request.role'} = 'cc./'.$cdom.'/'.$cnum;
                       &Apache::lonuserstate::readmap($cdom.'/'.$cnum);
   
                       # check all parameters
                       ($reqdmajor,$reqdminor) = &parameter_constraints($cnum,$cdom);
   
                       # check course type
                       ($reqdmajor,$reqdminor) = &coursetype_constraints($cnum,$cdom,$crstype,
                                                                         $reqdmajor,
                                                                         $reqdminor);
                       # check course contents
                       ($reqdmajor,$reqdminor) = &coursecontent_constraints($cnum,$cdom,
                                                                            $reqdmajor,
                                                                            $reqdminor);
                       delete($env{'request.course.id'});
                       delete($env{'request.role'});
                   } elsif ($releaserequired) {
                       ($reqdmajor,$reqdminor) = split(/\./,$releaserequired);
                   }
   
                 unless ($chome eq 'no_host') {                  unless ($chome eq 'no_host') {
                     $courseshash->{$chome}{$cid} = {                      $courseshash->{$chome}{$cid} = {
                         description => $courseinfo{'description'},                          description => $courseinfo{'description'},
Line 263  sub recurse_courses { Line 298  sub recurse_courses {
                     } elsif ($courseinfo{'internal.co-owners'} ne '') {                      } elsif ($courseinfo{'internal.co-owners'} ne '') {
                         $courseshash->{$chome}{$cid}{'co-owners'} = $courseinfo{'internal.co-owners'};                          $courseshash->{$chome}{$cid}{'co-owners'} = $courseinfo{'internal.co-owners'};
                     }                      }
                       foreach my $item ('categories','cloners','hidefromcat') {
                           if ($courseinfo{$item} ne '') {
                               $courseshash->{$chome}{$cid}{$item} = $courseinfo{$item}; 
                           }
                       }
                       foreach my $item ('selfenroll_types','selfenroll_start_date','selfenroll_end_date') {
                           if ($courseinfo{'internal.'.$item} ne '') {
                               $courseshash->{$chome}{$cid}{$item} =
                                   $courseinfo{'internal.'.$item};
                           }
                       }
                       if ($reqdmajor eq '' && $reqdminor eq '') {
                           if ($courseinfo{'internal.releaserequired'} ne '') {
                               $changes{'internal.releaserequired'} = '';
                           }
                       } else {
                           my $releasereq =  $reqdmajor.'.'.$reqdminor;
                           $courseshash->{$chome}{$cid}{'releaserequired'} = $releasereq;
                           if ($courseinfo{'internal.releaserequired'} eq '') {
                               $changes{'internal.releaserequired'} = $releasereq;
                           } else {
                               if ($courseinfo{'internal.releaserequired'} ne $releasereq) {
                           
                                   $changes{'internal.releaserequired'} = $releasereq;
                               }
                           }
                       }
                     if (keys(%changes)) {                      if (keys(%changes)) {
                         if (&Apache::lonnet::put('environment',\%changes,$cdom,$cnum) eq 'ok') {                          if (&Apache::lonnet::put('environment',\%changes,$cdom,$cnum) eq 'ok') {
                             print $fh "Course's environment.db for ".$cdom."_".$cnum." successfully updated with following entries: ";                              print $fh "Course's environment.db for ".$cdom."_".$cnum." successfully updated with following entries: ";
Line 281  sub recurse_courses { Line 343  sub recurse_courses {
     return;      return;
 }  }
   
   sub parameter_constraints {
       my ($cnum,$cdom) = @_;
       my ($reqdmajor,$reqdminor);
       my $resourcedata=&read_paramdata($cnum,$cdom);
       if (ref($resourcedata) eq 'HASH') {
           foreach my $key (keys(%{$resourcedata})) { 
               foreach my $item (keys(%checkparms)) {
                   if ($key =~ /(\Q$item\E)$/) {
                       if (ref($checkparms{$item}) eq 'ARRAY') {
                           my $value = $resourcedata->{$key};
                           if (grep(/^\Q$value\E$/,@{$checkparms{$item}})) {
                               my ($major,$minor) = split(/\./,$Apache::lonnet::needsrelease{'parameter:'.$item.':'.$value});
                               ($reqdmajor,$reqdminor) = 
                                   &update_reqd_loncaparev($major,$minor,$reqdmajor,$reqdminor);
                           }
                       }
                   }
               }
           }
       }
       return ($reqdmajor,$reqdminor);
   }
   
   sub coursetype_constraints {
       my ($cnum,$cdom,$crstype,$reqdmajor,$reqdminor) = @_;
       if (defined($checkcrstypes{$crstype})) {
           my ($major,$minor) = split(/\./,$checkcrstypes{$crstype});
           ($reqdmajor,$reqdminor) = 
               &update_reqd_loncaparev($major,$minor,$reqdmajor,$reqdminor);
       }
       return ($reqdmajor,$reqdminor);
   }
   
   sub coursecontent_constraints {
       my ($cnum,$cdom,$reqdmajor,$reqdminor) = @_;
       my $navmap = Apache::lonnavmaps::navmap->new();
       if (defined($navmap)) {
           my %anonsubmissions =  &Apache::lonnet::dump('nohist_anonsurveys',
                                                        $cdom,$cnum);
           my %randomizetrysubm = &Apache::lonnet::dump('nohist_randomizetry',
                                                        $cdom,$cnum);
           my %allresponses;
           my ($anonsurv_subm,$randbytry_subm);
           foreach my $res ($navmap->retrieveResources(undef,sub { $_[0]->is_problem() },1,0)) {
               my %responses = $res->responseTypes();
               foreach my $key (keys(%responses)) {
                   next unless(exists($checkresponsetypes{$key}));
                   $allresponses{$key} += $responses{$key};
               }
               my @parts = @{$res->parts()};
               my $symb = $res->symb();
               foreach my $part (@parts) {
                   if (exists($anonsubmissions{$symb."\0".$part})) {
                       $anonsurv_subm = 1;
                   }
                   if (exists($randomizetrysubm{$symb."\0".$part})) {
                       $randbytry_subm = 1;
                   }
               }
           }
           foreach my $key (keys(%allresponses)) {
               my ($major,$minor) = split(/\./,$checkresponsetypes{$key});
               ($reqdmajor,$reqdminor) = &update_reqd_loncaparev($major,$minor,$reqdmajor,$reqdminor);
           }
           if ($anonsurv_subm) {
               ($reqdmajor,$reqdminor) = &update_reqd_loncaparev($anonsurvey{major},
                                             $anonsurvey{minor},$reqdmajor,$reqdminor);
           }
           if ($randbytry_subm) {
               ($reqdmajor,$reqdminor) = &update_reqd_loncaparev($randomizetry{major},
                                             $randomizetry{minor},$reqdmajor,$reqdminor);
           }
       }
       return ($reqdmajor,$reqdminor);
   }
   
   sub update_reqd_loncaparev {
       my ($major,$minor,$reqdmajor,$reqdminor) = @_;
       if (($major ne '' && $major !~ /\D/) & ($minor ne '' && $minor !~ /\D/)) {
           if ($reqdmajor eq '' || $reqdminor eq '') {
               $reqdmajor = $major;
               $reqdminor = $minor;
           } elsif (($major > $reqdmajor) ||
               ($major == $reqdmajor && $minor > $reqdminor))  {
               $reqdmajor = $major;
               $reqdminor = $minor;
           }
       }
       return ($reqdmajor,$reqdminor);
   }
   
   sub read_paramdata {
       my ($cnum,$dom)=@_;
       my $resourcedata=&Apache::lonnet::get_courseresdata($cnum,$dom);
       my $classlist=&Apache::loncoursedata::get_classlist();
       foreach my $student (keys(%{$classlist})) {
           if ($student =~/^($LONCAPA::match_username)\:($LONCAPA::match_domain)$/) {
               my ($tuname,$tudom)=($1,$2);
               my $useropt=&Apache::lonnet::get_userresdata($tuname,$tudom);
               foreach my $userkey (keys(%{$useropt})) {
                   if ($userkey=~/^$env{'request.course.id'}/) {
                       my $newkey=$userkey;
                       $newkey=~s/^($env{'request.course.id'}\.)/$1\[useropt\:$tuname\:$tudom\]\./;
                       $$resourcedata{$newkey}=$$useropt{$userkey};
                   }
               }
            }
       }
       return $resourcedata;
   }
   
   sub build_release_hashes {
       foreach my $key (keys(%Apache::lonnet::needsrelease)) {
           my ($item,$name,$value) = split(/:/,$key);
           if ($item eq 'parameter') {
               if (ref($checkparms{$name}) eq 'ARRAY') {
                   unless(grep(/^\Q$name\E$/,@{$checkparms{$name}})) {
                       push(@{$checkparms{$name}},$value);
                   }
               } else {
                   push(@{$checkparms{$name}},$value);
               }
           } elsif ($item eq 'resourcetag') {
               if ($name eq 'responsetype') {
                   $checkresponsetypes{$value} = $Apache::lonnet::needsrelease{$key}
               }
           } elsif ($item eq 'course') {
               if ($name eq 'crstype') {
                   $checkcrstypes{$value} = $Apache::lonnet::needsrelease{$key};
               }
           }
       }
       ($anonsurvey{major},$anonsurvey{minor}) = split(/\./,$Apache::lonnet::needsrelease{'parameter:type:anonsurvey'});
       ($randomizetry{major},$randomizetry{minor}) = split(/\./,$Apache::lonnet::needsrelease{'parameter:type:randomizetry'});
       return;
   }
   
Removed from v.1.2  
changed lines
  Added in v.1.9

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>