Annotation of loncom/interface/lonspreadsheet.pm, revision 1.80

1.79      matthew     1: #
1.80    ! matthew     2: # $Id: lonspreadsheet.pm,v 1.79 2002/01/22 10:05:24 matthew Exp $
1.79      matthew     3: #
                      4: # Copyright Michigan State University Board of Trustees
                      5: #
                      6: # This file is part of the LearningOnline Network with CAPA (LON-CAPA).
                      7: #
                      8: # LON-CAPA is free software; you can redistribute it and/or modify
                      9: # it under the terms of the GNU General Public License as published by
                     10: # the Free Software Foundation; either version 2 of the License, or
                     11: # (at your option) any later version.
                     12: #
                     13: # LON-CAPA is distributed in the hope that it will be useful,
                     14: # but WITHOUT ANY WARRANTY; without even the implied warranty of
                     15: # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
                     16: # GNU General Public License for more details.
                     17: #
                     18: # You should have received a copy of the GNU General Public License
                     19: # along with LON-CAPA; if not, write to the Free Software
                     20: # Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
                     21: #
                     22: # /home/httpd/html/adm/gpl.txt
                     23: #
                     24: # http://www.lon-capa.org/
                     25: #
1.1       www        26: # The LearningOnline Network with CAPA
                     27: # Spreadsheet/Grades Display Handler
                     28: #
1.15      www        29: # 11/11,11/15,11/27,12/04,12/05,12/06,12/07,
1.23      www        30: # 12/08,12/09,12/11,12/12,12/15,12/16,12/18,12/19,12/30,
1.39      www        31: # 01/01/01,02/01,03/01,19/01,20/01,22/01,
1.47      www        32: # 03/05,03/08,03/10,03/12,03/13,03/15,03/17,
1.55      www        33: # 03/19,03/20,03/21,03/27,04/05,04/09,
1.69      www        34: # 07/09,07/14,07/21,09/01,09/10,9/11,9/12,9/13,9/14,9/17,
1.77      www        35: # 10/16,10/17,10/20,11/05,11/28,12/27 Gerd Kortemeyer
1.78      matthew    36: # 01/14/02 Matthew
1.80    ! matthew    37: # 02/04/02 Matthew
        !            38: 
        !            39: # POD required stuff:
        !            40: 
        !            41: =head1 NAME
        !            42: 
        !            43: lonspreadsheet
        !            44: 
        !            45: =head1 SYNOPSIS
        !            46: 
        !            47: Spreadsheet interface to internal LON-CAPA data
        !            48: 
        !            49: =head1 DESCRIPTION
        !            50: 
        !            51: Lonspreadsheet provides course coordinators the ability to manage their
        !            52: students grades online.  The students are able to view their own grades, but
        !            53: not the grades of their peers.  The spreadsheet is highly customizable,
        !            54: offering the ability to use Perl code to manipulate data, as well as many
        !            55: built-in functions.
        !            56: 
        !            57: 
        !            58: =head2 Functions available to user of lonspreadsheet
        !            59: 
        !            60: =over 4
        !            61: 
        !            62: =cut
1.1       www        63: 
                     64: package Apache::lonspreadsheet;
1.36      www        65:             
1.1       www        66: use strict;
                     67: use Safe;
1.3       www        68: use Safe::Hole;
1.1       www        69: use Opcode;
                     70: use Apache::lonnet;
1.7       www        71: use Apache::Constants qw(:common :http);
1.19      www        72: use GDBM_File;
1.3       www        73: use HTML::TokeParser;
                     74: 
1.11      www        75: #
1.44      www        76: # Caches for previously calculated spreadsheets
                     77: #
                     78: 
                     79: my %oldsheets;
1.46      www        80: my %loadedcaches;
1.47      www        81: my %expiredates;
1.44      www        82: 
                     83: #
1.39      www        84: # Cache for stores of an individual user
                     85: #
                     86: 
                     87: my $cachedassess;
                     88: my %cachedstores;
                     89: 
                     90: #
1.11      www        91: # These cache hashes need to be independent of user, resource and course
1.27      www        92: # (user and course can/should be in the keys)
1.11      www        93: #
1.33      www        94: 
                     95: my %spreadsheets;
                     96: my %courserdatas;
                     97: my %userrdatas;
                     98: my %defaultsheets;
1.35      www        99: my %updatedata;
1.27      www       100: 
1.11      www       101: #
                    102: # These global hashes are dependent on user, course and resource, 
                    103: # and need to be initialized every time when a sheet is calculated
                    104: #
                    105: my %courseopt;
                    106: my %useropt;
                    107: my %parmhash;
                    108: 
1.28      www       109: # Stuff that only the screen handler can know
                    110: 
                    111: my $includedir;
                    112: my $tmpdir;
                    113: 
1.5       www       114: # =============================================================================
                    115: # ===================================== Implements an instance of a spreadsheet
1.4       www       116: 
                    117: sub initsheet {
1.36      www       118:     my $safeeval = new Safe(shift);
1.4       www       119:     my $safehole = new Safe::Hole;
                    120:     $safeeval->permit("entereval");
                    121:     $safeeval->permit(":base_math");
                    122:     $safeeval->permit("sort");
                    123:     $safeeval->deny(":base_io");
                    124:     $safehole->wrap(\&Apache::lonnet::EXT,$safeeval,'&EXT');
                    125:     my $code=<<'ENDDEFS';
                    126: # ---------------------------------------------------- Inside of the safe space
                    127: 
1.3       www       128: #
                    129: # f: formulas
1.4       www       130: # t: intermediate format (variable references expanded)
                    131: # v: output values
1.6       www       132: # c: preloaded constants (A-column)
                    133: # rl: row label
1.55      www       134: # os: other spreadsheets (for student spreadsheet only)
1.3       www       135: 
1.36      www       136: undef %v; 
                    137: undef %t;
                    138: undef %f;
                    139: undef %c;
                    140: undef %rl;
1.55      www       141: undef @os;
                    142: 
1.6       www       143: $maxrow=0;
1.5       www       144: $sheettype='';
1.27      www       145: 
                    146: # filename/reference of the sheet
                    147: 
1.5       www       148: $filename='';
1.1       www       149: 
1.27      www       150: # user data
                    151: $uname='';
                    152: $uhome='';
                    153: $udom='';
                    154: 
                    155: # course data
                    156: 
                    157: $csec='';
                    158: $chome='';
                    159: $cnum='';
                    160: $cdom='';
1.28      www       161: $cid='';
1.29      www       162: $cfn='';
1.27      www       163: 
                    164: # symb
                    165: 
                    166: $usymb='';
                    167: 
1.1       www       168: sub mask {
                    169:     my ($lower,$upper)=@_;
                    170: 
1.7       www       171:     $lower=~/([A-Za-z]|\*)(\d+|\*)/;
1.1       www       172:     my $la=$1;
                    173:     my $ld=$2;
                    174: 
1.7       www       175:     $upper=~/([A-Za-z]|\*)(\d+|\*)/;
1.1       www       176:     my $ua=$1;
                    177:     my $ud=$2;
                    178:     my $alpha='';
                    179:     my $num='';
                    180: 
                    181:     if (($la eq '*') || ($ua eq '*')) {
1.7       www       182:        $alpha='[A-Za-z]';
1.1       www       183:     } else {
1.7       www       184:        if (($la=~/[A-Z]/) && ($ua=~/[A-Z]/) ||
                    185:            ($la=~/[a-z]/) && ($ua=~/[a-z]/)) {
                    186:           $alpha='['.$la.'-'.$ua.']';
                    187:        } else {
                    188:           $alpha='['.$la.'-Za-'.$ua.']';
                    189:        }
1.1       www       190:     }   
                    191: 
                    192:     if (($ld eq '*') || ($ud eq '*')) {
                    193: 	$num='\d+';
                    194:     } else {
                    195:         if (length($ld)!=length($ud)) {
                    196:            $num.='(';
1.78      matthew   197: 	   foreach ($ld=~m/\d/g) {
1.1       www       198:               $num.='['.$_.'-9]';
1.78      matthew   199: 	   }
1.1       www       200:            if (length($ud)-length($ld)>1) {
                    201:               $num.='|\d{'.(length($ld)+1).','.(length($ud)-1).'}';
                    202: 	   }
                    203:            $num.='|';
1.78      matthew   204:            foreach ($ud=~m/\d/g) {
1.1       www       205:                $num.='[0-'.$_.']';
1.78      matthew   206:            }
1.1       www       207:            $num.=')';
                    208:        } else {
                    209:            my @lda=($ld=~m/\d/g);
                    210:            my @uda=($ud=~m/\d/g);
1.7       www       211:            my $i; $j=0; $notdone=1;
                    212:            for ($i=0;($i<=$#lda)&&($notdone);$i++) {
1.1       www       213:                if ($lda[$i]==$uda[$i]) {
                    214: 		   $num.=$lda[$i];
                    215:                    $j=$i;
1.7       www       216:                } else {
                    217:                    $notdone=0;
1.1       www       218:                }
                    219:            }
                    220:            if ($j<$#lda-1) {
                    221: 	       $num.='('.$lda[$j+1];
                    222:                for ($i=$j+2;$i<=$#lda;$i++) {
                    223:                    $num.='['.$lda[$i].'-9]';
                    224:                }
                    225:                if ($uda[$j+1]-$lda[$j+1]>1) {
                    226: 		   $num.='|['.($lda[$j+1]+1).'-'.($uda[$j+1]-1).']\d{'.
                    227:                    ($#lda-$j-1).'}';
                    228:                }
                    229: 	       $num.='|'.$uda[$j+1];
                    230:                for ($i=$j+2;$i<=$#uda;$i++) {
                    231:                    $num.='[0-'.$uda[$i].']';
                    232:                }
                    233:                $num.=')';
                    234:            } else {
1.7       www       235:                if ($lda[$#lda]!=$uda[$#uda]) {
                    236:                   $num.='['.$lda[$#lda].'-'.$uda[$#uda].']';
                    237: 	       }
1.1       www       238:            }
                    239:        }
                    240:     }
1.4       www       241:     return '^'.$alpha.$num."\$";
1.80    ! matthew   242: }
        !           243: 
        !           244: #-------------------------------------------------------
        !           245: 
        !           246: =item UWCALC(hashname,modules,units,date) 
        !           247: 
        !           248: returns the proportion of the module 
        !           249: weights not previously completed by the student.
        !           250: 
        !           251: =over 4
        !           252: 
        !           253: =item hashname 
        !           254: 
        !           255: name of the hash the module dates have been inserted into
        !           256: 
        !           257: =item modules 
        !           258: 
        !           259: reference to a cell which contains a comma deliminated list of modules 
        !           260: covered by the assignment.
        !           261: 
        !           262: =item units 
        !           263: 
        !           264: reference to a cell which contains a comma deliminated list of module 
        !           265: weights with respect to the assignment
        !           266: 
        !           267: =item date 
        !           268: 
        !           269: reference to a cell which contains the date the assignment was completed.
        !           270: 
        !           271: =back 
        !           272: 
        !           273: =cut
        !           274: 
        !           275: #-------------------------------------------------------
        !           276: sub UWCALC {
        !           277:     my ($hashname,$modules,$units,$date) = @_;
        !           278:     my @Modules = split(/,/,$modules);
        !           279:     my @Units   = split(/,/,$units);
        !           280:     my $total_weight;
        !           281:     foreach (@Units) {
        !           282: 	$total_weight += $_;
        !           283:     }
        !           284:     my $usum=0;
        !           285:     for (my $i=0; $i<=$#Modules; $i++) {
        !           286: 	if (&HASH($hashname,$Modules[$i]) eq $date) {
        !           287: 	    $usum += $Units[$i];
        !           288: 	}
        !           289:     }
        !           290:     return $usum/$total_weight;
        !           291: }
        !           292: 
        !           293: #-------------------------------------------------------
        !           294: 
        !           295: =item CDLSUM(list) 
        !           296: 
        !           297: returns the sum of the elements in a cell which contains
        !           298: a Comma Deliminate List of numerical values.
        !           299: 'list' is a reference to a cell which contains a comma deliminated list.
        !           300: 
        !           301: =cut
        !           302: 
        !           303: #-------------------------------------------------------
        !           304: sub CDLSUM {
        !           305:     my ($list)=@_;
        !           306:     my $sum;
        !           307:     foreach (split/,/,$list) {
        !           308: 	$sum += $_;
        !           309:     }
        !           310:     return $sum;
        !           311: }
        !           312: 
        !           313: #-------------------------------------------------------
        !           314: 
        !           315: =item CDLITEM(list,index) 
        !           316: 
        !           317: returns the item at 'index' in a Comma Deliminated List.
        !           318: 
        !           319: =over 4
        !           320: 
        !           321: =item list
        !           322: 
        !           323: reference to a cell which contains a comma deliminated list.
        !           324: 
        !           325: =item index 
        !           326: 
        !           327: the Perl index of the item requested (first element in list has
        !           328: an index of 0) 
        !           329: 
        !           330: =back
        !           331: 
        !           332: =cut
        !           333: 
        !           334: #-------------------------------------------------------
        !           335: sub CDLITEM {
        !           336:     my ($list,$index)=@_;
        !           337:     my @Temp = split/,/,$list;
        !           338:     return $Temp[$index];
        !           339: }
        !           340: 
        !           341: #-------------------------------------------------------
        !           342: 
        !           343: =item CDLHASH(name,key,value) 
        !           344: 
        !           345: loads a comma deliminated list of keys into
        !           346: the hash 'name', all with a value of 'value'.
        !           347: 
        !           348: =over 4
        !           349: 
        !           350: =item name  
        !           351: 
        !           352: name of the hash.
        !           353: 
        !           354: =item key
        !           355: 
        !           356: (a pointer to) a comma deliminated list of keys.
        !           357: 
        !           358: =item value
        !           359: 
        !           360: a single value to be entered for each key.
        !           361: 
        !           362: =back
        !           363: 
        !           364: =cut
        !           365: 
        !           366: #-------------------------------------------------------
        !           367: sub CDLHASH {
        !           368:     my ($name,$key,$value)=@_;
        !           369:     my @Keys;
        !           370:     my @Values;
        !           371:     # Check to see if we have multiple $key values
        !           372:     if ($key =~ /[A-z](\-[A-z])?\d+(\-\d+)?/) {
        !           373: 	my $keymask = &mask($key);
        !           374: 	# Assume the keys are addresses
        !           375: 	my @Temp = grep /$keymask/,keys(%v);
        !           376: 	@Keys = $v{@Temp};
        !           377:     } else {
        !           378: 	$Keys[0]= $key;
        !           379:     }
        !           380:     my @Temp;
        !           381:     foreach $key (@Keys) {
        !           382: 	@Temp = (@Temp, split/,/,$key);
        !           383:     }
        !           384:     @Keys = @Temp;
        !           385:     if ($value =~ /[A-z](\-[A-z])?\d+(\-\d+)?/) {
        !           386: 	my $valmask = &mask($value);
        !           387: 	my @Temp = grep /$valmask/,keys(%v);
        !           388: 	@Values =$v{@Temp};
        !           389:     } else {
        !           390: 	$Values[0]= $value;
        !           391:     }
        !           392:     $value = $Values[0];
        !           393:     # Add values to hash
        !           394:     for (my $i = 0; $i<=$#Keys; $i++) {
        !           395: 	my $key   = $Keys[$i];
        !           396: 	if (! exists ($hashes{$name}->{$key})) {
        !           397: 	    $hashes{$name}->{$key}->[0]=$value;
        !           398: 	} else {
        !           399: 	    my @Temp = sort(@{$hashes{$name}->{$key}},$value);
        !           400: 	    $hashes{$name}->{$key} = \@Temp;
        !           401: 	}
        !           402:     }
        !           403:     return "hash '$name' updated";
        !           404: }
        !           405: 
        !           406: #-------------------------------------------------------
        !           407: 
        !           408: =item GETHASH(name,key,index) 
        !           409: 
        !           410: returns the element in hash 'name' 
        !           411: reference by the key 'key', at index 'index' in the values list.
        !           412: 
        !           413: =cut
        !           414: 
        !           415: #-------------------------------------------------------
        !           416: sub GETHASH {
        !           417:     my ($name,$key,$index)=@_;
        !           418:     if (! defined($index)) {
        !           419: 	$index = 0;
        !           420:     }
        !           421:     if ($key =~ /^[A-z]\d+$/) {
        !           422: 	$key = $v{$key};
        !           423:     }
        !           424:     return $hashes{$name}->{$key}->[$index];
        !           425: }
        !           426: 
        !           427: #-------------------------------------------------------
        !           428: 
        !           429: =item CLEARHASH(name) 
        !           430: 
        !           431: clears all the values from the hash 'name'
        !           432: 
        !           433: =item CLEARHASH(name,key) 
        !           434: 
        !           435: clears all the values from the hash 'name' associated with the given key.
        !           436: 
        !           437: =cut
        !           438: 
        !           439: #-------------------------------------------------------
        !           440: sub CLEARHASH {
        !           441:     my ($name,$key)=@_;
        !           442:     if (defined($key)) {
        !           443: 	if (exists($hashes{$name}->{$key})) {
        !           444: 	    $hashes{$name}->{$key}=undef;
        !           445: 	    return "hash '$name' key '$key' cleared";
        !           446: 	}
        !           447:     } else {
        !           448: 	if (exists($hashes{$name})) {
        !           449: 	    $hashes{$name}=undef;
        !           450: 	    return "hash '$name' cleared";
        !           451: 	}
        !           452:     }
        !           453:     return "Error in clearing hash";
        !           454: }
        !           455: 
        !           456: #-------------------------------------------------------
        !           457: 
        !           458: =item HASH(name,key,value) 
        !           459: 
        !           460: loads values into an internal hash.  If a key 
        !           461: already has a value associated with it, the values are sorted numerically.  
        !           462: 
        !           463: =item HASH(name,key) 
        !           464: 
        !           465: returns the 0th value in the hash 'name' associated with 'key'.
        !           466: 
        !           467: =cut
        !           468: 
        !           469: #-------------------------------------------------------
        !           470: sub HASH {
        !           471:     my ($name,$key,$value)=@_;
        !           472:     my @Keys;
        !           473:     undef @Keys;
        !           474:     my @Values;
        !           475:     # Check to see if we have multiple $key values
        !           476:     if ($key =~ /[A-z](\-[A-z])?\d+(\-\d+)?/) {
        !           477: 	my $keymask = &mask($key);
        !           478: 	# Assume the keys are addresses
        !           479: 	my @Temp = grep /$keymask/,keys(%v);
        !           480: 	@Keys = $v{@Temp};
        !           481:     } else {
        !           482: 	$Keys[0]= $key;
        !           483:     }
        !           484:     # If $value is empty, return the first value associated 
        !           485:     # with the first key.
        !           486:     if (! $value) {
        !           487: 	return $hashes{$name}->{$Keys[0]}->[0];
        !           488:     }
        !           489:     # Check to see if we have multiple $value(s) 
        !           490:     if ($value =~ /[A-z](\-[A-z])?\d+(\-\d+)?/) {
        !           491: 	my $valmask = &mask($value);
        !           492: 	my @Temp = grep /$valmask/,keys(%v);
        !           493: 	@Values =$v{@Temp};
        !           494:     } else {
        !           495: 	$Values[0]= $value;
        !           496:     }
        !           497:     # Add values to hash
        !           498:     for (my $i = 0; $i<=$#Keys; $i++) {
        !           499: 	my $key   = $Keys[$i];
        !           500: 	my $value = ($i<=$#Values ? $Values[$i] : $Values[0]);
        !           501: 	if (! exists ($hashes{$name}->{$key})) {
        !           502: 	    $hashes{$name}->{$key}->[0]=$value;
        !           503: 	} else {
        !           504: 	    my @Temp = sort(@{$hashes{$name}->{$key}},$value);
        !           505: 	    $hashes{$name}->{$key} = \@Temp;
        !           506: 	}
        !           507:     }
        !           508:     return $Values[-1];
1.1       www       509: }
                    510: 
                    511: sub NUM {
                    512:     my $mask=mask(@_);
1.78      matthew   513:     my $num= $#{@{grep(/$mask/,keys(%v))}}+1;
1.1       www       514:     return $num;   
                    515: }
                    516: 
                    517: sub BIN {
                    518:     my ($low,$high,$lower,$upper)=@_;
                    519:     my $mask=mask($lower,$upper);
                    520:     my $num=0;
1.78      matthew   521:     foreach (grep /$mask/,keys(%v)) {
1.1       www       522:         if (($v{$_}>=$low) && ($v{$_}<=$high)) {
                    523:             $num++;
                    524:         }
1.78      matthew   525:     }
1.1       www       526:     return $num;   
                    527: }
                    528: 
                    529: 
                    530: sub SUM {
                    531:     my $mask=mask(@_);
                    532:     my $sum=0;
1.78      matthew   533:     foreach (grep /$mask/,keys(%v)) {
1.1       www       534:         $sum+=$v{$_};
1.78      matthew   535:     }
1.1       www       536:     return $sum;   
                    537: }
                    538: 
                    539: sub MEAN {
                    540:     my $mask=mask(@_);
                    541:     my $sum=0; my $num=0;
1.78      matthew   542:     foreach (grep /$mask/,keys(%v)) {
1.1       www       543:         $sum+=$v{$_};
                    544:         $num++;
1.78      matthew   545:     }
1.1       www       546:     if ($num) {
                    547:        return $sum/$num;
                    548:     } else {
                    549:        return undef;
                    550:     }   
                    551: }
                    552: 
                    553: sub STDDEV {
                    554:     my $mask=mask(@_);
                    555:     my $sum=0; my $num=0;
1.78      matthew   556:     foreach (grep /$mask/,keys(%v)) {
1.1       www       557:         $sum+=$v{$_};
                    558:         $num++;
1.78      matthew   559:     }
1.1       www       560:     unless ($num>1) { return undef; }
                    561:     my $mean=$sum/$num;
                    562:     $sum=0;
1.78      matthew   563:     foreach (grep /$mask/,keys(%v)) {
1.1       www       564:         $sum+=($v{$_}-$mean)**2;
1.78      matthew   565:     }
1.1       www       566:     return sqrt($sum/($num-1));    
                    567: }
                    568: 
                    569: sub PROD {
                    570:     my $mask=mask(@_);
                    571:     my $prod=1;
1.78      matthew   572:     foreach (grep /$mask/,keys(%v)) {
1.1       www       573:         $prod*=$v{$_};
1.78      matthew   574:     }
1.1       www       575:     return $prod;   
                    576: }
                    577: 
                    578: sub MAX {
                    579:     my $mask=mask(@_);
                    580:     my $max='-';
1.78      matthew   581:     foreach (grep /$mask/,keys(%v)) {
1.1       www       582:         unless ($max) { $max=$v{$_}; }
                    583:         if (($v{$_}>$max) || ($max eq '-')) { $max=$v{$_}; }
1.78      matthew   584:     } 
1.1       www       585:     return $max;   
                    586: }
                    587: 
                    588: sub MIN {
                    589:     my $mask=mask(@_);
                    590:     my $min='-';
1.78      matthew   591:     foreach (grep /$mask/,keys(%v)) {
1.1       www       592:         unless ($max) { $max=$v{$_}; }
                    593:         if (($v{$_}<$min) || ($min eq '-')) { $min=$v{$_}; }
1.78      matthew   594:     }
1.1       www       595:     return $min;   
                    596: }
                    597: 
                    598: sub SUMMAX {
                    599:     my ($num,$lower,$upper)=@_;
                    600:     my $mask=mask($lower,$upper);
                    601:     my @inside=();
1.78      matthew   602:     foreach (grep /$mask/,keys(%v)) {
1.1       www       603: 	$inside[$#inside+1]=$v{$_};
1.78      matthew   604:     }
1.1       www       605:     @inside=sort(@inside);
                    606:     my $sum=0; my $i;
                    607:     for ($i=$#inside;(($i>$#inside-$num) && ($i>=0));$i--) { 
                    608:         $sum+=$inside[$i];
                    609:     }
                    610:     return $sum;   
                    611: }
                    612: 
                    613: sub SUMMIN {
                    614:     my ($num,$lower,$upper)=@_;
                    615:     my $mask=mask($lower,$upper);
                    616:     my @inside=();
1.78      matthew   617:     foreach (grep /$mask/,keys(%v)) {
1.1       www       618: 	$inside[$#inside+1]=$v{$_};
1.78      matthew   619:     }
1.1       www       620:     @inside=sort(@inside);
                    621:     my $sum=0; my $i;
                    622:     for ($i=0;(($i<$num) && ($i<=$#inside));$i++) { 
                    623:         $sum+=$inside[$i];
                    624:     }
                    625:     return $sum;   
                    626: }
                    627: 
1.59      www       628: sub expandnamed {
                    629:     my $expression=shift;
                    630:     if ($expression=~/^\&/) {
                    631: 	my ($func,$var,$formula)=($expression=~/^\&(\w+)\(([^\;]+)\;(.*)\)/);
                    632: 	my @vars=split(/\W+/,$formula);
                    633:         my %values=();
                    634:         undef %values;
1.78      matthew   635: 	foreach ( @vars ) {
1.59      www       636:             my $varname=$_;
                    637:             if ($varname=~/\D/) {
                    638:                $formula=~s/$varname/'$c{\''.$varname.'\'}'/ge;
                    639:                $varname=~s/$var/\(\\w\+\)/g;
1.78      matthew   640: 	       foreach (keys(%c)) {
1.59      www       641: 		  if ($_=~/$varname/) {
                    642: 		      $values{$1}=1;
                    643:                   }
1.78      matthew   644:                }
1.59      www       645: 	    }
1.78      matthew   646:         }
1.59      www       647:         if ($func eq 'EXPANDSUM') {
                    648:             my $result='';
1.78      matthew   649: 	    foreach (keys(%values)) {
1.59      www       650:                 my $thissum=$formula;
                    651:                 $thissum=~s/$var/$_/g;
                    652:                 $result.=$thissum.'+';
1.78      matthew   653:             } 
1.59      www       654:             $result=~s/\+$//;
                    655:             return $result;
                    656:         } else {
                    657: 	    return 0;
                    658:         }
                    659:     } else {
                    660:         return '$c{\''.$expression.'\'}';
                    661:     }
                    662: }
                    663: 
1.1       www       664: sub sett {
                    665:     %t=();
1.16      www       666:     my $pattern='';
                    667:     if ($sheettype eq 'assesscalc') {
                    668: 	$pattern='A';
                    669:     } else {
                    670:         $pattern='[A-Z]';
                    671:     }
1.78      matthew   672:     foreach (keys(%f)) {
1.20      www       673: 	if ($_=~/template\_(\w)/) {
                    674: 	  my $col=$1;
                    675:           unless ($col=~/^$pattern/) {
1.78      matthew   676: 	    foreach (keys(%f)) {
1.20      www       677: 	      if ($_=~/A(\d+)/) {
                    678: 		my $trow=$1;
                    679:                 if ($trow) {
                    680: 		    my $lb=$col.$trow;
                    681:                     $t{$lb}=$f{'template_'.$col};
                    682:                     $t{$lb}=~s/\#/$trow/g;
                    683:                     $t{$lb}=~s/\.\.+/\,/g;
                    684:                     $t{$lb}=~s/(^|[^\"\'])([A-Za-z]\d+)/$1\$v\{\'$2\'\}/g;
1.59      www       685:                     $t{$lb}=~s/(^|[^\"\'])\[([^\]]+)\]/$1.&expandnamed($2)/ge;
1.20      www       686:                 }
                    687: 	      }
1.78      matthew   688: 	    }
1.20      www       689: 	  }
                    690:       }
1.78      matthew   691:     }
                    692:     foreach (keys(%f)) {
1.20      www       693: 	if (($f{$_}) && ($_!~/template\_/)) {
1.42      www       694:             my $matches=($_=~/^$pattern(\d+)/);
                    695:             if  (($matches) && ($1)) {
1.6       www       696: 	        unless ($f{$_}=~/^\!/) {
                    697: 		    $t{$_}=$c{$_};
                    698:                 }
                    699:             } else {
                    700: 	       $t{$_}=$f{$_};
1.7       www       701:                $t{$_}=~s/\.\.+/\,/g;
                    702:                $t{$_}=~s/(^|[^\"\'])([A-Za-z]\d+)/$1\$v\{\'$2\'\}/g;
1.59      www       703:                $t{$_}=~s/(^|[^\"\'])\[([^\]]+)\]/$1.&expandnamed($2)/ge;
1.6       www       704:             }
1.1       www       705:         }
1.78      matthew   706:     }
1.17      www       707:     $t{'A0'}=$f{'A0'};
                    708:     $t{'A0'}=~s/\.\.+/\,/g;
                    709:     $t{'A0'}=~s/(^|[^\"\'])([A-Za-z]\d+)/$1\$v\{\'$2\'\}/g;
1.59      www       710:     $t{'A0'}=~s/(^|[^\"\'])\[([^\]]+)\]/$1.&expandnamed($2)/ge;
1.1       www       711: }
                    712: 
1.4       www       713: sub calc {
1.1       www       714:     %v=();
1.4       www       715:     &sett();
1.1       www       716:     my $notfinished=1;
                    717:     my $depth=0;
                    718:     while ($notfinished) {
                    719: 	$notfinished=0;
1.78      matthew   720:         foreach (keys(%t)) {
1.1       www       721:             my $old=$v{$_};
1.4       www       722:             $v{$_}=eval($t{$_});
1.1       www       723: 	    if ($@) {
                    724: 		%v=();
                    725:                 return $@;
                    726:             }
                    727: 	    if ($v{$_} ne $old) { $notfinished=1; }
1.78      matthew   728:         }
1.1       www       729:         $depth++;
                    730:         if ($depth>100) {
                    731: 	    %v=();
                    732:             return 'Maximum calculation depth exceeded';
                    733:         }
                    734:     }
                    735:     return '';
                    736: }
                    737: 
1.21      www       738: sub templaterow {
                    739:     my @cols=();
                    740:     $cols[0]='<b><font size=+1>Template</font></b>';
1.78      matthew   741:     foreach ('A','B','C','D','E','F','G','H','I','J','K','L','M',
                    742: 	     'N','O','P','Q','R','S','T','U','V','W','X','Y','Z',
                    743: 	     'a','b','c','d','e','f','g','h','i','j','k','l','m',
                    744: 	     'n','o','p','q','r','s','t','u','v','w','x','y','z') {
1.21      www       745:         my $fm=$f{'template_'.$_};
                    746:         $fm=~s/[\'\"]/\&\#34;/g;
                    747:         $cols[$#cols+1]="'template_$_','$fm'".'___eq___'.$fm;
1.78      matthew   748:     }
1.21      www       749:     return @cols;
                    750: }
                    751: 
1.16      www       752: sub outrowassess {
1.6       www       753:     my $n=shift;
                    754:     my @cols=();
                    755:     if ($n) {
1.55      www       756:        my ($usy,$ufn)=split(/\_\_\&\&\&\_\_/,$f{'A'.$n});
1.58      www       757:        $cols[0]=$rl{$usy}.'<br>'.
1.55      www       758:                 '<select name="sel_'.$n.'" onChange="changesheet('.$n.
                    759:                 ')"><option name="default">Default</option>';
1.78      matthew   760:        foreach (@os) {
1.55      www       761:            $cols[0].='<option name="'.$_.'"';
                    762:             if ($ufn eq $_) {
                    763:                $cols[0].=' selected';
                    764:             }
                    765:             $cols[0].='>'.$_.'</option>';
1.78      matthew   766:        }
1.55      www       767:        $cols[0].='</select>';
1.6       www       768:     } else {
                    769:        $cols[0]='<b><font size=+1>Export</font></b>';
                    770:     }
1.78      matthew   771:     foreach ('A','B','C','D','E','F','G','H','I','J','K','L','M',
                    772: 	     'N','O','P','Q','R','S','T','U','V','W','X','Y','Z',
                    773: 	     'a','b','c','d','e','f','g','h','i','j','k','l','m',
                    774: 	     'n','o','p','q','r','s','t','u','v','w','x','y','z') {
1.6       www       775:         my $fm=$f{$_.$n};
                    776:         $fm=~s/[\'\"]/\&\#34;/g;
                    777:         $cols[$#cols+1]="'$_$n','$fm'".'___eq___'.$v{$_.$n};
1.78      matthew   778:     }
1.6       www       779:     return @cols;
                    780: }
                    781: 
1.18      www       782: sub outrow {
                    783:     my $n=shift;
                    784:     my @cols=();
                    785:     if ($n) {
1.21      www       786:        $cols[0]=$rl{$f{'A'.$n}};
1.18      www       787:     } else {
                    788:        $cols[0]='<b><font size=+1>Export</font></b>';
                    789:     }
1.78      matthew   790:     foreach ('A','B','C','D','E','F','G','H','I','J','K','L','M',
                    791: 	     'N','O','P','Q','R','S','T','U','V','W','X','Y','Z',
                    792: 	     'a','b','c','d','e','f','g','h','i','j','k','l','m',
                    793: 	     'n','o','p','q','r','s','t','u','v','w','x','y','z') {
1.18      www       794:         my $fm=$f{$_.$n};
                    795:         $fm=~s/[\'\"]/\&\#34;/g;
                    796:         $cols[$#cols+1]="'$_$n','$fm'".'___eq___'.$v{$_.$n};
1.78      matthew   797:     }
1.18      www       798:     return @cols;
                    799: }
                    800: 
1.14      www       801: sub exportrowa {
1.28      www       802:     my @exportarray=();
1.78      matthew   803:     foreach ('A','B','C','D','E','F','G','H','I','J','K','L','M',
                    804: 	     'N','O','P','Q','R','S','T','U','V','W','X','Y','Z') {
1.28      www       805: 	$exportarray[$#exportarray+1]=$v{$_.'0'};
1.78      matthew   806:     } 
1.28      www       807:     return @exportarray;
1.14      www       808: }
                    809: 
1.4       www       810: # ------------------------------------------- End of "Inside of the safe space"
                    811: ENDDEFS
                    812:     $safeeval->reval($code);
                    813:     return $safeeval;
                    814: }
                    815: 
                    816: # ------------------------------------------------ Add or change formula values
                    817: 
                    818: sub setformulas {
1.34      www       819:     my ($safeeval,%f)=@_;
                    820:     %{$safeeval->varglob('f')}=%f;
1.6       www       821: }
                    822: 
                    823: # ------------------------------------------------ Add or change formula values
                    824: 
                    825: sub setconstants {
1.34      www       826:     my ($safeeval,%c)=@_;
                    827:     %{$safeeval->varglob('c')}=%c;
1.6       www       828: }
                    829: 
1.55      www       830: # --------------------------------------------- Set names of other spreadsheets
                    831: 
                    832: sub setothersheets {
                    833:     my ($safeeval,@os)=@_;
                    834:     @{$safeeval->varglob('os')}=@os;
                    835: }
                    836: 
1.6       www       837: # ------------------------------------------------ Add or change formula values
                    838: 
                    839: sub setrowlabels {
1.34      www       840:     my ($safeeval,%rl)=@_;
                    841:     %{$safeeval->varglob('rl')}=%rl;
1.4       www       842: }
                    843: 
                    844: # ------------------------------------------------------- Calculate spreadsheet
                    845: 
                    846: sub calcsheet {
                    847:     my $safeeval=shift;
                    848:     $safeeval->reval('&calc();');
                    849: }
                    850: 
                    851: # ------------------------------------------------------------------ Get values
                    852: 
                    853: sub getvalues {
                    854:     my $safeeval=shift;
                    855:     return $safeeval->reval('%v');
                    856: }
                    857: 
                    858: # ---------------------------------------------------------------- Get formulas
                    859: 
                    860: sub getformulas {
                    861:     my $safeeval=shift;
1.34      www       862:     return %{$safeeval->varglob('f')};
1.4       www       863: }
                    864: 
1.5       www       865: # -------------------------------------------------------------------- Get type
                    866: 
                    867: sub gettype {
                    868:     my $safeeval=shift;
                    869:     return $safeeval->reval('$sheettype');
                    870: }
1.27      www       871: 
1.6       www       872: # ------------------------------------------------------------------ Set maxrow
                    873: 
                    874: sub setmaxrow {
                    875:     my ($safeeval,$row)=@_;
                    876:     $safeeval->reval('$maxrow='.$row.';');
                    877: }
                    878: 
                    879: # ------------------------------------------------------------------ Get maxrow
                    880: 
                    881: sub getmaxrow {
                    882:     my $safeeval=shift;
                    883:     return $safeeval->reval('$maxrow');
                    884: }
1.5       www       885: 
1.6       www       886: # ---------------------------------------------------------------- Set filename
1.5       www       887: 
                    888: sub setfilename {
                    889:     my ($safeeval,$fn)=@_;
1.11      www       890:     $safeeval->reval('$filename="'.$fn.'";');
1.5       www       891: }
                    892: 
1.6       www       893: # ---------------------------------------------------------------- Get filename
1.5       www       894: 
                    895: sub getfilename {
                    896:     my $safeeval=shift;
                    897:     return $safeeval->reval('$filename');
                    898: }
1.29      www       899: 
1.28      www       900: # --------------------------------------------------------------- Get course ID
                    901: 
                    902: sub getcid {
                    903:     my $safeeval=shift;
                    904:     return $safeeval->reval('$cid');
                    905: }
1.14      www       906: 
1.29      www       907: # --------------------------------------------------------- Get course filename
                    908: 
                    909: sub getcfn {
                    910:     my $safeeval=shift;
                    911:     return $safeeval->reval('$cfn');
                    912: }
                    913: 
1.27      www       914: # ----------------------------------------------------------- Get course number
                    915: 
                    916: sub getcnum {
                    917:     my $safeeval=shift;
                    918:     return $safeeval->reval('$cnum');
                    919: }
                    920: 
                    921: # ------------------------------------------------------------- Get course home
                    922: 
                    923: sub getchome {
                    924:     my $safeeval=shift;
                    925:     return $safeeval->reval('$chome');
                    926: }
                    927: 
                    928: # ----------------------------------------------------------- Get course domain
                    929: 
                    930: sub getcdom {
                    931:     my $safeeval=shift;
                    932:     return $safeeval->reval('$cdom');
                    933: }
                    934: 
                    935: # ---------------------------------------------------------- Get course section
                    936: 
                    937: sub getcsec {
                    938:     my $safeeval=shift;
                    939:     return $safeeval->reval('$csec');
                    940: }
                    941: 
                    942: # --------------------------------------------------------------- Get user name
                    943: 
                    944: sub getuname {
                    945:     my $safeeval=shift;
                    946:     return $safeeval->reval('$uname');
                    947: }
                    948: 
                    949: # ------------------------------------------------------------- Get user domain
                    950: 
                    951: sub getudom {
                    952:     my $safeeval=shift;
                    953:     return $safeeval->reval('$udom');
                    954: }
                    955: 
                    956: # --------------------------------------------------------------- Get user home
                    957: 
                    958: sub getuhome {
                    959:     my $safeeval=shift;
                    960:     return $safeeval->reval('$uhome');
                    961: }
                    962: 
                    963: # -------------------------------------------------------------------- Get symb
                    964: 
                    965: sub getusymb {
                    966:     my $safeeval=shift;
                    967:     return $safeeval->reval('$usymb');
                    968: }
                    969: 
1.14      www       970: # ------------------------------------------------------------- Export of A-row
                    971: 
1.28      www       972: sub exportdata {
1.14      www       973:     my $safeeval=shift;
                    974:     return $safeeval->reval('&exportrowa()');
                    975: }
                    976: 
1.55      www       977: 
1.5       www       978: # ========================================================== End of Spreadsheet
                    979: # =============================================================================
                    980: 
1.27      www       981: #
                    982: # Procedures for screen output
                    983: #
1.6       www       984: # --------------------------------------------- Produce output row n from sheet
                    985: 
                    986: sub rown {
                    987:     my ($safeeval,$n)=@_;
1.21      www       988:     my $defaultbg;
1.24      www       989:     my $rowdata='';
1.61      www       990:     my $dataflag=0;
1.21      www       991:     unless ($n eq '-') {
                    992:        $defaultbg=((($n-1)/5)==int(($n-1)/5))?'#E0E0':'#FFFF';
                    993:     } else {
                    994:        $defaultbg='#E0FF';
                    995:     }
1.71      www       996:     unless ($ENV{'form.showcsv'}) {
                    997:        $rowdata.="\n<tr><td><b><font size=+1>$n</font></b></td>";
                    998:     } else {
                    999:        $rowdata.="\n".'"'.$n.'"';
                   1000:     }
1.6       www      1001:     my $showf=0;
1.16      www      1002:     my $proc;
1.18      www      1003:     my $maxred;
1.62      www      1004:     my $sheettype=&gettype($safeeval);
                   1005:     if ($sheettype eq 'studentcalc') {
1.55      www      1006:         $proc='&outrowassess';
                   1007:         $maxred=26;
                   1008:     } else {
                   1009:         $proc='&outrow';
                   1010:     }
1.62      www      1011:     if ($sheettype eq 'assesscalc') {
1.18      www      1012:         $maxred=1;
1.16      www      1013:     } else {
1.18      www      1014:         $maxred=26;
1.16      www      1015:     }
1.61      www      1016:     if ($n eq '-') { $proc='&templaterow'; $n=-1; $dataflag=1; }
1.78      matthew  1017:     foreach ($safeeval->reval($proc.'('.$n.')')) {
1.9       www      1018:        my $bgcolor=$defaultbg.((($showf-1)/5==int(($showf-1)/5))?'99':'DD');
1.6       www      1019:        my ($fm,$vl)=split(/\_\_\_eq\_\_\_/,$_);
1.62      www      1020:        if ((($vl ne '') || ($vl eq '0')) &&
                   1021:            (($showf==1) || ($sheettype ne 'studentcalc'))) { $dataflag=1; }
1.6       www      1022:        if ($showf==0) { $vl=$_; }
1.71      www      1023:       unless ($ENV{'form.showcsv'}) {
1.18      www      1024:        if ($showf<=$maxred) { $bgcolor='#FFDDDD'; }
1.9       www      1025:        if (($n==0) && ($showf<=26)) { $bgcolor='#CCCCFF'; } 
1.18      www      1026:        if (($showf>$maxred) || ((!$n) && ($showf>0))) {
1.6       www      1027: 	   if ($vl eq '') {
1.9       www      1028: 	       $vl='<font size=+2 color='.$bgcolor.'>&#35;</font>';
1.6       www      1029:            }
                   1030:            $rowdata.=
1.10      www      1031:        '<td bgcolor='.$bgcolor.'><a href="javascript:celledit('.$fm.');">'.$vl.
1.6       www      1032: 	       '</a></td>';
                   1033:        } else {
1.9       www      1034:            $rowdata.='<td bgcolor='.$bgcolor.'>&nbsp;'.$vl.'&nbsp;</td>';
1.6       www      1035:        }
1.71      www      1036:       } else {
                   1037: 	  $rowdata.=',"'.$vl.'"';
                   1038:       }
1.6       www      1039:        $showf++;
1.78      matthew  1040:     }  # End of foreach($safeval...)
1.61      www      1041:     if ($ENV{'form.showall'} || ($dataflag)) {
1.71      www      1042:        return $rowdata.($ENV{'form.showcsv'}?'':'</tr>');
1.61      www      1043:     } else {
1.63      www      1044:        return '';
1.61      www      1045:     }
1.6       www      1046: }
                   1047: 
                   1048: # ------------------------------------------------------------- Print out sheet
                   1049: 
                   1050: sub outsheet {
1.24      www      1051:     my ($r,$safeeval)=@_;
1.18      www      1052:     my $maxred;
                   1053:     my $realm;
                   1054:     if (&gettype($safeeval) eq 'assesscalc') {
                   1055:         $maxred=1;
                   1056:         $realm='Assessment';
                   1057:     } elsif (&gettype($safeeval) eq 'studentcalc') {
                   1058:         $maxred=26;
                   1059:         $realm='User';
                   1060:     } else {
                   1061:         $maxred=26;
                   1062:         $realm='Course';
                   1063:     }
                   1064:     my $maxyellow=52-$maxred;
1.71      www      1065:     my $tabledata;
                   1066:     unless ($ENV{'form.showcsv'}) {
                   1067:        $tabledata=
1.24      www      1068:         '<table border=2><tr><th colspan=2 rowspan=2><font size=+2>'.
1.18      www      1069:                   $realm.'</font></th>'.
                   1070:                   '<td bgcolor=#FFDDDD colspan='.$maxred.
                   1071:                   '><b><font size=+1>Import</font></b></td>'.
                   1072:                   '<td colspan='.$maxyellow.
                   1073: 		  '><b><font size=+1>Calculations</font></b></td></tr><tr>';
                   1074:     my $showf=0;
1.78      matthew  1075:     foreach ('A','B','C','D','E','F','G','H','I','J','K','L','M',
                   1076: 	     'N','O','P','Q','R','S','T','U','V','W','X','Y','Z',
                   1077: 	     'a','b','c','d','e','f','g','h','i','j','k','l','m',
                   1078: 	     'n','o','p','q','r','s','t','u','v','w','x','y','z') {
1.18      www      1079:         $showf++;
                   1080:         if ($showf<=$maxred) { 
                   1081:            $tabledata.='<td bgcolor="#FFDDDD">'; 
                   1082:         } else {
                   1083:            $tabledata.='<td>';
                   1084:         }
                   1085:         $tabledata.="<b><font size=+1>$_</font></b></td>";
1.78      matthew  1086:     }
1.71      www      1087:     $tabledata.='</tr>'.&rown($safeeval,'-').&rown($safeeval,0);
                   1088:    } else { $tabledata='<pre>'; }
                   1089: 
                   1090:     $r->print($tabledata);
                   1091: 
1.6       www      1092:     my $row;
                   1093:     my $maxrow=&getmaxrow($safeeval);
1.64      www      1094: 
1.65      www      1095:     my @sortby=();
                   1096:     my @sortidx=();
                   1097:     for ($row=1;$row<=$maxrow;$row++) {
                   1098:        $sortby[$row-1]=$safeeval->reval('$f{"A'.$row.'"}');
                   1099:        $sortidx[$row-1]=$row-1;
                   1100:     }
                   1101:     @sortidx=sort { $sortby[$a] cmp $sortby[$b]; } @sortidx;
1.64      www      1102: 
1.63      www      1103:         my $what='Student';
                   1104:         if (&gettype($safeeval) eq 'assesscalc') {
                   1105: 	    $what='Item';
                   1106: 	} elsif (&gettype($safeeval) eq 'studentcalc') {
                   1107:             $what='Assessment';
                   1108:         }
1.65      www      1109: 
                   1110:     my $n=0;
                   1111:     for ($row=0;$row<$maxrow;$row++) {
                   1112:      my $thisrow=&rown($safeeval,$sortidx[$row]+1);
                   1113:      if ($thisrow) {
1.71      www      1114:        if (($n/25==int($n/25)) && (!$ENV{'form.showcsv'})) {
1.65      www      1115: 	$r->print("</table>\n<br>\n");
                   1116:         $r->rflush();
                   1117:         $r->print('<table border=2><tr><td>&nbsp;<td>'.$what.'</td>');
1.78      matthew  1118:         foreach ('A','B','C','D','E','F','G','H','I','J','K','L','M',
                   1119: 		 'N','O','P','Q','R','S','T','U','V','W','X','Y','Z',
                   1120: 		 'a','b','c','d','e','f','g','h','i','j','k','l','m',
                   1121: 		 'n','o','p','q','r','s','t','u','v','w','x','y','z') {
1.63      www      1122:            $r->print('<td>'.$_.'</td>');
1.78      matthew  1123:         }
1.63      www      1124:         $r->print('</tr>');
                   1125:        }
1.64      www      1126:        $n++;
                   1127:        $r->print($thisrow);
1.63      www      1128:       }
1.6       www      1129:     }
1.71      www      1130:     $r->print($ENV{'form.showcsv'}?'</pre>':'</table>');
1.6       www      1131: }
                   1132: 
1.27      www      1133: #
1.55      www      1134: # ----------------------------------------------- Read list of available sheets
                   1135: # 
                   1136: 
                   1137: sub othersheets {
                   1138:     my ($safeeval,$stype)=@_;
                   1139: 
                   1140:     my $cnum=&getcnum($safeeval);
                   1141:     my $cdom=&getcdom($safeeval);
                   1142:     my $chome=&getchome($safeeval);
                   1143: 
                   1144:     my @alternatives=();
                   1145:     my $result=&Apache::lonnet::reply('dump:'.$cdom.':'.$cnum.':'.
                   1146:                                       $stype.'_spreadsheets',$chome);
                   1147:     if ($result!~/^error\:/) {
1.78      matthew  1148: 	foreach (split(/\&/,$result)) {
1.55      www      1149:             $alternatives[$#alternatives+1]=
                   1150:             &Apache::lonnet::unescape((split(/\=/,$_))[0]);
1.78      matthew  1151:         }
1.55      www      1152:     } 
                   1153:     return @alternatives; 
                   1154: }
                   1155: 
                   1156: #
1.27      www      1157: # -------------------------------------- Read spreadsheet formulas for a course
                   1158: #
                   1159: 
                   1160: sub readsheet {
                   1161:   my ($safeeval,$fn)=@_;
                   1162:   my $stype=&gettype($safeeval);
                   1163:   my $cnum=&getcnum($safeeval);
1.28      www      1164:   my $cdom=&getcdom($safeeval);
                   1165:   my $chome=&getchome($safeeval);
1.27      www      1166: 
                   1167: # --------- There is no filename. Look for defaults in course and global, cache
                   1168: 
                   1169:   unless($fn) {
1.28      www      1170:       unless ($fn=$defaultsheets{$cnum.'_'.$cdom.'_'.$stype}) {
                   1171:          $fn=&Apache::lonnet::reply('get:'.$cdom.':'.$cnum.
                   1172:                                     ':environment:spreadsheet_default_'.$stype,
                   1173:                                     $chome);
1.27      www      1174:          unless (($fn) && ($fn!~/^error\:/)) {
                   1175: 	     $fn='default_'.$stype;
                   1176:          }
1.28      www      1177:          $defaultsheets{$cnum.'_'.$cdom.'_'.$stype}=$fn; 
1.27      www      1178:       }
                   1179:   }
                   1180: 
                   1181: # ---------------------------------------------------------- fn now has a value
                   1182: 
                   1183:   &setfilename($safeeval,$fn);
                   1184: 
                   1185: # ------------------------------------------------------ see if sheet is cached
                   1186:   my $fstring='';
1.28      www      1187:   if ($fstring=$spreadsheets{$cnum.'_'.$cdom.'_'.$stype.'_'.$fn}) {
                   1188:       &setformulas($safeeval,split(/\_\_\_\;\_\_\_/,$fstring));
1.27      www      1189:   } else {
1.6       www      1190: 
1.27      www      1191: # ---------------------------------------------------- Not cached, need to read
1.5       www      1192: 
1.27      www      1193:      my %f=();
1.3       www      1194: 
1.27      www      1195:      if ($fn=~/^default\_/) {
1.19      www      1196: 	my $sheetxml='';
1.10      www      1197:        {
                   1198:          my $fh;
1.73      www      1199:          my $dfn=$fn;
                   1200:          $dfn=~s/\_/\./g;
                   1201:          if ($fh=Apache::File->new($includedir.'/'.$dfn)) {
1.19      www      1202:                $sheetxml=join('',<$fh>);
1.73      www      1203: 	 } else {
                   1204:              $sheetxml='<field row="0" col="A">"Error"</field>';
                   1205: 	 }
1.19      www      1206:        }
1.27      www      1207:         my $parser=HTML::TokeParser->new(\$sheetxml);
                   1208:         my $token;
                   1209:         while ($token=$parser->get_token) {
1.19      www      1210:           if ($token->[0] eq 'S') {
                   1211:  	     if ($token->[1] eq 'field') {
                   1212:  		 $f{$token->[2]->{'col'}.$token->[2]->{'row'}}=
                   1213:  		     $parser->get_text('/field');
                   1214:  	     }
1.20      www      1215:              if ($token->[1] eq 'template') {
                   1216:                  $f{'template_'.$token->[2]->{'col'}}=
                   1217:                      $parser->get_text('/template');
                   1218:              }
1.19      www      1219:           }
1.27      www      1220:         }
                   1221:       } else {
1.28      www      1222:           my $sheet='';
                   1223:           my $reply=&Apache::lonnet::reply('dump:'.$cdom.':'.$cnum.':'.$fn,
                   1224:                                          $chome);
1.19      www      1225:           unless ($reply=~/^error\:/) {
1.27      www      1226:              $sheet=$reply;
                   1227: 	  }
1.78      matthew  1228:           foreach (split(/\&/,$sheet)) {
1.27      www      1229:              my ($name,$value)=split(/\=/,$_);
                   1230:              $f{&Apache::lonnet::unescape($name)}=
                   1231: 	        &Apache::lonnet::unescape($value);
1.78      matthew  1232:           }
1.10      www      1233:        }
1.27      www      1234: # --------------------------------------------------------------- Cache and set
1.28      www      1235:        $spreadsheets{$cnum.'_'.$cdom.'_'.$stype.'_'.$fn}=join('___;___',%f);  
1.27      www      1236:        &setformulas($safeeval,%f);
1.3       www      1237:     }
                   1238: }
                   1239: 
1.28      www      1240: # -------------------------------------------------------- Make new spreadsheet
                   1241: 
                   1242: sub makenewsheet {
                   1243:     my ($uname,$udom,$stype,$usymb)=@_;
1.36      www      1244:     my $safeeval=initsheet($stype);
1.28      www      1245:     $safeeval->reval(
1.29      www      1246:        '$uname="'.$uname.
                   1247:       '";$udom="'.$udom.
                   1248:       '";$uhome="'.&Apache::lonnet::homeserver($uname,$udom).
                   1249:       '";$sheettype="'.$stype.
                   1250:       '";$usymb="'.$usymb.
1.30      www      1251:       '";$csec="'.&Apache::lonnet::usection($udom,$uname,
                   1252:                                             $ENV{'request.course.id'}).
1.29      www      1253:       '";$cid="'.$ENV{'request.course.id'}.
                   1254:       '";$cfn="'.$ENV{'request.course.fn'}.
                   1255:       '";$cnum="'.$ENV{'course.'.$ENV{'request.course.id'}.'.num'}.
                   1256:       '";$cdom="'.$ENV{'course.'.$ENV{'request.course.id'}.'.domain'}.
                   1257:       '";$chome="'.$ENV{'course.'.$ENV{'request.course.id'}.'.home'}.'";');
1.28      www      1258:     return $safeeval;
                   1259: }
                   1260: 
1.19      www      1261: # ------------------------------------------------------------ Save spreadsheet
                   1262: 
                   1263: sub writesheet {
1.28      www      1264:   my ($safeeval,$makedef)=@_;
                   1265:   my $cid=&getcid($safeeval);
                   1266:   if (&Apache::lonnet::allowed('opa',$cid)) {
1.19      www      1267:     my %f=&getformulas($safeeval);
1.28      www      1268:     my $stype=&gettype($safeeval);
                   1269:     my $cnum=&getcnum($safeeval);
                   1270:     my $cdom=&getcdom($safeeval);
                   1271:     my $chome=&getchome($safeeval);
                   1272:     my $fn=&getfilename($safeeval);
                   1273: 
                   1274: # ------------------------------------------------------------- Cache new sheet
                   1275:     $spreadsheets{$cnum.'_'.$cdom.'_'.$stype.'_'.$fn}=join('___;___',%f);    
                   1276: # ----------------------------------------------------------------- Write sheet
1.19      www      1277:     my $sheetdata='';
1.78      matthew  1278:     foreach (keys(%f)) {
1.56      www      1279:      unless ($f{$_} eq 'import') {
1.19      www      1280:        $sheetdata.=&Apache::lonnet::escape($_).'='.
                   1281: 	   &Apache::lonnet::escape($f{$_}).'&';
1.56      www      1282:      }
1.78      matthew  1283:     }
1.19      www      1284:     $sheetdata=~s/\&$//;
1.28      www      1285:     my $reply=&Apache::lonnet::reply('put:'.$cdom.':'.$cnum.':'.$fn.':'.
                   1286:               $sheetdata,$chome);
1.22      www      1287:     if ($reply eq 'ok') {
1.28      www      1288:           $reply=&Apache::lonnet::reply('put:'.$cdom.':'.$cnum.':'.
1.30      www      1289:               $stype.'_spreadsheets:'.
1.55      www      1290:               &Apache::lonnet::escape($fn).'='.$ENV{'user.name'}.'@'.
                   1291:                                                $ENV{'user.domain'},
1.28      www      1292:               $chome);
                   1293:           if ($reply eq 'ok') {
                   1294:               if ($makedef) { 
                   1295:                 return &Apache::lonnet::reply('put:'.$cdom.':'.$cnum.
                   1296:                                 ':environment:spreadsheet_default_'.$stype.'='.
                   1297:                                 &Apache::lonnet::escape($fn),
                   1298:                                 $chome);
                   1299: 	      } else {
                   1300: 		  return $reply;
                   1301:     	      }
                   1302: 	   } else {
                   1303: 	       return $reply;
                   1304:            }
1.22      www      1305:       } else {
                   1306: 	  return $reply;
                   1307:       }
                   1308:   }
                   1309:   return 'unauthorized';
1.19      www      1310: }
                   1311: 
1.10      www      1312: # ----------------------------------------------- Make a temp copy of the sheet
1.28      www      1313: # "Modified workcopy" - interactive only
                   1314: #
1.10      www      1315: 
                   1316: sub tmpwrite {
1.28      www      1317:     my $safeeval=shift;
                   1318:     my $fn=$ENV{'user.name'}.'_'.
                   1319:            $ENV{'user.domain'}.'_spreadsheet_'.&getusymb($safeeval).'_'.
                   1320:            &getfilename($safeeval);
1.10      www      1321:     $fn=~s/\W/\_/g;
                   1322:     $fn=$tmpdir.$fn.'.tmp';
                   1323:     my $fh;
                   1324:     if ($fh=Apache::File->new('>'.$fn)) {
                   1325: 	print $fh join("\n",&getformulas($safeeval));
                   1326:     }
                   1327: }
                   1328: 
                   1329: # ---------------------------------------------------------- Read the temp copy
                   1330: 
                   1331: sub tmpread {
1.28      www      1332:     my ($safeeval,$nfield,$nform)=@_;
                   1333:     my $fn=$ENV{'user.name'}.'_'.
                   1334:            $ENV{'user.domain'}.'_spreadsheet_'.&getusymb($safeeval).'_'.
                   1335:            &getfilename($safeeval);
1.10      www      1336:     $fn=~s/\W/\_/g;
                   1337:     $fn=$tmpdir.$fn.'.tmp';
                   1338:     my $fh;
                   1339:     my %fo=();
                   1340:     if ($fh=Apache::File->new($fn)) {
                   1341:         my $name;
                   1342:         while ($name=<$fh>) {
                   1343: 	    chomp($name);
                   1344:             my $value=<$fh>;
                   1345:             chomp($value);
                   1346:             $fo{$name}=$value;
                   1347:         }
                   1348:     }
1.55      www      1349:     if ($nform eq 'changesheet') {
1.57      www      1350:         $fo{'A'.$nfield}=(split(/\_\_\&\&\&\_\_/,$fo{'A'.$nfield}))[0];
1.55      www      1351:         unless ($ENV{'form.sel_'.$nfield} eq 'Default') {
1.57      www      1352: 	    $fo{'A'.$nfield}.='__&&&__'.$ENV{'form.sel_'.$nfield};
1.55      www      1353:         }
                   1354:     } else {
                   1355:        if ($nfield) { $fo{$nfield}=$nform; }
                   1356:     }
1.10      www      1357:     &setformulas($safeeval,%fo);
                   1358: }
                   1359: 
1.11      www      1360: # ================================================================== Parameters
                   1361: # -------------------------------------------- Figure out a cascading parameter
1.28      www      1362: #
1.29      www      1363: # For this function to work
                   1364: #
                   1365: # * parmhash needs to be tied
                   1366: # * courseopt and useropt need to be initialized for this user and course
                   1367: #
1.11      www      1368: 
                   1369: sub parmval {
1.28      www      1370:     my ($what,$safeeval)=@_;
                   1371:     my $cid=&getcid($safeeval);
                   1372:     my $csec=&getcsec($safeeval);
                   1373:     my $uname=&getuname($safeeval);
                   1374:     my $udom=&getudom($safeeval);
                   1375:     my $symb=&getusymb($safeeval);
1.11      www      1376: 
                   1377:     unless ($symb) { return ''; }
                   1378:     my $result='';
                   1379: 
                   1380:     my ($mapname,$id,$fn)=split(/\_\_\_/,$symb);
                   1381: # ----------------------------------------------------- Cascading lookup scheme
1.12      www      1382:        my $rwhat=$what;
                   1383:        $what=~s/^parameter\_//;
1.68      www      1384:        $what=~s/\_([^\_]+)$/\.$1/;
1.11      www      1385: 
                   1386:        my $symbparm=$symb.'.'.$what;
                   1387:        my $mapparm=$mapname.'___(all).'.$what;
1.29      www      1388:        my $usercourseprefix=$uname.'_'.$udom.'_'.$cid;
1.11      www      1389: 
                   1390:        my $seclevel=
1.28      www      1391:             $usercourseprefix.'.['.
1.11      www      1392: 		$csec.'].'.$what;
                   1393:        my $seclevelr=
1.28      www      1394:             $usercourseprefix.'.['.
1.11      www      1395: 		$csec.'].'.$symbparm;
                   1396:        my $seclevelm=
1.28      www      1397:             $usercourseprefix.'.['.
1.11      www      1398: 		$csec.'].'.$mapparm;
                   1399: 
                   1400:        my $courselevel=
1.28      www      1401:             $usercourseprefix.'.'.$what;
1.11      www      1402:        my $courselevelr=
1.28      www      1403:             $usercourseprefix.'.'.$symbparm;
1.11      www      1404:        my $courselevelm=
1.28      www      1405:             $usercourseprefix.'.'.$mapparm;
1.12      www      1406: 
1.11      www      1407: # ---------------------------------------------------------- fourth, check user
                   1408:       
                   1409:       if ($uname) { 
                   1410: 
                   1411:        if ($useropt{$courselevelr}) { return $useropt{$courselevelr}; }
                   1412: 
                   1413:        if ($useropt{$courselevelm}) { return $useropt{$courselevelm}; }
                   1414: 
                   1415:        if ($useropt{$courselevel}) { return $useropt{$courselevel}; }
                   1416: 
                   1417:       }
                   1418: 
                   1419: # --------------------------------------------------------- third, check course
                   1420:      
                   1421:        if ($csec) {
                   1422:  
                   1423:         if ($courseopt{$seclevelr}) { return $courseopt{$seclevelr}; }
                   1424: 
                   1425:         if ($courseopt{$seclevelm}) { return $courseopt{$seclevelm}; }  
                   1426: 
                   1427:         if ($courseopt{$seclevel}) { return $courseopt{$seclevel}; }
                   1428:   
                   1429:       }
                   1430: 
                   1431:        if ($courseopt{$courselevelr}) { return $courseopt{$courselevelr}; }
                   1432: 
                   1433:        if ($courseopt{$courselevelm}) { return $courseopt{$courselevelm}; }
                   1434: 
                   1435:        if ($courseopt{$courselevel}) { return $courseopt{$courselevel}; }
                   1436: 
                   1437: # ----------------------------------------------------- second, check map parms
                   1438: 
                   1439:        my $thisparm=$parmhash{$symbparm};
                   1440:        if ($thisparm) { return $thisparm; }
                   1441: 
                   1442: # -------------------------------------------------------- first, check default
                   1443: 
1.12      www      1444:        return &Apache::lonnet::metadata($fn,$rwhat.'.default');
1.11      www      1445:         
                   1446: }
                   1447: 
1.23      www      1448: # ---------------------------------------------- Update rows for course listing
1.11      www      1449: 
1.28      www      1450: sub updateclasssheet {
1.23      www      1451:     my $safeeval=shift;
1.28      www      1452:     my $cnum=&getcnum($safeeval);
                   1453:     my $cdom=&getcdom($safeeval);
                   1454:     my $cid=&getcid($safeeval);
                   1455:     my $chome=&getchome($safeeval);
                   1456: 
                   1457: # ---------------------------------------------- Read class list and row labels
                   1458: 
1.23      www      1459:     my $classlst=&Apache::lonnet::reply
1.28      www      1460:                                  ('dump:'.$cdom.':'.$cnum.':classlist',$chome);
1.23      www      1461:     my %currentlist=();
                   1462:     my $now=time;
                   1463:     unless ($classlst=~/^error\:/) {
1.78      matthew  1464:         foreach (split(/\&/,$classlst)) {
1.23      www      1465:             my ($name,$value)=split(/\=/,$_);
1.24      www      1466:             my ($end,$start)=split(/\:/,&Apache::lonnet::unescape($value));
1.23      www      1467:             my $active=1;
                   1468:             if (($end) && ($now>$end)) { $active=0; }
                   1469:             if ($active) {
1.24      www      1470:                 my $rowlabel='';
                   1471:                 $name=&Apache::lonnet::unescape($name);
1.28      www      1472:                 my ($sname,$sdom)=split(/\:/,$name);
                   1473:                 my $ssec=&Apache::lonnet::usection($sdom,$sname,$cid);
                   1474:                 if ($ssec==-1) {
1.71      www      1475: 		   unless ($ENV{'form.showcsv'}) {
1.24      www      1476:                     $rowlabel='<font color=red>Data not available: '.$name.
                   1477: 			      '</font>';
1.71      www      1478: 		   } else {
                   1479: 		       $rowlabel='ERROR","'.$name.
                   1480:                                  '","Data not available","","","';
                   1481:                    }
1.24      www      1482:                 } else {
1.28      www      1483:                     my %reply=&Apache::lonnet::idrget($sdom,$sname);
                   1484:                     my $reply=&Apache::lonnet::reply('get:'.$sdom.':'.$sname.
1.24      www      1485: 		      ':environment:firstname&middlename&lastname&generation',
1.28      www      1486:                       &Apache::lonnet::homeserver($sname,$sdom));
1.71      www      1487: 		   unless ($ENV{'form.showcsv'}) {
1.45      www      1488:                     $rowlabel='<a href="/adm/studentcalc?uname='.$sname.
                   1489:                               '&udom='.$sdom.'">'.
                   1490:                               $ssec.'&nbsp;'.$reply{$sname}.'<br>';
1.78      matthew  1491:                     foreach ( split(/\&/,$reply)) {
1.24      www      1492:                         $rowlabel.=&Apache::lonnet::unescape($_).' ';
1.78      matthew  1493:                     }
1.45      www      1494:                     $rowlabel.='</a>';
1.71      www      1495: 		   } else {
                   1496: 		    $rowlabel=$ssec.'","'.$reply{$sname}.'"';
                   1497:                     my $ncount=0;
1.78      matthew  1498:                     foreach (split(/\&/,$reply)) {
1.71      www      1499:                         $rowlabel.=',"'.&Apache::lonnet::unescape($_).'"';
                   1500:                         $ncount++;
1.78      matthew  1501:                     }
1.71      www      1502:                     unless ($ncount==4) { $rowlabel.=',""'; }
                   1503:                     $rowlabel=~s/\"$//;
                   1504: 		   }
1.24      www      1505:                 }
                   1506: 		$currentlist{&Apache::lonnet::unescape($name)}=$rowlabel;
1.23      www      1507:             }
1.78      matthew  1508:         } # end of foreach (split(/\&/,$classlst))
1.23      www      1509: #
                   1510: # -------------------- Find discrepancies between the course row table and this
                   1511: #
                   1512:         my %f=&getformulas($safeeval);
                   1513:         my $changed=0;
                   1514: 
                   1515:         my $maxrow=0;
                   1516:         my %existing=();
                   1517: 
                   1518: # ----------------------------------------------------------- Now obsolete rows
1.78      matthew  1519: 	foreach (keys(%f)) {
1.23      www      1520: 	    if ($_=~/^A(\d+)/) {
                   1521:                 $maxrow=($1>$maxrow)?$1:$maxrow;
                   1522:                 $existing{$f{$_}}=1;
                   1523: 		unless ((defined($currentlist{$f{$_}})) || (!$1)) {
                   1524: 		   $f{$_}='!!! Obsolete';
                   1525:                    $changed=1;
                   1526:                 }
                   1527:             }
1.78      matthew  1528:         }
1.23      www      1529: 
                   1530: # -------------------------------------------------------- New and unknown keys
                   1531:      
1.78      matthew  1532:         foreach (sort keys(%currentlist)) {
1.23      www      1533:             unless ($existing{$_}) {
                   1534: 		$changed=1;
                   1535:                 $maxrow++;
                   1536:                 $f{'A'.$maxrow}=$_;
                   1537:             }
1.78      matthew  1538:         }
1.23      www      1539:      
                   1540:         if ($changed) { &setformulas($safeeval,%f); }
                   1541: 
                   1542:         &setmaxrow($safeeval,$maxrow);
                   1543:         &setrowlabels($safeeval,%currentlist);
                   1544: 
                   1545:     } else {
                   1546:         return 'Could not access course data';
                   1547:     }
                   1548: }
1.5       www      1549: 
1.28      www      1550: # ----------------------------------- Update rows for student and assess sheets
                   1551: 
                   1552: sub updatestudentassesssheet {
1.5       www      1553:     my $safeeval=shift;
                   1554:     my %bighash;
1.35      www      1555:     my $stype=&gettype($safeeval);
                   1556:     my %current=();
                   1557:     unless ($updatedata{$ENV{'request.course.fn'}.'_'.$stype}) {
1.5       www      1558: # -------------------------------------------------------------------- Tie hash
                   1559:       if (tie(%bighash,'GDBM_File',$ENV{'request.course.fn'}.'.db',
                   1560:                        &GDBM_READER,0640)) {
                   1561: # --------------------------------------------------------- Get all assessments
                   1562: 
1.52      www      1563: 	my %allkeys=('timestamp' => 
1.75      www      1564:                      'Timestamp of Last Transaction<br>timestamp',
                   1565:                      'subnumber' =>
                   1566:                      'Number of Submissions<br>subnumber',
                   1567:                      'tutornumber' =>
                   1568:                      'Number of Tutor Responses<br>tutornumber',
                   1569:                      'totalpoints' =>
                   1570:                      'Total Points Granted<br>totalpoints');
1.5       www      1571: 
1.50      www      1572:         my $adduserstr='';
                   1573:         if ((&getuname($safeeval) ne $ENV{'user.name'}) ||
                   1574:             (&getudom($safeeval) ne $ENV{'user.domain'})) {
                   1575:             $adduserstr='&uname='.&getuname($safeeval).
                   1576: 		'&udom='.&getudom($safeeval);
                   1577:         }
                   1578: 
1.72      www      1579:         my %allassess=('_feedback' =>
                   1580: 	              '<a href="/adm/assesscalc?usymb=_feedback'.$adduserstr.
                   1581:                        '">Feedback</a>',
                   1582:                        '_evaluation' =>
                   1583: 	              '<a href="/adm/assesscalc?usymb=_evaluation'.$adduserstr.
                   1584:                        '">Evaluation</a>',
                   1585:                        '_tutoring' =>
                   1586: 	              '<a href="/adm/assesscalc?usymb=_tutoring'.$adduserstr.
1.74      www      1587:                        '">Tutoring</a>',
                   1588:                        '_discussion' =>
                   1589: 	              '<a href="/adm/assesscalc?usymb=_discussion'.$adduserstr.
                   1590:                        '">Discussion</a>'
1.72      www      1591:         );
                   1592: 
1.78      matthew  1593:         foreach (keys(%bighash)) {
1.5       www      1594: 	    if ($_=~/^src\_(\d+)\.(\d+)$/) {
                   1595: 	       my $mapid=$1;
                   1596:                my $resid=$2;
                   1597:                my $id=$mapid.'.'.$resid;
                   1598:                my $srcf=$bighash{$_};
                   1599:                if ($srcf=~/\.(problem|exam|quiz|assess|survey|form)$/) {
                   1600:                  my $symb=
                   1601:                      &Apache::lonnet::declutter($bighash{'map_id_'.$mapid}).
                   1602: 			    '___'.$resid.'___'.
                   1603: 			    &Apache::lonnet::declutter($srcf);
1.38      www      1604: 		 $allassess{$symb}=
1.50      www      1605: 	            '<a href="/adm/assesscalc?usymb='.$symb.$adduserstr.'">'.
                   1606:                      $bighash{'title_'.$id}.'</a>';
1.6       www      1607:                  if ($stype eq 'assesscalc') {
1.78      matthew  1608: 		     foreach (split(/\,/,
                   1609: 				    &Apache::lonnet::metadata($srcf,'keys'))) {
1.11      www      1610:                        if (($_=~/^stores\_(.*)/) || ($_=~/^parameter\_(.*)/)) {
1.5       www      1611: 			  my $key=$_;
                   1612:                           my $display=
                   1613: 			      &Apache::lonnet::metadata($srcf,$key.'.display');
                   1614:                           unless ($display) {
1.40      www      1615:                               $display.=
1.5       www      1616: 			         &Apache::lonnet::metadata($srcf,$key.'.name');
                   1617:                           }
1.40      www      1618:                           $display.='<br>'.$key;
1.5       www      1619:                           $allkeys{$key}=$display;
                   1620: 		       }
1.78      matthew  1621:                    } # end of foreach
1.5       www      1622: 	         }
                   1623: 	      }
                   1624: 	   }
1.78      matthew  1625:         } # end of foreach (keys(%bighash))
1.5       www      1626:         untie(%bighash);
                   1627:     
                   1628: #
1.11      www      1629: # %allkeys has a list of storage and parameter displays by unikey
1.5       www      1630: # %allassess has a list of all resource displays by symb
                   1631: #
1.6       www      1632: 
                   1633:         if ($stype eq 'assesscalc') {
                   1634: 	    %current=%allkeys;
                   1635:         } elsif ($stype eq 'studentcalc') {
                   1636:             %current=%allassess;
                   1637:         }
1.35      www      1638:         $updatedata{$ENV{'request.course.fn'}.'_'.$stype}=
                   1639: 	    join('___;___',%current);
                   1640:     } else {
                   1641:         return 'Could not access course data';
                   1642:     }
                   1643: # ------------------------------------------------------ Get current from cache
                   1644:     } else {
                   1645:         %current=split(/\_\_\_\;\_\_\_/,
                   1646: 		       $updatedata{$ENV{'request.course.fn'}.'_'.$stype});
                   1647:     }
                   1648: # -------------------- Find discrepancies between the course row table and this
                   1649: #
                   1650:         my %f=&getformulas($safeeval);
                   1651:         my $changed=0;
1.6       www      1652: 
                   1653:         my $maxrow=0;
                   1654:         my %existing=();
                   1655: 
                   1656: # ----------------------------------------------------------- Now obsolete rows
1.78      matthew  1657: 	foreach (keys(%f)) {
1.6       www      1658: 	    if ($_=~/^A(\d+)/) {
                   1659:                 $maxrow=($1>$maxrow)?$1:$maxrow;
1.57      www      1660:                 my ($usy,$ufn)=split(/\_\_\&\&\&\_\_/,$f{$_});
                   1661:                 $existing{$usy}=1;
                   1662: 		unless ((defined($current{$usy})) || (!$1)) {
1.6       www      1663: 		   $f{$_}='!!! Obsolete';
                   1664:                    $changed=1;
1.57      www      1665: 	        } elsif ($ufn) {
                   1666: 		    $current{$usy}
                   1667:                        =~s/assesscalc\?usymb\=/assesscalc\?ufn\=$ufn\&usymb\=/;
1.5       www      1668:                 }
                   1669:             }
1.78      matthew  1670:         }
1.6       www      1671: 
                   1672: # -------------------------------------------------------- New and unknown keys
                   1673:      
1.78      matthew  1674:         foreach (keys(%current)) {
1.6       www      1675:             unless ($existing{$_}) {
                   1676: 		$changed=1;
                   1677:                 $maxrow++;
                   1678:                 $f{'A'.$maxrow}=$_;
                   1679:             }
1.78      matthew  1680:         }
1.35      www      1681:     
1.6       www      1682:         if ($changed) { &setformulas($safeeval,%f); }
                   1683: 
                   1684:         &setmaxrow($safeeval,$maxrow);
                   1685:         &setrowlabels($safeeval,%current);
1.35      www      1686:  
                   1687:         undef %current;
                   1688:         undef %existing;
1.5       www      1689: }
1.3       www      1690: 
1.24      www      1691: # ------------------------------------------------ Load data for one assessment
1.16      www      1692: 
1.29      www      1693: sub loadstudent {
1.16      www      1694:     my $safeeval=shift;
                   1695:     my %c=();
                   1696:     my %f=&getformulas($safeeval);
1.39      www      1697:     $cachedassess=&getuname($safeeval).':'.&getudom($safeeval);
                   1698:     %cachedstores=();
                   1699:     {
                   1700:       my $reply=&Apache::lonnet::reply('dump:'.&getudom($safeeval).':'.
                   1701:                                                &getuname($safeeval).':'.
                   1702:                                                &getcid($safeeval),
                   1703:                                                &getuhome($safeeval));
                   1704:       unless ($reply=~/^error\:/) {
1.78      matthew  1705: 	 foreach ( split(/\&/,$reply)) {
1.39      www      1706:             my ($name,$value)=split(/\=/,$_);
                   1707:             $cachedstores{&Apache::lonnet::unescape($name)}=
                   1708: 	                  &Apache::lonnet::unescape($value);
1.78      matthew  1709: 	}
1.39      www      1710:       }
                   1711:     }
1.36      www      1712:     my @assessdata=();
1.78      matthew  1713:     foreach (keys(%f)) {
1.17      www      1714: 	if ($_=~/^A(\d+)/) {
                   1715: 	   my $row=$1;
1.42      www      1716:            unless (($f{$_}=~/^\!/) || ($row==0)) {
1.55      www      1717: 	      my ($usy,$ufn)=split(/\_\_\&\&\&\_\_/,$f{$_});
1.36      www      1718: 	      @assessdata=&exportsheet(&getuname($safeeval),
                   1719:                                        &getudom($safeeval),
1.55      www      1720:                                        'assesscalc',$usy,$ufn);
1.17      www      1721:               my $index=0;
1.78      matthew  1722:               foreach ('A','B','C','D','E','F','G','H','I','J','K','L','M',
                   1723: 	               'N','O','P','Q','R','S','T','U','V','W','X','Y','Z') {
1.30      www      1724:                   if ($assessdata[$index]) {
1.41      www      1725: 		     my $col=$_;
                   1726: 		     if ($assessdata[$index]=~/\D/) {
                   1727:                          $c{$col.$row}="'".$assessdata[$index]."'";
                   1728:  		     } else {
                   1729: 		         $c{$col.$row}=$assessdata[$index];
                   1730: 		     }
                   1731:                      unless ($col eq 'A') { 
                   1732: 			 $f{$col.$row}='import';
1.30      www      1733:                      }
                   1734: 		  }
                   1735:                   $index++;
1.78      matthew  1736:               }
1.16      www      1737: 	   }
                   1738:         }
1.78      matthew  1739:     }
1.39      www      1740:     $cachedassess='';
                   1741:     undef %cachedstores;
1.18      www      1742:     &setformulas($safeeval,%f);
1.16      www      1743:     &setconstants($safeeval,%c);
                   1744: }
                   1745: 
1.24      www      1746: # --------------------------------------------------- Load data for one student
                   1747: 
1.30      www      1748: sub loadcourse {
1.37      www      1749:     my ($safeeval,$r)=@_;
1.24      www      1750:     my %c=();
                   1751:     my %f=&getformulas($safeeval);
1.37      www      1752:     my $total=0;
1.78      matthew  1753:     foreach (keys(%f)) {
1.37      www      1754: 	if ($_=~/^A(\d+)/) {
                   1755: 	    unless ($f{$_}=~/^\!/) { $total++; }
                   1756:         }
1.78      matthew  1757:     }
1.37      www      1758:     my $now=0;
                   1759:     my $since=time;
1.39      www      1760:     $r->print(<<ENDPOP);
                   1761: <script>
                   1762:     popwin=open('','popwin','width=400,height=100');
                   1763:     popwin.document.writeln('<html><body bgcolor="#FFFFFF">'+
1.50      www      1764:       '<h3>Spreadsheet Calculation Progress</h3>'+
1.39      www      1765:       '<form name=popremain>'+
                   1766:       '<input type=text size=35 name=remaining value=Starting></form>'+
                   1767:       '</body></html>');
1.42      www      1768:     popwin.document.close();
1.39      www      1769: </script>
                   1770: ENDPOP
1.37      www      1771:     $r->rflush();
1.78      matthew  1772:     foreach (keys(%f)) {
1.24      www      1773: 	if ($_=~/^A(\d+)/) {
                   1774: 	   my $row=$1;
1.42      www      1775:            unless (($f{$_}=~/^\!/)  || ($row==0)) {
1.37      www      1776: 	      my @studentdata=&exportsheet(split(/\:/,$f{$_}),
1.30      www      1777:                                            'studentcalc');
1.37      www      1778:               undef %userrdatas;
                   1779:               $now++;
1.39      www      1780:               $r->print('<script>popwin.document.popremain.remaining.value="'.
1.37      www      1781:                   $now.'/'.$total.': '.int((time-$since)/$now*($total-$now)).
1.39      www      1782:                         ' secs remaining";</script>');
1.37      www      1783:               $r->rflush(); 
                   1784: 
1.24      www      1785:               my $index=0;
1.78      matthew  1786:              foreach ('A','B','C','D','E','F','G','H','I','J','K','L','M',
                   1787: 	              'N','O','P','Q','R','S','T','U','V','W','X','Y','Z') {
1.30      www      1788:                   if ($studentdata[$index]) {
1.41      www      1789: 		     my $col=$_;
                   1790: 		     if ($studentdata[$index]=~/\D/) {
                   1791:                          $c{$col.$row}="'".$studentdata[$index]."'";
                   1792:  		     } else {
                   1793: 		         $c{$col.$row}=$studentdata[$index];
                   1794: 		     }
                   1795:                      unless ($col eq 'A') { 
                   1796: 			 $f{$col.$row}='import';
1.30      www      1797:                      }
                   1798: 		  }
                   1799:                   $index++;
1.78      matthew  1800:               }
1.24      www      1801: 	   }
                   1802:         }
1.78      matthew  1803:     }
1.24      www      1804:     &setformulas($safeeval,%f);
                   1805:     &setconstants($safeeval,%c);
1.43      www      1806:     $r->print('<script>popwin.close()</script>');
1.37      www      1807:     $r->rflush(); 
1.24      www      1808: }
                   1809: 
1.6       www      1810: # ------------------------------------------------ Load data for one assessment
                   1811: 
1.29      www      1812: sub loadassessment {
                   1813:     my $safeeval=shift;
                   1814: 
                   1815:     my $uhome=&getuhome($safeeval);
                   1816:     my $uname=&getuname($safeeval);
                   1817:     my $udom=&getudom($safeeval);
                   1818:     my $symb=&getusymb($safeeval);
                   1819:     my $cid=&getcid($safeeval);
                   1820:     my $cnum=&getcnum($safeeval);
                   1821:     my $cdom=&getcdom($safeeval);
                   1822:     my $chome=&getchome($safeeval);
                   1823: 
1.6       www      1824:     my $namespace;
1.29      www      1825:     unless ($namespace=$cid) { return ''; }
1.11      www      1826: 
                   1827: # ----------------------------------------------------------- Get stored values
1.39      www      1828: 
                   1829:    my %returnhash=();
                   1830: 
                   1831:    if ($cachedassess eq $uname.':'.$udom) {
                   1832: #
                   1833: # get data out of the dumped stores
                   1834: # 
                   1835: 
                   1836:        my $version=$cachedstores{'version:'.$symb};
                   1837:        my $scope;
                   1838:        for ($scope=1;$scope<=$version;$scope++) {
1.78      matthew  1839:            foreach (split(/\:/,$cachedstores{$scope.':keys:'.$symb})) {
1.39      www      1840:                $returnhash{$_}=$cachedstores{$scope.':'.$symb.':'.$_};
1.78      matthew  1841:            } 
1.39      www      1842:        }
                   1843: 
                   1844:    } else {
                   1845: #
                   1846: # restore individual
                   1847: #
                   1848: 
1.11      www      1849:     my $answer=&Apache::lonnet::reply(
1.15      www      1850:        "restore:$udom:$uname:".
                   1851:        &Apache::lonnet::escape($namespace).":".
                   1852:        &Apache::lonnet::escape($symb),$uhome);
1.78      matthew  1853:     foreach (split(/\&/,$answer)) {
1.6       www      1854: 	my ($name,$value)=split(/\=/,$_);
1.11      www      1855:         $returnhash{&Apache::lonnet::unescape($name)}=
                   1856:                     &Apache::lonnet::unescape($value);
1.78      matthew  1857:     }
1.6       www      1858:     my $version;
                   1859:     for ($version=1;$version<=$returnhash{'version'};$version++) {
1.78      matthew  1860:        foreach (split(/\:/,$returnhash{$version.':keys'})) {
1.6       www      1861:           $returnhash{$_}=$returnhash{$version.':'.$_};
1.78      matthew  1862:        } 
1.6       www      1863:     }
1.39      www      1864:    }
1.11      www      1865: # ----------------------------- returnhash now has all stores for this resource
1.76      www      1866: 
                   1867: # --------- convert all "_" to "." to be able to use libraries, multiparts, etc
                   1868: 
                   1869:     my @oldkeys=keys %returnhash;
                   1870: 
1.78      matthew  1871:     foreach (@oldkeys) {
1.76      www      1872:         my $name=$_;
                   1873:         my $value=$returnhash{$_};
                   1874:         delete $returnhash{$_};
                   1875:         $name=~s/\_/\./g;
                   1876:         $returnhash{$name}=$value;
1.78      matthew  1877:     }
1.11      www      1878: 
                   1879: # ---------------------------- initialize coursedata and userdata for this user
1.31      www      1880:     undef %courseopt;
                   1881:     undef %useropt;
1.29      www      1882: 
                   1883:     my $userprefix=$uname.'_'.$udom.'_';
                   1884: 
1.11      www      1885:     unless ($uhome eq 'no_host') { 
                   1886: # -------------------------------------------------------------- Get coursedata
1.13      www      1887:       unless
1.32      www      1888:         ((time-$courserdatas{$cid.'.last_cache'})<240) {
1.29      www      1889:          my $reply=&Apache::lonnet::reply('dump:'.$cdom.':'.$cnum.
                   1890:               ':resourcedata',$chome);
1.11      www      1891:          if ($reply!~/^error\:/) {
1.29      www      1892:             $courserdatas{$cid}=$reply;
                   1893:             $courserdatas{$cid.'.last_cache'}=time;
1.11      www      1894:          }
                   1895:       }
1.78      matthew  1896:       foreach (split(/\&/,$courserdatas{$cid})) {
1.11      www      1897:          my ($name,$value)=split(/\=/,$_);
1.29      www      1898:          $courseopt{$userprefix.&Apache::lonnet::unescape($name)}=
1.11      www      1899:                     &Apache::lonnet::unescape($value);  
1.78      matthew  1900:       }
1.11      www      1901: # --------------------------------------------------- Get userdata (if present)
1.13      www      1902:       unless
1.32      www      1903:         ((time-$userrdatas{$uname.'___'.$udom.'.last_cache'})<240) {
1.11      www      1904:          my $reply=
                   1905:        &Apache::lonnet::reply('dump:'.$udom.':'.$uname.':resourcedata',$uhome);
                   1906:          if ($reply!~/^error\:/) {
                   1907: 	     $userrdatas{$uname.'___'.$udom}=$reply;
1.13      www      1908: 	     $userrdatas{$uname.'___'.$udom.'.last_cache'}=time;
1.11      www      1909:          }
                   1910:       }
1.78      matthew  1911:       foreach (split(/\&/,$userrdatas{$uname.'___'.$udom})) {
1.11      www      1912:          my ($name,$value)=split(/\=/,$_);
1.29      www      1913:          $useropt{$userprefix.&Apache::lonnet::unescape($name)}=
1.15      www      1914: 	          &Apache::lonnet::unescape($value);
1.78      matthew  1915:       }
1.29      www      1916:     }
                   1917: # ----------------- now courseopt, useropt initialized for this user and course
                   1918: # (used by parmval)
                   1919: 
1.60      www      1920: #
                   1921: # Load keys for this assessment only
                   1922: #
                   1923:     my %thisassess=();
                   1924:     my ($symap,$syid,$srcf)=split(/\_\_\_/,$symb);
                   1925:     
1.78      matthew  1926:     foreach (split(/\,/,&Apache::lonnet::metadata($srcf,'keys'))) {
1.60      www      1927:         $thisassess{$_}=1;
1.78      matthew  1928:     } 
1.60      www      1929: #
                   1930: # Load parameters
                   1931: #
1.29      www      1932:    my %c=();
1.6       www      1933: 
1.29      www      1934:    if (tie(%parmhash,'GDBM_File',
                   1935:            &getcfn($safeeval).'_parms.db',&GDBM_READER,0640)) {
1.6       www      1936:     my %f=&getformulas($safeeval);
1.78      matthew  1937:     foreach (keys(%f))  {
1.6       www      1938: 	if ($_=~/^A/) {
                   1939:             unless ($f{$_}=~/^\!/) {
1.11      www      1940:   	       if ($f{$_}=~/^parameter/) {
1.60      www      1941: 		if ($thisassess{$f{$_}}) {
1.40      www      1942:                   my $val=&parmval($f{$_},$safeeval);
                   1943:                   $c{$_}=$val;
                   1944:                   $c{$f{$_}}=$val;
1.60      www      1945: 	        }
1.11      www      1946: 	       } else {
1.15      www      1947: 		  my $key=$f{$_};
1.40      www      1948:                   my $ckey=$key;
1.15      www      1949:                   $key=~s/^stores\_/resource\./;
1.70      www      1950:                   $key=~s/\_/\./g;
1.15      www      1951:  	          $c{$_}=$returnhash{$key};
1.40      www      1952:                   $c{$ckey}=$returnhash{$key};
1.11      www      1953: 	       }
                   1954: 	   }
1.6       www      1955:         }
1.78      matthew  1956:     }
1.29      www      1957:     untie(%parmhash);
                   1958:    }
                   1959:    &setconstants($safeeval,%c);
1.6       www      1960: }
                   1961: 
1.10      www      1962: # --------------------------------------------------------- Various form fields
                   1963: 
                   1964: sub textfield {
                   1965:     my ($title,$name,$value)=@_;
                   1966:     return "\n<p><b>$title:</b><br>".
                   1967:            '<input type=text name="'.$name.'" size=80 value="'.$value.'">';
                   1968: }
                   1969: 
                   1970: sub hiddenfield {
                   1971:     my ($name,$value)=@_;
                   1972:     return "\n".'<input type=hidden name="'.$name.'" value="'.$value.'">';
                   1973: }
                   1974: 
                   1975: sub selectbox {
                   1976:     my ($title,$name,$value,%options)=@_;
                   1977:     my $selout="\n<p><b>$title:</b><br>".'<select name="'.$name.'">';
1.78      matthew  1978:     foreach (sort keys(%options)) {
1.10      www      1979:         $selout.='<option value="'.$_.'"';
                   1980:         if ($_ eq $value) { $selout.=' selected'; }
                   1981:         $selout.='>'.$options{$_}.'</option>';
1.78      matthew  1982:     }
1.10      www      1983:     return $selout.'</select>';
                   1984: }
                   1985: 
1.28      www      1986: # =============================================== Update information in a sheet
                   1987: #
                   1988: # Add new users or assessments, etc.
                   1989: #
                   1990: 
                   1991: sub updatesheet {
                   1992:     my $safeeval=shift;
                   1993:     my $stype=&gettype($safeeval);
                   1994:     if ($stype eq 'classcalc') {
                   1995: 	return &updateclasssheet($safeeval);
                   1996:     } else {
                   1997:         return &updatestudentassesssheet($safeeval);
                   1998:     }
                   1999: }
                   2000: 
                   2001: # =================================================== Load the rows for a sheet
                   2002: #
                   2003: # Import the data for rows
                   2004: #
                   2005: 
1.37      www      2006: sub loadrows {
                   2007:     my ($safeeval,$r)=@_;
1.28      www      2008:     my $stype=&gettype($safeeval);
                   2009:     if ($stype eq 'classcalc') {
1.37      www      2010: 	&loadcourse($safeeval,$r);
1.28      www      2011:     } elsif ($stype eq 'studentcalc') {
1.29      www      2012:         &loadstudent($safeeval);
1.28      www      2013:     } else {
1.29      www      2014:         &loadassessment($safeeval);
1.28      www      2015:     }
                   2016: }
                   2017: 
1.47      www      2018: # ======================================================= Forced recalculation?
                   2019: 
                   2020: sub checkthis {
                   2021:     my ($keyname,$time)=@_;
                   2022:     return ($time<$expiredates{$keyname});
                   2023: }
                   2024: sub forcedrecalc {
                   2025:     my ($uname,$udom,$stype,$usymb)=@_;
                   2026:     my $key=$uname.':'.$udom.':'.$stype.':'.$usymb;
                   2027:     my $time=$oldsheets{$key.'.time'};
1.53      www      2028:     if ($ENV{'form.forcerecalc'}) { return 1; }
1.47      www      2029:     unless ($time) { return 1; }
                   2030:     if ($stype eq 'assesscalc') {
                   2031:         my $map=(split(/\_\_\_/,$usymb))[0];
                   2032:         if (&checkthis('::assesscalc:',$time) ||
                   2033:             &checkthis('::assesscalc:'.$map,$time) ||
                   2034:             &checkthis('::assesscalc:'.$usymb,$time) ||
1.49      www      2035:             &checkthis($uname.':'.$udom.':assesscalc:',$time) ||
                   2036:             &checkthis($uname.':'.$udom.':assesscalc:'.$map,$time) ||
                   2037:             &checkthis($uname.':'.$udom.':assesscalc:'.$usymb,$time)) {
1.47      www      2038:             return 1;
                   2039:         } 
                   2040:     } else {
                   2041:         if (&checkthis('::studentcalc:',$time) || 
1.51      www      2042:             &checkthis($uname.':'.$udom.':studentcalc:',$time)) {
1.47      www      2043: 	    return 1;
                   2044:         }
                   2045:     }
                   2046:     return 0; 
                   2047: }
                   2048: 
1.28      www      2049: # ============================================================== Export handler
                   2050: #
                   2051: # Non-interactive call from with program
                   2052: #
                   2053: 
                   2054: sub exportsheet {
1.44      www      2055:  my ($uname,$udom,$stype,$usymb,$fn)=@_;
                   2056:  my @exportarr=();
1.74      www      2057: 
                   2058:  if (($usymb=~/^\_(\w+)/) && (!$fn)) {
                   2059:     $fn='default_'.$1;
                   2060:  }
                   2061: 
1.44      www      2062: #
                   2063: # Check if cached
                   2064: #
1.46      www      2065: 
1.44      www      2066:  my $key=$uname.':'.$udom.':'.$stype.':'.$usymb;
                   2067:  my $found='';
                   2068: 
                   2069:  if ($oldsheets{$key}) {
1.78      matthew  2070:      foreach (split(/\_\_\_\&\_\_\_/,$oldsheets{$key})) {
1.44      www      2071:          my ($name,$value)=split(/\_\_\_\=\_\_\_/,$_);
                   2072:          if ($name eq $fn) {
                   2073: 	     $found=$value;
                   2074:          }
1.78      matthew  2075:      }
1.44      www      2076:  }
                   2077: 
1.46      www      2078:  unless ($found) {
                   2079:      &cachedssheets($uname,$udom,&Apache::lonnet::homeserver($uname,$udom));
                   2080:      if ($oldsheets{$key}) {
1.78      matthew  2081: 	foreach (split(/\_\_\_\&\_\_\_/,$oldsheets{$key})) {
1.46      www      2082:             my ($name,$value)=split(/\_\_\_\=\_\_\_/,$_);
                   2083:             if ($name eq $fn) {
                   2084: 	        $found=$value;
                   2085:             }
1.78      matthew  2086:         } 
1.46      www      2087:      }
                   2088:  }
1.47      www      2089: #
                   2090: # Check if still valid
                   2091: #
                   2092:  if ($found) {
                   2093:      if (&forcedrecalc($uname,$udom,$stype,$usymb)) {
                   2094: 	 $found='';
                   2095:      }
                   2096:  }
                   2097:  
1.44      www      2098:  if ($found) {
                   2099: #
                   2100: # Return what was cached
                   2101: #
                   2102:      @exportarr=split(/\_\_\_\;\_\_\_/,$found);
                   2103: 
                   2104:  } else {
                   2105: #
                   2106: # Not cached
1.46      www      2107: #        
                   2108: 
1.29      www      2109:     my $thissheet=&makenewsheet($uname,$udom,$stype,$usymb);
1.28      www      2110:     &readsheet($thissheet,$fn);
                   2111:     &updatesheet($thissheet);
                   2112:     &loadrows($thissheet);
1.44      www      2113:     &calcsheet($thissheet); 
                   2114:     @exportarr=&exportdata($thissheet);
                   2115: #
                   2116: # Store now
                   2117: #
                   2118:     my $cid=$ENV{'request.course.id'}; 
1.47      www      2119:     my $current='';
1.46      www      2120:     if ($stype eq 'studentcalc') {
                   2121:        $current=&Apache::lonnet::reply('get:'.
1.44      www      2122:                                      $ENV{'course.'.$cid.'.domain'}.':'.
                   2123:                                      $ENV{'course.'.$cid.'.num'}.
                   2124: 				     ':nohist_calculatedsheets:'.
                   2125:                                      &Apache::lonnet::escape($key),
                   2126:                                      $ENV{'course.'.$cid.'.home'});
1.46      www      2127:     } else {
                   2128:        $current=&Apache::lonnet::reply('get:'.
                   2129:                                      &getudom($thissheet).':'.
                   2130:                                      &getuname($thissheet).
                   2131: 				     ':nohist_calculatedsheets_'.
                   2132:                                      $ENV{'request.course.id'}.':'.
                   2133:                                      &Apache::lonnet::escape($key),
                   2134:                                      &getuhome($thissheet));
                   2135: 
                   2136:     }
1.44      www      2137:     my %currentlystored=();
                   2138:     unless ($current=~/^error\:/) {
1.78      matthew  2139:        foreach (split(/\_\_\_\&\_\_\_/,&Apache::lonnet::unescape($current))) {
1.44      www      2140:            my ($name,$value)=split(/\_\_\_\=\_\_\_/,$_);
                   2141:            $currentlystored{$name}=$value;
1.78      matthew  2142:        }
1.44      www      2143:     }
                   2144:     $currentlystored{$fn}=join('___;___',@exportarr);
                   2145: 
                   2146:     my $newstore='';
1.78      matthew  2147:     foreach (keys(%currentlystored)) {
1.44      www      2148:         if ($newstore) { $newstore.='___&___'; }
                   2149:         $newstore.=$_.'___=___'.$currentlystored{$_};
1.78      matthew  2150:     }
1.47      www      2151:     my $now=time;
1.46      www      2152:     if ($stype eq 'studentcalc') {
                   2153:        &Apache::lonnet::reply('put:'.
1.44      www      2154:                          $ENV{'course.'.$cid.'.domain'}.':'.
                   2155:                          $ENV{'course.'.$cid.'.num'}.
                   2156: 			 ':nohist_calculatedsheets:'.
                   2157:                          &Apache::lonnet::escape($key).'='.
1.47      www      2158: 			 &Apache::lonnet::escape($newstore).'&'.
                   2159:                          &Apache::lonnet::escape($key).'.time='.$now,
1.44      www      2160:                          $ENV{'course.'.$cid.'.home'});
1.46      www      2161:    } else {
                   2162:        &Apache::lonnet::reply('put:'.
                   2163:                          &getudom($thissheet).':'.
                   2164:                          &getuname($thissheet).
                   2165: 			 ':nohist_calculatedsheets_'.
                   2166:                          $ENV{'request.course.id'}.':'.
                   2167:                          &Apache::lonnet::escape($key).'='.
1.47      www      2168: 			 &Apache::lonnet::escape($newstore).'&'.
                   2169:                          &Apache::lonnet::escape($key).'.time='.$now,
1.46      www      2170:                          &getuhome($thissheet));
                   2171:    }
1.44      www      2172:  }
                   2173:  return @exportarr;
                   2174: }
1.48      www      2175: # ============================================================ Expiration Dates
                   2176: #
                   2177: # Load previously cached student spreadsheets for this course
                   2178: #
                   2179: 
                   2180: sub expirationdates {
                   2181:     undef %expiredates;
                   2182:     my $cid=$ENV{'request.course.id'};
                   2183:     my $reply=&Apache::lonnet::reply('dump:'.
                   2184: 				     $ENV{'course.'.$cid.'.domain'}.':'.
                   2185:                                      $ENV{'course.'.$cid.'.num'}.
                   2186: 				     ':nohist_expirationdates',
                   2187:                                      $ENV{'course.'.$cid.'.home'});
                   2188:     unless ($reply=~/^error\:/) {
1.78      matthew  2189: 	foreach (split(/\&/,$reply)) {
1.48      www      2190:             my ($name,$value)=split(/\=/,$_);
                   2191:             $expiredates{&Apache::lonnet::unescape($name)}
                   2192:                         =&Apache::lonnet::unescape($value);
1.78      matthew  2193:         }
1.48      www      2194:     }
                   2195: }
1.44      www      2196: 
                   2197: # ===================================================== Calculated sheets cache
                   2198: #
1.46      www      2199: # Load previously cached student spreadsheets for this course
1.44      www      2200: #
                   2201: 
1.46      www      2202: sub cachedcsheets {
1.44      www      2203:     my $cid=$ENV{'request.course.id'};
                   2204:     my $reply=&Apache::lonnet::reply('dump:'.
                   2205: 				     $ENV{'course.'.$cid.'.domain'}.':'.
                   2206:                                      $ENV{'course.'.$cid.'.num'}.
                   2207: 				     ':nohist_calculatedsheets',
                   2208:                                      $ENV{'course.'.$cid.'.home'});
                   2209:     unless ($reply=~/^error\:/) {
1.78      matthew  2210: 	foreach ( split(/\&/,$reply)) {
1.44      www      2211:             my ($name,$value)=split(/\=/,$_);
                   2212:             $oldsheets{&Apache::lonnet::unescape($name)}
                   2213:                       =&Apache::lonnet::unescape($value);
1.78      matthew  2214:         }
1.44      www      2215:     }
1.28      www      2216: }
                   2217: 
1.46      www      2218: # ===================================================== Calculated sheets cache
                   2219: #
                   2220: # Load previously cached assessment spreadsheets for this student
                   2221: #
                   2222: 
                   2223: sub cachedssheets {
                   2224:   my ($sname,$sdom,$shome)=@_;
                   2225:   unless (($loadedcaches{$sname.'_'.$sdom}) || ($shome eq 'no_host')) {
                   2226:     my $cid=$ENV{'request.course.id'};
                   2227:     my $reply=&Apache::lonnet::reply('dump:'.$sdom.':'.$sname.
                   2228: 			             ':nohist_calculatedsheets_'.
                   2229:                                       $ENV{'request.course.id'},
                   2230:                                      $shome);
                   2231:     unless ($reply=~/^error\:/) {
1.78      matthew  2232: 	foreach ( split(/\&/,$reply)) {
1.46      www      2233:             my ($name,$value)=split(/\=/,$_);
                   2234:             $oldsheets{&Apache::lonnet::unescape($name)}
                   2235:                       =&Apache::lonnet::unescape($value);
1.78      matthew  2236:         }
1.46      www      2237:     }
                   2238:     $loadedcaches{$sname.'_'.$sdom}=1;
                   2239:   }
                   2240: }
                   2241: 
                   2242: # ===================================================== Calculated sheets cache
                   2243: #
                   2244: # Load previously cached assessment spreadsheets for this student
                   2245: #
                   2246: 
1.12      www      2247: # ================================================================ Main handler
1.28      www      2248: #
                   2249: # Interactive call to screen
                   2250: #
                   2251: #
                   2252: 
1.3       www      2253: 
                   2254: sub handler {
1.7       www      2255:     my $r=shift;
                   2256: 
1.28      www      2257:     if ($r->header_only) {
1.7       www      2258:       $r->content_type('text/html');
                   2259:       $r->send_http_header;
                   2260:       return OK;
1.28      www      2261:     }
                   2262: 
                   2263: # ---------------------------------------------------- Global directory configs
                   2264: 
1.29      www      2265: $includedir=$r->dir_config('lonIncludes');
1.28      www      2266: $tmpdir=$r->dir_config('lonDaemons').'/tmp/';
1.3       www      2267: 
1.7       www      2268: # ----------------------------------------------------- Needs to be in a course
1.3       www      2269: 
1.29      www      2270:   if ($ENV{'request.course.fn'}) { 
1.10      www      2271: 
                   2272: # --------------------------- Get query string for limited number of parameters
1.17      www      2273: 
1.78      matthew  2274:     foreach (split(/&/,$ENV{'QUERY_STRING'})) {
1.10      www      2275:        my ($name, $value) = split(/=/,$_);
                   2276:        $value =~ tr/+/ /;
                   2277:        $value =~ s/%([a-fA-F0-9][a-fA-F0-9])/pack("C",hex($1))/eg;
1.19      www      2278:        if (($name eq 'uname') || ($name eq 'udom') || 
                   2279:            ($name eq 'usymb') || ($name eq 'ufn')) {
1.10      www      2280:            unless ($ENV{'form.'.$name}) {
                   2281:               $ENV{'form.'.$name}=$value;
                   2282: 	   }
                   2283:        }
1.78      matthew  2284:     }
1.72      www      2285: 
                   2286:     if (($ENV{'form.usymb'}=~/^\_(\w+)/) && (!$ENV{'form.ufn'})) {
                   2287: 	$ENV{'form.ufn'}='default_'.$1;
                   2288:     }
1.10      www      2289: 
1.55      www      2290: # -------------------------------------- Interactive loading of specific sheet?
                   2291:     if (($ENV{'form.load'}) && ($ENV{'form.loadthissheet'} ne 'Default')) {
                   2292: 	$ENV{'form.ufn'}=$ENV{'form.loadthissheet'};
                   2293:     }
1.10      www      2294: # ------------------------------------------- Nothing there? Must be login user
1.29      www      2295: 
                   2296:     my $aname;
                   2297:     my $adom;
                   2298: 
1.10      www      2299:     unless ($ENV{'form.uname'}) {
1.29      www      2300: 	$aname=$ENV{'user.name'};
                   2301:         $adom=$ENV{'user.domain'};
1.11      www      2302:     } else {
1.29      www      2303:         $aname=$ENV{'form.uname'};
                   2304:         $adom=$ENV{'form.udom'};
1.10      www      2305:     }
1.14      www      2306: 
1.10      www      2307: # ------------------------------------------------------------------- Open page
                   2308: 
1.7       www      2309:     $r->content_type('text/html');
1.11      www      2310:     $r->header_out('Cache-control','no-cache');
                   2311:     $r->header_out('Pragma','no-cache');
1.7       www      2312:     $r->send_http_header;
1.3       www      2313: 
1.14      www      2314: # --------------------------------------------------------------- Screen output
                   2315: 
1.10      www      2316:     $r->print('<html><head><title>LON-CAPA Spreadsheet</title>');
                   2317:     $r->print(<<ENDSCRIPT);
                   2318: <script language="JavaScript">
                   2319: 
                   2320:     function celledit(cn,cf) {
                   2321:         var cnf=prompt(cn,cf);
                   2322: 	if (cnf!=null) {
                   2323: 	    document.sheet.unewfield.value=cn;
                   2324:             document.sheet.unewformula.value=cnf;
                   2325:             document.sheet.submit();
                   2326:         }
                   2327:     }
                   2328: 
1.55      www      2329:     function changesheet(cn) {
                   2330: 	document.sheet.unewfield.value=cn;
                   2331:         document.sheet.unewformula.value='changesheet';
                   2332:         document.sheet.submit();
                   2333:     }
                   2334: 
1.10      www      2335: </script>
                   2336: ENDSCRIPT
                   2337:     $r->print('</head><body bgcolor="#FFFFFF">'.
1.21      www      2338:        '<img align=right src=/adm/lonIcons/lonlogos.gif>'.
                   2339:        '<h1>LON-CAPA Spreadsheet</h1>'.
1.10      www      2340:        '<form action="'.$r->uri.'" name=sheet method=post>'.
                   2341:        &hiddenfield('uname',$ENV{'form.uname'}).
                   2342:        &hiddenfield('udom',$ENV{'form.udom'}).
                   2343:        &hiddenfield('usymb',$ENV{'form.usymb'}).
                   2344:        &hiddenfield('unewfield','').
                   2345:        &hiddenfield('unewformula',''));
1.29      www      2346: 
                   2347: # ---------------------- Make sure that this gets out, even if user hits "stop"
                   2348: 
1.24      www      2349:     $r->rflush();
1.29      www      2350: 
1.54      www      2351: # ---------------------------------------------------------------- Full recalc?
                   2352: 
                   2353: 
                   2354:     if ($ENV{'form.forcerecalc'}) {
                   2355: 	$r->print('<h4>Completely Recalculating Sheet ...</h4>');
                   2356:         undef %spreadsheets;
                   2357:         undef %courserdatas;
                   2358:         undef %userrdatas;
                   2359:         undef %defaultsheets;
                   2360:         undef %updatedata;
                   2361:    }
                   2362:  
1.14      www      2363: # ---------------------------------------- Read new sheet or modified worksheet
                   2364: 
1.19      www      2365:     $r->uri=~/\/(\w+)$/;
1.14      www      2366: 
1.29      www      2367:     my $asheet=&makenewsheet($aname,$adom,$1,$ENV{'form.usymb'});
                   2368: 
1.30      www      2369: # ------------------------ If a new formula had been entered, go from work copy
                   2370: 
                   2371:     if ($ENV{'form.unewfield'}) {
                   2372:         $r->print('<h2>Modified Workcopy</h2>');
                   2373:         $ENV{'form.unewformula'}=~s/\'/\"/g;
                   2374:         $r->print('<p>New formula: '.$ENV{'form.unewfield'}.'='.
                   2375:                   $ENV{'form.unewformula'}.'<p>');
                   2376:         &setfilename($asheet,$ENV{'form.ufn'});
                   2377: 	&tmpread($asheet,
                   2378:                  $ENV{'form.unewfield'},$ENV{'form.unewformula'});
                   2379: 
                   2380:      } elsif ($ENV{'form.saveas'}) {
                   2381:         &setfilename($asheet,$ENV{'form.ufn'});
                   2382: 	&tmpread($asheet);
                   2383:     } else {
                   2384:         &readsheet($asheet,$ENV{'form.ufn'});
                   2385:     }
                   2386: 
                   2387: # -------------------------------------------------- Print out user information
                   2388: 
                   2389:     unless (&gettype($asheet) eq 'classcalc') {
                   2390:         $r->print('<p><b>User:</b> '.&getuname($asheet).
                   2391:                   '<br><b>Domain:</b> '.&getudom($asheet));
                   2392:         if (&getcsec($asheet) eq '-1') {
                   2393:            $r->print('<h3><font color=red>'.
                   2394:                      'Not a student in this course</font></h3>');
                   2395:         } else {
                   2396:            $r->print('<br><b>Section/Group:</b> '.&getcsec($asheet));
                   2397:         }
1.77      www      2398:         if ($ENV{'form.usymb'}) {
                   2399:            $r->print('<br><b>Assessment:</b> <tt>'.$ENV{'form.usymb'}.'</tt>');
                   2400:         }
1.30      www      2401:     }
                   2402: 
                   2403: # ---------------------------------------------------------------- Course title
                   2404: 
                   2405:     $r->print('<h1>'.
1.61      www      2406:             $ENV{'course.'.$ENV{'request.course.id'}.'.description'}.
                   2407:              '</h1><h3>'.localtime().'</h3>');
1.30      www      2408: 
1.53      www      2409: # ---------------------------------------------------- See if user can see this
                   2410: 
                   2411:     if ((&gettype($asheet) eq 'classcalc') || 
                   2412:         (&getuname($asheet) ne $ENV{'user.name'}) ||
                   2413:         (&getudom($asheet) ne $ENV{'user.domain'})) {
                   2414:         unless (&Apache::lonnet::allowed('vgr',&getcid($asheet))) {
                   2415: 	    $r->print(
                   2416:            '<h1>Access Permission Denied</h1></form></body></html>');
                   2417:             return OK;
                   2418:         }
                   2419:     }
1.30      www      2420: 
1.53      www      2421: # ---------------------------------------------------------- Additional options
                   2422: 
                   2423:     $r->print(
                   2424:  '<input type=submit name=forcerecalc value="Completely Recalculate Sheet"><p>'
                   2425: 		 );
                   2426:     if (&gettype($asheet) eq 'assesscalc') {
                   2427:        $r->print ('<p><font size=+2><a href="/adm/studentcalc?uname='.
                   2428:                                                &getuname($asheet).
                   2429:                                                '&udom='.&getudom($asheet).
                   2430:                   '">Level up: Student Sheet</a></font><p>');
                   2431:     }
                   2432:     
                   2433:     if ((&gettype($asheet) eq 'studentcalc') && 
                   2434:         (&Apache::lonnet::allowed('vgr',&getcid($asheet)))) {
                   2435:        $r->print (
                   2436:                    '<p><font size=+2><a href="/adm/classcalc">'.
                   2437:                    'Level up: Course Sheet</a></font><p>');
                   2438:     }
                   2439:     
1.30      www      2440: 
                   2441: # ----------------------------------------------------------------- Save dialog
                   2442: 
                   2443: 
                   2444:     if (&Apache::lonnet::allowed('opa',$ENV{'request.course.id'})) {
                   2445:         my $fname=$ENV{'form.ufn'};
                   2446:         $fname=~s/\_[^\_]+$//;
                   2447:         if ($fname eq 'default') { $fname='course_default'; }
                   2448:         $r->print('<input type=submit name=saveas value="Save as ...">'.
                   2449:               '<input type=text size=20 name=newfn value="'.$fname.
                   2450:               '"> (make default: <input type=checkbox name="makedefufn">)<p>');
                   2451:     }
                   2452: 
                   2453:     $r->print(&hiddenfield('ufn',&getfilename($asheet)));
1.55      www      2454: 
                   2455: # ----------------------------------------------------------------- Load dialog
                   2456:     if (&Apache::lonnet::allowed('opa',$ENV{'request.course.id'})) {
                   2457: 	$r->print('<p><input type=submit name=load value="Load ...">'.
                   2458:                   '<select name="loadthissheet">'.
                   2459:                   '<option name="default">Default</option>');
1.78      matthew  2460:         foreach (&othersheets($asheet,&gettype($asheet))) {
1.55      www      2461: 	    $r->print('<option name="'.$_.'"');
                   2462:             if ($ENV{'form.ufn'} eq $_) {
                   2463:                $r->print(' selected');
                   2464:             }
                   2465:             $r->print('>'.$_.'</option>');
1.78      matthew  2466:         } 
1.55      www      2467:         $r->print('</select><p>');
                   2468:         if (&gettype($asheet) eq 'studentcalc') {
                   2469: 	    &setothersheets($asheet,&othersheets($asheet,'assesscalc'));
                   2470:         }
                   2471:     }
1.30      www      2472: 
1.46      www      2473: # --------------------------------------------------------------- Cached sheets
1.48      www      2474: 
                   2475:     &expirationdates();
1.46      www      2476: 
                   2477:     undef %oldsheets;
                   2478:     undef %loadedcaches;
1.44      www      2479: 
1.46      www      2480:     if (&gettype($asheet) eq 'classcalc') {
                   2481:         $r->print("Loading previously calculated student sheets ...<br>\n");
                   2482:         $r->rflush();
                   2483:         &cachedcsheets();
                   2484:     } elsif (&gettype($asheet) eq 'studentcalc') {
                   2485:         $r->print("Loading previously calculated assessment sheets ...<br>\n");
                   2486:         $r->rflush();
                   2487:         &cachedssheets(&getuname($asheet),&getudom($asheet),
                   2488:                        &getuhome($asheet));
                   2489:     }
1.30      www      2490: 
                   2491: # ----------------------------------------------------- Update sheet, load rows
1.14      www      2492: 
1.44      www      2493:     $r->print("Loaded sheet(s), updating rows ...<br>\n");
1.36      www      2494:     $r->rflush();
                   2495: 
1.29      www      2496:     &updatesheet($asheet);
1.36      www      2497: 
                   2498:     $r->print("Updated rows, loading row data ...<br>\n");
                   2499:     $r->rflush();
                   2500: 
1.37      www      2501:     &loadrows($asheet,$r);
1.14      www      2502: 
1.36      www      2503:     $r->print("Loaded row data, calculating sheet ...<br>\n");
                   2504:     $r->rflush();
1.14      www      2505: 
1.29      www      2506:     my $calcoutput=&calcsheet($asheet);
                   2507:     $r->print('<h3><font color=red>'.$calcoutput.'</h3></font>');
1.56      www      2508: 
                   2509: # ---------------------------------------------------- See if something to save
                   2510: 
                   2511:     if (&Apache::lonnet::allowed('opa',$ENV{'request.course.id'})) {
                   2512:         my $fname='';
                   2513: 	if ($ENV{'form.saveas'} && ($fname=$ENV{'form.newfn'})) {
                   2514:             $fname=~s/\W/\_/g;
                   2515:             if ($fname eq 'default') { $fname='course_default'; }
                   2516:             $fname.='_'.&gettype($asheet);
                   2517:             &setfilename($asheet,$fname);
                   2518:             $ENV{'form.ufn'}=$fname;
                   2519: 	    $r->print('<p>Saving spreadsheet: '.
                   2520:                          &writesheet($asheet,$ENV{'form.makedefufn'}).'<p>');
                   2521: 	}
                   2522:     }
                   2523: 
                   2524: # ------------------------------------------------ Write the modified worksheet
                   2525: 
                   2526:    $r->print('<b>Current sheet:</b> '.&getfilename($asheet).'<p>');
                   2527: 
                   2528:    &tmpwrite($asheet);
1.61      www      2529: 
1.62      www      2530:     if (&gettype($asheet) eq 'studentcalc') {
                   2531: 	$r->print('<br>Show rows with empty A column: ');
                   2532:     } else {
                   2533:         $r->print('<br>Show empty rows: ');
                   2534:     } 
1.77      www      2535: 
                   2536:     $r->print(&hiddenfield('userselhidden','true').
                   2537:              '<input type=checkbox name=showall onClick="submit()"');
                   2538: 
                   2539:     if ($ENV{'form.showall'}) { 
                   2540:        $r->print(' checked'); 
                   2541:     } else {
                   2542: 	unless ($ENV{'form.userselhidden'}) {
                   2543:            unless 
                   2544: 	($ENV{'course.'.$ENV{'request.course.id'}.'.hideemptyrows'} eq 'yes') {
                   2545:           $r->print(' checked');
                   2546:           $ENV{'form.showall'}=1;
                   2547:            }
                   2548:        }
                   2549:     }
1.61      www      2550:     $r->print('>');
1.69      www      2551:     if (&gettype($asheet) eq 'classcalc') {
                   2552:        $r->print(
                   2553:    ' Output CSV format: <input type=checkbox name=showcsv onClick="submit()"');
                   2554:        if ($ENV{'form.showcsv'}) { $r->print(' checked'); }
                   2555:        $r->print('>');
                   2556:     }
1.56      www      2557: # ------------------------------------------------------------- Print out sheet
1.8       www      2558: 
1.29      www      2559:     &outsheet($r,$asheet);
1.10      www      2560:     $r->print('</form></body></html>');
1.29      www      2561: 
1.14      www      2562: # ------------------------------------------------------------------------ Done
1.7       www      2563:   } else {
                   2564: # ----------------------------- Not in a course, or not allowed to modify parms
                   2565:       $ENV{'user.error.msg'}=
                   2566:         $r->uri.":opa:0:0:Cannot modify spreadsheet";
                   2567:       return HTTP_NOT_ACCEPTABLE; 
                   2568:   }
1.3       www      2569:     return OK;
1.28      www      2570: 
1.1       www      2571: }
                   2572: 
                   2573: 1;
                   2574: __END__
1.77      www      2575: 
                   2576: 
                   2577: 
                   2578: 

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>