Annotation of loncom/imspackages/imsprocessor.pm, revision 1.38

1.10      raeburn     1: # Copyright Michigan State University Board of Trustees
                      2: #
                      3: # This file is part of the LearningOnline Network with CAPA (LON-CAPA).
                      4: #
                      5: # LON-CAPA is free software; you can redistribute it and/or modify
                      6: # it under the terms of the GNU General Public License as published by
                      7: # the Free Software Foundation; either version 2 of the License, or
                      8: # (at your option) any later version.
                      9: #
                     10: # LON-CAPA is distributed in the hope that it will be useful,
                     11: # but WITHOUT ANY WARRANTY; without even the implied warranty of
                     12: # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
                     13: # GNU General Public License for more details.
                     14: #
                     15: # You should have received a copy of the GNU General Public License
                     16: # along with LON-CAPA; if not, write to the Free Software
                     17: # Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
                     18: #
                     19: # /home/httpd/html/adm/gpl.txt
                     20: #
                     21: # http://www.lon-capa.org/
                     22: #
                     23: 
1.1       raeburn    24: package Apache::imsprocessor;
                     25: 
                     26: use Apache::lonnet;
1.21      www        27: use Apache::loncleanup;
1.20      raeburn    28: use LWP::UserAgent;
                     29: use HTTP::Request::Common;
1.1       raeburn    30: use LONCAPA::Configuration;
1.2       raeburn    31: use strict;
1.3       raeburn    32: 
                     33: sub ims_config {
                     34:     my ($areas,$cmsmap,$areaname) = @_;
1.35      raeburn    35:     @{$areas} = ("doc","extlink","announce","staff","board","quiz","survey","pool","users","question");
1.3       raeburn    36:     %{$$cmsmap{bb5}} = (
                     37:                 announce => 'resource/x-bb-announcement',
                     38:                 board => 'resource/x-bb-discussionboard',
                     39:                 doc => 'resource/x-bb-document',
                     40:                 extlink => 'resource/x-bb-externallink',
                     41:                 pool => 'assessment/x-bb-pool',
                     42:                 quiz => 'assessment/x-bb-quiz',
                     43:                 staff => 'resource/x-bb-staffinfo',
                     44:                 survey => 'assessment/x-bb-survey',
                     45:                 users => 'course/x-bb-user',
                     46:                 );
1.30      raeburn    47:     %{$$cmsmap{bb6}} = (
                     48:                 announce => 'resource/x-bb-announcement',
                     49:                 board => 'resource/x-bb-discussionboard',
                     50:                 doc => 'resource/x-bb-document',
                     51:                 extlink => 'resource/x-bb-externallink',
                     52:                 pool => 'assessment/x-bb-qti-pool',
                     53:                 quiz => 'assessment/x-bb-qti-test',
                     54:                 staff => 'resource/x-bb-staffinfo',
                     55:                 survey => 'assessment/x-bb-survey',
                     56:                 users => 'course/x-bb-user',
                     57:                 );
1.10      raeburn    58:     $$cmsmap{bb6}{conference} = 'resource/x-bb-conference';
1.3       raeburn    59:     %{$$cmsmap{angel}} =  (
                     60:                 board => 'BOARD',
                     61:                 extlink => 'LINK',
                     62:                 msg => 'MESSAGE',
                     63:                 quiz => 'QUIZ',
                     64:                 survey => 'FORM',
                     65:                 );
                     66:     @{$$cmsmap{angel}{doc}} = ('FILE','PAGE');
1.34      raeburn    67:     %{$$cmsmap{webctce4}} = (
1.15      raeburn    68:                 quiz => 'webctquiz',
                     69:                 survey => 'webctsurvey',
                     70:                 doc => 'webcontent'
                     71:                 );
1.35      raeburn    72:     %{$$cmsmap{webctvista4}} = (
                     73:                 question => 'webct.question',
                     74:                 quiz => 'webct.assessment',
                     75:                 survey => 'webctsurvey',
                     76:                 doc => 'webcontent'
                     77:                 );
1.3       raeburn    78:     %{$areaname} = (
                     79:                 announce => 'Announcements',
                     80:                 board => 'Discussion Boards',
                     81:                 doc => 'Documents, pages, and folders',
                     82:                 extlink => 'Links to external sites',
                     83:                 pool => 'Question pools',
                     84:                 quiz => 'Quizzes',
1.35      raeburn    85:                 question => 'Assessment Questions',
1.3       raeburn    86:                 staff => 'Staff information',
                     87:                 survey => 'Surveys',
                     88:                 users => 'Enrollment',
                     89:                 );
                     90: }
1.1       raeburn    91:  
                     92: sub create_tempdir {
1.3       raeburn    93:     my ($context,$pathinfo,$timenow) = @_;   
1.1       raeburn    94:     my $configvars = &LONCAPA::Configuration::read_conf('loncapa.conf');
                     95:     my $tempdir;
1.3       raeburn    96:     if ($context eq 'DOCS') {
1.1       raeburn    97:         $tempdir =  $$configvars{'lonDaemons'}.'/tmp/'.$pathinfo;
                     98:         if (!-e "$tempdir") {
1.2       raeburn    99:             mkdir("$tempdir",0770);
                    100:         } 
                    101:         $tempdir .= '/'.$timenow;
                    102:         if (!-e "$tempdir") {
                    103:             mkdir("$tempdir",0770);
                    104:         } 
1.3       raeburn   105:     } elsif ($context eq "CSTR") {
1.1       raeburn   106:         if (!-e "$pathinfo/temp") {
1.2       raeburn   107:             mkdir("$pathinfo/temp",0770);
1.1       raeburn   108:         }
                    109:         $tempdir =  $pathinfo.'/temp';
                    110:     }
                    111:     return $tempdir;
                    112: }
                    113: 
1.3       raeburn   114: sub uploadzip {
                    115:     my ($context,$tempdir,$source) = @_;
                    116:     my $fname;
                    117:     if ($context eq 'DOCS') {
1.19      albertel  118:         $fname=$env{'form.uploadname.filename'};
1.3       raeburn   119: # Replace Windows backslashes by forward slashes
                    120:         $fname=~s/\\/\//g;
                    121: # Get rid of everything but the actual filename
                    122:         $fname=~s/^.*\/([^\/]+)$/$1/;
                    123: # Replace spaces by underscores
                    124:         $fname=~s/\s+/\_/g;
                    125: # Replace all other weird characters by nothing
                    126:         $fname=~s/[^\w\.\-]//g;
                    127: # See if there is anything left
                    128:         unless ($fname) { return 'error: no uploaded file'; }
                    129: # Save the file
1.19      albertel  130:         chomp($env{'form.uploadname'});
1.3       raeburn   131:         open(my $fh,'>'.$tempdir.'/'.$fname);
1.19      albertel  132:         print $fh $env{'form.uploadname'};
1.3       raeburn   133:         close($fh);
                    134:     } elsif ($context eq 'CSTR') {
                    135:         if ($source =~ m/\/([^\/]+)$/) {
                    136:             $fname = $1;
                    137:             my $destination = $tempdir.'/'.$fname;
                    138:             rename($source,$destination);
                    139:         }
                    140:     }
                    141:     return $fname;   
                    142: }
                    143: 
1.1       raeburn   144: sub expand_zip {
                    145:     my ($tempdir,$filename) = @_;
                    146:     my $zipfile = "$tempdir/$filename";
1.10      raeburn   147:     if (!-e "$zipfile") {
                    148:         return 'no zip';
                    149:     }
1.1       raeburn   150:     if ($filename =~ m|\.zip$|i) {
                    151:         open(OUTPUT, "unzip -o $zipfile -d $tempdir  2> /dev/null |");
                    152:         close(OUTPUT);
                    153:     } else {
                    154:         return 'nozip';
                    155:     }
                    156:     if ($filename =~ m|\.zip$|i) {
                    157:         unlink($zipfile);
                    158:     }
                    159:     return 'ok';
                    160: }
                    161: 
                    162: sub process_manifest {
1.14      raeburn   163:     my ($cms,$tempdir,$resources,$items,$hrefs,$resinfo,$phase,$includedres,$includeditems) = @_;
1.1       raeburn   164:     my %toc = (
1.10      raeburn   165:               bb6 => 'organization',
1.1       raeburn   166:               bb5 => 'tableofcontents',
                    167:               angel => 'organization',
1.34      raeburn   168:               webctce4 => 'organization',
1.35      raeburn   169:               webctvista4 => 'organization'
1.1       raeburn   170:               );
                    171:     my @seq = "Top";
1.2       raeburn   172:     %{$$items{'Top'}} = (
                    173:                       contentscount => 0,
                    174:                       resnum => 'toplevel',
                    175:                       );
1.3       raeburn   176:     %{$$resources{'toplevel'}} = (
                    177:                                   revitm => 'Top'
                    178:                                  );
1.2       raeburn   179:  
                    180:     if ($cms eq 'angel') {
                    181:         $$resources{'toplevel'}{type} = "FOLDER";
1.10      raeburn   182:     } elsif ($cms eq 'bb5' || $cms eq 'bb6') {
1.2       raeburn   183:         $$resources{'toplevel'}{type} = 'resource/x-bb-document';
1.14      raeburn   184:     } else {
                    185:         $$resources{'toplevel'}{type} = 'webcontent';
1.2       raeburn   186:     }
                    187: 
1.1       raeburn   188:     unless (-e "$tempdir/imsmanifest.xml") {
                    189:         return 'nomanifest';
1.17      raeburn   190:     }
1.1       raeburn   191: 
                    192:     my $xmlfile = $tempdir.'/imsmanifest.xml';
1.35      raeburn   193:     &parse_manifest($cms,$phase,$tempdir,$xmlfile,\%toc,$includedres,
                    194:                     $includeditems,$items,$resources,$resinfo,$hrefs,\@seq);
                    195:     return 'ok' ;
                    196: }
                    197: 
                    198: sub parse_manifest {
                    199:     my ($cms,$phase,$tempdir,$xmlfile,$toc,$includedres,$includeditems,$items,
                    200:         $resources,$resinfo,$hrefs,$seq) = @_;
                    201:     my @state = ();
                    202:     my $itm = '';
                    203:     my %contents = ();
                    204:     my $identifier = '';
                    205:     my @allidentifiers = ();
                    206:     my $lastitem;
1.1       raeburn   207:     my $p = HTML::Parser->new
                    208:     (
                    209:        xml_mode => 1,
                    210:        start_h =>
                    211:            [sub {
                    212:                 my ($tagname, $attr) = @_;
                    213:                 push @state, $tagname;
1.17      raeburn   214:                 my $start = @state - 3;
1.35      raeburn   215:                 if ( ($state[0] eq "manifest") && ($state[1] eq "organizations") && ($state[2] eq $$toc{$cms}) ) {
1.17      raeburn   216:                     if ($state[-1] eq 'item') {
1.14      raeburn   217:                         $itm = $attr->{identifier};
1.16      raeburn   218:                         if ($$includeditems{$itm} || $phase ne 'build') {
1.14      raeburn   219:                             %{$$items{$itm}} = ();
                    220:                             $$items{$itm}{contentscount} = 0;
1.16      raeburn   221:                             @{$$items{$itm}{contents}} = ();
1.35      raeburn   222:                             if ($cms eq 'bb5' || $cms eq 'bb6' || $cms eq 'webctce4' || $cms eq 'webctvista4') {
1.14      raeburn   223:                                 $$items{$itm}{resnum} = $attr->{identifierref};
                    224:                                 if ($cms eq 'bb5') {
                    225:                                     $$items{$itm}{title} = $attr->{title};
                    226:                                 }
                    227:                             } elsif ($cms eq 'angel') {
                    228:                                 if ($attr->{identifierref} =~ m/^res(.+)$/) {
                    229:                                     $$items{$itm}{resnum} = $1;
                    230:                                 }
1.10      raeburn   231:                             }
1.14      raeburn   232:                             unless (defined(%{$$resources{$$items{$itm}{resnum}}}) ) {
                    233:                                 %{$$resources{$$items{$itm}{resnum}}} = ();
1.1       raeburn   234:                             }
1.14      raeburn   235:                             $$resources{$$items{$itm}{resnum}}{revitm} = $itm;
1.35      raeburn   236:                             if ($start > @{$seq}) {
1.14      raeburn   237:                                 unless ($lastitem eq '') {
1.35      raeburn   238:                                     push @{$seq}, $lastitem;
                    239:                                     unless ( defined($contents{$$seq[-1]}) ) {
                    240:                                         @{$contents{$$seq[-1]}} = ();
1.14      raeburn   241:                                     }
1.35      raeburn   242:                                     push @{$contents{$$seq[-1]}},$itm;
                    243:                                     $$items{$itm}{parentseq} = $$seq[-1];
1.14      raeburn   244:                                 }
1.35      raeburn   245:                             } elsif ($start < @{$seq}) {
                    246:                                 my $diff = @{$seq} - $start;
1.14      raeburn   247:                                 while ($diff > 0) {
1.35      raeburn   248:                                     pop @{$seq};
1.14      raeburn   249:                                     $diff --;
                    250:                                 }
1.35      raeburn   251:                                 if (@{$seq}) {
                    252:                                     push @{$contents{$$seq[-1]}}, $itm;
1.1       raeburn   253:                                 }
1.14      raeburn   254:                             } else {
1.35      raeburn   255:                                 push @{$contents{$$seq[-1]}}, $itm;
1.1       raeburn   256:                             }
1.14      raeburn   257:                             my $path;
1.35      raeburn   258:                             if (@{$seq} > 1) {
                    259:                                 $path = join(',',@{$seq});
                    260:                             } elsif (@{$seq} > 0) {
                    261:                                 $path = $$seq[0];
1.1       raeburn   262:                             }
1.14      raeburn   263:                             $$items{$itm}{filepath} = $path;
                    264:                             if ($cms eq 'bb5' || $cms eq 'bb6') {
                    265:                                 if ($$items{$itm}{filepath} eq 'Top') {
                    266:                                     $$items{$itm}{resnum} = $itm;
                    267:                                     $$resources{$$items{$itm}{resnum}}{type} = 'resource/x-bb-document';
                    268:                                     $$resources{$$items{$itm}{resnum}}{revitm} = $itm;
                    269:                                     $$resinfo{$$items{$itm}{resnum}}{'isfolder'} = 'true';
                    270:                                 }
1.2       raeburn   271:                             }
1.35      raeburn   272:                             $$items{$$seq[-1]}{contentscount} ++;
                    273:                             $$resources{$$items{$itm}{resnum}}{seqref} = $seq;
1.14      raeburn   274:                             $lastitem = $itm;
1.2       raeburn   275:                         }
1.1       raeburn   276:                     }
1.34      raeburn   277:                     if ($cms eq 'webctce4') {
1.17      raeburn   278:                         if (($state[-1] eq "webct:properties") && (@state > 4)) {
1.16      raeburn   279:                             $$items{$itm}{properties} = $attr->{identifierref};
                    280:                         }
                    281:                     }
1.1       raeburn   282:                 } elsif ("@state" eq "manifest resources resource" ) {
                    283:                     $identifier = $attr->{identifier};
1.35      raeburn   284:                     push(@allidentifiers,$identifier);
1.14      raeburn   285:                     if ($$includedres{$identifier} || $phase ne 'build') { 
1.16      raeburn   286:                         if ($cms eq 'bb5' || $cms eq 'bb6') {
1.14      raeburn   287:                             $$resources{$identifier}{file} = $attr->{file};
                    288:                             $$resources{$identifier}{type} = $attr->{type};
1.34      raeburn   289:                         } elsif ($cms eq 'webctce4') {
1.16      raeburn   290:                             $$resources{$identifier}{type} = $attr->{type};
                    291:                             $$resources{$identifier}{file} = $attr->{href};
1.35      raeburn   292:                         } elsif ($cms eq 'webctvista4') {
                    293:                             $$resources{$identifier}{type} = $attr->{type};
                    294:                             $$resources{$identifier}{'webct:coType'} = $attr->{'webct:coType'};
1.14      raeburn   295:                         } elsif ($cms eq 'angel') {
                    296:                             $identifier = substr($identifier,3);
                    297:                             if ($attr->{href} =~ m-^_assoc/$identifier/(.+)$-) {
                    298:                                 $$resources{$identifier}{file} = $1;
                    299:                             }
1.11      raeburn   300:                         }
1.14      raeburn   301:                         @{$$hrefs{$identifier}} = ();
1.1       raeburn   302:                     }
                    303:                 } elsif ("@state" eq "manifest resources resource file") {
1.14      raeburn   304:                     if ($$includedres{$identifier} || $phase ne 'build') {
1.35      raeburn   305:                         if ($cms eq 'webctvista4') {
                    306:                             $$resources{$identifier}{file} = $attr->{href};
                    307:                         }
                    308:                         if ($cms eq 'bb5' || $cms eq 'bb6' || 
                    309:                             $cms eq 'webctce4' || $cms eq 'webctvista4') {
1.14      raeburn   310:                             push @{$$hrefs{$identifier}},$attr->{href};
1.35      raeburn   311: 
                    312:                             if ($$resources{$identifier}{type} eq 
                    313:                                 'webct.manifest') {
                    314:                                 my $manifestfile = $tempdir.'/'.$attr->{href};
                    315:                                 my $currseqref = [];
                    316:                                 if ($itm) {
                    317:                                     $currseqref =   
                    318:                                     $$resources{$$items{$itm}{resnum}}{seqref};
                    319:                                 }
                    320:                                 &parse_manifest($cms,$phase,$tempdir,$manifestfile,
                    321:                                                 $toc,$includedres,$includeditems,
                    322:                                                 $items,$resources,$resinfo,
                    323:                                                 $hrefs,$currseqref);
                    324:                             }
1.14      raeburn   325:                         } elsif ($cms eq 'angel') {
                    326:                             if ($attr->{href} =~ m/^_assoc\\$identifier\\(.+)$/) {
                    327:                                 push @{$$hrefs{$identifier}},$1;
                    328:                             } elsif ($attr->{href} =~ m/^Icons\\icon(\w+)\.gif/) {
                    329:                                 $$resources{$identifier}{type} = $1;
                    330:                             }
1.35      raeburn   331:                         } 
                    332:                     }
                    333:                 } elsif ("@state" eq "manifest webct:ContentObject") {
                    334:                     foreach my $ident (@allidentifiers) {
                    335:                         if ($$resources{$ident}{type} eq 'ims_qtiasiv1p2') {
                    336:                             $$resources{$ident}{type} = $attr->{'webct:coType'};
1.11      raeburn   337:                         }
1.1       raeburn   338:                     }
                    339:                 }
                    340:            }, "tagname, attr"],
                    341:         text_h =>
                    342:             [sub {
                    343:                 my ($text) = @_;
1.15      raeburn   344:                 if ("@state" eq "manifest metadata lom general title langstring") {
                    345:                     $$items{'Top'}{title} = $text;
                    346:                 }
1.35      raeburn   347:                 if ($state[0] eq "manifest" && $state[1] eq "organizations" && $state[2] eq $$toc{$cms} && $state[-1] eq "title") {
1.14      raeburn   348:                     if ($$includeditems{$itm} || $phase ne 'build') {
1.35      raeburn   349:                         if ($cms eq 'angel' || $cms eq 'bb6' || $cms eq 'webctvista4') {
1.14      raeburn   350:                             $$items{$itm}{title} = $text;
                    351:                         }
1.34      raeburn   352:                         if ($cms eq 'webctce4') {
1.15      raeburn   353:                             $$items{$itm}{title} = $text;
                    354:                             $$items{$itm}{title} =~ s/(<[^>]*>)//g;
                    355:                         }
1.4       raeburn   356:                     }
                    357:                 }
1.1       raeburn   358:               }, "dtext"],
                    359:         end_h =>
                    360:               [sub {
                    361:                   my ($tagname) = @_;
                    362:                   pop @state;
                    363:                }, "tagname"],
                    364:     );
                    365:     $p->parse_file($xmlfile);
                    366:     $p->eof;
                    367:     foreach my $itm (keys %contents) {
                    368:         @{$$items{$itm}{contents}} = @{$contents{$itm}};
                    369:     }
                    370: }
                    371: 
1.14      raeburn   372: sub get_imports {
                    373:     my ($includeditems,$items,$resources,$importareas,$itm) = @_;
                    374:     if (exists($$items{$itm}{resnum})) {
                    375:         if ($$importareas{$$resources{$$items{$itm}{resnum}}{type}}) {
                    376:             unless (exists($$includeditems{$itm})) {
                    377:                 $$includeditems{$itm} = 1;
                    378:             }
                    379:         }
                    380:     }
                    381:     if ($$items{$itm}{contentscount} > 0) {
                    382:         foreach my $child (@{$$items{$itm}{contents}}) {
                    383:             &get_imports($includeditems,$items,$resources,$importareas,$child);
                    384:         }
                    385:     }
                    386: }
                    387: 
                    388: sub get_parents {
                    389:     my ($includeditems,$items,$itm) = @_;
                    390:     my @pathitems = ();
                    391:     if ($$items{$itm}{filepath} =~ m/,/) {
                    392:        @pathitems = split/,/,$$items{$itm}{filepath};
                    393:     } else {
                    394:        $pathitems[0] = $$items{$itm}{filepath};
                    395:     }
                    396:     foreach (@pathitems) {
                    397:         $$includeditems{$_} = 1;
                    398:     }
                    399: }
                    400: 
1.1       raeburn   401: sub target_resources {
1.2       raeburn   402:     my ($resources,$oktypes,$targets) = @_;
1.1       raeburn   403:     foreach my $key (keys %{$resources}) {
                    404:         if ( defined($$oktypes{$$resources{$key}{type}}) ) {
                    405:             push @{$targets}, $key;
                    406:         }
                    407:     }
                    408:     return;
                    409: }
                    410: 
                    411: sub copy_resources {
1.35      raeburn   412:     my ($context,$cms,$hrefs,$tempdir,$targets,$url,$crs,$cdom,$destdir,$timenow,$assessmentfiles) = @_;
1.1       raeburn   413:     if ($context eq 'DOCS') {
                    414:         foreach my $key (sort keys %{$hrefs}) {
                    415:             if (grep/^$key$/,@{$targets}) {
1.2       raeburn   416:                 %{$$url{$key}} = ();
1.1       raeburn   417:                 foreach my $file (@{$$hrefs{$key}}) {
1.2       raeburn   418:                     my $source = $tempdir.'/'.$key.'/'.$file;
1.35      raeburn   419:                     if ($cms eq 'webctce4' || $cms eq 'webctvista4') {
1.15      raeburn   420:                         $source = $tempdir.'/'.$file;
                    421:                     }
1.2       raeburn   422:                     my $filename = '';
1.3       raeburn   423:                     my $fpath = $timenow.'/resfiles/'.$key.'/';
                    424:                     if ($cms eq 'angel') {
                    425:                         if ($file eq 'pg'.$key.'.htm') {
                    426:                             next;
1.1       raeburn   427:                         }
                    428:                     }
1.3       raeburn   429:                     $file =~ s-\\-/-g;
1.15      raeburn   430:                     my $copyfile = $file;
1.35      raeburn   431:                     if ($cms eq 'webctce4' || $cms eq 'webctvista4') {
1.16      raeburn   432:                         if ($file =~ m-/my_files/(.+)$-) {
1.15      raeburn   433:                             $copyfile = $1;
                    434:                         }
                    435:                     }
1.35      raeburn   436:                     unless ((($cms eq 'webctce4') && ($copyfile =~ m/questionDB\.xml$/ || $copyfile =~ m/quiz_QIZ_\d+\.xml$/ || $copyfile =~ m/properties_QIZ_\d+\.xml$/)) || (($cms eq 'webctvista4') && (grep/^$key$/,@{$assessmentfiles}) && $file =~ /\.xml$/))    {
1.15      raeburn   437:                         $copyfile = $fpath.$copyfile;
                    438:                         my $fileresult;
                    439:                         if (-e $source) {
1.31      raeburn   440:                             $fileresult = &Apache::lonnet::process_coursefile('copy',$crs,$cdom,$copyfile,$source);
1.15      raeburn   441:                         }
                    442:                     }
1.1       raeburn   443:                 }
                    444:             }
                    445:         }
                    446:     } elsif ($context eq 'CSTR') {
                    447:         if (!-e "$destdir/resfiles") {
1.2       raeburn   448:             mkdir("$destdir/resfiles",0770);
1.1       raeburn   449:         }
1.2       raeburn   450:         foreach my $key (sort keys %{$hrefs}) {
1.14      raeburn   451:             if (grep/^$key$/,@{$targets}) {
                    452:                 foreach my $file (@{$$hrefs{$key}}) {
                    453:                     $file =~ s-\\-/-g;
1.15      raeburn   454:                     if ( ($cms eq 'angel' && $file ne 'pg'.$key.'.htm') || ($cms eq 'bb5') || ($cms eq 'bb6')) {
1.14      raeburn   455:                         if (!-e "$destdir/resfiles/$key") {
                    456:                             mkdir("$destdir/resfiles/$key",0770);
                    457:                         }
                    458:                         my $filepath = $file;
                    459:                         my $front = '';
                    460:                         while ($filepath =~ m-(\w+)/(.+)-) {
                    461:                             $front .= $1.'/';
                    462:                             $filepath = $2;
                    463:                             my $fulldir = "$destdir/resfiles/$key/$front";
                    464:                             chop($fulldir);
                    465:                             if (!-e "$fulldir") {
                    466:                                 mkdir("$fulldir",0770);
                    467:                             }
                    468:                         }
                    469:                         if ($cms eq 'angel') {
                    470:                             rename("$tempdir/_assoc/$key/$file","$destdir/resfiles/$key/$file");
                    471:                         } elsif ($cms eq 'bb5' || $cms eq 'bb6') {
                    472:                             rename("$tempdir/$key/$file","$destdir/resfiles/$key/$file");
1.2       raeburn   473:                         }
1.34      raeburn   474:                     } elsif ($cms eq 'webctce4') {
1.16      raeburn   475:                         if ($file =~ m-/my_files/(.+)$-) {
1.15      raeburn   476:                             my $copyfile = $1;
1.16      raeburn   477:                             if ($copyfile =~ m-^[^/]+/[^/]+-) {
                    478:                                 my @dirs = split/\//,$copyfile;
                    479:                                 my $path = "$destdir/resfiles";
                    480:                                 while (@dirs > 1) {
                    481:                                     $path .= '/'.$dirs[0];
                    482:                                     if (!-e "$path") {
                    483:                                         mkdir("$path",0755);
                    484:                                     }
                    485:                                     shift @dirs;
                    486:                                 }
                    487:                             }
                    488:                             if (-e "$tempdir/$file") {
                    489:                                 rename("$tempdir/$file","$destdir/resfiles/$copyfile");
1.15      raeburn   490:                             }
1.17      raeburn   491:                         } elsif ($file !~ m-/data/(.+)$-) {
                    492:                             &Apache::lonnet::logthis("IMS import error: WebCT4 - file $file is in unexpected location");
1.15      raeburn   493:                         }
1.2       raeburn   494:                     }
                    495:                 }
                    496:             }
                    497:         }
                    498:     }
                    499: }
                    500: 
                    501: sub process_resinfo {
1.15      raeburn   502:     my ($cms,$context,$docroot,$destdir,$items,$resources,$targets,$boards,$announcements,$quizzes,$surveys,$pools,$groups,$messages,$timestamp,$boardnum,$resinfo,$udom,$uname,$cdom,$crs,$db_handling,$user_handling,$total,$dirname,$seqstem,$resrcfiles,$packages,$hrefs,$pagesfiles,$sequencesfiles,$randompicks) = @_;
1.2       raeburn   503:     my $board_id = time;
                    504:     my $board_count = 0;
1.15      raeburn   505:     my $dbparse = 0;
1.2       raeburn   506:     my $announce_handling = 'include';
                    507:     my $longcrs = '';
1.35      raeburn   508:     my %allassessments = ();
                    509:     my %allquestions = ();
1.17      raeburn   510:     my %qzdbsettings = ();
                    511:     my %catinfo = ();
1.2       raeburn   512:     if ($crs =~ m/^(\d)(\d)(\d)/) {
                    513:         $longcrs = $1.'/'.$2.'/'.$3.'/'.$crs;
                    514:     }
1.14      raeburn   515:     if ($context eq 'CSTR') {
                    516:         if (!-e "$destdir/resfiles") {
                    517:             mkdir("$destdir/resfiles",0770);
                    518:         }
                    519:     }
1.2       raeburn   520:     if ($cms eq 'angel') {
                    521:         my $currboard = '';
                    522:         foreach my $key (sort keys %{$resources}) {
1.14      raeburn   523:           if (grep/^$key$/,@{$targets}) {
1.2       raeburn   524:             if ($$resources{$key}{type} eq "BOARD") {
                    525:                 push @{$boards}, $key;
                    526:                 $$boardnum{$$resources{$key}{revitm}} = $board_count;
                    527:                 $currboard = $key;
                    528:                 @{$$messages{$key}} = ();
                    529:                 $$timestamp[$board_count] = $board_id;
                    530:                 $board_id ++;
                    531:                 $board_count ++;
                    532:             } elsif ($$resources{$key}{type} eq "MESSAGE") {
                    533:                 push @{$$messages{$currboard}}, $key;
                    534:             } elsif ($$resources{$key}{type} eq "PAGE" || $$resources{$key}{type} eq "LINK") {
                    535:                 %{$$resinfo{$key}} = ();
                    536:                 &angel_content($key,$docroot,$destdir,\%{$$resinfo{$key}},$udom,$uname,$$resources{$key}{type},$$items{$$resources{$key}{revitm}}{title},$resrcfiles);
                    537:             } elsif ($$resources{$key}{type} eq "QUIZ") {
                    538:                 %{$$resinfo{$key}} = ();
1.3       raeburn   539:                 push @{$quizzes}, $key;
1.2       raeburn   540: #               &angel_assessment($key,$docroot,$dirname,$destdir,\%{$$resinfo{$key}},$resrcfiles);
                    541:             } elsif ($$resources{$key}{type} eq "FORM") {
                    542:                 %{$$resinfo{$key}} = ();
1.3       raeburn   543:                 push @{$surveys}, $key;
1.2       raeburn   544: #                &angel_assessment($key,$docroot,$dirname,$destdir,\%{$$resinfo{$key}},$resrcfiles);
                    545:             } elsif ($$resources{$key}{type} eq "DROPBOX") {
                    546:                 %{$$resinfo{$key}} = ();
                    547:             }
1.14      raeburn   548:           }
1.2       raeburn   549:         }
1.10      raeburn   550:     } elsif ($cms eq 'bb5' || $cms eq 'bb6') {
1.2       raeburn   551:         foreach my $key (sort keys %{$resources}) {
1.14      raeburn   552:           if (grep/^$key$/,@{$targets}) {
1.2       raeburn   553:             if ($$resources{$key}{type} eq "resource/x-bb-document") {
                    554:                 unless ($$items{$$resources{$key}{revitm}}{filepath} eq 'Top') {
1.3       raeburn   555:                     %{$$resinfo{$key}} = ();
1.10      raeburn   556:                     &process_content($cms,$key,$context,$docroot,$destdir,\%{$$resinfo{$key}},$udom,$uname,$resrcfiles,$packages,$hrefs);
1.2       raeburn   557:                 }
                    558:             } elsif ($$resources{$key}{type} eq "resource/x-bb-staffinfo") {
                    559:                 %{$$resinfo{$key}} = ();
1.33      raeburn   560:                 &process_staff($key,$docroot,$destdir,\%{$$resinfo{$key}},$resrcfiles);
1.2       raeburn   561:             } elsif ($$resources{$key}{type} eq "resource/x-bb-externallink") {
                    562:                 %{$$resinfo{$key}} = ();
1.33      raeburn   563:                 &process_link($key,$docroot,$destdir,\%{$$resinfo{$key}},$resrcfiles);
1.2       raeburn   564:             } elsif ($$resources{$key}{type} eq "resource/x-bb-discussionboard") {
                    565:                 %{$$resinfo{$key}} = ();
                    566:                 unless ($db_handling eq 'ignore') {
                    567:                     push @{$boards}, $key;
                    568:                     $$timestamp[$board_count] = $board_id;
                    569:                     &process_db($key,$docroot,$destdir,$board_id,$crs,$cdom,$db_handling,$uname,\%{$$resinfo{$key}},$longcrs);
                    570:                     $board_id ++;
                    571:                     $board_count ++;
                    572:                 }
1.30      raeburn   573:             } elsif ($$resources{$key}{type} =~/assessment\/x\-bb\-(qti\-)?pool/) {
1.2       raeburn   574:                 %{$$resinfo{$key}} = ();
1.35      raeburn   575:                 &process_assessment($cms,$context,$key,$docroot,'pool',$dirname,$destdir,\%{$$resinfo{$key}},$total,$udom,$uname,$pagesfiles,$sequencesfiles,$randompicks,\$dbparse,$resources,$items,\%catinfo,\%qzdbsettings,$hrefs,\%allquestions);
1.14      raeburn   576:                 push @{$pools}, $key;
1.30      raeburn   577:             } elsif ($$resources{$key}{type} =~ /assessment\/x\-bb\-(qti\-)?quiz/) {
1.2       raeburn   578:                 %{$$resinfo{$key}} = ();
1.35      raeburn   579:                 &process_assessment($cms,$context,$key,$docroot,'quiz',$dirname,$destdir,\%{$$resinfo{$key}},$total,$udom,$uname,$pagesfiles,$sequencesfiles,$randompicks,\$dbparse,$resources,$items,\%catinfo,\%qzdbsettings,$hrefs,\%allquestions);
1.2       raeburn   580:                 push @{$quizzes}, $key;
1.30      raeburn   581:             } elsif ($$resources{$key}{type} =~ /assessment\/x\-bb\-(qti\-)?survey/) {
1.2       raeburn   582:                 %{$$resinfo{$key}} = ();
1.35      raeburn   583:                 &process_assessment($cms,$context,$key,$docroot,'survey',$dirname,$destdir,\%{$$resinfo{$key}},$total,$udom,$uname,$pagesfiles,$sequencesfiles,$randompicks,\$dbparse,$resources,$items,\%catinfo,\%qzdbsettings,$hrefs,\%allquestions);
1.2       raeburn   584:                 push @{$surveys}, $key;
                    585:             } elsif ($$resources{$key}{type} eq "assessment/x-bb-group") {
                    586:                 %{$$resinfo{$key}} = ();
                    587:                 push @{$groups}, $key;
                    588:                 &process_group($key,$docroot,$destdir,\%{$$resinfo{$key}});
                    589:             } elsif ($$resources{$key}{type} eq "resource/x-bb-user") {   
                    590:                 %{$$resinfo{$key}} = ();
                    591:                 unless ($user_handling eq 'ignore') {
                    592:                     &process_user($key,$docroot,$destdir,\%{$$resinfo{$key}},$crs,$cdom,$user_handling);
                    593:                 }
                    594:             } elsif ($$resources{$key}{type} eq "resource/x-bb-announcement") {
                    595:                 unless ($announce_handling eq 'ignore') {
                    596:                     push @{$announcements}, $key;
                    597:                     %{$$resinfo{$key}} = ();
1.3       raeburn   598:                     &process_announce($key,$docroot,$destdir,\%{$$resinfo{$key}},$resinfo,$seqstem,$resrcfiles);
1.2       raeburn   599:                 }
                    600:             }
1.14      raeburn   601:           }
1.2       raeburn   602:         }
1.3       raeburn   603:         if (@{$announcements}) {
                    604:             $$items{'Top'}{'contentscount'} ++;
                    605:         }
                    606:         if (@{$boards}) {
                    607:             $$items{'Top'}{'contentscount'} ++;
                    608:         }
                    609:         if (@{$quizzes}) {
                    610:             $$items{'Top'}{'contentscount'} ++;
                    611:         }
                    612:         if (@{$surveys}) {
                    613:             $$items{'Top'}{'contentscount'} ++;
                    614:         }
1.14      raeburn   615:         if (@{$pools}) {
                    616:             $$items{'Top'}{'contentscount'} ++;
                    617:         }
1.34      raeburn   618:     } elsif ($cms eq 'webctce4') {
1.15      raeburn   619:         foreach my $key (sort keys %{$resources}) {
                    620:             if (grep/^$key$/,@{$targets}) {
                    621:                 if ($$resources{$key}{type} eq "webcontent") {
                    622:                     %{$$resinfo{$key}} = ();
1.16      raeburn   623:                     &webct4_content($key,$docroot,$destdir,\%{$$resinfo{$key}},$udom,$uname,$$resources{$key}{type},$$items{$$resources{$key}{revitm}}{title},$resrcfiles);
1.15      raeburn   624:                 } elsif ($$resources{$key}{type} eq "webctquiz") {
1.35      raeburn   625:                     &process_assessment($cms,$context,$key,$docroot,'quiz',$dirname,$destdir,\%{$$resinfo{$key}},$total,$udom,$uname,$pagesfiles,$sequencesfiles,$randompicks,\$dbparse,$resources,$items,\%catinfo,\%qzdbsettings,$hrefs,\%allquestions);
                    626:                 }
                    627:             }
                    628:         }
                    629:     } elsif ($cms eq 'webctvista4') {
                    630:         foreach my $key (sort keys %{$resources}) {
                    631:             if (grep/^$key$/,@{$targets}) {
                    632:                 %{$$resinfo{$key}} = ();
                    633:                 if ($$resources{$key}{type} eq 'webct.question') {
                    634:                     $allquestions{$key} = 1;
                    635:                 } elsif ($$resources{$key}{type} eq 'webct.assessment') {
                    636:                     $allassessments{$key} = 1;
1.15      raeburn   637:                 }
                    638:             }
                    639:         }
1.35      raeburn   640:         if (keys(%allassessments) > 0) {
                    641:             foreach my $key (sort(keys(%allassessments))) {
                    642:                 &process_assessment($cms,$context,$key,$docroot,'quiz',$dirname,$destdir,\%{$$resinfo{$key}},$total,$udom,$uname,$pagesfiles,$sequencesfiles,$randompicks,\$dbparse,$resources,$items,\%catinfo,\%qzdbsettings,$hrefs,\%allquestions);
                    643:             }
                    644:         } elsif (keys(%allquestions) > 0) {
                    645:             my %catinfo = ();
                    646:             my @allids = ();
                    647:             my @allquestids = ();
                    648:             my %allanswers = ();
                    649:             my %allchoices = ();
                    650:             my $containerdir;
                    651:             my $newdir;
                    652:             my $cid;
                    653:             my $randompickflag = 0;
                    654:             if ($context eq 'DOCS') {
                    655:                 $cid = $env{'request.course.id'};
                    656:             }
                    657:             my $destresdir = $destdir;
                    658:             if ($context eq 'CSTR') {
                    659:                 $destresdir =~ s|/home/$uname/public_html/|/res/$udom/$uname/|;
                    660:             } elsif ($context eq 'DOCS') {
                    661:                 $destresdir =~ s|^/home/httpd/html/userfiles|/uploaded|;
                    662:             }
                    663:             foreach my $res (sort(keys(%allquestions))) {
                    664:                 my $parent = $allquestions{$res};
                    665:                 &parse_webctvista4_question($res,$docroot,$resources,$hrefs,\%qzdbsettings,\@allquestids,\%allanswers,\%allchoices,$parent,\%catinfo);
                    666:             }
                    667:             &build_category_sequences($destdir,\%catinfo,$sequencesfiles,$pagesfiles,$destresdir,$newdir,$cms,$total,$randompickflag,$context,$udom,$uname,$dirname,$cid,$cdom,$crs,\%qzdbsettings);
                    668:             &write_webct4_questions($cms,\@allquestids,$context,\%qzdbsettings,$dirname,\%allanswers,\%allchoices,$total,$cid,$cdom,$crs,$destdir,\%catinfo);
                    669:         }
1.2       raeburn   670:     }
1.3       raeburn   671: 
1.2       raeburn   672:     $$total{'board'} = $board_count;
1.3       raeburn   673:     $$total{'quiz'} = @{$quizzes};
                    674:     $$total{'surv'} = @{$surveys};
1.14      raeburn   675:     $$total{'pool'} = @{$pools};
1.2       raeburn   676: }
                    677: 
                    678: sub build_structure {
1.15      raeburn   679:     my ($cms,$context,$destdir,$items,$resinfo,$resources,$targets,$hrefs,$udom,$uname,$newdir,$timenow,$cdom,$crs,$timestamp,$total,$boards,$announcements,$quizzes,$surveys,$pools,$boardnum,$pagesfiles,$seqfiles,$topurls,$topnames,$packages,$includeditems,$randompicks) = @_;
1.2       raeburn   680:     my %flag = ();
                    681:     my %count = ();
                    682:     my %pagecontents = ();
                    683:     my %seqtext = ();
                    684:     my $topnum = 0;
1.14      raeburn   685:     my $topspecials = @$announcements + @$boards + @$quizzes + @$surveys + @$pools;
1.2       raeburn   686: 
                    687:     if (!-e "$destdir") {
                    688:         mkdir("$destdir",0755);
                    689:     }
                    690:     if (!-e "$destdir/sequences") {
                    691:         mkdir("$destdir/sequences",0770);
                    692:     }
                    693:     if (!-e "$destdir/resfiles") {
                    694:         mkdir("$destdir/resfiles",0770);
                    695:     }
                    696:     if (!-e "$destdir/pages") {
                    697:         mkdir("$destdir/pages",0770);
                    698:     }
                    699:     if (!-e "$destdir/problems") {
                    700:         mkdir("$destdir/problems",0770);
                    701:     }
                    702: 
                    703:     $seqtext{'Top'} = qq|<map>\n|;       
                    704:     %{$$resinfo{$$items{'Top'}{resnum}}} = (
                    705:                                          isfolder => 'true',
                    706:                                         );
                    707: 
                    708:     my $srcstem = "";
                    709:  
                    710:     if ($context eq 'DOCS') {
                    711:         $srcstem = "/uploaded/$cdom/$crs/$timenow";
                    712:     } elsif ($context eq 'CSTR') {
                    713:         $srcstem = "/res/$udom/$uname/$newdir";
                    714:     }
                    715: 
                    716:     foreach my $key (sort keys %{$items}) {
1.14      raeburn   717:       if ($$includeditems{$key}) {
1.2       raeburn   718:         %{$flag{$key}} = (
                    719:                           page => 0,
                    720:                           seq => 0,
                    721:                           board => 0,
                    722:                           file => 0,
                    723:                          );
                    724: 
                    725:         %{$count{$key}} = (
                    726:                            page => -1,
                    727:                            seq => 0,
                    728:                            board => 0,
                    729:                            file => 0,
                    730:                           );
                    731: 
                    732:         my $src = "";
                    733: 
                    734:         my $next_id = 2;
                    735:         my $curr_id = 1;
                    736:         my $resnum = $$items{$key}{resnum};
                    737:         my $type = $$resources{$resnum}{type};
1.15      raeburn   738:         my $contentscount = $$items{$key}{'contentscount'}; 
1.34      raeburn   739:         if (($cms eq 'angel' && $type eq "FOLDER") || (($cms eq 'bb5' || $cms eq 'bb6') && $$resinfo{$resnum}{'isfolder'} eq "true") && (($type eq "resource/x-bb-document") || ($type eq "resource/x-bb-staffinfo") || ($type eq "resource/x-bb-externallink")) || ($cms eq 'webctce4' &&  $contentscount > 0)) {
1.10      raeburn   740:             unless (($cms eq 'bb5') && $key eq 'Top') {
1.2       raeburn   741:                 $seqtext{$key} = "<map>\n";
                    742:             }
1.15      raeburn   743:             if ($contentscount == 0) {
1.14      raeburn   744: 	        if ($key eq 'Top') {
                    745:                     unless ($topspecials) {
                    746:                         $seqtext{$key} .= qq|<resource id="$curr_id" src="" type="start"></resource>
                    747: <link from="$curr_id" to="$next_id" index="$curr_id"></link>
                    748: <resource id="$next_id" src="" type="finish"></resource>\n|;
                    749:                     }
                    750:                 } else {
                    751:                     $seqtext{$key} .= qq|<resource id="$curr_id" src="" type="start"></resource>
1.2       raeburn   752: <link from="$curr_id" to="$next_id" index="$curr_id"></link>
                    753: <resource id="$next_id" src="" type="finish"></resource>\n|;
1.14      raeburn   754:                 }
1.2       raeburn   755:             } else {
1.16      raeburn   756:                 my $contcount = 0;
                    757:                 if (defined($$items{$key}{contents})) { 
                    758:                     $contcount = @{$$items{$key}{contents}};
                    759:                 } else {
1.17      raeburn   760:                     &Apache::lonnet::logthis("IMS Import error for item: $key- contents count = $contentscount, but identity of contents not defined.");
1.16      raeburn   761:                 }
1.2       raeburn   762:                 my $contitem = $$items{$key}{contents}[0];
1.15      raeburn   763:                 my $contitemcount = $$items{$contitem}{contentscount}; 
1.16      raeburn   764:                 my ($res,$itm,$type,$file);
1.15      raeburn   765:                 if (exists($$items{$contitem}{resnum})) {
                    766:                     $res = $$items{$contitem}{resnum};
                    767:                     $itm = $$resources{$res}{revitm};
                    768:                     $type = $$resources{$res}{type};
1.16      raeburn   769:                     $file = $$resources{$res}{file};
1.15      raeburn   770:                 }
1.2       raeburn   771:                 my $title = $$items{$contitem}{title};
1.10      raeburn   772:                 my $packageflag = 0;
                    773:                 if (grep/^$res$/,@{$packages}) {
                    774:                     $packageflag = 1;
                    775:                 }
1.18      raeburn   776:                 $src = &make_structure($cms,$key,$srcstem,\%flag,\%count,$timestamp,$boardnum,$hrefs,\%pagecontents,$res,$type,$file,$resinfo,$contitem,$uname,$cdom,$contcount,$packageflag,$contitemcount,$$randompicks{$contitem});
1.2       raeburn   777:                 unless ($flag{$key}{page} == 1) {
1.18      raeburn   778:                     if ($$randompicks{$contitem}) {
                    779:                         $seqtext{$key} .= qq|
                    780: <param to="$curr_id" type="int_pos" name="parameter_randompick" value="$$randompicks{$contitem}"></param>\n|;
                    781:                     }
1.5       raeburn   782:                     $seqtext{$key} .= qq|<resource id="$curr_id" src="$src" title="$title" type="start"|;
1.2       raeburn   783:                     unless ($flag{$key}{seq} || $flag{$key}{board} || $flag{$key}{file}) {
                    784:                         $flag{$key}{page} = 1;
                    785:                     }
                    786:                     if ($key eq 'Top') {
                    787:                         push @{$topurls}, $src;
                    788:                         push @{$topnames}, $title;
                    789:                     }
                    790:                 }
                    791:                 if ($contcount == 1) {
                    792:                     $seqtext{$key} .= qq|></resource>
1.14      raeburn   793: <link from="$curr_id" to="$next_id" index="$curr_id"></link>|;
                    794:                     if ($key eq 'Top') {
                    795:                         unless ($topspecials) {
                    796:                             $seqtext{$key} .= qq|
                    797: <resource id="$next_id" src="" type="finish"></resource>\n|;
                    798:                         }
                    799:                     } else {
                    800:                         $seqtext{$key} .= qq|
1.2       raeburn   801: <resource id="$next_id" src="" type="finish"></resource>\n|;
1.14      raeburn   802:                     }
1.2       raeburn   803:                 } else {
                    804:                     if ($contcount > 2 ) {
                    805:                         for (my $i=1; $i<$contcount-1; $i++) {
                    806:                             my $contitem = $$items{$key}{contents}[$i];
1.15      raeburn   807:                             my $contitemcount = $$items{$contitem}{contentscount};
1.2       raeburn   808:                             my $res = $$items{$contitem}{resnum};
                    809:                             my $type = $$resources{$res}{type};
1.16      raeburn   810:                             my $file = $$resources{$res}{file};
1.10      raeburn   811:                             my $title = $$items{$contitem}{title};
                    812:                             my $packageflag = 0;
                    813:                             if (grep/^$res$/,@{$packages}) {
                    814:                                 $packageflag = 1;
                    815:                             }
1.18      raeburn   816:                             $src = &make_structure($cms,$key,$srcstem,\%flag,\%count,$timestamp,$boardnum,$hrefs,\%pagecontents,$res,$type,$file,$resinfo,$contitem,$uname,$cdom,$contcount,$packageflag,$contitemcount,$$randompicks{$contitem});
1.2       raeburn   817:                             unless ($flag{$key}{page} == 1) {
                    818:                                 $seqtext{$key} .= qq|></resource>
1.18      raeburn   819: <link from="$curr_id" to="$next_id" index="$curr_id"></link>\n|;
                    820:                                 if ($$randompicks{$contitem}) {
                    821:                                     $seqtext{$key} .= qq|
                    822: <param to="$next_id" type="int_pos" name="parameter_randompick" value="$$randompicks{$contitem}"></param>|;
                    823:                                 }
                    824:                                 $seqtext{$key} .= qq|
1.2       raeburn   825: <resource id="$next_id" src="$src" title="$title"|;
                    826:                                 $curr_id ++;
                    827:                                 $next_id ++;
                    828:                                 unless ($flag{$key}{seq} || $flag{$key}{board} || $flag{$key}{file}) {
                    829:                                     $flag{$key}{page} = 1;
                    830:                                 }
                    831:                                 if ($key eq 'Top') {
                    832:                                     push @{$topurls}, $src;
                    833:                                     push @{$topnames}, $title;
                    834:                                 }
                    835:                             }
                    836:                         }
                    837:                     }
                    838:                     my $contitem = $$items{$key}{contents}[-1];
1.15      raeburn   839:                     my $contitemcount = $$items{$contitem}{contentscount};
1.2       raeburn   840:                     my $res = $$items{$contitem}{resnum};
                    841:                     my $type = $$resources{$res}{type};
1.16      raeburn   842:                     my $file = $$resources{$res}{file};
1.2       raeburn   843:                     my $title = $$items{$contitem}{title};
1.10      raeburn   844:                     my $packageflag = 0;
                    845:                     if (grep/^$res$/,@{$packages}) {
                    846:                         $packageflag = 1;
                    847:                     }
1.18      raeburn   848:                     $src = &make_structure($cms,$key,$srcstem,\%flag,\%count,$timestamp,$boardnum,$hrefs,\%pagecontents,$res,$type,$file,$resinfo,$contitem,$uname,$cdom,$contcount,$packageflag,$contitemcount,$$randompicks{$contitem});
1.15      raeburn   849: 
1.2       raeburn   850:                     if ($flag{$key}{page}) {
                    851:                         if ($count{$key}{seq} + $count{$key}{page} + $count{$key}{board} + $count{$key}{file} +1 == 1) {
                    852:                             $seqtext{$key} .= qq|></resource>
                    853: <link from="$curr_id" index="$curr_id" to="$next_id">
                    854: <resource id ="$next_id" src="" |;
                    855:                         }
                    856:                     } else {
                    857:                         $seqtext{$key} .= qq|></resource>
1.18      raeburn   858: <link from="$curr_id" to="$next_id" index="$curr_id"></link>\n|;
                    859:                         if ($$randompicks{$contitem}) {
                    860:                             $seqtext{$key} .= qq|
                    861: <param to="$next_id" type="int_pos" name="parameter_randompick" value="$$randompicks{$contitem}"></param>\n|;
                    862:                         }
                    863:                         $seqtext{$key} .= qq|
1.2       raeburn   864: <resource id="$next_id" src="$src" title="$title" |;
                    865:                         if ($key eq 'Top') {
                    866:                             push @{$topurls}, $src;
                    867:                             push @{$topnames}, $title;
                    868:                         }
                    869:                     }
                    870:                     if ($contcount == $$items{$key}{contentscount}) {
                    871:                         $seqtext{$key} .= qq|type="finish"></resource>\n|;
                    872:                     } else {
                    873:                         $curr_id ++;
                    874:                         $next_id ++;
                    875:                         $seqtext{$key} .= qq|></resource>
1.8       raeburn   876: <link from="$curr_id" to="$next_id" index="$curr_id"></link>\n|;
1.2       raeburn   877:                     } 
                    878:                 }
                    879:             }
1.10      raeburn   880:             unless (($cms eq 'bb5') && $key eq 'Top') {
1.2       raeburn   881:                 $seqtext{$key} .= "</map>\n";
                    882:                 open(LOCFILE,">$destdir/sequences/$key.sequence");
                    883:                 print LOCFILE $seqtext{$key};
                    884:                 close(LOCFILE);
                    885:                 push @{$seqfiles}, "$key.sequence";
                    886:             }
                    887:             $count{$key}{page} ++;
                    888:             $$total{page} += $count{$key}{page};
                    889:         }
                    890:         $$total{seq} += $count{$key}{seq};
1.14      raeburn   891:       }
1.2       raeburn   892:     }
                    893:     $topnum += ($count{'Top'}{page} + $count{'Top'}{seq});
                    894: 
1.10      raeburn   895:     if ($cms eq 'bb5' || $cms eq 'bb6') {
1.2       raeburn   896:         if (@{$announcements} > 0) {
                    897:             &process_specials($context,'announcements',$announcements,\$topnum,$$items{'Top'}{contentscount},$destdir,$udom,$uname,$cdom,$crs,$timenow,$newdir,$timestamp,$resinfo,\$seqtext{'Top'},$pagesfiles,$seqfiles,$topurls,$topnames);
                    898:         }
                    899:         if (@{$boards} > 0) {
                    900:             &process_specials($context,'boards',$boards,\$topnum,$$items{'Top'}{contentscount},$destdir,$udom,$uname,$cdom,$crs,$timenow,$newdir,$timestamp,$resinfo,\$seqtext{'Top'},$pagesfiles,$seqfiles,$topurls,$topnames);
                    901:         }
                    902:         if (@{$quizzes} > 0) {
                    903:             &process_specials($context,'quizzes',$quizzes,\$topnum,$$items{'Top'}{contentscount},$destdir,$udom,$uname,$cdom,$crs,$timenow,$newdir,$timestamp,$resinfo,\$seqtext{'Top'},$pagesfiles,$seqfiles,$topurls,$topnames);
                    904:         }
                    905:         if (@{$surveys} > 0)  {
                    906:             &process_specials($context,'surveys',$surveys,\$topnum,$$items{'Top'}{contentscount},$destdir,$udom,$uname,$cdom,$crs,$timenow,$newdir,$timestamp,$resinfo,\$seqtext{'Top'},$pagesfiles,$seqfiles,$topurls,$topnames);
                    907:         }
1.14      raeburn   908:         if (@{$pools} > 0)  {
                    909:             &process_specials($context,'pools',$pools,\$topnum,$$items{'Top'}{contentscount},$destdir,$udom,$uname,$cdom,$crs,$timenow,$newdir,$timestamp,$resinfo,\$seqtext{'Top'},$pagesfiles,$seqfiles,$topurls,$topnames);
                    910:         }
1.2       raeburn   911:         $seqtext{'Top'} .= "</map>\n";
                    912:         open(TOPFILE,">$destdir/sequences/Top.sequence");
                    913:         print TOPFILE $seqtext{'Top'};
                    914:         close(TOPFILE);
                    915:         push @{$seqfiles}, 'Top.sequence';
                    916:     }
                    917: 
                    918:     my $filestem;
                    919:     if ($context eq 'DOCS') {
1.6       raeburn   920:         $filestem = "/uploaded/$cdom/$crs/$timenow";
1.2       raeburn   921:     } elsif ($context eq 'CSTR') {
                    922:         $filestem = "/res/$udom/$uname/$newdir";
                    923:     }
                    924: 
                    925:     foreach my $key (sort keys %pagecontents) {
                    926:         for (my $i=0; $i<@{$pagecontents{$key}}; $i++) {
                    927:             my $filename = $destdir.'/pages/'.$key.'_'.$i.'.page';
1.10      raeburn   928:             my $resource = "$filestem/resfiles/$$items{$pagecontents{$key}[$i][0]}{resnum}.html";
                    929:             my $res = $$items{$pagecontents{$key}[$i][0]}{resnum};
                    930:             my $resource = $filestem.'/resfiles/'.$res.'.html';
                    931:             if (grep/^$res$/,@{$packages}) {
                    932:                 $resource =  $filestem.'/resfiles/'.$res.'./index.html'; # should be entry_point
                    933:             }
1.2       raeburn   934:             open(PAGEFILE,">$filename");
                    935:             print PAGEFILE qq|<map>
1.10      raeburn   936: <resource src="$resource" id="1" type="start" title="$$items{$pagecontents{$key}[$i][0]}{title}"></resource>
1.2       raeburn   937: <link to="2" index="1" from="1">\n|;
                    938:             if (@{$pagecontents{$key}[$i]} == 1) {
1.3       raeburn   939:                 print PAGEFILE qq|<resource src="" id="2" type="finish"></resource>\n|;
1.2       raeburn   940:             } elsif (@{$pagecontents{$key}[$i]} == 2)  {
1.10      raeburn   941:                 my $res = $$items{$pagecontents{$key}[$i][1]}{resnum};
                    942:                 my $resource = $filestem.'/resfiles/'.$res.'.html';
                    943:                 if (grep/^$res$/,@{$packages}) {
                    944:                     $resource =  $filestem.'/resfiles/'.$res.'./index.html'; # should be entry_point
                    945:                 }
                    946:                 print PAGEFILE qq|<resource src="$resource" id="2" type="finish" title="$$items{$pagecontents{$key}[$i][1]}{title}"></resource>\n|;
1.2       raeburn   947:             } else {
                    948:                 for (my $j=1; $j<@{$pagecontents{$key}[$i]}-1; $j++) {
                    949:                     my $curr_id = $j+1;
                    950:                     my $next_id = $j+2;
1.10      raeburn   951:                     my $res = $$items{$pagecontents{$key}[$i][$j]}{resnum};
                    952:                     my $resource = $filestem.'/resfiles/'.$res.'.html';
                    953:                     if (grep/^$res$/,@{$packages}) {
                    954:                         $resource =  $filestem.'/resfiles/'.$res.'./index.html'; # entry_point
                    955:                     }
1.2       raeburn   956:                     print PAGEFILE qq|<resource src="$resource" id="$curr_id" title="$$items{$pagecontents{$key}[$i][$j]}{title}"></resource>
                    957: <link to="$next_id" index="$curr_id" from="$curr_id">\n|;
                    958:                 }
                    959:                 my $final_id = @{$pagecontents{$key}[$i]};
1.10      raeburn   960:                 my $res = $$items{$pagecontents{$key}[$i][-1]}{resnum};
                    961:                 my $resource = $filestem.'/resfiles/'.$res.'.html';
                    962:                 if (grep/^$res$/,@{$packages}) {
                    963:                     $resource =  $filestem.'/resfiles/'.$res.'./index.html'; # entry_point
                    964:                 }
                    965:                 print PAGEFILE qq|<resource src="$resource" id="$final_id" type="finish" title="$$items{$pagecontents{$key}[$i][-1]}{title}"></resource>\n|;
1.2       raeburn   966:             }
                    967:             print PAGEFILE "</map>";
                    968:             close(PAGEFILE);
                    969:             push @{$pagesfiles}, $key.'_'.$i.'.page'; 
                    970:         }
                    971:     }
                    972: }
                    973: 
                    974: sub make_structure {
1.18      raeburn   975:     my ($cms,$key,$srcstem,$flag,$count,$timestamp,$boardnum,$hrefs,$pagecontents,$res,$type,$file,$resinfo,$contitem,$uname,$cdom,$contcount,$packageflag,$contitemcount,$randompick) = @_;
1.2       raeburn   976:     my $src ='';
1.34      raeburn   977:     if (($cms eq 'angel' && $type eq 'FOLDER') || (($cms eq 'bb5' || $cms eq 'bb6') && (($$resinfo{$res}{'isfolder'} eq 'true') || $key eq 'Top')) || ($cms eq 'webctce4' && $contitemcount > 0)) {
1.2       raeburn   978:         $src = $srcstem.'/sequences/'.$contitem.'.sequence';
                    979:         $$flag{$key}{page} = 0;
                    980:         $$flag{$key}{seq} = 1;
                    981:         $$count{$key}{seq} ++;
1.34      raeburn   982:     } elsif ($cms eq 'webctce4' && $randompick) {
1.18      raeburn   983:         $src = $srcstem.'/sequences/'.$res.'.sequence';
                    984:         $$flag{$key}{page} = 0;
                    985:         $$flag{$key}{seq} = 1;
                    986:         $$count{$key}{seq} ++;
1.2       raeburn   987:     } elsif ($cms eq 'angel' && $type eq 'BOARD') {
                    988:         $src = '/adm/'.$cdom.'/'.$uname.'/'.$$timestamp[$$boardnum{$res}].'/bulletinboard'; 
                    989:         $$flag{$key}{page} = 0;
                    990:         $$flag{$key}{board} = 1;
                    991:         $$count{$key}{board} ++;
                    992:     } elsif ($cms eq 'angel' && $type eq "FILE") {
                    993:         foreach my $file (@{$$hrefs{$res}}) {
                    994:             unless ($file eq 'pg'.$res.'.htm') {
                    995:                 $src = $srcstem.'/resfiles/'.$res.'/'.$file;
                    996:             }
                    997:         }
                    998:         $$flag{$key}{page} = 0;
                    999:         $$flag{$key}{file} = 1;
                   1000:     } elsif ($cms eq 'angel' && (($type eq "PAGE") || ($type eq "LINK")) )  {
                   1001:         if ($$flag{$key}{page}) {
1.3       raeburn  1002:             if ($$count{$key}{page} == -1) {
1.17      raeburn  1003:                 &Apache::lonnet::logthis("IMS Angel import error in array index for page: value = -1, resource is $key, type is $type.");
1.2       raeburn  1004:             } else { 
                   1005:                 push @{$$pagecontents{$key}[$$count{$key}{page}]},$contitem;
                   1006:             }
                   1007:         } else {
                   1008:             $$count{$key}{page} ++;
                   1009:             $src = $srcstem.'/pages/'.$key.'_'.$$count{$key}{page}.'.page';
                   1010:             @{$$pagecontents{$key}[$$count{$key}{page}]} = ("$contitem");
                   1011:             $$flag{$key}{seq} = 0;
                   1012:         }
1.10      raeburn  1013:     } elsif ($cms eq 'bb5' || $cms eq 'bb6') {
1.2       raeburn  1014:         if ($$flag{$key}{page}) {
                   1015:             push @{$$pagecontents{$key}[$$count{$key}{page}]},$contitem;
                   1016:         } else {
1.10      raeburn  1017:             if ($contcount == 1) {
                   1018:                 if ($packageflag) {
                   1019:                     $src = $srcstem.'/resfiles/'.$res.'/index.html'; # Needs to be entry point
                   1020:                 } else {
                   1021:                     $src = $srcstem.'/resfiles/'.$res.'.html';
                   1022:                 }
                   1023:             } else {
                   1024:                 $$count{$key}{page} ++;
                   1025:                 $src = $srcstem.'/pages/'.$key.'_'.$$count{$key}{page}.'.page';
                   1026:                 @{$$pagecontents{$key}[$$count{$key}{page}]} = ("$contitem");
                   1027:             }
1.2       raeburn  1028:             $$flag{$key}{seq} = 0;
                   1029:         }
1.34      raeburn  1030:     } elsif ($cms eq 'webctce4') {
1.17      raeburn  1031:         if ($type eq 'webctquiz') {
                   1032:             $src =  $srcstem.'/pages/'.$res.'.page';
1.18      raeburn  1033:             $$count{$key}{page} ++;
                   1034:             $$flag{$key}{seq} = 0;
1.17      raeburn  1035:         } else {
1.16      raeburn  1036:             if (grep/^$file$/,@{$$hrefs{$res}}) {
1.15      raeburn  1037:                 my $filename;
                   1038:                 if ($file =~ m-/([^/]+)$-) {
                   1039:                     $filename = $1;
                   1040:                 }
1.16      raeburn  1041:                 $src =  $srcstem.'/resfiles/'.$res.'/'.$filename;
                   1042:             } else {
                   1043:                 foreach my $file (@{$$hrefs{$res}}) {
                   1044:                     my $filename;
                   1045:                     if ($file =~ m-/([^/]+)$-) {
                   1046:                         $filename = $1;
                   1047:                     }
                   1048:                     $src = $srcstem.'/resfiles/'.$res.'/'.$filename;
                   1049:                 }
1.15      raeburn  1050:             }
                   1051:             $$flag{$key}{page} = 0;
                   1052:             $$flag{$key}{file} = 1;
                   1053:         }
1.2       raeburn  1054:     }
                   1055:     return $src;
                   1056: }
                   1057: 
                   1058: 
                   1059: # ---------------------------------------------------------------- Process Blackboard specials - announcements, bulletin boards, quizzes and surveys
                   1060: sub process_specials {
                   1061:     my ($context,$type,$specials,$topnum,$contentscount,$destdir,$udom,$uname,$cdom,$crs,$timenow,$newdir,$timestamp,$resinfo,$seqtext,$pagesfiles,$seqfiles,$topurls,$topnames) = @_;
                   1062:     my $src = '';
                   1063:     my $specialsrc = '';
                   1064:     my $nextnum = 0;
                   1065:     my $seqstem = '';
                   1066:     if ($context eq 'CSTR') {
1.3       raeburn  1067:         $seqstem = "/res/$udom/$uname/$newdir";
1.2       raeburn  1068:     } elsif ($context eq 'DOCS') {
                   1069:         $seqstem = '/uploaded/'.$cdom.'/'.$crs.'/'.$timenow;
                   1070:     }
                   1071:     my %seqnames = (
                   1072:                   boards => 'bulletinboards',
                   1073:                   quizzes => 'quizzes',
                   1074:                   surveys => 'surveys',
                   1075:                   announcements => 'announcements',
1.14      raeburn  1076:                   pools => 'pools'
1.2       raeburn  1077:                   );
                   1078:     my %seqtitles = (
                   1079:                   boards => 'Course Bulletin Boards',
                   1080:                   quizzes => 'Course Quizzes',
                   1081:                   surveys => 'Course Surveys',
                   1082:                   announcements => 'Course Announcements',
1.14      raeburn  1083:                   pools => 'Course Question Pools'
1.2       raeburn  1084:                    );
                   1085:     $$topnum ++;
                   1086: 
                   1087:     if ($type eq 'announcements') {
                   1088:         $src = "$seqstem/pages/$seqnames{$type}.page";
                   1089:     } else {
                   1090:         $src = "$seqstem/sequences/$seqnames{$type}.sequence";
                   1091:     }
                   1092: 
                   1093:     push @{$topurls}, $src;
                   1094:     push @{$topnames}, $seqtitles{$type};
                   1095: 
                   1096:     $$seqtext .= qq|<resource id="$$topnum" src="$src" title="$seqtitles{$type}"|;
                   1097:     $nextnum = $$topnum +1;
                   1098:     if ($$topnum == 1) {
                   1099:         $$seqtext .= qq| type="start"></resource>
                   1100: <link from="$$topnum" to="$nextnum" index="$$topnum"></link>\n|;
                   1101:         if ($$topnum == $contentscount) {
                   1102:             $$seqtext .= qq|<resource id="$nextnum" src="" type="finish"></resource>\n|;
                   1103:         }
                   1104:     } else {
                   1105:         if ($$topnum == $contentscount) {
                   1106:             $$seqtext .= qq| type="finish"></resource>\n|;
                   1107:         } else {
                   1108:             $$seqtext .= qq|></resource>
                   1109: <link from="$$topnum" to="$nextnum" index="$$topnum"></link>\n|;
                   1110:         }
                   1111:     }
                   1112: 
                   1113:     if ($type eq "announcements") {
                   1114:         push @{$pagesfiles}, "$seqnames{$type}.page";
                   1115:         open(ITEM,">$destdir/pages/$seqnames{$type}.page");
                   1116:     } else {
                   1117:         push @{$seqfiles}, "$seqnames{$type}.sequence";
                   1118:         open(ITEM,">$destdir/sequences/$seqnames{$type}.sequence");
                   1119:     }
                   1120: 
                   1121:     if ($type eq 'boards') {
                   1122:         $specialsrc = "/adm/$udom/$uname/$$timestamp[0]/bulletinboard";
                   1123:     } elsif ($type eq 'announcements') {
                   1124:         $specialsrc = "$seqstem/resfiles/$$specials[0].html";
1.14      raeburn  1125:     } elsif ($type eq 'pools') {
                   1126:         $specialsrc = "$seqstem/sequences/$$specials[0].sequence";
1.2       raeburn  1127:     } else {
                   1128:         $specialsrc = "$seqstem/pages/$$specials[0].page";
                   1129:     }
                   1130:     print ITEM qq|<map>
                   1131: <resource id="1" src="$specialsrc" title="$$resinfo{$$specials[0]}{title}" type="start"></resource>
                   1132: <link from="1" to="2" index="1"></link>|;
                   1133:     if (@{$specials} == 1) {
                   1134:         print ITEM qq|
                   1135: <resource id="2" src="" type="finish"></resource>\n|;
                   1136:     } else {
                   1137:         for (my $i=1; $i<@{$specials}; $i++) {
                   1138:             my $curr = $i+1;
                   1139:             my $next = $i+2;
                   1140:             if ($type eq 'boards') {
                   1141:                 $specialsrc = "/adm/$udom/$uname/$$timestamp[$i]/bulletinboard";
                   1142:             } elsif ($type eq 'announcements') {
                   1143:                 $specialsrc = "$seqstem/resfiles/$$specials[$i].html";
                   1144:             } else {
                   1145:                 $specialsrc = "$seqstem/pages/$$specials[$i].page";
                   1146:             }
                   1147:             print ITEM qq|<resource id="$curr" src="$specialsrc" title="$$resinfo{$$specials[$i]}{title}"|;
                   1148:             if (@{$specials} == $i+1) {
                   1149:                 print ITEM qq| type="finish"></resource>\n|;
                   1150:             } else {
                   1151:                 print ITEM qq|></resource>
                   1152: <link from="$curr" to="$next" index="$next">\n|;
                   1153:             }
                   1154:         }
                   1155:     }
                   1156:     print ITEM qq|</map>|;
                   1157:     close(ITEM);
                   1158: }
                   1159: 
                   1160: # ---------------------------------------------------------------- Process Blackboard users
                   1161: sub process_user {
                   1162:   my ($res,$docroot,$destdir,$settings,$user_crs,$user_cdom,$user_handling) = @_;
                   1163:   my $xmlfile = $docroot.'/'.$res.".dat";
                   1164:   my $filecount = 0;
                   1165:   my @state;
                   1166:   my $userid = '';
                   1167:   my $linknum = 0;
                   1168: 
                   1169:   my $p = HTML::Parser->new
                   1170:     (
                   1171:      xml_mode => 1,
                   1172:      start_h =>
                   1173:      [sub {
                   1174:         my ($tagname, $attr) = @_;
                   1175:         push @state, $tagname;
1.7       raeburn  1176:         if ("@state" eq "USERS USER") {
1.2       raeburn  1177:             $userid = $attr->{value};
                   1178:             %{$$settings{$userid}} = ();
                   1179:             @{$$settings{$userid}{links}} = ();
1.7       raeburn  1180:         } elsif ("@state" eq "USERS USER LOGINID") {  
1.2       raeburn  1181:             $$settings{$userid}{loginid} = $attr->{value};
1.7       raeburn  1182:         } elsif ("@state" eq "USERS USER PASSPHRASE") {  
1.2       raeburn  1183:             $$settings{$userid}{passphrase} = $attr->{value};
                   1184:         } elsif ("@state" eq "USERS USER STUDENTID" ) {
                   1185:             $$settings{$userid}{studentid} = $attr->{value};
                   1186:         } elsif ("@state" eq "USERS USER NAMES FAMILY" ) {
                   1187:             $$settings{$userid}{family} = $attr->{value};
                   1188:         } elsif ("@state" eq "USERS USER NAMES GIVEN" ) {
                   1189:             $$settings{$userid}{given} = $attr->{value};
                   1190:         } elsif ("@state" eq "USERS USER ADDRESSES BUSINESS DATA EMAIL") {
                   1191:             $$settings{$userid}{email} = $attr->{value};
                   1192:         } elsif ("@state" eq "USERS USER USER_ROLE") {
                   1193:             $$settings{$userid}{user_role} = $attr->{value};
                   1194:         } elsif ("@state" eq "USERS USER FLAGS ISAVAILABLE") {
                   1195:             $$settings{$userid}{isavailable} = $attr->{value};
                   1196:         } elsif ("@state" eq "USERS USER PERSONALPAGE FILELIST IMAGE") {
                   1197:             $$settings{$userid}{image} = $attr->{value};
                   1198:         } elsif ( ($state[-2] eq "LINKLIST") && ($state[-1] eq "LINK") ) {
                   1199:             %{$$settings{$userid}{links}[$linknum]} = ();
                   1200:             $$settings{$userid}{links}[$linknum]{url} = $attr->{value};
                   1201:             $linknum ++;
                   1202:         }
                   1203:      }, "tagname, attr"],
                   1204:      text_h =>
                   1205:      [sub {
                   1206:         my ($text) = @_;
                   1207:         if ("@state" eq "USERS USER PERSONALPAGE TITLE") {
                   1208:             $$settings{$userid}{title} = $text;
                   1209:         } elsif ("@state" eq "USERS USER PERSONALPAGE DESCRIPTION") {
                   1210:             $$settings{$userid}{description} = $text;
                   1211:         } elsif (($state[-2] eq "LINK") && ($state[-1] eq "TITLE")) {
                   1212:             $$settings{$userid}{links}[$linknum]{title} = $text;
                   1213:         } elsif (($state[-3] eq "LINK") && ($state[-2] eq  "DESCRIPTION") && ($state[-1] eq "TEXT")) {
                   1214:             $$settings{$userid}{links}[$linknum]{text} = $text;
                   1215:         }
                   1216:       }, "dtext"],
                   1217:      end_h =>
                   1218:      [sub {
                   1219:         my ($tagname) = @_;
1.7       raeburn  1220:         if ("@state" eq "USERS USER") {
1.2       raeburn  1221:             $linknum = 0;
                   1222:         }
                   1223:         pop @state;
                   1224:      }, "tagname"],
                   1225:     );
                   1226:   $p->unbroken_text(1);
                   1227:   $p->parse_file($xmlfile);
                   1228:   $p->eof;
                   1229:   
                   1230:   my $configvars = &LONCAPA::Configuration::read_conf('loncapa.conf');
                   1231:   my $xmlstem =  $$configvars{'lonDaemons'}."/tmp/".$user_cdom."_".$user_crs."_";
                   1232: 
                   1233:   foreach my $user_id (keys %{$settings}) {
                   1234:       if ($$settings{$user_id}{user_role} eq "s") {
                   1235:            
                   1236:       } elsif ($user_handling eq 'enrollall') {
                   1237: 
                   1238:       }
                   1239:   }
                   1240: }
                   1241: 
                   1242: # ---------------------------------------------------------------- Process Blackboard groups
                   1243: sub process_group {  
                   1244:   my ($res,$docroot,$destdir,$settings) = @_;
                   1245:   my $xmlfile = $docroot.'/'.$res.".dat";
                   1246:   my $filecount = 0;
                   1247:   my @state;
                   1248:   my $grp;
                   1249: 
                   1250:   my $p = HTML::Parser->new
                   1251:     (
                   1252:      xml_mode => 1,
                   1253:      start_h =>
                   1254:      [sub {
                   1255:         my ($tagname, $attr) = @_;
                   1256:         push @state, $tagname;
1.7       raeburn  1257:         if ("@state" eq "GROUPS GROUP") {
1.2       raeburn  1258:             $grp = $attr->{id};
                   1259:         }        
1.7       raeburn  1260:         if ("@state" eq "GROUPS GROUP TITLE") {
1.2       raeburn  1261:             $$settings{$grp}{title} = $attr->{value};
1.7       raeburn  1262:         } elsif ("@state" eq "GROUPS GROUP FLAGS ISAVAILABLE") {  
1.2       raeburn  1263:             $$settings{$grp}{isavailable} = $attr->{value};
1.7       raeburn  1264:         } elsif ("@state" eq "GROUPS GROUP FLAGS HASCHATROOM") {  
1.2       raeburn  1265:             $$settings{$grp}{chat} = $attr->{value};
                   1266:         } elsif ("@state" eq "GROUPS GROUP FLAGS HASDISCUSSIONBOARD") {
                   1267:             $$settings{$grp}{discussion} = $attr->{value};
                   1268:         } elsif ("@state" eq "GROUPS GROUP FLAGS HASTRANSFERAREA") {
                   1269:             $$settings{$grp}{transfer} = $attr->{value};
                   1270:         } elsif ("@state" eq "GROUPS GROUP FLAGS ISPUBLIC") {
                   1271:             $$settings{$grp}{public} = $attr->{value};
                   1272:         }
                   1273:      }, "tagname, attr"],
                   1274:      text_h =>
                   1275:      [sub {
                   1276:         my ($text) = @_;
                   1277:         if ("@state" eq "GROUPS DESCRIPTION") {
                   1278:           $$settings{$grp}{description} = $text;
                   1279: #          print "Staff text is $text\n";
                   1280:         }
                   1281:       }, "dtext"],
                   1282:      end_h =>
                   1283:      [sub {
                   1284:         my ($tagname) = @_;
                   1285:         pop @state;
                   1286:      }, "tagname"],
                   1287:     );
                   1288:   $p->unbroken_text(1);
                   1289:   $p->parse_file($xmlfile);
                   1290:   $p->eof;
                   1291: }
                   1292: 
                   1293: # ---------------------------------------------------------------- Process Blackboard Staff
                   1294: sub process_staff {
1.33      raeburn  1295:   my ($res,$docroot,$destdir,$settings,$resrcfiles) = @_;
1.2       raeburn  1296:   my $xmlfile = $docroot.'/'.$res.".dat";
                   1297:   my $filecount = 0;
                   1298:   my @state;
                   1299:   %{$$settings{name}} = ();
1.33      raeburn  1300:   %{$$settings{office}} = ();
1.2       raeburn  1301: 
                   1302:   my $p = HTML::Parser->new
                   1303:     (
                   1304:      xml_mode => 1,
                   1305:      start_h =>
                   1306:      [sub {
                   1307:         my ($tagname, $attr) = @_;
                   1308:         push @state, $tagname;
1.7       raeburn  1309:         if ("@state" eq "STAFFINFO TITLE") {
1.2       raeburn  1310:             $$settings{title} = $attr->{value};
1.7       raeburn  1311:         } elsif ("@state" eq "STAFFINFO BIOGRAPHY TEXTCOLOR") {
1.2       raeburn  1312:             $$settings{textcolor} = $attr->{value};
1.7       raeburn  1313:         } elsif ("@state" eq "STAFFINFO BIOGRAPHY FLAGS ISHTML") {
1.2       raeburn  1314:             $$settings{ishtml} = $attr->{value};
                   1315:         } elsif ("@state" eq "STAFFINFO FLAGS ISAVAILABLE" ) {
                   1316:             $$settings{isavailable} = $attr->{value};
                   1317:         } elsif ("@state" eq "STAFFINFO FLAGS ISFOLDER" ) {
                   1318:             $$settings{isfolder} = $attr->{value};
                   1319:         } elsif ("@state" eq "STAFFINFO POSITION" ) {
                   1320:             $$settings{position} = $attr->{value};
                   1321:         } elsif ("@state" eq "STAFFINFO HOMEPAGE" ) {
                   1322:             $$settings{homepage} = $attr->{value};
                   1323:         } elsif ("@state" eq "STAFFINFO IMAGE") {
                   1324:             $$settings{image} = $attr->{value};
                   1325:         }
                   1326:      }, "tagname, attr"],
                   1327:      text_h =>
                   1328:      [sub {
                   1329:         my ($text) = @_;
                   1330:         if ("@state" eq "STAFFINFO BIOGRAPHY TEXT") {
                   1331:           $$settings{text} = $text;
                   1332: #          print "Staff text is $text\n";
                   1333:         } elsif ("@state" eq "STAFFINFO CONTACT PHONE") {
                   1334:           $$settings{phone} = $text;
                   1335:         } elsif ("@state" eq "STAFFINFO CONTACT EMAIL") {
                   1336:           $$settings{email} = $text;
                   1337:         } elsif ("@state" eq "STAFFINFO CONTACT NAME FORMALTITLE") {
                   1338:           $$settings{name}{formaltitle} = $text;
                   1339:         } elsif ("@state" eq "STAFFINFO CONTACT NAME FAMILY") {
                   1340:           $$settings{name}{family} = $text;
                   1341:         } elsif ("@state" eq "STAFFINFO CONTACT NAME GIVEN") {
                   1342:           $$settings{name}{given} = $text;
                   1343:         } elsif ("@state" eq "STAFFINFO CONTACT OFFICE HOURS") {
                   1344:           $$settings{office}{hours} = $text;
                   1345:         }  elsif ("@state" eq "STAFFINFO CONTACT OFFICE ADDRESS") {
                   1346:           $$settings{office}{address} = $text;
                   1347:         }        
                   1348:       }, "dtext"],
                   1349:      end_h =>
                   1350:      [sub {
                   1351:         my ($tagname) = @_;
                   1352:         pop @state;
                   1353:      }, "tagname"],
                   1354:     );
                   1355:   $p->unbroken_text(1);
                   1356:   $p->parse_file($xmlfile);
                   1357:   $p->eof;
                   1358: 
                   1359:     my $fontcol = '';
                   1360:     if (defined($$settings{textcolor})) {
                   1361:         $fontcol =  qq|color="$$settings{textcolor}"|;
                   1362:     }
                   1363:     if (defined($$settings{text})) {
                   1364:         if ($$settings{ishtml} eq "true") {
                   1365:             $$settings{text} = &HTML::Entities::decode($$settings{text});
                   1366:         }
                   1367:     }
                   1368:     my $staffentry = qq|
                   1369: <table border="0" cellpadding="0" cellspacing="0" width="100%">
                   1370:   <tr>
                   1371:     <td colspan="2"><hr /><font face="arial,helv" size="3"><b>$$settings{name}{formaltitle} $$settings{name}{given} $$settings{name}{family}</b></font>
                   1372:     </td>
                   1373:   </tr>
                   1374:   <tr>
                   1375:     <td valign="top">
                   1376:       <table width="100% border="0" cols="2" cellpadding="0" cellspacing="0">|;
                   1377:     if ( defined($$settings{email}) && $$settings{email} ne '') {
                   1378:         $staffentry .= qq|
                   1379:         <tr>
                   1380:           <td width="100" valign="top">
                   1381:            <font face="arial" size="2"><b>Email:</b></font>
                   1382:           </td>
                   1383:           <td>
                   1384:            <font face="arial" size="2"><a href="mailto:$$settings{email}">$$settings{email}</a></font>
                   1385:           </td>
                   1386:         </tr>
                   1387:         |;
                   1388:     }
                   1389:     if (defined($$settings{phone}) && $$settings{phone} ne '') {
                   1390:         $staffentry .= qq|
                   1391:         <tr>
                   1392:           <td width="100" valign="top">
                   1393:             <font face="arial" size="2"><b>Phone:</b></font>
                   1394:           </td>
                   1395:           <td>
                   1396:             <font face="arial" size="2">$$settings{phone}</font>
                   1397:           </td>
                   1398:         </tr>
                   1399:         |;
                   1400:     }
                   1401:     if (defined($$settings{office}{address}) && $$settings{office}{address} ne '') {
                   1402:         $staffentry .= qq|
                   1403:         <tr>
                   1404:          <td width="100" valign="top">
                   1405:            <font face="arial" size="2"><b>Address:</b></font>
                   1406:          </td>
                   1407:          <td>
                   1408:            <font face="arial" size="2">$$settings{office}{address}</font>
                   1409:          </td>
                   1410:         </tr>
                   1411:         |;
                   1412:     }
                   1413:     if (defined($$settings{office}{hours}) && $$settings{office}{hours} ne '') {
                   1414:         $staffentry .= qq|
                   1415:         <tr>
                   1416:           <td width="100" valign="top">
                   1417:             <font face="arial" size="2"><b>Office Hours:</b></font>
                   1418:           </td>
                   1419:           <td>
                   1420:             <font face=arial size=2>$$settings{office}{hours}</font>
                   1421:           </td>
                   1422:         </tr>
                   1423:         |;
                   1424:     }
                   1425:     if ( defined($$settings{homepage}) && $$settings{homepage} ne '') {
                   1426:         $staffentry .= qq|
                   1427:         <tr>
                   1428:           <td width="100" valign="top">
                   1429:             <font face="arial" size="2"><b>Personal Link:</b></font>
                   1430:           </td>
                   1431:           <td>
                   1432:             <font face="arial" size="2"><a href="$$settings{homepage}">$$settings{homepage}</a></font>
                   1433:           </td>
                   1434:         </tr>
                   1435:         |;
                   1436:     }
                   1437:     if (defined($$settings{text}) && $$settings{text} ne '') {
                   1438:         $staffentry .= qq|
                   1439:         <tr>
                   1440:           <td colspan="2">
                   1441:             <font face="arial" size="2" $fontcol><b>Other Information:</b><br/>$$settings{text}</font>
                   1442:           </td>
                   1443:         </tr>
                   1444:         |;
                   1445:      }
                   1446:      $staffentry .= qq|
                   1447:       </table>
                   1448:     </td>
                   1449:     <td align="right" valign="top">
                   1450:      |;
                   1451:      if ( defined($$settings{image}) ) {
                   1452:          $staffentry .= qq|
1.33      raeburn  1453:       <img src="$res/$$settings{image}">
1.2       raeburn  1454:          |;
                   1455:      }
                   1456:      $staffentry .= qq|
                   1457:     </td>
                   1458:   </tr>
                   1459: </table>
                   1460:     |;
                   1461:     open(FILE,">$destdir/resfiles/$res.html");
                   1462:     push @{$resrcfiles}, "$res.html";
                   1463:     print FILE qq|<html>
                   1464: <head>
                   1465: <title>$$settings{title}</title>
                   1466: </head>
                   1467: <body bgcolor='#ffffff'>
                   1468: $staffentry
                   1469: </body>
                   1470: </html>|;
                   1471:     close(FILE);
                   1472: }
                   1473: 
                   1474: # ---------------------------------------------------------------- Process Blackboard Links
                   1475: sub process_link {
1.33      raeburn  1476:     my ($res,$docroot,$destdir,$settings,$resrcfiles) = @_;
1.2       raeburn  1477:     my $xmlfile = $docroot.'/'.$res.".dat";
                   1478:     my @state = ();
                   1479:     my $p = HTML::Parser->new
                   1480:     (
                   1481:         xml_mode => 1,
                   1482:         start_h =>
                   1483:         [sub {
                   1484:             my ($tagname, $attr) = @_;
                   1485:             push @state, $tagname;
1.7       raeburn  1486:             if ("@state" eq "EXTERNALLINK TITLE") {
1.2       raeburn  1487:                 $$settings{title} = $attr->{value};
1.7       raeburn  1488:             } elsif ("@state" eq "EXTERNALLINK TEXTCOLOR") {  
1.2       raeburn  1489:                 $$settings{textcolor} = $attr->{value};
1.7       raeburn  1490:             } elsif ("@state" eq "EXTERNALLINK DESCRIPTION FLAGS ISHTML") {  
1.15      raeburn  1491:                 $$settings{ishtml} = $attr->{value};
1.2       raeburn  1492:             } elsif ("@state" eq "EXTERNALLINK FLAGS ISAVAILABLE" ) {
                   1493:                 $$settings{isavailable} = $attr->{value};
                   1494:             } elsif ("@state" eq "EXTERNALLINK FLAGS LAUNCHINNEWWINDOW" ) {
                   1495:                 $$settings{newwindow} = $attr->{value};
                   1496:             } elsif ("@state" eq "EXTERNALLINK FLAGS ISFOLDER" ) {
                   1497:                 $$settings{isfolder} = $attr->{value};
                   1498:             } elsif ("@state" eq "EXTERNALLINK POSITION" ) {
                   1499:                 $$settings{position} = $attr->{value};
                   1500:             } elsif ("@state" eq "EXTERNALLINK URL" ) {
1.7       raeburn  1501:                 $$settings{url} = $attr->{value};
1.2       raeburn  1502:             }
                   1503:         }, "tagname, attr"],
                   1504:         text_h =>
                   1505:         [sub {
                   1506:             my ($text) = @_;
                   1507:             if ("@state" eq "EXTERNALLINK DESCRIPTION TEXT") {
                   1508:                $$settings{text} = $text;
                   1509:             }
                   1510:         }, "dtext"],
                   1511:         end_h =>
                   1512:         [sub {
                   1513:             my ($tagname) = @_;
                   1514:             pop @state;
                   1515:         }, "tagname"],
                   1516:     );
                   1517:     $p->unbroken_text(1);
                   1518:     $p->parse_file($xmlfile);
                   1519:     $p->eof;
                   1520: 
                   1521:     my $linktag = '';
                   1522:     my $fontcol = '';
                   1523:     if (defined($$settings{textcolor})) {
                   1524:         $fontcol =  qq|<font color="$$settings{textcolor}">|;
                   1525:     }
                   1526:     if (defined($$settings{text})) {
                   1527:         if ($$settings{ishtml} eq "true") {
                   1528:             $$settings{text} = &HTML::Entities::decode($$settings{text});
                   1529:         }
                   1530:     }
                   1531: 
                   1532:     if (defined($$settings{url}) ) {
                   1533:         $linktag = qq|<a href="$$settings{url}"|;
                   1534:         if ($$settings{newwindow} eq "true") {
                   1535:             $linktag .= qq| target="launch"|;
                   1536:         }
                   1537:         $linktag .= qq|>$$settings{title}</a>|;
                   1538:     }
                   1539: 
                   1540:     open(FILE,">$destdir/resfiles/$res.html");
                   1541:     push @{$resrcfiles}, "$res.html";
                   1542:     print FILE qq|<html>
                   1543: <head>
                   1544: <title>$$settings{title}</title>
                   1545: </head>
                   1546: <body bgcolor='#ffffff'>
                   1547: $fontcol
                   1548: $linktag
                   1549: $$settings{text}
                   1550: |;
                   1551:     if (defined($$settings{textcolor})) {
                   1552:         print FILE qq|</font>|;
                   1553:     }
                   1554:     print FILE qq|
                   1555:   </body>
                   1556:  </html>|;
                   1557:     close(FILE);
                   1558: }
                   1559: 
                   1560: # ---------------------------------------------------------------- Process Blackboard Discussion Boards
                   1561: sub process_db {
                   1562:     my ($res,$docroot,$destdir,$timestamp,$crs,$cdom,$handling,$uname,$settings,$longcrs) = @_;
                   1563:     my $xmlfile = $docroot.'/'.$res.".dat";
                   1564:     my @state = ();
                   1565:     my @allmsgs = ();
                   1566:     my %msgidx = ();
                   1567:     my %threads; # all threads, keyed by message ID
                   1568:     my $msg_id; # the current message ID
                   1569:     my %message; # the current message being accumulated for $msg_id
                   1570: 
                   1571:     my $p = HTML::Parser->new
                   1572:     (
                   1573:        xml_mode => 1,
                   1574:        start_h =>
                   1575:        [sub {
                   1576:            my ($tagname, $attr) = @_;
                   1577:            push @state, $tagname;
                   1578:            my $depth = 0;
                   1579:            my @seq = ();
                   1580:            if ("@state" eq "FORUM TITLE") {
                   1581:                $$settings{title} = $attr->{value};
                   1582:            } elsif ("@state" eq "FORUM DESCRIPTION TEXTCOLOR") {  
                   1583:                $$settings{textcolor} = $attr->{value};
                   1584:            } elsif ("@state" eq "FORUM DESCRIPTION FLAGS ISHTML") {  
                   1585:                $$settings{ishtml} = $attr->{value};
                   1586:            } elsif ("@state" eq "FORUM DESCRIPTION FLAGS ISNEWLINELITERAL") {  
                   1587:                $$settings{newline} = $attr->{value};
                   1588:            } elsif ("@state" eq "FORUM POSITION" ) {
                   1589:                $$settings{position} = $attr->{value};
                   1590:            } elsif ("@state" eq "FORUM FLAGS ISREADONLY") {
                   1591:                $$settings{isreadonly} = $attr->{value};
                   1592:            } elsif ("@state" eq "FORUM FLAGS ISAVAILABLE" ) {
                   1593:                $$settings{isavailable} = $attr->{value};
                   1594:            } elsif ("@state" eq "FORUM FLAGS ALLOWANONYMOUSPOSTINGS" ) {
                   1595:                $$settings{allowanon} = $attr->{value};
                   1596:            } elsif ( ($state[0] eq "FORUM") && ($state[1] eq "MESSAGETHREADS") && ($state[2] eq "MSG") ) {
                   1597:                if ($state[-1] eq "MSG") {
                   1598:                    unless ($msg_id eq '') {
                   1599:                        push @{$threads{$msg_id}}, { %message };
                   1600:                        $depth = @state - 3;
                   1601:                        if ($depth > @seq) {
                   1602:                            push @seq, $msg_id; 
                   1603:                        }
                   1604:                    }
                   1605:                    if ($depth < @seq) {
                   1606:                        pop @seq;
                   1607:                    }                
                   1608:                    $msg_id = $attr->{id};
                   1609:                    push @allmsgs, $msg_id;
                   1610:                    $msgidx{$msg_id} = @allmsgs;
                   1611:                    %message = ();
                   1612:                    $message{depth} = $depth;
                   1613:                    if ($depth > 0) {
                   1614:                        $message{parent} = $seq[-1];
                   1615:                    } else {
                   1616:                        $message{parent} = "None";
                   1617:                    }
                   1618:                } elsif ($state[-1] eq "TITLE") {
                   1619:                    $message{title} = $attr->{value};
                   1620:                } elsif ( ( $state[-3] eq "MESSAGETEXT" ) && ( $state[-2] eq "FLAGS" ) && ( $state[-1] eq "ISHTML" ) ) {
                   1621:                    $message{ishtml} = $attr->{value};
                   1622:                } elsif ( ( $state[-3] eq "MESSAGETEXT" ) && ( $state[-2] eq "FLAGS" ) && ( $state[-1] eq "ISNEWLINELITERAL" ) ) {
                   1623:                    $message{newline} = $attr->{value};
                   1624:                } elsif ( ( $state[-2] eq "DATES" ) && ( $state[-1] eq "CREATED" ) ) {
                   1625:                    $message{created} = $attr->{value};
                   1626:                } elsif ( $state[@state-2] eq "FLAGS") {
                   1627:                    if ($state[@state-1] eq "ISANONYMOUS") {
                   1628:                        $message{isanonymous} =  $attr->{value};
                   1629:                    }
                   1630:                } elsif ( $state[-2] eq "USER" ) {
                   1631:                    if ($state[-1] eq "USERID") {
                   1632:                        $message{userid} =  $attr->{value};
                   1633:                    } elsif ($state[@state-1] eq "USERNAME") {
                   1634:                        $message{username} =  $attr->{value};
                   1635:                    } elsif ($state[@state-1] eq "EMAIL") {
                   1636:                        $message{email} =  $attr->{value};
                   1637:                    }          
                   1638:                } elsif ( ($state[-2] eq "FILELIST") && ($state[-1] eq "IMAGE") ) {
                   1639:                    $message{attachment} = $attr->{value};
                   1640:                }
                   1641:            }
                   1642:        }, "tagname, attr"],
                   1643:        text_h =>
                   1644:        [sub {
                   1645:            my ($text) = @_;
                   1646:            if ("@state" eq "FORUM DESCRIPTION TEXT") {
                   1647:                $$settings{text} = $text;
                   1648:            } elsif ( ($state[0] eq "FORUM") && ($state[1] eq "MESSAGETHREADS") && ($state[2] eq "MSG") ) {
                   1649:                if ( ($state[-2] eq "MESSAGETEXT") && ($state[-1] eq "TEXT") ){
                   1650:                    $message{text} = $text;
                   1651:                }
                   1652:            }
                   1653:        }, "dtext"],
                   1654:        end_h =>
                   1655:        [sub {
                   1656:            my ($tagname) = @_;
                   1657:            if ( $state[-1] eq "MESSAGETHREADS" ) {
                   1658:                push @{$threads{$msg_id}}, { %message };
                   1659:            }
                   1660:            pop @state;
                   1661:        }, "tagname"],
                   1662:     );
                   1663:     $p->unbroken_text(1);
                   1664:     $p->parse_file($xmlfile);
                   1665:     $p->eof;
                   1666: 
                   1667:     if (defined($$settings{text})) {
                   1668:         if ($$settings{ishtml} eq "false") {
                   1669:             if ($$settings{isnewline} eq "true") {
                   1670:                 $$settings{text} =~ s#\n#<br/>#g;
                   1671:             }
                   1672:         } else {
                   1673:             $$settings{text} = &HTML::Entities::decode($$settings{text});
                   1674:         }
                   1675:         if (defined($$settings{fontcolor}) ) {
                   1676:             $$settings{text} = "<font color=\"".$$settings{textcolor}."\">".$$settings{text}."</font>";
                   1677:         }
                   1678:     }
                   1679:     my $boardname = 'bulletinpage_'.$timestamp;
                   1680:     my %boardinfo = (
                   1681:                   'aaa_title' => $$settings{title},
                   1682:                   'bbb_content' => $$settings{text},
                   1683:                   'ccc_webreferences' => '',
                   1684:                   'uploaded.lastmodified' => time,
                   1685:                   );
                   1686:   
                   1687:     my $putresult = &Apache::lonnet::put($boardname,\%boardinfo,$cdom,$crs);
                   1688:     if ($handling eq 'importall') {
                   1689:         foreach my $msg_id (@allmsgs) {
                   1690:             foreach my $message ( @{$threads{$msg_id}} ) {
                   1691:                 my %contrib = (
                   1692:                             'sendername' => $$message{userid},
                   1693:                             'senderdomain' => $cdom,
                   1694:                             'screenname' => '',
                   1695:                             'plainname' => $$message{username},
                   1696:                             );
                   1697:                 unless ($$message{parent} eq 'None') {
                   1698:                     $contrib{replyto} = $msgidx{$$message{parent}};
                   1699:                 }
                   1700:                 if (defined($$message{isanonymous}) ) {
                   1701:                     if ($$message{isanonymous} eq 'true') {
                   1702:                         $contrib{'anonymous'} = 'true';
                   1703:                     }
                   1704:                 }
                   1705:                 if ( defined($$message{attachment}) )  {
                   1706:                     my $url = $$message{attachment};
                   1707:                     my $oldurl = $url;
                   1708:                     my $newurl = $url;
                   1709:                     unless ($url eq '') {
                   1710:                         $newurl =~ s/\//_/g;
                   1711:                         unless ($longcrs eq '') {
                   1712:                             if (!-e "/home/httpd/lonUsers/$cdom/$longcrs/userfiles") {
                   1713:                                 mkdir("/home/httpd/lonUsers/$cdom/$longcrs/userfiles",0755);
                   1714:                             }
                   1715:                             if (!-e "/home/httpd/lonUsers/$cdom/$longcrs/userfiles/$newurl") {
                   1716:                                 system("cp $destdir/resfiles/$res/$$message{attachment} /home/httpd/lonUsers/$cdom/$longcrs/userfiles/$newurl");
                   1717:                             }
                   1718:                             $contrib{attachmenturl} = '/uploaded/'.$cdom.'/'.$crs.'/'.$newurl;
                   1719:                         }
                   1720:                     }
                   1721:                 }
                   1722:                 if (defined($$message{title}) ) {
                   1723:                     $contrib{'message'} = $$message{title};
                   1724:                 }
                   1725:                 if (defined($$message{text})) {
                   1726:                     if ($$message{ishtml} eq "false") {
                   1727:                         if ($$message{isnewline} eq "true") {
                   1728:                             $$message{text} =~ s#\n#<br/>#g;
                   1729:                         }
                   1730:                     } else {
                   1731:                         $$message{text} = &HTML::Entities::decode($$message{text});
                   1732:                     }
                   1733:                     $contrib{'message'} .= '<br /><br />'.$$message{text};
                   1734:                     my $symb = 'bulletin___'.$timestamp.'___adm/wrapper/adm/'.$cdom.'/'.$uname.'/'.$timestamp.'/bulletinboard';
                   1735:                     my $postresult = &addposting($symb,\%contrib,$cdom,$crs);
                   1736:                 }
                   1737:             }
                   1738:         }
                   1739:     }
                   1740: }
                   1741: 
                   1742: # ---------------------------------------------------------------- Add Posting to Bulletin Board
                   1743: sub addposting {
                   1744:     my ($symb,$contrib,$cdom,$crs)=@_;
                   1745:     my $status='';
                   1746:     if (($symb) && ($$contrib{message})) {
                   1747:          my $crsdom = $cdom.'_'.$crs;
                   1748:          &Apache::lonnet::store($contrib,$symb,$crsdom,$cdom,$crs);
                   1749:          my %storenewentry=($symb => time);
                   1750:          &Apache::lonnet::put('discussiontimes',\%storenewentry,$cdom,$crs);
                   1751:     }
                   1752:     my %record=&Apache::lonnet::restore('_discussion');
                   1753:     my ($temp)=keys %record;
                   1754:     unless ($temp=~/^error\:/) {
                   1755:         my %newrecord=();
                   1756:         $newrecord{'resource'}=$symb;
                   1757:         $newrecord{'subnumber'}=$record{'subnumber'}+1;
                   1758:         &Apache::lonnet::cstore(\%newrecord,'_discussion');
                   1759:         $status = 'ok';
                   1760:     } else {
                   1761:         $status.='Failed.';
                   1762:     }
                   1763:     return $status;
                   1764: }
1.15      raeburn  1765: 
                   1766: sub parse_bb5_assessment {
                   1767:     my ($res,$docroot,$container,$settings,$allanswers,$allchoices,$allids) = @_;
1.2       raeburn  1768:     my $xmlfile = $docroot.'/'.$res.".dat";
                   1769:     my @state = ();
                   1770:     my $id; # the current question ID
                   1771:     my $answer_id; # the current answer ID
                   1772:     my %toptag = ( pool => 'POOL',
                   1773:                  quiz => 'ASSESSMENT',
                   1774:                  survey => 'ASSESSMENT'
                   1775:                );
                   1776: 
                   1777:     my $p = HTML::Parser->new
                   1778:     (
                   1779:      xml_mode => 1,
                   1780:      start_h =>
                   1781:      [sub {
                   1782:         my ($tagname, $attr) = @_;
                   1783:         push @state, $tagname;
                   1784:         my $depth = 0;
                   1785:         my @seq = ();
                   1786:         my $class;
                   1787:         my $state_str = join(" ",@state);
                   1788:         if ($container eq "pool") {
                   1789:             if ("@state" eq "POOL TITLE") {
                   1790:                 $$settings{title} = $attr->{value};
                   1791:             }
                   1792:         } else {
                   1793:             if ("@state" eq "ASSESSMENT TITLE") {  
                   1794:                 $$settings{title} = $attr->{value};          
                   1795:             } elsif ("@state" eq "ASSESSMENT FLAG" ) {
                   1796:                 $$settings{isnewline} = $attr->{value};
                   1797:             } elsif ("@state" eq "ASSESSMENT FLAGS ISAVAILABLE") {
                   1798:                 $$settings{isavailable} = $attr->{value};
                   1799:             } elsif ("@state" eq "ASSESSMENT FLAGS ISANONYMOUS" ) {
                   1800:                 $$settings{isanonymous} = $attr->{id};
                   1801:             } elsif ("@state" eq "ASSESSMENT FLAGS GIVE FEEDBACK" ) {
                   1802:                 $$settings{feedback} = $attr->{id};        
                   1803:             } elsif ("@state" eq "ASSESSMENT FLAGS SHOWCORRECT" ) {
                   1804:                 $$settings{showcorrect} = $attr->{id};        
                   1805:             } elsif ("@state" eq "ASSESSMENT FLAGS SHOWRESULTS" ) {
                   1806:                 $$settings{showresults} = $attr->{id};        
                   1807:             } elsif ("@state" eq "ASSESSMENT FLAGS ALLOWMULTIPLE" ) {
                   1808:                 $$settings{allowmultiple} = $attr->{id};        
                   1809:             } elsif ("@state" eq "ASSESSMENT ASSESSMENTTYPE" ) {
                   1810:                 $$settings{type} = $attr->{id};        
                   1811:             }
                   1812:         }    
                   1813:         if ("@state" eq "$toptag{$container} QUESTIONLIST QUESTION") {  
                   1814:             $id = $attr->{id};
1.15      raeburn  1815:             push @{$allids}, $id;
1.2       raeburn  1816:             %{$$settings{$id}} = ();
1.15      raeburn  1817:             @{$$allanswers{$id}} = ();
1.2       raeburn  1818:             $$settings{$id}{class} = $attr->{class};
                   1819:             unless ($container eq "pool") {
                   1820:                 $$settings{$id}{points} = $attr->{points};
                   1821:             }
                   1822:             @{$$settings{$id}{correctanswer}} = ();                              
                   1823:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[-1] =~ m/^QUESTION_(\w+)$/) ) {
                   1824:             $id = $attr->{id};
                   1825:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "BODY") && ($state[3] eq "FLAGS") ) {
                   1826:             if ($state[4] eq "ISHTML") {
1.20      raeburn  1827:                 $$settings{$id}{ishtml} = $attr->{value};
1.2       raeburn  1828:             } elsif ($state[4] eq "ISNEWLINELITERAL") {
                   1829:                 $$settings{$id}{newline} = $attr->{value};
                   1830:             }
                   1831:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "IMAGE") ) {
                   1832:             $$settings{$id}{image} = $attr->{value};
                   1833:             $$settings{$id}{style} = $attr->{style};
                   1834:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "URL") ) {
                   1835:             $$settings{$id}{url} = $attr->{value};
                   1836:             $$settings{$id}{name} = $attr->{name};
                   1837:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[-1] eq "ANSWER") ) {
                   1838:             $answer_id = $attr->{id};
1.15      raeburn  1839:             push @{$$allanswers{$id}},$answer_id;
1.2       raeburn  1840:             %{$$settings{$id}{$answer_id}} = ();
                   1841:             $$settings{$id}{$answer_id}{position} = $attr->{position};
                   1842:             if ($$settings{$id}{class} eq 'QUESTION_MATCH') {
                   1843:                 $$settings{$id}{$answer_id}{placement} = $attr->{placement};
                   1844:                 $$settings{$id}{$answer_id}{type} = 'answer';
                   1845:             }
                   1846:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[-1] eq "CHOICE") ) {
                   1847:             $answer_id = $attr->{id};
1.15      raeburn  1848:             push @{$$allchoices{$id}},$answer_id; 
1.2       raeburn  1849:             %{$$settings{$id}{$answer_id}} = ();
                   1850:             $$settings{$id}{$answer_id}{position} = $attr->{position};
                   1851:             $$settings{$id}{$answer_id}{placement} = $attr->{placement};
                   1852:             $$settings{$id}{$answer_id}{type} = 'choice';
                   1853:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "ANSWER") ) {
                   1854:             if ($state[3] eq "IMAGE") {
                   1855:                 $$settings{$id}{$answer_id}{image} = $attr->{value};
                   1856:                 $$settings{$id}{$answer_id}{style} = $attr->{style};
                   1857:             } elsif ($state[3] eq "URL") {
                   1858:                 $$settings{$id}{$answer_id}{url} = $attr->{value};
                   1859:             }
                   1860:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "CHOICE") ) {
                   1861:             if ($state[3] eq "IMAGE") {
                   1862:                 $$settings{$id}{$answer_id}{image} = $attr->{value};
                   1863:                 $$settings{$id}{$answer_id}{style} = $attr->{style};
                   1864:             } elsif ($state[3] eq "URL") {
                   1865:                 $$settings{$id}{$answer_id}{url} = $attr->{value};
                   1866:             }
                   1867:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "GRADABLE") && ($state[3] eq "CORRECTANSWER") ) {
                   1868:             my $corr_answer = $attr->{answer_id};
                   1869:             push @{$$settings{$id}{correctanswer}}, $corr_answer;
                   1870:             my $type = $1;
                   1871:             if ($type eq 'TRUEFALSE') {
                   1872:                 $$settings{$id}{$corr_answer}{answer_position} = $attr->{position};
                   1873:             } elsif ($type eq 'ORDER') {
                   1874:                 $$settings{$id}{$corr_answer}{order} = $attr->{order};
                   1875:             } elsif ($type eq 'MATCH') {
                   1876:                 $$settings{$id}{$corr_answer}{choice_id} = $attr->{choice_id};
                   1877:             }
                   1878:         }
                   1879:      }, "tagname, attr"],
                   1880:      text_h =>
                   1881:      [sub {
                   1882:         my ($text) = @_;
1.16      raeburn  1883:         $text =~ s/^\s+//g;
                   1884:         $text =~ s/\s+$//g;
1.2       raeburn  1885:         unless ($container eq "pool") {        
                   1886:             if ("@state" eq "ASSESSMENT DESCRIPTION TEXT") {
                   1887:                 $$settings{description} = $text;
                   1888:             } elsif ("@state" eq "ASSESSMENT INSTRUCTIONS ") {
                   1889:                 $$settings{instructions}{text} = $text;
                   1890:             }
                   1891:         }
1.16      raeburn  1892:         if ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "BODY") && ($state[-1] eq "TEXT") ) {
                   1893:             unless ($text eq '') { 
                   1894:                 $$settings{$id}{text} = $text;
                   1895:             }
                   1896:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "ANSWER") && ($state[-1] eq "TEXT") ) {
                   1897:             unless ($text eq '') {
                   1898:                 $$settings{$id}{$answer_id}{text} = $text;
                   1899:             }
                   1900:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "CHOICE") && ($state[-1] eq "TEXT") ) {
                   1901:             unless ($text eq '') {
                   1902:                 $$settings{$id}{$answer_id}{text} = $text;
                   1903:             }
                   1904:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "GRADABLE") && ($state[-1] eq "FEEDBACK_WHEN_CORRECT") ) {
                   1905:             unless ($text eq '') {
                   1906:                 $$settings{$id}{feedback_corr} = $text;
                   1907:             }
                   1908:         } elsif ( ($state[0] eq $toptag{$container}) && ($state[1] =~ m/^QUESTION_(\w+)$/) && ($state[2] eq "GRADABLE") && ($state[-1] eq "FEEDBACK_WHEN_INCORRECT") ) {
                   1909:             unless ($text eq '') {
                   1910:                 $$settings{$id}{feedback_incorr} = $text;
                   1911:             }
1.2       raeburn  1912:         }
                   1913:       }, "dtext"],
                   1914:      end_h =>
                   1915:      [sub {
                   1916:         my ($tagname) = @_;
                   1917:         pop @state;
                   1918:      }, "tagname"],
                   1919:     );
                   1920:     $p->unbroken_text(1);
1.16      raeburn  1921:     $p->marked_sections(1);
1.2       raeburn  1922:     $p->parse_file($xmlfile);
                   1923:     $p->eof;
1.15      raeburn  1924: }
                   1925: 
                   1926: sub parse_bb6_assessment {
1.30      raeburn  1927:     my ($res,$docroot,$container,$settings,$allids) = @_;
1.28      raeburn  1928:     my $xmlfile = $docroot.'/'.$res.".dat";
                   1929:     my @state = ();
                   1930:     my $id; # the current question ID
1.29      raeburn  1931:     my $response; # the current response ID
1.30      raeburn  1932:     my $foil; # the current foil ID
                   1933:     my $numchoice; # the current right match choice;
                   1934:     my $labelcount; # the current count of choices for a matching item.
1.28      raeburn  1935:     my $curr_shuffle;
1.30      raeburn  1936:     my $curr_class; # the current question type
1.29      raeburn  1937:     my $curr_matchitem;
1.30      raeburn  1938:     my $curr_block_type; # the current block type
                   1939:     my $curr_flow; # the current flow class attribute
                   1940:     my $curr_flow_mat; # the current flow_mat class attribute
                   1941:     my $curr_feedback_type; # the current feedback type
                   1942:     my $numorder; # counter for ordering type questions
                   1943: 
                   1944:     my $itemfrag = "questestinterop assessment section item";
                   1945:     my $presfrag = "$itemfrag presentation flow flow";
                   1946:     my $blockflow = 'flow';
                   1947:     my $responselid;
                   1948:     my $instructionfrag = "questestinterop assessment presentation_material flow_mat material";
                   1949:     my $feedbackfrag = "$itemfrag itemfeedback";
                   1950:     my $feedback_tag = '';
                   1951:     my $responselid;
1.28      raeburn  1952:     my $p = HTML::Parser->new
                   1953:     (
                   1954:      xml_mode => 1,
                   1955:      start_h =>
                   1956:      [sub {
                   1957:         my ($tagname, $attr) = @_;
                   1958:         push @state, $tagname;
                   1959:         if ("@state" eq "questestinterop assessment") {
                   1960:             $$settings{title} = $attr->{title};
                   1961:         }
1.29      raeburn  1962:         if ("@state" eq "questestinterop assessment rubric flow_mat material mat_extension mat_formattedtext") {
1.30      raeburn  1963:             $$settings{description}{texttype} = $attr->{type};
1.29      raeburn  1964:         }
1.30      raeburn  1965:         if ("@state" eq $presfrag) {
                   1966:             if ($attr->{class} eq 'QUESTION_BLOCK') {
                   1967:                 $curr_block_type = 'question';
                   1968:             } elsif ($attr->{class} eq 'RESPONSE_BLOCK') {
1.29      raeburn  1969:                 $curr_block_type = 'response';
1.30      raeburn  1970:                 if ($curr_class eq 'Matching') {
                   1971:                     $responselid = 'flow response_lid';
                   1972:                 } else {
                   1973:                     $responselid = 'response_lid';
                   1974:                 }
                   1975:             } elsif (($attr->{class} eq 'RIGHT_MATCH_BLOCK')) {
                   1976:                 $numchoice = 0;
1.29      raeburn  1977:                 $curr_block_type = 'rightmatch';
1.30      raeburn  1978:             }
1.29      raeburn  1979:         }
1.30      raeburn  1980:         if ("@state" eq "$presfrag flow") {
                   1981:             if (($curr_block_type =~ /^rightmatch/)  && ($attr->{class} eq 'Block')) {
                   1982:                 $curr_block_type = 'rightmatch'.$numchoice;
                   1983:                 $numchoice ++;
1.29      raeburn  1984:             }
1.28      raeburn  1985:         }
1.30      raeburn  1986:         if ($state[-1] eq 'flow') {
                   1987:             $curr_flow = $attr->{class};
1.28      raeburn  1988:         }
1.30      raeburn  1989:         if ($state[-1] eq 'flow_mat') {
                   1990:             $curr_flow_mat = $attr->{class};
                   1991:         }
                   1992:         if ("@state" eq "$presfrag $blockflow material mat_extension mat_formattedtext") {
1.29      raeburn  1993:             $$settings{$id}{$curr_block_type}{texttype} = $attr->{texttype};
1.28      raeburn  1994:         }
1.30      raeburn  1995:         if ("@state" eq "$presfrag $blockflow material matapplication") {
1.29      raeburn  1996:             $$settings{$id}{$curr_block_type}{image} = $attr->{uri};
                   1997:             $$settings{$id}{$curr_block_type}{style} = $attr->{embedded};
                   1998:             $$settings{$id}{$curr_block_type}{label} = $attr->{label};
1.28      raeburn  1999:         }
1.30      raeburn  2000:         if ("@state" eq "$presfrag $blockflow material mattext") {
1.29      raeburn  2001:             $$settings{$id}{$curr_block_type}{link} = $attr->{uri};
1.28      raeburn  2002:         }
1.30      raeburn  2003:         if ("@state" eq "$presfrag $responselid") {
                   2004:             $response = $attr->{ident};
                   2005:             $labelcount = 0; 
1.29      raeburn  2006:             if ($curr_class eq 'Matching') {
1.30      raeburn  2007:                 push(@{$$settings{$id}{answers}},$response);
1.29      raeburn  2008:                 %{$$settings{$id}{$response}} = ();
                   2009:                 foreach my $key (keys(%{$$settings{$id}{$curr_block_type}})) {
                   2010:                     $$settings{$id}{$response}{$key} = $$settings{$id}{$curr_block_type}{$key};
                   2011:                 }
                   2012:                 %{$$settings{$id}{$curr_block_type}} = ();
                   2013:             }
                   2014:         }
1.30      raeburn  2015:         if ("@state" eq "$presfrag $responselid render_choice") {
                   2016:             $curr_shuffle = $attr->{shuffle};
                   2017:         }
                   2018:         if ("@state" eq "$presfrag $responselid render_choice flow_label response_label") {
                   2019:             $foil = $attr->{ident};
                   2020:             %{$$settings{$id}{$foil}} = ();
                   2021:             $$settings{$id}{$foil}{randomize} = $curr_shuffle;
                   2022:             unless ($curr_class eq 'Essay'){
                   2023:                 if ($curr_class eq 'Matching') {
                   2024:                     push(@{$$settings{$id}{$response}{items}},$foil);
                   2025:                     $$settings{$id}{$foil}{order} = $labelcount;
                   2026:                     $labelcount ++;
                   2027:                 } else {
                   2028:                     push(@{$$settings{$id}{answers}},$foil);
                   2029:                     @{$$settings{$id}{correctanswer}} = ();
                   2030:                 }
                   2031:             }
                   2032:         }
                   2033:         if ("@state" eq "$presfrag $responselid render_choice flow_label response_label flow_mat material matapplication") {
                   2034:             $$settings{$id}{$foil}{filetype} = $attr->{embedded};
                   2035:             $$settings{$id}{$foil}{label} = $attr->{label};
                   2036:             $$settings{$id}{$foil}{uri} = $attr->{uri};
                   2037:         }
                   2038:         if ("@state" eq "$presfrag $responselid render_choice flow_label response_label flow_mat material mattext") {
                   2039:             $$settings{$id}{$foil}{link} = $attr->{uri};
1.29      raeburn  2040:         }
1.30      raeburn  2041:         if ("@state" eq "questestinterop assessment section item resprocessing") {
                   2042:             if ($curr_class eq 'Matching') {
                   2043:                 $$settings{$id}{allchoices} = $numchoice;
                   2044:             }
1.29      raeburn  2045:         }
1.30      raeburn  2046:         if ("@state" eq "questestinterop assessment section item resprocessing respcondition conditionvar varequal") {
1.29      raeburn  2047:             if ($curr_class eq 'Matching') { 
                   2048:                 $curr_matchitem = $attr->{respident};
1.28      raeburn  2049:             }
                   2050:         }
1.30      raeburn  2051:         if ("@state" eq $feedbackfrag) {
1.28      raeburn  2052:             $curr_feedback_type = $attr->{ident};
1.30      raeburn  2053:             $feedback_tag = "";
                   2054:         }
                   2055:         if ("@state" eq "$feedbackfrag solution") {
                   2056:             $curr_feedback_type = 'solution';
                   2057:             $feedback_tag = "solution solutionmaterial";
1.28      raeburn  2058:         }
1.30      raeburn  2059:         if ("@state" eq "$feedbackfrag $feedback_tag flow_mat flow_mat material matapplication") {
1.28      raeburn  2060:             $$settings{$id}{$curr_feedback_type.'feedback'}{filetype} = $attr->{'embedded'};
                   2061:             $$settings{$id}{$curr_feedback_type.'feedback'}{label} = $attr->{label};
1.30      raeburn  2062:             $$settings{$id}{$curr_feedback_type.'feedback'}{uri} = $attr->{uri};
1.28      raeburn  2063:         }
1.30      raeburn  2064:         if ("@state" eq "$feedbackfrag $feedback_tag flow_mat flow_mat material mattext") {
1.28      raeburn  2065:             $$settings{$id}{$curr_feedback_type.'feedback'}{link} = $attr->{uri};
                   2066:         }
                   2067:      }, "tagname, attr"],
                   2068:      text_h =>
                   2069:      [sub {
                   2070:         my ($text) = @_;
                   2071:         $text =~ s/^\s+//g;
                   2072:         $text =~ s/\s+$//g;
                   2073:         if ("@state" eq "questestinterop assessment rubric flow_mat material mat_extension mat_formattedtext") {
1.30      raeburn  2074:             $$settings{description}{text} = $text;
                   2075:         }
                   2076:         if ("@state" eq "questestinterop assessment rubric flow_mat material mattext") {
                   2077:             $$settings{description}{text} = $text;
                   2078:         }
                   2079:         if ("@state" eq "$instructionfrag mat_extension mat_formattedtext") {
                   2080:             $$settings{instructions}{text} = $text;
                   2081:         }
                   2082:         if ("@state" eq "$instructionfrag mattext") {
1.28      raeburn  2083:             $$settings{instructions}{text} = $text;
                   2084:         }
                   2085:         if ("@state" eq "questestinterop assessment section item itemmetadata bbmd_asi_object_id") {
                   2086:             $id = $text;
                   2087:             push @{$allids}, $id;
                   2088:             %{$$settings{$id}} = ();
1.30      raeburn  2089:             @{$$settings{$id}{answers}} = ();
1.29      raeburn  2090:             %{$$settings{$id}{question}} = ();
1.28      raeburn  2091:             %{$$settings{$id}{correctfeedback}} = ();
                   2092:             %{$$settings{$id}{incorrectfeedback}} = ();
1.29      raeburn  2093:             %{$$settings{$id}{solutionfeedback}} = ();
1.28      raeburn  2094:         }
                   2095:         if ("@state" eq "questestinterop assessment section item itemmetadata bbmd_questiontype") {
                   2096:             $$settings{$id}{class} = $text;
1.29      raeburn  2097:             $curr_class = $text;
1.30      raeburn  2098:             if ($curr_class eq 'Matching') {
                   2099:                 $blockflow = 'flow flow';
                   2100:             } else {
                   2101:                 $blockflow = 'flow';
                   2102:             } 
1.28      raeburn  2103:         }
1.30      raeburn  2104:         if ("@state" eq "$presfrag $blockflow material mat_extension mat_formattedtext") {
1.29      raeburn  2105:             $$settings{$id}{$curr_block_type}{text} = $text;
1.28      raeburn  2106:         }
1.30      raeburn  2107:         if ("@state" eq "$presfrag $blockflow material mattext") {
                   2108:             if ($curr_flow eq 'LINK_BLOCK') { 
                   2109:                 $$settings{$id}{$curr_block_type}{linkname} = $text;
                   2110:             } elsif ($curr_flow eq 'FORMATTED_TEXT_BLOCK') {
                   2111:                 $$settings{$id}{$curr_block_type}{text} = $text;
                   2112:             }
1.28      raeburn  2113:         }
1.30      raeburn  2114:         if ("@state" eq "$presfrag $responselid render_choice flow_label response_label flow_mat material mat_extension mat_formattedtext") {
                   2115:             $$settings{$id}{$foil}{text} = $text;
                   2116:         }
                   2117:         if ("@state" eq "$presfrag $responselid render_choice flow_label response_label flow_mat material mattext") {
                   2118:             if ($curr_flow_mat eq 'LINK_BLOCK') {
                   2119:                 $$settings{$id}{$foil}{linkname} = $text;
                   2120:             } else {
                   2121:                 $$settings{$id}{$foil}{text} = $text;
                   2122:             } 
1.28      raeburn  2123:         }
1.30      raeburn  2124:         if ("@state" eq "questestinterop assessment section item resprocessing respcondition conditionvar varequal") {
                   2125:             if ($curr_class eq 'Matching') {
1.29      raeburn  2126:                 $$settings{$id}{$curr_matchitem}{correctanswer} = $text;
1.30      raeburn  2127:             } else {
                   2128:                 push(@{$$settings{$id}{correctanswer}},$text);
1.28      raeburn  2129:             }
                   2130:         }
1.30      raeburn  2131:         if ("@state" eq "questestinterop assessment section item resprocessing respcondition conditionvar") {
                   2132:             $numorder = 0;
1.29      raeburn  2133:         }
1.30      raeburn  2134:         if ("@state" eq "questestinterop assessment section item resprocessing respcondition conditionvar and varequal") {
                   2135:             push(@{$$settings{$id}{correctanswer}},$text);
                   2136:             if ($curr_class eq 'Ordering') {
                   2137:                 $numorder ++;
                   2138:                 $$settings{$id}{$text}{order} = $numorder;
                   2139:             }
                   2140:         }
                   2141:         if ("@state" eq "$feedbackfrag $feedback_tag flow_mat flow_mat material mat_extension mat_formattedtext") {
1.28      raeburn  2142:             $$settings{$id}{$curr_feedback_type.'feedback'}{text} = $text;
                   2143:         }
1.30      raeburn  2144:         if ("@state" eq "$feedbackfrag $feedback_tag flow_mat flow_mat material mattext") {
1.28      raeburn  2145:             $$settings{$id}{$curr_feedback_type.'feedback'}{linkname} = $text;
                   2146:         }
                   2147:      }, "dtext"],
                   2148:      end_h =>
                   2149:      [sub {
                   2150:         my ($tagname) = @_;
                   2151:         pop @state;
                   2152:      }, "tagname"],
                   2153:     );
                   2154:     $p->unbroken_text(1);
                   2155:     $p->marked_sections(1);
                   2156:     $p->parse_file($xmlfile);
                   2157:     $p->eof;
                   2158:     return;
1.15      raeburn  2159: }
                   2160: 
1.35      raeburn  2161: sub parse_webctvista4_assessment {
                   2162:     my ($res,$docroot,$href,$allids,$qzparams) = @_;
                   2163:     my $xmlfile = $docroot.'/'.$href; #assessment file
                   2164:     my @state = ();
                   2165:     my $id; # the current question ID
                   2166:     my $fieldlabel; # the current qti metadata field label
                   2167:     my $outcome_id; # the current question ID for outcomes conditions
                   2168:     my $pname; # the current outcomes parameter name
                   2169:     my $numids = 0;
                   2170:     %{$$qzparams{$res}} = ();
                   2171:     %{$$qzparams{$res}{weight}} = ();
                   2172: 
                   2173:     my $p = HTML::Parser->new
                   2174:     (
                   2175:      xml_mode => 1,
                   2176:      start_h =>
                   2177:      [sub {
                   2178:         my ($tagname, $attr) = @_;
                   2179:         push @state, $tagname;
                   2180:         my @seq = ();
                   2181:         if ("@state" eq "questestinterop assessment section itemref") {
                   2182:             $id = $attr->{linkrefid};
                   2183:             push(@{$allids},$id);
                   2184:             $numids ++;
                   2185:         }
                   2186:         if ("@state" eq "questestinterop assessment section selection_ordering order") {
                   2187:            $$qzparams{$res}{order_type} = $attr->{order_type};
                   2188:         }
                   2189: 
                   2190:      }, "tagname, attr"],
                   2191:      text_h =>
                   2192:      [sub {
                   2193:         my ($text) = @_;
                   2194:         if ("@state" eq "questestinterop assessment qtimetadata qtimetadatafield fieldlabel") {
                   2195:             $fieldlabel = $text;
                   2196:         }
                   2197:         if ("@state" eq "questestinterop assessment qtimetadata qtimetadatafield fieldentry") {
                   2198:             $$qzparams{$res}{$fieldlabel} = $text;
                   2199:         }
                   2200:         if ("@state" eq "questestinterop assessment section outcomes_processing objects_condition outcomes_metadata") {
                   2201:             $outcome_id = $text;
                   2202:         }
                   2203:         if ("@state" eq "questestinterop assessment section outcomes_processing objects_condition objects_parameter") {
                   2204:             if ($pname eq 'qmd_weighting') {
                   2205:                 $$qzparams{$res}{weight}{$outcome_id} = $text;
                   2206:             }
                   2207:         }
                   2208:         if ("@state" eq "questestinterop assessment section selection_ordering selection selection_number") {
                   2209:             $$qzparams{$res}{numpick} = $text;
                   2210:         }
                   2211:       }, "dtext"],
                   2212:      end_h =>
                   2213:      [sub {
                   2214:         my ($tagname) = @_;
                   2215:         pop @state;
                   2216:      }, "tagname"],
                   2217:     );
                   2218:     $p->unbroken_text(1);
                   2219:     $p->parse_file($xmlfile);
                   2220:     $p->eof;
                   2221:     unless(defined($$qzparams{$res}{numpick})) {
                   2222:         $$qzparams{$res}{numpick} = $numids;
                   2223:     }
                   2224: }
                   2225: 
                   2226: sub parse_webctvista4_question {
                   2227:     my ($res,$docroot,$resources,$hrefs,$settings,$allquestids,$allanswers,$allchoices,$parent,$catinfo) = @_;
                   2228:     my $xmlfile = $docroot.'/'.$$resources{$res}{file};
                   2229:     my %classtypes = (
                   2230:                       WCT_Calculated => 'numerical',
                   2231:                       WCT_TrueFalse => 'multiplechoice',
                   2232:                       WCT_ShortAnswer => 'shortanswer',
                   2233:                       WCT_Paragraph => 'paragraph',
                   2234:                       WCT_MultipleChoice => 'multiplechoice',
                   2235:                       WCT_Matching => 'match',
                   2236:                       WCT_JumbledSentence => 'jumbled',
                   2237:                       WCT_FillInTheBlank => 'string',
                   2238:                       WCT_Combination => 'combination'
                   2239:     );
                   2240:     my @state = ();
                   2241:     my $fieldlabel;
                   2242:     my %questiondata;
                   2243:     my $id; # the current question ID
                   2244:     my $list; # the current list ID for multiple choice questions 
                   2245:     my $numid; # the current answer ID for numerical questions
                   2246:     my $grp; # the current group ID for matching questions
                   2247:     my $label; # the current reponse label for string questions
                   2248:     my $str_id; # the current string ID for string questions
                   2249:     my $unitid; # the current unit ID for numerical questions
                   2250:     my $answer_id;  # the current answer ID 
                   2251:     my $fdbk; # the current feedback ID
                   2252:     my $currvar; # the current variable for numerical problems
                   2253:     my $fibtype; # the current fill-in-blank type for numerical or string
                   2254:     my $prompt;
                   2255:     my $rows;
                   2256:     my $columns;
                   2257:     my $maxchars;
                   2258:     my %setvar = (
                   2259:                    varname => '',
                   2260:                    action => '',
                   2261:                  );
                   2262:     my $currtexttype;
                   2263:     my $jumble_item;
                   2264:     my $numbox = 0;
                   2265:     my %str_answers = ();
                   2266:     my $textlabel;
                   2267:     my $currindex;
                   2268:     my %varinfo = ();
                   2269:     my $formula;
1.37      raeburn  2270:     my $jumbnum = 0;
1.35      raeburn  2271:     my $p = HTML::Parser->new
                   2272:     (
                   2273:      xml_mode => 1,
                   2274:      start_h =>
                   2275:      [sub {
                   2276:         my ($tagname, $attr) = @_;
                   2277:         push @state, $tagname;
                   2278:         if ("@state" eq "questestinterop item") {
                   2279:             $id = $attr->{ident};
                   2280:             push(@{$allquestids},$id);
                   2281:             %{$$settings{$id}} = ();
                   2282:             %{$varinfo{$id}} = ();
                   2283:             @{$$allchoices{$id}} = ();
                   2284:             @{$$settings{$id}{grps}} = ();
                   2285:             @{$$settings{$id}{lists}} = ();
                   2286:             @{$$settings{$id}{feedback}} = ();
                   2287:             @{$$settings{$id}{str}} = ();
                   2288:             %{$$settings{$id}{strings}} = ();
                   2289:             @{$$settings{$id}{numids}} = ();
                   2290:             %{$$allanswers{$id}} = ();
                   2291:             $$settings{$id}{title} = $attr->{title};
                   2292:         }
                   2293:         if ("@state" eq "questestinterop item presentation flow material mat_extension webct:calculated webct:var") {
                   2294:             $currvar = $attr->{'webct:name'};
                   2295:             %{$varinfo{$id}{$currvar}} = ();
                   2296:             $varinfo{$id}{$currvar}{min} = $attr->{'webct:min'};
                   2297:             $varinfo{$id}{$currvar}{max} = $attr->{'webct:max'};
                   2298:             $varinfo{$id}{$currvar}{precision} = $attr->{'webct:precision'};
                   2299:         }
                   2300:         if ("@state" eq "questestinterop item presentation flow response_num") {
                   2301:             $numid = $attr->{ident};
                   2302:             push(@{$$settings{$id}{numids}},$numid);
                   2303:             %{$$settings{$id}{$numid}} = ();
                   2304:             %{$$settings{$id}{$numid}{vars}} = ();
                   2305:             @{$$settings{$id}{$numid}{units}} = ();
                   2306:             $$settings{$id}{$numid}{rcardinality} = $attr->{rcardinality};
                   2307:             $$settings{$id}{$numid}{formula} = $formula;
                   2308:             foreach my $var (keys(%{$varinfo{$id}})) {
                   2309:                 %{$$settings{$id}{$numid}{vars}{$var}} = %{$varinfo{$id}{$var}};
                   2310:             }
                   2311:         }
                   2312:         if ("@state" eq "questestinterop item presentation flow material mat_extension webct:variable") {
                   2313:             $$settings{$id}{text} .= '['.$attr->{'webct:name'}.']';
                   2314:         }
                   2315:         if ("@state" eq "questestinterop item presentation flow material matimage") {
                   2316:             $$settings{$id}{image} = $attr->{uri};
                   2317:         }
                   2318: 
                   2319:         if ("@state" eq "questestinterop item presentation flow material mattext")  {
                   2320:             $currtexttype = lc($attr->{texttype});
                   2321:             $$settings{$id}{texttype} = $currtexttype;
                   2322:             if ($$settings{$id}{class} eq 'combination') {
                   2323:                 if (exists($attr->{label})) {
                   2324:                     $textlabel = $attr->{label};
                   2325:                 } else {
                   2326:                     $textlabel = '';
                   2327:                 }
                   2328:             }
                   2329:         }
                   2330:         if ("@state" eq "questestinterop item presentation flow response_lid") {
                   2331:             $list = $attr->{ident};
                   2332:             push(@{$$settings{$id}{lists}},$list);
                   2333:             %{$$settings{$id}{$list}} = ();
                   2334:             @{$$allanswers{$id}{$list}} = ();
                   2335:             @{$$settings{$id}{$list}{correctanswer}} = ();
1.37      raeburn  2336:             @{$$settings{$id}{$list}{jumbledtext}} = ();
                   2337:             @{$$settings{$id}{$list}{jumbledtype}} = ();
1.35      raeburn  2338:             @{$$settings{$id}{$list}{jumbled}} = ();
                   2339:             $$settings{$id}{$list}{rcardinality} = $attr->{rcardinality};
                   2340:         }
                   2341: # Jumbled sentence
                   2342:         if ("@state" eq "questestinterop item presentation flow response_lid render_extension ims_render_object")  {
                   2343:             $$settings{$id}{$list}{orientation} = $attr->{orientation};
                   2344:         }
                   2345:         if ("@state" eq "questestinterop item presentation flow response_lid render_extension ims_render_object material mattext")  {
                   2346:             $currtexttype = lc($attr->{texttype});
                   2347:             $$settings{$id}{$list}{texttype} = $currtexttype;
                   2348:         }
                   2349:         if ("@state" eq "questestinterop item presentation flow response_lid render_extension ims_render_object response_label")  {
                   2350:             $jumble_item = $attr->{ident};
                   2351:         }
                   2352:         if ("@state" eq "questestinterop item presentation flow response_lid render_extension ims_render_object response_label material mattext")  {
                   2353:             $currtexttype = lc($attr->{texttype});
                   2354:             $$settings{$id}{$list}{$jumble_item}{texttype} = $currtexttype;
                   2355:         }
1.37      raeburn  2356:         if ("@state" eq "questestinterop item resprocessing respcondition") { # Jumbled
                   2357:             if ($$settings{$id}{class} eq 'jumbled') {
                   2358:                 $jumbnum ++;
                   2359:                 @{$$settings{$id}{$list}{jumbled}[$jumbnum]} = (); 
                   2360:             }
                   2361:         }
                   2362: 
1.35      raeburn  2363:         if ("@state" eq "questestinterop item resprocessing respcondition conditionvar and varequal") { # Jumbled
                   2364:             $currindex = $attr->{index};
                   2365:         }
                   2366:         if ("@state" eq "questestinterop item presentation flow response_lid render_choice") {
                   2367:             $$settings{$id}{$list}{randomize} = $attr->{shuffle};
                   2368:         }
1.38    ! raeburn  2369: # Multiple Choice, True/False and Combination
1.35      raeburn  2370:         if ("@state" eq "questestinterop item presentation flow response_lid render_choice flow_label response_label") {
                   2371:             $answer_id = $attr->{ident};
                   2372:             push(@{$$allanswers{$id}{$list}},$answer_id);
                   2373:             %{$$settings{$id}{$list}{$answer_id}} = ();
                   2374:         }
                   2375: # True/False
                   2376:         if ("@state" eq "questestinterop item presentation flow response_lid render_choice flow_label response_label material mat_extension webct:localizable_mattext") {
                   2377:             $currtexttype = lc($attr->{texttype});
                   2378:             $$settings{$id}{$list}{$answer_id}{texttype} = $currtexttype;
                   2379:         }
                   2380: 
                   2381: # Multiple Choice and Combination
                   2382:         if ("@state" eq "questestinterop item presentation flow response_lid render_choice flow_label response_label material mattext") {
                   2383:             $currtexttype = lc($attr->{texttype});
                   2384:             $$settings{$id}{$list}{$answer_id}{texttype} = $currtexttype;
                   2385:         }
                   2386: 
                   2387: # String, Shortanswer or Paragraph
                   2388:         if (($$settings{$id}{class} eq 'string') || 
                   2389:             ($$settings{$id}{class} eq 'shortanswer') ||
                   2390:             ($$settings{$id}{class} eq 'paragraph')) { 
                   2391:             if ("@state" eq "questestinterop item presentation flow response_str") {
                   2392:                 $str_id = $attr->{ident};
                   2393:                 %{$$settings{$id}{$str_id}} = ();
                   2394:                 push(@{$$settings{$id}{str}},$str_id);
                   2395:                 $$settings{$id}{$str_id}{rcardinality} = $attr->{rcardinality};
                   2396:                 @{$$settings{$id}{$str_id}{labels}} = ();
                   2397:                 %{$$settings{$id}{$str_id}{comparison}} = ();
                   2398:             }
                   2399:         }
                   2400:         if ("@state" eq "questestinterop item presentation flow response_str material mattext") { # string
                   2401:             $currtexttype = lc($attr->{texttype});
                   2402:             $$settings{$id}{$str_id}{texttype} = $currtexttype;
                   2403:         }
                   2404:         if ("@state" eq "questestinterop item presentation flow response_str render_fib") {
                   2405:             $fibtype = $attr->{fibtype};
                   2406:             $prompt = $attr->{prompt};
                   2407:             $rows = $attr->{rows};
                   2408:             $columns = $attr->{columns};
                   2409:             $maxchars = $attr->{maxchars};
                   2410:         }
                   2411:         if ("@state" eq "questestinterop item presentation flow response_str render_fib response_label") {
                   2412:             push(@{$$settings{$id}{$str_id}{labels}},$label);
                   2413:             @{$$settings{$id}{strings}{$str_id}} = ();
                   2414:             %{$$settings{$id}{$str_id}{$label}} = ();
                   2415:             $$settings{$id}{$str_id}{$label}{fibtype} = $fibtype;
                   2416:             if ($$settings{$id}{class} eq 'string') {
                   2417:                 $$settings{$id}{text} .= '[blank]';
                   2418:             }
                   2419:         }
                   2420:         if ("@state" eq "questestinterop item presentation flow response_str render_fib response_label material mattext") { # Paragraph
                   2421:             $textlabel = $attr->{label}; 
                   2422:         }
                   2423: # Matching
                   2424:         if ("@state" eq "questestinterop item presentation flow flow response_grp") {
                   2425:             $grp = $attr->{ident};
                   2426:             push(@{$$settings{$id}{grps}},$grp);
                   2427:             %{$$settings{$id}{$grp}} = ();
1.38    ! raeburn  2428:             @{$$allanswers{$id}{$grp}} = ();
1.35      raeburn  2429:             @{$$settings{$id}{$grp}{correctanswer}} = ();
                   2430:             $$settings{$id}{$grp}{rcardinality} = $attr->{rcardinality};
                   2431:         }
                   2432:         if ("@state" eq "questestinterop item presentation flow flow response_grp material mattext") {
                   2433:             $currtexttype = lc($attr->{texttype});
                   2434:             $$settings{$id}{$grp}{texttype} = $currtexttype;
                   2435:         }
1.38    ! raeburn  2436:         if ("@state" eq "questestinterop item presentation flow flow response_grp render_choice flow_label response_label") {
1.35      raeburn  2437:             $answer_id = $attr->{ident};
                   2438:             push(@{$$allanswers{$id}{$grp}},$answer_id);
                   2439:             %{$$settings{$id}{$grp}{$answer_id}} = ();
                   2440:             $currtexttype = lc($attr->{texttype});
                   2441:             $$settings{$id}{$grp}{$answer_id}{texttype} =  $currtexttype;
                   2442:         }
                   2443: # Multiple choice or combination or string or match 
                   2444:         if ("@state" eq "questestinterop item resprocessing respcondition conditionvar varequal") {
                   2445:             if (($$settings{$id}{class} eq 'multiplechoice') || 
                   2446:                 ($$settings{$id}{class} eq 'combination')) {
                   2447:                 $list = $attr->{respident};
                   2448:             } elsif (($$settings{$id}{class} eq 'string') ||
                   2449:                      ($$settings{$id}{class} eq 'shortanswer')) {
                   2450:                 $label = $attr->{respident};
                   2451:             } elsif ($$settings{$id}{class} eq 'match') {
                   2452:                 $grp = $attr->{respident};
                   2453:             }
                   2454:         }
                   2455:         if ("@state" eq "questestinterop item resprocessing") {
                   2456:             if (($$settings{$id}{class} eq 'string') ||
                   2457:                 ($$settings{$id}{class} eq 'shortanswer')) {
                   2458:                 foreach my $str_id (@{$$settings{$id}{str}}) {
                   2459:                     @{$str_answers{$str_id}} = ();
                   2460:                 }
                   2461:             }
                   2462:         }
                   2463:         if ("@state" eq "questestinterop item resprocessing respcondition") {
                   2464:             if (($$settings{$id}{class} eq 'string') ||
                   2465:                 ($$settings{$id}{class} eq 'shortanswer')) { 
                   2466:                 $numbox ++;
                   2467:             }
                   2468:         }
                   2469:         if ("@state" eq "questestinterop item resprocessing respcondition setvar") {
                   2470:             foreach my $key (keys(%{$attr})) {
                   2471:                 $setvar{$key} = $attr->{$key};
                   2472:             }
                   2473:         }
                   2474:         if (($$settings{$id}{class} eq 'string') ||
                   2475:             ($$settings{$id}{class} eq 'shortanswer')) {
                   2476:             if (("@state" eq "questestinterop item resprocessing respcondition conditionvar or varsubset") || ("@state" eq "questestinterop item resprocessing respcondition conditionvar varsubset")) {
                   2477:                 $str_id = $attr->{respident};
                   2478:                 $$settings{$id}{$str_id}{case} = $attr->{case};
                   2479:             }
                   2480:         }
                   2481:         if ("@state" eq "questestinterop item resprocessing respcondition conditionvar and varsubset") {
                   2482:             $list = $attr->{respident};
                   2483:         }
                   2484: # Numerical
                   2485:         if ("@state" eq "questestinterop item resprocessing itemproc_extension webct:calculated_answer") {
                   2486:             $numid = $attr->{respident};
                   2487:             $$settings{$id}{$numid}{toltype} = $attr->{'webct:toleranceType'};
                   2488:             $$settings{$id}{$numid}{tolerance} = $attr->{'webct:tolerance'};
                   2489:         }
                   2490:         if ("@state" eq "questestinterop item resprocessing itemproc_extension unit_eval conditionvar varequal") {
                   2491:             $unitid = $attr->{respident};
                   2492:             %{$$settings{$id}{$numid}{$unitid}} = ();
                   2493:             push(@{$$settings{$id}{$numid}{units}},$unitid);
                   2494:             $$settings{$id}{$numid}{$unitid}{case} = $attr->{case};
                   2495:         }
                   2496: # Feedback
                   2497:         if ("@state" eq "questestinterop item respcondition displayfeedback") {
                   2498:             $fdbk = $attr->{linkrefid};
                   2499:             push(@{$$settings{$id}{feedback}},$fdbk);
                   2500:             $$settings{$id}{$fdbk} = ();
                   2501:             $$settings{$id}{$fdbk}{feedbacktype} = $attr->{feedbacktype};
                   2502:         }
                   2503:         if ("@state" eq "questestinterop item itemfeedback") {
                   2504:             $fdbk = $attr->{ident};
                   2505:             push(@{$$settings{$id}{feedback}},$fdbk);
                   2506:             $$settings{$id}{$fdbk}{view} = $attr->{view};
                   2507:         }
                   2508:         if ("@state" eq "questestinterop item itemfeedback material mattext") {
                   2509:             $currtexttype = lc($attr->{texttype});
                   2510:             $$settings{$id}{$fdbk}{texttype} = $currtexttype;
                   2511:         }
                   2512:         if ("@state" eq "questestinterop item itemfeedback solution solutionmaterial material mattext") {
                   2513:             $currtexttype = lc($attr->{texttype});
                   2514:             $$settings{$id}{$fdbk}{texttype} = $currtexttype;
                   2515:         }
                   2516:      }, "tagname, attr"],
                   2517:      text_h =>
                   2518:      [sub {
                   2519:         my ($text) = @_;
                   2520:         if ($currtexttype eq '/text/html') {
                   2521:             $text =~ s#(&lt;img\ssrc=")([^"]+)"&gt;#$1../resfiles/$2#g;
                   2522:         }
                   2523:         if ("@state" eq "questestinterop item itemmetadata qtimetadata qtimetadatafield fieldlabel") {
                   2524:             $fieldlabel = $text;
                   2525:         }
                   2526:         if ("@state" eq "questestinterop item itemmetadata qtimetadata qtimetadatafield fieldentry") {
                   2527:             $questiondata{$fieldlabel} = $text;
                   2528:             if ($fieldlabel eq 'wct_questiontype') {
                   2529:                 $$settings{$id}{class} = $classtypes{$text};
                   2530:             } elsif ($fieldlabel eq 'wct_questioncategory') {
                   2531:                 $$settings{$id}{category} = $text;
                   2532:                 unless(exists($$catinfo{$text})) {
                   2533:                     %{$$catinfo{$text}} = ();
                   2534:                     $$catinfo{$text}{title} = $text;
                   2535:                 }
                   2536:                 push(@{$$catinfo{$text}{contents}},$id);
                   2537:             }
                   2538:         }
                   2539:         if ("@state" eq "questestinterop item presentation flow material mat_extension webct:calculated webct:formula") {
                   2540:             $formula = $text;
                   2541:         }
                   2542:         if ("@state" eq "questestinterop item presentation flow response_str material mattext") {
                   2543:             $$settings{$id}{$str_id}{text} = $text;
                   2544:         }
                   2545:         if ("@state" eq "questestinterop item presentation flow response_str render_fib response_label material mattext") { # Paragraph
                   2546:             if ($textlabel eq 'PRE_FILL_ANSWER') {
                   2547:                 $$settings{$id}{$str_id}{$label}{$textlabel} = $text;
                   2548:             }
                   2549:         }
1.38    ! raeburn  2550: # Matching
1.35      raeburn  2551:         if ("@state" eq "questestinterop item presentation flow response_lid render_choice flow_label response_label material mattext") {
                   2552:             $$settings{$id}{$list}{$answer_id}{text} .= $text;
                   2553:         }
1.38    ! raeburn  2554: # Multiple choice, True/False, Combination
1.35      raeburn  2555:         if ("@state" eq "questestinterop item presentation flow response_lid render_choice flow_label response_label material mat_extension webct:localizable_mattext") {
                   2556:             $$settings{$id}{$list}{$answer_id}{text} = $text;
                   2557:         }
                   2558:         if ("@state" eq "questestinterop item presentation flow response_lid render_extension ims_render_object material mattext")  {
1.37      raeburn  2559:             push(@{$$settings{$id}{$list}{jumbledtext}},$text);
                   2560:             push(@{$$settings{$id}{$list}{jumbledtype}},'No');
1.35      raeburn  2561:         }
                   2562:         if ("@state" eq "questestinterop item presentation flow response_lid render_extension ims_render_object response_label material mattext")  {
                   2563:             $$settings{$id}{$list}{$jumble_item}{text} = $text;
1.37      raeburn  2564:             push(@{$$settings{$id}{$list}{jumbledtext}},$text);
                   2565:             push(@{$$settings{$id}{$list}{jumbledtype}},'Yes');
1.35      raeburn  2566:         }
                   2567:         if ("@state" eq "questestinterop item presentation flow material mattext")  {
                   2568:             $$settings{$id}{text} .= $text;
                   2569:             if ($$settings{$id}{class} eq 'combination') {
                   2570:                 if ($textlabel =~ /^wct_question_label_\d+$/) {
1.36      raeburn  2571:                     $$settings{$id}{text} .= '<br />';
1.35      raeburn  2572:                 }
1.36      raeburn  2573:                 if ($textlabel =~ /^wct_cmc_single_answer\d+$/) {
                   2574:                     $$settings{$id}{text} .= '<br />';
1.35      raeburn  2575:                 }
                   2576:             }
                   2577:         }
1.38    ! raeburn  2578: # Matching
        !          2579:         if ("@state" eq "questestinterop item presentation flow flow response_grp material mattext")  {
        !          2580:             $$settings{$id}{$grp}{text} = $text;
        !          2581:             unless ($text eq '') {
        !          2582:                 push(@{$$allchoices{$id}},$grp);
        !          2583:             }
        !          2584:         }
        !          2585:         if ("@state" eq "questestinterop item presentation flow flow response_grp render_choice flow_label response_label material mattext") {
        !          2586:             $$settings{$id}{$grp}{$answer_id}{text} = $text;
        !          2587:         }
        !          2588: # Numerical
1.35      raeburn  2589:         if ("@state" eq "questestinterop item resprocessing itemproc_extension unit_eval conditionvar varequal") {
                   2590:             $$settings{$id}{$numid}{$unitid}{text} = $text;
                   2591:         }
                   2592:         if ("@state" eq "questestinterop item resprocessing respcondition conditionvar varequal") {
                   2593:             if (($$settings{$id}{class} eq 'string') ||
                   2594:                 ($$settings{$id}{class} eq 'shortanswer')) {
                   2595:                 unless (grep/^$text$/,@{$str_answers{$str_id}}) {
                   2596:                     push(@{$str_answers{$str_id}},$text);
                   2597:                     $$settings{$id}{$str_id}{comparison}{$text} = $questiondata{'wct_comparison_type'.$numbox};
                   2598:                 }
                   2599:             } else {
                   2600:                 $answer_id = $text;
                   2601:             }
                   2602:         }
                   2603:         if (("@state" eq "questestinterop item resprocessing respcondition conditionvar or varsubset") || ("@state" eq "questestinterop item resprocessing respcondition conditionvar varsubset")) { # string
                   2604:             if (($$settings{$id}{class} eq 'string') ||
                   2605:                 ($$settings{$id}{class} eq 'shortanswer')) {
                   2606:                 unless (grep/^$text$/,@{$str_answers{$str_id}}) {
                   2607:                     push(@{$str_answers{$str_id}},$text);
                   2608:                     $$settings{$id}{$str_id}{comparison}{$text} = $questiondata{'wct_comparison_type'.$numbox};
                   2609:                 }
                   2610:             }
                   2611:         }
1.37      raeburn  2612: 
1.35      raeburn  2613:         if ("@state" eq "questestinterop item resprocessing respcondition conditionvar and varequal") { # Jumbled
1.37      raeburn  2614:             $$settings{$id}{$list}{jumbled}[$jumbnum][$currindex] = $text;
1.35      raeburn  2615:         }
                   2616:         if ("@state" eq "questestinterop item resprocessing respcondition setvar") {
                   2617:             if ($setvar{varname} eq "SCORE") { # Multiple Choice, String or Match
                   2618:                 if ($text =~ m/^[\d\.]+$/) {
                   2619:                     if ($text > 0) {
                   2620:                         if (($$settings{$id}{class} eq 'multiplechoice') ||
                   2621:                             ($$settings{$id}{class} eq 'combination')) {
                   2622:                             push(@{$$settings{$id}{$list}{correctanswer}},$answer_id);
                   2623:                         } elsif (($$settings{$id}{class} eq 'string') ||
                   2624:                                  ($$settings{$id}{class} eq 'shortanswer')) {
                   2625:                             foreach my $answer (@{$str_answers{$str_id}}) {
                   2626:                                 unless (grep/^$answer$/,@{$$settings{$id}{strings}{$str_id}}) {
                   2627:                                     push(@{$$settings{$id}{strings}{$str_id}},$answer);
                   2628:                                 }
                   2629:                             }
                   2630:                         } elsif ($$settings{$id}{class} eq 'match') {
                   2631:                             push(@{$$settings{$id}{$grp}{correctanswer}},$answer_id);
                   2632:                         }
                   2633:                     }
                   2634:                 }
                   2635:             }
                   2636:         }
                   2637:         if ("@state" eq "questestinterop item itemfeedback material mattext") {
                   2638:             $$settings{$id}{$fdbk}{text} = $text;
                   2639:         }
                   2640:         if ("@state" eq "questestinterop item itemfeedback solution solutionmaterial material mattext") {
                   2641:             $$settings{$id}{$fdbk}{text} = $text;
                   2642:         }
                   2643:       }, "dtext"],
                   2644:      end_h =>
                   2645:      [sub {
                   2646:         my ($tagname) = @_;
                   2647:         pop @state;
                   2648:      }, "tagname"],
                   2649:     );
                   2650:     $p->unbroken_text(1);
                   2651:     $p->parse_file($xmlfile);
                   2652:     $p->eof;
                   2653: }
                   2654: 
1.15      raeburn  2655: sub parse_webct4_assessment {
1.16      raeburn  2656:     my ($res,$docroot,$href,$container,$allids) = @_;
                   2657:     my $xmlfile = $docroot.'/'.$href; #quiz file
1.15      raeburn  2658:     my @state = ();
                   2659:     my $id; # the current question ID
                   2660:     my $p = HTML::Parser->new
                   2661:     (
                   2662:      xml_mode => 1,
                   2663:      start_h =>
                   2664:      [sub {
                   2665:         my ($tagname, $attr) = @_;
                   2666:         push @state, $tagname;
                   2667:         my $depth = 0;
                   2668:         my @seq = ();
                   2669:         if ("@state" eq "questestinterop assessment section itemref") {
                   2670:             $id = $attr->{linkrefid}; 
                   2671:             push(@{$allids},$id);
                   2672:         }
                   2673:      }, "tagname, attr"],
                   2674:      text_h =>
                   2675:      [sub {
                   2676:         my ($text) = @_;
                   2677:       }, "dtext"],
                   2678:      end_h =>
                   2679:      [sub {
                   2680:         my ($tagname) = @_;
                   2681:         pop @state;
                   2682:      }, "tagname"],
                   2683:     );
                   2684:     $p->unbroken_text(1);
                   2685:     $p->parse_file($xmlfile);
                   2686:     $p->eof;
                   2687: }
                   2688: 
1.16      raeburn  2689: sub parse_webct4_quizprops {
                   2690:     my ($res,$docroot,$href,$container,$qzparams) = @_;
                   2691:     my $xmlfile = $docroot.'/'.$href; #properties file
1.15      raeburn  2692:     my @state = ();
                   2693:     %{$$qzparams{$res}} = ();
                   2694:     my $p = HTML::Parser->new
                   2695:     (
                   2696:      xml_mode => 1,
                   2697:      start_h =>
                   2698:      [sub {
                   2699:         my ($tagname, $attr) = @_;
                   2700:         push @state, $tagname;
                   2701:      }, "tagname, attr"],
                   2702:      text_h =>
                   2703:      [sub {
                   2704:         my ($text) = @_;
                   2705:         if ($state[0] eq 'properties' && $state[1] eq 'delivery')  {
1.16      raeburn  2706:             if ($state[2] eq 'time_available') {
1.15      raeburn  2707:                 $$qzparams{$res}{opendate} = $text;
1.16      raeburn  2708:             } elsif ($state[2] eq 'time_due') {
1.18      raeburn  2709:                 $$qzparams{$res}{duedate} = $text;
1.16      raeburn  2710:             } elsif ($state[3] eq 'max_attempt') {
1.15      raeburn  2711:                 $$qzparams{$res}{tries} = $text;
1.16      raeburn  2712:             } elsif ($state[3] eq 'post_submission') {
1.15      raeburn  2713:                 $$qzparams{$res}{posts} = $text;
1.18      raeburn  2714:             } elsif ($state[3] eq 'method') {
                   2715:                 $$qzparams{$res}{method} = $text;
                   2716:             }
                   2717:         } elsif ($state[0] eq 'properties' && $state[1] eq 'processing')  {
                   2718:             if ($state[2] eq 'scores' && $state[3] eq 'score') {
                   2719:                 $$qzparams{$res}{weight} = $text;
                   2720:             } elsif ($state[2] eq 'selection' && $state[3] eq 'select') {
                   2721:                 $$qzparams{$res}{numpick} = $text;
1.16      raeburn  2722:             }
1.15      raeburn  2723:         } elsif ($state[0] eq 'properties' && $state[1] eq 'result') {
1.16      raeburn  2724:             if ($state[2] eq 'display_answer') {
1.18      raeburn  2725:                 $$qzparams{$res}{showanswer} = $text;
1.16      raeburn  2726:             }
1.15      raeburn  2727:         } 
                   2728:       }, "dtext"],
                   2729:      end_h =>
                   2730:      [sub {
                   2731:         my ($tagname) = @_;
                   2732:         pop @state;
                   2733:      }, "tagname"],
                   2734:     );
                   2735:     $p->unbroken_text(1);
                   2736:     $p->parse_file($xmlfile);
                   2737:     $p->eof;
                   2738: }
                   2739: 
                   2740: sub parse_webct4_questionDB {
1.16      raeburn  2741:     my ($docroot,$href,$catinfo,$settings,$allanswers,$allchoices,$allids) = @_;
                   2742:     $href =~ s#[^/]+$##;
                   2743:     my $xmlfile = $docroot.'/'.$href.'questionDB.xml'; #quizDB file
1.15      raeburn  2744:     my @state = ();
                   2745:     my $category; # the current category ID
                   2746:     my $id; # the current question ID
                   2747:     my $list; # the current list ID for multiple choice questions
                   2748:     my $numid; # the current answer ID for numerical questions
                   2749:     my $grp; # the current group ID for matching questions
                   2750:     my $label; # the current reponse label for string questions 
                   2751:     my $str_id; # the current string ID for string questions
                   2752:     my $unitid; # the current unit ID for numerical questions
                   2753:     my $answer_id; # the current answer ID
                   2754:     my $fdbk; # the current feedback ID
1.16      raeburn  2755:     my $currvar; # the current variable for numerical problems
                   2756:     my $fibtype; # the current fill-in-blank type for numerical or string
                   2757:     my $prompt;
                   2758:     my $boxnum; 
1.15      raeburn  2759:     my %setvar = (
                   2760:                    varname => '',
                   2761:                    action => '',
1.16      raeburn  2762:                  );
                   2763:     my $currtexttype;
                   2764:     my $currimagtype;  
1.15      raeburn  2765:     my $p = HTML::Parser->new
                   2766:     (
                   2767:      xml_mode => 1,
                   2768:      start_h =>
                   2769:      [sub {
                   2770:         my ($tagname, $attr) = @_;
                   2771:         push @state, $tagname;
                   2772:         if ("@state" eq "questestinterop section") {
                   2773:             $category = $attr->{ident};
                   2774:             %{$$catinfo{$category}} = ();
                   2775:             $$catinfo{$category}{title} = $attr->{title};   
                   2776:         }
                   2777:         if ("@state" eq "questestinterop section item") {
                   2778:             $id = $attr->{ident};
                   2779:             push @{$allids}, $id;
                   2780:             push(@{$$catinfo{$category}{contents}},$id);
                   2781:             %{$$settings{$id}} = ();
1.16      raeburn  2782:             @{$$allchoices{$id}} = ();
1.15      raeburn  2783:             @{$$settings{$id}{grps}} = ();
                   2784:             @{$$settings{$id}{lists}} = ();
                   2785:             @{$$settings{$id}{feedback}} = ();
1.16      raeburn  2786:             @{$$settings{$id}{str}} = ();
1.15      raeburn  2787:             %{$$settings{$id}{strings}} = ();
1.16      raeburn  2788:             @{$$settings{$id}{numids}} = ();
                   2789:             @{$$settings{$id}{boxes}} = ();
1.15      raeburn  2790:             %{$$allanswers{$id}} = ();
                   2791:             $$settings{$id}{title} = $attr->{title};
1.16      raeburn  2792:             $$settings{$id}{category} = $category;
                   2793:             $boxnum = 0;
1.15      raeburn  2794:         }
                   2795: 
                   2796:         if ("@state" eq "questestinterop section item presentation material mattext") {
                   2797:             $$settings{$id}{texttype} = $attr->{texttype};
1.16      raeburn  2798:             $currtexttype = $attr->{texttype};
1.15      raeburn  2799:         }
1.16      raeburn  2800:         if ("@state" eq "questestinterop section item presentation material matimage") {
                   2801:             $$settings{$id}{imagtype} = $attr->{imagtype};
                   2802:             $currimagtype = $attr->{imagtype};
                   2803:             $$settings{$id}{uri} = $attr->{uri};
                   2804:         }
                   2805: 
                   2806: # Matching
1.15      raeburn  2807:         if ("@state" eq "questestinterop section item presentation response_grp") {
1.16      raeburn  2808:             $$settings{$id}{class} = 'match';
1.15      raeburn  2809:             $grp = $attr->{ident};
                   2810:             push(@{$$settings{$id}{grps}},$grp);
                   2811:             %{$$settings{$id}{$grp}} = ();
                   2812:             @{$$settings{$id}{$grp}{correctanswer}} = ();
                   2813:             $$settings{$id}{$grp}{rcardinality} = $attr->{rcardinality};
                   2814:         }
                   2815:         if ("@state" eq "questestinterop section item presentation response_grp material mattext") { 
                   2816:             $$settings{$id}{$grp}{texttype} = $attr->{texttype};
1.16      raeburn  2817:             $currtexttype = $attr->{texttype};
1.15      raeburn  2818:         }
                   2819:         if ("@state" eq "questestinterop section item presentation response_grp render_choice response_label") {
                   2820:             $answer_id = $attr->{ident};
                   2821:             push(@{$$allanswers{$id}{$grp}},$answer_id);
                   2822:             %{$$settings{$id}{$grp}{$answer_id}} = ();
                   2823:             $$settings{$id}{$grp}{$answer_id}{texttype} =  $attr->{texttype};
1.16      raeburn  2824:             $currtexttype = $attr->{texttype};
1.15      raeburn  2825:         }
                   2826: 
                   2827: # Multiple choice
                   2828: 
                   2829:         if ("@state" eq "questestinterop section item presentation flow material mattext") {
                   2830:             $$settings{$id}{texttype} = $attr->{texttype};
1.16      raeburn  2831:             $currtexttype = $attr->{texttype};
1.15      raeburn  2832:         }
                   2833:         if ("@state" eq "questestinterop section item presentation flow response_lid") {
1.16      raeburn  2834:             $$settings{$id}{class} = 'multiplechoice';
1.15      raeburn  2835:             $list = $attr->{ident};
                   2836:             push(@{$$settings{$id}{lists}},$list);
                   2837:             %{$$settings{$id}{$list}} = ();
                   2838:             @{$$allanswers{$id}{$list}} = ();
                   2839:             @{$$settings{$id}{$list}{correctanswer}} = ();
                   2840:             $$settings{$id}{$list}{rcardinality} = $attr->{rcardinality};
                   2841:         }
                   2842:         if ("@state" eq "questestinterop section item presentation flow response_lid render_choice") {
                   2843:             $$settings{$id}{$list}{randomize} = $attr->{shuffle};
                   2844:         }
                   2845:         if ("@state" eq "questestinterop section item presentation flow response_lid render_choice flow_label response_label") {
                   2846:             $answer_id = $attr->{ident};
                   2847:             push(@{$$allanswers{$id}{$list}},$answer_id);
                   2848:             %{$$settings{$id}{$list}{$answer_id}} = ();
                   2849:         }
                   2850:         if ("@state" eq "questestinterop section item presentation flow response_lid render_choice flow_label response_label material mattext") {
                   2851:             $$settings{$id}{$list}{$answer_id}{texttype} = $attr->{texttype};
1.16      raeburn  2852:             $currtexttype = $attr->{texttype};
1.15      raeburn  2853:         }
                   2854: 
                   2855: # Numerical
                   2856:         if ("@state" eq "questestinterop section item presentation material mat_extension webct:x_webct_v01_dynamicmattext") {
                   2857:             $$settings{$id}{texttype} = $attr->{texttype};
1.16      raeburn  2858:             $currtexttype = $attr->{texttype};
1.15      raeburn  2859:         }
                   2860:         if ("@state" eq "questestinterop section item presentation response_num") {
1.16      raeburn  2861:             $$settings{$id}{class} = 'numerical';
1.15      raeburn  2862:             $numid = $attr->{ident};
1.16      raeburn  2863:             push(@{$$settings{$id}{numids}},$numid);
1.15      raeburn  2864:             %{$$settings{$id}{$numid}} = ();
1.16      raeburn  2865:             %{$$settings{$id}{$numid}{vars}} = ();
                   2866:             @{$$settings{$id}{$numid}{units}} = ();
1.15      raeburn  2867:             $$settings{$id}{$numid}{rcardinality} = $attr->{rcardinality};
                   2868:         }
                   2869:         if ("@state" eq "questestinterop section item presentation response_num material mat_extension webct:x_webct_v01_dynamicdata webct:x_webct_v01_datarange webct:x_webct_v01_minvalue webct:x_webct_v01_variable") {            
1.16      raeburn  2870:             $currvar = $attr->{name};
                   2871:             %{$$settings{$id}{$numid}{vars}{$currvar}} = ();
1.15      raeburn  2872:         }
1.16      raeburn  2873:         if ("@state" eq "questestinterop section item presentation response_num material mat_extension webct:x_webct_v01_dynamicdata webct:x_webct_v01_datarange webct:x_webct_v01_maxvalue webct:x_webct_v01_variable") {
                   2874:             $currvar = $attr->{name};
1.15      raeburn  2875:         }
                   2876:         if ("@state" eq "questestinterop section item presentation response_num material mat_extension webct:x_webct_v01_dynamicdata webct:x_webct_v01_datarange webct:x_webct_v01_decimalnum webct:x_webct_v01_variable") {
1.16      raeburn  2877:             $currvar = $attr->{name};
1.15      raeburn  2878:         }
                   2879:         if ("@state" eq "questestinterop section item presentation response_num render_fib") {
                   2880:             $fibtype = $attr->{fibtype};
                   2881:             $prompt = $attr->{prompt};
                   2882:         }
                   2883:         if ("@state" eq "questestinterop section item presentation response_num render_fib response_label") {
                   2884:             $$settings{$id}{$numid}{label} = $attr->{ident};
                   2885:         }
                   2886: 
                   2887: # String or Numerical
                   2888:         if ("@state" eq "questestinterop section item presentation response_str") {
                   2889:             $str_id = $attr->{ident};
                   2890:             push(@{$$settings{$id}{str}},$str_id);
1.16      raeburn  2891:             @{$$settings{$id}{boxes}[$boxnum]} = ();
                   2892:             $boxnum ++;
1.15      raeburn  2893:             %{$$settings{$id}{$str_id}} = ();
1.16      raeburn  2894:             @{$$settings{$id}{$str_id}{labels}} = ();
1.15      raeburn  2895:             $$settings{$id}{$str_id}{rcardinality} = $attr->{rcardinality};
                   2896:         }
                   2897: 
                   2898:         if ("@state" eq "questestinterop section item presentation response_str render_fib") {
                   2899:             $fibtype = $attr->{fibtype};
1.16      raeburn  2900:             $prompt = $attr->{prompt};
1.15      raeburn  2901:         }    
                   2902:         if ("@state" eq "questestinterop section item presentation response_str render_fib response_label") {
                   2903:             $label = $attr->{ident};
1.16      raeburn  2904:             push(@{$$settings{$id}{$str_id}{labels}},$label);
                   2905:             @{$$settings{$id}{strings}{$label}} = ();
1.15      raeburn  2906:             %{$$settings{$id}{$str_id}{$label}} = ();
                   2907:             $$settings{$id}{$str_id}{$label}{fibtype} = $fibtype;
                   2908:         }
                   2909: 
                   2910: # Numerical
                   2911:         if ("@state" eq "questestinterop section item resprocessing itemproc_extension webct:x_webct_v01_autocalculate webct:x_webct_v01_anspresentation") {
                   2912:             $$settings{$id}{$numid}{digits} = $attr->{digits};
                   2913:             $$settings{$id}{$numid}{format} = $attr->{format};
                   2914:         }
                   2915:         if ("@state" eq "questestinterop section item resprocessing itemproc_extension webct:x_webct_v01_autocalculate webct:x_webct_v01_anstolerance") {
                   2916:             $$settings{$id}{$numid}{toltype} = $attr->{type};
                   2917:         }
                   2918:         if ("@state" eq "questestinterop section item resprocessing itemproc_extension webct:x_webct_v01_autocalculate webct:x_webct_v01_unit") {
1.26      raeburn  2919:             $unitid = $attr->{ident};
1.15      raeburn  2920:             %{$$settings{$id}{$numid}{$unitid}} = ();
1.16      raeburn  2921:             push(@{$$settings{$id}{$numid}{units}},$unitid);
1.15      raeburn  2922:             $$settings{$id}{$numid}{$unitid}{value} = $attr->{value}; 
                   2923:             $$settings{$id}{$numid}{$unitid}{space} = $attr->{space};
                   2924:             $$settings{$id}{$numid}{$unitid}{case} = $attr->{case};
                   2925:         }
                   2926: 
                   2927: # Matching 
                   2928:         if ("@state" eq "questestinterop section item resprocessing respcondition conditionvar varequal") {
1.16      raeburn  2929:             if ($$settings{$id}{class} eq 'match') {
                   2930:                 unless ($attr->{respident} eq 'WebCT_Incorrect') {
                   2931:                     $grp = $attr->{respident};
                   2932:                 }
                   2933: # String
                   2934:             } else {
                   2935:                 $label = $attr->{respident};
                   2936:                 $$settings{$id}{$label}{case} = $attr->{case};   
                   2937:             } 
1.15      raeburn  2938:         }
1.16      raeburn  2939:         if ("@state" eq "questestinterop section item resprocessing respcondition setvar") {
1.15      raeburn  2940:             $setvar{varname} = $attr->{varname};
                   2941:             if ($setvar{varname} eq 'WebCT_Correct') {
                   2942:                 push(@{$$settings{$id}{$grp}{correctanswer}},$answer_id);
                   2943:             }
                   2944:         }
                   2945: 
1.16      raeburn  2946: # String
                   2947:         if ("@state" eq "questestinterop section item resprocessing") {
                   2948:             $boxnum = -1;
                   2949:         }
                   2950:         if ("@state" eq "questestinterop section item resprocessing respcondition") {            $boxnum ++;
                   2951:         }
1.15      raeburn  2952:         if ("@state" eq "questestinterop section item resprocessing respcondition conditionvar varsubset") {
1.16      raeburn  2953:             $$settings{$id}{class} = 'string';
                   2954:             $label = $attr->{respident};
1.15      raeburn  2955:         }
                   2956:         if ("@state" eq "questestinterop section item resprocessing respcondition conditionvar not") {
1.16      raeburn  2957:             $$settings{$id}{class} = 'paragraph';
1.15      raeburn  2958:         }
                   2959:  
                   2960: 
                   2961: # Feedback
                   2962:  
                   2963:         if ("@state" eq "questestinterop section item respcondition displayfeedback") {
                   2964:             $fdbk = $attr->{linkrefid};
                   2965:             push(@{$$settings{$id}{feedback}},$fdbk);
                   2966:             $$settings{$id}{$fdbk} = ();
                   2967:             $$settings{$id}{$fdbk}{feedbacktype} = $attr->{feedbacktype};
                   2968:         }
                   2969:         if ("@state" eq "questestinterop section item itemfeedback") {
                   2970:             $fdbk = $attr->{ident};
                   2971:             $$settings{$id}{$fdbk}{view} = $attr->{view};
                   2972:         }
                   2973:         if ("@state" eq "questestinterop section item itemfeedback material mattext") {
                   2974:             $$settings{$id}{$fdbk}{texttype} = $attr->{texttype};
1.16      raeburn  2975:             $currtexttype = $attr->{texttype};
1.15      raeburn  2976:         }
                   2977:      }, "tagname, attr"],
                   2978:      text_h =>
                   2979:      [sub {
                   2980:         my ($text) = @_;
1.16      raeburn  2981:         if ($currtexttype eq '/text/html') {
                   2982:             $text =~ s#(&lt;img\ssrc=")([^"]+)"&gt;#$1../resfiles/$2#g;
                   2983:         }
1.15      raeburn  2984:         if ("@state" eq "questestinterop section item itemmetadata qmd_itemtype") {
                   2985:             $$settings{$id}{itemtype} = $text;
1.16      raeburn  2986:             if ($text eq 'String') {
                   2987:                 $$settings{$id}{class} = 'string';
                   2988:             }
1.15      raeburn  2989:         }
                   2990: 
                   2991:         if ("@state" eq "questestinterop section item presentation material mattext") {
                   2992:             $$settings{$id}{text} = $text;
                   2993:         }
1.16      raeburn  2994: # Matching
1.15      raeburn  2995:         if ("@state" eq "questestinterop section item presentation response_grp material mattext") {
                   2996:             $$settings{$id}{$grp}{text} = $text;
1.16      raeburn  2997:             unless ($text eq '') {
                   2998:                 push(@{$$allchoices{$id}},$grp);
                   2999:             }
1.15      raeburn  3000:         }
                   3001:         if ("@state" eq "questestinterop section item presentation response_grp render_choice response_label material mattext") {
                   3002:             $$settings{$id}{$grp}{$answer_id}{text} = $text;
                   3003:         }
                   3004: 
                   3005: # Multiple choice
                   3006: 
                   3007:         if ("@state" eq "questestinterop section item presentation flow material mattext") {
                   3008:             $$settings{$id}{text} = $text;
                   3009:         }
                   3010: 
                   3011:         if ("@state" eq "questestinterop section item presentation flow response_lid render_choice flow_label response_label material mattext") {
                   3012:             $$settings{$id}{$list}{$answer_id}{text} = $text;
                   3013:         }
                   3014: 
                   3015: # Numerical
                   3016:         if ("@state" eq "questestinterop section item presentation material mat_extension webct:x_webct_v01_dynamicmattext") {
                   3017:             $$settings{$id}{text} = $text;
                   3018:         }
                   3019:         if ("@state" eq "questestinterop section item presentation response_num material mat_extension webct:x_webct_v01_dynamicdata webct:x_webct_v01_datarange webct:x_webct_v01_minvalue webct:x_webct_v01_variable") {
1.16      raeburn  3020:              $$settings{$id}{$numid}{vars}{$currvar}{min} = $text;
1.15      raeburn  3021:         }
                   3022:         if ("@state" eq "questestinterop section item presentation response_num material mat_extension webct:x_webct_v01_dynamicdata webct:x_webct_v01_datarange webct:x_webct_v01_maxvalue webct:x_webct_v01_variable") {
1.16      raeburn  3023:              $$settings{$id}{$numid}{vars}{$currvar}{max} = $text;
1.15      raeburn  3024:         }
                   3025:         if ("@state" eq "questestinterop section item presentation response_num material mat_extension webct:x_webct_v01_dynamicdata webct:x_webct_v01_datarange webct:x_webct_v01_decimalnum webct:x_webct_v01_variable") {
1.16      raeburn  3026:              $$settings{$id}{$numid}{vars}{$currvar}{dec} = $text;
                   3027:         }
                   3028:         if ("@state" eq "questestinterop section item resprocessing itemproc_extension webct:x_webct_v01_autocalculate webct:x_webct_v01_formula") {
                   3029:             $$settings{$id}{$numid}{formula} = $text;
1.15      raeburn  3030:         }
                   3031:         if ("@state" eq "questestinterop section item resprocessing respcondition conditionvar varequal") {
1.16      raeburn  3032:             if ($$settings{$id}{class} eq 'string') {
                   3033:                 unless (grep/^$text$/,@{$$settings{$id}{strings}{$label}}) {
                   3034:                     push(@{$$settings{$id}{strings}{$label}},$text);
                   3035:                 }
                   3036:                 unless (grep/^$text$/,@{$$settings{$id}{boxes}[$boxnum]}) {
                   3037:                     push(@{$$settings{$id}{boxes}[$boxnum]},$text);
                   3038:                 }
                   3039:             } else {
                   3040:                 $answer_id = $text;
                   3041:             }
1.15      raeburn  3042:         }
                   3043:         if ("@state" eq "questestinterop section item resprocessing respcondition conditionvar varsubset") { # String
1.16      raeburn  3044:             unless (grep/^$text$/,@{$$settings{$id}{strings}{$label}}) {
                   3045:                 push(@{$$settings{$id}{strings}{$label}},$text);
                   3046:             }
                   3047:             unless (grep/^$text$/,@{$$settings{$id}{boxes}[$boxnum]}) {
                   3048:                 push(@{$$settings{$id}{boxes}[$boxnum]},$text);
                   3049:             }
1.15      raeburn  3050:         }
1.16      raeburn  3051:         if ("@state" eq "questestinterop section item resprocessing respcondition setvar") {
1.15      raeburn  3052:             if ($setvar{varname} eq "answerValue") { # Multiple Choice
                   3053:                 if ($text =~ m/^\d+$/) {
                   3054:                     if ($text > 0) {
1.16      raeburn  3055:                         push(@{$$settings{$id}{$list}{correctanswer}},$answer_id);   
1.15      raeburn  3056:                     }
                   3057:                 }
                   3058:             }
                   3059:         }
1.16      raeburn  3060:         if ("@state" eq "questestinterop section item resprocessing itemproc_extension webct:x_webct_v01_autocalculate webct:x_webct_v01_anstolerance") {
                   3061:             $$settings{$id}{$numid}{tolerance} = $text;
                   3062:         }
1.15      raeburn  3063:         if ("@state" eq "questestinterop section item resprocessing itemproc_extension webct:x_webct_v01_autocalculate webct:x_webct_v01_unit") {
                   3064:             $$settings{$id}{$numid}{$unitid}{text} = $text;
                   3065:         }
                   3066: 
                   3067:         if ("@state" eq "questestinterop section item itemfeedback material mattext") {
                   3068:             $$settings{$id}{$fdbk}{text} = $text;
                   3069:         }
                   3070:       }, "dtext"],
                   3071:      end_h =>
                   3072:      [sub {
                   3073:         my ($tagname) = @_;
                   3074:         pop @state;
                   3075:      }, "tagname"],
                   3076:     );
                   3077:     $p->unbroken_text(1);
                   3078:     $p->parse_file($xmlfile);
                   3079:     $p->eof;
1.16      raeburn  3080:     my $boxcount;
                   3081:     foreach my $id (keys %{$settings}) {
                   3082:         if ($$settings{$id}{class} eq 'string') {
                   3083:             $boxcount = 0;
                   3084:             if (@{$$settings{$id}{boxes}} > 1) {
                   3085:                 foreach my $str_id (@{$$settings{$id}{str}}) {
                   3086:                     foreach my $label (@{$$settings{$id}{$str_id}{labels}}) {
                   3087:                         @{$$settings{$id}{strings}{$label}} = @{$$settings{$id}{boxes}[$boxcount]};
                   3088:                         $boxcount ++;
                   3089:                     }
                   3090:                 }
                   3091:             }
                   3092:         }
                   3093:     }
1.15      raeburn  3094: }
1.2       raeburn  3095: 
1.15      raeburn  3096: sub process_assessment {
1.35      raeburn  3097:     my ($cms,$context,$res,$docroot,$container,$dirname,$destdir,$settings,$total,$udom,$uname,$pagesfiles,$sequencesfiles,$randompicks,$dbparse,$resources,$items,$catinfo,$qzdbsettings,$hrefs,$allquestions) = @_;
1.15      raeburn  3098:     my @allids = ();
1.35      raeburn  3099:     my @allquestids = ();
1.15      raeburn  3100:     my %allanswers = ();
                   3101:     my %allchoices = ();
                   3102:     my %qzparams = ();
                   3103:     my %alldbanswers = ();
                   3104:     my %alldbchoices = ();
                   3105:     my @alldbquestids = ();
                   3106:     my $containerdir;
                   3107:     my $newdir;
                   3108:     my $randompickflag = 0;
                   3109:     my ($cid,$cdom,$cnum);
                   3110:     if ($context eq 'DOCS') {
1.19      albertel 3111:         $cid = $env{'request.course.id'};
1.15      raeburn  3112:         ($cdom,$cnum) = split/_/,$cid;
                   3113:     }
                   3114:     my $destresdir = $destdir;
                   3115:     if ($context eq 'CSTR') {
                   3116:         $destresdir =~ s|/home/$uname/public_html/|/res/$udom/$uname/|;
                   3117:     } elsif ($context eq 'DOCS') {
                   3118:         $destresdir =~ s|^/home/httpd/html/userfiles|/uploaded|;
                   3119:     }
                   3120:     if ($cms eq 'bb5') {
                   3121:         &parse_bb5_assessment($res,$docroot,$container,$settings,\%allanswers,\%allchoices,\@allids);
                   3122:     } elsif ($cms eq 'bb6') {
1.30      raeburn  3123:         &parse_bb6_assessment($res,$docroot,$container,$settings,\@allids);
1.34      raeburn  3124:     } elsif ($cms eq 'webctce4') {
1.15      raeburn  3125:         unless($$dbparse) {
1.17      raeburn  3126:             &parse_webct4_questionDB($docroot,$$resources{$res}{file},$catinfo,$qzdbsettings,\%alldbanswers,\%alldbchoices,\@alldbquestids);
1.35      raeburn  3127:             &build_category_sequences($destdir,$catinfo,$sequencesfiles,$pagesfiles,$destresdir,$newdir,$cms,$total,$randompickflag,$context,$udom,$uname,$dirname,$cid,$cdom,$cnum,$qzdbsettings);
                   3128:             &write_webct4_questions($cms,\@alldbquestids,$context,$qzdbsettings,$dirname,\%alldbanswers,\%alldbchoices,$total,$cid,$cdom,$cnum,$destdir,$catinfo);
1.15      raeburn  3129:             $$dbparse = 1;
                   3130:         }
1.16      raeburn  3131:         &parse_webct4_assessment($res,$docroot,$$resources{$res}{file},$container,\@allids);
1.18      raeburn  3132:         &parse_webct4_quizprops($res,$docroot,$$hrefs{$$items{$$resources{$res}{revitm}}{properties}}[0],$container,\%qzparams);
                   3133:         if (exists($qzparams{$res}{numpick})) { 
                   3134:             if ($qzparams{$res}{numpick} < @allids) {
                   3135:                 $$randompicks{$$resources{$res}{revitm}} = $qzparams{$res}{numpick};
                   3136:                 $randompickflag = 1;
1.15      raeburn  3137:             }
                   3138:         }
1.35      raeburn  3139:     } elsif ($cms eq 'webctvista4') {
                   3140:         unless($$dbparse) {
                   3141:             foreach my $res (sort keys %{$allquestions}) {
                   3142:                 my $parent = $$allquestions{$res};
                   3143:                 &parse_webctvista4_question($res,$docroot,$resources,$hrefs,$settings,\@allquestids,\%allanswers,\%allchoices,$parent,$catinfo);
                   3144:             }
                   3145:             &build_category_sequences($destdir,$catinfo,$sequencesfiles,$pagesfiles,$destresdir,$newdir,$cms,$total,$randompickflag,$context,$udom,$uname,$dirname,$cid,$cdom,$cnum,$qzdbsettings);
                   3146:             $$dbparse = 1;
                   3147:         }
                   3148:         &parse_webctvista4_assessment($res,$docroot,$hrefs,\@allids,\%qzparams);
                   3149:         if ($qzparams{$res}{numpick} < @allids) {
                   3150:             $$randompicks{$$resources{$res}{revitm}} = $qzparams{$res}{numpick};
                   3151:             $randompickflag = 1;
                   3152:         }
1.15      raeburn  3153:     }
1.16      raeburn  3154:     my $dirtitle;
1.34      raeburn  3155:     unless ($cms eq 'webctce4') {
1.16      raeburn  3156:         $dirtitle = $$settings{'title'};
                   3157:         $dirtitle =~ s/\W//g;
                   3158:         $dirtitle .= '_'.$res;
                   3159:         if (!-e "$destdir/problems") {
                   3160:             mkdir("$destdir/problems",0755);
                   3161:         }
                   3162:         if (!-e "$destdir/problems/$dirtitle") {
                   3163:             mkdir("$destdir/problems/$dirtitle",0755);
                   3164:         }
1.20      raeburn  3165:         $newdir = "$destdir/problems/$dirtitle";
1.11      raeburn  3166:     }
1.15      raeburn  3167: 
1.34      raeburn  3168:     if ($cms eq 'webctce4') {
1.20      raeburn  3169:         &build_problem_container($cms,$dirtitle,$destdir,$container,$res,$total,$sequencesfiles,$pagesfiles,$randompickflag,$context,\@allids,$udom,$uname,$dirname,\$containerdir,$cid,$cdom,$cnum,$catinfo,$qzdbsettings);
                   3170:     } else {
                   3171:         &build_problem_container($cms,$dirtitle,$destdir,$container,$res,$total,$sequencesfiles,$pagesfiles,$randompickflag,$context,\@allids,$udom,$uname,$dirname,\$containerdir,$cid,$cdom,$cnum,$catinfo,$settings);
                   3172:     }
1.15      raeburn  3173:     if ($cms eq 'bb5') {
1.20      raeburn  3174:         &write_bb5_questions(\@allids,$containerdir,$context,$settings,$dirname,$destdir,$res,\%allanswers,\%allchoices,$total,$newdir,$cid,$cdom,$cnum,$docroot);
1.15      raeburn  3175:     } elsif ($cms eq 'bb6') {
1.30      raeburn  3176:         &write_bb6_questions(\@allids,$containerdir,$context,$settings,$dirname,$destdir,$res,$total,$newdir,$cid,$cdom,$cnum,$docroot);
1.35      raeburn  3177:     } elsif ($cms eq 'webctvista4') {
                   3178:         &write_webct4_questions($cms,\@allquestids,$context,$settings,$dirname,\%allanswers,\%allchoices,$total,$cid,$cdom,$cnum,$destdir,$catinfo);
1.15      raeburn  3179:     }
                   3180: }
                   3181: 
1.35      raeburn  3182: sub build_category_sequences {
                   3183:     my ($destdir,$catinfo,$sequencesfiles,$pagesfiles,$destresdir,$newdir,$cms,$total,$randompickflag,$context,$udom,$uname,$dirname,$cid,$cdom,$cnum,$qzdbsettings) = @_;
                   3184:     if (!-e "$destdir/sequences") {
                   3185:         mkdir("$destdir/sequences",0755);
                   3186:     }
                   3187:     my $numcats = scalar(keys %{$catinfo});
                   3188:     my $curr_id = 0;
                   3189:     my $next_id = 1;
                   3190:     my $fh;
                   3191:     open($fh,">$destdir/sequences/question_database.sequence");
                   3192:     push @{$sequencesfiles},'question_database.sequence';
                   3193:     foreach my $category (sort keys %{$catinfo}) {
                   3194:         my $seqname = $$catinfo{$category}{title}.'_'.$category;
                   3195:         $seqname =~ s/\s/_/g;
                   3196:         $seqname =~ s/\W//g;
                   3197:         push(@{$sequencesfiles},$seqname.'.sequence');
                   3198:         my $catsrc = "$destresdir/sequences/$seqname.sequence";
                   3199:         if ($curr_id == 0) {
                   3200:             print $fh qq|<resource id="1" src="$catsrc" type="start" title="$$catinfo{$category}{title}"></resource>|;
                   3201:         }
                   3202:         if ($numcats == 1) {
                   3203:             print $fh qq|
                   3204: <link from="1" to="2" index="1"></link>
                   3205: <resource id="2" src="" type="finish">\n|;
                   3206:         } else {
                   3207:             $curr_id = $next_id;
                   3208:             $next_id = $curr_id + 1;
                   3209:             $catsrc = "$destresdir/sequences/$seqname.sequence";
                   3210:             print $fh qq|
                   3211: <link from="$curr_id" to="$next_id" index="$curr_id"></link>
                   3212: <resource id="$next_id" src="$catsrc" title="$$catinfo{$category}{title}"|;
                   3213:             if ($next_id == $numcats) {
                   3214:                 print $fh qq| type="finish"></resource>\n|;
                   3215:             } else {
                   3216:                 print $fh qq|></resource>\n|;
                   3217:             }
                   3218:         }
                   3219:         print $fh qq|</map>|;
                   3220:         if (!-e "$destdir/problems") {
                   3221:             mkdir("$destdir/problems",0755);
                   3222:         }
                   3223:         if (!-e "$destdir/problems/$seqname") {
                   3224:             mkdir("$destdir/problems/$seqname",0755);
                   3225:         }
                   3226:         $$newdir = "$destdir/problems/$seqname";
                   3227:         my $dbcontainerdir;
                   3228:         &build_problem_container($cms,$seqname,$destdir,'database',$seqname,$total,$sequencesfiles,$pagesfiles,$randompickflag,$context,\@{$$catinfo{$category}{contents}},$udom,$uname,$dirname,\$dbcontainerdir,$cid,$cdom,$cnum,$catinfo,$qzdbsettings);
                   3229:     }
                   3230:     close($fh);
                   3231: }
                   3232: 
1.15      raeburn  3233: sub build_problem_container {
1.16      raeburn  3234:     my ($cms,$dirtitle,$destdir,$container,$res,$total,$sequencesfiles,$pagesfiles,$randompickflag,$context,$allids,$udom,$uname,$dirname,$containerdir,$cid,$cdom,$cnum,$catinfo,$settings) = @_;
1.11      raeburn  3235:     my $seqdir = "$destdir/sequences";
1.2       raeburn  3236:     my $pagedir = "$destdir/pages";
                   3237:     my $curr_id = 0;
                   3238:     my $next_id = 1;
1.11      raeburn  3239:     my $fh;
1.15      raeburn  3240:     if ($container eq 'pool' || $randompickflag || $container eq 'database') {
                   3241:         $$containerdir = $seqdir.'/'.$res.'.sequence';
1.11      raeburn  3242:         if (!-e "$seqdir") {
                   3243:             mkdir("$seqdir",0770);
                   3244:         }
1.15      raeburn  3245:         open($fh,">$$containerdir");
1.11      raeburn  3246:         $$total{seq} ++;
                   3247:         push @{$sequencesfiles},$res.'.sequence';
                   3248:     } else {
1.15      raeburn  3249:         $$containerdir = $pagedir.'/'.$res.'.page';
1.11      raeburn  3250:         if (!-e "$destdir/pages") {
                   3251:             mkdir("$destdir/pages",0770);
                   3252:         }
1.15      raeburn  3253:         open($fh,">$$containerdir");
1.11      raeburn  3254:         $$total{page} ++;
                   3255:         push @{$pagesfiles},$res.'.page';
                   3256:     }
                   3257:     print $fh qq|<map>
                   3258: |;
1.17      raeburn  3259:     my %probtitle = ();
1.12      raeburn  3260:     my $probsrc = "/res/lib/templates/simpleproblem.problem";
                   3261:     if ($context eq 'CSTR') {
1.17      raeburn  3262:         foreach my $id (@{$allids}) {
1.35      raeburn  3263:             if (($cms eq 'webctce4') || ($cms eq 'webctvista4')) {
1.20      raeburn  3264:                 $probtitle{$id} = $$settings{$id}{title};
                   3265:             } else {
                   3266:                 $probtitle{$id} = $$settings{title};
                   3267:             }
1.17      raeburn  3268:             $probtitle{$id} =~ s/\s/_/g;
                   3269:             $probtitle{$id} =~ s/\W//g;
                   3270:             $probtitle{$id} .= '_'.$id;
                   3271:         }
1.34      raeburn  3272:         if ($cms eq 'webctce4' && $container ne 'database') {
1.16      raeburn  3273:             my $catid = $$settings{$$allids[0]}{category};
                   3274:             my $probdir = $$catinfo{$catid}{title}.'_'.$catid;
                   3275:             $probdir =~ s/\s/_/g;
                   3276:             $probdir =~ s/\W//g;
1.17      raeburn  3277:             $probsrc = "$dirname/problems/$probdir/$probtitle{$$allids[0]}.problem";
1.16      raeburn  3278:         } else {
1.20      raeburn  3279:             $probsrc="$dirname/problems/$dirtitle/$probtitle{$$allids[0]}.problem";
1.16      raeburn  3280:         }
1.12      raeburn  3281:     }
1.11      raeburn  3282:     print $fh qq|<resource id="1" src="$probsrc" type="start" title="question_0001"></resource>|;
1.15      raeburn  3283:     if (@{$allids} == 1) {
1.11      raeburn  3284:         print $fh qq|
1.2       raeburn  3285: <link from="1" to="2" index="1"></link>
                   3286: <resource id="2" src="" type="finish">\n|;
1.11      raeburn  3287:     } else {
1.15      raeburn  3288:         for (my $j=1; $j<@{$allids}; $j++) {
                   3289:             my $qntitle = $j+1;
1.11      raeburn  3290:             while (length($qntitle) <4) {
                   3291:                 $qntitle = '0'.$qntitle;
                   3292:             }
                   3293:             $curr_id = $j;
                   3294:             $next_id = $curr_id + 1;
                   3295:             if ($context eq 'CSTR') {
1.34      raeburn  3296:                 if ($cms eq 'webctce4' && $container ne 'database') {
1.16      raeburn  3297:                     my $catid = $$settings{$$allids[$j]}{category};
                   3298:                     my $probdir = $$catinfo{$catid}{title}.'_'.$catid;
                   3299:                     $probdir =~ s/\s/_/g;
                   3300:                     $probdir =~ s/\W//g;
1.17      raeburn  3301:                     $probsrc = "$dirname/problems/$probdir/$probtitle{$$allids[$j]}.problem";
1.16      raeburn  3302:                 } else {
1.20      raeburn  3303:                     $probsrc = "$dirname/problems/$dirtitle/$probtitle{$$allids[$j]}.problem";
1.16      raeburn  3304:                 }
1.11      raeburn  3305:             }
                   3306:             print $fh qq|
1.2       raeburn  3307: <link from="$curr_id" to="$next_id" index="$curr_id"></link>
1.11      raeburn  3308: <resource id="$next_id" src="$probsrc" title="question_$qntitle"|;
1.15      raeburn  3309:             if ($next_id == @{$allids}) {
1.11      raeburn  3310:                 print $fh qq| type="finish"></resource>\n|;
                   3311:             } else {
                   3312:                 print $fh qq|></resource>|;
1.2       raeburn  3313:             }
                   3314:         }
                   3315:     }
1.11      raeburn  3316:     print $fh qq|</map>|;
                   3317:     close($fh);
1.15      raeburn  3318: }
                   3319: 
                   3320: sub write_bb5_questions {
1.20      raeburn  3321:     my ($allids,$containerdir,$context,$settings,$dirname,$destdir,$res,$allanswers,$allchoices,$total,$newdir,$cid,$cdom,$cnum,$docroot) = @_;
1.12      raeburn  3322:     my $qnum = 0;
1.33      raeburn  3323:     my $pathstart;
                   3324:     if ($context eq 'CSTR') {
                   3325:         $pathstart = '../..';
                   3326:     } else {
                   3327:         $pathstart = $dirname;
                   3328:     }
1.15      raeburn  3329:     foreach my $id (@{$allids}) {
1.20      raeburn  3330:         if ($$settings{$id}{ishtml} eq 'true') {
                   3331:             $$settings{$id}{text} = &HTML::Entities::decode($$settings{$id}{text});
                   3332:         }
                   3333:         if ($$settings{$id}{text} =~ m#<img src=['"]?(https?://[^\s]+/)([^/\s\'"]+)['"]?[^>]*>#) {
                   3334:             if (&retrieve_image($context,$res,$dirname,$cdom,$cnum,$docroot,$destdir,$1,$2) eq 'ok') {
1.33      raeburn  3335:                 $$settings{$id}{text} =~ s#(<img src=['"]?)(https?://[^\s]+/)([^/\s'"]+)(['"]?[^>]*>)#$1$pathstart/resfiles/$res/webimages/$3$4#g;
1.20      raeburn  3336:             }
                   3337:         }
                   3338:         $$settings{$id}{text} =~ s#(<img src=[^>]+)/*>#$1 />#gi;
                   3339:         $$settings{$id}{text} =~ s#<br>#<br />#g;
1.12      raeburn  3340:         $qnum ++;
1.11      raeburn  3341:         my $output;
1.12      raeburn  3342:         my $permcontainer = $containerdir;
                   3343:         $permcontainer =~ s#/home/httpd/html/userfiles#uploaded#;
                   3344:         my $symb = $cid.'.'.$permcontainer.'___'.$qnum.'___lib/templates/simpleproblem.problem.0.';
                   3345:         my %resourcedata = ();
                   3346:         for (my $i=0; $i<10; $i++) {
                   3347:             my $iter = $i+1;
                   3348:             $resourcedata{$symb.'text'.$iter} = "";
                   3349:             $resourcedata{$symb.'value'.$iter} = "unused";
                   3350:             $resourcedata{$symb.'position'.$iter} = "random";
1.15      raeburn  3351:         }
1.12      raeburn  3352:         $resourcedata{$symb.'randomize'} = 'yes';
                   3353:         $resourcedata{$symb.'maxfoils'} = 10;
1.11      raeburn  3354:         if ($context eq 'CSTR') {
                   3355:             $output = qq|<problem>
1.2       raeburn  3356: |;
1.11      raeburn  3357:         }
1.3       raeburn  3358:         $$total{prob} ++;
1.2       raeburn  3359:         if ($$settings{$id}{class} eq "QUESTION_ESSAY") {
1.11      raeburn  3360:             if ($context eq 'CSTR') {
                   3361:                 $output .= qq|<startouttext />$$settings{$id}{text}<endouttext />
1.2       raeburn  3362:  <essayresponse>
                   3363:  <textfield></textfield>
                   3364:  </essayresponse>
                   3365:  <postanswerdate>
1.15      raeburn  3366:   $$settings{$id}{feedbackcorr} 
1.2       raeburn  3367:  </postanswerdate>
                   3368: |;
1.12      raeburn  3369:              } else {
                   3370: 		 $resourcedata{$symb.'questiontext'} = $$settings{$id}{text};
                   3371:                  $resourcedata{$symb.'hiddenparts'} = '!essay';
                   3372:                  $resourcedata{$symb.'questiontype'} = 'essay';
1.11      raeburn  3373:              }
1.2       raeburn  3374:         } else {
1.11      raeburn  3375:             if ($context eq 'CSTR') {
                   3376:                 $output .= qq|<startouttext />$$settings{$id}{text}\n|;
1.12      raeburn  3377:             } else {
                   3378:                 $resourcedata{$symb.'questiontext'} = $$settings{$id}{text};
1.11      raeburn  3379:             }
                   3380:             my ($image,$imglink,$url);
                   3381:             if ( defined($$settings{$id}{image}) ) {
1.2       raeburn  3382:                 if ( $$settings{$id}{style} eq 'embed' ) {
1.33      raeburn  3383:                     $image = qq|<br /><img src="$pathstart/resfiles/$res/$$settings{$id}{image}" /><br />|;
1.2       raeburn  3384:                 } else {
1.33      raeburn  3385:                     $imglink = qq|<br /><a href="$pathstart/resfiles/$res/$$settings{$id}{image}">Link to file</a><br />|;
1.2       raeburn  3386:                 }
                   3387:             }
                   3388:             if ( defined($$settings{$id}{url}) ) {
1.11      raeburn  3389:                 $url = qq|<br /><a href="$$settings{$id}{url}">$$settings{$id}{name}</a><br />|;
                   3390:             }
                   3391:             if ($context eq 'CSTR') {
                   3392:                 $output .= $image.$imglink.$url.'
                   3393: <endouttext />';
1.12      raeburn  3394:             } else {
                   3395:                 $resourcedata{$symb.'questiontext'} .= $image.$imglink.$url;
1.2       raeburn  3396:             }
                   3397:             if ($$settings{$id}{class} eq 'QUESTION_MULTIPLECHOICE') {
1.15      raeburn  3398:                 my $numfoils = @{$$allanswers{$id}};
1.11      raeburn  3399:                 if ($context eq 'CSTR') {
                   3400:                     $output .= qq|
1.2       raeburn  3401:  <radiobuttonresponse max="$numfoils" randomize="yes">
                   3402:   <foilgroup>
                   3403: |;
1.12      raeburn  3404:                 } else {
                   3405:                     $resourcedata{$symb.'hiddenparts'} = '!radio';
                   3406:                     $resourcedata{$symb.'questiontype'} = 'radio';
                   3407:                     $resourcedata{$symb.'maxfoils'} = $numfoils;
1.11      raeburn  3408:                 }
1.15      raeburn  3409:                 for (my $k=0; $k<@{$$allanswers{$id}}; $k++) {
1.12      raeburn  3410:                     my $iter = $k+1;
1.2       raeburn  3411:                     $output .= "   <foil name=\"foil".$k."\" value=\"";
1.15      raeburn  3412:                     if (grep/^$$allanswers{$id}[$k]$/,@{$$settings{$id}{correctanswer}}) {
1.2       raeburn  3413:                         $output .= "true\" location=\"";
1.12      raeburn  3414:                         $resourcedata{$symb.'value'.$iter} = "true";
1.2       raeburn  3415:                     } else {
                   3416:                         $output .= "false\" location=\"";
1.12      raeburn  3417:                         $resourcedata{$symb.'value'.$iter} = "false";
1.2       raeburn  3418:                     }
1.16      raeburn  3419:                     if (lc ($$allanswers{$id}[$k]) =~ m/^\s?([Aa]ll)|([Nn]one)\s(of\s)?the\sabove\.?/) {
1.2       raeburn  3420:                         $output .= "bottom\"";
1.12      raeburn  3421:                         $resourcedata{$symb.'position'.$iter} = "bottom";
1.2       raeburn  3422:                     } else {
                   3423:                         $output .= "random\"";
                   3424:                     }
1.15      raeburn  3425:                     $output .= "\><startouttext />".$$settings{$id}{$$allanswers{$id}[$k]}{text};
                   3426:                     $resourcedata{$symb.'text'.$iter} = $$settings{$id}{$$allanswers{$id}[$k]}{text};
1.11      raeburn  3427:                     my ($ans_image,$ans_link);
1.15      raeburn  3428:                     if ( defined($$settings{$id}{$$allanswers{$id}[$k]}{image}) ) {
                   3429:                         if ( $$settings{$id}{$$allanswers{$id}[$k]}{style} eq 'embed' ) {
1.33      raeburn  3430:                             $ans_image .= qq|<br /><img src="$pathstart/resfiles/$res/$$settings{$id}{$$allanswers{$id}[$k]}{image}" /><br />|;
1.2       raeburn  3431:                         } else {
1.33      raeburn  3432:                             $ans_link .= qq|<br /><a href="$pathstart/resfiles/$res/$$settings{$id}{$$allanswers{$id}[$k]}{image}" />Link to file</a><br/>|;
1.2       raeburn  3433:                         }
                   3434:                     }
1.11      raeburn  3435:                     $output .= $ans_image.$ans_link.'<endouttext /></foil>'."\n";
1.12      raeburn  3436:                     $resourcedata{$symb.'text'.$iter} .= $ans_image.$ans_link;
1.2       raeburn  3437:                 }
1.11      raeburn  3438:                 if ($context eq 'CSTR') {
                   3439:                     chomp($output);
                   3440:                     $output .= qq|
1.2       raeburn  3441:   </foilgroup>
                   3442:  </radiobuttonresponse>
                   3443: |;
1.11      raeburn  3444:                 }
1.2       raeburn  3445:             } elsif ($$settings{$id}{class} eq 'QUESTION_TRUEFALSE') {
1.15      raeburn  3446:                 my $numfoils = @{$$allanswers{$id}};
1.11      raeburn  3447:                 if ($context eq 'CSTR') {
                   3448:                     $output .= qq|
1.2       raeburn  3449:    <radiobuttonresponse max="$numfoils" randomize="yes">
                   3450:     <foilgroup>
                   3451: |;
1.12      raeburn  3452:                 } else {
                   3453:                     $resourcedata{$symb.'maxfoils'} = $numfoils;
                   3454:                     $resourcedata{$symb.'hiddenparts'} = '!radio';
                   3455:                     $resourcedata{$symb.'questiontype'} = 'radio';
1.11      raeburn  3456:                 }
1.15      raeburn  3457:                 for (my $k=0; $k<@{$$allanswers{$id}}; $k++) {
1.12      raeburn  3458:                     my $iter = $k+1;
1.2       raeburn  3459:                     $output .= "   <foil name=\"foil".$k."\" value=\"";
1.15      raeburn  3460:                     if (grep/^$$allanswers{$id}[$k]$/,@{$$settings{$id}{correctanswer}}) {
1.2       raeburn  3461:                         $output .= "true\" location=\"random\"";
1.12      raeburn  3462:                         $resourcedata{$symb.'value'.$iter} = "true";
1.2       raeburn  3463:                     } else {
                   3464:                         $output .= "false\" location=\"random\"";
1.12      raeburn  3465:                         $resourcedata{$symb.'value'.$iter} = "false";
1.2       raeburn  3466:                     }
1.15      raeburn  3467:                     $output .= "\><startouttext />".$$settings{$id}{$$allanswers{$id}[$k]}{text}."<endouttext /></foil>\n";
                   3468:                     $resourcedata{$symb.'text'.$iter} = $$settings{$id}{$$allanswers{$id}[$k]}{text};
1.2       raeburn  3469:                 }
1.11      raeburn  3470:                 if ($context eq 'CSTR') {
                   3471:                     chomp($output);
                   3472:                     $output .= qq|
1.2       raeburn  3473:     </foilgroup>
                   3474:    </radiobuttonresponse>
                   3475: |;
1.11      raeburn  3476:                 }
1.2       raeburn  3477:             } elsif ($$settings{$id}{class} eq 'QUESTION_MULTIPLEANSWER') {
1.15      raeburn  3478:                 my $numfoils = @{$$allanswers{$id}};
1.11      raeburn  3479:                 if ($context eq 'CSTR') {
                   3480:                     $output .= qq|
1.2       raeburn  3481:    <optionresponse max="$numfoils" randomize="yes">
                   3482:     <foilgroup options="('True','False')">
                   3483: |;
1.12      raeburn  3484:                 } else {
                   3485:                     $resourcedata{$symb.'newopt'} = '';
                   3486:                     $resourcedata{$symb.'delopt'} = '';
                   3487:                     $resourcedata{$symb.'options'} = "('True','False')";
                   3488:                     $resourcedata{$symb.'hiddenparts'} = '!option';
                   3489:                     $resourcedata{$symb.'questiontype'} = 'option';
                   3490:                     $resourcedata{$symb.'maxfoils'} = $numfoils;
1.11      raeburn  3491:                 }
1.15      raeburn  3492:                 for (my $k=0; $k<@{$$allanswers{$id}}; $k++) {
1.12      raeburn  3493:                     my $iter = $k+1;
1.2       raeburn  3494:                     $output .= "   <foil name=\"foil".$k."\" value=\"";
1.15      raeburn  3495:                     if (grep/^$$allanswers{$id}[$k]$/,@{$$settings{$id}{correctanswer}}) {
1.2       raeburn  3496:                         $output .= "True\"";
1.12      raeburn  3497:                         $resourcedata{$symb.'value'.$iter} = "True";
1.2       raeburn  3498:                     } else {
                   3499:                         $output .= "False\"";
1.12      raeburn  3500:                         $resourcedata{$symb.'value'.$iter} = "False";
1.2       raeburn  3501:                     }
1.15      raeburn  3502:                     $output .= "\><startouttext />".$$settings{$id}{$$allanswers{$id}[$k]}{text}."<endouttext /></foil>\n";
                   3503:                     $resourcedata{$symb.'text'.$iter} = $$settings{$id}{$$allanswers{$id}[$k]}{text};
1.2       raeburn  3504:                 }
1.11      raeburn  3505:                 if ($context eq 'CSTR') {  
                   3506:                     chomp($output);
                   3507:                     $output .= qq|
1.2       raeburn  3508:     </foilgroup>
                   3509:    </optionresponse>
                   3510: |;
1.11      raeburn  3511:                 }
1.2       raeburn  3512:             } elsif ($$settings{$id}{class} eq 'QUESTION_ORDER') {
1.15      raeburn  3513:                 my $numfoils = @{$$allanswers{$id}};
1.12      raeburn  3514:                 my @allorder = ();
1.11      raeburn  3515:                 if ($context eq 'CSTR') {
                   3516:                     $output .= qq|
1.2       raeburn  3517:    <rankresponse max="$numfoils" randomize="yes">
                   3518:     <foilgroup>
                   3519: |;
1.12      raeburn  3520:                 } else {
                   3521:                     $resourcedata{$symb.'newopt'} = '';
                   3522:                     $resourcedata{$symb.'delopt'} = '';
                   3523:                     $resourcedata{$symb.'hiddenparts'} = '!option';
                   3524:                     $resourcedata{$symb.'questiontype'} = 'option';
                   3525:                     $resourcedata{$symb.'maxfoils'} = $numfoils;
1.11      raeburn  3526:                 }
1.15      raeburn  3527:                 for (my $k=0; $k<@{$$allanswers{$id}}; $k++) {
1.11      raeburn  3528:                     if ($context eq 'CSTR') {
1.15      raeburn  3529:                         $output .= "   <foil location=\"random\" name=\"foil".$k."\" value=\"".$$settings{$id}{$$allanswers{$id}[$k]}{order}."\"><startouttext />".$$settings{$id}{$$allanswers{$id}[$k]}{text}."<endouttext /></foil>\n";
1.12      raeburn  3530:                     } else {
                   3531:                         my $iter = $k+1;
1.15      raeburn  3532:                         $resourcedata{$symb.'text'.$iter} = $$settings{$id}{$$allanswers{$id}[$k]}{text};
                   3533:                         if (!grep/^$$settings{$id}{$$allanswers{$id}[$k]}{order}$/,@allorder) {
                   3534:                             push @allorder, $$settings{$id}{$$allanswers{$id}[$k]}{order};
1.12      raeburn  3535:                         }
1.11      raeburn  3536:                     }
1.2       raeburn  3537:                 }
1.11      raeburn  3538:                 if ($context eq 'CSTR') {
                   3539:                     chomp($output);
                   3540:                     $output .= qq|
1.2       raeburn  3541:     </foilgroup>
                   3542:    </rankresponse>
                   3543: |;
1.12      raeburn  3544:                 } else {
                   3545:                     @allorder = sort {$a <=> $b} @allorder;
                   3546:                     $resourcedata{$symb.'options'} = "('".join("','",@allorder)."')";
1.11      raeburn  3547:                 }
1.2       raeburn  3548:             } elsif ($$settings{$id}{class} eq 'QUESTION_FILLINBLANK') {
                   3549:                 my $numerical = 1;
1.11      raeburn  3550:                 if ($context eq 'DOCS') {
                   3551:                     $numerical = 0;
                   3552:                 } else {
1.15      raeburn  3553:                     for (my $k=0; $k<@{$$allanswers{$id}}; $k++) {
                   3554:                         if ($$settings{$id}{$$allanswers{$id}[$k]}{text} =~ m/([^\d\.]|\.\.)/) {
1.11      raeburn  3555:                             $numerical = 0;
                   3556:                         }
1.2       raeburn  3557:                     }
                   3558:                 }
                   3559:                 if ($numerical) {
                   3560:                     my $numans;
                   3561:                     my $tol;
1.15      raeburn  3562:                     if (@{$$allanswers{$id}} == 1) {
1.2       raeburn  3563:                         $tol = 5;
1.15      raeburn  3564:                         $numans = $$settings{$id}{$$allanswers{$id}[0]}{text};
1.2       raeburn  3565:                     } else {
1.15      raeburn  3566:                         my $min = $$settings{$id}{$$allanswers{$id}[0]}{text};
                   3567:                         my $max = $$settings{$id}{$$allanswers{$id}[0]}{text};
                   3568:                         for (my $k=1; $k<@{$$allanswers{$id}}; $k++) {
                   3569:                             if ($$settings{$id}{$$allanswers{$id}[$k]}{text} <= $min) {
                   3570:                                 $min = $$settings{$id}{$$allanswers{$id}[$k]}{text};
1.2       raeburn  3571:                             }
1.15      raeburn  3572:                             if ($$settings{$id}{$$allanswers{$id}[$k]}{text} >= $max) {
                   3573:                                 $max = $$settings{$id}{$$allanswers{$id}[$k]}{text};
1.2       raeburn  3574:                             }
                   3575:                         }
                   3576:                         $numans = ($max + $min)/2;
                   3577:                         $tol = 100*($max - $min)/($numans*2);
                   3578:                     }
1.11      raeburn  3579:                     if ($context eq 'CSTR') {
                   3580:                         $output .= qq|
1.2       raeburn  3581: <numericalresponse answer="$numans">
                   3582:         <responseparam type="tolerance" default="$tol%" name="tol" description="Numerical Tolerance" />
                   3583:         <responseparam name="sig" type="int_range,0-16" default="0,15" description="Significant Figures"
                   3584: />
                   3585:         <textline />
                   3586: </numericalresponse>
                   3587: |;
1.11      raeburn  3588:                     }
1.2       raeburn  3589:                 } else {
1.12      raeburn  3590:                     if ($context eq 'DOCS') {
                   3591:                         $resourcedata{$symb.'hiddenparts'} = '!string';
                   3592:                         $resourcedata{$symb.'questiontype'} = 'string';
1.15      raeburn  3593:                         $resourcedata{$symb.'maxfoils'} = @{$$allanswers{$id}};
1.12      raeburn  3594:                         $resourcedata{$symb.'hiddenparts'} = '!string';
                   3595:                         $resourcedata{$symb.'stringtype'} = 'ci';
1.15      raeburn  3596:                         $resourcedata{$symb.'stringanswer'} = $$settings{$id}{$$allanswers{$id}[0]}{text};
1.12      raeburn  3597:                     } else {
1.15      raeburn  3598:                         if (@{$$allanswers{$id}} == 1) {
1.11      raeburn  3599:                             $output .= qq|
1.15      raeburn  3600: <stringresponse answer="$$settings{$id}{$$allanswers{$id}[0]}{text}" type="ci">
1.2       raeburn  3601: <textline>
                   3602: </textline>
                   3603: </stringresponse>
                   3604: |;
1.11      raeburn  3605:                         } else {
                   3606:                             my @answertext = ();
1.15      raeburn  3607:                             for (my $k=0; $k<@{$$allanswers{$id}}; $k++) {
                   3608:                                 $$settings{$id}{$$allanswers{$id}[$k]}{text} =~ s/\|/\|/g;
                   3609:                                 push @answertext, $$settings{$id}{$$allanswers{$id}[$k]}{text};
1.11      raeburn  3610:                             }
                   3611:                             my $regexpans = join('|',@answertext);
                   3612:                             $regexpans = '/^('.$regexpans.')\b/';
                   3613:                             $output .= qq|
1.2       raeburn  3614: <stringresponse answer="$regexpans" type="re">
                   3615: <textline>
                   3616: </textline>
                   3617: </stringresponse>
                   3618: |;
1.11      raeburn  3619:                         }
                   3620:                     } 
1.2       raeburn  3621:                 }
                   3622:             } elsif ($$settings{$id}{class} eq "QUESTION_MATCH") {
1.12      raeburn  3623:                 my @allmatchers = ();
                   3624:                 my %matchtext = ();
1.11      raeburn  3625:                 if ($context eq 'CSTR') {
                   3626:                     $output .= qq|
1.2       raeburn  3627: <matchresponse max="10" randomize="yes">
                   3628:     <foilgroup>
                   3629:         <itemgroup>
                   3630: |;
1.12      raeburn  3631:                 } else {
                   3632:                     $resourcedata{$symb.'newopt'} = '';
                   3633:                     $resourcedata{$symb.'delopt'} = '';
                   3634:                     $resourcedata{$symb.'hiddenparts'} = '!option';
                   3635:                     $resourcedata{$symb.'questiontype'} = 'option';
1.15      raeburn  3636:                     $resourcedata{$symb.'maxfoils'} =  @{$$allanswers{$id}};
1.11      raeburn  3637:                 }
1.15      raeburn  3638:                 for (my $k=0; $k<@{$$allchoices{$id}}; $k++) {
1.11      raeburn  3639:                     if ($context eq 'CSTR') {
                   3640:                         $output .= qq|
1.15      raeburn  3641: <item name="$$allchoices{$id}[$k]">
                   3642: <startouttext />$$settings{$id}{$$allchoices{$id}[$k]}{text}<endouttext />
1.2       raeburn  3643: </item>
                   3644:                     |;
1.12      raeburn  3645:                     } else {
1.15      raeburn  3646:                         if (!grep/^$$settings{$id}{$$allchoices{$id}[$k]}{text}$/,@allmatchers) {
                   3647:                             push @allmatchers, $$settings{$id}{$$allchoices{$id}[$k]}{text};
                   3648:                             $matchtext{$$allchoices{$id}[$k]} = $$settings{$id}{$$allchoices{$id}[$k]}{text};
1.12      raeburn  3649:                         }
1.11      raeburn  3650:                     }
1.2       raeburn  3651:                 }
1.11      raeburn  3652:                 if ($context eq 'CSTR') {
                   3653:                     $output .= qq|
1.2       raeburn  3654:         </itemgroup>
                   3655: |;
1.11      raeburn  3656:                 }
1.15      raeburn  3657:                 for (my $k=0; $k<@{$$allanswers{$id}}; $k++) {
1.11      raeburn  3658:                     if ($context eq 'CSTR') {
                   3659:                         $output .= qq|
1.15      raeburn  3660:         <foil location="random" value="$$settings{$id}{$$allanswers{$id}[$k]}{choice_id}" name="$$allanswers{$id}[$k]">
                   3661:          <startouttext />$$settings{$id}{$$allanswers{$id}[$k]}{text}<endouttext />
1.2       raeburn  3662:         </foil>
                   3663: |;
1.12      raeburn  3664:                     } else {
                   3665:                         my $iter = $k+1;
1.15      raeburn  3666:                         $resourcedata{$symb.'value'.$iter} = $matchtext{$$settings{$id}{$$allanswers{$id}[$k]}{choice_id}};
                   3667:                         $resourcedata{$symb.'text'.$iter} = $$settings{$id}{$$allanswers{$id}[$k]}{text};
1.11      raeburn  3668:                     }
1.2       raeburn  3669:                 }
1.11      raeburn  3670:                 if ($context eq 'CSTR') {
                   3671:                     $output .= qq|
1.2       raeburn  3672:     </foilgroup>
                   3673: </matchresponse>
                   3674: |;
1.12      raeburn  3675:                 } else {
                   3676:                     $resourcedata{$symb.'options'} = "('".join("','",@allmatchers)."')";
1.11      raeburn  3677:                 }
1.2       raeburn  3678:             }
                   3679:         }
1.11      raeburn  3680:         if ($context eq 'CSTR') {
                   3681:             $output .= qq|</problem>
1.2       raeburn  3682: |;
1.20      raeburn  3683:             my $title = $$settings{title};
                   3684:             $title =~ s/\s/_/g;
                   3685:             $title =~ s/\W//g;
                   3686:             $title .= '_'.$id;
                   3687:             open(PROB,">:utf8", "$newdir/$title.problem");
1.11      raeburn  3688:             print PROB $output;
                   3689:             close PROB;
1.12      raeburn  3690:         } else {
                   3691: # put %resourcedata;
                   3692:             my $reply=&Apache::lonnet::cput
                   3693:                 ('resourcedata',\%resourcedata,$cdom,$cnum);
1.11      raeburn  3694:         }
1.2       raeburn  3695:     }
                   3696: }
                   3697: 
1.15      raeburn  3698: sub write_webct4_questions {
1.35      raeburn  3699:     my ($cms,$alldbquestids,$context,$settings,$dirname,$allanswers,$allchoices,$total,$cid,$cdom,$cnum,$destdir,$catinfo) = @_;
1.16      raeburn  3700:     my $qnum = 0;
                   3701:     foreach my $id (@{$alldbquestids}) {
                   3702:         $qnum ++;
                   3703:         my $output;
                   3704:         my $permcontainer = $destdir.'/sequences/'.$id.'.sequence';
                   3705:         my $allfeedback;
                   3706:         my $questionimage;
                   3707:         foreach my $fdbk (@{$$settings{$id}{feedback}}) {
                   3708:             my $feedback =  $$settings{$id}{$fdbk}{text};
                   3709:             if ($$settings{$id}{$fdbk}{texttype} eq 'text/html') {
                   3710:                 $feedback = &HTML::Entities::decode($feedback);
                   3711:             }
                   3712:             $allfeedback .= $feedback;
                   3713:         }
                   3714:         if ($$settings{$id}{texttype} eq 'text/html') {
1.35      raeburn  3715:             if ($$settings{$id}{text}) {
                   3716:                 $$settings{$id}{text} = &text_cleanup($$settings{$id}{text});
                   3717:             }
                   3718:         } 
1.16      raeburn  3719:         if ($$settings{$id}{class} eq 'numerical') {
                   3720:             foreach my $numid (@{$$settings{$id}{numids}}) {
                   3721:                 foreach my $var (keys %{$$settings{$id}{$numid}{vars}}) {
1.35      raeburn  3722:                     if ($cms eq 'webct4ce') {
                   3723:                         $$settings{$id}{text} =~ s/{($var)}/\$$1 /g;
                   3724:                     } elsif ($cms eq 'webctvista4') {
                   3725:                         $$settings{$id}{text} =~ s/\[($var)\]/\$$1 /g;
                   3726:                     }
1.16      raeburn  3727:                 }
                   3728:             }
                   3729:         }
                   3730:         $permcontainer =~ s#/home/httpd/html/userfiles#uploaded#;
                   3731:         my $symb = $cid.'.'.$permcontainer.'___'.$qnum.'___lib/templates/simpleproblem.problem.0.';
                   3732:         my %resourcedata = ();
                   3733:         for (my $i=0; $i<10; $i++) {
                   3734:             my $iter = $i+1;
                   3735:             $resourcedata{$symb.'text'.$iter} = "";
                   3736:             $resourcedata{$symb.'value'.$iter} = "unused";
                   3737:             $resourcedata{$symb.'position'.$iter} = "random";
                   3738:         }
                   3739:         $resourcedata{$symb.'randomize'} = 'yes';
                   3740:         $resourcedata{$symb.'maxfoils'} = 10;
                   3741:         if ($context eq 'CSTR') {
1.22      raeburn  3742:             unless ($$settings{$id}{class} eq 'numerical') {
                   3743:                 $output = qq|<problem>
1.16      raeburn  3744: |;
1.22      raeburn  3745:             }
1.16      raeburn  3746:         }
                   3747:         $$total{prob} ++;
                   3748:         if (exists($$settings{$id}{uri})) {
1.35      raeburn  3749:             if ($cms eq 'webct4ce') {
                   3750:                 if ($$settings{$id}{imagtype} =~ /^image\//) {
                   3751:                     $questionimage = '<p><img src="../../resfiles/'.$$settings{$id}{uri}.'" /></p>'."\n";
                   3752:                 } else {
                   3753:                     $questionimage = '<p><img src="../../resfiles/'.$$settings{$id}{uri}.'" /></p>'."\n";
                   3754:                 }
                   3755:             } elsif ($cms eq 'webctvista4') {
                   3756:                 if ($$settings{$id}{uri} =~ /(gif|jpg|png)$/i) {
                   3757:                     $questionimage = '<p><img src="../../resfiles/'.$$settings{$id}{uri}.'" /></p>'."\n";
                   3758:                     $questionimage =~ s#(//+)#/#g;
                   3759:                 } else {
                   3760:                     $questionimage = '<a href="'.$$settings{$id}{uri}.'" target="exturi" >'.$$settings{$id}{uri}.'</a>';
                   3761:                 }
1.16      raeburn  3762:             }
                   3763:         }
                   3764:         if ($$settings{$id}{class} eq "paragraph") {
1.35      raeburn  3765:             my $pre_fill_answer = $$settings{$id}{PARA}{PARA}{PRE_FILL_ANSWER};
1.16      raeburn  3766:             if ($context eq 'CSTR') {
                   3767:                 $output .= qq|<startouttext /><p>$$settings{$id}{text}</p>$questionimage<endouttext />
                   3768:  <essayresponse>
1.35      raeburn  3769:  <textfield>$pre_fill_answer</textfield>
1.16      raeburn  3770:  </essayresponse>
                   3771:  <postanswerdate>
                   3772:   $allfeedback
                   3773:  </postanswerdate>
                   3774: |;
                   3775:             } else {
                   3776:                 $resourcedata{$symb.'questiontext'} = '<p>'.$$settings{$id}{text}.'</p>'.$questionimage;
                   3777:                 $resourcedata{$symb.'hiddenparts'} = '!essay';
                   3778:                 $resourcedata{$symb.'questiontype'} = 'essay';
                   3779:             }
1.37      raeburn  3780:         } elsif ($$settings{$id}{class} eq 'jumbled') {
                   3781:             if ($context eq 'CSTR') {
                   3782:                 my %foiloptions = ();
                   3783:                 foreach my $list (@{$$settings{$id}{lists}}) {
                   3784:                     @{$foiloptions{$list}} = ();
                   3785:                     my $numalternates = @{$$settings{$id}{$list}{jumbled}} - 1;
                   3786:                     my $loopstop = 2; #Hard coded for now, so only one permutation of answers is correct; <or> functionality is needed to support the case where multiple permutations are correct.  
                   3787:                     for (my $i=1; $i<$loopstop; $i++) {  
                   3788:                         $foiloptions{$list}[$i]  = '(';
                   3789:                         for (my $j=@{$$settings{$id}{$list}{jumbled}[$i]}-1; $j>0; $j--) {
                   3790:                             my $jumble_item = $$settings{$id}{$list}{jumbled}[$i][$j];
                   3791:                             $foiloptions{$list}[$i] .= "'".$$settings{$id}{$list}{$jumble_item}{text}."',";
                   3792:                         }
                   3793:                         $foiloptions{$list}[$i] =~ s/,$//;
                   3794:                         $foiloptions{$list}[$i] .= ')';
                   3795:                         my $jnum = 0; 
                   3796:                         for (my $k=0; $k<@{$$settings{$id}{$list}{jumbledtype}}; $k++) {
                   3797:                             if ($$settings{$id}{$list}{jumbledtype}[$k] eq 'No') {
                   3798:                                 $output .= qq|
                   3799: <startouttext />
                   3800: $$settings{$id}{$list}{jumbledtext}[$k]
                   3801: <endouttext />|;
                   3802:                             } elsif ($$settings{$id}{$list}{jumbledtype}[$k] eq 'Yes') {
                   3803:                                 $jnum ++;
                   3804:                                 my $jumble_item = $$settings{$id}{$list}{jumbled}[$i][$jnum];
                   3805:                                 $output .= qq|
                   3806: <optionresponse max="1" randomize="yes" TeXlayout="horizontal">
                   3807:     <foilgroup options="$foiloptions{$list}[$i]">
                   3808:         <foil location="random" value="$$settings{$id}{$list}{$jumble_item}{text}" name="$jumble_item"></foil>
                   3809:     </foilgroup>
                   3810: </optionresponse>
                   3811: |;
                   3812:                             }
                   3813:                         }
                   3814:                     }
                   3815:                     if ($numalternates > 0) { # for now alternates are stored in an instructorcomment.  In the future these alternates could be moved into the main response area once <or> functionality is available.
                   3816:                         $output .= '<instructorcomment>(Not shown to students) '."\n".'The following alternates were imported from the corresponding WebCT Vista 4 jumbled sentence question, but are not included in the LON-CAPA version, because this style of question does not currently support multiple correct solutions.'."\n";
                   3817:                         for (my $i=2; $i<@{$$settings{$id}{$list}{jumbled}}; $i++) {
                   3818:                             my $altid = $i-1;
                   3819:                             my $jnum = 0;
                   3820:                             $output .= $altid.'. '; 
                   3821:                             for (my $k=0; $k<@{$$settings{$id}{$list}{jumbledtype}}; $k++) {
                   3822:                                 if ($$settings{$id}{$list}{jumbledtype}[$k] eq 'No') {
                   3823:                                     $output .= "$$settings{$id}{$list}{jumbledtext}[$k]" ;
                   3824:                                 } elsif ($$settings{$id}{$list}{jumbledtype}[$k] eq 'Yes') {
                   3825:                                     $jnum ++;
                   3826:                                     my $jumble_item = $$settings{$id}{$list}{jumbled}[$i][$jnum];
                   3827:                                     $output .= '['.$$settings{$id}{$list}{$jumble_item}{text}.']';
                   3828:                                 }
                   3829:                             }
                   3830:                             $output .= " \n";
                   3831:                         }
                   3832:                         $output .= '</instructorcomment>';
                   3833:                     }  
                   3834:                 }
                   3835:             }
1.16      raeburn  3836:         } else {
                   3837:             if ($context eq 'CSTR') {
                   3838:                 $output .= qq|<startouttext /><p>$$settings{$id}{text}</p>$questionimage<endouttext />\n|;
                   3839:             } else {
                   3840:                 $resourcedata{$symb.'questiontext'} = '<p>'.$$settings{$id}{text}.'</p>'.$questionimage;
                   3841:             }
1.36      raeburn  3842:             if (($$settings{$id}{class} eq 'multiplechoice') || 
                   3843:                 ($$settings{$id}{class} eq 'combination')) {
1.16      raeburn  3844:                 foreach my $list (@{$$settings{$id}{lists}}) {
                   3845:                     my $numfoils = @{$$allanswers{$id}{$list}};
                   3846:                     if ($$settings{$id}{$list}{rcardinality} eq 'Single') {
                   3847:                         if ($context eq 'CSTR') {
                   3848:                             $output .= qq|
                   3849:  <radiobuttonresponse max="$numfoils" randomize="$$settings{$id}{$list}{randomize}">
                   3850:   <foilgroup>
                   3851: |;
                   3852:                         } else {
                   3853:                             $resourcedata{$symb.'hiddenparts'} = '!radio';
                   3854:                             $resourcedata{$symb.'questiontype'} = 'radio';
                   3855:                             $resourcedata{$symb.'maxfoils'} = $numfoils;
                   3856:                         }
                   3857:                         for (my $k=0; $k<@{$$allanswers{$id}{$list}}; $k++) {
                   3858:                             my $iter = $k+1;
                   3859:                             $output .= "   <foil name=\"foil".$k."\" value=\"";
                   3860:                             if (grep/^$$allanswers{$id}{$list}[$k]$/,@{$$settings{$id}{$list}{correctanswer}}) {
                   3861:                                 $output .= "true\" location=\"";
                   3862:                                 $resourcedata{$symb.'value'.$iter} = "true";
                   3863:                             } else {
                   3864:                                 $output .= "false\" location=\"";
                   3865:                                 $resourcedata{$symb.'value'.$iter} = "false";
                   3866:                             }
                   3867:                             if (lc ($$allanswers{$id}{$list}[$k]) =~ m/^\s?([Aa]ll)|([Nn]one)\s(of\s)?the\sabove\.?/) {
                   3868:                                 $output .= "bottom\"";
                   3869:                                 $resourcedata{$symb.'position'.$iter} = "bottom";
                   3870:                             } else {
                   3871:                                 $output .= "random\"";
                   3872:                             }
                   3873:                             if ($$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{texttype} eq 'text/html') {
                   3874:                                 $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text} = &HTML::Entities::decode($$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text});
1.21      www      3875:                                 $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text} = &Apache::loncleanup::htmlclean($$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text});
1.16      raeburn  3876:                                 $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text} =~  s#(<img src=")([^>]+)>#$1../../resfiles/$2 />#gi;
                   3877:                                 $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text} =~  s#</?p>##g;
                   3878: 
                   3879:                             }
                   3880:                             $output .= "\><startouttext />".$$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text};
                   3881:                             $resourcedata{$symb.'text'.$iter} = $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text};
                   3882:                             $output .= '<endouttext /></foil>'."\n";
                   3883:                         }
                   3884:                         if ($context eq 'CSTR') {
                   3885:                             chomp($output);
                   3886:                             $output .= qq|
                   3887:   </foilgroup>
                   3888:  </radiobuttonresponse>
                   3889: |;
                   3890:                         }
                   3891:                     } else {
                   3892:                         if ($context eq 'CSTR') {
                   3893:                             $output .= qq|
                   3894:    <optionresponse max="$numfoils" randomize="yes">
                   3895:     <foilgroup options="('True','False')">
                   3896: |;
                   3897:                         } else {
                   3898:                             $resourcedata{$symb.'newopt'} = '';
                   3899:                             $resourcedata{$symb.'delopt'} = '';
                   3900:                             $resourcedata{$symb.'options'} = "('True','False')";
                   3901:                             $resourcedata{$symb.'hiddenparts'} = '!option';
                   3902:                             $resourcedata{$symb.'questiontype'} = 'option';
                   3903:                             $resourcedata{$symb.'maxfoils'} = $numfoils;
                   3904:                         }
                   3905:                         for (my $k=0; $k<@{$$allanswers{$id}{$list}}; $k++) {
                   3906:                             my $iter = $k+1;
                   3907:                             $output .= "   <foil name=\"foil".$k."\" value=\"";
                   3908:                             if (grep/^$$allanswers{$id}{$list}[$k]$/,@{$$settings{$id}{$list}{correctanswer}}) {
                   3909:                                 $output .= "True\"";
                   3910:                                 $resourcedata{$symb.'value'.$iter} = "True";
                   3911:                             } else {
                   3912:                                 $output .= "False\"";
                   3913:                                 $resourcedata{$symb.'value'.$iter} = "False";
                   3914:                             }
                   3915:                             if ($$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{texttype} eq 'text/html') {
                   3916:                                 $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text} = &HTML::Entities::decode($$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text});
1.21      www      3917:                                 $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text} = &Apache::loncleanup::htmlclean($$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text});
1.16      raeburn  3918:                                 $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text} =~  s#(<img src=")([^>]+)>#$1../../resfiles/$2 />#gi;
                   3919:                                 $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text} =~  s#</?p>##g;
                   3920:                             }
                   3921:                             $output .= "\><startouttext />".$$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text}."<br /><endouttext /></foil>\n";
                   3922:                             $resourcedata{$symb.'text'.$iter} = $$settings{$id}{$list}{$$allanswers{$id}{$list}[$k]}{text};
                   3923:                         }
                   3924:                         if ($context eq 'CSTR') {
                   3925:                             chomp($output);
                   3926:                             $output .= qq|
                   3927:     </foilgroup>
                   3928:    </optionresponse>
                   3929: |;
                   3930:                         }
                   3931:                     }
                   3932:                 }
                   3933:             } elsif ($$settings{$id}{class} eq 'match') {
                   3934:                 my %allmatchers = ();
                   3935:                 my @allmatch = ();
                   3936:                 my %matchtext = ();
                   3937:                 my $anscount = 0;
                   3938:                 my %ansnum = ();
                   3939:                 my $maxfoils = 0;
                   3940:                 my $test_for_html = 0; 
                   3941:                 foreach my $grp (@{$$allchoices{$id}}) {
                   3942:                     $maxfoils += @{$$settings{$id}{$grp}{correctanswer}};
                   3943:                     foreach my $answer_id (@{$$allanswers{$id}{$grp}}) {
                   3944:                         if ($$settings{$id}{$grp}{$answer_id}{texttype} eq '/text/html') {
                   3945:                              
                   3946:                             $$settings{$id}{$grp}{$answer_id}{text} = &HTML::Entities::decode($$settings{$id}{$grp}{$answer_id}{text});
                   3947:                             $test_for_html = &test_for_html($$settings{$id}{$grp}{$answer_id}{text});
1.21      www      3948:                             $$settings{$id}{$grp}{$answer_id}{text} = &Apache::loncleanup::htmlclean($$settings{$id}{$grp}{$answer_id}{text});
1.16      raeburn  3949:                             $$settings{$id}{$grp}{$answer_id}{text} =~  s#(<img src=")([^>]+)>#$1../../resfiles/$2 />#gi;
                   3950:                             $$settings{$id}{$grp}{$answer_id}{text} =~  s#</?p>##g;
                   3951:                         }
                   3952:                         unless (exists($allmatchers{$$settings{$id}{$grp}{$answer_id}{text}})) {
                   3953:                             $allmatchers{$$settings{$id}{$grp}{$answer_id}{text}} = $anscount;
                   3954:                             $allmatch[$anscount] = $$settings{$id}{$grp}{$answer_id}{text};
                   3955:                             $anscount ++;
                   3956:                             
                   3957:                         }
                   3958:                         if (grep/^$answer_id$/,@{$$settings{$id}{$grp}{correctanswer}}) {
                   3959:                             push(@{$ansnum{$grp}},$allmatchers{$$settings{$id}{$grp}{$answer_id}{text}});
                   3960:                         }
                   3961:                     }
                   3962:                     if ($context eq 'DOCS') {
                   3963:                         $matchtext{$ansnum{$grp}[0]} = $allmatch[$ansnum{$grp}[0]-1];
                   3964:                     }
                   3965:                 }
                   3966:                 my $allmatchlist = "('".join("','",@allmatch)."')";
                   3967:                 if ($context eq 'CSTR') {
                   3968:                     if ($test_for_html) {
                   3969:                         $output .= qq|
                   3970: <matchresponse max="$maxfoils" randomize="yes">
                   3971:     <foilgroup>
                   3972:         <itemgroup>
                   3973: |;
                   3974:                     } else {
                   3975:                         $output .= qq|
                   3976: <optionresponse max="10" randomize="yes">
1.25      raeburn  3977:     <foilgroup options="$allmatchlist">
1.16      raeburn  3978: |;
                   3979:                     }
                   3980:                 } else {
                   3981:                     $resourcedata{$symb.'newopt'} = '';
                   3982:                     $resourcedata{$symb.'delopt'} = '';
                   3983:                     $resourcedata{$symb.'hiddenparts'} = '!option';
                   3984:                     $resourcedata{$symb.'questiontype'} = 'option';
                   3985:                     $resourcedata{$symb.'maxfoils'} =  $maxfoils;
                   3986:                 }
                   3987:                 my $iter = 0;
                   3988:                 foreach my $match (@allmatch) {  
                   3989:                     $iter ++;
                   3990:                     if ($context eq 'CSTR') {
                   3991:                         if ($test_for_html) {
                   3992:                             $output .= qq|
                   3993: <item name="ans_$iter">
                   3994: <startouttext />$match<endouttext />
                   3995: </item>
                   3996: |;
                   3997:                         }
                   3998:                     }
                   3999:                 }
                   4000:                 if ($context eq 'CSTR') {
                   4001:                     if ($test_for_html) {
                   4002:                         $output .= qq|
                   4003:         </itemgroup>
                   4004: |;
                   4005:                     }
                   4006:                 }
                   4007:                 $iter = 0;
                   4008:                 for (my $k=0; $k<@{$$allchoices{$id}}; $k++) {
                   4009:                     if ($$settings{$id}{$$allchoices{$id}[$k]}{texttype} eq 'text/html') {
                   4010:                         $$settings{$id}{$$allchoices{$id}[$k]}{text} = &HTML::Entities::decode($$settings{$id}{$$allchoices{$id}[$k]}{text});
1.21      www      4011:                         $$settings{$id}{$$allchoices{$id}[$k]}{text} = &Apache::loncleanup::htmlclean($$settings{$id}{$$allchoices{$id}[$k]}{text});
1.16      raeburn  4012:                         $$settings{$id}{$$allchoices{$id}[$k]}{text} =~  s#(<img src=")([^>]+)>#$1../../resfiles/$2 />#gi;
                   4013:                         $$settings{$id}{$$allchoices{$id}[$k]}{text} =~  s#</?p>##g;
                   4014:                     }
                   4015:                     foreach my $ans (@{$ansnum{$$allchoices{$id}[$k]}}) {
                   4016:                         $iter ++;
                   4017:                         my $ans_id = $ans + 1;
                   4018:                         if ($context eq 'CSTR') {
                   4019:                             my $value;
                   4020:                             if ($test_for_html) {
                   4021:                                 $value = 'ans_'.$ans_id;
                   4022:                             } else {
                   4023:                                 $value = $allmatch[$ans];
                   4024:                             }
                   4025:                             $output .= qq|
                   4026:         <foil location="random" value="$value" name="foil_$iter">
                   4027:          <startouttext />$$settings{$id}{$$allchoices{$id}[$k]}{text}<endouttext />
                   4028:         </foil>
                   4029:                            
                   4030: |;
                   4031:                         }
                   4032:                     }
                   4033:                     if ($context eq 'DOCS') {
                   4034:                         $resourcedata{$symb.'value'.$iter} = $matchtext{$ansnum{$$allchoices{$id}[$k]}[0]};
                   4035:                         $resourcedata{$symb.'text'.$iter} = $$settings{$id}{$$allchoices{$id}[0]}{text};
                   4036:                     }
                   4037:                 }
                   4038:                 if ($context eq 'CSTR') {
                   4039:                     $output .= qq|
                   4040:     </foilgroup>
                   4041: |;
                   4042:                     if ($test_for_html) {
                   4043:                         $output .= qq|
                   4044: </matchresponse>
                   4045: |;
                   4046:                     } else {
                   4047:                         $output .= qq|
                   4048: </optionresponse>
                   4049: |;
                   4050:                     }
                   4051:                 } else {
                   4052:                     $resourcedata{$symb.'options'} = "('".join("','",@allmatch)."')";
                   4053:                 }
1.35      raeburn  4054:             } elsif (($$settings{$id}{class} eq 'string') || 
                   4055:                      ($$settings{$id}{class} eq 'shortanswer')) {
1.16      raeburn  4056:                 my $labelnum = 0;
1.35      raeburn  4057:                 my @str_labels = ();
                   4058:                 if ($cms eq 'webct4ce') {
                   4059:                     foreach my $str_id (@{$$settings{$id}{str}}) {
                   4060:                         foreach my $label (@{$$settings{$id}{$str_id}{labels}}) {
                   4061:                             push(@str_labels,$label);
                   4062:                         }
                   4063:                     }
                   4064:                 } elsif ($cms eq 'webctvista4') {
                   4065:                     @str_labels = @{$$settings{$id}{str}};
                   4066:                 }
                   4067:                 foreach my $label (@str_labels) {
                   4068:                     $labelnum ++;
                   4069:                     my $numerical = 1;
                   4070:                     if ($context eq 'DOCS') {
                   4071:                         $numerical = 0;
                   4072:                     } else {
                   4073:                         for (my $i=0; $i<@{$$settings{$id}{strings}{$label}}; $i++) {
                   4074:                             $$settings{$id}{strings}{$label}[$i] =~ s/^\s+//;
                   4075:                             $$settings{$id}{strings}{$label}[$i] =~ s/\s+$//; 
                   4076:                             if ($$settings{$id}{strings}{$label}[$i] =~ m/([^\-\d\.]|\.\.)/) {
                   4077:                                 $numerical = 0;
                   4078:                             }
                   4079:                         }
                   4080:                     }
                   4081:                     if ($numerical) {
                   4082:                         my $numans;
                   4083:                         my $tol;
                   4084:                         if (@{$$settings{$id}{strings}{$label}} == 1) {
                   4085:                             $tol = '5%';
                   4086:                             $numans = $$settings{$id}{strings}{$label}[0];
1.16      raeburn  4087:                         } else {
1.35      raeburn  4088:                             my $min = $$settings{$id}{strings}{$label}[0];
                   4089:                             my $max = $$settings{$id}{strings}{$label}[0];
                   4090:                             for (my $k=1; $k<@{$$settings{$id}{strings}{$label}}; $k++) {
                   4091:                                 if ($$settings{$id}{strings}{$label}[$k] <= $min) {
                   4092:                                     $min = $$settings{$id}{strings}{$label}[$k];
                   4093:                                 }
                   4094:                                 if ($$settings{$id}{strings}{$label}[$k] >= $max) {
                   4095:                                     $max = $$settings{$id}{strings}{$label}[$k];
1.16      raeburn  4096:                                 }
                   4097:                             }
1.35      raeburn  4098:                             $numans = ($max + $min)/2;
                   4099:                             if ($numans == 0) {
                   4100:                                 my $dev = abs($max - $numans);
                   4101:                                 if (abs($numans - $min) > $dev) {
                   4102:                                     $dev = abs($numans - $min);
                   4103:                                 }
                   4104:                                 $tol = $dev;
1.16      raeburn  4105:                             } else {
1.35      raeburn  4106:                                 $tol = 100*($max - $min)/($numans*2);
                   4107:                                 $tol .= '%';
1.16      raeburn  4108:                             }
1.35      raeburn  4109:                         }
                   4110:                         if ($context eq 'CSTR') {
                   4111:                             if (@{$$settings{$id}{str}} > 1) {
                   4112:                                 $output .= qq|
1.16      raeburn  4113: <startouttext />$labelnum.<endouttext />
                   4114: |;
1.35      raeburn  4115:                             }
                   4116:                             $output .= qq|
1.16      raeburn  4117: <numericalresponse answer="$numans">
                   4118:         <responseparam type="tolerance" default="$tol" name="tol" description="Numerical Tolerance" />
                   4119:         <responseparam name="sig" type="int_range,0-16" default="0,15" description="Significant Figures"
                   4120: />
                   4121:         <textline />
                   4122: </numericalresponse>
                   4123: <startouttext /><br /><endouttext />
                   4124: |;
1.35      raeburn  4125:                         }
                   4126:                     } else {
                   4127:                         if ($context eq 'DOCS') {
                   4128:                             $resourcedata{$symb.'hiddenparts'} = '!string';
                   4129:                             $resourcedata{$symb.'questiontype'} = 'string';
                   4130:                             $resourcedata{$symb.'maxfoils'} = @{$$allanswers{$id}{strings}{$label}};
                   4131:                             $resourcedata{$symb.'hiddenparts'} = '!string';
                   4132:                             if ($$settings{$id}{$label}{case} eq "No") {
                   4133:                                 $resourcedata{$symb.'stringtype'} = 'ci';
                   4134:                             } elsif ($$settings{$id}{$label}{case} eq "Yes") {
                   4135:                                 $resourcedata{$symb.'stringtype'} = 'cs';
1.16      raeburn  4136:                             }
1.35      raeburn  4137:                             $resourcedata{$symb.'stringanswer'} = $$settings{$id}{strings}{$label}[0];
1.16      raeburn  4138:                         } else {
1.35      raeburn  4139:                             if (@{$$settings{$id}{str}} > 1) {
                   4140:                                 $output .= qq|
                   4141: <startouttext />$labelnum.<endouttext />
                   4142: |;
                   4143:                             }
                   4144:                             if (@{$$settings{$id}{strings}{$label}} == 1) {
                   4145:                                 my $casetype;
1.16      raeburn  4146:                                 if ($$settings{$id}{$label}{case} eq "No") {
1.35      raeburn  4147:                                     $casetype = 'ci';
1.16      raeburn  4148:                                 } elsif ($$settings{$id}{$label}{case} eq "Yes") {
1.35      raeburn  4149:                                     $casetype = 'cs';
1.16      raeburn  4150:                                 }
1.35      raeburn  4151:                                 $output .= qq|
1.16      raeburn  4152: <stringresponse answer="$$settings{$id}{strings}{$label}[0]" type="$casetype">
                   4153: <textline>
                   4154: </textline>
                   4155: </stringresponse>
                   4156: <startouttext /><br /><endouttext />
                   4157: |;
1.35      raeburn  4158:                             } else {
                   4159:                                 my @answertext = ();
                   4160:                                 for (my $k=0; $k<@{$$settings{$id}{strings}{$label}}; $k++) {
                   4161:                                     $$settings{$id}{strings}{$label}[$k] =~ s/\|/\|/g;
                   4162:                                     push @answertext, $$settings{$id}{strings}{$label}[$k];
                   4163:                                 }
                   4164:                                 my $regexpans = join('|',@answertext);
                   4165:                                 $regexpans = '/^('.$regexpans.')\b/';
                   4166:                                 $output .= qq|
1.16      raeburn  4167: <stringresponse answer="$regexpans" type="re">
                   4168: <textline>
                   4169: </textline>
                   4170: </stringresponse>
                   4171: <startouttext /><br /><endouttext />
                   4172: |;
                   4173:                             }
                   4174:                         }
                   4175:                     }
                   4176:                 }
                   4177:             } elsif ($$settings{$id}{class} eq 'numerical') {
1.24      raeburn  4178:                 my %mathfns = (
                   4179:                     'abs' => 'abs',
                   4180:                     'acos' => 'acos',
                   4181:                     'asin' => 'asin',
                   4182:                     'atan' => 'atan',
                   4183:                     'ceil' => 'ceil',
                   4184:                     'cos' => 'cos',
                   4185:                     'exp' => 'exp',
                   4186:                     'fact' => 'factorial',
                   4187:                     'floor' => 'floor',
                   4188:                     'int' => 'int',
                   4189:                     'ln' => 'log',
                   4190:                     'log' => 'log',
                   4191:                     'max' => 'max',
                   4192:                     'min' => 'min',
                   4193:                     'round' => 'roundto',
                   4194:                     'sin' => 'sin',
                   4195:                     'sqrt' => 'sqrt',
                   4196:                     'tan' => 'tan',
                   4197:                 );
1.16      raeburn  4198:                 my $scriptblock = qq|
                   4199: <script type="loncapa/perl">
                   4200: |;
                   4201:                 foreach my $numid (@{$$settings{$id}{numids}}) {
                   4202:                     my $formula = $$settings{$id}{$numid}{formula};
1.24      raeburn  4203:                     my $pattern = join('|',(sort (keys (%mathfns))));
                   4204:                     $formula =~ s/($pattern)/\&$mathfns{$1}/g;
1.16      raeburn  4205:                     foreach my $var (keys %{$$settings{$id}{$numid}{vars}}) {
                   4206:                         my $decnum = $$settings{$id}{$numid}{vars}{$var}{dec};
                   4207:                         my $increment = '0.';
                   4208:                         if ($decnum == 0) {
                   4209:                             $increment = 1; 
                   4210:                         } else {
                   4211:                             my $deccount = $decnum;
                   4212:                             while ($deccount > 1) {
                   4213:                                 $increment.= '0';
                   4214:                                 $deccount --;
                   4215:                             }
                   4216:                             $increment .= '1';
1.35      raeburn  4217:                         }
                   4218:                         if ($cms eq 'webct4ce') { 
                   4219:                             $formula =~ s/{($var)}/(\$$1)/g;
                   4220:                         } elsif ($cms eq 'webctvista4') {
                   4221:                             $formula =~ s/\[($var)\]/(\$$1)/g;
                   4222:                         }
1.16      raeburn  4223:                         $scriptblock .= qq|
                   4224: \$$var=&random($$settings{$id}{$numid}{vars}{$var}{min},$$settings{$id}{$numid}{vars}{$var}{max},$increment);
                   4225: |;
                   4226:                     }
                   4227:                     $scriptblock .= qq|
                   4228: \$answervar = $formula;
                   4229: </script>
                   4230: |;
                   4231:                     if ($context eq 'CSTR') {
1.22      raeburn  4232:                         $output = "<problem>\n".$scriptblock.$output;
1.16      raeburn  4233:                         my $ansformat = '';
                   4234:                         my $sigfig = '0,15';
                   4235:                         if ($$settings{$id}{$numid}{format} eq 'sig') {
                   4236:                             $sigfig = $$settings{$id}{$numid}{digits}.','.$$settings{$id}{$numid}{digits};
                   4237:                         } elsif ($$settings{$id}{$numid}{format} eq 'dec') {
                   4238:                             $ansformat = $$settings{$id}{$numid}{digits}.'f';
                   4239:                         }
                   4240:                         if ($ansformat) {
                   4241:                             $ansformat = 'format="'.$ansformat.'"';
                   4242:                         }
                   4243:                         my $tolerance = $$settings{$id}{$numid}{tolerance};
1.35      raeburn  4244:                         if (lc($$settings{$id}{$numid}{toltype}) eq 'percent') {
1.16      raeburn  4245:                             $tolerance .= '%';
                   4246:                         }
                   4247:                         my $unit = '';
                   4248:                         foreach my $unitid (@{$$settings{$id}{$numid}{units}}) {
                   4249:                             $unit .=  $$settings{$id}{$numid}{$unitid}{text};
                   4250:                         }
                   4251:                         my $unitentry = '';
                   4252:                         if ($unit ne '') {
1.26      raeburn  4253:                             $unitentry =  'unit="'.$unit.'"';
1.16      raeburn  4254:                         }
                   4255:                         $output .= qq|
                   4256: <numericalresponse $unitentry $ansformat  answer="\$answervar">
                   4257:         <responseparam type="tolerance" default="$tolerance" name="tol" description="Numerical Tolerance" />
                   4258:         <responseparam name="sig" type="int_range" default="$sigfig" description="Significant Figures"
                   4259: />
                   4260:         <textline />
                   4261: </numericalresponse>
                   4262: |;
                   4263:                     }
                   4264:                 }
                   4265:             }
                   4266:         }
                   4267:         if ($context eq 'CSTR') {
                   4268:             my $catid = $$settings{$id}{category};
                   4269:             my $probdir = $$catinfo{$catid}{title}.'_'.$catid;
                   4270:             $probdir =~ s/\s/_/g;
                   4271:             $probdir =~ s/\W//g;
                   4272:             if (!-e "$destdir/problems/$probdir") {
                   4273:                 mkdir("$destdir/problems/$probdir",0755);
                   4274:             }
                   4275:             $output .= qq|</problem>
                   4276: |;
                   4277:             my $title = $$settings{$id}{title};
                   4278:             $title =~ s/\s/_/g;
                   4279:             $title =~ s/\W//g;
                   4280:             $title .= '_'.$id; 
                   4281:             open(PROB,">:utf8", "$destdir/problems/$probdir/$title.problem");
                   4282:             print PROB $output;
                   4283:             close PROB;
                   4284:         } else {
                   4285: # put %resourcedata;
                   4286:             my $reply=&Apache::lonnet::cput
                   4287:                 ('resourcedata',\%resourcedata,$cdom,$cnum);
                   4288:         }
                   4289:     }
1.15      raeburn  4290: }
                   4291: 
1.35      raeburn  4292: sub text_cleanup {
                   4293:     my ($text) = @_;
                   4294:     $text =~ s/(\&)(nbsp|gt|lt)(?!;)/$1$2;$3/gi;
                   4295:     $text = &Apache::loncleanup::htmlclean($text);
                   4296:     $text =~ s#(<img src=["']?)([^>]+?)(/?>)#$1../../resfiles/$2 />#gi;
                   4297:     $text =~ s#<([bh])r>#<$1r />#g;
                   4298:     $text =~ s#<p>#<br /><br />#g;
                   4299:     $text =~ s#</p>##g;
                   4300:     return $text;
                   4301: }
                   4302: 
1.16      raeburn  4303: sub test_for_html {
                   4304:     my ($source) = @_; 
                   4305:     my @tags = ();
                   4306:     my $p = HTML::Parser->new
                   4307:     (
                   4308:      xml_mode => 1,
                   4309:      start_h =>
                   4310:      [sub {
                   4311:         my ($tagname) = @_;
                   4312:         push @tags, $tagname;
                   4313:      }, "tagname"],
                   4314:     );
                   4315:     $p->parse($source);
                   4316:     $p->eof;
                   4317:     return length(@tags); 
                   4318: } 
                   4319: 
1.15      raeburn  4320: sub write_bb6_questions {
1.30      raeburn  4321:     my ($allids,$containerdir,$context,$settings,$dirname,$destdir,$res,$total,$newdir,$cid,$cdom,$cnum,$docroot) = @_;
                   4322:     my $qnum = 0;
                   4323:     foreach my $id (@{$allids}) {
                   4324:         my $questiontext = $$settings{$id}{question}{text};
                   4325:         my $question_texttype = $$settings{$id}{question}{texttype};
                   4326:         &process_html(\$questiontext,'bb6',$question_texttype,$context,$res,$dirname,$cdom,$cnum,$docroot,$destdir);
                   4327:         $qnum ++;
                   4328:         my $output;
                   4329:         my $permcontainer = $containerdir;
                   4330:         $permcontainer =~ s#/home/httpd/html/userfiles#uploaded#;
                   4331:         my $symb = $cid.'.'.$permcontainer.'___'.$qnum.'___lib/templates/simpleproblem.problem.0.';
                   4332:         my %resourcedata = ();
                   4333:         for (my $i=0; $i<10; $i++) {
                   4334:             my $iter = $i+1;
                   4335:             $resourcedata{$symb.'text'.$iter} = "";
                   4336:             $resourcedata{$symb.'value'.$iter} = "unused";
                   4337:             $resourcedata{$symb.'position'.$iter} = "random";
                   4338:         }
                   4339:         $resourcedata{$symb.'randomize'} = 'yes';
                   4340:         $resourcedata{$symb.'maxfoils'} = 10;
                   4341:         if ($context eq 'CSTR') {
                   4342:             $output = qq|<problem>
                   4343: |;
                   4344:         }
                   4345:         $$total{prob} ++;
1.33      raeburn  4346:         $questiontext .= &add_images_links('question',$context,$settings,$id,$dirname,$res);
1.30      raeburn  4347:         if ($$settings{$id}{class} eq "Essay") {
                   4348:             if ($context eq 'CSTR') {
                   4349:                 $output .= qq|<startouttext />$questiontext<endouttext />
                   4350:  <essayresponse>
                   4351:  <textfield></textfield>
                   4352:  </essayresponse>
                   4353: |;
                   4354:              } else {
                   4355:                  $resourcedata{$symb.'questiontext'} = $questiontext;
                   4356:                  $resourcedata{$symb.'hiddenparts'} = '!essay';
                   4357:                  $resourcedata{$symb.'questiontype'} = 'essay';
                   4358:              }
                   4359:         } else {
                   4360:             if ($context eq 'CSTR') {
                   4361:                 $output .= qq|<startouttext />$questiontext\n<endouttext />|;
                   4362:             } else {
                   4363:                 $resourcedata{$symb.'questiontext'} = $questiontext;
                   4364:             }
                   4365:             my $numfoils = @{$$settings{$id}{answers}};
                   4366:             if (($$settings{$id}{class} eq 'Multiple Choice') || 
                   4367:                 ($$settings{$id}{class} eq 'True/False')) {
                   4368:                 if ($context eq 'CSTR') {
                   4369:                     $output .= qq|
                   4370:  <radiobuttonresponse max="$numfoils" randomize="yes">
                   4371:   <foilgroup>
                   4372: |;
                   4373:                 } else {
                   4374:                     $resourcedata{$symb.'hiddenparts'} = '!radio';
                   4375:                     $resourcedata{$symb.'questiontype'} = 'radio';
                   4376:                     $resourcedata{$symb.'maxfoils'} = $numfoils;
                   4377:                 }
                   4378:                 for (my $k=0; $k<$numfoils; $k++) {
                   4379:                     my $iter = $k+1;
                   4380:                     my $answer_id = $$settings{$id}{answers}[$k];
                   4381:                     my $answer_text = $$settings{$id}{$answer_id}{text};
                   4382:                     my $texttype = $$settings{$id}{$answer_id}{texttype};
                   4383:                     &process_html(\$answer_text,'bb6',$texttype,$context,$res,$dirname,$cdom,$cnum,$docroot,$destdir);
1.33      raeburn  4384:                     $answer_text .= &add_images_links('response',$context,$settings,$id,$dirname,$res); 
1.30      raeburn  4385:                     $output .= "   <foil name=\"foil".$k."\" value=\"";
                   4386:                     if (grep/^$answer_id$/,@{$$settings{$id}{correctanswer}}) {
                   4387:                         $output .= "true\" location=\"";
                   4388:                         $resourcedata{$symb.'value'.$iter} = "true";
                   4389:                     } else {
                   4390:                         $output .= "false\" location=\"";
                   4391:                         $resourcedata{$symb.'value'.$iter} = "false";
                   4392:                     }
                   4393:                     if (lc ($$settings{$id}{$answer_id}{text}) =~ m/^\s?([Aa]ll)|([Nn]one)\s(of\s)?the\sabove\.?/) {
                   4394:                         $output .= "bottom\"";
                   4395:                         $resourcedata{$symb.'position'.$iter} = "bottom";
                   4396:                     } else {
                   4397:                         $output .= "random\"";
                   4398:                     }
                   4399:                     $output .= '\><startouttext />'.$answer_text.
                   4400:                                '<endouttext /></foil>'."\n";
                   4401:                     $resourcedata{$symb.'text'.$iter} = $answer_text;
                   4402:                 }
                   4403:                 if ($context eq 'CSTR') {
                   4404:                     chomp($output);
                   4405:                     $output .= qq|
                   4406:     </foilgroup>
                   4407:     <hintgroup showoncorrect="no">
                   4408:      <radiobuttonhint>
                   4409:      </radiobuttonhint>
                   4410:      <hintpart on="default">
                   4411:       <startouttext/><endouttext />
                   4412:      </hintpart>
                   4413:     </hintgroup>
                   4414:    </radiobuttonresponse>
                   4415: |;
                   4416:                 }
                   4417:             } elsif ($$settings{$id}{class} eq 'Multiple Answer') {
                   4418:                 if ($context eq 'CSTR') {
                   4419:                     $output .= qq|
                   4420:    <optionresponse max="$numfoils" randomize="yes">
                   4421:     <foilgroup options="('True','False')">
                   4422: |;
                   4423:                 } else {
                   4424:                     $resourcedata{$symb.'newopt'} = '';
                   4425:                     $resourcedata{$symb.'delopt'} = '';
                   4426:                     $resourcedata{$symb.'options'} = "('True','False')";
                   4427:                     $resourcedata{$symb.'hiddenparts'} = '!option';
                   4428:                     $resourcedata{$symb.'questiontype'} = 'option';
                   4429:                     $resourcedata{$symb.'maxfoils'} = $numfoils;
                   4430:                 }
                   4431:                 for (my $k=0; $k<$numfoils; $k++) {
                   4432:                     my $iter = $k+1;
                   4433:                     my $answer_id = $$settings{$id}{answers}[$k];
                   4434:                     my $answer_text = $$settings{$id}{$answer_id}{text};
                   4435:                     my $texttype = $$settings{$id}{$answer_id}{texttype};
                   4436:                     &process_html(\$answer_text,'bb6',$texttype,$context,$res,$dirname,$cdom,$cnum,$docroot,$destdir);
1.33      raeburn  4437:                     $answer_text .= &add_images_links('response',$context,$settings,$id,$dirname,$res);
1.30      raeburn  4438: 
                   4439:                     $output .= "   <foil name=\"foil".$k."\" value=\"";
                   4440:                     if (grep/^$answer_id$/,@{$$settings{$id}{correctanswer}}) {
                   4441:                         $output .= "True\"";
                   4442:                         $resourcedata{$symb.'value'.$iter} = "True";
                   4443:                     } else {
                   4444:                         $output .= "False\"";
                   4445:                         $resourcedata{$symb.'value'.$iter} = "False";
                   4446:                     }
                   4447:                     $output .= "\><startouttext />".$answer_text."<endouttext /></foil>\n";
                   4448:                     $resourcedata{$symb.'text'.$iter} = $answer_text;
                   4449:                 }
                   4450:                 if ($context eq 'CSTR') {
                   4451:                     chomp($output);
                   4452:                     $output .= qq|
                   4453:     </foilgroup>
                   4454:     <hintgroup showoncorrect="no">
                   4455:      <optionhint>
                   4456:      </optionhint>
                   4457:      <hintpart on="default">
                   4458:       <startouttext/><endouttext />
                   4459:      </hintpart>
                   4460:     </hintgroup>
                   4461:    </optionresponse>
                   4462: |;
                   4463:                 }
                   4464:             } elsif ($$settings{$id}{class} eq 'Ordering') {
                   4465:                 my @allorder = ();
                   4466:                 if ($context eq 'CSTR') {
                   4467:                     $output .= qq|
                   4468:    <rankresponse max="$numfoils" randomize="yes">
                   4469:     <foilgroup>
                   4470: |;
                   4471:                 } else {
                   4472:                     $resourcedata{$symb.'newopt'} = '';
                   4473:                     $resourcedata{$symb.'delopt'} = '';
                   4474:                     $resourcedata{$symb.'hiddenparts'} = '!option';
                   4475:                     $resourcedata{$symb.'questiontype'} = 'option';
                   4476:                     $resourcedata{$symb.'maxfoils'} = $numfoils;
                   4477:                 }
                   4478:                 for (my $k=0; $k<$numfoils; $k++) {
                   4479:                     my $answer_id = $$settings{$id}{answers}[$k];
                   4480:                     my $answer_text = $$settings{$id}{$answer_id}{text};
                   4481:                     my $texttype = $$settings{$id}{$answer_id}{texttype};
                   4482:                     &process_html(\$answer_text,'bb6',$texttype,$context,$res,$dirname,$cdom,$cnum,$docroot,$destdir);
1.33      raeburn  4483:                     $answer_text .= &add_images_links('response',$context,$settings,$id,$dirname,$res);
1.30      raeburn  4484:                     my $iter = $k+1;
                   4485:                     if ($context eq 'CSTR') {
                   4486:                         $output .= "   <foil location=\"random\" name=\"foil".$k."\" value=\"".$$settings{$id}{$answer_id}{order}."\"><startouttext />".$answer_text."<endouttext /></foil>\n";
                   4487:                     } else {
                   4488:                         $resourcedata{$symb.'text'.$iter} = $answer_text;
                   4489:                         $resourcedata{$symb.'value'.$iter} = $$settings{$id}{$answer_id}{order};
                   4490:                         if (!grep/^$$settings{$id}{$answer_id}{order}$/,@allorder) {
                   4491:                             push(@allorder,$$settings{$id}{$answer_id}{order}); 
                   4492:                         }
                   4493:                     }
                   4494:                 }
                   4495:                 if ($context eq 'CSTR') {
                   4496:                     chomp($output);
                   4497:                     $output .= qq|
                   4498:     </foilgroup>
                   4499:    </rankresponse>
                   4500: |;
                   4501:                 } else {
                   4502:                     @allorder = sort {$a <=> $b} @allorder;
                   4503:                     $resourcedata{$symb.'options'} = "('".join("','",@allorder)."')";
                   4504:                 }
                   4505:             } elsif ($$settings{$id}{class} eq 'Fill in the Blank') {
                   4506:                 my $numerical = 1;
                   4507:                 if ($context eq 'DOCS') {
                   4508:                     $numerical = 0;
                   4509:                 } else {
                   4510:                     for (my $k=0; $k<@{$$settings{$id}{correctanswer}}; $k++) {
                   4511:                         if ($$settings{$id}{correctanswer}[$k] =~ m/([^\d\.]|\.\.)/) {
                   4512:                             $numerical = 0;
                   4513:                         }
                   4514:                     }
                   4515:                 }
                   4516:                 if ($numerical) {
                   4517:                     my $numans;
                   4518:                     my $tol;
                   4519:                     if (@{$$settings{$id}{correctanswer}} == 1) {
                   4520:                         $tol = 5;
                   4521:                         $numans = $$settings{$id}{correctanswer}[0];
                   4522:                     } else {
                   4523:                         my $min = $$settings{$id}{correctanswer}[0];;
                   4524:                         my $max = $min;
                   4525:                         for (my $k=1; $k<@{$$settings{$id}{correctanswer}}; $k++) {
                   4526:                             if ($$settings{$id}{correctanswer}[$k] <= $min) {
                   4527:                                 $min = $$settings{$id}{correctanswer}[$k];
                   4528:                             }
                   4529:                             if ($$settings{$id}{correctanswer}[$k] >= $max) {
                   4530:                                 $max = $$settings{$id}{correctanswer}[$k];
                   4531:                             }
                   4532:                         }
                   4533:                         $numans = ($max + $min)/2;
                   4534:                         $tol = 100*($max - $min)/($numans*2);
                   4535:                         $tol = 5;
                   4536:                     }
                   4537:                     if ($context eq 'CSTR') {
                   4538:                         $output .= qq|
                   4539: <numericalresponse answer="$numans">
                   4540:         <responseparam type="tolerance" default="$tol%" name="tol" description="Numerical Tolerance" />
                   4541:         <responseparam name="sig" type="int_range,0-16" default="0,15" description="Significant Figures"
                   4542: />
                   4543:         <textline />
                   4544: </numericalresponse>
                   4545: <hintgroup showoncorrect="no">
                   4546:  <numericalhint>
                   4547:  </numericalhint>
                   4548:  <hintpart on="default">
                   4549:     <startouttext/><endouttext />
                   4550:  </hintpart>
                   4551: </hintgroup>
                   4552: |;
                   4553:                     }
                   4554:                 } else {
                   4555:                     if ($context eq 'DOCS') {
                   4556:                         $resourcedata{$symb.'hiddenparts'} = '!string';
                   4557:                         $resourcedata{$symb.'questiontype'} = 'string';
                   4558:                         $resourcedata{$symb.'maxfoils'} = 1;
                   4559:                         $resourcedata{$symb.'hiddenparts'} = '!string';
                   4560:                         $resourcedata{$symb.'stringtype'} = 'ci';
                   4561:                         $resourcedata{$symb.'stringanswer'} = $$settings{$id}{correctanswer}[0];
                   4562:                     } else {
                   4563:                         if (@{$$settings{$id}{correctanswer}} == 1) {
                   4564:                             $output .= qq|
                   4565: <stringresponse answer="$$settings{$id}{correctanswer}[0];" type="ci">
                   4566: <textline>
                   4567: </textline>
                   4568: </stringresponse>
                   4569: <hintgroup showoncorrect="no">
                   4570: <stringhint type="cs">
                   4571: </stringhint>
                   4572: <hintpart on="default">
                   4573:   <startouttext/><endouttext />
                   4574: </hintpart>
                   4575: </hintgroup>
                   4576: |;
                   4577:                         } else {
                   4578:                             my @answertext = ();
                   4579:                             for (my $k=0; $k<@{$$settings{$id}{correctanswer}}; $k++) {
                   4580:                                 my $answer_text = $$settings{$id}{correctanswer}[$k];
                   4581:                                 $answer_text =~ s/\|/\|/g;
                   4582:                                 push @answertext, $answer_text;
                   4583:                             }
                   4584:                             my $regexpans = join('|',@answertext);
                   4585:                             $regexpans = '/^('.$regexpans.')\b/';
                   4586:                             $output .= qq|
                   4587: <stringresponse answer="$regexpans" type="re">
                   4588: <textline>
                   4589: </textline>
                   4590: </stringresponse>
                   4591: <hintgroup showoncorrect="no">
                   4592:  <stringhint type="cs">
                   4593:  </stringhint>
                   4594:  <hintpart on="default">
                   4595:     <startouttext/><endouttext />
                   4596:  </hintpart>
                   4597: </hintgroup>
                   4598: |;
                   4599:                         }
                   4600:                     }
                   4601:                 }
                   4602:             } elsif ($$settings{$id}{class} eq "Matching") {
                   4603:                 my @allmatchers = ();
                   4604:                 my %matchtext = ();
                   4605:                 if ($context eq 'CSTR') {
                   4606:                     $output .= qq|
                   4607: <matchresponse max="10" randomize="yes">
                   4608:     <foilgroup>
                   4609:         <itemgroup>
                   4610: |;
                   4611:                 } else {
                   4612:                     $resourcedata{$symb.'newopt'} = '';
                   4613:                     $resourcedata{$symb.'delopt'} = '';
                   4614:                     $resourcedata{$symb.'hiddenparts'} = '!option';
                   4615:                     $resourcedata{$symb.'questiontype'} = 'option';
                   4616:                     $resourcedata{$symb.'maxfoils'} =  $numfoils;
                   4617:                 }
                   4618:                 for (my $k=0; $k<$$settings{$id}{allchoices}; $k++) {
                   4619:                     my $choice_id = 'rightmatch'.$k;
                   4620:                     my $choice_text = $$settings{$id}{$choice_id}{text};
                   4621:                     my $texttype = $$settings{$id}{$choice_id}{texttype};
                   4622:                     my $choice_plaintext = &remove_html($choice_text);
                   4623:                     &process_html(\$choice_text,'bb6',$texttype,$context,$res,$dirname,$cdom,$cnum,$docroot,$destdir);
1.33      raeburn  4624:                     $choice_text .= &add_images_links($choice_id,$context,$settings,$id,$dirname,$res);
1.30      raeburn  4625:                     push(@allmatchers,$choice_plaintext);
                   4626:                     if ($context eq 'CSTR') {
                   4627:                         $output .= qq|
                   4628: <item name="$choice_id">
                   4629: <startouttext />$choice_text<endouttext />
                   4630: </item>
                   4631:                     |;
                   4632:                     }
                   4633:                 }
                   4634:                 if ($context eq 'CSTR') {
                   4635:                     $output .= qq|
                   4636:         </itemgroup>
                   4637: |;
                   4638:                 }
                   4639:                 for (my $k=0; $k<$numfoils; $k++) {
                   4640:                     my $answer_id = $$settings{$id}{answers}[$k];
                   4641:                     my $answer_text = $$settings{$id}{$answer_id}{text};
                   4642:                     my $texttype = $$settings{$id}{$answer_id}{texttype};
                   4643:                     &process_html(\$answer_text,'bb6',$texttype,$context,$res,$dirname,$cdom,$cnum,$docroot,$destdir);
1.33      raeburn  4644:                     $answer_text .= &add_images_links($answer_id,$context,$settings,$id,$dirname,$res);
1.30      raeburn  4645:                     if ($context eq 'CSTR') {
                   4646:                         $output .= '
                   4647:         <foil location="random" value="rightmatch'.$$settings{$id}{$$settings{$id}{$answer_id}{correctanswer}}{order}.'" name="'.$answer_id.'">
                   4648:          <startouttext />'.$answer_text.'<endouttext />
                   4649:         </foil>
                   4650: ';
                   4651:                     } else {
                   4652:                         my $iter = $k+1;
                   4653:                         $resourcedata{$symb.'value'.$iter} = "$allmatchers[$$settings{$id}{$$settings{$id}{$answer_id}{correctanswer}}{order}]";
                   4654:                         $resourcedata{$symb.'text'.$iter} = $answer_text;
                   4655:                     }
                   4656:                 }
                   4657:                 if ($context eq 'CSTR') {
                   4658:                     $output .= qq|
                   4659:     </foilgroup>
                   4660: </matchresponse>
                   4661: |;
                   4662:                 } else {
                   4663:                     $resourcedata{$symb.'options'} = "('".join("','",@allmatchers)."')";
                   4664:                 }
                   4665:             }
                   4666:         }
                   4667:         if ($context eq 'CSTR') {
                   4668:             
                   4669:             $output .= qq|
                   4670:  <postanswerdate>
                   4671:   $$settings{$id}{solutionfeedback}{text}
                   4672:  </postanswerdate>
                   4673: </problem>
                   4674: |;
                   4675:             my $title = $$settings{title};
                   4676:             $title =~ s/\s/_/g;
                   4677:             $title =~ s/\W//g;
                   4678:             $title .= '_'.$id;
                   4679:             open(PROB,">:utf8", "$newdir/$title.problem");
                   4680:             print PROB $output;
                   4681:             close PROB;
                   4682:         } else {
                   4683: # put %resourcedata;
                   4684:             my $reply=&Apache::lonnet::cput
                   4685:                 ('resourcedata',\%resourcedata,$cdom,$cnum);
                   4686:         }
                   4687:     }
1.20      raeburn  4688: }
                   4689: 
                   4690: sub retrieve_image {
                   4691:     my ($context,$res,$dirname,$cdom,$cname,$docroot,$destdir,$urlpath,$filename) = @_;
                   4692:     my $contents;
                   4693:     my $url = $urlpath.$filename;
                   4694:     my $ua=new LWP::UserAgent;
                   4695:     my $request=new HTTP::Request('GET',$url);
                   4696:     my $response=$ua->request($request);
                   4697:     if ($response->is_success) { 
                   4698:         $contents = $response->content;
                   4699:         if (!-e "$docroot/$res") {
                   4700:             mkdir("$docroot/$res",0755);
                   4701:         }
                   4702:         if (!-e "$docroot/$res/webimages") {
                   4703:             mkdir("$docroot/$res/webimages",0755);
                   4704:         }
                   4705:         open(my $fh,">$docroot/$res/webimages/$filename");
                   4706:         print $fh $contents;
                   4707:         close($fh);
                   4708:         if ($context eq 'DOCS') {
                   4709:             my $copyfile = $dirname.'/'.$filename;
                   4710:             my $source = "$docroot/$res/webimages/$filename";
                   4711:             my $fileresult;
                   4712:             if (-e $source) {
1.31      raeburn  4713:                 $fileresult = &Apache::lonnet::process_coursefile('copy',$cname,$cdom,$copyfile,$source);
1.20      raeburn  4714:             }
                   4715:             return $fileresult;
                   4716:         } elsif ($context eq 'CSTR') {
                   4717:             if (!-e "$destdir/resfiles/$res") {
                   4718:                 mkdir("$destdir/resfiles/$res",0755);
                   4719:             }
                   4720:             if (!-e "$destdir/resfiles/$res/webimages") {
                   4721:                 mkdir("$destdir/resfiles/$res/webimages",0755);
                   4722:             }
                   4723:             rename("$docroot/$res/webimages/$filename","$destdir/resfiles/$res/webimages/$filename");
                   4724:             return 'ok';
                   4725:         }
                   4726:     } else {
                   4727:         return -1;
                   4728:     }
1.15      raeburn  4729: }
                   4730: 
1.2       raeburn  4731: # ---------------------------------------------------------------- Process Blackboard Announcements
                   4732: sub process_announce {
1.3       raeburn  4733:     my ($res,$docroot,$destdir,$settings,$globalresref,$seqstem,$resrcfiles) = @_;
1.2       raeburn  4734:     my $xmlfile = $docroot.'/'.$res.".dat";
                   4735:     my @state = ();
                   4736:     my @assess = ();
                   4737:     my $id;
                   4738:     my $p = HTML::Parser->new
                   4739:     (
                   4740:      xml_mode => 1,
                   4741:      start_h =>
                   4742:      [sub {
                   4743:         my ($tagname, $attr) = @_;
                   4744:         push @state, $tagname;
                   4745:         if ("@state" eq "ANNOUNCEMENT TITLE") {
                   4746:             $$settings{title} = $attr->{value};
                   4747:             $$settings{startassessment} = ();
1.7       raeburn  4748:         } elsif ("@state" eq "ANNOUNCEMENT DESCRIPTION FLAGS ISHTML") {  
1.2       raeburn  4749:             $$settings{ishtml} = $attr->{value};          
                   4750:         } elsif ("@state" eq "ANNOUNCEMENT DESCRIPTION FLAGS ISNEWLINELITERAL" ) {
                   4751:             $$settings{isnewline} = $attr->{value};
                   4752:         } elsif ("@state" eq "ANNOUNCEMENT ISPERMANENT" ) {
                   4753:             $$settings{ispermanent} = $attr->{value};
                   4754:         } elsif ("@state" eq "ANNOUNCEMENT DATES UPDATED") {
                   4755:             $$settings{dates} = $attr->{value}; 
                   4756:         } elsif ("@state" eq "ANNOUNCEMENT FILES STARTASSESSMENT" ) {
                   4757:             $id = $attr->{id};
                   4758:             %{$$settings{startassessment}{$id}} = ();
                   4759:             push @assess,$id;
                   4760:         } elsif ("@state" eq "ANNOUNCEMENT FILES STARTASSESSMENT ATTRIB" ) {
                   4761:             my $key = $attr->{key};
                   4762:             $$settings{startassessment}{$id}{$key} = $attr->{value};
                   4763:         }
                   4764:      }, "tagname, attr"],
                   4765:      text_h =>
                   4766:      [sub {
                   4767:         my ($text) = @_;
                   4768:         if ("@state" eq "ANNOUNCEMENT DESCRIPTION TEXT") {
                   4769:             $$settings{text} = $text;
                   4770:         }
                   4771:       }, "dtext"],
                   4772:      end_h =>
                   4773:      [sub {
                   4774:         my ($tagname) = @_;
                   4775:         pop @state;
                   4776:      }, "tagname"],
                   4777:     );
                   4778:     $p->unbroken_text(1);
                   4779:     $p->parse_file($xmlfile);
                   4780:     $p->eof;
                   4781: 
                   4782:     if (defined($$settings{text})) {
                   4783:         if ($$settings{ishtml} eq "false") {
                   4784:             if ($$settings{isnewline} eq "true") {
                   4785:                 $$settings{text} =~ s#\n#<br/>#g;
                   4786:             }
                   4787:         } else {
                   4788:             $$settings{text} = &HTML::Entities::decode($$settings{text});
                   4789:         }
                   4790:     }
                   4791:   
                   4792:     if (@assess > 0) {
                   4793:         foreach my $id (@assess) {
1.3       raeburn  4794:             $$settings{text} = "A $$settings{startassessment}{$id}{assessment_type}, entitled $$globalresref{$$settings{startassessment}{$id}{assessment_id}}{title} is available. Click <a href='$seqstem/pages/$$settings{startassessment}{$id}{assessment_id}.page' target='quizpage'>here</a> to enter the page that contains the problems in this assessment.";
1.2       raeburn  4795:         }
                   4796:     }
                   4797: 
                   4798:     open(FILE,">$destdir/resfiles/$res.html");
                   4799:     push @{$resrcfiles}, "$res.html";
                   4800:     print FILE qq|<html>
                   4801: <head>
                   4802: <title>$$settings{title}</title>
                   4803: </head>
                   4804: <body bgcolor='#ffffff'>
                   4805: <table>
                   4806:  <tr>
1.3       raeburn  4807:   <td bgcolor='#CCCCFF'>$$settings{title} - announcement date: $$settings{dates}</td>
1.2       raeburn  4808:  </tr>
                   4809: </table>
                   4810: <br/>
                   4811: $$settings{text}
                   4812: |;
                   4813:     print FILE qq|
                   4814:   </body>
                   4815:  </html>|;
                   4816:     close(FILE);
                   4817: }
                   4818: 
                   4819: # ---------------------------------------------------------------- Process Blackboard Content
                   4820: sub process_content {
1.10      raeburn  4821:     my ($cms,$res,$context,$docroot,$destdir,$settings,$dom,$user,$resrcfiles,$packages,$hrefs) = @_;
1.2       raeburn  4822:     my $xmlfile = $docroot.'/'.$res.".dat";
                   4823:     my $destresdir = $destdir;
1.7       raeburn  4824:     if ($context eq 'CSTR') {
1.15      raeburn  4825:         $destresdir =~ s|/home/$user/public_html/|/res/$dom/$user/|;
1.7       raeburn  4826:     } elsif ($context eq 'DOCS') {
                   4827:         $destresdir =~ s|^/home/httpd/html/userfiles|/uploaded|;
                   4828:     }
1.10      raeburn  4829:     my $filetag = '';
                   4830:     if ($cms eq 'bb5') {
                   4831:         $filetag = 'FILEREF';
                   4832:     } elsif ($cms eq 'bb6') {
                   4833:         $filetag = 'FILE';
                   4834:     }
1.2       raeburn  4835:     my $filecount = 0;
                   4836:     my @allrelfiles = ();
                   4837:     my @state;
                   4838:     @{$$settings{files}} = (); 
                   4839:     my $p = HTML::Parser->new
                   4840:     (
                   4841:       xml_mode => 1,
                   4842:       start_h =>
                   4843:       [sub {
                   4844:         my ($tagname, $attr) = @_;
                   4845:         push @state, $tagname;
1.10      raeburn  4846:         if ("@state" eq "CONTENT ") {
1.2       raeburn  4847:             %{$$settings{maindata}} = ();
1.10      raeburn  4848:         } elsif ("@state" eq "CONTENT TITLECOLOR") {
                   4849:             $$settings{titlecolor} =  $attr->{value};
1.7       raeburn  4850:         } elsif ("@state" eq "CONTENT MAINDATA TEXTCOLOR") {
1.2       raeburn  4851:             $$settings{maindata}{color} = $attr->{value};
1.7       raeburn  4852:         } elsif ("@state" eq "CONTENT MAINDATA FLAGS ISHTML") {  
1.2       raeburn  4853:             $$settings{maindata}{ishtml} = $attr->{value}; 
1.7       raeburn  4854:         } elsif ("@state" eq "CONTENT MAINDATA FLAGS ISNEWLINELITERAL") {  
1.2       raeburn  4855:             $$settings{maindata}{isnewline} = $attr->{value};
1.10      raeburn  4856:         } elsif ("@state" eq "CONTENT BODY TYPE") {
                   4857:             $$settings{maindata}{bodytype} =  $attr->{value};
1.2       raeburn  4858:         } elsif ("@state" eq "CONTENT FLAGS ISAVAILABLE" ) {
                   4859:             $$settings{isavailable} = $attr->{value};
                   4860:         } elsif ("@state" eq "CONTENT FLAGS ISFOLDER" ) {
                   4861:             $$settings{isfolder} = $attr->{value};
                   4862:         } elsif ("@state" eq "CONTENT FLAGS LAUNCHINNEWWINDOW" ) {
                   4863:             $$settings{newwindow} = $attr->{value};
1.10      raeburn  4864:         } elsif ("@state" eq "CONTENT FILES $filetag") {
1.2       raeburn  4865:             %{$$settings{files}[$filecount]} = ();
                   4866:             %{$$settings{files}[$filecount]{registry}} = (); 
                   4867:         } elsif ("@state" eq "CONTENT FILES FILEREF RELFILE" ) {
                   4868:             $$settings{files}[$filecount]{'relfile'} = $attr->{value};
                   4869:             push @allrelfiles, $attr->{value};
1.10      raeburn  4870:         } elsif ("@state" eq "CONTENT FILES $filetag MIMETYPE") {
1.2       raeburn  4871:             $$settings{files}[$filecount]{mimetype} = $attr->{value};
1.10      raeburn  4872:         } elsif ("@state" eq "CONTENT FILES $filetag CONTENTTYPE") {
1.2       raeburn  4873:             $$settings{files}[$filecount]{contenttype} = $attr->{value};
1.10      raeburn  4874:         } elsif ("@state" eq "CONTENT FILES $filetag FILEACTION") {
1.2       raeburn  4875:             $$settings{files}[$filecount]{fileaction} = $attr->{value};
1.10      raeburn  4876:         } elsif ("@state" eq "CONTENT FILES $filetag PACKAGEPARENT") {
1.2       raeburn  4877:             $$settings{files}[$filecount]{packageparent} = $attr->{value};
1.10      raeburn  4878:         } elsif ("@state" eq "CONTENT FILES $filetag LINKNAME") {
1.2       raeburn  4879:             $$settings{files}[$filecount]{linkname} = $attr->{value};
1.10      raeburn  4880:         } elsif ("@state" eq "CONTENT FILES $filetag REGISTRY REGISTRYENTRY") {
1.2       raeburn  4881:             my $key = $attr->{key};
                   4882:             $$settings{files}[$filecount]{registry}{$key} = $attr->{value};
                   4883:         }
                   4884:       }, "tagname, attr"],
                   4885:       text_h =>
                   4886:       [sub {
                   4887:         my ($text) = @_;
                   4888:         if ("@state" eq "CONTENT TITLE") {
                   4889:             $$settings{title} = $text;
1.10      raeburn  4890:         } elsif ( ("@state" eq "CONTENT MAINDATA TEXT") || ("@state" eq "CONTENT BODY TEXT") ) {
1.2       raeburn  4891:             $$settings{maindata}{text} = $text;
1.10      raeburn  4892:         }  elsif ("@state" eq "CONTENT FILES $filetag REFTEXT") {
1.2       raeburn  4893:             $$settings{files}[$filecount]{reftext} = $text;
1.10      raeburn  4894:         } elsif ("@state" eq "CONTENT FILES FILE NAME" ) {
                   4895:             $$settings{files}[$filecount]{'relfile'} = $text;
                   4896:             push @allrelfiles, $text;
1.2       raeburn  4897:         }
                   4898:        }, "dtext"],
                   4899:       end_h =>
                   4900:       [sub {
                   4901:         my ($tagname) = @_;
1.10      raeburn  4902:         if ("@state" eq "CONTENT FILES $filetag") {
1.2       raeburn  4903:             $filecount ++;
                   4904:         }
                   4905:         pop @state;
                   4906:       }, "tagname"],
                   4907:      );
                   4908:     $p->unbroken_text(1);
                   4909:     $p->parse_file($xmlfile);
                   4910:     $p->eof;
                   4911:     my $linktag = '';
                   4912:     my $fontcol = '';
                   4913:     if (@{$$settings{files}} > 0) {
                   4914:         for (my $filecount=0;  $filecount<@{$$settings{files}}; $filecount++) {
                   4915:             if ($$settings{files}[$filecount]{'fileaction'} eq 'embed') {
                   4916:                 if ( $$settings{files}[$filecount]{reftext} =~ m#<\!\-\-\s_(\d+)\\_\s\-\-\>#) { 
                   4917:                     my $newtag = qq|<img src="$destresdir/resfiles/$res/$$settings{files}[$filecount]{relfile}"/>|;
                   4918:                     $$settings{maindata}{text} =~ s#<\!\-\-\s_/($1)\\_\s\-\-\>#$newtag#;
                   4919:                 } elsif ( $$settings{files}[$filecount]{reftext} =~m#^_/(\d+)\\_$# ) {
                   4920:                     my $reftag = $1;
                   4921:                     my $newtag;
                   4922:                     if ($$settings{files}[$filecount]{mimetype} =~ m/^image/) {
                   4923:                         $newtag = qq|<img src="$destresdir/resfiles/$res/$$settings{files}[$filecount]{relfile}"|;
                   4924:                         if ( defined($$settings{files}[$filecount]{registry}{alttext}) ) {
                   4925:                             $newtag .= qq| alt="$$settings{files}[$filecount]{registry}{alttext}"|;
                   4926:                         }
                   4927:                         if ( defined($$settings{files}[$filecount]{registry}{alignment}) )
                   4928: {
                   4929:                             $newtag .= qq| align="$$settings{files}[$filecount]{registry}{alignment}"|; 
1.1       raeburn  4930:                         }
1.2       raeburn  4931:                         if ( defined($$settings{files}[$filecount]{registry}{border}) ) {
                   4932:                             $newtag .= qq| border="$$settings{files}[$filecount]{registry}{border}"|;
                   4933:                         }
                   4934:                         $newtag .= " />";
                   4935:                         my $reftext =  $$settings{files}[$filecount]{reftext};
                   4936:                         my $fname = $$settings{files}[$filecount]{'relfile'};
                   4937:                         $$settings{maindata}{text} =~ s/<!\-\-\sCOMMENT\sBLOCK\sFOR\sEMBEDDED\sFILE:\s$fname[\s\n]+DO\sNOT\sEDIT\sTHIS\sCOMMENT\sBLOCK[\s\n]+//;
                   4938: #                      $$settings{maindata}{text} =~ s/DO\sNOT\sEDIT\sTHIS\sCOMMENT\sBLOCK[\s\n]+//;
                   4939:                         $$settings{maindata}{text} =~ s/Move\swhole\scomment\sto\schange\sfile\splacement\swithin\spage\.[\s\n]+//;
                   4940:                         $$settings{maindata}{text} =~ s/_\/$reftag\\_/$newtag/;
                   4941:                         $$settings{maindata}{text} =~ s/END\sOF\sBLOCK\sON\sNEXT\sLINE[\s\n]+//;
                   4942:                         $$settings{maindata}{text} =~ s/\-\->//;
                   4943: #                      $$settings{maindata}{text} =~ s/<!\-\-\sCOMMENT\sBLOCK\sFOR\sEMBEDDED\sFILE:\s$fname[\s\n]+DO\sNOT\sEDIT\sTHIS\sCOMMENT\sBLOCK[\s\n\]+_\/$reftag\\_[\s\n]+END\sOF\sBLOCK\sON\sNEXT\sLINE[\s\n\]+\-\->/$newtag/;
                   4944: #                      print STDERR $$settings{maindata}{text};
                   4945:                     }
                   4946:                 } else {
                   4947:                     my $filename=$$settings{files}[$filecount]{'relfile'};
                   4948:                     my $newfilename="$destresdir/resfiles/$res/$$settings{files}[$filecount]{relfile}";
1.10      raeburn  4949:                     $$settings{maindata}{text} =~ s#(src|SRC|value)=("|&quot;)$filename("|&quot;)#$1="$newfilename"#g;
1.2       raeburn  4950:                 }
                   4951:             } elsif ($$settings{files}[$filecount]{fileaction} eq 'link') {
                   4952:                 unless (($$settings{files}[$filecount]{packageparent} ne '') && (grep/^$$settings{files}[$filecount]{packageparent}$/,@{$$settings{files}}) ) {
                   4953:                     $linktag .= qq|<a href="$destresdir/resfiles/$res/$$settings{files}[$filecount]{relfile}"|;
                   4954:                     if ($$settings{newwindow} eq "true") {
                   4955:                         $linktag .= qq| target="$res$filecount"|;
1.1       raeburn  4956:                     }
1.2       raeburn  4957:                     foreach my $entry (keys %{$$settings{files}[$filecount]{registry}}) {
                   4958:                         $linktag .= qq| $entry="$$settings{files}[$filecount]{registry}{$entry}"|;
1.1       raeburn  4959:                     }
1.2       raeburn  4960:                       $linktag .= qq|>$$settings{files}[$filecount]{linkname}</a><br/>\n|;
1.1       raeburn  4961:                 }
1.10      raeburn  4962:             } elsif ( ($$settings{files}[$filecount]{fileaction} eq 'PACKAGE') || ($$settings{files}[$filecount]{fileaction} eq 'package') ) {
                   4963:                my $open_package = '';
                   4964:                if ($$settings{files}[$filecount]{'relfile'} =~ m|\.zip$|i) {
                   4965:                    $open_package = &expand_zip("$docroot/$res",$$settings{files}[$filecount]{'relfile'});
                   4966:                }
                   4967:                if ($open_package eq 'ok') {
                   4968:                    opendir(DIR,"$docroot/$res");
                   4969:                    my @dircontents = grep(!/^\./,readdir(DIR));
                   4970:                    closedir(DIR);
                   4971:                    push @{$resrcfiles}, @dircontents;
                   4972:                    @{$$hrefs{$res}} = @dircontents;
                   4973:                    push @{$packages}, $res;
                   4974:                }
                   4975:             } elsif ( ($$settings{files}[$filecount]{fileaction} eq 'BROKEN_IMAGE') && ($cms eq 'bb6') ) {
                   4976:                 my $filename=$$settings{files}[$filecount]{'relfile'};
                   4977:                 my $newfilename="$destresdir/resfiles/$res/$$settings{files}[$filecount]{relfile}";
                   4978:                 $$settings{maindata}{text} =~ s#(src|SRC|value)=("|&quot;)$filename("|&quot;)#$1="$newfilename"#g;
                   4979:             } elsif ( ($$settings{files}[$filecount]{fileaction} eq 'LINK') && ($cms eq 'bb6') ) {
                   4980:                 my $filename=$$settings{files}[$filecount]{'relfile'};
                   4981:                 my $newfilename="$destresdir/resfiles/$res/$$settings{files}[$filecount]{relfile}";
                   4982:                 my $filetitle = $$settings{files}[$filecount]{'linkname'};
                   4983:                 $$settings{maindata}{text} = '<a href="'.$newfilename.'">'.$filetitle.'</a><br /><br />'. $$settings{maindata}{text};
1.1       raeburn  4984:             }
1.2       raeburn  4985:         }
                   4986:     }
                   4987:     if (defined($$settings{maindata}{textcolor})) {
                   4988:         $fontcol =  qq|<font color="$$settings{maindata}{textcolor}">|;
                   4989:     }
                   4990:     if (defined($$settings{maindata}{text})) {
1.10      raeburn  4991:         if ($$settings{maindata}{bodytype} eq "S") {
                   4992:             $$settings{maindata}{text} =~ s#\n#<br/>#g;
                   4993:         }
1.2       raeburn  4994:         if ($$settings{maindata}{ishtml} eq "false") {
                   4995:             if ($$settings{maindata}{isnewline} eq "true") {
                   4996:                 $$settings{maindata}{text} =~ s#\n#<br/>#g;
                   4997:             }
                   4998:         } else {
1.10      raeburn  4999: #            $$settings{maindata}{text} = &HTML::Entities::decode($$settings{maindata}{text});
1.2       raeburn  5000:         }
                   5001:     }
                   5002: 
1.14      raeburn  5003:     if (!open(FILE,">$destdir/resfiles/$res.html")) {
                   5004:         &Apache::lonnet::logthis("IMS import error: Cannot open file - $destdir/resfiles/$res.html - $!");
                   5005:     } else {
                   5006:         push @{$resrcfiles}, "$res.html";
                   5007:         my $htmldoc = 0;
                   5008: #        if ($$settings{maindata}{text} =~ m-&lt;(html|HTML)>.+&lt;\\(html|HTML)-) {
                   5009:         if ($$settings{maindata}{text} =~ m-<(html|HTML)>-) {
                   5010:             $htmldoc = 1;
                   5011:         }
                   5012:         unless ($htmldoc) {
                   5013:             print FILE qq|<html>
1.2       raeburn  5014: <head>
                   5015: <title>$$settings{title}</title>
                   5016: </head>
                   5017: <body bgcolor='#ffffff'>
                   5018: $fontcol
                   5019: |;
1.14      raeburn  5020:         }
                   5021:         unless ($$settings{title} eq '') { 
                   5022:             print FILE qq|$$settings{title}<br/><br/>\n|;
                   5023:         }
                   5024:         print FILE qq|
1.2       raeburn  5025: $$settings{maindata}{text}
                   5026: $linktag|;
1.14      raeburn  5027:         unless ($htmldoc) {
                   5028:             if (defined($$settings{maindata}{textcolor})) {
                   5029:                 print FILE qq|</font>|;
                   5030:             }
                   5031:             print FILE qq|
1.2       raeburn  5032:   </body>
                   5033:  </html>|;
1.14      raeburn  5034:         }
                   5035:         close(FILE);
1.10      raeburn  5036:     }
1.2       raeburn  5037: }
                   5038: 
                   5039: 
                   5040: sub process_angelboards {
                   5041:     my ($context,$destdir,$boards,$timestamp,$crs,$cdom,$uname,$db_handling,$messages,$items,$resources,$hrefs,$tempdir,$longcrs) = @_;
                   5042:     for (my $i=0; $i<@{$boards}; $i++) {
                   5043:         my %msgidx = ();
                   5044:         my $forumtext = '';
                   5045:         my $boardname = 'bulletinpage_'.$$timestamp[$i];
                   5046:         my $forumfile = $tempdir.'/_assoc/'.$$boards[$i].'/pg'.$$boards[$i].'.htm';
                   5047:         my @state = ();
                   5048:         my $p = HTML::Parser->new
                   5049:         (
                   5050:            xml_mode => 1,
                   5051:            start_h =>
                   5052:            [sub {
                   5053:                 my ($tagname, $attr) = @_;
                   5054:                 push @state, $tagname;
                   5055:                 },  "tagname, attr"],
                   5056:            text_h =>
                   5057:            [sub {
                   5058:                 my ($text) = @_;
                   5059:                 if ("@state" eq "html body div div") {
                   5060:                     $forumtext = $text;
                   5061:                 }
                   5062:               }, "dtext"],
                   5063:             end_h =>
                   5064:             [sub {
                   5065:                   my ($tagname) = @_;
                   5066:                   pop @state;
                   5067:                }, "tagname"],
                   5068:         );
                   5069:         $p->parse_file($forumfile);
                   5070:         $p->eof;
                   5071: 
                   5072:         my %boardinfo = (
                   5073:                   'aaa_title' => $$items{$$resources{$$boards[$i]}{revitm}}{title},
                   5074:                   'bbb_content' => $forumtext,
                   5075:                   'ccc_webreferences' => '',
                   5076:                   'uploaded.lastmodified' => time,
                   5077:                   );
                   5078:         my $msgcount = 0; 
                   5079:                                                                                                      
                   5080:         my $putresult = &Apache::lonnet::put($boardname,\%boardinfo,$cdom,$crs);
                   5081:         if ($db_handling eq 'importall') {
                   5082:             foreach my $msg_id (@{$$messages{$$boards[$i]}}) {
                   5083:                 $msgcount ++;
                   5084:                 $msgidx{$msg_id} = $msgcount;
                   5085:                 my %contrib = (
                   5086:                             'sendername' => 'NoName',
                   5087:                             'senderdomain' => $cdom,
                   5088:                             'screenname' => '',
                   5089:                             'message' => $$items{$$resources{$msg_id}{revitm}}{title}
                   5090:                             );
                   5091:                 unless ( $$items{$$resources{$msg_id}{revitm}}{parentseq} eq $$resources{$$boards[$i]}{revitm} ) {
                   5092:                     unless ( $msgidx{$$items{$$items{$$resources{$msg_id}{revitm}}{parentseq}}{resnum}} eq ''){
                   5093:                         $contrib{replyto} = $msgidx{$$items{$$items{$$resources{$msg_id}{revitm}}{parentseq}}{resnum}};
1.1       raeburn  5094:                     }
1.2       raeburn  5095:                 }
                   5096:                 if ( @{$$hrefs{$msg_id}} > 1 )  {
                   5097:                     my $newurl = '';
                   5098:                     foreach my $file (@{$$hrefs{$msg_id}}) {
                   5099:                         unless ($file eq 'pg'.$msg_id.'.htm') {
                   5100:                             $newurl = $msg_id.$file;
                   5101:                              unless ($longcrs eq '') {
                   5102:                                 if ($context eq 'CSTR') {
                   5103:                                     if (!-e "/home/httpd/lonUsers/$cdom/$longcrs/userfiles") {
                   5104:                                         mkdir("/home/httpd/lonUsers/$cdom/$longcrs/userfiles",0755);
                   5105:                                     }
                   5106:                                     if (!-e "/home/httpd/lonUsers/$cdom/$longcrs/userfiles/$newurl") {
                   5107:                                         rename("$destdir/resfiles/$msg_id/$file","/home/httpd/lonUsers/$cdom/$longcrs/userfiles/$newurl");
                   5108:                                     }
                   5109:                                 }
                   5110:                                 $contrib{attachmenturl} = '/uploaded/'.$cdom.'/'.$crs.'/'.$file;
                   5111:                             }
1.1       raeburn  5112:                         }
                   5113:                     }
                   5114:                 }
1.2       raeburn  5115:                 my $xmlfile = $tempdir.'/_assoc/'.$msg_id.'/'.$$resources{$msg_id}{file};
                   5116:                 &angel_message($msg_id,\%contrib,$xmlfile);
                   5117:                 unless ($$resources{$msg_id}{file} eq '') {
                   5118:                     unlink($xmlfile);
                   5119:                 }
                   5120:                 my $symb = 'bulletin___'.$$timestamp[$i].'___adm/wrapper/adm/'.$cdom.'/'.$uname.'/'.$$timestamp[$i].'/bulletinboard';
                   5121:                 my $postresult = &addposting($symb,\%contrib,$cdom,$crs);
                   5122:             }
                   5123:         }
                   5124:     }
                   5125: }
                   5126: 
                   5127: # ---------------------------------------------------------------- Process ANGEL message board messages
                   5128: sub angel_message {
                   5129:     my ($msg_id,$contrib,$xmlfile) = @_;
                   5130:     my @state = ();
                   5131:     my $p = HTML::Parser->new
                   5132:     (
                   5133:        xml_mode => 1,
                   5134:        start_h =>
                   5135:        [sub {
                   5136:              my ($tagname, $attr) = @_;
                   5137:              push @state, $tagname;
                   5138:              },  "tagname, attr"],
                   5139:         text_h =>
                   5140:         [sub {
                   5141:              my ($text) = @_;
                   5142:              if ("@state" eq "html body table tr td div small span") {
                   5143:                   $$contrib{'plainname'} = $text;
                   5144:              } elsif ("@state" eq "html body div div") {
                   5145:                   $$contrib{'message'} .= '<br /><br />'.$text;
                   5146:              }
                   5147:            }, "dtext"],
                   5148:          end_h =>
                   5149:          [sub {
                   5150:                my ($tagname) = @_;
                   5151:                pop @state;
                   5152:             }, "tagname"],
                   5153:     );
                   5154:     $p->parse_file($xmlfile);
                   5155:     $p->eof;
                   5156: }
                   5157: 
                   5158: # ---------------------------------------------------------------- ANGEL content
                   5159: sub angel_content {
                   5160:     my ($res,$docroot,$destdir,$settings,$dom,$user,$type,$title,$resrcfiles) = @_;
                   5161:     my $xmlfile = $docroot.'/_assoc/'.$res.'/pg'.$res.'.htm';
                   5162:     my $filecount = 0;
                   5163:     my $firstline;
                   5164:     my $lastline;
                   5165:     my @buffer = ();
                   5166:     my @state;
                   5167:     @{$$settings{links}} = ();
                   5168:     my $p = HTML::Parser->new
                   5169:     (
                   5170:        xml_mode => 1,
                   5171:        start_h =>
                   5172:        [sub {
                   5173:              my ($tagname, $attr) = @_;
                   5174:              push @state, $tagname;
                   5175:             },  "tagname, attr"],
                   5176:        text_h =>
                   5177:        [sub {
                   5178:              my ($text) = @_;
                   5179:              if ("@state" eq "html body table tr td div small span") {
                   5180:                  $$settings{'subtitle'} = $text;
                   5181:              } elsif ("@state" eq "html body div div") {
                   5182:                  $$settings{'text'} = $text;
                   5183:              } elsif ("@state" eq "html body div div a") {
                   5184:                 push @{$$settings{'links'}}, $text;
                   5185:              }
                   5186:             }, "dtext"],
                   5187:        end_h =>
                   5188:        [sub {
                   5189:              my ($tagname) = @_;
                   5190:              pop @state;
                   5191:             }, "tagname"],
                   5192:     );
                   5193:     $p->parse_file($xmlfile);
                   5194:     $p->eof;
                   5195:     if ($type eq "PAGE") {
                   5196:         open(FILE,"<$xmlfile");
                   5197:         @buffer = <FILE>;
                   5198:         close(FILE);
                   5199:         chomp(@buffer);
                   5200:         $firstline = -1;
                   5201:         $lastline = 0;
                   5202:         for (my $i=0; $i<@buffer; $i++) {
                   5203:             if (($firstline == -1) && ($buffer[$i] =~ m/<div\sclass="normalDiv"><div\sclass="normalSpan">/)) {
                   5204:                 $firstline = $i;
                   5205:                 $buffer[$i] = substr($buffer[$i],index($buffer[$i],'"normalSpan"')+13);
                   5206:             }
                   5207:             if (($firstline > -1) && ($buffer[$i] =~ m-<p></p></div></div>-)) {
                   5208:                 $buffer[$i] = substr($buffer[$i],0,index($buffer[$i],'<p></p></div></div>'));
                   5209:                 $lastline = $i;
1.1       raeburn  5210:             }
                   5211:         }
                   5212:     }
1.2       raeburn  5213:     open(FILE,">$destdir/resfiles/$res.html");
                   5214:     push @{$resrcfiles}, "$res.html";
                   5215:     print FILE qq|<html>
                   5216: <head>
                   5217: <title>$title</title>
                   5218: </head>
                   5219: <body bgcolor='#ffffff'>
                   5220:     |;
                   5221:     unless ($title eq '') {
                   5222:         print FILE qq|<b>$title</b><br/>\n|;
                   5223:     }
                   5224:     unless ($$settings{subtitle} eq '') {
                   5225:         print FILE qq|$$settings{subtitle}<br/>\n|;
                   5226:     }
                   5227:     print FILE "<br/>\n";
                   5228:     if ($type eq "LINK") {
                   5229:         foreach my $link (@{$$settings{links}}) {
                   5230:             print FILE qq|<a href="$link">$link</a><br/>\n|; 
                   5231:         }
                   5232:     } elsif ($type eq "PAGE") {
                   5233:         if ($firstline > -1) {
                   5234:             for (my $i=$firstline; $i<=$lastline; $i++) {
                   5235:                 print FILE "$buffer[$i]\n";
                   5236:             }
                   5237:         }
                   5238:     }
                   5239:     print FILE qq|
                   5240:   </body>
                   5241:  </html>|;
                   5242:     close(FILE);
1.1       raeburn  5243: }
                   5244: 
1.15      raeburn  5245: # ---------------------------------------------------------------- WebCT content
                   5246: sub webct4_content {
                   5247:     my ($res,$docroot,$destdir,$settings,$dom,$user,$type,$title,$resrcfiles) = @_;
                   5248:     if (!open(FILE,">$destdir/resfiles/$res.html")) {
                   5249:         &Apache::lonnet::logthis("IMS import error: Cannot open file - $destdir/resfiles/$res.html - $!");
                   5250:     } else {
                   5251:         push(@{$resrcfiles}, "$res.html");
                   5252:         my $linktag = '';
                   5253:         if (defined($$settings{url})) {
                   5254:             $linktag = qq|<a href="$$settings{url}"|;
                   5255:             if ($title ne '') {
                   5256:                 $linktag .= qq|>$title</a>|;
                   5257:             } else {
                   5258:                 $linktag .= qq|>$$settings{url}|;
                   5259:             }
                   5260:         }
                   5261:         print FILE qq|<html>
                   5262: <head>
                   5263: <title>$title</title>
                   5264: </head>
                   5265: <body bgcolor='#ffffff'>
                   5266: $linktag
                   5267: </body>
                   5268: </html>|;
                   5269:         close(FILE);
                   5270:     }
                   5271: }
                   5272: 
1.30      raeburn  5273: sub process_html {
                   5274:     my ($text,$caller,$html_cond,$context,$res,$dirname,$cdom,$cnum,$docroot,$destdir) = @_;
1.33      raeburn  5275:     my $pathstart;
                   5276:     if ($context eq 'CSTR') {
                   5277:         $pathstart = '../..';
                   5278:     } else {
                   5279:         $pathstart = $dirname;
                   5280:     }
1.30      raeburn  5281:     if ($caller eq 'bb5') {
                   5282:         if ($html_cond eq 'true') {
                   5283:             $$text = &HTML::Entities::decode($$text);
                   5284:         }
                   5285:     } elsif ($caller eq 'bb6') {
                   5286:         if ($html_cond eq 'HTML') {
                   5287:             $$text = &HTML::Entities::decode($$text);
                   5288:         }
                   5289:     }
                   5290:     if ($$text =~ m#<img src=['"]?(https?://[^\s]+/)([^/\s\'"]+)['"]?[^>]*>#) {
                   5291:         if (&retrieve_image($context,$res,$dirname,$cdom,$cnum,$docroot,$destdir,$1,$2) eq 'ok') {
1.33      raeburn  5292:             $$text =~ s#(<img src=['"]?)(https?://[^\s]+/)([^/\s'"]+)(['"]?[^>]*>)#$1$pathstart/resfiles/$res/webimages/$3$4#g;
1.30      raeburn  5293:         }
                   5294:     }
                   5295:     $$text =~ s#(<img src=[^>]+)/*>#$1 />#gi;
                   5296:     $$text =~ s#<br>#<br />#g;
                   5297:     return;
                   5298: }
                   5299: 
                   5300: sub add_images_links {
1.33      raeburn  5301:     my ($type,$context,$settings,$id,$dirname,$res) = @_;
                   5302:     my ($image,$imglink,$url,$pathstart);
                   5303:     if ($context eq 'CSTR') {
                   5304:         $pathstart = '../..';
                   5305:     } else {
                   5306:         $pathstart = $dirname;
                   5307:     }
1.30      raeburn  5308:     if ((defined($$settings{$id}{$type}{image})) && ($$settings{$id}{$type}{image} ne '')) {
                   5309:         if ( $$settings{$id}{$type}{style} eq 'Inline' ) {
1.33      raeburn  5310:             $image = qq|<br /><img src="$pathstart/resfiles/$res/$$settings{$id}{$type}{image}" alt="$$settings{$id}{$type}{label}"/><br />|;
1.30      raeburn  5311:         } else {
1.33      raeburn  5312:             $imglink = qq|<br /><a href="$pathstart/resfiles/$res/$$settings{$id}{$type}{image}">$$settings{$id}{$type}{label}</a><br />|;
1.30      raeburn  5313:         }
                   5314:     }
                   5315:     if ((defined($$settings{$id}{$type}{link})) && ($$settings{$id}{$type}{link} ne '' )) {
                   5316:         $url = qq|<br /><a href="$$settings{$id}{$type}{link}">$$settings{$id}{$type}{linkname}</a><br />|;
                   5317:     }
                   5318:     return $image.$imglink.$url; 
                   5319: }
                   5320: 
                   5321: sub remove_html {
                   5322:     my ($choice_text) = @_;
                   5323:     return $choice_text;
                   5324: }
                   5325: 
                   5326: 
1.1       raeburn  5327: 1;
                   5328: __END__

FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>