Diff for /loncom/xml/lonxml.pm between versions 1.19 and 1.63

version 1.19, 2000/08/16 18:32:58 version 1.63, 2001/03/27 16:57:20
Line 2 Line 2
 # XML Parser Module   # XML Parser Module 
 #  #
 # last modified 06/26/00 by Alexander Sakharuk  # last modified 06/26/00 by Alexander Sakharuk
   # 11/6 Gerd Kortemeyer
   # 6/1/1 Gerd Kortemeyer
   # 2/21,3/13 Guy
   
 package Apache::lonxml;   package Apache::lonxml; 
   use vars 
   qw(@pwd @outputstack $redirection $import @extlinks $metamode);
 use strict;  use strict;
 use HTML::TokeParser;  use HTML::TokeParser;
 use Safe;  use Safe;
   use Safe::Hole;
 use Opcode;  use Opcode;
   use Apache::Constants qw(:common);
   
 sub register {  sub register {
   my $space;    my $space;
Line 19  sub register { Line 25  sub register {
     $Apache::lonxml::alltags{$temptag}=$space;      $Apache::lonxml::alltags{$temptag}=$space;
   }    }
 }  }
                                        
   sub printalltags {
     my $temp;
     foreach $temp (sort keys %Apache::lonxml::alltags) {
   #    &Apache::lonxml::debug("$temp -- $Apache::lonxml::alltags{$temp}");
     }
   }
 use Apache::style;  use Apache::style;
 use Apache::lontexconvert;  use Apache::lontexconvert;
 use Apache::run;  use Apache::run;
 use Apache::londefdef;  use Apache::londefdef;
 use Apache::scripttag;  use Apache::scripttag;
   use Apache::edit;
 #==================================================   Main subroutine: xmlparse    #==================================================   Main subroutine: xmlparse  
   @pwd=();
   @outputstack = ();
   $redirection = 0;
   $import = 1;
   @extlinks=();
   $metamode = 0;
   
 sub xmlparse {  sub xmlparse {
   
  my ($target,$content_file_string,$safeinit,%style_for_target) = @_;   my ($target,$content_file_string,$safeinit,%style_for_target) = @_;
    if ($target eq 'meta') {
      # meta mode is a bit weird only some output is to be turned off
      #<output> tag turns metamode off (defined in londefdef.pm)
      $Apache::lonxml::redirection = 0;
      $Apache::lonxml::metamode = 1;
      $Apache::lonxml::import = 0;
    } elsif ($target eq 'grade') {
      &startredirection;
      $Apache::lonxml::metamode = 0;
      $Apache::lonxml::import = 1;
    } else {
      $Apache::lonxml::metamode = 0;
      $Apache::lonxml::redirection = 0;
      $Apache::lonxml::import = 1;
    }
    #&printalltags();
  my @pars = ();   my @pars = ();
  push (@pars,HTML::TokeParser->new(\$content_file_string));   @Apache::lonxml::pwd=();
    my $pwd=$ENV{'request.filename'};
    $pwd =~ s:/[^/]*$::;
    &newparser(\@pars,\$content_file_string,$pwd);
  my $currentstring = '';   my $currentstring = '';
  my $finaloutput = '';    my $finaloutput = ''; 
  my $newarg = '';   my $newarg = '';
  my $result;   my $result;
   
  my $safeeval = new Safe;   my $safeeval = new Safe;
    my $safehole = new Safe::Hole;
  $safeeval->permit("entereval");   $safeeval->permit("entereval");
  $safeeval->permit(":base_math");   $safeeval->permit(":base_math");
  $safeeval->deny(":base_io");   $safeeval->deny(":base_io");
    $safehole->wrap(\&Apache::lonnet::EXT,$safeeval,'&EXT');
 #need to inspect this class of ops  #need to inspect this class of ops
 # $safeeval->deny(":base_orig");  # $safeeval->deny(":base_orig");
  if ( $safeinit ne '') {&Apache::run::run($safeinit,$safeeval);}   $safeinit .= ';$external::target='.$target.';';
    $safeinit .= ';$external::randomseed='.&Apache::lonnet::rndseed().';';
    &Apache::run::run($safeinit,$safeeval);
 #-------------------- Redefinition of the target in the case of compound target  #-------------------- Redefinition of the target in the case of compound target
   
  ($target, my @tenta) = split('&&',$target);   ($target, my @tenta) = split('&&',$target);
Line 53  sub xmlparse { Line 96  sub xmlparse {
  my $token;   my $token;
  while ( $#pars > -1 ) {   while ( $#pars > -1 ) {
    while ($token = $pars[$#pars]->get_token) {     while ($token = $pars[$#pars]->get_token) {
      if ($token->[0] eq 'T') {       if (($token->[0] eq 'T') || ($token->[0] eq 'C') || ($token->[0] eq 'D') ) {
        $result=$token->[1];         if ($metamode<1) { $result=$token->[1]; }
 #       $finaloutput .= &Apache::run::evaluate($token->[1],$safeeval,'');       } elsif ($token->[0] eq 'PI') {
          if ($metamode<1) { $result=$token->[2]; }
      } elsif ($token->[0] eq 'S') {       } elsif ($token->[0] eq 'S') {
        # add tag to stack             # add tag to stack    
        push (@stack,$token->[1]);         push (@stack,$token->[1]);
        # add parameters list to another stack         # add parameters list to another stack
        push (@parstack,&parstring($token));         push (@parstack,&parstring($token));
        &increasedepth($token);                &increasedepth($token);       
   #       &Apache::lonxml::debug("Checking for $token->[1] style");
        if (exists $style_for_target{$token->[1]}) {         if (exists $style_for_target{$token->[1]}) {
  $finaloutput .= &recurse($style_for_target{$token->[1]},  #   &Apache::lonxml::debug("Found $token->[1] style");
   $target,$safeeval,\%style_for_target,   if ($Apache::lonxml::redirection) {
   @parstack);     $Apache::lonxml::outputstack['-1'] .=  
        &recurse($style_for_target{$token->[1]},$target,$safeeval,
         \%style_for_target,@parstack);
    } else {
      $finaloutput .= &recurse($style_for_target{$token->[1]},$target,
       $safeeval,\%style_for_target,@parstack);
    }
        } else {         } else {
   #   &Apache::lonxml::debug("No style for for $token->[1]");
  $result = &callsub("start_$token->[1]", $target, $token,\@parstack,   $result = &callsub("start_$token->[1]", $target, $token,\@parstack,
        \@pars, $safeeval, \%style_for_target);      \@pars, $safeeval, \%style_for_target);
        }                       }              
      } elsif ($token->[0] eq 'E')  {       } elsif ($token->[0] eq 'E')  {
        #clear out any tags that didn't end         #clear out any tags that didn't end
        while ($token->[1] ne $stack[$#stack]          while ($token->[1] ne $stack[$#stack] && ($#stack > -1)) {
       && ($#stack > -1)) {pop @stack;pop @parstack;&decreasedepth($token);}   &Apache::lonxml::warning("Unbalanced tags in resource $stack['-1']");
    pop @stack;pop @parstack;&decreasedepth($token);
          }
                 
        if (exists $style_for_target{'/'."$token->[1]"}) {         if (exists $style_for_target{'/'."$token->[1]"}) {
  $finaloutput .= &recurse($style_for_target{'/'."$token->[1]"},   if ($Apache::lonxml::redirection) {
   $target,$safeeval,\%style_for_target,     $Apache::lonxml::outputstack['-1'] .=  
   @parstack);       &recurse($style_for_target{'/'."$token->[1]"},
         $target,$safeeval,\%style_for_target,@parstack);
    } else {
      $finaloutput .= &recurse($style_for_target{'/'."$token->[1]"},
       $target,$safeeval,\%style_for_target,
       @parstack);
    }
   
        } else {         } else {
  $result = &callsub("end_$token->[1]", $target, $token, \@parstack,   $result = &callsub("end_$token->[1]", $target, $token, \@parstack,
        \@pars,$safeeval, \%style_for_target);      \@pars,$safeeval, \%style_for_target);
        }         }
        } else {
          &Apache::lonxml::error("Unknown token event :$token->[0]:$token->[1]:");
      }       }
      if ($result ne "" ) {       #evaluate variable refs in result
        if ( $#parstack > -1 ) {        if ($result ne "") {
  $finaloutput .= &Apache::run::evaluate($result,$safeeval,         if ( $#parstack > -1 ) {
  $parstack[$#parstack]);   if ($Apache::lonxml::redirection) {
      $Apache::lonxml::outputstack['-1'] .= 
        &Apache::run::evaluate($result,$safeeval,$parstack[$#parstack]);
    } else {
      $finaloutput .= &Apache::run::evaluate($result,$safeeval,
     $parstack[$#parstack]);
    }
        } else {         } else {
  $finaloutput .= &Apache::run::evaluate($result,$safeeval,'');   $finaloutput .= &Apache::run::evaluate($result,$safeeval,'');
        }         }
        $result = '';         $result = '';
        } 
        if ($token->[0] eq 'E') { 
          pop @stack;pop @parstack;&decreasedepth($token);
      }       }
      if ($token->[0] eq 'E') { pop @stack;pop @parstack;&decreasedepth($token);}  
    }     }
    pop @pars;     pop @pars;
      pop @Apache::lonxml::pwd;
  }   }
   
   # if ($target eq 'meta') {
   #   $finaloutput.=&endredirection;
   # }
  return $finaloutput;   return $finaloutput;
 }  }
   
Line 106  sub recurse { Line 182  sub recurse {
   my @innerparstack = ();    my @innerparstack = ();
   my ($newarg,$target,$safeeval,$style_for_target,@parstack) = @_;    my ($newarg,$target,$safeeval,$style_for_target,@parstack) = @_;
   my @pat = ();    my @pat = ();
   push (@pat,HTML::TokeParser->new(\$newarg));    &newparser(\@pat,\$newarg);
   my $tokenpat;    my $tokenpat;
   my $partstring = '';    my $partstring = '';
   my $output='';    my $output='';
   my $decls='';    my $decls='';
   while ( $#pat > -1 ) {    while ( $#pat > -1 ) {
     while  ($tokenpat = $pat[$#pat]->get_token) {      while  ($tokenpat = $pat[$#pat]->get_token) {
       if ($tokenpat->[0] eq 'T') {        if (($tokenpat->[0] eq 'T') || ($tokenpat->[0] eq 'C') || ($tokenpat->[0] eq 'D') ) {
  $partstring = $tokenpat->[1];   if ($metamode<1) { $partstring=$tokenpat->[1]; }
         } elsif ($tokenpat->[0] eq 'PI') {
    if ($metamode<1) { $partstring=$tokenpat->[2]; }
       } elsif ($tokenpat->[0] eq 'S') {        } elsif ($tokenpat->[0] eq 'S') {
  push (@innerstack,$tokenpat->[1]);   push (@innerstack,$tokenpat->[1]);
  push (@innerparstack,&parstring($tokenpat));   push (@innerparstack,&parstring($tokenpat));
Line 125  sub recurse { Line 203  sub recurse {
       } elsif ($tokenpat->[0] eq 'E') {        } elsif ($tokenpat->[0] eq 'E') {
  #clear out any tags that didn't end   #clear out any tags that didn't end
  while ($tokenpat->[1] ne $innerstack[$#innerstack]    while ($tokenpat->[1] ne $innerstack[$#innerstack] 
        && ($#innerstack > -1)) {pop @innerstack;pop @innerparstack;         && ($#innerstack > -1)) {
  &decreasedepth($tokenpat);}    &Apache::lonxml::warning("Unbalanced tags in resource $innerstack['-1']");
     pop @innerstack;pop @innerparstack;&decreasedepth($tokenpat);
    }
  $partstring = &callsub("end_$tokenpat->[1]",   $partstring = &callsub("end_$tokenpat->[1]",
        $target, $tokenpat, \@innerparstack,         $target, $tokenpat, \@innerparstack,
        \@pat, $safeeval, $style_for_target);         \@pat, $safeeval, $style_for_target);
         } else {
    &Apache::lonxml::error("Unknown token event :$tokenpat->[0]:$tokenpat->[1]:");
       }        }
       #pass both the variable to the style tag, and the tag we         #pass both the variable to the style tag, and the tag we 
       #are processing inside the <definedtag>        #are processing inside the <definedtag>
Line 154  sub recurse { Line 236  sub recurse {
  &decreasedepth($tokenpat);}   &decreasedepth($tokenpat);}
     }      }
     pop @pat;      pop @pat;
       pop @Apache::lonxml::pwd;
   }    }
   return $output;    return $output;
 }  }
Line 162  sub callsub { Line 245  sub callsub {
   my ($sub,$target,$token,$parstack,$parser,$safeeval,$style)=@_;    my ($sub,$target,$token,$parstack,$parser,$safeeval,$style)=@_;
   my $currentstring='';    my $currentstring='';
   {    {
       my $sub1;
     no strict 'refs';      no strict 'refs';
       if ($target eq 'edit' && $token->[0] eq 'S') {
         $currentstring = &Apache::edit::tag_start($target,$token,$parstack,$parser,
    $safeeval,$style);
       }
     if (my $space=$Apache::lonxml::alltags{$token->[1]}) {      if (my $space=$Apache::lonxml::alltags{$token->[1]}) {
       #print "Calling sub $sub in $space \n";  #      &Apache::lonxml::debug("Calling sub $sub in $space $metamode<br />\n");
       $sub="$space\:\:$sub";        $sub1="$space\:\:$sub";
       $Apache::lonxml::curdepth=join('_',@Apache::lonxml::depthcounter);        $Apache::lonxml::curdepth=join('_',@Apache::lonxml::depthcounter);
       $currentstring = &$sub($target,$token,$parstack,$parser,        $currentstring .= &$sub1($target,$token,$parstack,$parser,
      $safeeval,$style);       $safeeval,$style);
     } else {      } else {
       #print "NOT Calling sub $sub\n";  #      &Apache::lonxml::debug("NOT Calling sub $sub in $space $metamode<br />\n");
       if (defined($token->[4])) {        if ($metamode <1) {
  $currentstring = $token->[4];   if (defined($token->[4]) && ($metamode < 1)) {
       } else {    $currentstring .= $token->[4];
  $currentstring = $token->[2];   } else {
     $currentstring .= $token->[2];
    }
       }        }
     }      }
       if ($target eq 'edit' && $token->[0] eq 'E') {
         $currentstring .= &Apache::edit::tag_end($target,$token,$parstack,$parser,
    $safeeval,$style);
       }
     use strict 'refs';      use strict 'refs';
   }    }
   return $currentstring;    return $currentstring;
 }  }
   
   sub startredirection {
     $Apache::lonxml::redirection++;
     push (@Apache::lonxml::outputstack, '');
   }
   
   sub endredirection {
     if (!$Apache::lonxml::redirection) {
       &Apache::lonxml::error("Endredirection was called, before a startredirection, perhaps you have unbalanced tags. Some debuggin information:".join ":",caller);
       return '';
     }
     $Apache::lonxml::redirection--;
     pop @Apache::lonxml::outputstack;
   }
   
 sub initdepth {  sub initdepth {
   @Apache::lonxml::depthcounter=();    @Apache::lonxml::depthcounter=();
   $Apache::lonxml::depth=-1;    $Apache::lonxml::depth=-1;
Line 190  sub initdepth { Line 298  sub initdepth {
   
 sub increasedepth {  sub increasedepth {
   my ($token) = @_;    my ($token) = @_;
   if ($Apache::lonxml::depth<$Apache::lonxml::olddepth-1) {  
     $#Apache::lonxml::depthcounter--;  
     $Apache::lonxml::olddepth=$Apache::lonxml::depth;  
   }  
   $Apache::lonxml::depth++;    $Apache::lonxml::depth++;
 #  print "<br>s $Apache::lonxml::depth : $Apache::lonxml::olddepth : $token->[1]<br>\n";  
   $Apache::lonxml::depthcounter[$Apache::lonxml::depth]++;    $Apache::lonxml::depthcounter[$Apache::lonxml::depth]++;
   if ($Apache::lonxml::depthcounter[$Apache::lonxml::depth]==1) {    if ($Apache::lonxml::depthcounter[$Apache::lonxml::depth]==1) {
     $Apache::lonxml::olddepth=$Apache::lonxml::depth;      $Apache::lonxml::olddepth=$Apache::lonxml::depth;
   }    }
     my $curdepth=join('_',@Apache::lonxml::depthcounter);
   #  &Apache::lonxml::debug("s $Apache::lonxml::depth : $Apache::lonxml::olddepth : $curdepth : $token->[1]\n");
   #print "<br />s $Apache::lonxml::depth : $Apache::lonxml::olddepth : $curdepth : $token->[1]\n";
 }  }
   
 sub decreasedepth {  sub decreasedepth {
   my ($token) = @_;    my ($token) = @_;
   $Apache::lonxml::depth--;    $Apache::lonxml::depth--;
 #  print "<br>e $Apache::lonxml::depth : $Apache::lonxml::olddepth : $token->[1]<br>\n";    if ($Apache::lonxml::depth<$Apache::lonxml::olddepth-1) {
       $#Apache::lonxml::depthcounter--;
       $Apache::lonxml::olddepth=$Apache::lonxml::depth+1;
     }
     if (  $Apache::lonxml::depth < -1) {
       &Apache::lonxml::warning("Unbalanced tags in resource");   
       $Apache::lonxml::depth='-1';
     }
     my $curdepth=join('_',@Apache::lonxml::depthcounter);
   #  &Apache::lonxml::debug("e $Apache::lonxml::depth : $Apache::lonxml::olddepth : $token->[1] : $curdepth\n");
   #print "<br />e $Apache::lonxml::depth : $Apache::lonxml::olddepth : $token->[1] : $curdepth\n";
 }  }
   
 sub get_all_text {  sub get_all_text {
Line 214  sub get_all_text { Line 330  sub get_all_text {
  my $depth=0;   my $depth=0;
  my $token;   my $token;
  my $result='';   my $result='';
  while (($depth >=0) && ($token = $pars->get_token)) {   if ( $tag =~ m:^/: ) { 
    if ($token->[0] eq 'T') {     my $tag=substr($tag,1); 
      $result.=$token->[1];  #   &Apache::lonxml::debug("have:$tag:");
    } elsif ($token->[0] eq 'S') {     while (($depth >=0) && ($token = $pars->get_token)) {
      if ($token->[1] eq $tag) { $depth++; }  #     &Apache::lonxml::debug("e token:$token->[0]:$depth:$token->[1]");
      $result.=$token->[4];       if (($token->[0] eq 'T')||($token->[0] eq 'C')||($token->[0] eq 'D')) {
    } elsif ($token->[0] eq 'E')  {         $result.=$token->[1];
      if ($token->[1] eq $tag) { $depth--; }       } elsif ($token->[0] eq 'PI') {
      #skip sending back the last end tag         $result.=$token->[2];
      if ($depth > -1) { $result.=$token->[2]; }       } elsif ($token->[0] eq 'S') {
          if ($token->[1] eq $tag) { $depth++; }
          $result.=$token->[4];
        } elsif ($token->[0] eq 'E')  {
          if ( $token->[1] eq $tag) { $depth--; }
          #skip sending back the last end tag
          if ($depth > -1) { $result.=$token->[2]; } else {
    $pars->unget_token($token);
          }
        }
      }
    } else {
      while ($token = $pars->get_token) {
   #     &Apache::lonxml::debug("s token:$token->[0]:$depth:$token->[1]");
        if (($token->[0] eq 'T')||($token->[0] eq 'C')||($token->[0] eq 'D')) {
          $result.=$token->[1];
        } elsif ($token->[0] eq 'PI') {
          $result.=$token->[2];
        } elsif ($token->[0] eq 'S') {
          if ( $token->[1] eq $tag) { 
    $pars->unget_token($token); last;
          } else {
    $result.=$token->[4];
          }
        } elsif ($token->[0] eq 'E')  {
          $result.=$token->[2];
        }
    }     }
  }   }
   # &Apache::lonxml::debug("Exit:$result:");
  return $result   return $result
 }  }
   
   sub newparser {
     my ($parser,$contentref,$dir) = @_;
     push (@$parser,HTML::TokeParser->new($contentref));
     $$parser['-1']->xml_mode('1');
     if ( $dir eq '' ) {
       push (@Apache::lonxml::pwd, $Apache::lonxml::pwd[$#Apache::lonxml::pwd]);
     } else {
       push (@Apache::lonxml::pwd, $dir);
     } 
   #  &Apache::lonxml::debug("pwd:$#Apache::lonxml::pwd");
   #  &Apache::lonxml::debug("pwd:$Apache::lonxml::pwd[$#Apache::lonxml::pwd]");
   }
   
 sub parstring {  sub parstring {
   my ($token) = @_;    my ($token) = @_;
   my $temp='';    my $temp='';
   map {$temp .= "my \$$_=\"$token->[2]->{$_}\";"} @{$token->[3]};    map {
       unless ($_=~/\W/) {
         my $val=$token->[2]->{$_};
         $val =~ s/([\%\@\\])/\\$1/g;
         #if ($val =~ m/^[\%\@]/) { $val="\\".$val; }
         $temp .= "my \$$_=\"$val\";"
       }
     } @{$token->[3]};
   return $temp;    return $temp;
 }  }
 1;  
 __END__  
   
   sub writeallows {
       my $thisurl='/res/'.&Apache::lonnet::declutter(shift);
       my $thisdir=$thisurl;
       $thisdir=~s/\/[^\/]+$//;
       my %httpref=();
       map {
          $httpref{'httpref.'.
            &Apache::lonnet::hreflocation($thisdir,$_)}=$thisurl;              } @extlinks;
       &Apache::lonnet::appenv(%httpref);
   }
   
   sub handler {
     my $request=shift;
     
     my $target='tex';
     $Apache::lonxml::debug=1;
     if ($ENV{'browser.mathml'}) {
       $request->content_type('text/xml');
     } else {
       $request->content_type('text/html');
     }
   
   #  $request->print(<<ENDHEADER);
   #<html>
   #<head>
   #<title>Just test</title>
   #</head>
   #<body bgcolor="#FFFFFF">
   #ENDHEADER
   #  &Apache::lonhomework::send_header($request);
     $request->send_http_header;
   
     return OK if $request->header_only;
   
   ##  $request->print(&Apache::lontexconvert::header());
   
   ##  $request->print('<body bgcolor="#FFFFFF">'."\n");
   
     if ($target eq 'tex') {
   
   
   
     } else {
            $request->print(&Apache::lontexconvert::header());
            $request->print('<body bgcolor="#FFFFFF">'."\n");
     }
   
     my $file=&Apache::lonnet::filelocation("",$request->uri);
     my %mystyle;
     my $result = ''; 
     my $filecontents=&Apache::lonnet::getfile($file);
     if ($filecontents == -1) {
       &Apache::lonxml::error("<b> Unable to find <i>$file</i></b>");
       $filecontents='';
     } else {
       $result = &Apache::lonxml::xmlparse($target,$filecontents,'',%mystyle);
     }
     $request->print($result);
   
   
   ##  $request->print('</body>');
     if ($target eq 'tex') {
   #    $request->print('\end{document}'."\n");
     } else {
       $request->print('</body>');
       $request->print(&Apache::lontexconvert::footer());
     }
   ##  $request->print(&Apache::lontexconvert::footer());
     writeallows($request->uri);
     return OK;
   }
    
   $Apache::lonxml::debug=0;
   sub debug {
     if ($Apache::lonxml::debug eq 1) {
       print "DEBUG:".$_[0]."<br />\n";
     }
   }
   
   sub error {
     if ($Apache::lonxml::debug eq 1) {
       print "<b>ERROR:</b>".$_[0]."<br />\n";
     } else {
       print "<b>An Error occured while processing this resource. The instructor has been notified.</b> <br />";
       #notify author
       &Apache::lonmsg::author_res_msg($ENV{'request.filename'},$_[0]);
       #notify course
       if ( $ENV{'request.course.id'} ) {
         my $users=$ENV{'course.'.$ENV{'request.course.id'}.'.comment.email'};
         foreach my $user (split /\,/, $users) {
    ($user,my $domain) = split /:/, $user;
    &Apache::lonmsg::user_normal_msg($user,$domain,"Error in $ENV{'request.filename'}",$_[0]);
         }
       }
       
       #FIXME probably shouldn't have me get everything forever.
       &Apache::lonmsg::user_normal_msg('albertel','msu',"Error in $ENV{'request.filename'}",$_[0]);
       #&Apache::lonmsg::user_normal_msg('albertel','103',"Error in $ENV{'request.filename'}",$_[0]);   
     }
   }
   
   sub warning {
     if ($Apache::lonxml::debug eq 1) {
       print "<b>W</b>ARNING<b>:</b>".$_[0]."<br />\n";
     }
   }
   
   1;
   __END__

Removed from v.1.19  
changed lines
  Added in v.1.63


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>