Diff for /loncom/xml/lonxml.pm between versions 1.3 and 1.57

version 1.3, 2000/06/26 21:35:20 version 1.57, 2001/03/19 20:08:53
Line 2 Line 2
 # XML Parser Module   # XML Parser Module 
 #  #
 # last modified 06/26/00 by Alexander Sakharuk  # last modified 06/26/00 by Alexander Sakharuk
   # 11/6 Gerd Kortemeyer
 package Apache::lonxmlparser;   # 6/1/1 Gerd Kortemeyer
   # 2/21,3/13 Guy
   
   package Apache::lonxml; 
   use vars 
   qw(@pwd @outputstack $redirection $textredirection $import @extlinks);
 use strict;  use strict;
 use HTML::TokeParser;  use HTML::TokeParser;
 use Safe;  use Safe;
 use Apache::lonstyleparser;  use Safe::Hole;
   use Opcode;
   use Apache::Constants qw(:common);
   
   sub register {
     my $space;
     my @taglist;
     my $temptag;
     ($space,@taglist) = @_;
     foreach $temptag (@taglist) {
       $Apache::lonxml::alltags{$temptag}=$space;
     }
   }
   
   sub printalltags {
     my $temp;
     foreach $temp (sort keys %Apache::lonxml::alltags) {
       &Apache::lonxml::debug("$temp -- $Apache::lonxml::alltags{$temp}");
     }
   }
   use Apache::style;
 use Apache::lontexconvert;  use Apache::lontexconvert;
 use Apache::londefaulttags;  use Apache::run;
   use Apache::londefdef;
   use Apache::scripttag;
 #==================================================   Main subroutine: xmlparse    #==================================================   Main subroutine: xmlparse  
   @pwd=();
   @outputstack = ();
   $redirection = 0;
   $import = 1;
   @extlinks=();
   
 sub xmlparse {  sub xmlparse {
   
  my ($target,$content_file_string,%style_for_target) = @_;   my ($target,$content_file_string,$safeinit,%style_for_target) = @_;
  my $pars = HTML::TokeParser->new(\$content_file_string);   if ($target eq 'meta') {
      &startredirection;
      $Apache::lonxml::import = 0;
    } elsif ($target eq 'grade') {
      &startredirection;
      $Apache::lonxml::import = 1;
    } else {
      $Apache::lonxml::redirection = 0;
      $Apache::lonxml::import = 1;
    }
    #&printalltags();
    my @pars = ();
    @Apache::lonxml::pwd=();
    my $pwd=$ENV{'request.filename'};
    $pwd =~ s:/[^/]*$::;
    &newparser(\@pars,\$content_file_string,$pwd);
  my $currentstring = '';   my $currentstring = '';
  my $finaloutput = '';    my $finaloutput = ''; 
  my $newarg = '';   my $newarg = '';
  my $tempostring = '';   my $result;
  my $tempocont = '';  
  my $safeeval = new Safe;  
   
    my $safeeval = new Safe;
    my $safehole = new Safe::Hole;
    $safeeval->permit("entereval");
    $safeeval->permit(":base_math");
    $safeeval->deny(":base_io");
    $safehole->wrap(\&Apache::lonnet::EXT,$safeeval,'&EXT');
   #need to inspect this class of ops
   # $safeeval->deny(":base_orig");
    $safeinit .= ';$external::target='.$target.';';
    $safeinit .= ';$external::randomseed='.&Apache::lonnet::rndseed().';';
    &Apache::run::run($safeinit,$safeeval);
 #-------------------- Redefinition of the target in the case of compound target  #-------------------- Redefinition of the target in the case of compound target
   
  ($target, my @tenta) = split('&&',$target);   ($target, my @tenta) = split('&&',$target);
   
 #------------------------- Stack definition (in stack we have all current tags)  
   
  my @stack = ();    my @stack = (); 
  my @parstack = ();   my @parstack = ();
    &initdepth;
 #------------------------------------- Parse input string (content_file_string)  
    
  my $token;   my $token;
    while ( $#pars > -1 ) {
  while ($token = $pars->get_token) {     while ($token = $pars[$#pars]->get_token) {
   if ($token->[0] eq 'T') {       if (($token->[0] eq 'T') || ($token->[0] eq 'C') || ($token->[0] eq 'D') ) {
     $finaloutput .= $token->[1];         $result=$token->[1];
     $tempocont .= $token->[1];       } elsif ($token->[0] eq 'PI') {
   } elsif ($token->[0] eq 'S') {         $result=$token->[2];
 #------------------------------------------------------------- add tag to stack           } elsif ($token->[0] eq 'S') {
   push (@stack,$token->[1]);         # add tag to stack    
 #----------------------------------------- add parameters list to another stack         push (@stack,$token->[1]);
   map {$tempostring .= "$_=$token->[2]->{$_},"} @{$token->[3]};         # add parameters list to another stack
   push (@parstack,$tempostring);         push (@parstack,&parstring($token));
   $tempostring = '';         &increasedepth($token);       
          if (exists $style_for_target{$token->[1]}) {
    if (exists $style_for_target{$token->[1]}) {    if ($Apache::lonxml::redirection) {
      $Apache::lonxml::outputstack['-1'] .=  
 #---------------------------------------------------- use style file definition       &recurse($style_for_target{$token->[1]},$target,$safeeval,
         \%style_for_target,@parstack);
     $newarg = $style_for_target{$token->[1]};   } else {
      $finaloutput .= &recurse($style_for_target{$token->[1]},$target,
     if (index($newarg,'script') != -1 ) {      $safeeval,\%style_for_target,@parstack);
       my $pat = HTML::TokeParser->new(\$newarg);   }
       my $tokenpat;         } else {
       my $partstring = '';   $result = &callsub("start_$token->[1]", $target, $token,\@parstack,
       my $oustring = '';      \@pars, $safeeval, \%style_for_target);
       my $outputstring;         }              
        } elsif ($token->[0] eq 'E')  {
        while  ($tokenpat = $pat->get_token) {         #clear out any tags that didn't end
  if ($tokenpat->[0] eq 'T') {         while ($token->[1] ne $stack[$#stack] && ($#stack > -1)) {
   $oustring .= $tokenpat->[1];   &Apache::lonxml::warning("Unbalanced tags in resource $stack['-1']");
  } elsif ($tokenpat->[0] eq 'S') {   pop @stack;pop @parstack;&decreasedepth($token);
            if ($tokenpat->[1] eq 'script') {  
              while  ($tokenpat = $pat->get_token and $tokenpat->[1] ne 'script') {  
                    if ($tokenpat->[0] eq 'S')  {  
      $partstring .=  $tokenpat->[4];  
    } elsif ($tokenpat->[0] eq 'T') {  
                      $partstring .=  $tokenpat->[1];  
    } elsif ($tokenpat->[0] eq 'E') {  
                      $partstring .=  $tokenpat->[2];  
                    }  
      }  
         
              map {$partstring =~ s/\$$_/$token->[2]->{$_}/g; } @{$token->[3]};  
                                  
              &run($partstring,$safeeval);  
   
              $partstring = '';  
    } elsif ($tokenpat->[1] eq 'evaluate') {         
       $outputstring = &evaluate($tokenpat->[2]{expression},$safeeval);  
               $oustring .=  $outputstring;  
    } else {  
               $oustring .= $tokenpat->[4];   
    }  
  } elsif ($tokenpat->[0] eq 'E' and $tokenpat->[1] ne 'evaluate') {  
            $oustring .= $tokenpat->[1];      
  }  
        }         }
        $newarg =  $oustring;         
     } else {         if (exists $style_for_target{'/'."$token->[1]"}) {
        map {$newarg =~ s/\$$_/$token->[2]->{$_}/g; } @{$token->[3]};   if ($Apache::lonxml::redirection) {
     }     $Apache::lonxml::outputstack['-1'] .=  
        $finaloutput .= $newarg;       &recurse($style_for_target{'/'."$token->[1]"},
    } else {        $target,$safeeval,\%style_for_target,@parstack);
 #------------------------------------------------ use default definition of tag  
       my $sub="start_$token->[1]";  
         {  
  no strict 'refs';  
          if (defined (&$sub)) {  
            $currentstring = &$sub($target,$token,\@parstack);  
            $finaloutput .= $currentstring;  
            $currentstring = '';  
  } else {   } else {
    $finaloutput .= $token->[4];     $finaloutput .= &recurse($style_for_target{'/'."$token->[1]"},
       $target,$safeeval,\%style_for_target,
       @parstack);
  }   }
          use strict 'refs';        
          } else {
    $result = &callsub("end_$token->[1]", $target, $token, \@parstack,
       \@pars,$safeeval, \%style_for_target);
          }
        } else {
          &Apache::lonxml::error("Unknown token event :$token->[0]:$token->[1]:");
        }
        #evaluate variable refs in result
        if ($result ne "") {
          if ( $#parstack > -1 ) {
    if ($Apache::lonxml::redirection) {
      $Apache::lonxml::outputstack['-1'] .= 
        &Apache::run::evaluate($result,$safeeval,$parstack[$#parstack]);
    } else {
      $finaloutput .= &Apache::run::evaluate($result,$safeeval,
     $parstack[$#parstack]);
    }
          } else {
    $finaloutput .= &Apache::run::evaluate($result,$safeeval,'');
          }
          $result = '';
        } 
        if ($token->[0] eq 'E') { 
          pop @stack;pop @parstack;&decreasedepth($token);
        }
      }
      pop @pars;
      pop @Apache::lonxml::pwd;
    }
   
    return $finaloutput;
   }
   
   sub recurse {
     
     my @innerstack = (); 
     my @innerparstack = ();
     my ($newarg,$target,$safeeval,$style_for_target,@parstack) = @_;
     my @pat = ();
     &newparser(\@pat,\$newarg);
     my $tokenpat;
     my $partstring = '';
     my $output='';
     my $decls='';
     while ( $#pat > -1 ) {
       while  ($tokenpat = $pat[$#pat]->get_token) {
         if (($tokenpat->[0] eq 'T') || ($tokenpat->[0] eq 'C') || ($tokenpat->[0] eq 'D') ) {
    $partstring = $tokenpat->[1];
         } elsif ($tokenpat->[0] eq 'PI') {
    $result=$tokenpat->[2];
         } elsif ($tokenpat->[0] eq 'S') {
    push (@innerstack,$tokenpat->[1]);
    push (@innerparstack,&parstring($tokenpat));
    &increasedepth($tokenpat);
    $partstring = &callsub("start_$tokenpat->[1]", 
          $target, $tokenpat, \@innerparstack,
          \@pat, $safeeval, $style_for_target);
         } elsif ($tokenpat->[0] eq 'E') {
    #clear out any tags that didn't end
    while ($tokenpat->[1] ne $innerstack[$#innerstack] 
          && ($#innerstack > -1)) {
     &Apache::lonxml::warning("Unbalanced tags in resource $innerstack['-1']");
     pop @innerstack;pop @innerparstack;&decreasedepth($tokenpat);
  }   }
    }                 $partstring = &callsub("end_$tokenpat->[1]",
   } elsif ($token->[0] eq 'E')  {         $target, $tokenpat, \@innerparstack,
 # Put here check for correct final tag (to avoid existence of starting tag only)         \@pat, $safeeval, $style_for_target);
                 } else {
      pop @stack;    &Apache::lonxml::error("Unknown token event :$tokenpat->[0]:$tokenpat->[1]:");
      unless (exists $style_for_target{$token->[1]}) {        }
       my $sub="end_$token->[1]";        #pass both the variable to the style tag, and the tag we 
        {        #are processing inside the <definedtag>
  no strict 'refs';        if ( $partstring ne "" ) {
           if (defined (&$sub)) {   if ( $#parstack > -1 ) { 
  $currentstring = &$sub($target,$token,\@parstack);    if ( $#innerparstack > -1 ) { 
                 $finaloutput .= $currentstring;      $decls= $parstack[$#parstack].$innerparstack[$#innerparstack];
                 $currentstring = '';    } else {
       $decls= $parstack[$#parstack];
     }
    } else {
     if ( $#innerparstack > -1 ) { 
       $decls=$innerparstack[$#innerparstack];
   } else {    } else {
                 $finaloutput .= $token->[4];      $decls='';
   }    }
  use strict 'refs';   }
    $output .= &Apache::run::evaluate($partstring,$safeeval,$decls);
    $partstring = '';
         }
         if ($tokenpat->[0] eq 'E') { pop @innerstack;pop @innerparstack;
    &decreasedepth($tokenpat);}
       }
       pop @pat;
       pop @Apache::lonxml::pwd;
     }
     return $output;
   }
   
   sub callsub {
     my ($sub,$target,$token,$parstack,$parser,$safeeval,$style)=@_;
     my $currentstring='';
     {
         my $sub1;
       no strict 'refs';
       if (my $space=$Apache::lonxml::alltags{$token->[1]}) {
         #&Apache::lonxml::debug("Calling sub $sub in $space<br />\n");
         $sub1="$space\:\:$sub";
         $Apache::lonxml::curdepth=join('_',@Apache::lonxml::depthcounter);
         $currentstring = &$sub1($target,$token,$parstack,$parser,
        $safeeval,$style);
       } else {
         #&Apache::lonxml::debug("NOT Calling sub $sub in $space<br />\n");
         if (defined($token->[4])) {
    $currentstring = $token->[4];
         } else {
    $currentstring = $token->[2];
         }
       }
       use strict 'refs';
     }
     return $currentstring;
   }
   
   sub startredirection {
     $Apache::lonxml::redirection++;
     push (@Apache::lonxml::outputstack, '');
   }
   
   sub endredirection {
     if (!$Apache::lonxml::redirection) {
       &Apache::lonxml::error("Endredirection was called, before a startredirection, perhaps you have unbalanced tags. Some debuggin information:".join ":",caller);
       return '';
     }
     $Apache::lonxml::redirection--;
     pop @Apache::lonxml::outputstack;
   }
   
   sub initdepth {
     @Apache::lonxml::depthcounter=();
     $Apache::lonxml::depth=-1;
     $Apache::lonxml::olddepth=-1;
   }
   
   sub increasedepth {
     my ($token) = @_;
     $Apache::lonxml::depth++;
     $Apache::lonxml::depthcounter[$Apache::lonxml::depth]++;
     if ($Apache::lonxml::depthcounter[$Apache::lonxml::depth]==1) {
       $Apache::lonxml::olddepth=$Apache::lonxml::depth;
     }
     my $curdepth=join('_',@Apache::lonxml::depthcounter);
     &Apache::lonxml::debug("s $Apache::lonxml::depth : $Apache::lonxml::olddepth : $curdepth : $token->[1]\n");
   #print "<br />s $Apache::lonxml::depth : $Apache::lonxml::olddepth : $curdepth : $token->[1]\n";
   }
   
   sub decreasedepth {
     my ($token) = @_;
     $Apache::lonxml::depth--;
     if ($Apache::lonxml::depth<$Apache::lonxml::olddepth-1) {
       $#Apache::lonxml::depthcounter--;
       $Apache::lonxml::olddepth=$Apache::lonxml::depth+1;
     }
     if (  $Apache::lonxml::depth < -1) {
       &Apache::lonxml::warning("Unbalanced tags in resource");   
       $Apache::lonxml::depth='-1';
     }
     my $curdepth=join('_',@Apache::lonxml::depthcounter);
     &Apache::lonxml::debug("e $Apache::lonxml::depth : $Apache::lonxml::olddepth : $token->[1] : $curdepth\n");
   #print "<br />e $Apache::lonxml::depth : $Apache::lonxml::olddepth : $token->[1] : $curdepth\n";
   }
   
   sub get_all_text {
   
    my($tag,$pars)= @_;
    my $depth=0;
    my $token;
    my $result='';
    if ( $tag =~ m:^/: ) { 
      my $tag=substr($tag,1); 
   #   &Apache::lonxml::debug("have:$tag:");
      while (($depth >=0) && ($token = $pars->get_token)) {
   #     &Apache::lonxml::debug("e token:$token->[0]:$depth:$token->[1]");
        if (($token->[0] eq 'T')||($token->[0] eq 'C')||($token->[0] eq 'D')) {
          $result.=$token->[1];
        } elsif ($token->[0] eq 'PI') {
          $result.=$token->[2];
        } elsif ($token->[0] eq 'S') {
          if ($token->[1] eq $tag) { $depth++; }
          $result.=$token->[4];
        } elsif ($token->[0] eq 'E')  {
          if ( $token->[1] eq $tag) { $depth--; }
          #skip sending back the last end tag
          if ($depth > -1) { $result.=$token->[2]; } else {
    $pars->unget_token($token);
        }         }
      }       }
 #-------------------------------------------------- end tag from the style file     }
      if (exists $style_for_target{'/'."$token->[1]"}) {   } else {
        $newarg = $style_for_target{'/'."$token->[1]"};     while ($token = $pars->get_token) {
        if (index($newarg,'script') != -1 ) {  #     &Apache::lonxml::debug("s token:$token->[0]:$depth:$token->[1]");
          my $pat = HTML::TokeParser->new(\$newarg);       if (($token->[0] eq 'T')||($token->[0] eq 'C')||($token->[0] eq 'D')) {
          my $tokenpat;         $result.=$token->[1];
          my $partstring = '';       } elsif ($token->[0] eq 'PI') {
          my $oustring = '';         $result.=$token->[2];
          my $outputstring;       } elsif ($token->[0] eq 'S') {
          if ( $token->[1] eq $tag) { 
          while  ($tokenpat = $pat->get_token) {   $pars->unget_token($token); last;
   if ($tokenpat->[0] eq 'T') {  
     $oustring .= $tokenpat->[1];  
        } elsif ($tokenpat->[0] eq 'S') {  
              if ($tokenpat->[1] eq 'script') {  
                while  ($tokenpat = $pat->get_token and $tokenpat->[1] ne 'script') {  
                      if ($tokenpat->[0] eq 'S')  {  
        $partstring .=  $tokenpat->[4];  
      } elsif ($tokenpat->[0] eq 'T') {  
                        $partstring .=  $tokenpat->[1];  
      } elsif ($tokenpat->[0] eq 'E') {  
                        $partstring .=  $tokenpat->[2];  
                      }  
        }  
   
                my @tempor_list = split(',',$parstack[$#parstack]);  
                my @te_kl = ();  
                my %tempor_hash = ();  
                map {(my $onete,my $twote) = split('=',$_); push (@te_kl,$onete);   
                     $tempor_hash{$onete} = $twote} @tempor_list;  
                map {$partstring =~ s/\$$_/$tempor_hash{$_}/g; } @te_kl;   
                                  
                &run($partstring,$safeeval);  
   
                $partstring = '';  
      } elsif ($tokenpat->[1] eq 'evaluate') {  
         $outputstring = &evaluate($tokenpat->[2]{expression},$safeeval);  
                 $oustring .=  $outputstring;  
      } else {  
                 $oustring .= $tokenpat->[4];   
      }  
   } elsif ($tokenpat->[0] eq 'E' and $tokenpat->[1] ne 'evaluate') {  
              $oustring .= $tokenpat->[1];      
   }  
          }  
              $newarg =  $oustring;  
        } else {         } else {
          my @very_temp = split(',',@parstack[$#parstack]);   $result.=$token->[4];
          map {my @ret= split('=',$_); $newarg =~ s/\$$ret[0]/$ret[1]/g; } @very_temp;  
        }         }
        } elsif ($token->[0] eq 'E')  {
        $finaloutput .= $newarg;          $result.=$token->[2];
      }       }
      pop @parstack;     }
   }  
  }   }
  return $finaloutput;  # &Apache::lonxml::debug("Exit:$result:");
    return $result
   }
   
   sub newparser {
     my ($parser,$contentref,$dir) = @_;
     push (@$parser,HTML::TokeParser->new($contentref));
     $$parser['-1']->xml_mode('1');
     if ( $dir eq '' ) {
       push (@Apache::lonxml::pwd, $Apache::lonxml::pwd[$#Apache::lonxml::pwd]);
     } else {
       push (@Apache::lonxml::pwd, $dir);
     } 
   #  &Apache::lonxml::debug("pwd:$#Apache::lonxml::pwd");
   #  &Apache::lonxml::debug("pwd:$Apache::lonxml::pwd[$#Apache::lonxml::pwd]");
   }
   
   sub parstring {
     my ($token) = @_;
     my $temp='';
     map {
       unless ($_=~/\W/) {
         my $val=$token->[2]->{$_};
         $val =~ s/([\%\@\\])/\\$1/g;
         #if ($val =~ m/^[\%\@]/) { $val="\\".$val; }
         $temp .= "my \$$_=\"$val\";"
       }
     } @{$token->[3]};
     return $temp;
   }
   
   sub writeallows {
       my $thisurl='/res/'.&Apache::lonnet::declutter(shift);
       my $thisdir=$thisurl;
       $thisdir=~s/\/[^\/]+$//;
       my %httpref=();
       map {
          $httpref{'httpref.'.
            &Apache::lonnet::hreflocation($thisdir,$_)}=$thisurl;              } @extlinks;
       &Apache::lonnet::appenv(%httpref);
   }
   
   sub handler {
     my $request=shift;
     
     my $target='web';
     $Apache::lonxml::debug=0;
     if ($ENV{'browser.mathml'}) {
       $request->content_type('text/xml');
     } else {
       $request->content_type('text/html');
     }
   
   #  $request->print(<<ENDHEADER);
   #<html>
   #<head>
   #<title>Just test</title>
   #</head>
   #<body bgcolor="#FFFFFF">
   #ENDHEADER
   #  &Apache::lonhomework::send_header($request);
     $request->send_http_header;
   
     return OK if $request->header_only;
   
     $request->print(&Apache::lontexconvert::header());
   
     $request->print('<body bgcolor="#FFFFFF">'."\n");
   
     my $file=&Apache::lonnet::filelocation("",$request->uri);
     my %mystyle;
     my $result = ''; 
     my $filecontents=&Apache::lonnet::getfile($file);
     if ($filecontents == -1) {
       &Apache::lonxml::error("<b> Unable to find <i>$file</i></b>");
       $filecontents='';
     } else {
       $result = &Apache::lonxml::xmlparse($target,$filecontents,'',%mystyle);
     }
     $request->print($result);
   
   
     $request->print('</body>');
     $request->print(&Apache::lontexconvert::footer());
     writeallows($request->uri);
     return OK;
   }
    
   $Apache::lonxml::debug=0;
   sub debug {
     if ($Apache::lonxml::debug eq 1) {
       print "DEBUG:".$_[0]."<br />\n";
     }
   }
   
   sub error {
     if ($Apache::lonxml::debug eq 1) {
       print "<b>ERROR:</b>".$_[0]."<br />\n";
     } else {
       print "<b>An Error occured while processing this resource. The instructor has been notified.</b> <br />";
       #notify author
       &Apache::lonmsg::author_res_msg($ENV{'request.filename'},$_[0]);
       #notify course
       if ( $ENV{'request.course.id'} ) {
         my $users=$ENV{'course.'.$ENV{'request.course.id'}.'.comment.email'};
         foreach my $user (split /\,/, $users) {
    ($user,my $domain) = split /:/, $user;
    &Apache::lonmsg::user_normal_msg($user,$domain,"Error in $ENV{'request.filename'}",$_[0]);
         }
       }
       
       #FIXME probably shouldn't have me get everything forever.
       &Apache::lonmsg::user_normal_msg('albertel','msu',"Error in $ENV{'request.filename'}",$_[0]);
       #&Apache::lonmsg::user_normal_msg('albertel','103',"Error in $ENV{'request.filename'}",$_[0]);   
     }
   }
   
   sub warning {
     if ($Apache::lonxml::debug eq 1) {
       print "<b>W</b>ARNING<b>:</b>".$_[0]."<br />\n";
     }
 }  }
   
 1;  1;

Removed from v.1.3  
changed lines
  Added in v.1.57


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>