php formatter based on the JDT java formatter (very early version)
[phpeclipse.git] / net.sourceforge.phpeclipse / src / test / PHPParser.jj
index e3b05cf..34ee7b7 100644 (file)
@@ -64,18 +64,18 @@ public final class PHPParser extends PHPParserSuperclass {
   public PHPParser() {
   }
 
-  public final void setFileToParse(IFile fileToParse) {
+  public final void setFileToParse(final IFile fileToParse) {
     this.fileToParse = fileToParse;
   }
 
-  public PHPParser(IFile fileToParse) {
+  public PHPParser(final IFile fileToParse) {
     this(new StringReader(""));
     this.fileToParse = fileToParse;
   }
 
-  public static final void phpParserTester(String strEval) throws CoreException, ParseException {
+  public static final void phpParserTester(final String strEval) throws CoreException, ParseException {
     PHPParserTokenManager.SwitchTo(PHPParserTokenManager.PHPPARSING);
-    StringReader stream = new StringReader(strEval);
+    final StringReader stream = new StringReader(strEval);
     if (jj_input_stream == null) {
       jj_input_stream = new SimpleCharStream(stream, 1, 1);
     }
@@ -83,8 +83,8 @@ public final class PHPParser extends PHPParserSuperclass {
     phpTest();
   }
 
-  public static final void htmlParserTester(String strEval) throws CoreException, ParseException {
-    StringReader stream = new StringReader(strEval);
+  public static final void htmlParserTester(final String strEval) throws CoreException, ParseException {
+    final StringReader stream = new StringReader(strEval);
     if (jj_input_stream == null) {
       jj_input_stream = new SimpleCharStream(stream, 1, 1);
     }
@@ -92,10 +92,10 @@ public final class PHPParser extends PHPParserSuperclass {
     phpFile();
   }
 
-  public final PHPOutlineInfo parseInfo(Object parent, String s) {
+  public final PHPOutlineInfo parseInfo(final Object parent, final String s) {
     outlineInfo = new PHPOutlineInfo(parent);
     currentSegment = outlineInfo.getDeclarations();
-    StringReader stream = new StringReader(s);
+    final StringReader stream = new StringReader(s);
     if (jj_input_stream == null) {
       jj_input_stream = new SimpleCharStream(stream, 1, 1);
     }
@@ -124,8 +124,9 @@ public final class PHPParser extends PHPParserSuperclass {
 
   /**
    * Create marker for the parse error
+   * @param e the ParseException
    */
-  private static void setMarker(ParseException e) {
+  private static void setMarker(final ParseException e) {
     try {
       setMarker(fileToParse,
                 errorMessage,
@@ -141,12 +142,12 @@ public final class PHPParser extends PHPParserSuperclass {
   /**
    * Create markers according to the external parser output
    */
-  private static void createMarkers(String output, IFile file) throws CoreException {
+  private static void createMarkers(final String output, final IFile file) throws CoreException {
     // delete all markers
     file.deleteMarkers(IMarker.PROBLEM, false, 0);
 
     int indx = 0;
-    int brIndx = 0;
+    int brIndx;
     boolean flag = true;
     while ((brIndx = output.indexOf("<br />", indx)) != -1) {
       // newer php error output (tested with 4.2.3)
@@ -163,7 +164,10 @@ public final class PHPParser extends PHPParserSuperclass {
     }
   }
 
-  private static void scanLine(String output, IFile file, int indx, int brIndx) throws CoreException {
+  private static void scanLine(final String output,
+                               final IFile file,
+                               final int indx,
+                               final int brIndx) throws CoreException {
     String current;
     StringBuffer lineNumberBuffer = new StringBuffer(10);
     char ch;
@@ -201,8 +205,8 @@ public final class PHPParser extends PHPParserSuperclass {
     }
   }
 
-  public final void parse(String s) throws CoreException {
-    StringReader stream = new StringReader(s);
+  public final void parse(final String s) throws CoreException {
+    final StringReader stream = new StringReader(s);
     if (jj_input_stream == null) {
       jj_input_stream = new SimpleCharStream(stream, 1, 1);
     }
@@ -218,15 +222,15 @@ public final class PHPParser extends PHPParserSuperclass {
    * Call the php parse command ( php -l -f &lt;filename&gt; )
    * and create markers according to the external parser output
    */
-  public static void phpExternalParse(IFile file) {
-    IPreferenceStore store = PHPeclipsePlugin.getDefault().getPreferenceStore();
-    String filename = file.getLocation().toString();
+  public static void phpExternalParse(final IFile file) {
+    final IPreferenceStore store = PHPeclipsePlugin.getDefault().getPreferenceStore();
+    final String filename = file.getLocation().toString();
 
-    String[] arguments = { filename };
-    MessageFormat form = new MessageFormat(store.getString(PHPeclipsePlugin.EXTERNAL_PARSER_PREF));
-    String command = form.format(arguments);
+    final String[] arguments = { filename };
+    final MessageFormat form = new MessageFormat(store.getString(PHPeclipsePlugin.EXTERNAL_PARSER_PREF));
+    final String command = form.format(arguments);
 
-    String parserResult = PHPStartApacheAction.getParserOutput(command, "External parser: ");
+    final String parserResult = PHPStartApacheAction.getParserOutput(command, "External parser: ");
 
     try {
       // parse the buffer to find the errors and warnings
@@ -245,7 +249,9 @@ PARSER_END(PHPParser)
 
 <DEFAULT> TOKEN :
 {
-  <PHPSTART : "<?php" | "<?"> : PHPPARSING
+  <PHPSTARTSHORT : "<?"> : PHPPARSING
+| <PHPSTARTLONG : "<?php"> : PHPPARSING
+| <PHPECHOSTART : "<?=">      : PHPPARSING
 }
 
 <PHPPARSING> TOKEN :
@@ -272,7 +278,7 @@ PARSER_END(PHPParser)
 
 /* COMMENTS */
 
-<PHPPARSING> MORE :
+<PHPPARSING> SPECIAL_TOKEN :
 {
   "//" : IN_SINGLE_LINE_COMMENT
 |
@@ -286,7 +292,7 @@ PARSER_END(PHPParser)
   <SINGLE_LINE_COMMENT: "\n" | "\r" | "\r\n" > : PHPPARSING
 }
 
-<IN_SINGLE_LINE_COMMENT> TOKEN :
+<IN_SINGLE_LINE_COMMENT> SPECIAL_TOKEN :
 {
   <SINGLE_LINE_COMMENT_PHPEND : "?>" > : DEFAULT
 }
@@ -319,72 +325,72 @@ MORE :
 | <ELSEIF   : "elseif">
 | <ELSE     : "else">
 | <ARRAY    : "array">
+| <BREAK    : "break">
 }
 
 /* LANGUAGE CONSTRUCT */
 <PHPPARSING> TOKEN :
 {
-  <PRINT : "print">
-| <ECHO : "echo">
-| <INCLUDE : "include">
-| <REQUIRE : "require">
-| <INCLUDE_ONCE : "include_once">
-| <REQUIRE_ONCE : "require_once">
-| <GLOBAL : "global">
-| <STATIC : "static">
-| <CLASSACCESS: "->">
-| <STATICCLASSACCESS: "::">
-| <ARRAYASSIGN: "=>">
+  <PRINT              : "print">
+| <ECHO               : "echo">
+| <INCLUDE            : "include">
+| <REQUIRE            : "require">
+| <INCLUDE_ONCE       : "include_once">
+| <REQUIRE_ONCE       : "require_once">
+| <GLOBAL             : "global">
+| <STATIC             : "static">
+| <CLASSACCESS        : "->">
+| <STATICCLASSACCESS  : "::">
+| <ARRAYASSIGN        : "=>">
 }
 
 /* RESERVED WORDS AND LITERALS */
 
 <PHPPARSING> TOKEN :
 {
-  < BREAK: "break" >
-| < CASE: "case" >
-| < CONST: "const" >
-| < CONTINUE: "continue" >
-| < _DEFAULT: "default" >
-| < DO: "do" >
-| < EXTENDS: "extends" >
-| < FALSE: "false" >
-| < FOR: "for" >
-| < GOTO: "goto" >
-| < NEW: "new" >
-| < NULL: "null" >
-| < RETURN: "return" >
-| < SUPER: "super" >
-| < SWITCH: "switch" >
-| < THIS: "this" >
-| < TRUE: "true" >
-| < WHILE: "while" >
-| < ENDWHILE : "endwhile" >
-| <ENDIF : "endif" >
-| <ENDFOR : "endfor" >
-| <FOREACH : "foreach" >
-| <AS : "as" >
+  <CASE     : "case">
+| <CONST    : "const">
+| <CONTINUE : "continue">
+| <_DEFAULT : "default">
+| <DO       : "do">
+| <EXTENDS  : "extends">
+| <FOR      : "for">
+| <GOTO     : "goto">
+| <NEW      : "new">
+| <NULL     : "null">
+| <RETURN   : "return">
+| <SUPER    : "super">
+| <SWITCH   : "switch">
+| <THIS     : "this">
+| <TRUE     : "true">
+| <FALSE    : "false">
+| <WHILE    : "while">
+| <ENDWHILE : "endwhile">
+| <ENDIF    : "endif">
+| <ENDFOR   : "endfor">
+| <FOREACH  : "foreach">
+| <AS       : "as" >
 }
 
 /* TYPES */
 
 <PHPPARSING> TOKEN :
 {
-  <STRING : "string">
-| <OBJECT : "object">
-| <BOOL : "bool">
+  <STRING  : "string">
+| <OBJECT  : "object">
+| <BOOL    : "bool">
 | <BOOLEAN : "boolean">
-| <REAL : "real">
-| <DOUBLE : "double">
-| <FLOAT : "float">
-| <INT : "int">
+| <REAL    : "real">
+| <DOUBLE  : "double">
+| <FLOAT   : "float">
+| <INT     : "int">
 | <INTEGER : "integer">
 }
 
 <PHPPARSING> TOKEN :
 {
-  < _ORL : "OR" >
-| < _ANDL: "AND">
+  <_ORL  : "OR">
+| <_ANDL : "AND">
 }
 
 /* LITERALS */
@@ -466,77 +472,79 @@ MORE :
 
 <PHPPARSING> TOKEN :
 {
-  < LPAREN: "(" >
-| < RPAREN: ")" >
-| < LBRACE: "{" >
-| < RBRACE: "}" >
-| < LBRACKET: "[" >
-| < RBRACKET: "]" >
-| < SEMICOLON: ";" >
-| < COMMA: "," >
-| < DOT: "." >
+  <LPAREN    : "(">
+| <RPAREN    : ")">
+| <LBRACE    : "{">
+| <RBRACE    : "}">
+| <LBRACKET  : "[">
+| <RBRACKET  : "]">
+| <SEMICOLON : ";">
+| <COMMA     : ",">
+| <DOT       : ".">
 }
 
-/* OPERATORS */
 
+/* COMPARATOR */
 <PHPPARSING> TOKEN :
 {
-  <AT     : "@">
-| <DOLLAR : "$">
-| <ASSIGN: "=" >
-| <GT: ">" >
-| <LT: "<" >
-| <BANG: "!" >
-| <HOOK: "?" >
-| <COLON: ":" >
-| <EQ: "==" >
-| <LE: "<=" >
-| <GE: ">=" >
-| <NE: "!=" >
-| <DIF: "<>" >
-| <SC_OR: "||" >
-| <SC_AND: "&&" >
-| <INCR: "++" >
-| <DECR: "--" >
-| <PLUS: "+" >
-| <MINUS: "-" >
-| <STAR: "*" >
-| <SLASH: "/" >
-| <BIT_AND: "&" >
-| <BIT_OR: "|" >
-| <XOR: "^" >
-| <REM: "%" >
-| <LSHIFT: "<<" >
-| <RSIGNEDSHIFT: ">>" >
-| <RUNSIGNEDSHIFT: ">>>" >
-| <PLUSASSIGN: "+=" >
-| <MINUSASSIGN: "-=" >
-| <STARASSIGN: "*=" >
-| <SLASHASSIGN: "/=" >
-| <ANDASSIGN: "&=" >
-| <ORASSIGN: "|=" >
-| <XORASSIGN: "^=" >
-| <DOTASSIGN: ".=" >
-| <REMASSIGN: "%=" >
-| <LSHIFTASSIGN: "<<=" >
-| <RSIGNEDSHIFTASSIGN: ">>=" >
-| <BANGDOUBLEEQUAL: "!==" >
-| <TRIPLEEQUAL: "===" >
-| <TILDEEQUAL: "~=" >
+  <GT                 : ">">
+| <LT                 : "<">
+| <EQ                 : "==">
+| <LE                 : "<=">
+| <GE                 : ">=">
+| <NE                 : "!=">
+| <DIF                : "<>">
+| <BANGDOUBLEEQUAL    : "!==">
+| <TRIPLEEQUAL        : "===">
 }
 
+/* ASSIGNATION */
 <PHPPARSING> TOKEN :
 {
-  < DOLLAR_ID: <DOLLAR> <IDENTIFIER>  >
+  <ASSIGN             : "=">
+| <PLUSASSIGN         : "+=">
+| <MINUSASSIGN        : "-=">
+| <STARASSIGN         : "*=">
+| <SLASHASSIGN        : "/=">
+| <ANDASSIGN          : "&=">
+| <ORASSIGN           : "|=">
+| <XORASSIGN          : "^=">
+| <DOTASSIGN          : ".=">
+| <REMASSIGN          : "%=">
+| <TILDEEQUAL         : "~=">
 }
 
-/*****************************************
- * THE JAVA LANGUAGE GRAMMAR STARTS HERE *
- *****************************************/
+/* OPERATORS */
+<PHPPARSING> TOKEN :
+{
+  <AT                 : "@">
+| <DOLLAR             : "$">
+| <BANG               : "!">
+| <HOOK               : "?">
+| <COLON              : ":">
+| <SC_OR              : "||">
+| <SC_AND             : "&&">
+| <INCR               : "++">
+| <DECR               : "--">
+| <PLUS               : "+">
+| <MINUS              : "-">
+| <STAR               : "*">
+| <SLASH              : "/">
+| <BIT_AND            : "&">
+| <BIT_OR             : "|">
+| <XOR                : "^">
+| <REM                : "%">
+| <LSHIFT             : "<<">
+| <RSIGNEDSHIFT       : ">>">
+| <RUNSIGNEDSHIFT     : ">>>">
+| <LSHIFTASSIGN       : "<<=">
+| <RSIGNEDSHIFTASSIGN : ">>=">
+}
 
-/*
- * Program structuring syntax follows.
- */
+<PHPPARSING> TOKEN :
+{
+  < DOLLAR_ID: <DOLLAR> <IDENTIFIER>  >
+}
 
 void phpTest() :
 {}
@@ -549,7 +557,35 @@ void phpFile() :
 {}
 {
   try {
-  (<PHPSTART> Php()
+    (PhpBlock())*
+    <EOF>
+  } catch (TokenMgrError e) {
+    errorMessage = e.getMessage();
+    errorLevel   = ERROR;
+    throw generateParseException();
+  }
+}
+
+void PhpBlock() :
+{
+  final int start = jj_input_stream.bufpos;
+}
+{
+  <PHPECHOSTART> Expression() [ <SEMICOLON> ] <PHPEND>
+|
+  [ <PHPSTARTLONG>
+  | <PHPSTARTSHORT>
+  {try {
+    setMarker(fileToParse,
+              "You should use '<?php' instead of '<?' it will avoid some problems with XML",
+              start,
+              jj_input_stream.bufpos,
+              INFO,
+              "Line " + token.beginLine);
+  } catch (CoreException e) {
+    PHPeclipsePlugin.log(e);
+  }}
+  ]Php()
   try {
     <PHPEND>
   } catch (ParseException e) {
@@ -557,13 +593,6 @@ void phpFile() :
     errorLevel   = ERROR;
     throw e;
   }
-    )*
-  <EOF>
-  } catch (TokenMgrError e) {
-    errorMessage = e.getMessage();
-    errorLevel   = ERROR;
-    throw generateParseException();
-  }
 }
 
 void Php() :
@@ -574,8 +603,8 @@ void Php() :
 
 void ClassDeclaration() :
 {
-  PHPClassDeclaration classDeclaration;
-  Token className;
+  final PHPClassDeclaration classDeclaration;
+  final Token className;
   final int pos = jj_input_stream.bufpos;
 }
 {
@@ -653,7 +682,7 @@ void FieldDeclaration() :
 
 PHPVarDeclaration VariableDeclarator() :
 {
-  String varName;
+  final String varName;
   String varValue = null;
   final int pos = jj_input_stream.bufpos;
 }
@@ -663,18 +692,14 @@ PHPVarDeclaration VariableDeclarator() :
     <ASSIGN>
     try {
       varValue = VariableInitializer()
+      {return new PHPVarDeclaration(currentSegment,varName,pos,varValue);}
     } catch (ParseException e) {
       errorMessage = "Literal expression expected in variable initializer";
       errorLevel   = ERROR;
       throw e;
     }
   ]
-  {
-    if (varValue == null) {
-      return new PHPVarDeclaration(currentSegment,varName,pos);
-    }
-    return new PHPVarDeclaration(currentSegment,varName,pos,varValue);
-  }
+  {return new PHPVarDeclaration(currentSegment,varName,pos);}
 }
 
 String VariableDeclaratorId() :
@@ -700,7 +725,7 @@ String VariableDeclaratorId() :
 String Variable():
 {
   String expr = null;
-  Token token;
+  final Token token;
 }
 {
   token = <DOLLAR_ID> [<LBRACE> expr = Expression() <RBRACE>]
@@ -718,7 +743,7 @@ String Variable():
 String VariableName():
 {
 String expr = null;
-Token token;
+final Token token;
 }
 {
   <LBRACE> expr = Expression() <RBRACE>
@@ -746,8 +771,8 @@ Token token;
 
 String VariableInitializer() :
 {
-  String expr;
-  Token token;
+  final String expr;
+  final Token token;
 }
 {
   expr = Literal()
@@ -781,7 +806,7 @@ final StringBuffer buff = new StringBuffer();
 
 String ArrayInitializer() :
 {
-String expr = null;
+String expr;
 final StringBuffer buff = new StringBuffer("(");
 }
 {
@@ -799,7 +824,7 @@ final StringBuffer buff = new StringBuffer("(");
 
 void MethodDeclaration() :
 {
-  PHPFunctionDeclaration functionDeclaration;
+  final PHPFunctionDeclaration functionDeclaration;
 }
 {
   <FUNCTION> functionDeclaration = MethodDeclarator()
@@ -819,9 +844,9 @@ void MethodDeclaration() :
 
 PHPFunctionDeclaration MethodDeclarator() :
 {
-  Token identifier;
-  StringBuffer methodDeclaration = new StringBuffer();
-  String formalParameters;
+  final Token identifier;
+  final StringBuffer methodDeclaration = new StringBuffer();
+  final String formalParameters;
   final int pos = jj_input_stream.bufpos;
 }
 {
@@ -870,7 +895,7 @@ String FormalParameters() :
 
 String FormalParameter() :
 {
-  PHPVarDeclaration variableDeclaration;
+  final PHPVarDeclaration variableDeclaration;
   final StringBuffer buff = new StringBuffer();
 }
 {
@@ -914,9 +939,9 @@ String Type() :
 
 String Expression() :
 {
-  String expr;
-  String assignOperator = null;
-  String expr2 = null;
+  final String expr;
+  final String assignOperator;
+  final String expr2;
 }
 {
   expr = PrintExpression()
@@ -927,19 +952,14 @@ String Expression() :
     assignOperator = AssignmentOperator()
     try {
       expr2 = Expression()
+      {return expr + assignOperator + expr2;}
     } catch (ParseException e) {
       errorMessage = "expression expected";
       errorLevel   = ERROR;
       throw e;
     }
   ]
-  {
-    if (expr2 == null) {
-      return expr;
-    } else {
-      return expr + assignOperator + expr2;
-    }
-  }
+  {return expr;}
 }
 
 String AssignmentOperator() :
@@ -975,7 +995,7 @@ String AssignmentOperator() :
 
 String ConditionalExpression() :
 {
-  String expr;
+  final String expr;
   String expr2 = null;
   String expr3 = null;
 }
@@ -994,19 +1014,16 @@ String ConditionalOrExpression() :
 {
   String expr;
   Token operator;
-  String expr2 = null;
   final StringBuffer buff = new StringBuffer();
 }
 {
   expr = ConditionalAndExpression()
-  {
-    buff.append(expr);
-  }
+  {buff.append(expr);}
   (
-    (operator = <SC_OR> | operator = <_ORL>) expr2 = ConditionalAndExpression()
+    (operator = <SC_OR> | operator = <_ORL>) expr = ConditionalAndExpression()
     {
       buff.append(operator.image);
-      buff.append(expr2);
+      buff.append(expr);
     }
   )*
   {
@@ -1018,76 +1035,54 @@ String ConditionalAndExpression() :
 {
   String expr;
   Token operator;
-  String expr2 = null;
   final StringBuffer buff = new StringBuffer();
 }
 {
   expr = ConcatExpression()
-  {
-    buff.append(expr);
-  }
+  {buff.append(expr);}
   (
-  (operator = <SC_AND> | operator = <_ANDL>) expr2 = ConcatExpression()
+  (operator = <SC_AND> | operator = <_ANDL>) expr = ConcatExpression()
     {
       buff.append(operator.image);
-      buff.append(expr2);
+      buff.append(expr);
     }
   )*
-  {
-    return buff.toString();
-  }
+  {return buff.toString();}
 }
 
 String ConcatExpression() :
 {
   String expr;
-  String expr2 = null;
   final StringBuffer buff = new StringBuffer();
 }
 {
   expr = InclusiveOrExpression()
-  {
-    buff.append(expr);
-  }
+  {buff.append(expr);}
   (
-  <DOT> expr2 = InclusiveOrExpression()
-  {
-    buff.append(".");
-    buff.append(expr2);
-  }
+  <DOT> expr = InclusiveOrExpression()
+  {buff.append(".").append(expr);}
   )*
-  {
-    return buff.toString();
-  }
+  {return buff.toString();}
 }
 
 String InclusiveOrExpression() :
 {
   String expr;
-  String expr2 = null;
   final StringBuffer buff = new StringBuffer();
 }
 {
   expr = ExclusiveOrExpression()
-  {
-    buff.append(expr);
-  }
+  {buff.append(expr);}
   (
-  <BIT_OR> expr2 = ExclusiveOrExpression()
-  {
-    buff.append("|");
-    buff.append(expr2);
-  }
+  <BIT_OR> expr = ExclusiveOrExpression()
+  {buff.append("|").append(expr);}
   )*
-  {
-    return buff.toString();
-  }
+  {return buff.toString();}
 }
 
 String ExclusiveOrExpression() :
 {
   String expr;
-  String expr2 = null;
   final StringBuffer buff = new StringBuffer();
 }
 {
@@ -1096,10 +1091,10 @@ String ExclusiveOrExpression() :
     buff.append(expr);
   }
   (
-    <XOR> expr2 = AndExpression()
+    <XOR> expr = AndExpression()
   {
     buff.append("^");
-    buff.append(expr2);
+    buff.append(expr);
   }
   )*
   {
@@ -1109,8 +1104,7 @@ String ExclusiveOrExpression() :
 
 String AndExpression() :
 {
-  final String expr;
-  String expr2 = null;
+  String expr;
   final StringBuffer buff = new StringBuffer();
 }
 {
@@ -1119,22 +1113,18 @@ String AndExpression() :
     buff.append(expr);
   }
   (
-    <BIT_AND> expr2 = EqualityExpression()
+    <BIT_AND> expr = EqualityExpression()
   {
-    buff.append("&");
-    buff.append(expr2);
+    buff.append("&").append(expr);
   }
   )*
-  {
-    return buff.toString();
-  }
+  {return buff.toString();}
 }
 
 String EqualityExpression() :
 {
   String expr;
   Token operator;
-  String expr2;
   final StringBuffer buff = new StringBuffer();
 }
 {
@@ -1147,10 +1137,10 @@ String EqualityExpression() :
     | operator = <BANGDOUBLEEQUAL>
     | operator = <TRIPLEEQUAL>
   )
-  expr2 = RelationalExpression()
+  expr = RelationalExpression()
   {
     buff.append(operator.image);
-    buff.append(expr2);
+    buff.append(expr);
   }
   )*
   {return buff.toString();}
@@ -1160,18 +1150,14 @@ String RelationalExpression() :
 {
   String expr;
   Token operator;
-  String expr2;
   final StringBuffer buff = new StringBuffer();
 }
 {
   expr = ShiftExpression()
   {buff.append(expr);}
   (
-  ( operator = <LT> | operator = <GT> | operator = <LE> | operator = <GE> ) expr2 = ShiftExpression()
-  {
-    buff.append(operator.image);
-    buff.append(expr2);
-  }
+  ( operator = <LT> | operator = <GT> | operator = <LE> | operator = <GE> ) expr = ShiftExpression()
+  {buff.append(operator.image).append(expr);}
   )*
   {return buff.toString();}
 }
@@ -1237,8 +1223,8 @@ String MultiplicativeExpression() :
  */
 String UnaryExpression() :
 {
-  String expr;
-  Token token;
+  final String expr;
+  final Token token;
   final StringBuffer buff = new StringBuffer();
 }
 {
@@ -1256,8 +1242,8 @@ String UnaryExpression() :
 
 String UnaryExpressionNoPrefix() :
 {
-  String expr;
-  Token token;
+  final String expr;
+  final Token token;
 }
 {
   ( token = <PLUS> | token = <MINUS> ) expr = UnaryExpression()
@@ -1278,7 +1264,7 @@ String UnaryExpressionNoPrefix() :
 
 String PreIncrementExpression() :
 {
-String expr;
+final String expr;
 }
 {
   <INCR> expr = PrimaryExpression()
@@ -1287,7 +1273,7 @@ String expr;
 
 String PreDecrementExpression() :
 {
-String expr;
+final String expr;
 }
 {
   <DECR> expr = PrimaryExpression()
@@ -1296,7 +1282,7 @@ String expr;
 
 String UnaryExpressionNotPlusMinus() :
 {
-  String expr;
+  final String expr;
 }
 {
   <BANG> expr = UnaryExpression()
@@ -1327,7 +1313,7 @@ final String type, expr;
 
 String PostfixExpression() :
 {
-  String expr;
+  final String expr;
   Token operator = null;
 }
 {
@@ -1342,7 +1328,7 @@ String PostfixExpression() :
 
 String PrimaryExpression() :
 {
-  Token identifier;
+  final Token identifier;
   String expr;
   final StringBuffer buff = new StringBuffer();
 }
@@ -1375,8 +1361,8 @@ String ArrayDeclarator() :
 
 String PrimaryPrefix() :
 {
-  String expr;
-  Token token = null;
+  final String expr;
+  final Token token;
 }
 {
   token = <IDENTIFIER>
@@ -1393,8 +1379,8 @@ String PrimaryPrefix() :
 
 String ClassIdentifier():
 {
-  String expr;
-  Token token;
+  final String expr;
+  final Token token;
 }
 {
   token = <IDENTIFIER>
@@ -1406,7 +1392,7 @@ String ClassIdentifier():
 
 String PrimarySuffix() :
 {
-  String expr;
+  final String expr;
 }
 {
   expr = Arguments()
@@ -1442,8 +1428,8 @@ String VariableSuffix() :
 
 String Literal() :
 {
-  String expr;
-  Token token;
+  final String expr;
+  final Token token;
 }
 {
   token = <INTEGER_LITERAL>
@@ -1517,7 +1503,7 @@ final StringBuffer buff = new StringBuffer();
         throw e;
       }
     {
-      buff.append(",").append("expr");
+      buff.append(",").append(expr);
     }
    )*
    {return buff.toString();}
@@ -1533,7 +1519,7 @@ void Statement() :
   LOOKAHEAD(2)
   Expression()
   try {
-    (<SEMICOLON> | "?>")
+    (<SEMICOLON> | <PHPEND>)
   } catch (ParseException e) {
     errorMessage = "';' expected";
     errorLevel   = ERROR;
@@ -1585,7 +1571,7 @@ void Statement() :
 
 void IncludeStatement() :
 {
-  String expr;
+  final String expr;
   final int pos = jj_input_stream.bufpos;
 }
 {
@@ -1653,7 +1639,7 @@ void IncludeStatement() :
 String PrintExpression() :
 {
   final StringBuffer buff = new StringBuffer("print ");
-  String expr;
+  final String expr;
 }
 {
   <PRINT> expr = Expression()
@@ -1735,7 +1721,13 @@ void BlockStatement() :
 void LocalVariableDeclaration() :
 {}
 {
-  VariableDeclarator() ( <COMMA> VariableDeclarator() )*
+  LocalVariableDeclarator() ( <COMMA> LocalVariableDeclarator() )*
+}
+
+void LocalVariableDeclarator() :
+{}
+{
+  VariableDeclaratorId() [ <ASSIGN> Expression() ]
 }
 
 void EmptyStatement() :
@@ -1778,20 +1770,15 @@ void SwitchLabel() :
 }
 
 void IfStatement() :
-/*
- * The disambiguating algorithm of JavaCC automatically binds dangling
- * else's to the innermost if statement.  The LOOKAHEAD specification
- * is to tell JavaCC that we know what we are doing.
- */
 {
-  Token token;
+  final Token token;
   final int pos = jj_input_stream.bufpos;
 }
 {
   token = <IF> Condition("if") IfStatement0(pos,pos+token.image.length())
 }
 
-void Condition(String keyword) :
+void Condition(final String keyword) :
 {}
 {
   try {
@@ -1811,7 +1798,7 @@ void Condition(String keyword) :
   }
 }
 
-void IfStatement0(int start,int end) :
+void IfStatement0(final int start,final int end) :
 {
 }
 {
@@ -1865,7 +1852,7 @@ void ElseIfStatement() :
 
 void WhileStatement() :
 {
-  Token token;
+  final Token token;
   final int pos = jj_input_stream.bufpos;
 }
 {
@@ -1935,6 +1922,7 @@ void ForeachStatement() :
     errorLevel   = ERROR;
     throw e;
   }
+  [ VariableSuffix() ]
   try {
     <AS>
   } catch (ParseException e) {
@@ -1958,7 +1946,7 @@ void ForeachStatement() :
     throw e;
   }
   try {
-  Statement()
+    Statement()
   } catch (ParseException e) {
     if (errorMessage != null) throw e;
     errorMessage = "statement expected";
@@ -1969,7 +1957,7 @@ void ForeachStatement() :
 
 void ForStatement() :
 {
-Token token;
+final Token token;
 final int pos = jj_input_stream.bufpos;
 }
 {