0000: ef bb bf 2f 2a 0d 0a 20 2a 20 41 75 74 68 6f 72 .../*.. * Author
0010: 73 3a 20 6b 2e 69 6e 61 62 61 0d 0a 20 2a 20 4c s: k.inaba.. * L
0020: 69 63 65 6e 73 65 3a 20 4e 59 53 4c 20 30 2e 39 icense: NYSL 0.9
0030: 39 38 32 20 68 74 74 70 3a 2f 2f 77 77 77 2e 6b 982 http://www.k
0040: 6d 6f 6e 6f 73 2e 6e 65 74 2f 6e 79 73 6c 2f 0d monos.net/nysl/.
0050: 0a 20 2a 0d 0a 20 2a 20 50 61 72 73 65 72 20 66 . *.. * Parser f
0060: 6f 72 20 50 6f 6c 65 6d 79 20 70 72 6f 67 72 61 or Polemy progra
0070: 6d 6d 69 6e 67 20 6c 61 6e 67 75 61 67 65 0d 0a mming language..
0080: 20 2a 2f 0d 0a 6d 6f 64 75 6c 65 20 70 6f 6c 65 */..module pole
0090: 6d 79 2e 70 61 72 73 65 3b 0d 0a 69 6d 70 6f 72 my.parse;..impor
00a0: 74 20 70 6f 6c 65 6d 79 2e 5f 63 6f 6d 6d 6f 6e t polemy._common
00b0: 3b 0d 0a 69 6d 70 6f 72 74 20 70 6f 6c 65 6d 79 ;..import polemy
00c0: 2e 6c 65 78 3b 0d 0a 69 6d 70 6f 72 74 20 70 6f .lex;..import po
00d0: 6c 65 6d 79 2e 61 73 74 3b 0d 0a 69 6d 70 6f 72 lemy.ast;..impor
00e0: 74 20 73 74 64 2e 62 69 67 69 6e 74 3b 0d 0a 0d t std.bigint;...
00f0: 0a 2f 2f 2f 20 50 61 72 73 69 6e 67 20 46 61 69 ./// Parsing Fai
0100: 6c 75 72 65 0d 0a 0d 0a 63 6c 61 73 73 20 50 61 lure....class Pa
0110: 72 73 65 72 45 78 63 65 70 74 69 6f 6e 20 3a 20 rserException :
0120: 45 78 63 65 70 74 69 6f 6e 0d 0a 7b 0d 0a 70 72 Exception..{..pr
0130: 69 76 61 74 65 3a 0d 0a 09 74 68 69 73 28 73 74 ivate:...this(st
0140: 72 69 6e 67 20 6d 73 67 29 20 7b 20 73 75 70 65 ring msg) { supe
0150: 72 28 6d 73 67 29 3b 20 7d 0d 0a 09 73 74 61 74 r(msg); }...stat
0160: 69 63 20 50 61 72 73 65 72 45 78 63 65 70 74 69 ic ParserExcepti
0170: 6f 6e 20 63 72 65 61 74 65 28 4c 65 78 65 72 29 on create(Lexer)
0180: 28 4c 65 78 65 72 20 6c 65 78 2c 20 73 74 72 69 (Lexer lex, stri
0190: 6e 67 20 6d 73 67 29 0d 0a 09 7b 0d 0a 09 09 72 ng msg)...{....r
01a0: 65 74 75 72 6e 20 6e 65 77 20 50 61 72 73 65 72 eturn new Parser
01b0: 45 78 63 65 70 74 69 6f 6e 28 73 70 72 69 6e 74 Exception(sprint
01c0: 66 21 22 5b 25 73 5d 20 25 73 22 28 0d 0a 09 09 f!"[%s] %s"(....
01d0: 09 6c 65 78 2e 65 6d 70 74 79 20 3f 20 22 45 4f .lex.empty ? "EO
01e0: 46 22 20 3a 20 74 6f 21 73 74 72 69 6e 67 28 6c F" : to!string(l
01f0: 65 78 2e 66 72 6f 6e 74 2e 70 6f 73 29 2c 20 6d ex.front.pos), m
0200: 73 67 29 29 3b 0d 0a 09 7d 0d 0a 7d 0d 0a 0d 0a sg));...}..}....
0210: 2f 2f 2f 20 4e 61 6d 65 64 20 43 6f 6e 73 74 72 /// Named Constr
0220: 75 63 74 6f 72 20 6f 66 20 50 61 72 73 65 72 0d uctor of Parser.
0230: 0a 0d 0a 61 75 74 6f 20 70 61 72 73 65 72 46 72 ...auto parserFr
0240: 6f 6d 4c 65 78 65 72 28 4c 65 78 65 72 29 28 4c omLexer(Lexer)(L
0250: 65 78 65 72 20 6c 65 78 29 0d 0a 7b 0d 0a 09 72 exer lex)..{...r
0260: 65 74 75 72 6e 20 6e 65 77 20 50 61 72 73 65 72 eturn new Parser
0270: 21 4c 65 78 65 72 28 6c 65 78 29 3b 0d 0a 7d 0d !Lexer(lex);..}.
0280: 0a 0d 0a 2f 2f 2f 20 4e 61 6d 65 64 20 43 6f 6e .../// Named Con
0290: 73 74 72 75 63 74 6f 72 20 6f 66 20 50 61 72 73 structor of Pars
02a0: 65 72 20 28 6a 75 73 74 20 66 77 64 20 74 6f 20 er (just fwd to
02b0: 6c 65 78 65 72 46 72 6f 6d 53 74 72 69 6e 67 29 lexerFromString)
02c0: 0d 0a 0d 0a 61 75 74 6f 20 70 61 72 73 65 72 46 ....auto parserF
02d0: 72 6f 6d 53 74 72 69 6e 67 28 54 2e 2e 2e 29 28 romString(T...)(
02e0: 54 20 70 61 72 61 6d 73 29 0d 0a 7b 0d 0a 09 72 T params)..{...r
02f0: 65 74 75 72 6e 20 70 61 72 73 65 72 46 72 6f 6d eturn parserFrom
0300: 4c 65 78 65 72 28 70 6f 6c 65 6d 79 2e 6c 65 78 Lexer(polemy.lex
0310: 2e 6c 65 78 65 72 46 72 6f 6d 53 74 72 69 6e 67 .lexerFromString
0320: 28 70 61 72 61 6d 73 29 29 3b 0d 0a 7d 0d 0a 0d (params));..}...
0330: 0a 2f 2f 2f 20 4e 61 6d 65 64 20 43 6f 6e 73 74 ./// Named Const
0340: 72 75 63 74 6f 72 20 6f 66 20 50 61 72 73 65 72 ructor of Parser
0350: 20 28 6a 75 73 74 20 66 77 64 20 74 6f 20 6c 65 (just fwd to le
0360: 78 65 72 46 72 6f 6d 46 69 6c 65 29 0d 0a 0d 0a xerFromFile)....
0370: 61 75 74 6f 20 70 61 72 73 65 72 46 72 6f 6d 46 auto parserFromF
0380: 69 6c 65 28 54 2e 2e 2e 29 28 54 20 70 61 72 61 ile(T...)(T para
0390: 6d 73 29 0d 0a 7b 0d 0a 09 72 65 74 75 72 6e 20 ms)..{...return
03a0: 70 61 72 73 65 72 46 72 6f 6d 4c 65 78 65 72 28 parserFromLexer(
03b0: 70 6f 6c 65 6d 79 2e 6c 65 78 2e 6c 65 78 65 72 polemy.lex.lexer
03c0: 46 72 6f 6d 46 69 6c 65 28 70 61 72 61 6d 73 29 FromFile(params)
03d0: 29 3b 0d 0a 7d 0d 0a 0d 0a 2f 2f 2f 20 50 61 72 );..}..../// Par
03e0: 73 65 72 0d 0a 0d 0a 63 6c 61 73 73 20 50 61 72 ser....class Par
03f0: 73 65 72 28 4c 65 78 65 72 29 0d 0a 7b 0d 0a 09 ser(Lexer)..{...
0400: 74 68 69 73 28 4c 65 78 65 72 20 6c 65 78 29 0d this(Lexer lex).
0410: 0a 09 7b 0d 0a 09 09 74 68 69 73 2e 6c 65 78 20 ..{....this.lex
0420: 3d 20 6c 65 78 3b 0d 0a 09 7d 0d 0a 0d 0a 09 50 = lex;...}.....P
0430: 72 6f 67 72 61 6d 20 70 61 72 73 65 50 72 6f 67 rogram parseProg
0440: 72 61 6d 28 29 0d 0a 09 7b 0d 0a 09 09 50 72 6f ram()...{....Pro
0450: 67 72 61 6d 20 70 3b 0d 0a 09 09 77 68 69 6c 65 gram p;....while
0460: 28 20 21 6c 65 78 2e 65 6d 70 74 79 20 29 0d 0a ( !lex.empty )..
0470: 09 09 09 70 20 7e 3d 20 70 61 72 73 65 53 74 61 ...p ~= parseSta
0480: 74 65 6d 65 6e 74 28 29 3b 0d 0a 09 09 72 65 74 tement();....ret
0490: 75 72 6e 20 70 3b 0d 0a 09 7d 0d 0a 09 0d 0a 09 urn p;...}......
04a0: 53 74 61 74 65 6d 65 6e 74 20 70 61 72 73 65 53 Statement parseS
04b0: 74 61 74 65 6d 65 6e 74 28 29 0d 0a 09 7b 0d 0a tatement()...{..
04c0: 09 09 61 75 74 6f 20 73 61 76 65 64 20 3d 20 6c ..auto saved = l
04d0: 65 78 2e 73 61 76 65 3b 0d 0a 09 09 73 63 6f 70 ex.save;....scop
04e0: 65 28 66 61 69 6c 75 72 65 29 20 6c 65 78 20 3d e(failure) lex =
04f0: 20 73 61 76 65 64 3b 0d 0a 0d 0a 09 09 69 66 28 saved;......if(
0500: 20 6c 65 78 2e 65 6d 70 74 79 20 29 0d 0a 09 09 lex.empty )....
0510: 09 74 68 72 6f 77 20 6e 65 77 20 50 61 72 73 65 .throw new Parse
0520: 72 45 78 63 65 70 74 69 6f 6e 28 22 45 4f 46 20 rException("EOF
0530: 64 75 72 69 6e 67 20 70 61 72 73 69 6e 67 20 61 during parsing a
0540: 20 73 74 61 74 65 6d 65 6e 74 22 29 3b 0d 0a 09 statement");...
0550: 09 61 75 74 6f 20 70 6f 73 20 3d 20 6c 65 78 2e .auto pos = lex.
0560: 66 72 6f 6e 74 2e 70 6f 73 3b 0d 0a 0d 0a 09 09 front.pos;......
0570: 69 66 28 20 6c 65 78 2e 66 72 6f 6e 74 2e 6b 69 if( lex.front.ki
0580: 6e 64 3d 3d 54 6f 6b 65 6e 2e 4b 69 6e 64 2e 69 nd==Token.Kind.i
0590: 64 65 6e 74 69 66 69 65 72 20 26 26 20 6c 65 78 dentifier && lex
05a0: 2e 66 72 6f 6e 74 2e 73 74 72 3d 3d 22 76 61 72 .front.str=="var
05b0: 22 20 29 0d 0a 09 09 7b 0d 0a 09 09 09 2f 2f 20 " )....{.....//
05c0: 22 76 61 72 22 20 56 61 72 20 22 3d 22 20 45 78 "var" Var "=" Ex
05d0: 70 72 65 73 73 69 6f 6e 20 22 3b 22 0d 0a 09 09 pression ";"....
05e0: 09 6c 65 78 2e 70 6f 70 46 72 6f 6e 74 3b 0d 0a .lex.popFront;..
05f0: 09 09 09 73 74 72 69 6e 67 20 76 61 72 20 3d 20 ...string var =
0600: 6c 65 78 2e 66 72 6f 6e 74 2e 73 74 72 3b 0d 0a lex.front.str;..
0610: 09 09 09 6c 65 78 2e 70 6f 70 46 72 6f 6e 74 3b ...lex.popFront;
0620: 0d 0a 09 09 09 65 61 74 28 22 3d 22 2c 20 22 66 .....eat("=", "f
0630: 6f 72 20 76 61 72 69 61 62 6c 65 20 64 65 63 6c or variable decl
0640: 61 72 61 74 69 6f 6e 22 29 3b 0d 0a 09 09 09 61 aration");.....a
0650: 75 74 6f 20 70 61 72 73 65 64 20 3d 20 6e 65 77 uto parsed = new
0660: 20 44 65 63 6c 53 74 61 74 65 6d 65 6e 74 28 70 DeclStatement(p
0670: 6f 73 2c 20 76 61 72 2c 20 70 61 72 73 65 45 78 os, var, parseEx
0680: 70 72 65 73 73 69 6f 6e 28 29 29 3b 0d 0a 09 09 pression());....
0690: 09 65 61 74 28 22 3b 22 2c 20 22 61 66 74 65 72 .eat(";", "after
06a0: 20 76 61 72 69 61 62 6c 65 20 64 65 63 6c 61 72 variable declar
06b0: 61 74 69 6f 6e 22 29 3b 0d 0a 09 09 09 72 65 74 ation");.....ret
06c0: 75 72 6e 20 70 61 72 73 65 64 3b 0d 0a 09 09 7d urn parsed;....}
06d0: 0d 0a 09 09 65 6c 73 65 0d 0a 09 09 7b 0d 0a 09 ....else....{...
06e0: 09 09 2f 2f 20 45 78 70 72 65 73 73 69 6f 6e 20 ..// Expression
06f0: 22 3b 22 0d 0a 09 09 09 61 75 74 6f 20 70 61 72 ";".....auto par
0700: 73 65 64 20 3d 20 6e 65 77 20 45 78 70 72 53 74 sed = new ExprSt
0710: 61 74 65 6d 65 6e 74 28 70 6f 73 2c 20 70 61 72 atement(pos, par
0720: 73 65 45 78 70 72 65 73 73 69 6f 6e 28 29 29 3b seExpression());
0730: 0d 0a 09 09 09 65 61 74 28 22 3b 22 2c 20 22 61 .....eat(";", "a
0740: 66 74 65 72 20 73 74 61 74 65 6d 65 6e 74 22 29 fter statement")
0750: 3b 0d 0a 09 09 09 72 65 74 75 72 6e 20 70 61 72 ;.....return par
0760: 73 65 64 3b 0d 0a 09 09 7d 0d 0a 09 7d 0d 0a 0d sed;....}...}...
0770: 0a 09 45 78 70 72 65 73 73 69 6f 6e 20 70 61 72 ..Expression par
0780: 73 65 45 78 70 72 65 73 73 69 6f 6e 28 29 0d 0a seExpression()..
0790: 09 7b 0d 0a 09 09 61 75 74 6f 20 73 61 76 65 64 .{....auto saved
07a0: 20 3d 20 6c 65 78 2e 73 61 76 65 3b 0d 0a 09 09 = lex.save;....
07b0: 73 63 6f 70 65 28 66 61 69 6c 75 72 65 29 20 6c scope(failure) l
07c0: 65 78 20 3d 20 73 61 76 65 64 3b 0d 0a 09 09 72 ex = saved;....r
07d0: 65 74 75 72 6e 20 70 61 72 73 65 45 28 30 29 3b eturn parseE(0);
07e0: 0d 0a 09 7d 0d 0a 0d 0a 09 2f 2f 20 5b 54 4f 44 ...}.....// [TOD
07f0: 4f 5d 20 6d 75 6c 74 69 2d 63 68 61 72 20 6f 70 O] multi-char op
0800: 65 72 61 74 6f 72 73 20 61 72 65 20 6e 6f 74 20 erators are not
0810: 73 75 70 70 6f 72 74 65 64 20 62 79 20 74 68 65 supported by the
0820: 20 6c 65 78 65 72 2e 2e 2e 0d 0a 09 73 74 61 74 lexer......stat
0830: 69 63 20 69 6d 6d 75 74 61 62 6c 65 20 73 74 72 ic immutable str
0840: 69 6e 67 5b 5d 5b 5d 20 6f 70 65 72 61 74 6f 72 ing[][] operator
0850: 5f 70 65 72 66 65 72 65 6e 63 65 73 20 3d 20 5b _perferences = [
0860: 0d 0a 09 09 5b 22 2c 22 5d 2c 0d 0a 09 09 5b 22 ....[","],....["
0870: 3d 22 5d 2c 20 2f 2f 20 63 61 75 74 69 6f 6e 21 ="], // caution!
0880: 20 6c 65 66 74 20 61 73 73 6f 63 69 61 74 69 76 left associativ
0890: 65 0d 0a 09 09 5b 22 6f 72 22 5d 2c 0d 0a 09 09 e....["or"],....
08a0: 5b 22 61 6e 64 22 5d 2c 0d 0a 09 09 5b 22 21 3d ["and"],....["!=
08b0: 22 5d 2c 0d 0a 09 09 5b 22 3d 3d 22 5d 2c 0d 0a "],....["=="],..
08c0: 09 09 5b 22 3c 22 2c 22 3c 3d 22 2c 22 3e 22 2c ..["<","<=",">",
08d0: 22 3e 3d 22 5d 2c 0d 0a 09 09 5b 22 7c 22 5d 2c ">="],....["|"],
08e0: 0d 0a 09 09 5b 22 5e 22 5d 2c 0d 0a 09 09 5b 22 ....["^"],....["
08f0: 26 22 5d 2c 0d 0a 09 09 5b 22 3c 3c 22 2c 20 22 &"],....["<<", "
0900: 3e 3e 22 5d 2c 0d 0a 09 09 5b 22 2b 22 2c 22 2d >>"],....["+","-
0910: 22 5d 2c 0d 0a 09 09 5b 22 2a 22 2c 22 2f 22 2c "],....["*","/",
0920: 22 25 22 5d 0d 0a 09 5d 3b 0d 0a 0d 0a 09 45 78 "%"]...];.....Ex
0930: 70 72 65 73 73 69 6f 6e 20 70 61 72 73 65 45 28 pression parseE(
0940: 69 6e 74 20 6c 65 76 65 6c 20 3d 20 30 29 0d 0a int level = 0)..
0950: 09 7b 0d 0a 09 09 69 66 28 20 6f 70 65 72 61 74 .{....if( operat
0960: 6f 72 5f 70 65 72 66 65 72 65 6e 63 65 73 2e 6c or_perferences.l
0970: 65 6e 67 74 68 20 3c 3d 20 6c 65 76 65 6c 20 29 ength <= level )
0980: 0d 0a 09 09 09 72 65 74 75 72 6e 20 70 61 72 73 .....return pars
0990: 65 42 61 73 65 45 78 70 72 65 73 73 69 6f 6e 28 eBaseExpression(
09a0: 29 3b 0d 0a 09 09 65 6c 73 65 0d 0a 09 09 7b 0d );....else....{.
09b0: 0a 09 09 09 61 75 74 6f 20 6f 70 73 20 3d 20 6f ....auto ops = o
09c0: 70 65 72 61 74 6f 72 5f 70 65 72 66 65 72 65 6e perator_perferen
09d0: 63 65 73 5b 6c 65 76 65 6c 5d 3b 0d 0a 09 09 09 ces[level];.....
09e0: 61 75 74 6f 20 65 20 3d 20 70 61 72 73 65 45 28 auto e = parseE(
09f0: 6c 65 76 65 6c 2b 31 29 3b 0d 0a 09 09 73 65 71 level+1);....seq
0a00: 3a 0d 0a 09 09 09 77 68 69 6c 65 28 20 21 6c 65 :.....while( !le
0a10: 78 2e 65 6d 70 74 79 20 29 0d 0a 09 09 09 7b 0d x.empty ).....{.
0a20: 0a 09 09 09 09 61 75 74 6f 20 70 6f 73 20 3d 20 .....auto pos =
0a30: 6c 65 78 2e 66 72 6f 6e 74 2e 70 6f 73 3b 0d 0a lex.front.pos;..
0a40: 09 09 09 09 66 6f 72 65 61 63 68 28 6f 70 3b 20 ....foreach(op;
0a50: 6f 70 73 29 0d 0a 09 09 09 09 09 69 66 28 20 74 ops).......if( t
0a60: 72 79 45 61 74 28 6f 70 29 20 29 0d 0a 09 09 09 ryEat(op) ).....
0a70: 09 09 7b 0d 0a 09 09 09 09 09 09 69 66 28 20 6f ..{........if( o
0a80: 70 20 3d 3d 20 22 3d 22 20 29 20 2f 2f 20 72 69 p == "=" ) // ri
0a90: 67 68 74 20 61 73 73 6f 63 0d 0a 09 09 09 09 09 ght assoc.......
0aa0: 09 09 72 65 74 75 72 6e 20 6e 65 77 20 41 73 73 ..return new Ass
0ab0: 69 67 6e 45 78 70 72 65 73 73 69 6f 6e 28 65 2e ignExpression(e.
0ac0: 70 6f 73 2c 20 65 2c 20 70 61 72 73 65 45 28 6c pos, e, parseE(l
0ad0: 65 76 65 6c 29 29 3b 0d 0a 09 09 09 09 09 09 65 evel));........e
0ae0: 6c 73 65 0d 0a 09 09 09 09 09 09 09 65 20 3d 20 lse.........e =
0af0: 6e 65 77 20 46 75 6e 63 61 6c 6c 45 78 70 72 65 new FuncallExpre
0b00: 73 73 69 6f 6e 28 65 2e 70 6f 73 2c 20 6e 65 77 ssion(e.pos, new
0b10: 20 56 61 72 45 78 70 72 65 73 73 69 6f 6e 28 70 VarExpression(p
0b20: 6f 73 2c 20 6f 70 29 2c 20 65 2c 20 70 61 72 73 os, op), e, pars
0b30: 65 45 28 6c 65 76 65 6c 2b 31 29 29 3b 0d 0a 09 eE(level+1));...
0b40: 09 09 09 09 09 63 6f 6e 74 69 6e 75 65 20 73 65 .....continue se
0b50: 71 3b 0d 0a 09 09 09 09 09 7d 0d 0a 09 09 09 09 q;.......}......
0b60: 62 72 65 61 6b 3b 0d 0a 09 09 09 7d 0d 0a 09 09 break;.....}....
0b70: 09 72 65 74 75 72 6e 20 65 3b 0d 0a 09 09 7d 0d .return e;....}.
0b80: 0a 09 7d 0d 0a 0d 0a 09 45 78 70 72 65 73 73 69 ..}.....Expressi
0b90: 6f 6e 20 70 61 72 73 65 42 61 73 65 45 78 70 72 on parseBaseExpr
0ba0: 65 73 73 69 6f 6e 28 29 0d 0a 09 7b 0d 0a 09 09 ession()...{....
0bb0: 69 66 28 20 6c 65 78 2e 65 6d 70 74 79 20 29 0d if( lex.empty ).
0bc0: 0a 09 09 09 74 68 72 6f 77 20 6e 65 77 20 50 61 ....throw new Pa
0bd0: 72 73 65 72 45 78 63 65 70 74 69 6f 6e 28 22 45 rserException("E
0be0: 4f 46 20 64 75 72 69 6e 67 20 70 61 72 73 69 6e OF during parsin
0bf0: 67 20 61 6e 20 65 78 70 72 65 73 73 69 6f 6e 22 g an expression"
0c00: 29 3b 0d 0a 09 09 61 75 74 6f 20 70 6f 73 20 3d );....auto pos =
0c10: 20 6c 65 78 2e 66 72 6f 6e 74 2e 70 6f 73 3b 0d lex.front.pos;.
0c20: 0a 0d 0a 09 09 69 66 28 20 6c 65 78 2e 66 72 6f .....if( lex.fro
0c30: 6e 74 2e 6b 69 6e 64 20 3d 3d 20 54 6f 6b 65 6e nt.kind == Token
0c40: 2e 4b 69 6e 64 2e 6e 75 6d 62 65 72 20 29 0d 0a .Kind.number )..
0c50: 09 09 7b 0d 0a 09 09 09 73 63 6f 70 65 28 65 78 ..{.....scope(ex
0c60: 69 74 29 20 6c 65 78 2e 70 6f 70 46 72 6f 6e 74 it) lex.popFront
0c70: 3b 0d 0a 09 09 09 72 65 74 75 72 6e 20 6e 65 77 ;.....return new
0c80: 20 49 6e 74 4c 69 74 65 72 61 6c 45 78 70 72 65 IntLiteralExpre
0c90: 73 73 69 6f 6e 28 70 6f 73 2c 20 42 69 67 49 6e ssion(pos, BigIn
0ca0: 74 28 63 61 73 74 28 73 74 72 69 6e 67 29 6c 65 t(cast(string)le
0cb0: 78 2e 66 72 6f 6e 74 2e 73 74 72 29 29 3b 0d 0a x.front.str));..
0cc0: 09 09 7d 0d 0a 09 09 69 66 28 20 6c 65 78 2e 66 ..}....if( lex.f
0cd0: 72 6f 6e 74 2e 6b 69 6e 64 20 3d 3d 20 54 6f 6b ront.kind == Tok
0ce0: 65 6e 2e 4b 69 6e 64 2e 73 74 72 69 6e 67 4c 69 en.Kind.stringLi
0cf0: 74 65 72 61 6c 20 29 0d 0a 09 09 7b 0d 0a 09 09 teral )....{....
0d00: 09 73 63 6f 70 65 28 65 78 69 74 29 20 6c 65 78 .scope(exit) lex
0d10: 2e 70 6f 70 46 72 6f 6e 74 3b 0d 0a 09 09 09 72 .popFront;.....r
0d20: 65 74 75 72 6e 20 6e 65 77 20 53 74 72 4c 69 74 eturn new StrLit
0d30: 65 72 61 6c 45 78 70 72 65 73 73 69 6f 6e 28 70 eralExpression(p
0d40: 6f 73 2c 20 6c 65 78 2e 66 72 6f 6e 74 2e 73 74 os, lex.front.st
0d50: 72 29 3b 0d 0a 09 09 7d 0d 0a 09 09 69 66 28 20 r);....}....if(
0d60: 74 72 79 45 61 74 28 22 28 22 29 20 29 0d 0a 09 tryEat("(") )...
0d70: 09 7b 0d 0a 09 09 09 61 75 74 6f 20 65 20 3d 20 .{.....auto e =
0d80: 70 61 72 73 65 45 28 29 3b 0d 0a 09 09 09 65 61 parseE();.....ea
0d90: 74 28 22 29 22 2c 20 22 61 66 74 65 72 20 70 61 t(")", "after pa
0da0: 72 65 6e 74 68 65 73 69 7a 65 64 20 65 78 70 72 renthesized expr
0db0: 65 73 73 69 6f 6e 22 29 3b 0d 0a 09 09 09 72 65 ession");.....re
0dc0: 74 75 72 6e 20 65 3b 0d 0a 09 09 7d 0d 0a 09 09 turn e;....}....
0dd0: 73 63 6f 70 65 28 65 78 69 74 29 20 6c 65 78 2e scope(exit) lex.
0de0: 70 6f 70 46 72 6f 6e 74 3b 0d 0a 09 09 72 65 74 popFront;....ret
0df0: 75 72 6e 20 6e 65 77 20 56 61 72 45 78 70 72 65 urn new VarExpre
0e00: 73 73 69 6f 6e 28 70 6f 73 2c 20 6c 65 78 2e 66 ssion(pos, lex.f
0e10: 72 6f 6e 74 2e 73 74 72 29 3b 0d 0a 09 7d 0d 0a ront.str);...}..
0e20: 0d 0a 70 72 69 76 61 74 65 3a 0d 0a 09 4c 65 78 ..private:...Lex
0e30: 65 72 20 6c 65 78 3b 0d 0a 0d 0a 09 76 6f 69 64 er lex;.....void
0e40: 20 65 61 74 28 73 74 72 69 6e 67 20 6b 77 64 2c eat(string kwd,
0e50: 20 6c 61 7a 79 20 73 74 72 69 6e 67 20 6d 73 67 lazy string msg
0e60: 29 0d 0a 09 7b 0d 0a 09 09 69 66 28 20 21 74 72 )...{....if( !tr
0e70: 79 45 61 74 28 6b 77 64 29 20 29 0d 0a 09 09 7b yEat(kwd) )....{
0e80: 0d 0a 09 09 09 61 75 74 6f 20 65 20 3d 20 50 61 .....auto e = Pa
0e90: 72 73 65 72 45 78 63 65 70 74 69 6f 6e 2e 63 72 rserException.cr
0ea0: 65 61 74 65 28 6c 65 78 2c 20 22 27 22 7e 6b 77 eate(lex, "'"~kw
0eb0: 64 7e 22 27 20 69 73 20 65 78 70 65 63 74 65 64 d~"' is expected
0ec0: 20 22 7e 6d 73 67 7e 22 20 62 75 74 20 27 22 0d "~msg~" but '".
0ed0: 0a 09 09 09 09 7e 28 6c 65 78 2e 65 6d 70 74 79 .....~(lex.empty
0ee0: 20 3f 20 22 45 4f 46 22 20 3a 20 6c 65 78 2e 66 ? "EOF" : lex.f
0ef0: 72 6f 6e 74 2e 73 74 72 29 7e 22 27 20 6f 63 63 ront.str)~"' occ
0f00: 75 72 65 64 22 29 3b 0d 0a 09 09 09 74 68 72 6f ured");.....thro
0f10: 77 20 65 3b 0d 0a 09 09 7d 0d 0a 09 7d 0d 0a 0d w e;....}...}...
0f20: 0a 09 62 6f 6f 6c 20 74 72 79 45 61 74 28 73 74 ..bool tryEat(st
0f30: 72 69 6e 67 20 6b 77 64 29 0d 0a 09 7b 0d 0a 09 ring kwd)...{...
0f40: 09 69 66 28 20 6c 65 78 2e 65 6d 70 74 79 20 7c .if( lex.empty |
0f50: 7c 20 6c 65 78 2e 66 72 6f 6e 74 2e 6b 69 6e 64 | lex.front.kind
0f60: 21 3d 54 6f 6b 65 6e 2e 4b 69 6e 64 2e 69 64 65 !=Token.Kind.ide
0f70: 6e 74 69 66 69 65 72 20 7c 7c 20 6c 65 78 2e 66 ntifier || lex.f
0f80: 72 6f 6e 74 2e 73 74 72 21 3d 6b 77 64 20 29 0d ront.str!=kwd ).
0f90: 0a 09 09 09 72 65 74 75 72 6e 20 66 61 6c 73 65 ....return false
0fa0: 3b 0d 0a 09 09 6c 65 78 2e 70 6f 70 46 72 6f 6e ;....lex.popFron
0fb0: 74 3b 0d 0a 09 09 72 65 74 75 72 6e 20 74 72 75 t;....return tru
0fc0: 65 3b 0d 0a 09 7d 0d 0a 7d 0d 0a 0d 0a 75 6e 69 e;...}..}....uni
0fd0: 74 74 65 73 74 0d 0a 7b 0d 0a 09 61 75 74 6f 20 ttest..{...auto
0fe0: 70 20 3d 20 70 61 72 73 65 72 46 72 6f 6d 53 74 p = parserFromSt
0ff0: 72 69 6e 67 28 60 0d 0a 09 09 76 61 72 20 78 20 ring(`....var x
1000: 3d 20 31 30 30 3b 0d 0a 09 09 76 61 72 20 79 20 = 100;....var y
1010: 3d 20 32 30 30 3b 0d 0a 09 60 29 3b 0d 0a 09 50 = 200;...`);...P
1020: 72 6f 67 72 61 6d 20 70 72 6f 67 20 3d 20 70 2e rogram prog = p.
1030: 70 61 72 73 65 50 72 6f 67 72 61 6d 28 29 3b 0d parseProgram();.
1040: 0a 09 61 73 73 65 72 74 28 20 70 72 6f 67 2e 6c ..assert( prog.l
1050: 65 6e 67 74 68 20 3d 3d 20 32 20 29 3b 0d 0a 09 ength == 2 );...
1060: 61 75 74 6f 20 70 30 20 3d 20 63 61 73 74 28 44 auto p0 = cast(D
1070: 65 63 6c 53 74 61 74 65 6d 65 6e 74 29 70 72 6f eclStatement)pro
1080: 67 5b 30 5d 3b 0d 0a 09 61 75 74 6f 20 70 31 20 g[0];...auto p1
1090: 3d 20 63 61 73 74 28 44 65 63 6c 53 74 61 74 65 = cast(DeclState
10a0: 6d 65 6e 74 29 70 72 6f 67 5b 31 5d 3b 0d 0a 09 ment)prog[1];...
10b0: 61 73 73 65 72 74 28 20 70 30 2e 76 61 72 20 3d assert( p0.var =
10c0: 3d 20 22 78 22 20 29 3b 0d 0a 09 61 73 73 65 72 = "x" );...asser
10d0: 74 28 20 70 31 2e 76 61 72 20 3d 3d 20 22 79 22 t( p1.var == "y"
10e0: 20 29 3b 0d 0a 09 61 73 73 65 72 74 28 20 28 63 );...assert( (c
10f0: 61 73 74 28 49 6e 74 4c 69 74 65 72 61 6c 45 78 ast(IntLiteralEx
1100: 70 72 65 73 73 69 6f 6e 29 70 30 2e 65 78 70 72 pression)p0.expr
1110: 29 2e 64 61 74 61 20 3d 3d 20 31 30 30 20 29 3b ).data == 100 );
1120: 0d 0a 09 61 73 73 65 72 74 28 20 28 63 61 73 74 ...assert( (cast
1130: 28 49 6e 74 4c 69 74 65 72 61 6c 45 78 70 72 65 (IntLiteralExpre
1140: 73 73 69 6f 6e 29 70 31 2e 65 78 70 72 29 2e 64 ssion)p1.expr).d
1150: 61 74 61 20 3d 3d 20 32 30 30 20 29 3b 0d 0a 7d ata == 200 );..}
1160: 0d 0a 0d 0a 75 6e 69 74 74 65 73 74 0d 0a 7b 0d ....unittest..{.
1170: 0a 09 61 75 74 6f 20 70 20 3d 20 70 61 72 73 65 ..auto p = parse
1180: 72 46 72 6f 6d 53 74 72 69 6e 67 28 60 0d 0a 09 rFromString(`...
1190: 09 76 61 72 20 7a 7a 7a 20 3d 20 31 30 30 3b 20 .var zzz = 100;
11a0: 23 20 63 6f 6d 6d 65 6e 74 0d 0a 09 09 7a 7a 7a # comment....zzz
11b0: 20 3d 20 7a 7a 7a 20 2b 20 7a 7a 7a 20 2a 20 22 = zzz + zzz * "
11c0: 66 6f 5c 6e 6f 22 3b 20 23 20 63 6f 6d 6d 65 6e fo\no"; # commen
11d0: 74 0d 0a 09 09 09 34 32 3b 0d 0a 09 60 29 3b 0d t.....42;...`);.
11e0: 0a 09 0d 0a 09 61 75 74 6f 20 73 30 20 3d 20 6e .....auto s0 = n
11f0: 65 77 20 44 65 63 6c 53 74 61 74 65 6d 65 6e 74 ew DeclStatement
1200: 28 6e 75 6c 6c 2c 20 22 7a 7a 7a 22 2c 20 6e 65 (null, "zzz", ne
1210: 77 20 49 6e 74 4c 69 74 65 72 61 6c 45 78 70 72 w IntLiteralExpr
1220: 65 73 73 69 6f 6e 28 6e 75 6c 6c 2c 20 42 69 67 ession(null, Big
1230: 49 6e 74 28 31 30 30 29 29 29 3b 0d 0a 09 61 75 Int(100)));...au
1240: 74 6f 20 73 31 20 3d 20 6e 65 77 20 45 78 70 72 to s1 = new Expr
1250: 53 74 61 74 65 6d 65 6e 74 28 6e 75 6c 6c 2c 20 Statement(null,
1260: 6e 65 77 20 41 73 73 69 67 6e 45 78 70 72 65 73 new AssignExpres
1270: 73 69 6f 6e 28 6e 75 6c 6c 2c 0d 0a 09 09 6e 65 sion(null,....ne
1280: 77 20 56 61 72 45 78 70 72 65 73 73 69 6f 6e 28 w VarExpression(
1290: 6e 75 6c 6c 2c 20 22 7a 7a 7a 22 29 2c 0d 0a 09 null, "zzz"),...
12a0: 09 6e 65 77 20 46 75 6e 63 61 6c 6c 45 78 70 72 .new FuncallExpr
12b0: 65 73 73 69 6f 6e 28 6e 75 6c 6c 2c 20 6e 65 77 ession(null, new
12c0: 20 56 61 72 45 78 70 72 65 73 73 69 6f 6e 28 6e VarExpression(n
12d0: 75 6c 6c 2c 22 2b 22 29 2c 0d 0a 09 09 09 6e 65 ull,"+"),.....ne
12e0: 77 20 56 61 72 45 78 70 72 65 73 73 69 6f 6e 28 w VarExpression(
12f0: 6e 75 6c 6c 2c 20 22 7a 7a 7a 22 29 2c 0d 0a 09 null, "zzz"),...
1300: 09 09 6e 65 77 20 46 75 6e 63 61 6c 6c 45 78 70 ..new FuncallExp
1310: 72 65 73 73 69 6f 6e 28 6e 75 6c 6c 2c 20 6e 65 ression(null, ne
1320: 77 20 56 61 72 45 78 70 72 65 73 73 69 6f 6e 28 w VarExpression(
1330: 6e 75 6c 6c 2c 22 2a 22 29 2c 0d 0a 09 09 09 09 null,"*"),......
1340: 6e 65 77 20 56 61 72 45 78 70 72 65 73 73 69 6f new VarExpressio
1350: 6e 28 6e 75 6c 6c 2c 20 22 7a 7a 7a 22 29 2c 0d n(null, "zzz"),.
1360: 0a 09 09 09 09 6e 65 77 20 53 74 72 4c 69 74 65 .....new StrLite
1370: 72 61 6c 45 78 70 72 65 73 73 69 6f 6e 28 6e 75 ralExpression(nu
1380: 6c 6c 2c 20 22 66 6f 5c 5c 6e 6f 22 29 0d 0a 09 ll, "fo\\no")...
1390: 09 09 09 29 29 29 29 3b 0d 0a 09 61 75 74 6f 20 ...))));...auto
13a0: 73 32 20 3d 20 6e 65 77 20 45 78 70 72 53 74 61 s2 = new ExprSta
13b0: 74 65 6d 65 6e 74 28 6e 75 6c 6c 2c 20 6e 65 77 tement(null, new
13c0: 20 49 6e 74 4c 69 74 65 72 61 6c 45 78 70 72 65 IntLiteralExpre
13d0: 73 73 69 6f 6e 28 6e 75 6c 6c 2c 20 42 69 67 49 ssion(null, BigI
13e0: 6e 74 28 34 32 29 29 29 3b 0d 0a 09 0d 0a 09 50 nt(42)));......P
13f0: 72 6f 67 72 61 6d 20 70 72 6f 67 20 3d 20 70 2e rogram prog = p.
1400: 70 61 72 73 65 50 72 6f 67 72 61 6d 28 29 3b 0d parseProgram();.
1410: 0a 09 61 73 73 65 72 74 28 20 70 72 6f 67 2e 6c ..assert( prog.l
1420: 65 6e 67 74 68 20 3d 3d 20 33 20 29 3b 0d 0a 09 ength == 3 );...
1430: 61 73 73 65 72 74 28 20 70 72 6f 67 5b 30 5d 20 assert( prog[0]
1440: 3d 3d 20 73 30 20 29 3b 0d 0a 09 61 73 73 65 72 == s0 );...asser
1450: 74 28 20 70 72 6f 67 5b 31 5d 20 3d 3d 20 73 31 t( prog[1] == s1
1460: 20 29 3b 0d 0a 09 61 73 73 65 72 74 28 20 70 72 );...assert( pr
1470: 6f 67 5b 32 5d 20 3d 3d 20 73 32 20 29 3b 0d 0a og[2] == s2 );..
1480: 7d 0d 0a }..