parser.c

   1 #include <stdio.h>
   2 #include <stdarg.h>
   3
   4 #include "gmqcc.h"
   5 #include "lexer.h"
   6
   7 typedef struct {
   8     char *name;
   9     ast_expression *var;
  10 } varentry_t;
  11
  12 typedef struct {
  13     lex_file *lex;
  14     int      tok;
  15
  16     MEM_VECTOR_MAKE(varentry_t, globals);
  17     MEM_VECTOR_MAKE(varentry_t, fields);
  18     MEM_VECTOR_MAKE(ast_function*, functions);
  19     MEM_VECTOR_MAKE(ast_value*, imm_float);
  20     MEM_VECTOR_MAKE(ast_value*, imm_string);
  21     MEM_VECTOR_MAKE(ast_value*, imm_vector);
  22
  23     ast_function *function;
  24     MEM_VECTOR_MAKE(varentry_t, locals);
  25     size_t blocklocal;
  26
  27     size_t errors;
  28
  29     /* TYPE_FIELD -> parser_find_fields is used instead of find_var
  30      * TODO: TYPE_VECTOR -> x, y and z are accepted in the gmqcc standard
  31      * anything else: type error
  32      */
  33     qcint  memberof;
  34 } parser_t;
  35
  36 MEM_VEC_FUNCTIONS(parser_t, varentry_t, globals)
  37 MEM_VEC_FUNCTIONS(parser_t, varentry_t, fields)
  38 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_float)
  39 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_string)
  40 MEM_VEC_FUNCTIONS(parser_t, ast_value*, imm_vector)
  41 MEM_VEC_FUNCTIONS(parser_t, varentry_t, locals)
  42 MEM_VEC_FUNCTIONS(parser_t, ast_function*, functions)
  43
  44 static void parser_pop_local(parser_t *parser);
  45 static bool parser_variable(parser_t *parser, ast_block *localblock);
  46 static ast_block* parser_parse_block(parser_t *parser);
  47 static ast_expression* parser_parse_statement_or_block(parser_t *parser);
  48 static ast_expression* parser_expression_leave(parser_t *parser);
  49 static ast_expression* parser_expression(parser_t *parser);
  50
  51 void parseerror(parser_t *parser, const char *fmt, ...)
  52 {
  53         va_list ap;
  54
  55         parser->errors++;
  56
  57         va_start(ap, fmt);
  58     vprintmsg(LVL_ERROR, parser->lex->tok->ctx.file, parser->lex->tok->ctx.line, "parse error", fmt, ap);
  59         va_end(ap);
  60
  61         printf("\n");
  62 }
  63
  64 /* returns true if it counts as an error */
  65 bool GMQCC_WARN parsewarning(parser_t *parser, int warntype, const char *fmt, ...)
  66 {
  67         va_list ap;
  68         int lvl = LVL_WARNING;
  69
  70     if (!OPTS_WARN(warntype))
  71         return false;
  72
  73     if (OPTS_WARN(WARN_ERROR)) {
  74             parser->errors++;
  75             lvl = LVL_ERROR;
  76         }
  77
  78         va_start(ap, fmt);
  79     vprintmsg(lvl, parser->lex->tok->ctx.file, parser->lex->tok->ctx.line, "warning", fmt, ap);
  80         va_end(ap);
  81
  82         return OPTS_WARN(WARN_ERROR);
  83 }
  84
  85 bool parser_next(parser_t *parser)
  86 {
  87     /* lex_do kills the previous token */
  88     parser->tok = lex_do(parser->lex);
  89     if (parser->tok == TOKEN_EOF || parser->tok >= TOKEN_ERROR)
  90         return false;
  91     return true;
  92 }
  93
  94 /* lift a token out of the parser so it's not destroyed by parser_next */
  95 token *parser_lift(parser_t *parser)
  96 {
  97     token *tok = parser->lex->tok;
  98     parser->lex->tok = NULL;
  99     return tok;
 100 }
 101
 102 #define parser_tokval(p) (p->lex->tok->value)
 103 #define parser_token(p)  (p->lex->tok)
 104 #define parser_ctx(p)    (p->lex->tok->ctx)
 105
 106 ast_value* parser_const_float(parser_t *parser, double d)
 107 {
 108     size_t i;
 109     ast_value *out;
 110     for (i = 0; i < parser->imm_float_count; ++i) {
 111         if (parser->imm_float[i]->constval.vfloat == d)
 112             return parser->imm_float[i];
 113     }
 114     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_FLOAT);
 115     out->isconst = true;
 116     out->constval.vfloat = d;
 117     if (!parser_t_imm_float_add(parser, out)) {
 118         ast_value_delete(out);
 119         return NULL;
 120     }
 121     return out;
 122 }
 123
 124 ast_value* parser_const_string(parser_t *parser, const char *str)
 125 {
 126     size_t i;
 127     ast_value *out;
 128     for (i = 0; i < parser->imm_string_count; ++i) {
 129         if (!strcmp(parser->imm_string[i]->constval.vstring, str))
 130             return parser->imm_string[i];
 131     }
 132     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_STRING);
 133     out->isconst = true;
 134     out->constval.vstring = util_strdup(str);
 135     if (!parser_t_imm_string_add(parser, out)) {
 136         ast_value_delete(out);
 137         return NULL;
 138     }
 139     return out;
 140 }
 141
 142 ast_value* parser_const_vector(parser_t *parser, vector v)
 143 {
 144     size_t i;
 145     ast_value *out;
 146     for (i = 0; i < parser->imm_vector_count; ++i) {
 147         if (!memcmp(&parser->imm_vector[i]->constval.vvec, &v, sizeof(v)))
 148             return parser->imm_vector[i];
 149     }
 150     out = ast_value_new(parser_ctx(parser), "#IMMEDIATE", TYPE_VECTOR);
 151     out->isconst = true;
 152     out->constval.vvec = v;
 153     if (!parser_t_imm_vector_add(parser, out)) {
 154         ast_value_delete(out);
 155         return NULL;
 156     }
 157     return out;
 158 }
 159
 160 ast_expression* parser_find_field(parser_t *parser, const char *name)
 161 {
 162     size_t i;
 163     for (i = 0; i < parser->fields_count; ++i) {
 164         if (!strcmp(parser->fields[i].name, name))
 165             return parser->fields[i].var;
 166     }
 167     return NULL;
 168 }
 169
 170 ast_expression* parser_find_global(parser_t *parser, const char *name)
 171 {
 172     size_t i;
 173     for (i = 0; i < parser->globals_count; ++i) {
 174         if (!strcmp(parser->globals[i].name, name))
 175             return parser->globals[i].var;
 176     }
 177     return NULL;
 178 }
 179
 180 ast_expression* parser_find_local(parser_t *parser, const char *name, size_t upto)
 181 {
 182     size_t i;
 183     ast_value *fun;
 184     for (i = parser->locals_count; i > upto;) {
 185         --i;
 186         if (!strcmp(parser->locals[i].name, name))
 187             return parser->locals[i].var;
 188     }
 189     fun = parser->function->vtype;
 190     for (i = 0; i < fun->expression.params_count; ++i) {
 191         if (!strcmp(fun->expression.params[i]->name, name))
 192             return (ast_expression*)(fun->expression.params[i]);
 193     }
 194     return NULL;
 195 }
 196
 197 ast_expression* parser_find_var(parser_t *parser, const char *name)
 198 {
 199     ast_expression *v;
 200     v         = parser_find_local(parser, name, 0);
 201     if (!v) v = parser_find_global(parser, name);
 202     return v;
 203 }
 204
 205 typedef struct {
 206     MEM_VECTOR_MAKE(ast_value*, p);
 207 } paramlist_t;
 208 MEM_VEC_FUNCTIONS(paramlist_t, ast_value*, p)
 209
 210 static ast_value *parser_parse_type(parser_t *parser, int basetype, bool *isfunc)
 211 {
 212     paramlist_t params;
 213     ast_value *var;
 214     lex_ctx   ctx = parser_ctx(parser);
 215     int vtype = basetype;
 216     int temptype;
 217     size_t i;
 218
 219     MEM_VECTOR_INIT(&params, p);
 220
 221     *isfunc = false;
 222
 223     if (parser->tok == '(') {
 224         *isfunc = true;
 225         while (true) {
 226             ast_value *param;
 227             bool dummy;
 228
 229             if (!parser_next(parser))
 230                 goto on_error;
 231
 232             if (parser->tok == ')')
 233                 break;
 234
 235             temptype = parser_token(parser)->constval.t;
 236             if (!parser_next(parser))
 237                 goto on_error;
 238
 239             param = parser_parse_type(parser, temptype, &dummy);
 240             (void)dummy;
 241
 242             if (!param)
 243                 goto on_error;
 244
 245             if (parser->tok == TOKEN_IDENT) {
 246                 /* named parameter */
 247                 if (!ast_value_set_name(param, parser_tokval(parser)))
 248                     goto on_error;
 249                 if (!parser_next(parser))
 250                     goto on_error;
 251             }
 252
 253             if (!paramlist_t_p_add(&params, param)) {
 254                 parseerror(parser, "Out of memory while parsing typename");
 255                 goto on_error;
 256             }
 257
 258             if (parser->tok == ',')
 259                 continue;
 260             if (parser->tok == ')')
 261                 break;
 262             parseerror(parser, "Unexpected token");
 263             goto on_error;
 264         }
 265         if (!parser_next(parser))
 266             goto on_error;
 267     }
 268
 269     var = ast_value_new(ctx, "<unnamed>", vtype);
 270     if (!var)
 271         goto on_error;
 272     MEM_VECTOR_MOVE(&params, p, &var->expression, params);
 273     return var;
 274 on_error:
 275     for (i = 0; i < params.p_count; ++i)
 276         ast_value_delete(params.p[i]);
 277     MEM_VECTOR_CLEAR(&params, p);
 278     return NULL;
 279 }
 280
 281 typedef struct
 282 {
 283     size_t etype; /* 0 = expression, others are operators */
 284     int             paren;
 285     size_t          off;
 286     ast_expression *out;
 287     ast_block      *block; /* for commas and function calls */
 288     lex_ctx ctx;
 289 } sy_elem;
 290 typedef struct
 291 {
 292     MEM_VECTOR_MAKE(sy_elem, out);
 293     MEM_VECTOR_MAKE(sy_elem, ops);
 294 } shunt;
 295 MEM_VEC_FUNCTIONS(shunt, sy_elem, out)
 296 MEM_VEC_FUNCTIONS(shunt, sy_elem, ops)
 297
 298 static sy_elem syexp(lex_ctx ctx, ast_expression *v) {
 299     sy_elem e;
 300     e.etype = 0;
 301     e.out   = v;
 302     e.block = NULL;
 303     e.ctx   = ctx;
 304     e.paren = 0;
 305     return e;
 306 }
 307
 308 static sy_elem syblock(lex_ctx ctx, ast_block *v) {
 309     sy_elem e;
 310     e.etype = 0;
 311     e.out   = (ast_expression*)v;
 312     e.block = v;
 313     e.ctx   = ctx;
 314     e.paren = 0;
 315     return e;
 316 }
 317
 318 static sy_elem syop(lex_ctx ctx, const oper_info *op) {
 319     sy_elem e;
 320     e.etype = 1 + (op - operators);
 321     e.out   = NULL;
 322     e.block = NULL;
 323     e.ctx   = ctx;
 324     e.paren = 0;
 325     return e;
 326 }
 327
 328 static sy_elem syparen(lex_ctx ctx, int p, size_t off) {
 329     sy_elem e;
 330     e.etype = 0;
 331     e.off   = off;
 332     e.out   = NULL;
 333     e.block = NULL;
 334     e.ctx   = ctx;
 335     e.paren = p;
 336     return e;
 337 }
 338
 339 #ifdef DEBUGSHUNT
 340 # define DEBUGSHUNTDO(x) x
 341 #else
 342 # define DEBUGSHUNTDO(x)
 343 #endif
 344
 345 static bool parser_sy_pop(parser_t *parser, shunt *sy)
 346 {
 347     const oper_info *op;
 348     lex_ctx ctx;
 349     ast_expression *out = NULL;
 350     ast_expression *exprs[3];
 351     ast_block      *blocks[3];
 352     size_t i, assignop;
 353     qcint  generated_op = 0;
 354
 355     if (!sy->ops_count) {
 356         parseerror(parser, "internal error: missing operator");
 357         return false;
 358     }
 359
 360     if (sy->ops[sy->ops_count-1].paren) {
 361         parseerror(parser, "unmatched parenthesis");
 362         return false;
 363     }
 364
 365     op = &operators[sy->ops[sy->ops_count-1].etype - 1];
 366     ctx = sy->ops[sy->ops_count-1].ctx;
 367
 368     DEBUGSHUNTDO(printf("apply %s\n", op->op));
 369
 370     if (sy->out_count < op->operands) {
 371         parseerror(parser, "internal error: not enough operands: %i", sy->out_count);
 372         return false;
 373     }
 374
 375     sy->ops_count--;
 376
 377     sy->out_count -= op->operands;
 378     for (i = 0; i < op->operands; ++i) {
 379         exprs[i]  = sy->out[sy->out_count+i].out;
 380         blocks[i] = sy->out[sy->out_count+i].block;
 381     }
 382
 383     if (blocks[0] && !blocks[0]->exprs_count && op->id != opid1(',')) {
 384         parseerror(parser, "internal error: operator cannot be applied on empty blocks");
 385         return false;
 386     }
 387
 388 #define NotSameType(T) \
 389              (exprs[0]->expression.vtype != exprs[1]->expression.vtype || \
 390               exprs[0]->expression.vtype != T)
 391     switch (op->id)
 392     {
 393         default:
 394             parseerror(parser, "internal error: unhandled operand");
 395             return false;
 396
 397         case opid1('.'):
 398             if (exprs[0]->expression.vtype == TYPE_ENTITY) {
 399                 if (exprs[1]->expression.vtype != TYPE_FIELD) {
 400                     parseerror(parser, "type error: right hand of member-operand should be an entity-field");
 401                     return false;
 402                 }
 403                 out = (ast_expression*)ast_entfield_new(ctx, exprs[0], exprs[1]);
 404             }
 405             else if (exprs[0]->expression.vtype == TYPE_VECTOR) {
 406                 parseerror(parser, "internal error: vector access is not supposed to be handled at this point");
 407                 return false;
 408             }
 409             else {
 410                 parseerror(parser, "type error: member-of operator on something that is not an entity or vector");
 411                 return false;
 412             }
 413             break;
 414
 415         case opid1(','):
 416             if (blocks[0]) {
 417                 if (!ast_block_exprs_add(blocks[0], exprs[1]))
 418                     return false;
 419             } else {
 420                 blocks[0] = ast_block_new(ctx);
 421                 if (!ast_block_exprs_add(blocks[0], exprs[0]) ||
 422                     !ast_block_exprs_add(blocks[0], exprs[1]))
 423                 {
 424                     return false;
 425                 }
 426             }
 427             if (!ast_block_set_type(blocks[0], exprs[1]))
 428                 return false;
 429
 430             sy->out[sy->out_count++] = syblock(ctx, blocks[0]);
 431             return true;
 432
 433         case opid1('+'):
 434             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 435                 parseerror(parser, "Cannot add type %s and %s",
 436                            type_name[exprs[0]->expression.vtype],
 437                            type_name[exprs[1]->expression.vtype]);
 438                 return false;
 439             }
 440             if (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) {
 441                 parseerror(parser, "type error: %s - %s not defined",
 442                            type_name[exprs[0]->expression.vtype],
 443                            type_name[exprs[1]->expression.vtype]);
 444                 return false;
 445             }
 446             switch (exprs[0]->expression.vtype) {
 447                 case TYPE_FLOAT:
 448                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_F, exprs[0], exprs[1]);
 449                     break;
 450                 case TYPE_VECTOR:
 451                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_V, exprs[0], exprs[1]);
 452                     break;
 453                 default:
 454                     parseerror(parser, "type error: cannot add type %s to %s",
 455                                type_name[exprs[0]->expression.vtype],
 456                                type_name[exprs[1]->expression.vtype]);
 457                     return false;
 458             };
 459             break;
 460         case opid1('-'):
 461             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 462                 parseerror(parser, "type error: cannot subtract type %s from %s",
 463                            type_name[exprs[1]->expression.vtype],
 464                            type_name[exprs[0]->expression.vtype]);
 465                 return false;
 466             }
 467             if (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) {
 468                 parseerror(parser, "type error: %s - %s not defined",
 469                            type_name[exprs[0]->expression.vtype],
 470                            type_name[exprs[1]->expression.vtype]);
 471                 return false;
 472             }
 473             switch (exprs[0]->expression.vtype) {
 474                 case TYPE_FLOAT:
 475                     out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_F, exprs[0], exprs[1]);
 476                     break;
 477                 case TYPE_VECTOR:
 478                     out = (ast_expression*)ast_binary_new(ctx, INSTR_SUB_V, exprs[0], exprs[1]);
 479                     break;
 480                 default:
 481                     parseerror(parser, "type error: cannot subtract type %s from %s",
 482                                type_name[exprs[1]->expression.vtype],
 483                                type_name[exprs[0]->expression.vtype]);
 484                     return false;
 485             };
 486             break;
 487         case opid1('*'):
 488             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype &&
 489                 exprs[0]->expression.vtype != TYPE_VECTOR &&
 490                 exprs[0]->expression.vtype != TYPE_FLOAT &&
 491                 exprs[1]->expression.vtype != TYPE_VECTOR &&
 492                 exprs[1]->expression.vtype != TYPE_FLOAT)
 493             {
 494                 parseerror(parser, "type error: cannot multiply type %s by %s",
 495                            type_name[exprs[1]->expression.vtype],
 496                            type_name[exprs[0]->expression.vtype]);
 497                 return false;
 498             }
 499             switch (exprs[0]->expression.vtype) {
 500                 case TYPE_FLOAT:
 501                     if (exprs[1]->expression.vtype == TYPE_VECTOR)
 502                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_FV, exprs[0], exprs[1]);
 503                     else
 504                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_F, exprs[0], exprs[1]);
 505                     break;
 506                 case TYPE_VECTOR:
 507                     if (exprs[1]->expression.vtype == TYPE_FLOAT)
 508                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_VF, exprs[0], exprs[1]);
 509                     else
 510                         out = (ast_expression*)ast_binary_new(ctx, INSTR_MUL_V, exprs[0], exprs[1]);
 511                     break;
 512                 default:
 513                     parseerror(parser, "type error: cannot multiply type %s by %s",
 514                                type_name[exprs[1]->expression.vtype],
 515                                type_name[exprs[0]->expression.vtype]);
 516                     return false;
 517             };
 518             break;
 519         case opid1('/'):
 520             if (NotSameType(TYPE_FLOAT)) {
 521                 parseerror(parser, "type error: cannot divide types %s and %s",
 522                            type_name[exprs[0]->expression.vtype],
 523                            type_name[exprs[1]->expression.vtype]);
 524                 return false;
 525             }
 526             out = (ast_expression*)ast_binary_new(ctx, INSTR_DIV_F, exprs[0], exprs[1]);
 527             break;
 528         case opid1('%'):
 529         case opid2('%','='):
 530             parseerror(parser, "qc does not have a modulo operator");
 531             return false;
 532         case opid1('|'):
 533         case opid1('&'):
 534             if (NotSameType(TYPE_FLOAT)) {
 535                 parseerror(parser, "type error: cannot perform bit operations on types %s and %s",
 536                            type_name[exprs[0]->expression.vtype],
 537                            type_name[exprs[1]->expression.vtype]);
 538                 return false;
 539             }
 540             out = (ast_expression*)ast_binary_new(ctx,
 541                                                   (op->id == opid1('|') ? INSTR_BITOR : INSTR_BITAND),
 542                                                   exprs[0], exprs[1]);
 543             break;
 544         case opid1('^'):
 545             parseerror(parser, "TODO: bitxor");
 546             return false;
 547
 548         case opid2('<','<'):
 549         case opid2('>','>'):
 550         case opid3('<','<','='):
 551         case opid3('>','>','='):
 552             parseerror(parser, "TODO: shifts");
 553             return false;
 554
 555         case opid2('|','|'):
 556             generated_op += 1; /* INSTR_OR */
 557         case opid2('&','&'):
 558             generated_op += INSTR_AND;
 559             if (NotSameType(TYPE_FLOAT)) {
 560                 parseerror(parser, "type error: cannot apply logical operation on types %s and %s",
 561                            type_name[exprs[0]->expression.vtype],
 562                            type_name[exprs[1]->expression.vtype]);
 563                 parseerror(parser, "TODO: logical ops for arbitrary types using INSTR_NOT");
 564                 parseerror(parser, "TODO: optional early out");
 565                 return false;
 566             }
 567             if (opts_standard == COMPILER_GMQCC)
 568                 printf("TODO: early out logic\n");
 569             out = (ast_expression*)ast_binary_new(ctx, generated_op, exprs[0], exprs[1]);
 570             break;
 571
 572         case opid1('>'):
 573             generated_op += 1; /* INSTR_GT */
 574         case opid1('<'):
 575             generated_op += 1; /* INSTR_LT */
 576         case opid2('>', '='):
 577             generated_op += 1; /* INSTR_GE */
 578         case opid2('<', '='):
 579             generated_op += INSTR_LE;
 580             if (NotSameType(TYPE_FLOAT)) {
 581                 parseerror(parser, "type error: cannot compare types %s and %s",
 582                            type_name[exprs[0]->expression.vtype],
 583                            type_name[exprs[1]->expression.vtype]);
 584                 return false;
 585             }
 586             out = (ast_expression*)ast_binary_new(ctx, generated_op, exprs[0], exprs[1]);
 587             break;
 588         case opid2('!', '='):
 589             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 590                 parseerror(parser, "type error: cannot compare types %s and %s",
 591                            type_name[exprs[0]->expression.vtype],
 592                            type_name[exprs[1]->expression.vtype]);
 593                 return false;
 594             }
 595             out = (ast_expression*)ast_binary_new(ctx, type_ne_instr[exprs[0]->expression.vtype], exprs[0], exprs[1]);
 596             break;
 597         case opid2('=', '='):
 598             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 599                 parseerror(parser, "type error: cannot compare types %s and %s",
 600                            type_name[exprs[0]->expression.vtype],
 601                            type_name[exprs[1]->expression.vtype]);
 602                 return false;
 603             }
 604             out = (ast_expression*)ast_binary_new(ctx, type_eq_instr[exprs[0]->expression.vtype], exprs[0], exprs[1]);
 605             break;
 606
 607         case opid1('='):
 608             if (ast_istype(exprs[0], ast_entfield))
 609                 assignop = type_storep_instr[exprs[0]->expression.vtype];
 610             else
 611                 assignop = type_store_instr[exprs[0]->expression.vtype];
 612             out = (ast_expression*)ast_store_new(ctx, assignop, exprs[0], exprs[1]);
 613             break;
 614         case opid2('+','='):
 615             if (exprs[0]->expression.vtype != exprs[1]->expression.vtype) {
 616                 parseerror(parser, "Cannot add type %s and %s",
 617                            type_name[exprs[0]->expression.vtype],
 618                            type_name[exprs[1]->expression.vtype]);
 619                 return false;
 620             }
 621             if (exprs[0]->expression.vtype != TYPE_VECTOR && exprs[0]->expression.vtype != TYPE_FLOAT) {
 622                 parseerror(parser, "type error: %s - %s not defined",
 623                            type_name[exprs[0]->expression.vtype],
 624                            type_name[exprs[1]->expression.vtype]);
 625                 return false;
 626             }
 627             switch (exprs[0]->expression.vtype) {
 628                 case TYPE_FLOAT:
 629                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_F, exprs[0], exprs[1]);
 630                     break;
 631                 case TYPE_VECTOR:
 632                     out = (ast_expression*)ast_binary_new(ctx, INSTR_ADD_V, exprs[0], exprs[1]);
 633                     break;
 634                 default:
 635                     parseerror(parser, "type error: cannot add type %s to %s",
 636                                type_name[exprs[0]->expression.vtype],
 637                                type_name[exprs[1]->expression.vtype]);
 638                     return false;
 639             };
 640             break;
 641     }
 642 #undef NotSameType
 643
 644     if (!out) {
 645         parseerror(parser, "failed to apply operand %s", op->op);
 646         return false;
 647     }
 648
 649     DEBUGSHUNTDO(printf("applied %s\n", op->op));
 650     sy->out[sy->out_count++] = syexp(ctx, out);
 651     return true;
 652 }
 653
 654 static bool parser_close_call(parser_t *parser, shunt *sy)
 655 {
 656     /* was a function call */
 657     ast_expression *fun;
 658     ast_call       *call;
 659
 660     size_t          fid;
 661     size_t          paramcount;
 662
 663     sy->ops_count--;
 664     fid = sy->ops[sy->ops_count].off;
 665
 666     /* out[fid] is the function
 667      * everything above is parameters...
 668      * 0 params = nothing
 669      * 1 params = ast_expression
 670      * more = ast_block
 671      */
 672
 673     if (sy->out_count < 1 || sy->out_count <= fid) {
 674         parseerror(parser, "internal error: function call needs function and parameter list...");
 675         return false;
 676     }
 677
 678     fun = sy->out[fid].out;
 679
 680     call = ast_call_new(sy->ops[sy->ops_count].ctx, fun);
 681     if (!call) {
 682         parseerror(parser, "out of memory");
 683         return false;
 684     }
 685
 686     if (fid+1 == sy->out_count) {
 687         /* no arguments */
 688         paramcount = 0;
 689     } else if (fid+2 == sy->out_count) {
 690         ast_block *params;
 691         sy->out_count--;
 692         params = sy->out[sy->out_count].block;
 693         if (!params) {
 694             /* 1 param */
 695             paramcount = 1;
 696             if (!ast_call_params_add(call, sy->out[sy->out_count].out)) {
 697                 ast_delete(sy->out[sy->out_count].out);
 698                 parseerror(parser, "out of memory");
 699                 return false;
 700             }
 701         } else {
 702             paramcount = params->exprs_count;
 703             MEM_VECTOR_MOVE(params, exprs, call, params);
 704             ast_delete(params);
 705         }
 706     } else {
 707         parseerror(parser, "invalid function call");
 708         return false;
 709     }
 710
 711     /* overwrite fid, the function, with a call */
 712     sy->out[fid] = syexp(call->expression.node.context, (ast_expression*)call);
 713
 714     if (fun->expression.vtype != TYPE_FUNCTION) {
 715         parseerror(parser, "not a function");
 716         return false;
 717     }
 718
 719     if (!fun->expression.next) {
 720         parseerror(parser, "could not determine function return type");
 721         return false;
 722     } else {
 723         if (fun->expression.params_count != paramcount) {
 724             parseerror(parser, "expected %i parameters, got %i", (int)fun->expression.params_count, paramcount);
 725             return false;
 726         }
 727     }
 728
 729     return true;
 730 }
 731
 732 static bool parser_close_paren(parser_t *parser, shunt *sy, bool functions_only)
 733 {
 734     if (!sy->ops_count) {
 735         parseerror(parser, "unmatched closing paren");
 736         return false;
 737     }
 738     if (sy->ops[sy->ops_count-1].paren == 1) {
 739         parseerror(parser, "empty parenthesis expression");
 740         return false;
 741     }
 742     while (sy->ops_count) {
 743         if (sy->ops[sy->ops_count-1].paren == 'f') {
 744             if (!parser_close_call(parser, sy))
 745                 return false;
 746             break;
 747         }
 748         if (sy->ops[sy->ops_count-1].paren == 1) {
 749             sy->ops_count--;
 750             return !functions_only;
 751         }
 752         if (!parser_sy_pop(parser, sy))
 753             return false;
 754     }
 755     return true;
 756 }
 757
 758 static ast_expression* parser_expression_leave(parser_t *parser)
 759 {
 760     ast_expression *expr = NULL;
 761     shunt sy;
 762     bool wantop = false;
 763     bool gotmemberof = false;
 764
 765     /* count the parens because an if starts with one, so the
 766      * end of a condition is an unmatched closing paren
 767      */
 768     int parens = 0;
 769
 770     MEM_VECTOR_INIT(&sy, out);
 771     MEM_VECTOR_INIT(&sy, ops);
 772
 773     while (true)
 774     {
 775         if (gotmemberof)
 776             gotmemberof = false;
 777         else
 778             parser->memberof = 0;
 779         if (!wantop)
 780         {
 781             bool nextwant = true;
 782             if (parser->tok == TOKEN_IDENT)
 783             {
 784                 /* variable */
 785                 ast_expression *var;
 786                 if (opts_standard == COMPILER_GMQCC)
 787                 {
 788                     if (parser->memberof == TYPE_ENTITY)
 789                         var = parser_find_field(parser, parser_tokval(parser));
 790                     else if (parser->memberof == TYPE_VECTOR)
 791                     {
 792                         parseerror(parser, "TODO: implement effective vector member access");
 793                         goto onerr;
 794                     }
 795                     else if (parser->memberof) {
 796                         parseerror(parser, "namespace for member not found");
 797                         goto onerr;
 798                     }
 799                     else
 800                         var = parser_find_var(parser, parser_tokval(parser));
 801                 } else {
 802                     var = parser_find_var(parser, parser_tokval(parser));
 803                     if (!var)
 804                         var = parser_find_field(parser, parser_tokval(parser));
 805                 }
 806                 if (!var) {
 807                     parseerror(parser, "unexpected ident: %s", parser_tokval(parser));
 808                     goto onerr;
 809                 }
 810                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), var))) {
 811                     parseerror(parser, "out of memory");
 812                     goto onerr;
 813                 }
 814                 DEBUGSHUNTDO(printf("push %s\n", parser_tokval(parser)));
 815             }
 816             else if (parser->tok == TOKEN_FLOATCONST) {
 817                 ast_value *val = parser_const_float(parser, (parser_token(parser)->constval.f));
 818                 if (!val)
 819                     return false;
 820                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
 821                     parseerror(parser, "out of memory");
 822                     goto onerr;
 823                 }
 824                 DEBUGSHUNTDO(printf("push %g\n", parser_token(parser)->constval.f));
 825             }
 826             else if (parser->tok == TOKEN_INTCONST) {
 827                 ast_value *val = parser_const_float(parser, (double)(parser_token(parser)->constval.i));
 828                 if (!val)
 829                     return false;
 830                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
 831                     parseerror(parser, "out of memory");
 832                     goto onerr;
 833                 }
 834                 DEBUGSHUNTDO(printf("push %i\n", parser_token(parser)->constval.i));
 835             }
 836             else if (parser->tok == TOKEN_STRINGCONST) {
 837                 ast_value *val = parser_const_string(parser, parser_tokval(parser));
 838                 if (!val)
 839                     return false;
 840                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
 841                     parseerror(parser, "out of memory");
 842                     goto onerr;
 843                 }
 844                 DEBUGSHUNTDO(printf("push string\n"));
 845             }
 846             else if (parser->tok == TOKEN_VECTORCONST) {
 847                 ast_value *val = parser_const_vector(parser, parser_token(parser)->constval.v);
 848                 if (!val)
 849                     return false;
 850                 if (!shunt_out_add(&sy, syexp(parser_ctx(parser), (ast_expression*)val))) {
 851                     parseerror(parser, "out of memory");
 852                     goto onerr;
 853                 }
 854                 DEBUGSHUNTDO(printf("push '%g %g %g'\n",
 855                                     parser_token(parser)->constval.v.x,
 856                                     parser_token(parser)->constval.v.y,
 857                                     parser_token(parser)->constval.v.z));
 858             }
 859             else if (parser->tok == '(') {
 860                 ++parens;
 861                 nextwant = false; /* not expecting an operator next */
 862                 if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 1, 0))) {
 863                     parseerror(parser, "out of memory");
 864                     goto onerr;
 865                 }
 866                 DEBUGSHUNTDO(printf("push (\n"));
 867             }
 868             else if (parser->tok == ')') {
 869                 DEBUGSHUNTDO(printf("do[nop] )\n"));
 870                 --parens;
 871                 if (parens < 0)
 872                     break;
 873                 /* allowed for function calls */
 874                 if (!parser_close_paren(parser, &sy, true))
 875                     goto onerr;
 876             }
 877             else {
 878                 /* TODO: prefix operators */
 879                 parseerror(parser, "expected statement");
 880                 goto onerr;
 881             }
 882             wantop = nextwant;
 883             parser->lex->flags.noops = !wantop;
 884         } else {
 885             bool nextwant = false;
 886             if (parser->tok == '(') {
 887                 DEBUGSHUNTDO(printf("push (\n"));
 888                 ++parens;
 889                 /* we expected an operator, this is the function-call operator */
 890                 if (!shunt_ops_add(&sy, syparen(parser_ctx(parser), 'f', sy.out_count-1))) {
 891                     parseerror(parser, "out of memory");
 892                     goto onerr;
 893                 }
 894             }
 895             else if (parser->tok == ')') {
 896                 DEBUGSHUNTDO(printf("do[op] )\n"));
 897                 --parens;
 898                 if (parens < 0)
 899                     break;
 900                 /* we do expect an operator next */
 901                 /* closing an opening paren */
 902                 if (!parser_close_paren(parser, &sy, false))
 903                     goto onerr;
 904                 nextwant = true;
 905             }
 906             else if (parser->tok != TOKEN_OPERATOR) {
 907                 parseerror(parser, "expected operator or end of statement");
 908                 goto onerr;
 909             }
 910             else {
 911                 /* classify the operator */
 912                 /* TODO: suffix operators */
 913                 const oper_info *op;
 914                 const oper_info *olast = NULL;
 915                 size_t o;
 916                 for (o = 0; o < operator_count; ++o) {
 917                     if (!(operators[o].flags & OP_PREFIX) &&
 918                         !(operators[o].flags & OP_SUFFIX) && /* remove this */
 919                         !strcmp(parser_tokval(parser), operators[o].op))
 920                     {
 921                         break;
 922                     }
 923                 }
 924                 if (o == operator_count) {
 925                     /* no operator found... must be the end of the statement */
 926                     break;
 927                 }
 928                 /* found an operator */
 929                 op = &operators[o];
 930                 if (op->id == opid1('.')) {
 931                     /* for gmqcc standard: open up the namespace of the previous type */
 932                     ast_expression *prevex = sy.out[sy.out_count-1].out;
 933                     if (!prevex) {
 934                         parseerror(parser, "unexpected member operator");
 935                         goto onerr;
 936                     }
 937                     if (prevex->expression.vtype == TYPE_ENTITY)
 938                         parser->memberof = TYPE_ENTITY;
 939                     else if (prevex->expression.vtype == TYPE_VECTOR)
 940                         parser->memberof = TYPE_VECTOR;
 941                     else {
 942                         parseerror(parser, "type error: type has no members");
 943                         goto onerr;
 944                     }
 945                     gotmemberof = true;
 946                 }
 947
 948                 if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
 949                     olast = &operators[sy.ops[sy.ops_count-1].etype-1];
 950
 951                 while (olast && (
 952                         (op->prec < olast->prec) ||
 953                         (op->assoc == ASSOC_LEFT && op->prec <= olast->prec) ) )
 954                 {
 955                     if (!parser_sy_pop(parser, &sy))
 956                         goto onerr;
 957                     if (sy.ops_count && !sy.ops[sy.ops_count-1].paren)
 958                         olast = &operators[sy.ops[sy.ops_count-1].etype-1];
 959                     else
 960                         olast = NULL;
 961                 }
 962
 963                 DEBUGSHUNTDO(printf("push operator %s\n", op->op));
 964                 if (!shunt_ops_add(&sy, syop(parser_ctx(parser), op)))
 965                     goto onerr;
 966             }
 967             wantop = nextwant;
 968             parser->lex->flags.noops = !wantop;
 969         }
 970         if (!parser_next(parser)) {
 971             goto onerr;
 972         }
 973         if (parser->tok == ';') {
 974             break;
 975         }
 976     }
 977
 978     while (sy.ops_count) {
 979         if (!parser_sy_pop(parser, &sy))
 980             goto onerr;
 981     }
 982
 983     parser->lex->flags.noops = true;
 984     if (!sy.out_count) {
 985         parseerror(parser, "empty expression");
 986         expr = NULL;
 987     } else
 988         expr = sy.out[0].out;
 989     MEM_VECTOR_CLEAR(&sy, out);
 990     MEM_VECTOR_CLEAR(&sy, ops);
 991     DEBUGSHUNTDO(printf("shut done\n"));
 992     return expr;
 993
 994 onerr:
 995     parser->lex->flags.noops = true;
 996     MEM_VECTOR_CLEAR(&sy, out);
 997     MEM_VECTOR_CLEAR(&sy, ops);
 998     return NULL;
 999 }
1000
1001 static ast_expression* parser_expression(parser_t *parser)
1002 {
1003     ast_expression *e = parser_expression_leave(parser);
1004     if (!e)
1005         return NULL;
1006     if (!parser_next(parser)) {
1007         ast_delete(e);
1008         return NULL;
1009     }
1010     return e;
1011 }
1012
1013 static bool parser_parse_if(parser_t *parser, ast_block *block, ast_expression **out)
1014 {
1015     ast_ifthen *ifthen;
1016     ast_expression *cond, *ontrue, *onfalse = NULL;
1017
1018     lex_ctx ctx = parser_ctx(parser);
1019
1020     /* skip the 'if' and check for opening paren */
1021     if (!parser_next(parser) || parser->tok != '(') {
1022         parseerror(parser, "expected 'if' condition in parenthesis");
1023         return false;
1024     }
1025     /* parse into the expression */
1026     if (!parser_next(parser)) {
1027         parseerror(parser, "expected 'if' condition after opening paren");
1028         return false;
1029     }
1030     /* parse the condition */
1031     cond = parser_expression_leave(parser);
1032     if (!cond)
1033         return false;
1034     /* closing paren */
1035     if (parser->tok != ')') {
1036         parseerror(parser, "expected closing paren after 'if' condition");
1037         ast_delete(cond);
1038         return false;
1039     }
1040     /* parse into the 'then' branch */
1041     if (!parser_next(parser)) {
1042         parseerror(parser, "expected statement for on-true branch of 'if'");
1043         ast_delete(cond);
1044         return false;
1045     }
1046     ontrue = parser_parse_statement_or_block(parser);
1047     if (!ontrue) {
1048         ast_delete(cond);
1049         return false;
1050     }
1051     /* check for an else */
1052     if (!strcmp(parser_tokval(parser), "else")) {
1053         /* parse into the 'else' branch */
1054         if (!parser_next(parser)) {
1055             parseerror(parser, "expected on-false branch after 'else'");
1056             ast_delete(ontrue);
1057             ast_delete(cond);
1058             return false;
1059         }
1060         onfalse = parser_parse_statement_or_block(parser);
1061         if (!onfalse) {
1062             ast_delete(ontrue);
1063             ast_delete(cond);
1064             return false;
1065         }
1066     }
1067
1068     ifthen = ast_ifthen_new(ctx, cond, ontrue, onfalse);
1069     *out = (ast_expression*)ifthen;
1070     return true;
1071 }
1072
1073 static bool parser_parse_while(parser_t *parser, ast_block *block, ast_expression **out)
1074 {
1075     ast_loop *aloop;
1076     ast_expression *cond, *ontrue;
1077
1078     lex_ctx ctx = parser_ctx(parser);
1079
1080     /* skip the 'while' and check for opening paren */
1081     if (!parser_next(parser) || parser->tok != '(') {
1082         parseerror(parser, "expected 'while' condition in parenthesis");
1083         return false;
1084     }
1085     /* parse into the expression */
1086     if (!parser_next(parser)) {
1087         parseerror(parser, "expected 'while' condition after opening paren");
1088         return false;
1089     }
1090     /* parse the condition */
1091     cond = parser_expression_leave(parser);
1092     if (!cond)
1093         return false;
1094     /* closing paren */
1095     if (parser->tok != ')') {
1096         parseerror(parser, "expected closing paren after 'while' condition");
1097         ast_delete(cond);
1098         return false;
1099     }
1100     /* parse into the 'then' branch */
1101     if (!parser_next(parser)) {
1102         parseerror(parser, "expected while-loop body");
1103         ast_delete(cond);
1104         return false;
1105     }
1106     ontrue = parser_parse_statement_or_block(parser);
1107     if (!ontrue) {
1108         ast_delete(cond);
1109         return false;
1110     }
1111
1112     aloop = ast_loop_new(ctx, NULL, cond, NULL, NULL, ontrue);
1113     *out = (ast_expression*)aloop;
1114     return true;
1115 }
1116
1117 static bool parser_parse_dowhile(parser_t *parser, ast_block *block, ast_expression **out)
1118 {
1119     ast_loop *aloop;
1120     ast_expression *cond, *ontrue;
1121
1122     lex_ctx ctx = parser_ctx(parser);
1123
1124     /* skip the 'do' and get the body */
1125     if (!parser_next(parser)) {
1126         parseerror(parser, "expected loop body");
1127         return false;
1128     }
1129     ontrue = parser_parse_statement_or_block(parser);
1130     if (!ontrue)
1131         return false;
1132
1133     /* expect the "while" */
1134     if (parser->tok != TOKEN_KEYWORD ||
1135         strcmp(parser_tokval(parser), "while"))
1136     {
1137         parseerror(parser, "expected 'while' and condition");
1138         ast_delete(ontrue);
1139         return false;
1140     }
1141
1142     /* skip the 'while' and check for opening paren */
1143     if (!parser_next(parser) || parser->tok != '(') {
1144         parseerror(parser, "expected 'while' condition in parenthesis");
1145         ast_delete(ontrue);
1146         return false;
1147     }
1148     /* parse into the expression */
1149     if (!parser_next(parser)) {
1150         parseerror(parser, "expected 'while' condition after opening paren");
1151         ast_delete(ontrue);
1152         return false;
1153     }
1154     /* parse the condition */
1155     cond = parser_expression_leave(parser);
1156     if (!cond)
1157         return false;
1158     /* closing paren */
1159     if (parser->tok != ')') {
1160         parseerror(parser, "expected closing paren after 'while' condition");
1161         ast_delete(ontrue);
1162         ast_delete(cond);
1163         return false;
1164     }
1165     /* parse on */
1166     if (!parser_next(parser) || parser->tok != ';') {
1167         parseerror(parser, "expected semicolon after condition");
1168         ast_delete(ontrue);
1169         ast_delete(cond);
1170         return false;
1171     }
1172
1173     if (!parser_next(parser)) {
1174         parseerror(parser, "parse error");
1175         ast_delete(ontrue);
1176         ast_delete(cond);
1177         return false;
1178     }
1179
1180     aloop = ast_loop_new(ctx, NULL, NULL, cond, NULL, ontrue);
1181     *out = (ast_expression*)aloop;
1182     return true;
1183 }
1184
1185 static bool parser_parse_for(parser_t *parser, ast_block *block, ast_expression **out)
1186 {
1187     ast_loop *aloop;
1188     ast_expression *initexpr, *cond, *increment, *ontrue;
1189     size_t oldblocklocal;
1190
1191     lex_ctx ctx = parser_ctx(parser);
1192
1193     oldblocklocal = parser->blocklocal;
1194     parser->blocklocal = parser->locals_count;
1195
1196     initexpr  = NULL;
1197     cond      = NULL;
1198     increment = NULL;
1199     ontrue    = NULL;
1200
1201     /* skip the 'while' and check for opening paren */
1202     if (!parser_next(parser) || parser->tok != '(') {
1203         parseerror(parser, "expected 'for' expressions in parenthesis");
1204         goto onerr;
1205     }
1206     /* parse into the expression */
1207     if (!parser_next(parser)) {
1208         parseerror(parser, "expected 'for' initializer after opening paren");
1209         goto onerr;
1210     }
1211
1212     if (parser->tok == TOKEN_TYPENAME) {
1213         if (opts_standard != COMPILER_GMQCC) {
1214             if (parsewarning(parser, WARN_EXTENSIONS,
1215                              "current standard does not allow variable declarations in for-loop initializers"))
1216                 goto onerr;
1217         }
1218
1219         parseerror(parser, "TODO: assignment of new variables to be non-const");
1220         goto onerr;
1221         if (!parser_variable(parser, block))
1222             goto onerr;
1223     }
1224     else if (parser->tok != ';')
1225     {
1226         initexpr = parser_expression_leave(parser);
1227         if (!initexpr)
1228             goto onerr;
1229     }
1230
1231     /* move on to condition */
1232     if (parser->tok != ';') {
1233         parseerror(parser, "expected semicolon after for-loop initializer");
1234         goto onerr;
1235     }
1236     if (!parser_next(parser)) {
1237         parseerror(parser, "expected for-loop condition");
1238         goto onerr;
1239     }
1240
1241     /* parse the condition */
1242     if (parser->tok != ';') {
1243         cond = parser_expression_leave(parser);
1244         if (!cond)
1245             goto onerr;
1246     }
1247
1248     /* move on to incrementor */
1249     if (parser->tok != ';') {
1250         parseerror(parser, "expected semicolon after for-loop initializer");
1251         goto onerr;
1252     }
1253     if (!parser_next(parser)) {
1254         parseerror(parser, "expected for-loop condition");
1255         goto onerr;
1256     }
1257
1258     /* parse the incrementor */
1259     if (parser->tok != ')') {
1260         increment = parser_expression_leave(parser);
1261         if (!increment)
1262             goto onerr;
1263     }
1264
1265     /* closing paren */
1266     if (parser->tok != ')') {
1267         parseerror(parser, "expected closing paren after 'for-loop' incrementor");
1268         goto onerr;
1269     }
1270     /* parse into the 'then' branch */
1271     if (!parser_next(parser)) {
1272         parseerror(parser, "expected for-loop body");
1273         goto onerr;
1274     }
1275     ontrue = parser_parse_statement_or_block(parser);
1276     if (!ontrue) {
1277         goto onerr;
1278     }
1279
1280     aloop = ast_loop_new(ctx, initexpr, cond, NULL, increment, ontrue);
1281     *out = (ast_expression*)aloop;
1282
1283     while (parser->locals_count > parser->blocklocal)
1284         parser_pop_local(parser);
1285     parser->blocklocal = oldblocklocal;
1286     return true;
1287 onerr:
1288     if (initexpr)  ast_delete(initexpr);
1289     if (cond)      ast_delete(cond);
1290     if (increment) ast_delete(increment);
1291     while (parser->locals_count > parser->blocklocal)
1292         parser_pop_local(parser);
1293     parser->blocklocal = oldblocklocal;
1294     return false;
1295 }
1296
1297 static bool parser_parse_statement(parser_t *parser, ast_block *block, ast_expression **out)
1298 {
1299     if (parser->tok == TOKEN_TYPENAME)
1300     {
1301         /* local variable */
1302         if (!block) {
1303             parseerror(parser, "cannot declare a variable from here");
1304             return false;
1305         }
1306         if (opts_standard == COMPILER_QCC) {
1307             if (parsewarning(parser, WARN_EXTENSIONS, "missing 'local' keyword when declaring a local variable"))
1308                 return false;
1309         }
1310         if (!parser_variable(parser, block))
1311             return false;
1312         *out = NULL;
1313         return true;
1314     }
1315     else if (parser->tok == TOKEN_KEYWORD)
1316     {
1317         if (!strcmp(parser_tokval(parser), "local"))
1318         {
1319             if (!block) {
1320                 parseerror(parser, "cannot declare a local variable here");
1321                 return false;
1322             }
1323             if (!parser_next(parser)) {
1324                 parseerror(parser, "expected variable declaration");
1325                 return false;
1326             }
1327             if (!parser_variable(parser, block))
1328                 return false;
1329             *out = NULL;
1330             return true;
1331         }
1332         else if (!strcmp(parser_tokval(parser), "return"))
1333         {
1334             ast_expression *exp = NULL;
1335             ast_return     *ret = NULL;
1336             ast_value      *expected = parser->function->vtype;
1337
1338             if (!parser_next(parser)) {
1339                 parseerror(parser, "expected return expression");
1340                 return false;
1341             }
1342
1343             if (parser->tok != ';') {
1344                 exp = parser_expression(parser);
1345                 if (!exp)
1346                     return false;
1347
1348                 if (exp->expression.vtype != expected->expression.next->expression.vtype) {
1349                     parseerror(parser, "return with invalid expression");
1350                 }
1351
1352                 ret = ast_return_new(exp->expression.node.context, exp);
1353                 if (!ret) {
1354                     ast_delete(exp);
1355                     return false;
1356                 }
1357
1358                 *out = (ast_expression*)ret;
1359             } else if (!parser_next(parser)) {
1360                 parseerror(parser, "expected semicolon");
1361                 if (expected->expression.next->expression.vtype != TYPE_VOID) {
1362                     parseerror(parser, "return without value");
1363                 }
1364             }
1365             return true;
1366         }
1367         else if (!strcmp(parser_tokval(parser), "if"))
1368         {
1369             return parser_parse_if(parser, block, out);
1370         }
1371         else if (!strcmp(parser_tokval(parser), "while"))
1372         {
1373             return parser_parse_while(parser, block, out);
1374         }
1375         else if (!strcmp(parser_tokval(parser), "do"))
1376         {
1377             return parser_parse_dowhile(parser, block, out);
1378         }
1379         else if (!strcmp(parser_tokval(parser), "for"))
1380         {
1381             if (opts_standard == COMPILER_QCC) {
1382                 if (parsewarning(parser, WARN_EXTENSIONS, "for loops are not recognized in the original Quake C standard, to enable try an alternate standard --std=?"))
1383                     return false;
1384             }
1385             return parser_parse_for(parser, block, out);
1386         }
1387         parseerror(parser, "Unexpected keyword");
1388         return false;
1389     }
1390     else if (parser->tok == '{')
1391     {
1392         ast_block *inner;
1393         inner = parser_parse_block(parser);
1394         if (!inner)
1395             return false;
1396         *out = (ast_expression*)inner;
1397         return true;
1398     }
1399     else
1400     {
1401         ast_expression *exp = parser_expression(parser);
1402         if (!exp)
1403             return false;
1404         *out = exp;
1405         return true;
1406     }
1407 }
1408
1409 static void parser_pop_local(parser_t *parser)
1410 {
1411     parser->locals_count--;
1412     mem_d(parser->locals[parser->locals_count].name);
1413 }
1414
1415 static ast_block* parser_parse_block(parser_t *parser)
1416 {
1417     size_t oldblocklocal;
1418     ast_block *block = NULL;
1419
1420     oldblocklocal = parser->blocklocal;
1421     parser->blocklocal = parser->locals_count;
1422
1423     if (!parser_next(parser)) { /* skip the '{' */
1424         parseerror(parser, "expected function body");
1425         goto cleanup;
1426     }
1427
1428     block = ast_block_new(parser_ctx(parser));
1429
1430     while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
1431     {
1432         ast_expression *expr;
1433         if (parser->tok == '}')
1434             break;
1435
1436         if (!parser_parse_statement(parser, block, &expr)) {
1437             ast_block_delete(block);
1438             block = NULL;
1439             goto cleanup;
1440         }
1441         if (!expr)
1442             continue;
1443         if (!ast_block_exprs_add(block, expr)) {
1444             ast_delete(expr);
1445             ast_block_delete(block);
1446             block = NULL;
1447             goto cleanup;
1448         }
1449     }
1450
1451     if (parser->tok != '}') {
1452         ast_block_delete(block);
1453         block = NULL;
1454     } else {
1455         (void)parser_next(parser);
1456     }
1457
1458 cleanup:
1459     while (parser->locals_count > parser->blocklocal)
1460         parser_pop_local(parser);
1461     parser->blocklocal = oldblocklocal;
1462     /* unroll the local vector */
1463     return block;
1464 }
1465
1466 static ast_expression* parser_parse_statement_or_block(parser_t *parser)
1467 {
1468     ast_expression *expr;
1469     if (parser->tok == '{')
1470         return (ast_expression*)parser_parse_block(parser);
1471     if (!parser_parse_statement(parser, NULL, &expr))
1472         return NULL;
1473     return expr;
1474 }
1475
1476 static bool parser_variable(parser_t *parser, ast_block *localblock)
1477 {
1478     bool          isfunc = false;
1479     ast_function *func = NULL;
1480     lex_ctx       ctx;
1481     ast_value    *var;
1482     varentry_t    varent;
1483     ast_expression *olddecl;
1484
1485     int basetype = parser_token(parser)->constval.t;
1486
1487     while (true)
1488     {
1489         if (!parser_next(parser)) { /* skip basetype or comma */
1490             parseerror(parser, "expected variable declaration");
1491             return false;
1492         }
1493
1494         olddecl = NULL;
1495         isfunc  = false;
1496         func    = NULL;
1497         ctx = parser_ctx(parser);
1498         var = parser_parse_type(parser, basetype, &isfunc);
1499
1500         if (!var)
1501             return false;
1502
1503         if (parser->tok != TOKEN_IDENT) {
1504             parseerror(parser, "expected variable name\n");
1505             return false;
1506         }
1507
1508         if (!isfunc) {
1509             if (!localblock && (olddecl = parser_find_global(parser, parser_tokval(parser)))) {
1510                 ast_value_delete(var);
1511                 parseerror(parser, "global %s already declared here: %s:%i\n",
1512                            parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1513                 return false;
1514             }
1515
1516             if (localblock && parser_find_local(parser, parser_tokval(parser), parser->blocklocal)) {
1517                 ast_value_delete(var);
1518                 parseerror(parser, "local %s already declared here: %s:%i\n",
1519                            parser_tokval(parser), ast_ctx(olddecl).file, (int)ast_ctx(olddecl).line);
1520                 return false;
1521             }
1522         }
1523
1524         if (!ast_value_set_name(var, parser_tokval(parser))) {
1525             parseerror(parser, "failed to set variable name\n");
1526             ast_value_delete(var);
1527             return false;
1528         }
1529
1530         if (isfunc) {
1531             /* a function was defined */
1532             ast_value *fval;
1533             ast_value *proto = NULL;
1534
1535             if (!localblock)
1536                 olddecl = parser_find_global(parser, parser_tokval(parser));
1537             else
1538                 olddecl = parser_find_local(parser, parser_tokval(parser), parser->blocklocal);
1539
1540             if (olddecl) {
1541                 /* we had a prototype */
1542                 if (!ast_istype(olddecl, ast_value)) {
1543                     /* theoretically not possible you think?
1544                      * well:
1545                      * vector v;
1546                      * void() v_x = {}
1547                      * got it?
1548                      */
1549                     parseerror(parser, "cannot declare a function with the same name as a vector's member: %s",
1550                                parser_tokval(parser));
1551                     ast_value_delete(var);
1552                     return false;
1553                 }
1554
1555                 proto = (ast_value*)olddecl;
1556             }
1557
1558             /* turn var into a value of TYPE_FUNCTION, with the old var
1559              * as return type
1560              */
1561             fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
1562             func = ast_function_new(ctx, var->name, fval);
1563             if (!fval || !func) {
1564                 ast_value_delete(var);
1565                 if (fval) ast_value_delete(fval);
1566                 if (func) ast_function_delete(func);
1567                 return false;
1568             }
1569
1570             fval->expression.next = (ast_expression*)var;
1571             MEM_VECTOR_MOVE(&var->expression, params, &fval->expression, params);
1572
1573             /* we compare the type late here, but it's easier than
1574              * messing with the parameter-vector etc. earlier
1575              */
1576             if (proto) {
1577                 if (!ast_compare_type((ast_expression*)proto, (ast_expression*)fval)) {
1578                     parseerror(parser, "prototype declared at %s:%i had a different type",
1579                                ast_ctx(proto).file, ast_ctx(proto).line);
1580                     ast_function_delete(func);
1581                     ast_value_delete(fval);
1582                     return false;
1583                 }
1584                 ast_function_delete(func);
1585                 ast_value_delete(fval);
1586                 var = proto;
1587                 func = var->constval.vfunc;
1588             }
1589             else
1590             {
1591                 if (!parser_t_functions_add(parser, func)) {
1592                     ast_function_delete(func);
1593                     ast_value_delete(fval);
1594                     return false;
1595                 }
1596             }
1597
1598             var = fval;
1599         }
1600
1601         varent.name = util_strdup(var->name);
1602         varent.var = (ast_expression*)var;
1603         if (var->expression.vtype == TYPE_VECTOR)
1604         {
1605             size_t len = strlen(varent.name);
1606             varentry_t vx, vy, vz;
1607             vx.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 0);
1608             vy.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 1);
1609             vz.var = (ast_expression*)ast_member_new(var->expression.node.context, (ast_expression*)var, 2);
1610             vx.name = mem_a(len+3);
1611             vy.name = mem_a(len+3);
1612             vz.name = mem_a(len+3);
1613             strcpy(vx.name, varent.name);
1614             strcpy(vy.name, varent.name);
1615             strcpy(vz.name, varent.name);
1616             vx.name[len] = vy.name[len] = vz.name[len] = '_';
1617             vx.name[len+1] = 'x';
1618             vy.name[len+1] = 'y';
1619             vz.name[len+1] = 'z';
1620             vx.name[len+2] = vy.name[len+2] = vz.name[len+2] = 0;
1621
1622             if (!localblock) {
1623                 (void)!parser_t_globals_add(parser, varent);
1624                 (void)!parser_t_globals_add(parser, vx);
1625                 (void)!parser_t_globals_add(parser, vy);
1626                 (void)!parser_t_globals_add(parser, vz);
1627             } else {
1628                 (void)!parser_t_locals_add(parser, varent);
1629                 (void)!parser_t_locals_add(parser, vx);
1630                 (void)!parser_t_locals_add(parser, vy);
1631                 (void)!parser_t_locals_add(parser, vz);
1632             }
1633         }
1634         else
1635         {
1636             if ( (!localblock && !parser_t_globals_add(parser, varent)) ||
1637                  ( localblock && !parser_t_locals_add(parser, varent)) )
1638             {
1639                 ast_value_delete(var);
1640                 return false;
1641             }
1642         }
1643         if (localblock && !ast_block_locals_add(localblock, var))
1644         {
1645             parser_pop_local(parser);
1646             ast_value_delete(var);
1647             return false;
1648         }
1649
1650         if (!parser_next(parser)) {
1651             ast_value_delete(var);
1652             return false;
1653         }
1654
1655         if (parser->tok == ';') {
1656             if (!parser_next(parser))
1657                 return parser->tok == TOKEN_EOF;
1658             return true;
1659         }
1660
1661         if (parser->tok == ',') {
1662             /* another var */
1663             continue;
1664         }
1665
1666         if (parser->tok != '=') {
1667             parseerror(parser, "expected '=' or ';'");
1668             return false;
1669         }
1670
1671         if (!parser_next(parser))
1672             return false;
1673
1674         if (parser->tok == '#') {
1675             if (localblock) {
1676                 parseerror(parser, "cannot declare builtins within functions");
1677                 return false;
1678             }
1679             if (!isfunc || !func) {
1680                 parseerror(parser, "unexpected builtin number, '%s' is not a function", var->name);
1681                 return false;
1682             }
1683             if (!parser_next(parser)) {
1684                 parseerror(parser, "expected builtin number");
1685                 return false;
1686             }
1687             if (parser->tok != TOKEN_INTCONST) {
1688                 parseerror(parser, "builtin number must be an integer constant");
1689                 return false;
1690             }
1691             if (parser_token(parser)->constval.i <= 0) {
1692                 parseerror(parser, "builtin number must be positive integer greater than zero");
1693                 return false;
1694             }
1695
1696             func->builtin = -parser_token(parser)->constval.i;
1697         } else if (parser->tok == '{') {
1698             /* function body */
1699             ast_block *block;
1700             ast_function *old = parser->function;
1701
1702             if (localblock) {
1703                 parseerror(parser, "cannot declare functions within functions");
1704                 return false;
1705             }
1706
1707             parser->function = func;
1708             block = parser_parse_block(parser);
1709             parser->function = old;
1710
1711             if (!block)
1712                 return false;
1713
1714             if (!ast_function_blocks_add(func, block)) {
1715                 ast_block_delete(block);
1716                 return false;
1717             }
1718
1719             if (parser->tok == ';')
1720                 return parser_next(parser) || parser->tok == TOKEN_EOF;
1721             else if (opts_standard == COMPILER_QCC)
1722                 parseerror(parser, "missing semicolon after function body (mandatory with -std=qcc)");
1723             return true;
1724         } else {
1725             parseerror(parser, "TODO, const assignment");
1726         }
1727
1728         if (!parser_next(parser))
1729             return false;
1730
1731         if (parser->tok == ',') {
1732             /* another */
1733             continue;
1734         }
1735
1736         if (parser->tok != ';') {
1737             parseerror(parser, "expected semicolon");
1738             return false;
1739         }
1740
1741         (void)parser_next(parser);
1742
1743         return true;
1744     }
1745 }
1746
1747 static bool parser_do(parser_t *parser)
1748 {
1749     if (parser->tok == TOKEN_TYPENAME)
1750     {
1751         return parser_variable(parser, NULL);
1752     }
1753     else if (parser->tok == TOKEN_KEYWORD)
1754     {
1755         /* handle 'var' and 'const' */
1756         return false;
1757     }
1758     else if (parser->tok == '.')
1759     {
1760         ast_value *var;
1761         ast_value *fld;
1762         bool       isfunc = false;
1763         int        basetype;
1764         lex_ctx    ctx = parser_ctx(parser);
1765         varentry_t varent;
1766
1767         /* entity-member declaration */
1768         if (!parser_next(parser) || parser->tok != TOKEN_TYPENAME) {
1769             parseerror(parser, "expected member variable definition");
1770             return false;
1771         }
1772
1773         /* remember the base/return type */
1774         basetype = parser_token(parser)->constval.t;
1775
1776         /* parse into the declaration */
1777         if (!parser_next(parser)) {
1778             parseerror(parser, "expected field def");
1779             return false;
1780         }
1781
1782         /* parse the field type fully */
1783         var = parser_parse_type(parser, basetype, &isfunc);
1784         if (!var)
1785             return false;
1786
1787         /* now the field name */
1788         if (parser->tok != TOKEN_IDENT) {
1789             parseerror(parser, "expected field name");
1790             ast_delete(var);
1791             return false;
1792         }
1793
1794         /* check for an existing field
1795          * in original qc we also have to check for an existing
1796          * global named like the field
1797          */
1798         if (opts_standard == COMPILER_QCC) {
1799             if (parser_find_global(parser, parser_tokval(parser))) {
1800                 parseerror(parser, "cannot declare a field and a global of the same name with -std=qcc");
1801                 ast_delete(var);
1802                 return false;
1803             }
1804         }
1805         if (parser_find_field(parser, parser_tokval(parser))) {
1806             parseerror(parser, "field %s already exists", parser_tokval(parser));
1807             ast_delete(var);
1808             return false;
1809         }
1810
1811         /* if it was a function, turn it into a function */
1812         if (isfunc) {
1813             ast_value *fval;
1814             /* turn var into a value of TYPE_FUNCTION, with the old var
1815              * as return type
1816              */
1817             fval = ast_value_new(ctx, var->name, TYPE_FUNCTION);
1818             if (!fval) {
1819                 ast_value_delete(var);
1820                 ast_value_delete(fval);
1821                 return false;
1822             }
1823
1824             fval->expression.next = (ast_expression*)var;
1825             MEM_VECTOR_MOVE(&var->expression, params, &fval->expression, params);
1826
1827             var = fval;
1828         }
1829
1830         /* turn it into a field */
1831         fld = ast_value_new(ctx, parser_tokval(parser), TYPE_FIELD);
1832         fld->expression.next = (ast_expression*)var;
1833
1834         varent.var = (ast_expression*)fld;
1835         if (var->expression.vtype == TYPE_VECTOR)
1836         {
1837             /* create _x, _y and _z fields as well */
1838             parseerror(parser, "TODO: vector field members (_x,_y,_z)");
1839             ast_delete(fld);
1840             return false;
1841         }
1842
1843         varent.name = util_strdup(fld->name);
1844         (void)!parser_t_fields_add(parser, varent);
1845
1846         /* end with a semicolon */
1847         if (!parser_next(parser) || parser->tok != ';') {
1848             parseerror(parser, "semicolon expected");
1849             return false;
1850         }
1851
1852         /* skip the semicolon */
1853         if (!parser_next(parser))
1854             return parser->tok == TOKEN_EOF;
1855
1856         return true;
1857     }
1858     else
1859     {
1860         parseerror(parser, "unexpected token: %s", parser->lex->tok->value);
1861         return false;
1862     }
1863     return true;
1864 }
1865
1866 static parser_t *parser;
1867
1868 bool parser_init()
1869 {
1870     parser = (parser_t*)mem_a(sizeof(parser_t));
1871     if (!parser)
1872         return false;
1873
1874     memset(parser, 0, sizeof(parser));
1875
1876     MEM_VECTOR_INIT(parser, globals);
1877     MEM_VECTOR_INIT(parser, locals);
1878     return true;
1879 }
1880
1881 bool parser_compile(const char *filename)
1882 {
1883     parser->lex = lex_open(filename);
1884     if (!parser->lex) {
1885         printf("failed to open file \"%s\"\n", filename);
1886         return false;
1887     }
1888
1889     /* initial lexer/parser state */
1890     parser->lex->flags.noops = true;
1891
1892     if (parser_next(parser))
1893     {
1894         while (parser->tok != TOKEN_EOF && parser->tok < TOKEN_ERROR)
1895         {
1896             if (!parser_do(parser)) {
1897                 if (parser->tok == TOKEN_EOF)
1898                     parseerror(parser, "unexpected eof");
1899                 else if (!parser->errors)
1900                     parseerror(parser, "parse error\n");
1901                 lex_close(parser->lex);
1902                 mem_d(parser);
1903                 return false;
1904             }
1905         }
1906     }
1907
1908     lex_close(parser->lex);
1909
1910     return !parser->errors;
1911 }
1912
1913 void parser_cleanup()
1914 {
1915     size_t i;
1916     for (i = 0; i < parser->functions_count; ++i) {
1917         ast_delete(parser->functions[i]);
1918     }
1919     for (i = 0; i < parser->imm_vector_count; ++i) {
1920         ast_delete(parser->imm_vector[i]);
1921     }
1922     for (i = 0; i < parser->imm_string_count; ++i) {
1923         ast_delete(parser->imm_string[i]);
1924     }
1925     for (i = 0; i < parser->imm_float_count; ++i) {
1926         ast_delete(parser->imm_float[i]);
1927     }
1928     for (i = 0; i < parser->globals_count; ++i) {
1929         ast_delete(parser->globals[i].var);
1930         mem_d(parser->globals[i].name);
1931     }
1932     MEM_VECTOR_CLEAR(parser, globals);
1933
1934     mem_d(parser);
1935 }
1936
1937 bool parser_finish(const char *output)
1938 {
1939     size_t i;
1940     ir_builder *ir;
1941
1942     if (!parser->errors)
1943     {
1944         ir = ir_builder_new("gmqcc_out");
1945         if (!ir) {
1946             printf("failed to allocate builder\n");
1947             return false;
1948         }
1949
1950         for (i = 0; i < parser->imm_float_count; ++i) {
1951             if (!ast_global_codegen(parser->imm_float[i], ir)) {
1952                 printf("failed to generate global %s\n", parser->imm_float[i]->name);
1953                 ir_builder_delete(ir);
1954                 return false;
1955             }
1956         }
1957         for (i = 0; i < parser->imm_string_count; ++i) {
1958             if (!ast_global_codegen(parser->imm_string[i], ir)) {
1959                 printf("failed to generate global %s\n", parser->imm_string[i]->name);
1960                 ir_builder_delete(ir);
1961                 return false;
1962             }
1963         }
1964         for (i = 0; i < parser->imm_vector_count; ++i) {
1965             if (!ast_global_codegen(parser->imm_vector[i], ir)) {
1966                 printf("failed to generate global %s\n", parser->imm_vector[i]->name);
1967                 ir_builder_delete(ir);
1968                 return false;
1969             }
1970         }
1971         for (i = 0; i < parser->fields_count; ++i) {
1972             ast_value *field;
1973             bool isconst;
1974             if (!ast_istype(parser->fields[i].var, ast_value))
1975                 continue;
1976             field = (ast_value*)parser->fields[i].var;
1977             isconst = field->isconst;
1978             field->isconst = false;
1979             if (!ast_global_codegen((ast_value*)field, ir)) {
1980                 printf("failed to generate field %s\n", field->name);
1981                 ir_builder_delete(ir);
1982                 return false;
1983             }
1984             if (isconst) {
1985                 ir_value *ifld;
1986                 ast_expression *subtype;
1987                 field->isconst = true;
1988                 subtype = field->expression.next;
1989                 ifld = ir_builder_create_field(ir, field->name, subtype->expression.vtype);
1990                 if (subtype->expression.vtype == TYPE_FIELD)
1991                     ifld->fieldtype = subtype->expression.next->expression.vtype;
1992                 else if (subtype->expression.vtype == TYPE_FUNCTION)
1993                     ifld->outtype = subtype->expression.next->expression.vtype;
1994                 (void)!ir_value_set_field(field->ir_v, ifld);
1995             }
1996         }
1997         for (i = 0; i < parser->globals_count; ++i) {
1998             if (!ast_istype(parser->globals[i].var, ast_value))
1999                 continue;
2000             if (!ast_global_codegen((ast_value*)(parser->globals[i].var), ir)) {
2001                 printf("failed to generate global %s\n", parser->globals[i].name);
2002                 ir_builder_delete(ir);
2003                 return false;
2004             }
2005         }
2006         for (i = 0; i < parser->functions_count; ++i) {
2007             if (!ast_function_codegen(parser->functions[i], ir)) {
2008                 printf("failed to generate function %s\n", parser->functions[i]->name);
2009                 ir_builder_delete(ir);
2010                 return false;
2011             }
2012             if (!ir_function_finalize(parser->functions[i]->ir_func)) {
2013                 printf("failed to finalize function %s\n", parser->functions[i]->name);
2014                 ir_builder_delete(ir);
2015                 return false;
2016             }
2017         }
2018
2019         if (opts_dump)
2020             ir_builder_dump(ir, printf);
2021
2022         if (!ir_builder_generate(ir, output)) {
2023             printf("*** failed to generate output file\n");
2024             ir_builder_delete(ir);
2025             return false;
2026         }
2027
2028         ir_builder_delete(ir);
2029         return true;
2030     }
2031
2032     printf("*** there were compile errors\n");
2033     return false;
2034 }