gcc/stmt.c

   1 /* Expands front end tree to back end RTL for GCC
   2    Copyright (C) 1987, 1988, 1989, 1992, 1993, 1994, 1995, 1996, 1997,
   3    1998, 1999, 2000, 2001, 2002, 2003, 2004 Free Software Foundation, Inc.
   4
   5 This file is part of GCC.
   6
   7 GCC is free software; you can redistribute it and/or modify it under
   8 the terms of the GNU General Public License as published by the Free
   9 Software Foundation; either version 2, or (at your option) any later
  10 version.
  11
  12 GCC is distributed in the hope that it will be useful, but WITHOUT ANY
  13 WARRANTY; without even the implied warranty of MERCHANTABILITY or
  14 FITNESS FOR A PARTICULAR PURPOSE.  See the GNU General Public License
  15 for more details.
  16
  17 You should have received a copy of the GNU General Public License
  18 along with GCC; see the file COPYING.  If not, write to the Free
  19 Software Foundation, 59 Temple Place - Suite 330, Boston, MA
  20 02111-1307, USA.  */
  21
  22 /* This file handles the generation of rtl code from tree structure
  23    above the level of expressions, using subroutines in exp*.c and emit-rtl.c.
  24    The functions whose names start with `expand_' are called by the
  25    expander to generate RTL instructions for various kinds of constructs.  */
  26
  27 #include "config.h"
  28 #include "system.h"
  29 #include "coretypes.h"
  30 #include "tm.h"
  31
  32 #include "rtl.h"
  33 #include "tree.h"
  34 #include "tm_p.h"
  35 #include "flags.h"
  36 #include "except.h"
  37 #include "function.h"
  38 #include "insn-config.h"
  39 #include "expr.h"
  40 #include "libfuncs.h"
  41 #include "hard-reg-set.h"
  42 #include "loop.h"
  43 #include "recog.h"
  44 #include "machmode.h"
  45 #include "toplev.h"
  46 #include "output.h"
  47 #include "ggc.h"
  48 #include "langhooks.h"
  49 #include "predict.h"
  50 #include "optabs.h"
  51 #include "target.h"
  52 #include "regs.h"
  53 \f
  54 /* Functions and data structures for expanding case statements.  */
  55
  56 /* Case label structure, used to hold info on labels within case
  57    statements.  We handle "range" labels; for a single-value label
  58    as in C, the high and low limits are the same.
  59
  60    We start with a vector of case nodes sorted in ascending order, and
  61    the default label as the last element in the vector.  Before expanding
  62    to RTL, we transform this vector into a list linked via the RIGHT
  63    fields in the case_node struct.  Nodes with higher case values are
  64    later in the list.
  65
  66    Switch statements can be output in three forms.  A branch table is
  67    used if there are more than a few labels and the labels are dense
  68    within the range between the smallest and largest case value.  If a
  69    branch table is used, no further manipulations are done with the case
  70    node chain.
  71
  72    The alternative to the use of a branch table is to generate a series
  73    of compare and jump insns.  When that is done, we use the LEFT, RIGHT,
  74    and PARENT fields to hold a binary tree.  Initially the tree is
  75    totally unbalanced, with everything on the right.  We balance the tree
  76    with nodes on the left having lower case values than the parent
  77    and nodes on the right having higher values.  We then output the tree
  78    in order.
  79
  80    For very small, suitable switch statements, we can generate a series
  81    of simple bit test and branches instead.  */
  82
  83 struct case_node GTY(())
  84 {
  85   struct case_node      *left;  /* Left son in binary tree */
  86   struct case_node      *right; /* Right son in binary tree; also node chain */
  87   struct case_node      *parent; /* Parent of node in binary tree */
  88   tree                  low;    /* Lowest index value for this label */
  89   tree                  high;   /* Highest index value for this label */
  90   tree                  code_label; /* Label to jump to when node matches */
  91 };
  92
  93 typedef struct case_node case_node;
  94 typedef struct case_node *case_node_ptr;
  95
  96 /* These are used by estimate_case_costs and balance_case_nodes.  */
  97
  98 /* This must be a signed type, and non-ANSI compilers lack signed char.  */
  99 static short cost_table_[129];
 100 static int use_cost_table;
 101 static int cost_table_initialized;
 102
 103 /* Special care is needed because we allow -1, but TREE_INT_CST_LOW
 104    is unsigned.  */
 105 #define COST_TABLE(I)  cost_table_[(unsigned HOST_WIDE_INT) ((I) + 1)]
 106 \f
 107 static int n_occurrences (int, const char *);
 108 static bool decl_conflicts_with_clobbers_p (tree, const HARD_REG_SET);
 109 static void expand_nl_goto_receiver (void);
 110 static bool check_operand_nalternatives (tree, tree);
 111 static bool check_unique_operand_names (tree, tree);
 112 static char *resolve_operand_name_1 (char *, tree, tree);
 113 static void expand_null_return_1 (void);
 114 static rtx shift_return_value (rtx);
 115 static void expand_value_return (rtx);
 116 static void do_jump_if_equal (rtx, rtx, rtx, int);
 117 static int estimate_case_costs (case_node_ptr);
 118 static bool lshift_cheap_p (void);
 119 static int case_bit_test_cmp (const void *, const void *);
 120 static void emit_case_bit_tests (tree, tree, tree, tree, case_node_ptr, rtx);
 121 static void balance_case_nodes (case_node_ptr *, case_node_ptr);
 122 static int node_has_low_bound (case_node_ptr, tree);
 123 static int node_has_high_bound (case_node_ptr, tree);
 124 static int node_is_bounded (case_node_ptr, tree);
 125 static void emit_case_nodes (rtx, case_node_ptr, rtx, tree);
 126 static struct case_node *add_case_node (struct case_node *, tree, tree, tree);
 127
 128 \f
 129 /* Return the rtx-label that corresponds to a LABEL_DECL,
 130    creating it if necessary.  */
 131
 132 rtx
 133 label_rtx (tree label)
 134 {
 135   if (TREE_CODE (label) != LABEL_DECL)
 136     abort ();
 137
 138   if (!DECL_RTL_SET_P (label))
 139     {
 140       rtx r = gen_label_rtx ();
 141       SET_DECL_RTL (label, r);
 142       if (FORCED_LABEL (label) || DECL_NONLOCAL (label))
 143         LABEL_PRESERVE_P (r) = 1;
 144     }
 145
 146   return DECL_RTL (label);
 147 }
 148
 149 /* As above, but also put it on the forced-reference list of the
 150    function that contains it.  */
 151 rtx
 152 force_label_rtx (tree label)
 153 {
 154   rtx ref = label_rtx (label);
 155   tree function = decl_function_context (label);
 156   struct function *p;
 157
 158   if (!function)
 159     abort ();
 160
 161   if (function != current_function_decl)
 162     p = find_function_data (function);
 163   else
 164     p = cfun;
 165
 166   p->expr->x_forced_labels = gen_rtx_EXPR_LIST (VOIDmode, ref,
 167                                                 p->expr->x_forced_labels);
 168   return ref;
 169 }
 170
 171 /* Add an unconditional jump to LABEL as the next sequential instruction.  */
 172
 173 void
 174 emit_jump (rtx label)
 175 {
 176   do_pending_stack_adjust ();
 177   emit_jump_insn (gen_jump (label));
 178   emit_barrier ();
 179 }
 180
 181 /* Emit code to jump to the address
 182    specified by the pointer expression EXP.  */
 183
 184 void
 185 expand_computed_goto (tree exp)
 186 {
 187   rtx x = expand_expr (exp, NULL_RTX, VOIDmode, 0);
 188
 189   x = convert_memory_address (Pmode, x);
 190
 191   do_pending_stack_adjust ();
 192   emit_indirect_jump (x);
 193 }
 194 \f
 195 /* Handle goto statements and the labels that they can go to.  */
 196
 197 /* Specify the location in the RTL code of a label LABEL,
 198    which is a LABEL_DECL tree node.
 199
 200    This is used for the kind of label that the user can jump to with a
 201    goto statement, and for alternatives of a switch or case statement.
 202    RTL labels generated for loops and conditionals don't go through here;
 203    they are generated directly at the RTL level, by other functions below.
 204
 205    Note that this has nothing to do with defining label *names*.
 206    Languages vary in how they do that and what that even means.  */
 207
 208 void
 209 expand_label (tree label)
 210 {
 211   rtx label_r = label_rtx (label);
 212
 213   do_pending_stack_adjust ();
 214   emit_label (label_r);
 215   if (DECL_NAME (label))
 216     LABEL_NAME (DECL_RTL (label)) = IDENTIFIER_POINTER (DECL_NAME (label));
 217
 218   if (DECL_NONLOCAL (label))
 219     {
 220       expand_nl_goto_receiver ();
 221       nonlocal_goto_handler_labels
 222         = gen_rtx_EXPR_LIST (VOIDmode, label_r,
 223                              nonlocal_goto_handler_labels);
 224     }
 225
 226   if (FORCED_LABEL (label))
 227     forced_labels = gen_rtx_EXPR_LIST (VOIDmode, label_r, forced_labels);
 228
 229   if (DECL_NONLOCAL (label) || FORCED_LABEL (label))
 230     maybe_set_first_label_num (label_r);
 231 }
 232
 233 /* Generate RTL code for a `goto' statement with target label LABEL.
 234    LABEL should be a LABEL_DECL tree node that was or will later be
 235    defined with `expand_label'.  */
 236
 237 void
 238 expand_goto (tree label)
 239 {
 240 #ifdef ENABLE_CHECKING
 241   /* Check for a nonlocal goto to a containing function.  Should have
 242      gotten translated to __builtin_nonlocal_goto.  */
 243   tree context = decl_function_context (label);
 244   if (context != 0 && context != current_function_decl)
 245     abort ();
 246 #endif
 247
 248   emit_jump (label_rtx (label));
 249 }
 250 \f
 251 /* Return the number of times character C occurs in string S.  */
 252 static int
 253 n_occurrences (int c, const char *s)
 254 {
 255   int n = 0;
 256   while (*s)
 257     n += (*s++ == c);
 258   return n;
 259 }
 260 \f
 261 /* Generate RTL for an asm statement (explicit assembler code).
 262    STRING is a STRING_CST node containing the assembler code text,
 263    or an ADDR_EXPR containing a STRING_CST.  VOL nonzero means the
 264    insn is volatile; don't optimize it.  */
 265
 266 void
 267 expand_asm (tree string, int vol)
 268 {
 269   rtx body;
 270
 271   if (TREE_CODE (string) == ADDR_EXPR)
 272     string = TREE_OPERAND (string, 0);
 273
 274   body = gen_rtx_ASM_INPUT (VOIDmode, TREE_STRING_POINTER (string));
 275
 276   MEM_VOLATILE_P (body) = vol;
 277
 278   emit_insn (body);
 279 }
 280
 281 /* Parse the output constraint pointed to by *CONSTRAINT_P.  It is the
 282    OPERAND_NUMth output operand, indexed from zero.  There are NINPUTS
 283    inputs and NOUTPUTS outputs to this extended-asm.  Upon return,
 284    *ALLOWS_MEM will be TRUE iff the constraint allows the use of a
 285    memory operand.  Similarly, *ALLOWS_REG will be TRUE iff the
 286    constraint allows the use of a register operand.  And, *IS_INOUT
 287    will be true if the operand is read-write, i.e., if it is used as
 288    an input as well as an output.  If *CONSTRAINT_P is not in
 289    canonical form, it will be made canonical.  (Note that `+' will be
 290    replaced with `=' as part of this process.)
 291
 292    Returns TRUE if all went well; FALSE if an error occurred.  */
 293
 294 bool
 295 parse_output_constraint (const char **constraint_p, int operand_num,
 296                          int ninputs, int noutputs, bool *allows_mem,
 297                          bool *allows_reg, bool *is_inout)
 298 {
 299   const char *constraint = *constraint_p;
 300   const char *p;
 301
 302   /* Assume the constraint doesn't allow the use of either a register
 303      or memory.  */
 304   *allows_mem = false;
 305   *allows_reg = false;
 306
 307   /* Allow the `=' or `+' to not be at the beginning of the string,
 308      since it wasn't explicitly documented that way, and there is a
 309      large body of code that puts it last.  Swap the character to
 310      the front, so as not to uglify any place else.  */
 311   p = strchr (constraint, '=');
 312   if (!p)
 313     p = strchr (constraint, '+');
 314
 315   /* If the string doesn't contain an `=', issue an error
 316      message.  */
 317   if (!p)
 318     {
 319       error ("output operand constraint lacks `='");
 320       return false;
 321     }
 322
 323   /* If the constraint begins with `+', then the operand is both read
 324      from and written to.  */
 325   *is_inout = (*p == '+');
 326
 327   /* Canonicalize the output constraint so that it begins with `='.  */
 328   if (p != constraint || is_inout)
 329     {
 330       char *buf;
 331       size_t c_len = strlen (constraint);
 332
 333       if (p != constraint)
 334         warning ("output constraint `%c' for operand %d is not at the beginning",
 335                  *p, operand_num);
 336
 337       /* Make a copy of the constraint.  */
 338       buf = alloca (c_len + 1);
 339       strcpy (buf, constraint);
 340       /* Swap the first character and the `=' or `+'.  */
 341       buf[p - constraint] = buf[0];
 342       /* Make sure the first character is an `='.  (Until we do this,
 343          it might be a `+'.)  */
 344       buf[0] = '=';
 345       /* Replace the constraint with the canonicalized string.  */
 346       *constraint_p = ggc_alloc_string (buf, c_len);
 347       constraint = *constraint_p;
 348     }
 349
 350   /* Loop through the constraint string.  */
 351   for (p = constraint + 1; *p; p += CONSTRAINT_LEN (*p, p))
 352     switch (*p)
 353       {
 354       case '+':
 355       case '=':
 356         error ("operand constraint contains incorrectly positioned '+' or '='");
 357         return false;
 358
 359       case '%':
 360         if (operand_num + 1 == ninputs + noutputs)
 361           {
 362             error ("`%%' constraint used with last operand");
 363             return false;
 364           }
 365         break;
 366
 367       case 'V':  case 'm':  case 'o':
 368         *allows_mem = true;
 369         break;
 370
 371       case '?':  case '!':  case '*':  case '&':  case '#':
 372       case 'E':  case 'F':  case 'G':  case 'H':
 373       case 's':  case 'i':  case 'n':
 374       case 'I':  case 'J':  case 'K':  case 'L':  case 'M':
 375       case 'N':  case 'O':  case 'P':  case ',':
 376         break;
 377
 378       case '0':  case '1':  case '2':  case '3':  case '4':
 379       case '5':  case '6':  case '7':  case '8':  case '9':
 380       case '[':
 381         error ("matching constraint not valid in output operand");
 382         return false;
 383
 384       case '<':  case '>':
 385         /* ??? Before flow, auto inc/dec insns are not supposed to exist,
 386            excepting those that expand_call created.  So match memory
 387            and hope.  */
 388         *allows_mem = true;
 389         break;
 390
 391       case 'g':  case 'X':
 392         *allows_reg = true;
 393         *allows_mem = true;
 394         break;
 395
 396       case 'p': case 'r':
 397         *allows_reg = true;
 398         break;
 399
 400       default:
 401         if (!ISALPHA (*p))
 402           break;
 403         if (REG_CLASS_FROM_CONSTRAINT (*p, p) != NO_REGS)
 404           *allows_reg = true;
 405 #ifdef EXTRA_CONSTRAINT_STR
 406         else if (EXTRA_ADDRESS_CONSTRAINT (*p, p))
 407           *allows_reg = true;
 408         else if (EXTRA_MEMORY_CONSTRAINT (*p, p))
 409           *allows_mem = true;
 410         else
 411           {
 412             /* Otherwise we can't assume anything about the nature of
 413                the constraint except that it isn't purely registers.
 414                Treat it like "g" and hope for the best.  */
 415             *allows_reg = true;
 416             *allows_mem = true;
 417           }
 418 #endif
 419         break;
 420       }
 421
 422   return true;
 423 }
 424
 425 /* Similar, but for input constraints.  */
 426
 427 bool
 428 parse_input_constraint (const char **constraint_p, int input_num,
 429                         int ninputs, int noutputs, int ninout,
 430                         const char * const * constraints,
 431                         bool *allows_mem, bool *allows_reg)
 432 {
 433   const char *constraint = *constraint_p;
 434   const char *orig_constraint = constraint;
 435   size_t c_len = strlen (constraint);
 436   size_t j;
 437   bool saw_match = false;
 438
 439   /* Assume the constraint doesn't allow the use of either
 440      a register or memory.  */
 441   *allows_mem = false;
 442   *allows_reg = false;
 443
 444   /* Make sure constraint has neither `=', `+', nor '&'.  */
 445
 446   for (j = 0; j < c_len; j += CONSTRAINT_LEN (constraint[j], constraint+j))
 447     switch (constraint[j])
 448       {
 449       case '+':  case '=':  case '&':
 450         if (constraint == orig_constraint)
 451           {
 452             error ("input operand constraint contains `%c'", constraint[j]);
 453             return false;
 454           }
 455         break;
 456
 457       case '%':
 458         if (constraint == orig_constraint
 459             && input_num + 1 == ninputs - ninout)
 460           {
 461             error ("`%%' constraint used with last operand");
 462             return false;
 463           }
 464         break;
 465
 466       case 'V':  case 'm':  case 'o':
 467         *allows_mem = true;
 468         break;
 469
 470       case '<':  case '>':
 471       case '?':  case '!':  case '*':  case '#':
 472       case 'E':  case 'F':  case 'G':  case 'H':
 473       case 's':  case 'i':  case 'n':
 474       case 'I':  case 'J':  case 'K':  case 'L':  case 'M':
 475       case 'N':  case 'O':  case 'P':  case ',':
 476         break;
 477
 478         /* Whether or not a numeric constraint allows a register is
 479            decided by the matching constraint, and so there is no need
 480            to do anything special with them.  We must handle them in
 481            the default case, so that we don't unnecessarily force
 482            operands to memory.  */
 483       case '0':  case '1':  case '2':  case '3':  case '4':
 484       case '5':  case '6':  case '7':  case '8':  case '9':
 485         {
 486           char *end;
 487           unsigned long match;
 488
 489           saw_match = true;
 490
 491           match = strtoul (constraint + j, &end, 10);
 492           if (match >= (unsigned long) noutputs)
 493             {
 494               error ("matching constraint references invalid operand number");
 495               return false;
 496             }
 497
 498           /* Try and find the real constraint for this dup.  Only do this
 499              if the matching constraint is the only alternative.  */
 500           if (*end == '\0'
 501               && (j == 0 || (j == 1 && constraint[0] == '%')))
 502             {
 503               constraint = constraints[match];
 504               *constraint_p = constraint;
 505               c_len = strlen (constraint);
 506               j = 0;
 507               /* ??? At the end of the loop, we will skip the first part of
 508                  the matched constraint.  This assumes not only that the
 509                  other constraint is an output constraint, but also that
 510                  the '=' or '+' come first.  */
 511               break;
 512             }
 513           else
 514             j = end - constraint;
 515           /* Anticipate increment at end of loop.  */
 516           j--;
 517         }
 518         /* Fall through.  */
 519
 520       case 'p':  case 'r':
 521         *allows_reg = true;
 522         break;
 523
 524       case 'g':  case 'X':
 525         *allows_reg = true;
 526         *allows_mem = true;
 527         break;
 528
 529       default:
 530         if (! ISALPHA (constraint[j]))
 531           {
 532             error ("invalid punctuation `%c' in constraint", constraint[j]);
 533             return false;
 534           }
 535         if (REG_CLASS_FROM_CONSTRAINT (constraint[j], constraint + j)
 536             != NO_REGS)
 537           *allows_reg = true;
 538 #ifdef EXTRA_CONSTRAINT_STR
 539         else if (EXTRA_ADDRESS_CONSTRAINT (constraint[j], constraint + j))
 540           *allows_reg = true;
 541         else if (EXTRA_MEMORY_CONSTRAINT (constraint[j], constraint + j))
 542           *allows_mem = true;
 543         else
 544           {
 545             /* Otherwise we can't assume anything about the nature of
 546                the constraint except that it isn't purely registers.
 547                Treat it like "g" and hope for the best.  */
 548             *allows_reg = true;
 549             *allows_mem = true;
 550           }
 551 #endif
 552         break;
 553       }
 554
 555   if (saw_match && !*allows_reg)
 556     warning ("matching constraint does not allow a register");
 557
 558   return true;
 559 }
 560
 561 /* INPUT is one of the input operands from EXPR, an ASM_EXPR.  Returns true
 562    if it is an operand which must be passed in memory (i.e. an "m"
 563    constraint), false otherwise.  */
 564
 565 bool
 566 asm_op_is_mem_input (tree input, tree expr)
 567 {
 568   const char *constraint = TREE_STRING_POINTER (TREE_VALUE (TREE_PURPOSE (input)));
 569   tree outputs = ASM_OUTPUTS (expr);
 570   int noutputs = list_length (outputs);
 571   const char **constraints
 572     = (const char **) alloca ((noutputs) * sizeof (const char *));
 573   int i = 0;
 574   bool allows_mem, allows_reg;
 575   tree t;
 576
 577   /* Collect output constraints.  */
 578   for (t = outputs; t ; t = TREE_CHAIN (t), i++)
 579     constraints[i] = TREE_STRING_POINTER (TREE_VALUE (TREE_PURPOSE (t)));
 580
 581   /* We pass 0 for input_num, ninputs and ninout; they are only used for
 582      error checking which will be done at expand time.  */
 583   parse_input_constraint (&constraint, 0, 0, noutputs, 0, constraints,
 584                           &allows_mem, &allows_reg);
 585   return (!allows_reg && allows_mem);
 586 }
 587
 588 /* Check for overlap between registers marked in CLOBBERED_REGS and
 589    anything inappropriate in DECL.  Emit error and return TRUE for error,
 590    FALSE for ok.  */
 591
 592 static bool
 593 decl_conflicts_with_clobbers_p (tree decl, const HARD_REG_SET clobbered_regs)
 594 {
 595   /* Conflicts between asm-declared register variables and the clobber
 596      list are not allowed.  */
 597   if ((TREE_CODE (decl) == VAR_DECL || TREE_CODE (decl) == PARM_DECL)
 598       && DECL_REGISTER (decl)
 599       && REG_P (DECL_RTL (decl))
 600       && REGNO (DECL_RTL (decl)) < FIRST_PSEUDO_REGISTER)
 601     {
 602       rtx reg = DECL_RTL (decl);
 603       unsigned int regno;
 604
 605       for (regno = REGNO (reg);
 606            regno < (REGNO (reg)
 607                     + hard_regno_nregs[REGNO (reg)][GET_MODE (reg)]);
 608            regno++)
 609         if (TEST_HARD_REG_BIT (clobbered_regs, regno))
 610           {
 611             error ("asm-specifier for variable `%s' conflicts with asm clobber list",
 612                    IDENTIFIER_POINTER (DECL_NAME (decl)));
 613
 614             /* Reset registerness to stop multiple errors emitted for a
 615                single variable.  */
 616             DECL_REGISTER (decl) = 0;
 617             return true;
 618           }
 619     }
 620   return false;
 621 }
 622
 623 /* Generate RTL for an asm statement with arguments.
 624    STRING is the instruction template.
 625    OUTPUTS is a list of output arguments (lvalues); INPUTS a list of inputs.
 626    Each output or input has an expression in the TREE_VALUE and
 627    and a tree list in TREE_PURPOSE which in turn contains a constraint
 628    name in TREE_VALUE (or NULL_TREE) and a constraint string
 629    in TREE_PURPOSE.
 630    CLOBBERS is a list of STRING_CST nodes each naming a hard register
 631    that is clobbered by this insn.
 632
 633    Not all kinds of lvalue that may appear in OUTPUTS can be stored directly.
 634    Some elements of OUTPUTS may be replaced with trees representing temporary
 635    values.  The caller should copy those temporary values to the originally
 636    specified lvalues.
 637
 638    VOL nonzero means the insn is volatile; don't optimize it.  */
 639
 640 void
 641 expand_asm_operands (tree string, tree outputs, tree inputs,
 642                      tree clobbers, int vol, location_t locus)
 643 {
 644   rtvec argvec, constraintvec;
 645   rtx body;
 646   int ninputs = list_length (inputs);
 647   int noutputs = list_length (outputs);
 648   int ninout;
 649   int nclobbers;
 650   HARD_REG_SET clobbered_regs;
 651   int clobber_conflict_found = 0;
 652   tree tail;
 653   tree t;
 654   int i;
 655   /* Vector of RTX's of evaluated output operands.  */
 656   rtx *output_rtx = alloca (noutputs * sizeof (rtx));
 657   int *inout_opnum = alloca (noutputs * sizeof (int));
 658   rtx *real_output_rtx = alloca (noutputs * sizeof (rtx));
 659   enum machine_mode *inout_mode
 660     = alloca (noutputs * sizeof (enum machine_mode));
 661   const char **constraints
 662     = alloca ((noutputs + ninputs) * sizeof (const char *));
 663   int old_generating_concat_p = generating_concat_p;
 664
 665   /* An ASM with no outputs needs to be treated as volatile, for now.  */
 666   if (noutputs == 0)
 667     vol = 1;
 668
 669   if (! check_operand_nalternatives (outputs, inputs))
 670     return;
 671
 672   string = resolve_asm_operand_names (string, outputs, inputs);
 673
 674   /* Collect constraints.  */
 675   i = 0;
 676   for (t = outputs; t ; t = TREE_CHAIN (t), i++)
 677     constraints[i] = TREE_STRING_POINTER (TREE_VALUE (TREE_PURPOSE (t)));
 678   for (t = inputs; t ; t = TREE_CHAIN (t), i++)
 679     constraints[i] = TREE_STRING_POINTER (TREE_VALUE (TREE_PURPOSE (t)));
 680
 681   /* Sometimes we wish to automatically clobber registers across an asm.
 682      Case in point is when the i386 backend moved from cc0 to a hard reg --
 683      maintaining source-level compatibility means automatically clobbering
 684      the flags register.  */
 685   clobbers = targetm.md_asm_clobbers (clobbers);
 686
 687   /* Count the number of meaningful clobbered registers, ignoring what
 688      we would ignore later.  */
 689   nclobbers = 0;
 690   CLEAR_HARD_REG_SET (clobbered_regs);
 691   for (tail = clobbers; tail; tail = TREE_CHAIN (tail))
 692     {
 693       const char *regname = TREE_STRING_POINTER (TREE_VALUE (tail));
 694
 695       i = decode_reg_name (regname);
 696       if (i >= 0 || i == -4)
 697         ++nclobbers;
 698       else if (i == -2)
 699         error ("unknown register name `%s' in `asm'", regname);
 700
 701       /* Mark clobbered registers.  */
 702       if (i >= 0)
 703         {
 704           /* Clobbering the PIC register is an error */
 705           if (i == (int) PIC_OFFSET_TABLE_REGNUM)
 706             {
 707               error ("PIC register `%s' clobbered in `asm'", regname);
 708               return;
 709             }
 710
 711           SET_HARD_REG_BIT (clobbered_regs, i);
 712         }
 713     }
 714
 715   /* First pass over inputs and outputs checks validity and sets
 716      mark_addressable if needed.  */
 717
 718   ninout = 0;
 719   for (i = 0, tail = outputs; tail; tail = TREE_CHAIN (tail), i++)
 720     {
 721       tree val = TREE_VALUE (tail);
 722       tree type = TREE_TYPE (val);
 723       const char *constraint;
 724       bool is_inout;
 725       bool allows_reg;
 726       bool allows_mem;
 727
 728       /* If there's an erroneous arg, emit no insn.  */
 729       if (type == error_mark_node)
 730         return;
 731
 732       /* Try to parse the output constraint.  If that fails, there's
 733          no point in going further.  */
 734       constraint = constraints[i];
 735       if (!parse_output_constraint (&constraint, i, ninputs, noutputs,
 736                                     &allows_mem, &allows_reg, &is_inout))
 737         return;
 738
 739       if (! allows_reg
 740           && (allows_mem
 741               || is_inout
 742               || (DECL_P (val)
 743                   && REG_P (DECL_RTL (val))
 744                   && GET_MODE (DECL_RTL (val)) != TYPE_MODE (type))))
 745         lang_hooks.mark_addressable (val);
 746
 747       if (is_inout)
 748         ninout++;
 749     }
 750
 751   ninputs += ninout;
 752   if (ninputs + noutputs > MAX_RECOG_OPERANDS)
 753     {
 754       error ("more than %d operands in `asm'", MAX_RECOG_OPERANDS);
 755       return;
 756     }
 757
 758   for (i = 0, tail = inputs; tail; i++, tail = TREE_CHAIN (tail))
 759     {
 760       bool allows_reg, allows_mem;
 761       const char *constraint;
 762
 763       /* If there's an erroneous arg, emit no insn, because the ASM_INPUT
 764          would get VOIDmode and that could cause a crash in reload.  */
 765       if (TREE_TYPE (TREE_VALUE (tail)) == error_mark_node)
 766         return;
 767
 768       constraint = constraints[i + noutputs];
 769       if (! parse_input_constraint (&constraint, i, ninputs, noutputs, ninout,
 770                                     constraints, &allows_mem, &allows_reg))
 771         return;
 772
 773       if (! allows_reg && allows_mem)
 774         lang_hooks.mark_addressable (TREE_VALUE (tail));
 775     }
 776
 777   /* Second pass evaluates arguments.  */
 778
 779   ninout = 0;
 780   for (i = 0, tail = outputs; tail; tail = TREE_CHAIN (tail), i++)
 781     {
 782       tree val = TREE_VALUE (tail);
 783       tree type = TREE_TYPE (val);
 784       bool is_inout;
 785       bool allows_reg;
 786       bool allows_mem;
 787       rtx op;
 788
 789       if (!parse_output_constraint (&constraints[i], i, ninputs,
 790                                     noutputs, &allows_mem, &allows_reg,
 791                                     &is_inout))
 792         abort ();
 793
 794       /* If an output operand is not a decl or indirect ref and our constraint
 795          allows a register, make a temporary to act as an intermediate.
 796          Make the asm insn write into that, then our caller will copy it to
 797          the real output operand.  Likewise for promoted variables.  */
 798
 799       generating_concat_p = 0;
 800
 801       real_output_rtx[i] = NULL_RTX;
 802       if ((TREE_CODE (val) == INDIRECT_REF
 803            && allows_mem)
 804           || (DECL_P (val)
 805               && (allows_mem || REG_P (DECL_RTL (val)))
 806               && ! (REG_P (DECL_RTL (val))
 807                     && GET_MODE (DECL_RTL (val)) != TYPE_MODE (type)))
 808           || ! allows_reg
 809           || is_inout)
 810         {
 811           op = expand_expr (val, NULL_RTX, VOIDmode, EXPAND_WRITE);
 812           if (MEM_P (op))
 813             op = validize_mem (op);
 814
 815           if (! allows_reg && !MEM_P (op))
 816             error ("output number %d not directly addressable", i);
 817           if ((! allows_mem && MEM_P (op))
 818               || GET_CODE (op) == CONCAT)
 819             {
 820               real_output_rtx[i] = op;
 821               op = gen_reg_rtx (GET_MODE (op));
 822               if (is_inout)
 823                 emit_move_insn (op, real_output_rtx[i]);
 824             }
 825         }
 826       else
 827         {
 828           op = assign_temp (type, 0, 0, 1);
 829           op = validize_mem (op);
 830           TREE_VALUE (tail) = make_tree (type, op);
 831         }
 832       output_rtx[i] = op;
 833
 834       generating_concat_p = old_generating_concat_p;
 835
 836       if (is_inout)
 837         {
 838           inout_mode[ninout] = TYPE_MODE (type);
 839           inout_opnum[ninout++] = i;
 840         }
 841
 842       if (decl_conflicts_with_clobbers_p (val, clobbered_regs))
 843         clobber_conflict_found = 1;
 844     }
 845
 846   /* Make vectors for the expression-rtx, constraint strings,
 847      and named operands.  */
 848
 849   argvec = rtvec_alloc (ninputs);
 850   constraintvec = rtvec_alloc (ninputs);
 851
 852   body = gen_rtx_ASM_OPERANDS ((noutputs == 0 ? VOIDmode
 853                                 : GET_MODE (output_rtx[0])),
 854                                TREE_STRING_POINTER (string),
 855                                empty_string, 0, argvec, constraintvec,
 856                                locus);
 857
 858   MEM_VOLATILE_P (body) = vol;
 859
 860   /* Eval the inputs and put them into ARGVEC.
 861      Put their constraints into ASM_INPUTs and store in CONSTRAINTS.  */
 862
 863   for (i = 0, tail = inputs; tail; tail = TREE_CHAIN (tail), ++i)
 864     {
 865       bool allows_reg, allows_mem;
 866       const char *constraint;
 867       tree val, type;
 868       rtx op;
 869
 870       constraint = constraints[i + noutputs];
 871       if (! parse_input_constraint (&constraint, i, ninputs, noutputs, ninout,
 872                                     constraints, &allows_mem, &allows_reg))
 873         abort ();
 874
 875       generating_concat_p = 0;
 876
 877       val = TREE_VALUE (tail);
 878       type = TREE_TYPE (val);
 879       op = expand_expr (val, NULL_RTX, VOIDmode,
 880                         (allows_mem && !allows_reg
 881                          ? EXPAND_MEMORY : EXPAND_NORMAL));
 882
 883       /* Never pass a CONCAT to an ASM.  */
 884       if (GET_CODE (op) == CONCAT)
 885         op = force_reg (GET_MODE (op), op);
 886       else if (MEM_P (op))
 887         op = validize_mem (op);
 888
 889       if (asm_operand_ok (op, constraint) <= 0)
 890         {
 891           if (allows_reg)
 892             op = force_reg (TYPE_MODE (type), op);
 893           else if (!allows_mem)
 894             warning ("asm operand %d probably doesn't match constraints",
 895                      i + noutputs);
 896           else if (MEM_P (op))
 897             {
 898               /* We won't recognize either volatile memory or memory
 899                  with a queued address as available a memory_operand
 900                  at this point.  Ignore it: clearly this *is* a memory.  */
 901             }
 902           else
 903             {
 904               warning ("use of memory input without lvalue in "
 905                        "asm operand %d is deprecated", i + noutputs);
 906
 907               if (CONSTANT_P (op))
 908                 {
 909                   rtx mem = force_const_mem (TYPE_MODE (type), op);
 910                   if (mem)
 911                     op = validize_mem (mem);
 912                   else
 913                     op = force_reg (TYPE_MODE (type), op);
 914                 }
 915               if (REG_P (op)
 916                   || GET_CODE (op) == SUBREG
 917                   || GET_CODE (op) == CONCAT)
 918                 {
 919                   tree qual_type = build_qualified_type (type,
 920                                                          (TYPE_QUALS (type)
 921                                                           | TYPE_QUAL_CONST));
 922                   rtx memloc = assign_temp (qual_type, 1, 1, 1);
 923                   memloc = validize_mem (memloc);
 924                   emit_move_insn (memloc, op);
 925                   op = memloc;
 926                 }
 927             }
 928         }
 929
 930       generating_concat_p = old_generating_concat_p;
 931       ASM_OPERANDS_INPUT (body, i) = op;
 932
 933       ASM_OPERANDS_INPUT_CONSTRAINT_EXP (body, i)
 934         = gen_rtx_ASM_INPUT (TYPE_MODE (type), constraints[i + noutputs]);
 935
 936       if (decl_conflicts_with_clobbers_p (val, clobbered_regs))
 937         clobber_conflict_found = 1;
 938     }
 939
 940   /* Protect all the operands from the queue now that they have all been
 941      evaluated.  */
 942
 943   generating_concat_p = 0;
 944
 945   /* For in-out operands, copy output rtx to input rtx.  */
 946   for (i = 0; i < ninout; i++)
 947     {
 948       int j = inout_opnum[i];
 949       char buffer[16];
 950
 951       ASM_OPERANDS_INPUT (body, ninputs - ninout + i)
 952         = output_rtx[j];
 953
 954       sprintf (buffer, "%d", j);
 955       ASM_OPERANDS_INPUT_CONSTRAINT_EXP (body, ninputs - ninout + i)
 956         = gen_rtx_ASM_INPUT (inout_mode[i], ggc_strdup (buffer));
 957     }
 958
 959   generating_concat_p = old_generating_concat_p;
 960
 961   /* Now, for each output, construct an rtx
 962      (set OUTPUT (asm_operands INSN OUTPUTCONSTRAINT OUTPUTNUMBER
 963                                ARGVEC CONSTRAINTS OPNAMES))
 964      If there is more than one, put them inside a PARALLEL.  */
 965
 966   if (noutputs == 1 && nclobbers == 0)
 967     {
 968       ASM_OPERANDS_OUTPUT_CONSTRAINT (body) = constraints[0];
 969       emit_insn (gen_rtx_SET (VOIDmode, output_rtx[0], body));
 970     }
 971
 972   else if (noutputs == 0 && nclobbers == 0)
 973     {
 974       /* No output operands: put in a raw ASM_OPERANDS rtx.  */
 975       emit_insn (body);
 976     }
 977
 978   else
 979     {
 980       rtx obody = body;
 981       int num = noutputs;
 982
 983       if (num == 0)
 984         num = 1;
 985
 986       body = gen_rtx_PARALLEL (VOIDmode, rtvec_alloc (num + nclobbers));
 987
 988       /* For each output operand, store a SET.  */
 989       for (i = 0, tail = outputs; tail; tail = TREE_CHAIN (tail), i++)
 990         {
 991           XVECEXP (body, 0, i)
 992             = gen_rtx_SET (VOIDmode,
 993                            output_rtx[i],
 994                            gen_rtx_ASM_OPERANDS
 995                            (GET_MODE (output_rtx[i]),
 996                             TREE_STRING_POINTER (string),
 997                             constraints[i], i, argvec, constraintvec,
 998                             locus));
 999
1000           MEM_VOLATILE_P (SET_SRC (XVECEXP (body, 0, i))) = vol;
1001         }
1002
1003       /* If there are no outputs (but there are some clobbers)
1004          store the bare ASM_OPERANDS into the PARALLEL.  */
1005
1006       if (i == 0)
1007         XVECEXP (body, 0, i++) = obody;
1008
1009       /* Store (clobber REG) for each clobbered register specified.  */
1010
1011       for (tail = clobbers; tail; tail = TREE_CHAIN (tail))
1012         {
1013           const char *regname = TREE_STRING_POINTER (TREE_VALUE (tail));
1014           int j = decode_reg_name (regname);
1015           rtx clobbered_reg;
1016
1017           if (j < 0)
1018             {
1019               if (j == -3)      /* `cc', which is not a register */
1020                 continue;
1021
1022               if (j == -4)      /* `memory', don't cache memory across asm */
1023                 {
1024                   XVECEXP (body, 0, i++)
1025                     = gen_rtx_CLOBBER (VOIDmode,
1026                                        gen_rtx_MEM
1027                                        (BLKmode,
1028                                         gen_rtx_SCRATCH (VOIDmode)));
1029                   continue;
1030                 }
1031
1032               /* Ignore unknown register, error already signaled.  */
1033               continue;
1034             }
1035
1036           /* Use QImode since that's guaranteed to clobber just one reg.  */
1037           clobbered_reg = gen_rtx_REG (QImode, j);
1038
1039           /* Do sanity check for overlap between clobbers and respectively
1040              input and outputs that hasn't been handled.  Such overlap
1041              should have been detected and reported above.  */
1042           if (!clobber_conflict_found)
1043             {
1044               int opno;
1045
1046               /* We test the old body (obody) contents to avoid tripping
1047                  over the under-construction body.  */
1048               for (opno = 0; opno < noutputs; opno++)
1049                 if (reg_overlap_mentioned_p (clobbered_reg, output_rtx[opno]))
1050                   internal_error ("asm clobber conflict with output operand");
1051
1052               for (opno = 0; opno < ninputs - ninout; opno++)
1053                 if (reg_overlap_mentioned_p (clobbered_reg,
1054                                              ASM_OPERANDS_INPUT (obody, opno)))
1055                   internal_error ("asm clobber conflict with input operand");
1056             }
1057
1058           XVECEXP (body, 0, i++)
1059             = gen_rtx_CLOBBER (VOIDmode, clobbered_reg);
1060         }
1061
1062       emit_insn (body);
1063     }
1064
1065   /* For any outputs that needed reloading into registers, spill them
1066      back to where they belong.  */
1067   for (i = 0; i < noutputs; ++i)
1068     if (real_output_rtx[i])
1069       emit_move_insn (real_output_rtx[i], output_rtx[i]);
1070
1071   free_temp_slots ();
1072 }
1073
1074 void
1075 expand_asm_expr (tree exp)
1076 {
1077   int noutputs, i;
1078   tree outputs, tail;
1079   tree *o;
1080
1081   if (ASM_INPUT_P (exp))
1082     {
1083       expand_asm (ASM_STRING (exp), ASM_VOLATILE_P (exp));
1084       return;
1085     }
1086
1087   outputs = ASM_OUTPUTS (exp);
1088   noutputs = list_length (outputs);
1089   /* o[I] is the place that output number I should be written.  */
1090   o = (tree *) alloca (noutputs * sizeof (tree));
1091
1092   /* Record the contents of OUTPUTS before it is modified.  */
1093   for (i = 0, tail = outputs; tail; tail = TREE_CHAIN (tail), i++)
1094     o[i] = TREE_VALUE (tail);
1095
1096   /* Generate the ASM_OPERANDS insn; store into the TREE_VALUEs of
1097      OUTPUTS some trees for where the values were actually stored.  */
1098   expand_asm_operands (ASM_STRING (exp), outputs, ASM_INPUTS (exp),
1099                        ASM_CLOBBERS (exp), ASM_VOLATILE_P (exp),
1100                        input_location);
1101
1102   /* Copy all the intermediate outputs into the specified outputs.  */
1103   for (i = 0, tail = outputs; tail; tail = TREE_CHAIN (tail), i++)
1104     {
1105       if (o[i] != TREE_VALUE (tail))
1106         {
1107           expand_assignment (o[i], TREE_VALUE (tail), 0);
1108           free_temp_slots ();
1109
1110           /* Restore the original value so that it's correct the next
1111              time we expand this function.  */
1112           TREE_VALUE (tail) = o[i];
1113         }
1114     }
1115 }
1116
1117 /* A subroutine of expand_asm_operands.  Check that all operands have
1118    the same number of alternatives.  Return true if so.  */
1119
1120 static bool
1121 check_operand_nalternatives (tree outputs, tree inputs)
1122 {
1123   if (outputs || inputs)
1124     {
1125       tree tmp = TREE_PURPOSE (outputs ? outputs : inputs);
1126       int nalternatives
1127         = n_occurrences (',', TREE_STRING_POINTER (TREE_VALUE (tmp)));
1128       tree next = inputs;
1129
1130       if (nalternatives + 1 > MAX_RECOG_ALTERNATIVES)
1131         {
1132           error ("too many alternatives in `asm'");
1133           return false;
1134         }
1135
1136       tmp = outputs;
1137       while (tmp)
1138         {
1139           const char *constraint
1140             = TREE_STRING_POINTER (TREE_VALUE (TREE_PURPOSE (tmp)));
1141
1142           if (n_occurrences (',', constraint) != nalternatives)
1143             {
1144               error ("operand constraints for `asm' differ in number of alternatives");
1145               return false;
1146             }
1147
1148           if (TREE_CHAIN (tmp))
1149             tmp = TREE_CHAIN (tmp);
1150           else
1151             tmp = next, next = 0;
1152         }
1153     }
1154
1155   return true;
1156 }
1157
1158 /* A subroutine of expand_asm_operands.  Check that all operand names
1159    are unique.  Return true if so.  We rely on the fact that these names
1160    are identifiers, and so have been canonicalized by get_identifier,
1161    so all we need are pointer comparisons.  */
1162
1163 static bool
1164 check_unique_operand_names (tree outputs, tree inputs)
1165 {
1166   tree i, j;
1167
1168   for (i = outputs; i ; i = TREE_CHAIN (i))
1169     {
1170       tree i_name = TREE_PURPOSE (TREE_PURPOSE (i));
1171       if (! i_name)
1172         continue;
1173
1174       for (j = TREE_CHAIN (i); j ; j = TREE_CHAIN (j))
1175         if (simple_cst_equal (i_name, TREE_PURPOSE (TREE_PURPOSE (j))))
1176           goto failure;
1177     }
1178
1179   for (i = inputs; i ; i = TREE_CHAIN (i))
1180     {
1181       tree i_name = TREE_PURPOSE (TREE_PURPOSE (i));
1182       if (! i_name)
1183         continue;
1184
1185       for (j = TREE_CHAIN (i); j ; j = TREE_CHAIN (j))
1186         if (simple_cst_equal (i_name, TREE_PURPOSE (TREE_PURPOSE (j))))
1187           goto failure;
1188       for (j = outputs; j ; j = TREE_CHAIN (j))
1189         if (simple_cst_equal (i_name, TREE_PURPOSE (TREE_PURPOSE (j))))
1190           goto failure;
1191     }
1192
1193   return true;
1194
1195  failure:
1196   error ("duplicate asm operand name '%s'",
1197          TREE_STRING_POINTER (TREE_PURPOSE (TREE_PURPOSE (i))));
1198   return false;
1199 }
1200
1201 /* A subroutine of expand_asm_operands.  Resolve the names of the operands
1202    in *POUTPUTS and *PINPUTS to numbers, and replace the name expansions in
1203    STRING and in the constraints to those numbers.  */
1204
1205 tree
1206 resolve_asm_operand_names (tree string, tree outputs, tree inputs)
1207 {
1208   char *buffer;
1209   char *p;
1210   const char *c;
1211   tree t;
1212
1213   check_unique_operand_names (outputs, inputs);
1214
1215   /* Substitute [<name>] in input constraint strings.  There should be no
1216      named operands in output constraints.  */
1217   for (t = inputs; t ; t = TREE_CHAIN (t))
1218     {
1219       c = TREE_STRING_POINTER (TREE_VALUE (TREE_PURPOSE (t)));
1220       if (strchr (c, '[') != NULL)
1221         {
1222           p = buffer = xstrdup (c);
1223           while ((p = strchr (p, '[')) != NULL)
1224             p = resolve_operand_name_1 (p, outputs, inputs);
1225           TREE_VALUE (TREE_PURPOSE (t))
1226             = build_string (strlen (buffer), buffer);
1227           free (buffer);
1228         }
1229     }
1230
1231   /* Now check for any needed substitutions in the template.  */
1232   c = TREE_STRING_POINTER (string);
1233   while ((c = strchr (c, '%')) != NULL)
1234     {
1235       if (c[1] == '[')
1236         break;
1237       else if (ISALPHA (c[1]) && c[2] == '[')
1238         break;
1239       else
1240         {
1241           c += 1;
1242           continue;
1243         }
1244     }
1245
1246   if (c)
1247     {
1248       /* OK, we need to make a copy so we can perform the substitutions.
1249          Assume that we will not need extra space--we get to remove '['
1250          and ']', which means we cannot have a problem until we have more
1251          than 999 operands.  */
1252       buffer = xstrdup (TREE_STRING_POINTER (string));
1253       p = buffer + (c - TREE_STRING_POINTER (string));
1254
1255       while ((p = strchr (p, '%')) != NULL)
1256         {
1257           if (p[1] == '[')
1258             p += 1;
1259           else if (ISALPHA (p[1]) && p[2] == '[')
1260             p += 2;
1261           else
1262             {
1263               p += 1;
1264               continue;
1265             }
1266
1267           p = resolve_operand_name_1 (p, outputs, inputs);
1268         }
1269
1270       string = build_string (strlen (buffer), buffer);
1271       free (buffer);
1272     }
1273
1274   return string;
1275 }
1276
1277 /* A subroutine of resolve_operand_names.  P points to the '[' for a
1278    potential named operand of the form [<name>].  In place, replace
1279    the name and brackets with a number.  Return a pointer to the
1280    balance of the string after substitution.  */
1281
1282 static char *
1283 resolve_operand_name_1 (char *p, tree outputs, tree inputs)
1284 {
1285   char *q;
1286   int op;
1287   tree t;
1288   size_t len;
1289
1290   /* Collect the operand name.  */
1291   q = strchr (p, ']');
1292   if (!q)
1293     {
1294       error ("missing close brace for named operand");
1295       return strchr (p, '\0');
1296     }
1297   len = q - p - 1;
1298
1299   /* Resolve the name to a number.  */
1300   for (op = 0, t = outputs; t ; t = TREE_CHAIN (t), op++)
1301     {
1302       tree name = TREE_PURPOSE (TREE_PURPOSE (t));
1303       if (name)
1304         {
1305           const char *c = TREE_STRING_POINTER (name);
1306           if (strncmp (c, p + 1, len) == 0 && c[len] == '\0')
1307             goto found;
1308         }
1309     }
1310   for (t = inputs; t ; t = TREE_CHAIN (t), op++)
1311     {
1312       tree name = TREE_PURPOSE (TREE_PURPOSE (t));
1313       if (name)
1314         {
1315           const char *c = TREE_STRING_POINTER (name);
1316           if (strncmp (c, p + 1, len) == 0 && c[len] == '\0')
1317             goto found;
1318         }
1319     }
1320
1321   *q = '\0';
1322   error ("undefined named operand '%s'", p + 1);
1323   op = 0;
1324  found:
1325
1326   /* Replace the name with the number.  Unfortunately, not all libraries
1327      get the return value of sprintf correct, so search for the end of the
1328      generated string by hand.  */
1329   sprintf (p, "%d", op);
1330   p = strchr (p, '\0');
1331
1332   /* Verify the no extra buffer space assumption.  */
1333   if (p > q)
1334     abort ();
1335
1336   /* Shift the rest of the buffer down to fill the gap.  */
1337   memmove (p, q + 1, strlen (q + 1) + 1);
1338
1339   return p;
1340 }
1341 \f
1342 /* Generate RTL to evaluate the expression EXP.  */
1343
1344 void
1345 expand_expr_stmt (tree exp)
1346 {
1347   rtx value;
1348   tree type;
1349
1350   value = expand_expr (exp, const0_rtx, VOIDmode, 0);
1351   type = TREE_TYPE (exp);
1352
1353   /* If all we do is reference a volatile value in memory,
1354      copy it to a register to be sure it is actually touched.  */
1355   if (value && MEM_P (value) && TREE_THIS_VOLATILE (exp))
1356     {
1357       if (TYPE_MODE (type) == VOIDmode)
1358         ;
1359       else if (TYPE_MODE (type) != BLKmode)
1360         value = copy_to_reg (value);
1361       else
1362         {
1363           rtx lab = gen_label_rtx ();
1364
1365           /* Compare the value with itself to reference it.  */
1366           emit_cmp_and_jump_insns (value, value, EQ,
1367                                    expand_expr (TYPE_SIZE (type),
1368                                                 NULL_RTX, VOIDmode, 0),
1369                                    BLKmode, 0, lab);
1370           emit_label (lab);
1371         }
1372     }
1373
1374   /* Free any temporaries used to evaluate this expression.  */
1375   free_temp_slots ();
1376 }
1377
1378 /* Warn if EXP contains any computations whose results are not used.
1379    Return 1 if a warning is printed; 0 otherwise.  LOCUS is the
1380    (potential) location of the expression.  */
1381
1382 int
1383 warn_if_unused_value (tree exp, location_t locus)
1384 {
1385  restart:
1386   if (TREE_USED (exp))
1387     return 0;
1388
1389   /* Don't warn about void constructs.  This includes casting to void,
1390      void function calls, and statement expressions with a final cast
1391      to void.  */
1392   if (VOID_TYPE_P (TREE_TYPE (exp)))
1393     return 0;
1394
1395   if (EXPR_HAS_LOCATION (exp))
1396     locus = EXPR_LOCATION (exp);
1397
1398   switch (TREE_CODE (exp))
1399     {
1400     case PREINCREMENT_EXPR:
1401     case POSTINCREMENT_EXPR:
1402     case PREDECREMENT_EXPR:
1403     case POSTDECREMENT_EXPR:
1404     case MODIFY_EXPR:
1405     case INIT_EXPR:
1406     case TARGET_EXPR:
1407     case CALL_EXPR:
1408     case TRY_CATCH_EXPR:
1409     case WITH_CLEANUP_EXPR:
1410     case EXIT_EXPR:
1411       return 0;
1412
1413     case BIND_EXPR:
1414       /* For a binding, warn if no side effect within it.  */
1415       exp = BIND_EXPR_BODY (exp);
1416       goto restart;
1417
1418     case SAVE_EXPR:
1419       exp = TREE_OPERAND (exp, 0);
1420       goto restart;
1421
1422     case TRUTH_ORIF_EXPR:
1423     case TRUTH_ANDIF_EXPR:
1424       /* In && or ||, warn if 2nd operand has no side effect.  */
1425       exp = TREE_OPERAND (exp, 1);
1426       goto restart;
1427
1428     case COMPOUND_EXPR:
1429       if (TREE_NO_WARNING (exp))
1430         return 0;
1431       if (warn_if_unused_value (TREE_OPERAND (exp, 0), locus))
1432         return 1;
1433       /* Let people do `(foo (), 0)' without a warning.  */
1434       if (TREE_CONSTANT (TREE_OPERAND (exp, 1)))
1435         return 0;
1436       exp = TREE_OPERAND (exp, 1);
1437       goto restart;
1438
1439     case NOP_EXPR:
1440     case CONVERT_EXPR:
1441     case NON_LVALUE_EXPR:
1442       /* Don't warn about conversions not explicit in the user's program.  */
1443       if (TREE_NO_WARNING (exp))
1444         return 0;
1445       /* Assignment to a cast usually results in a cast of a modify.
1446          Don't complain about that.  There can be an arbitrary number of
1447          casts before the modify, so we must loop until we find the first
1448          non-cast expression and then test to see if that is a modify.  */
1449       {
1450         tree tem = TREE_OPERAND (exp, 0);
1451
1452         while (TREE_CODE (tem) == CONVERT_EXPR || TREE_CODE (tem) == NOP_EXPR)
1453           tem = TREE_OPERAND (tem, 0);
1454
1455         if (TREE_CODE (tem) == MODIFY_EXPR || TREE_CODE (tem) == INIT_EXPR
1456             || TREE_CODE (tem) == CALL_EXPR)
1457           return 0;
1458       }
1459       goto maybe_warn;
1460
1461     case INDIRECT_REF:
1462       /* Don't warn about automatic dereferencing of references, since
1463          the user cannot control it.  */
1464       if (TREE_CODE (TREE_TYPE (TREE_OPERAND (exp, 0))) == REFERENCE_TYPE)
1465         {
1466           exp = TREE_OPERAND (exp, 0);
1467           goto restart;
1468         }
1469       /* Fall through.  */
1470
1471     default:
1472       /* Referencing a volatile value is a side effect, so don't warn.  */
1473       if ((DECL_P (exp)
1474            || TREE_CODE_CLASS (TREE_CODE (exp)) == 'r')
1475           && TREE_THIS_VOLATILE (exp))
1476         return 0;
1477
1478       /* If this is an expression which has no operands, there is no value
1479          to be unused.  There are no such language-independent codes,
1480          but front ends may define such.  */
1481       if (TREE_CODE_CLASS (TREE_CODE (exp)) == 'e'
1482           && TREE_CODE_LENGTH (TREE_CODE (exp)) == 0)
1483         return 0;
1484
1485     maybe_warn:
1486       /* If this is an expression with side effects, don't warn.  */
1487       if (TREE_SIDE_EFFECTS (exp))
1488         return 0;
1489
1490       warning ("%Hvalue computed is not used", &locus);
1491       return 1;
1492     }
1493 }
1494 \f
1495 /* Return nonzero if we should preserve sub-expressions as separate
1496    pseudos.  We never do so if we aren't optimizing.  We always do so
1497    if -fexpensive-optimizations.  */
1498
1499 int
1500 preserve_subexpressions_p (void)
1501 {
1502   return optimize && (cfun || flag_expensive_optimizations);
1503 }
1504
1505 \f
1506 /* Generate RTL to return from the current function, with no value.
1507    (That is, we do not do anything about returning any value.)  */
1508
1509 void
1510 expand_null_return (void)
1511 {
1512   /* If this function was declared to return a value, but we
1513      didn't, clobber the return registers so that they are not
1514      propagated live to the rest of the function.  */
1515   clobber_return_register ();
1516
1517   expand_null_return_1 ();
1518 }
1519
1520 /* Generate RTL to return directly from the current function.
1521    (That is, we bypass any return value.)  */
1522
1523 void
1524 expand_naked_return (void)
1525 {
1526   rtx end_label;
1527
1528   clear_pending_stack_adjust ();
1529   do_pending_stack_adjust ();
1530
1531   end_label = naked_return_label;
1532   if (end_label == 0)
1533     end_label = naked_return_label = gen_label_rtx ();
1534
1535   emit_jump (end_label);
1536 }
1537
1538 /* If the current function returns values in the most significant part
1539    of a register, shift return value VAL appropriately.  The mode of
1540    the function's return type is known not to be BLKmode.  */
1541
1542 static rtx
1543 shift_return_value (rtx val)
1544 {
1545   tree type;
1546
1547   type = TREE_TYPE (DECL_RESULT (current_function_decl));
1548   if (targetm.calls.return_in_msb (type))
1549     {
1550       rtx target;
1551       HOST_WIDE_INT shift;
1552
1553       target = DECL_RTL (DECL_RESULT (current_function_decl));
1554       shift = (GET_MODE_BITSIZE (GET_MODE (target))
1555                - BITS_PER_UNIT * int_size_in_bytes (type));
1556       if (shift > 0)
1557         val = expand_shift (LSHIFT_EXPR, GET_MODE (target),
1558                             gen_lowpart (GET_MODE (target), val),
1559                             build_int_2 (shift, 0), target, 1);
1560     }
1561   return val;
1562 }
1563
1564
1565 /* Generate RTL to return from the current function, with value VAL.  */
1566
1567 static void
1568 expand_value_return (rtx val)
1569 {
1570   /* Copy the value to the return location
1571      unless it's already there.  */
1572
1573   rtx return_reg = DECL_RTL (DECL_RESULT (current_function_decl));
1574   if (return_reg != val)
1575     {
1576       tree type = TREE_TYPE (DECL_RESULT (current_function_decl));
1577       if (targetm.calls.promote_function_return (TREE_TYPE (current_function_decl)))
1578       {
1579         int unsignedp = TYPE_UNSIGNED (type);
1580         enum machine_mode old_mode
1581           = DECL_MODE (DECL_RESULT (current_function_decl));
1582         enum machine_mode mode
1583           = promote_mode (type, old_mode, &unsignedp, 1);
1584
1585         if (mode != old_mode)
1586           val = convert_modes (mode, old_mode, val, unsignedp);
1587       }
1588       if (GET_CODE (return_reg) == PARALLEL)
1589         emit_group_load (return_reg, val, type, int_size_in_bytes (type));
1590       else
1591         emit_move_insn (return_reg, val);
1592     }
1593
1594   expand_null_return_1 ();
1595 }
1596
1597 /* Output a return with no value.  */
1598
1599 static void
1600 expand_null_return_1 (void)
1601 {
1602   rtx end_label;
1603
1604   clear_pending_stack_adjust ();
1605   do_pending_stack_adjust ();
1606
1607   end_label = return_label;
1608   if (end_label == 0)
1609      end_label = return_label = gen_label_rtx ();
1610   emit_jump (end_label);
1611 }
1612 \f
1613 /* Generate RTL to evaluate the expression RETVAL and return it
1614    from the current function.  */
1615
1616 void
1617 expand_return (tree retval)
1618 {
1619   rtx result_rtl;
1620   rtx val = 0;
1621   tree retval_rhs;
1622
1623   /* If function wants no value, give it none.  */
1624   if (TREE_CODE (TREE_TYPE (TREE_TYPE (current_function_decl))) == VOID_TYPE)
1625     {
1626       expand_expr (retval, NULL_RTX, VOIDmode, 0);
1627       expand_null_return ();
1628       return;
1629     }
1630
1631   if (retval == error_mark_node)
1632     {
1633       /* Treat this like a return of no value from a function that
1634          returns a value.  */
1635       expand_null_return ();
1636       return;
1637     }
1638   else if (TREE_CODE (retval) == RESULT_DECL)
1639     retval_rhs = retval;
1640   else if ((TREE_CODE (retval) == MODIFY_EXPR
1641             || TREE_CODE (retval) == INIT_EXPR)
1642            && TREE_CODE (TREE_OPERAND (retval, 0)) == RESULT_DECL)
1643     retval_rhs = TREE_OPERAND (retval, 1);
1644   else
1645     retval_rhs = retval;
1646
1647   result_rtl = DECL_RTL (DECL_RESULT (current_function_decl));
1648
1649   /* If the result is an aggregate that is being returned in one (or more)
1650      registers, load the registers here.  The compiler currently can't handle
1651      copying a BLKmode value into registers.  We could put this code in a
1652      more general area (for use by everyone instead of just function
1653      call/return), but until this feature is generally usable it is kept here
1654      (and in expand_call).  */
1655
1656   if (retval_rhs != 0
1657       && TYPE_MODE (TREE_TYPE (retval_rhs)) == BLKmode
1658       && REG_P (result_rtl))
1659     {
1660       int i;
1661       unsigned HOST_WIDE_INT bitpos, xbitpos;
1662       unsigned HOST_WIDE_INT padding_correction = 0;
1663       unsigned HOST_WIDE_INT bytes
1664         = int_size_in_bytes (TREE_TYPE (retval_rhs));
1665       int n_regs = (bytes + UNITS_PER_WORD - 1) / UNITS_PER_WORD;
1666       unsigned int bitsize
1667         = MIN (TYPE_ALIGN (TREE_TYPE (retval_rhs)), BITS_PER_WORD);
1668       rtx *result_pseudos = alloca (sizeof (rtx) * n_regs);
1669       rtx result_reg, src = NULL_RTX, dst = NULL_RTX;
1670       rtx result_val = expand_expr (retval_rhs, NULL_RTX, VOIDmode, 0);
1671       enum machine_mode tmpmode, result_reg_mode;
1672
1673       if (bytes == 0)
1674         {
1675           expand_null_return ();
1676           return;
1677         }
1678
1679       /* If the structure doesn't take up a whole number of words, see
1680          whether the register value should be padded on the left or on
1681          the right.  Set PADDING_CORRECTION to the number of padding
1682          bits needed on the left side.
1683
1684          In most ABIs, the structure will be returned at the least end of
1685          the register, which translates to right padding on little-endian
1686          targets and left padding on big-endian targets.  The opposite
1687          holds if the structure is returned at the most significant
1688          end of the register.  */
1689       if (bytes % UNITS_PER_WORD != 0
1690           && (targetm.calls.return_in_msb (TREE_TYPE (retval_rhs))
1691               ? !BYTES_BIG_ENDIAN
1692               : BYTES_BIG_ENDIAN))
1693         padding_correction = (BITS_PER_WORD - ((bytes % UNITS_PER_WORD)
1694                                                * BITS_PER_UNIT));
1695
1696       /* Copy the structure BITSIZE bits at a time.  */
1697       for (bitpos = 0, xbitpos = padding_correction;
1698            bitpos < bytes * BITS_PER_UNIT;
1699            bitpos += bitsize, xbitpos += bitsize)
1700         {
1701           /* We need a new destination pseudo each time xbitpos is
1702              on a word boundary and when xbitpos == padding_correction
1703              (the first time through).  */
1704           if (xbitpos % BITS_PER_WORD == 0
1705               || xbitpos == padding_correction)
1706             {
1707               /* Generate an appropriate register.  */
1708               dst = gen_reg_rtx (word_mode);
1709               result_pseudos[xbitpos / BITS_PER_WORD] = dst;
1710
1711               /* Clear the destination before we move anything into it.  */
1712               emit_move_insn (dst, CONST0_RTX (GET_MODE (dst)));
1713             }
1714
1715           /* We need a new source operand each time bitpos is on a word
1716              boundary.  */
1717           if (bitpos % BITS_PER_WORD == 0)
1718             src = operand_subword_force (result_val,
1719                                          bitpos / BITS_PER_WORD,
1720                                          BLKmode);
1721
1722           /* Use bitpos for the source extraction (left justified) and
1723              xbitpos for the destination store (right justified).  */
1724           store_bit_field (dst, bitsize, xbitpos % BITS_PER_WORD, word_mode,
1725                            extract_bit_field (src, bitsize,
1726                                               bitpos % BITS_PER_WORD, 1,
1727                                               NULL_RTX, word_mode, word_mode));
1728         }
1729
1730       tmpmode = GET_MODE (result_rtl);
1731       if (tmpmode == BLKmode)
1732         {
1733           /* Find the smallest integer mode large enough to hold the
1734              entire structure and use that mode instead of BLKmode
1735              on the USE insn for the return register.  */
1736           for (tmpmode = GET_CLASS_NARROWEST_MODE (MODE_INT);
1737                tmpmode != VOIDmode;
1738                tmpmode = GET_MODE_WIDER_MODE (tmpmode))
1739             /* Have we found a large enough mode?  */
1740             if (GET_MODE_SIZE (tmpmode) >= bytes)
1741               break;
1742
1743           /* No suitable mode found.  */
1744           if (tmpmode == VOIDmode)
1745             abort ();
1746
1747           PUT_MODE (result_rtl, tmpmode);
1748         }
1749
1750       if (GET_MODE_SIZE (tmpmode) < GET_MODE_SIZE (word_mode))
1751         result_reg_mode = word_mode;
1752       else
1753         result_reg_mode = tmpmode;
1754       result_reg = gen_reg_rtx (result_reg_mode);
1755
1756       for (i = 0; i < n_regs; i++)
1757         emit_move_insn (operand_subword (result_reg, i, 0, result_reg_mode),
1758                         result_pseudos[i]);
1759
1760       if (tmpmode != result_reg_mode)
1761         result_reg = gen_lowpart (tmpmode, result_reg);
1762
1763       expand_value_return (result_reg);
1764     }
1765   else if (retval_rhs != 0
1766            && !VOID_TYPE_P (TREE_TYPE (retval_rhs))
1767            && (REG_P (result_rtl)
1768                || (GET_CODE (result_rtl) == PARALLEL)))
1769     {
1770       /* Calculate the return value into a temporary (usually a pseudo
1771          reg).  */
1772       tree ot = TREE_TYPE (DECL_RESULT (current_function_decl));
1773       tree nt = build_qualified_type (ot, TYPE_QUALS (ot) | TYPE_QUAL_CONST);
1774
1775       val = assign_temp (nt, 0, 0, 1);
1776       val = expand_expr (retval_rhs, val, GET_MODE (val), 0);
1777       val = force_not_mem (val);
1778       /* Return the calculated value.  */
1779       expand_value_return (shift_return_value (val));
1780     }
1781   else
1782     {
1783       /* No hard reg used; calculate value into hard return reg.  */
1784       expand_expr (retval, const0_rtx, VOIDmode, 0);
1785       expand_value_return (result_rtl);
1786     }
1787 }
1788 \f
1789 /* Given a pointer to a BLOCK node return nonzero if (and only if) the node
1790    in question represents the outermost pair of curly braces (i.e. the "body
1791    block") of a function or method.
1792
1793    For any BLOCK node representing a "body block" of a function or method, the
1794    BLOCK_SUPERCONTEXT of the node will point to another BLOCK node which
1795    represents the outermost (function) scope for the function or method (i.e.
1796    the one which includes the formal parameters).  The BLOCK_SUPERCONTEXT of
1797    *that* node in turn will point to the relevant FUNCTION_DECL node.  */
1798
1799 int
1800 is_body_block (tree stmt)
1801 {
1802   if (lang_hooks.no_body_blocks)
1803     return 0;
1804
1805   if (TREE_CODE (stmt) == BLOCK)
1806     {
1807       tree parent = BLOCK_SUPERCONTEXT (stmt);
1808
1809       if (parent && TREE_CODE (parent) == BLOCK)
1810         {
1811           tree grandparent = BLOCK_SUPERCONTEXT (parent);
1812
1813           if (grandparent && TREE_CODE (grandparent) == FUNCTION_DECL)
1814             return 1;
1815         }
1816     }
1817
1818   return 0;
1819 }
1820
1821 /* Emit code to restore vital registers at the beginning of a nonlocal goto
1822    handler.  */
1823 static void
1824 expand_nl_goto_receiver (void)
1825 {
1826   /* Clobber the FP when we get here, so we have to make sure it's
1827      marked as used by this function.  */
1828   emit_insn (gen_rtx_USE (VOIDmode, hard_frame_pointer_rtx));
1829
1830   /* Mark the static chain as clobbered here so life information
1831      doesn't get messed up for it.  */
1832   emit_insn (gen_rtx_CLOBBER (VOIDmode, static_chain_rtx));
1833
1834 #ifdef HAVE_nonlocal_goto
1835   if (! HAVE_nonlocal_goto)
1836 #endif
1837     /* First adjust our frame pointer to its actual value.  It was
1838        previously set to the start of the virtual area corresponding to
1839        the stacked variables when we branched here and now needs to be
1840        adjusted to the actual hardware fp value.
1841
1842        Assignments are to virtual registers are converted by
1843        instantiate_virtual_regs into the corresponding assignment
1844        to the underlying register (fp in this case) that makes
1845        the original assignment true.
1846        So the following insn will actually be
1847        decrementing fp by STARTING_FRAME_OFFSET.  */
1848     emit_move_insn (virtual_stack_vars_rtx, hard_frame_pointer_rtx);
1849
1850 #if ARG_POINTER_REGNUM != HARD_FRAME_POINTER_REGNUM
1851   if (fixed_regs[ARG_POINTER_REGNUM])
1852     {
1853 #ifdef ELIMINABLE_REGS
1854       /* If the argument pointer can be eliminated in favor of the
1855          frame pointer, we don't need to restore it.  We assume here
1856          that if such an elimination is present, it can always be used.
1857          This is the case on all known machines; if we don't make this
1858          assumption, we do unnecessary saving on many machines.  */
1859       static const struct elims {const int from, to;} elim_regs[] = ELIMINABLE_REGS;
1860       size_t i;
1861
1862       for (i = 0; i < ARRAY_SIZE (elim_regs); i++)
1863         if (elim_regs[i].from == ARG_POINTER_REGNUM
1864             && elim_regs[i].to == HARD_FRAME_POINTER_REGNUM)
1865           break;
1866
1867       if (i == ARRAY_SIZE (elim_regs))
1868 #endif
1869         {
1870           /* Now restore our arg pointer from the address at which it
1871              was saved in our stack frame.  */
1872           emit_move_insn (virtual_incoming_args_rtx,
1873                           copy_to_reg (get_arg_pointer_save_area (cfun)));
1874         }
1875     }
1876 #endif
1877
1878 #ifdef HAVE_nonlocal_goto_receiver
1879   if (HAVE_nonlocal_goto_receiver)
1880     emit_insn (gen_nonlocal_goto_receiver ());
1881 #endif
1882
1883   /* @@@ This is a kludge.  Not all machine descriptions define a blockage
1884      insn, but we must not allow the code we just generated to be reordered
1885      by scheduling.  Specifically, the update of the frame pointer must
1886      happen immediately, not later.  So emit an ASM_INPUT to act as blockage
1887      insn.  */
1888   emit_insn (gen_rtx_ASM_INPUT (VOIDmode, ""));
1889 }
1890 \f
1891 /* Generate RTL for the automatic variable declaration DECL.
1892    (Other kinds of declarations are simply ignored if seen here.)  */
1893
1894 void
1895 expand_decl (tree decl)
1896 {
1897   tree type;
1898
1899   type = TREE_TYPE (decl);
1900
1901   /* For a CONST_DECL, set mode, alignment, and sizes from those of the
1902      type in case this node is used in a reference.  */
1903   if (TREE_CODE (decl) == CONST_DECL)
1904     {
1905       DECL_MODE (decl) = TYPE_MODE (type);
1906       DECL_ALIGN (decl) = TYPE_ALIGN (type);
1907       DECL_SIZE (decl) = TYPE_SIZE (type);
1908       DECL_SIZE_UNIT (decl) = TYPE_SIZE_UNIT (type);
1909       return;
1910     }
1911
1912   /* Otherwise, only automatic variables need any expansion done.  Static and
1913      external variables, and external functions, will be handled by
1914      `assemble_variable' (called from finish_decl).  TYPE_DECL requires
1915      nothing.  PARM_DECLs are handled in `assign_parms'.  */
1916   if (TREE_CODE (decl) != VAR_DECL)
1917     return;
1918
1919   if (TREE_STATIC (decl) || DECL_EXTERNAL (decl))
1920     return;
1921
1922   /* Create the RTL representation for the variable.  */
1923
1924   if (type == error_mark_node)
1925     SET_DECL_RTL (decl, gen_rtx_MEM (BLKmode, const0_rtx));
1926
1927   else if (DECL_SIZE (decl) == 0)
1928     /* Variable with incomplete type.  */
1929     {
1930       rtx x;
1931       if (DECL_INITIAL (decl) == 0)
1932         /* Error message was already done; now avoid a crash.  */
1933         x = gen_rtx_MEM (BLKmode, const0_rtx);
1934       else
1935         /* An initializer is going to decide the size of this array.
1936            Until we know the size, represent its address with a reg.  */
1937         x = gen_rtx_MEM (BLKmode, gen_reg_rtx (Pmode));
1938
1939       set_mem_attributes (x, decl, 1);
1940       SET_DECL_RTL (decl, x);
1941     }
1942   else if (use_register_for_decl (decl))
1943     {
1944       /* Automatic variable that can go in a register.  */
1945       int unsignedp = TYPE_UNSIGNED (type);
1946       enum machine_mode reg_mode
1947         = promote_mode (type, DECL_MODE (decl), &unsignedp, 0);
1948
1949       SET_DECL_RTL (decl, gen_reg_rtx (reg_mode));
1950
1951       /* Note if the object is a user variable.  */
1952       if (!DECL_ARTIFICIAL (decl))
1953         {
1954           mark_user_reg (DECL_RTL (decl));
1955
1956           /* Trust user variables which have a pointer type to really
1957              be pointers.  Do not trust compiler generated temporaries
1958              as our type system is totally busted as it relates to
1959              pointer arithmetic which translates into lots of compiler
1960              generated objects with pointer types, but which are not really
1961              pointers.  */
1962           if (POINTER_TYPE_P (type))
1963             mark_reg_pointer (DECL_RTL (decl),
1964                               TYPE_ALIGN (TREE_TYPE (TREE_TYPE (decl))));
1965         }
1966
1967       maybe_set_unchanging (DECL_RTL (decl), decl);
1968     }
1969
1970   else if (TREE_CODE (DECL_SIZE_UNIT (decl)) == INTEGER_CST
1971            && ! (flag_stack_check && ! STACK_CHECK_BUILTIN
1972                  && 0 < compare_tree_int (DECL_SIZE_UNIT (decl),
1973                                           STACK_CHECK_MAX_VAR_SIZE)))
1974     {
1975       /* Variable of fixed size that goes on the stack.  */
1976       rtx oldaddr = 0;
1977       rtx addr;
1978       rtx x;
1979
1980       /* If we previously made RTL for this decl, it must be an array
1981          whose size was determined by the initializer.
1982          The old address was a register; set that register now
1983          to the proper address.  */
1984       if (DECL_RTL_SET_P (decl))
1985         {
1986           if (!MEM_P (DECL_RTL (decl))
1987               || !REG_P (XEXP (DECL_RTL (decl), 0)))
1988             abort ();
1989           oldaddr = XEXP (DECL_RTL (decl), 0);
1990         }
1991
1992       /* Set alignment we actually gave this decl.  */
1993       DECL_ALIGN (decl) = (DECL_MODE (decl) == BLKmode ? BIGGEST_ALIGNMENT
1994                            : GET_MODE_BITSIZE (DECL_MODE (decl)));
1995       DECL_USER_ALIGN (decl) = 0;
1996
1997       x = assign_temp (decl, 1, 1, 1);
1998       set_mem_attributes (x, decl, 1);
1999       SET_DECL_RTL (decl, x);
2000
2001       if (oldaddr)
2002         {
2003           addr = force_operand (XEXP (DECL_RTL (decl), 0), oldaddr);
2004           if (addr != oldaddr)
2005             emit_move_insn (oldaddr, addr);
2006         }
2007     }
2008   else
2009     /* Dynamic-size object: must push space on the stack.  */
2010     {
2011       rtx address, size, x;
2012
2013       /* Record the stack pointer on entry to block, if have
2014          not already done so.  */
2015       do_pending_stack_adjust ();
2016
2017       /* Compute the variable's size, in bytes.  This will expand any
2018          needed SAVE_EXPRs for the first time.  */
2019       size = expand_expr (DECL_SIZE_UNIT (decl), NULL_RTX, VOIDmode, 0);
2020       free_temp_slots ();
2021
2022       /* Allocate space on the stack for the variable.  Note that
2023          DECL_ALIGN says how the variable is to be aligned and we
2024          cannot use it to conclude anything about the alignment of
2025          the size.  */
2026       address = allocate_dynamic_stack_space (size, NULL_RTX,
2027                                               TYPE_ALIGN (TREE_TYPE (decl)));
2028
2029       /* Reference the variable indirect through that rtx.  */
2030       x = gen_rtx_MEM (DECL_MODE (decl), address);
2031       set_mem_attributes (x, decl, 1);
2032       SET_DECL_RTL (decl, x);
2033
2034
2035       /* Indicate the alignment we actually gave this variable.  */
2036 #ifdef STACK_BOUNDARY
2037       DECL_ALIGN (decl) = STACK_BOUNDARY;
2038 #else
2039       DECL_ALIGN (decl) = BIGGEST_ALIGNMENT;
2040 #endif
2041       DECL_USER_ALIGN (decl) = 0;
2042     }
2043 }
2044 \f
2045 /* Emit code to allocate T_SIZE bytes of dynamic stack space for ALLOC.  */
2046 void
2047 expand_stack_alloc (tree alloc, tree t_size)
2048 {
2049   rtx address, dest, size;
2050   tree var, type;
2051
2052   if (TREE_CODE (alloc) != ADDR_EXPR)
2053     abort ();
2054   var = TREE_OPERAND (alloc, 0);
2055   if (TREE_CODE (var) != VAR_DECL)
2056     abort ();
2057
2058   type = TREE_TYPE (var);
2059
2060   /* Compute the variable's size, in bytes.  */
2061   size = expand_expr (t_size, NULL_RTX, VOIDmode, 0);
2062   free_temp_slots ();
2063
2064   /* Allocate space on the stack for the variable.  */
2065   address = XEXP (DECL_RTL (var), 0);
2066   dest = allocate_dynamic_stack_space (size, address, TYPE_ALIGN (type));
2067   if (dest != address)
2068     emit_move_insn (address, dest);
2069
2070   /* Indicate the alignment we actually gave this variable.  */
2071 #ifdef STACK_BOUNDARY
2072   DECL_ALIGN (var) = STACK_BOUNDARY;
2073 #else
2074   DECL_ALIGN (var) = BIGGEST_ALIGNMENT;
2075 #endif
2076   DECL_USER_ALIGN (var) = 0;
2077 }
2078
2079 /* Emit code to save the current value of stack.  */
2080 rtx
2081 expand_stack_save (void)
2082 {
2083   rtx ret = NULL_RTX;
2084
2085   do_pending_stack_adjust ();
2086   emit_stack_save (SAVE_BLOCK, &ret, NULL_RTX);
2087   return ret;
2088 }
2089
2090 /* Emit code to restore the current value of stack.  */
2091 void
2092 expand_stack_restore (tree var)
2093 {
2094   rtx sa = DECL_RTL (var);
2095
2096   emit_stack_restore (SAVE_BLOCK, sa, NULL_RTX);
2097 }
2098 \f
2099 /* Emit code to perform the initialization of a declaration DECL.  */
2100
2101 void
2102 expand_decl_init (tree decl)
2103 {
2104   int was_used = TREE_USED (decl);
2105
2106   /* If this is a CONST_DECL, we don't have to generate any code.  Likewise
2107      for static decls.  */
2108   if (TREE_CODE (decl) == CONST_DECL
2109       || TREE_STATIC (decl))
2110     return;
2111
2112   /* Compute and store the initial value now.  */
2113
2114   push_temp_slots ();
2115
2116   if (DECL_INITIAL (decl) == error_mark_node)
2117     {
2118       enum tree_code code = TREE_CODE (TREE_TYPE (decl));
2119
2120       if (code == INTEGER_TYPE || code == REAL_TYPE || code == ENUMERAL_TYPE
2121           || code == POINTER_TYPE || code == REFERENCE_TYPE)
2122         expand_assignment (decl, convert (TREE_TYPE (decl), integer_zero_node),
2123                            0);
2124     }
2125   else if (DECL_INITIAL (decl) && TREE_CODE (DECL_INITIAL (decl)) != TREE_LIST)
2126     {
2127       emit_line_note (DECL_SOURCE_LOCATION (decl));
2128       expand_assignment (decl, DECL_INITIAL (decl), 0);
2129     }
2130
2131   /* Don't let the initialization count as "using" the variable.  */
2132   TREE_USED (decl) = was_used;
2133
2134   /* Free any temporaries we made while initializing the decl.  */
2135   preserve_temp_slots (NULL_RTX);
2136   free_temp_slots ();
2137   pop_temp_slots ();
2138 }
2139
2140 \f
2141 /* DECL is an anonymous union.  CLEANUP is a cleanup for DECL.
2142    DECL_ELTS is the list of elements that belong to DECL's type.
2143    In each, the TREE_VALUE is a VAR_DECL, and the TREE_PURPOSE a cleanup.  */
2144
2145 void
2146 expand_anon_union_decl (tree decl, tree cleanup ATTRIBUTE_UNUSED,
2147                         tree decl_elts)
2148 {
2149   rtx x;
2150   tree t;
2151
2152   /* If any of the elements are addressable, so is the entire union.  */
2153   for (t = decl_elts; t; t = TREE_CHAIN (t))
2154     if (TREE_ADDRESSABLE (TREE_VALUE (t)))
2155       {
2156         TREE_ADDRESSABLE (decl) = 1;
2157         break;
2158       }
2159
2160   expand_decl (decl);
2161   x = DECL_RTL (decl);
2162
2163   /* Go through the elements, assigning RTL to each.  */
2164   for (t = decl_elts; t; t = TREE_CHAIN (t))
2165     {
2166       tree decl_elt = TREE_VALUE (t);
2167       enum machine_mode mode = TYPE_MODE (TREE_TYPE (decl_elt));
2168
2169       /* If any of the elements are addressable, so is the entire
2170          union.  */
2171       if (TREE_USED (decl_elt))
2172         TREE_USED (decl) = 1;
2173
2174       /* Propagate the union's alignment to the elements.  */
2175       DECL_ALIGN (decl_elt) = DECL_ALIGN (decl);
2176       DECL_USER_ALIGN (decl_elt) = DECL_USER_ALIGN (decl);
2177
2178       /* If the element has BLKmode and the union doesn't, the union is
2179          aligned such that the element doesn't need to have BLKmode, so
2180          change the element's mode to the appropriate one for its size.  */
2181       if (mode == BLKmode && DECL_MODE (decl) != BLKmode)
2182         DECL_MODE (decl_elt) = mode
2183           = mode_for_size_tree (DECL_SIZE (decl_elt), MODE_INT, 1);
2184
2185       /* (SUBREG (MEM ...)) at RTL generation time is invalid, so we
2186          instead create a new MEM rtx with the proper mode.  */
2187       if (MEM_P (x))
2188         {
2189           if (mode == GET_MODE (x))
2190             SET_DECL_RTL (decl_elt, x);
2191           else
2192             SET_DECL_RTL (decl_elt, adjust_address_nv (x, mode, 0));
2193         }
2194       else if (REG_P (x))
2195         {
2196           if (mode == GET_MODE (x))
2197             SET_DECL_RTL (decl_elt, x);
2198           else
2199             SET_DECL_RTL (decl_elt, gen_lowpart_SUBREG (mode, x));
2200         }
2201       else
2202         abort ();
2203     }
2204 }
2205 \f
2206 /* Do the insertion of a case label into case_list.  The labels are
2207    fed to us in descending order from the sorted vector of case labels used
2208    in the tree part of the middle end.  So the list we construct is
2209    sorted in ascending order.  */
2210
2211 struct case_node *
2212 add_case_node (struct case_node *head, tree low, tree high, tree label)
2213 {
2214   struct case_node *r;
2215
2216   /* If there's no HIGH value, then this is not a case range; it's
2217      just a simple case label.  But that's just a degenerate case
2218      range.
2219      If the bounds are equal, turn this into the one-value case.  */
2220   if (!high || tree_int_cst_equal (low, high))
2221     high = low;
2222
2223   /* Add this label to the chain.  */
2224   r = ggc_alloc (sizeof (struct case_node));
2225   r->low = low;
2226   r->high = high;
2227   r->code_label = label;
2228   r->parent = r->left = NULL;
2229   r->right = head;
2230   return r;
2231 }
2232 \f
2233 /* Maximum number of case bit tests.  */
2234 #define MAX_CASE_BIT_TESTS  3
2235
2236 /* By default, enable case bit tests on targets with ashlsi3.  */
2237 #ifndef CASE_USE_BIT_TESTS
2238 #define CASE_USE_BIT_TESTS  (ashl_optab->handlers[word_mode].insn_code \
2239                              != CODE_FOR_nothing)
2240 #endif
2241
2242
2243 /* A case_bit_test represents a set of case nodes that may be
2244    selected from using a bit-wise comparison.  HI and LO hold
2245    the integer to be tested against, LABEL contains the label
2246    to jump to upon success and BITS counts the number of case
2247    nodes handled by this test, typically the number of bits
2248    set in HI:LO.  */
2249
2250 struct case_bit_test
2251 {
2252   HOST_WIDE_INT hi;
2253   HOST_WIDE_INT lo;
2254   rtx label;
2255   int bits;
2256 };
2257
2258 /* Determine whether "1 << x" is relatively cheap in word_mode.  */
2259
2260 static
2261 bool lshift_cheap_p (void)
2262 {
2263   static bool init = false;
2264   static bool cheap = true;
2265
2266   if (!init)
2267     {
2268       rtx reg = gen_rtx_REG (word_mode, 10000);
2269       int cost = rtx_cost (gen_rtx_ASHIFT (word_mode, const1_rtx, reg), SET);
2270       cheap = cost < COSTS_N_INSNS (3);
2271       init = true;
2272     }
2273
2274   return cheap;
2275 }
2276
2277 /* Comparison function for qsort to order bit tests by decreasing
2278    number of case nodes, i.e. the node with the most cases gets
2279    tested first.  */
2280
2281 static int
2282 case_bit_test_cmp (const void *p1, const void *p2)
2283 {
2284   const struct case_bit_test *d1 = p1;
2285   const struct case_bit_test *d2 = p2;
2286
2287   return d2->bits - d1->bits;
2288 }
2289
2290 /*  Expand a switch statement by a short sequence of bit-wise
2291     comparisons.  "switch(x)" is effectively converted into
2292     "if ((1 << (x-MINVAL)) & CST)" where CST and MINVAL are
2293     integer constants.
2294
2295     INDEX_EXPR is the value being switched on, which is of
2296     type INDEX_TYPE.  MINVAL is the lowest case value of in
2297     the case nodes, of INDEX_TYPE type, and RANGE is highest
2298     value minus MINVAL, also of type INDEX_TYPE.  NODES is
2299     the set of case nodes, and DEFAULT_LABEL is the label to
2300     branch to should none of the cases match.
2301
2302     There *MUST* be MAX_CASE_BIT_TESTS or less unique case
2303     node targets.  */
2304
2305 static void
2306 emit_case_bit_tests (tree index_type, tree index_expr, tree minval,
2307                      tree range, case_node_ptr nodes, rtx default_label)
2308 {
2309   struct case_bit_test test[MAX_CASE_BIT_TESTS];
2310   enum machine_mode mode;
2311   rtx expr, index, label;
2312   unsigned int i,j,lo,hi;
2313   struct case_node *n;
2314   unsigned int count;
2315
2316   count = 0;
2317   for (n = nodes; n; n = n->right)
2318     {
2319       label = label_rtx (n->code_label);
2320       for (i = 0; i < count; i++)
2321         if (label == test[i].label)
2322           break;
2323
2324       if (i == count)
2325         {
2326           if (count >= MAX_CASE_BIT_TESTS)
2327             abort ();
2328           test[i].hi = 0;
2329           test[i].lo = 0;
2330           test[i].label = label;
2331           test[i].bits = 1;
2332           count++;
2333         }
2334       else
2335         test[i].bits++;
2336
2337       lo = tree_low_cst (fold (build2 (MINUS_EXPR, index_type,
2338                                        n->low, minval)), 1);
2339       hi = tree_low_cst (fold (build2 (MINUS_EXPR, index_type,
2340                                        n->high, minval)), 1);
2341       for (j = lo; j <= hi; j++)
2342         if (j >= HOST_BITS_PER_WIDE_INT)
2343           test[i].hi |= (HOST_WIDE_INT) 1 << (j - HOST_BITS_PER_INT);
2344         else
2345           test[i].lo |= (HOST_WIDE_INT) 1 << j;
2346     }
2347
2348   qsort (test, count, sizeof(*test), case_bit_test_cmp);
2349
2350   index_expr = fold (build2 (MINUS_EXPR, index_type,
2351                              convert (index_type, index_expr),
2352                              convert (index_type, minval)));
2353   index = expand_expr (index_expr, NULL_RTX, VOIDmode, 0);
2354   do_pending_stack_adjust ();
2355
2356   mode = TYPE_MODE (index_type);
2357   expr = expand_expr (range, NULL_RTX, VOIDmode, 0);
2358   emit_cmp_and_jump_insns (index, expr, GTU, NULL_RTX, mode, 1,
2359                            default_label);
2360
2361   index = convert_to_mode (word_mode, index, 0);
2362   index = expand_binop (word_mode, ashl_optab, const1_rtx,
2363                         index, NULL_RTX, 1, OPTAB_WIDEN);
2364
2365   for (i = 0; i < count; i++)
2366     {
2367       expr = immed_double_const (test[i].lo, test[i].hi, word_mode);
2368       expr = expand_binop (word_mode, and_optab, index, expr,
2369                            NULL_RTX, 1, OPTAB_WIDEN);
2370       emit_cmp_and_jump_insns (expr, const0_rtx, NE, NULL_RTX,
2371                                word_mode, 1, test[i].label);
2372     }
2373
2374   emit_jump (default_label);
2375 }
2376
2377 #ifndef HAVE_casesi
2378 #define HAVE_casesi 0
2379 #endif
2380
2381 #ifndef HAVE_tablejump
2382 #define HAVE_tablejump 0
2383 #endif
2384
2385 /* Terminate a case (Pascal) or switch (C) statement
2386    in which ORIG_INDEX is the expression to be tested.
2387    If ORIG_TYPE is not NULL, it is the original ORIG_INDEX
2388    type as given in the source before any compiler conversions.
2389    Generate the code to test it and jump to the right place.  */
2390
2391 void
2392 expand_case (tree exp)
2393 {
2394   tree minval = NULL_TREE, maxval = NULL_TREE, range = NULL_TREE;
2395   rtx default_label = 0;
2396   struct case_node *n, *m;
2397   unsigned int count, uniq;
2398   rtx index;
2399   rtx table_label;
2400   int ncases;
2401   rtx *labelvec;
2402   int i;
2403   rtx before_case, end, lab;
2404
2405   tree vec = SWITCH_LABELS (exp);
2406   tree orig_type = TREE_TYPE (exp);
2407   tree index_expr = SWITCH_COND (exp);
2408   tree index_type = TREE_TYPE (index_expr);
2409   int unsignedp = TYPE_UNSIGNED (index_type);
2410
2411   /* The insn after which the case dispatch should finally
2412      be emitted.  Zero for a dummy.  */
2413   rtx start;
2414
2415   /* A list of case labels; it is first built as a list and it may then
2416      be rearranged into a nearly balanced binary tree.  */
2417   struct case_node *case_list = 0;
2418
2419   /* Label to jump to if no case matches.  */
2420   tree default_label_decl = 0;
2421
2422   /* The switch body is lowered in gimplify.c, we should never have
2423      switches with a non-NULL SWITCH_BODY here.  */
2424   if (SWITCH_BODY (exp) || !SWITCH_LABELS (exp))
2425     abort ();
2426
2427   for (i = TREE_VEC_LENGTH (vec); --i >= 0; )
2428     {
2429       tree elt = TREE_VEC_ELT (vec, i);
2430
2431       /* Handle default labels specially.  */
2432       if (!CASE_HIGH (elt) && !CASE_LOW (elt))
2433         {
2434 #ifdef ENABLE_CHECKING
2435           if (default_label_decl != 0)
2436             abort ();
2437 #endif
2438           default_label_decl = CASE_LABEL (elt);
2439         }
2440       else
2441         case_list = add_case_node (case_list, CASE_LOW (elt), CASE_HIGH (elt),
2442                                    CASE_LABEL (elt));
2443     }
2444
2445   do_pending_stack_adjust ();
2446
2447   /* Make sure start points to something that won't need any transformation
2448      before the end of this function.  */
2449   if (!NOTE_P (get_last_insn ()))
2450     emit_note (NOTE_INSN_DELETED);
2451
2452   start = get_last_insn ();
2453
2454   /* An ERROR_MARK occurs for various reasons including invalid data type.  */
2455   if (index_type != error_mark_node)
2456     {
2457       /* If we don't have a default-label, create one here,
2458          after the body of the switch.  */
2459       if (default_label_decl == 0)
2460         {
2461           default_label_decl
2462             = build_decl (LABEL_DECL, NULL_TREE, NULL_TREE);
2463           expand_label (default_label_decl);
2464         }
2465       default_label = label_rtx (default_label_decl);
2466
2467       before_case = get_last_insn ();
2468
2469       /* Get upper and lower bounds of case values.
2470          Also convert all the case values to the index expr's data type.  */
2471
2472       uniq = 0;
2473       count = 0;
2474       for (n = case_list; n; n = n->right)
2475         {
2476           /* Check low and high label values are integers.  */
2477           if (TREE_CODE (n->low) != INTEGER_CST)
2478             abort ();
2479           if (TREE_CODE (n->high) != INTEGER_CST)
2480             abort ();
2481
2482           n->low = convert (index_type, n->low);
2483           n->high = convert (index_type, n->high);
2484
2485           /* Count the elements and track the largest and smallest
2486              of them (treating them as signed even if they are not).  */
2487           if (count++ == 0)
2488             {
2489               minval = n->low;
2490               maxval = n->high;
2491             }
2492           else
2493             {
2494               if (INT_CST_LT (n->low, minval))
2495                 minval = n->low;
2496               if (INT_CST_LT (maxval, n->high))
2497                 maxval = n->high;
2498             }
2499           /* A range counts double, since it requires two compares.  */
2500           if (! tree_int_cst_equal (n->low, n->high))
2501             count++;
2502
2503           /* Count the number of unique case node targets.  */
2504           uniq++;
2505           lab = label_rtx (n->code_label);
2506           for (m = case_list; m != n; m = m->right)
2507             if (label_rtx (m->code_label) == lab)
2508               {
2509                 uniq--;
2510                 break;
2511               }
2512         }
2513
2514       /* Compute span of values.  */
2515       if (count != 0)
2516         range = fold (build2 (MINUS_EXPR, index_type, maxval, minval));
2517
2518       if (count == 0)
2519         {
2520           expand_expr (index_expr, const0_rtx, VOIDmode, 0);
2521           emit_jump (default_label);
2522         }
2523
2524       /* Try implementing this switch statement by a short sequence of
2525          bit-wise comparisons.  However, we let the binary-tree case
2526          below handle constant index expressions.  */
2527       else if (CASE_USE_BIT_TESTS
2528                && ! TREE_CONSTANT (index_expr)
2529                && compare_tree_int (range, GET_MODE_BITSIZE (word_mode)) < 0
2530                && compare_tree_int (range, 0) > 0
2531                && lshift_cheap_p ()
2532                && ((uniq == 1 && count >= 3)
2533                    || (uniq == 2 && count >= 5)
2534                    || (uniq == 3 && count >= 6)))
2535         {
2536           /* Optimize the case where all the case values fit in a
2537              word without having to subtract MINVAL.  In this case,
2538              we can optimize away the subtraction.  */
2539           if (compare_tree_int (minval, 0) > 0
2540               && compare_tree_int (maxval, GET_MODE_BITSIZE (word_mode)) < 0)
2541             {
2542               minval = integer_zero_node;
2543               range = maxval;
2544             }
2545           emit_case_bit_tests (index_type, index_expr, minval, range,
2546                                case_list, default_label);
2547         }
2548
2549       /* If range of values is much bigger than number of values,
2550          make a sequence of conditional branches instead of a dispatch.
2551          If the switch-index is a constant, do it this way
2552          because we can optimize it.  */
2553
2554       else if (count < case_values_threshold ()
2555                || compare_tree_int (range,
2556                                     (optimize_size ? 3 : 10) * count) > 0
2557                /* RANGE may be signed, and really large ranges will show up
2558                   as negative numbers.  */
2559                || compare_tree_int (range, 0) < 0
2560 #ifndef ASM_OUTPUT_ADDR_DIFF_ELT
2561                || flag_pic
2562 #endif
2563                || TREE_CONSTANT (index_expr)
2564                /* If neither casesi or tablejump is available, we can
2565                   only go this way.  */
2566                || (!HAVE_casesi && !HAVE_tablejump))
2567         {
2568           index = expand_expr (index_expr, NULL_RTX, VOIDmode, 0);
2569
2570           /* If the index is a short or char that we do not have
2571              an insn to handle comparisons directly, convert it to
2572              a full integer now, rather than letting each comparison
2573              generate the conversion.  */
2574
2575           if (GET_MODE_CLASS (GET_MODE (index)) == MODE_INT
2576               && ! have_insn_for (COMPARE, GET_MODE (index)))
2577             {
2578               enum machine_mode wider_mode;
2579               for (wider_mode = GET_MODE (index); wider_mode != VOIDmode;
2580                    wider_mode = GET_MODE_WIDER_MODE (wider_mode))
2581                 if (have_insn_for (COMPARE, wider_mode))
2582                   {
2583                     index = convert_to_mode (wider_mode, index, unsignedp);
2584                     break;
2585                   }
2586             }
2587
2588           do_pending_stack_adjust ();
2589
2590           if (MEM_P (index))
2591             index = copy_to_reg (index);
2592           if (GET_CODE (index) == CONST_INT
2593               || TREE_CODE (index_expr) == INTEGER_CST)
2594             {
2595               /* Make a tree node with the proper constant value
2596                  if we don't already have one.  */
2597               if (TREE_CODE (index_expr) != INTEGER_CST)
2598                 {
2599                   index_expr
2600                     = build_int_2 (INTVAL (index),
2601                                    unsignedp || INTVAL (index) >= 0 ? 0 : -1);
2602                   index_expr = convert (index_type, index_expr);
2603                 }
2604
2605               /* For constant index expressions we need only
2606                  issue an unconditional branch to the appropriate
2607                  target code.  The job of removing any unreachable
2608                  code is left to the optimization phase if the
2609                  "-O" option is specified.  */
2610               for (n = case_list; n; n = n->right)
2611                 if (! tree_int_cst_lt (index_expr, n->low)
2612                     && ! tree_int_cst_lt (n->high, index_expr))
2613                   break;
2614
2615               if (n)
2616                 emit_jump (label_rtx (n->code_label));
2617               else
2618                 emit_jump (default_label);
2619             }
2620           else
2621             {
2622               /* If the index expression is not constant we generate
2623                  a binary decision tree to select the appropriate
2624                  target code.  This is done as follows:
2625
2626                  The list of cases is rearranged into a binary tree,
2627                  nearly optimal assuming equal probability for each case.
2628
2629                  The tree is transformed into RTL, eliminating
2630                  redundant test conditions at the same time.
2631
2632                  If program flow could reach the end of the
2633                  decision tree an unconditional jump to the
2634                  default code is emitted.  */
2635
2636               use_cost_table
2637                 = (TREE_CODE (orig_type) != ENUMERAL_TYPE
2638                    && estimate_case_costs (case_list));
2639               balance_case_nodes (&case_list, NULL);
2640               emit_case_nodes (index, case_list, default_label, index_type);
2641               emit_jump (default_label);
2642             }
2643         }
2644       else
2645         {
2646           table_label = gen_label_rtx ();
2647           if (! try_casesi (index_type, index_expr, minval, range,
2648                             table_label, default_label))
2649             {
2650               index_type = integer_type_node;
2651
2652               /* Index jumptables from zero for suitable values of
2653                  minval to avoid a subtraction.  */
2654               if (! optimize_size
2655                   && compare_tree_int (minval, 0) > 0
2656                   && compare_tree_int (minval, 3) < 0)
2657                 {
2658                   minval = integer_zero_node;
2659                   range = maxval;
2660                 }
2661
2662               if (! try_tablejump (index_type, index_expr, minval, range,
2663                                    table_label, default_label))
2664                 abort ();
2665             }
2666
2667           /* Get table of labels to jump to, in order of case index.  */
2668
2669           ncases = tree_low_cst (range, 0) + 1;
2670           labelvec = alloca (ncases * sizeof (rtx));
2671           memset (labelvec, 0, ncases * sizeof (rtx));
2672
2673           for (n = case_list; n; n = n->right)
2674             {
2675               /* Compute the low and high bounds relative to the minimum
2676                  value since that should fit in a HOST_WIDE_INT while the
2677                  actual values may not.  */
2678               HOST_WIDE_INT i_low
2679                 = tree_low_cst (fold (build2 (MINUS_EXPR, index_type,
2680                                               n->low, minval)), 1);
2681               HOST_WIDE_INT i_high
2682                 = tree_low_cst (fold (build2 (MINUS_EXPR, index_type,
2683                                               n->high, minval)), 1);
2684               HOST_WIDE_INT i;
2685
2686               for (i = i_low; i <= i_high; i ++)
2687                 labelvec[i]
2688                   = gen_rtx_LABEL_REF (Pmode, label_rtx (n->code_label));
2689             }
2690
2691           /* Fill in the gaps with the default.  */
2692           for (i = 0; i < ncases; i++)
2693             if (labelvec[i] == 0)
2694               labelvec[i] = gen_rtx_LABEL_REF (Pmode, default_label);
2695
2696           /* Output the table.  */
2697           emit_label (table_label);
2698
2699           if (CASE_VECTOR_PC_RELATIVE || flag_pic)
2700             emit_jump_insn (gen_rtx_ADDR_DIFF_VEC (CASE_VECTOR_MODE,
2701                                                    gen_rtx_LABEL_REF (Pmode, table_label),
2702                                                    gen_rtvec_v (ncases, labelvec),
2703                                                    const0_rtx, const0_rtx));
2704           else
2705             emit_jump_insn (gen_rtx_ADDR_VEC (CASE_VECTOR_MODE,
2706                                               gen_rtvec_v (ncases, labelvec)));
2707
2708           /* If the case insn drops through the table,
2709              after the table we must jump to the default-label.
2710              Otherwise record no drop-through after the table.  */
2711 #ifdef CASE_DROPS_THROUGH
2712           emit_jump (default_label);
2713 #else
2714           emit_barrier ();
2715 #endif
2716         }
2717
2718       before_case = NEXT_INSN (before_case);
2719       end = get_last_insn ();
2720       if (squeeze_notes (&before_case, &end))
2721         abort ();
2722       reorder_insns (before_case, end, start);
2723     }
2724
2725   free_temp_slots ();
2726 }
2727
2728 /* Generate code to jump to LABEL if OP1 and OP2 are equal.  */
2729
2730 static void
2731 do_jump_if_equal (rtx op1, rtx op2, rtx label, int unsignedp)
2732 {
2733   if (GET_CODE (op1) == CONST_INT && GET_CODE (op2) == CONST_INT)
2734     {
2735       if (op1 == op2)
2736         emit_jump (label);
2737     }
2738   else
2739     emit_cmp_and_jump_insns (op1, op2, EQ, NULL_RTX,
2740                              (GET_MODE (op1) == VOIDmode
2741                              ? GET_MODE (op2) : GET_MODE (op1)),
2742                              unsignedp, label);
2743 }
2744 \f
2745 /* Not all case values are encountered equally.  This function
2746    uses a heuristic to weight case labels, in cases where that
2747    looks like a reasonable thing to do.
2748
2749    Right now, all we try to guess is text, and we establish the
2750    following weights:
2751
2752         chars above space:      16
2753         digits:                 16
2754         default:                12
2755         space, punct:           8
2756         tab:                    4
2757         newline:                2
2758         other "\" chars:        1
2759         remaining chars:        0
2760
2761    If we find any cases in the switch that are not either -1 or in the range
2762    of valid ASCII characters, or are control characters other than those
2763    commonly used with "\", don't treat this switch scanning text.
2764
2765    Return 1 if these nodes are suitable for cost estimation, otherwise
2766    return 0.  */
2767
2768 static int
2769 estimate_case_costs (case_node_ptr node)
2770 {
2771   tree min_ascii = integer_minus_one_node;
2772   tree max_ascii = convert (TREE_TYPE (node->high), build_int_2 (127, 0));
2773   case_node_ptr n;
2774   int i;
2775
2776   /* If we haven't already made the cost table, make it now.  Note that the
2777      lower bound of the table is -1, not zero.  */
2778
2779   if (! cost_table_initialized)
2780     {
2781       cost_table_initialized = 1;
2782
2783       for (i = 0; i < 128; i++)
2784         {
2785           if (ISALNUM (i))
2786             COST_TABLE (i) = 16;
2787           else if (ISPUNCT (i))
2788             COST_TABLE (i) = 8;
2789           else if (ISCNTRL (i))
2790             COST_TABLE (i) = -1;
2791         }
2792
2793       COST_TABLE (' ') = 8;
2794       COST_TABLE ('\t') = 4;
2795       COST_TABLE ('\0') = 4;
2796       COST_TABLE ('\n') = 2;
2797       COST_TABLE ('\f') = 1;
2798       COST_TABLE ('\v') = 1;
2799       COST_TABLE ('\b') = 1;
2800     }
2801
2802   /* See if all the case expressions look like text.  It is text if the
2803      constant is >= -1 and the highest constant is <= 127.  Do all comparisons
2804      as signed arithmetic since we don't want to ever access cost_table with a
2805      value less than -1.  Also check that none of the constants in a range
2806      are strange control characters.  */
2807
2808   for (n = node; n; n = n->right)
2809     {
2810       if ((INT_CST_LT (n->low, min_ascii)) || INT_CST_LT (max_ascii, n->high))
2811         return 0;
2812
2813       for (i = (HOST_WIDE_INT) TREE_INT_CST_LOW (n->low);
2814            i <= (HOST_WIDE_INT) TREE_INT_CST_LOW (n->high); i++)
2815         if (COST_TABLE (i) < 0)
2816           return 0;
2817     }
2818
2819   /* All interesting values are within the range of interesting
2820      ASCII characters.  */
2821   return 1;
2822 }
2823
2824 /* Take an ordered list of case nodes
2825    and transform them into a near optimal binary tree,
2826    on the assumption that any target code selection value is as
2827    likely as any other.
2828
2829    The transformation is performed by splitting the ordered
2830    list into two equal sections plus a pivot.  The parts are
2831    then attached to the pivot as left and right branches.  Each
2832    branch is then transformed recursively.  */
2833
2834 static void
2835 balance_case_nodes (case_node_ptr *head, case_node_ptr parent)
2836 {
2837   case_node_ptr np;
2838
2839   np = *head;
2840   if (np)
2841     {
2842       int cost = 0;
2843       int i = 0;
2844       int ranges = 0;
2845       case_node_ptr *npp;
2846       case_node_ptr left;
2847
2848       /* Count the number of entries on branch.  Also count the ranges.  */
2849
2850       while (np)
2851         {
2852           if (!tree_int_cst_equal (np->low, np->high))
2853             {
2854               ranges++;
2855               if (use_cost_table)
2856                 cost += COST_TABLE (TREE_INT_CST_LOW (np->high));
2857             }
2858
2859           if (use_cost_table)
2860             cost += COST_TABLE (TREE_INT_CST_LOW (np->low));
2861
2862           i++;
2863           np = np->right;
2864         }
2865
2866       if (i > 2)
2867         {
2868           /* Split this list if it is long enough for that to help.  */
2869           npp = head;
2870           left = *npp;
2871           if (use_cost_table)
2872             {
2873               /* Find the place in the list that bisects the list's total cost,
2874                  Here I gets half the total cost.  */
2875               int n_moved = 0;
2876               i = (cost + 1) / 2;
2877               while (1)
2878                 {
2879                   /* Skip nodes while their cost does not reach that amount.  */
2880                   if (!tree_int_cst_equal ((*npp)->low, (*npp)->high))
2881                     i -= COST_TABLE (TREE_INT_CST_LOW ((*npp)->high));
2882                   i -= COST_TABLE (TREE_INT_CST_LOW ((*npp)->low));
2883                   if (i <= 0)
2884                     break;
2885                   npp = &(*npp)->right;
2886                   n_moved += 1;
2887                 }
2888               if (n_moved == 0)
2889                 {
2890                   /* Leave this branch lopsided, but optimize left-hand
2891                      side and fill in `parent' fields for right-hand side.  */
2892                   np = *head;
2893                   np->parent = parent;
2894                   balance_case_nodes (&np->left, np);
2895                   for (; np->right; np = np->right)
2896                     np->right->parent = np;
2897                   return;
2898                 }
2899             }
2900           /* If there are just three nodes, split at the middle one.  */
2901           else if (i == 3)
2902             npp = &(*npp)->right;
2903           else
2904             {
2905               /* Find the place in the list that bisects the list's total cost,
2906                  where ranges count as 2.
2907                  Here I gets half the total cost.  */
2908               i = (i + ranges + 1) / 2;
2909               while (1)
2910                 {
2911                   /* Skip nodes while their cost does not reach that amount.  */
2912                   if (!tree_int_cst_equal ((*npp)->low, (*npp)->high))
2913                     i--;
2914                   i--;
2915                   if (i <= 0)
2916                     break;
2917                   npp = &(*npp)->right;
2918                 }
2919             }
2920           *head = np = *npp;
2921           *npp = 0;
2922           np->parent = parent;
2923           np->left = left;
2924
2925           /* Optimize each of the two split parts.  */
2926           balance_case_nodes (&np->left, np);
2927           balance_case_nodes (&np->right, np);
2928         }
2929       else
2930         {
2931           /* Else leave this branch as one level,
2932              but fill in `parent' fields.  */
2933           np = *head;
2934           np->parent = parent;
2935           for (; np->right; np = np->right)
2936             np->right->parent = np;
2937         }
2938     }
2939 }
2940 \f
2941 /* Search the parent sections of the case node tree
2942    to see if a test for the lower bound of NODE would be redundant.
2943    INDEX_TYPE is the type of the index expression.
2944
2945    The instructions to generate the case decision tree are
2946    output in the same order as nodes are processed so it is
2947    known that if a parent node checks the range of the current
2948    node minus one that the current node is bounded at its lower
2949    span.  Thus the test would be redundant.  */
2950
2951 static int
2952 node_has_low_bound (case_node_ptr node, tree index_type)
2953 {
2954   tree low_minus_one;
2955   case_node_ptr pnode;
2956
2957   /* If the lower bound of this node is the lowest value in the index type,
2958      we need not test it.  */
2959
2960   if (tree_int_cst_equal (node->low, TYPE_MIN_VALUE (index_type)))
2961     return 1;
2962
2963   /* If this node has a left branch, the value at the left must be less
2964      than that at this node, so it cannot be bounded at the bottom and
2965      we need not bother testing any further.  */
2966
2967   if (node->left)
2968     return 0;
2969
2970   low_minus_one = fold (build2 (MINUS_EXPR, TREE_TYPE (node->low),
2971                                 node->low, integer_one_node));
2972
2973   /* If the subtraction above overflowed, we can't verify anything.
2974      Otherwise, look for a parent that tests our value - 1.  */
2975
2976   if (! tree_int_cst_lt (low_minus_one, node->low))
2977     return 0;
2978
2979   for (pnode = node->parent; pnode; pnode = pnode->parent)
2980     if (tree_int_cst_equal (low_minus_one, pnode->high))
2981       return 1;
2982
2983   return 0;
2984 }
2985
2986 /* Search the parent sections of the case node tree
2987    to see if a test for the upper bound of NODE would be redundant.
2988    INDEX_TYPE is the type of the index expression.
2989
2990    The instructions to generate the case decision tree are
2991    output in the same order as nodes are processed so it is
2992    known that if a parent node checks the range of the current
2993    node plus one that the current node is bounded at its upper
2994    span.  Thus the test would be redundant.  */
2995
2996 static int
2997 node_has_high_bound (case_node_ptr node, tree index_type)
2998 {
2999   tree high_plus_one;
3000   case_node_ptr pnode;
3001
3002   /* If there is no upper bound, obviously no test is needed.  */
3003
3004   if (TYPE_MAX_VALUE (index_type) == NULL)
3005     return 1;
3006
3007   /* If the upper bound of this node is the highest value in the type
3008      of the index expression, we need not test against it.  */
3009
3010   if (tree_int_cst_equal (node->high, TYPE_MAX_VALUE (index_type)))
3011     return 1;
3012
3013   /* If this node has a right branch, the value at the right must be greater
3014      than that at this node, so it cannot be bounded at the top and
3015      we need not bother testing any further.  */
3016
3017   if (node->right)
3018     return 0;
3019
3020   high_plus_one = fold (build2 (PLUS_EXPR, TREE_TYPE (node->high),
3021                                 node->high, integer_one_node));
3022
3023   /* If the addition above overflowed, we can't verify anything.
3024      Otherwise, look for a parent that tests our value + 1.  */
3025
3026   if (! tree_int_cst_lt (node->high, high_plus_one))
3027     return 0;
3028
3029   for (pnode = node->parent; pnode; pnode = pnode->parent)
3030     if (tree_int_cst_equal (high_plus_one, pnode->low))
3031       return 1;
3032
3033   return 0;
3034 }
3035
3036 /* Search the parent sections of the
3037    case node tree to see if both tests for the upper and lower
3038    bounds of NODE would be redundant.  */
3039
3040 static int
3041 node_is_bounded (case_node_ptr node, tree index_type)
3042 {
3043   return (node_has_low_bound (node, index_type)
3044           && node_has_high_bound (node, index_type));
3045 }
3046 \f
3047 /* Emit step-by-step code to select a case for the value of INDEX.
3048    The thus generated decision tree follows the form of the
3049    case-node binary tree NODE, whose nodes represent test conditions.
3050    INDEX_TYPE is the type of the index of the switch.
3051
3052    Care is taken to prune redundant tests from the decision tree
3053    by detecting any boundary conditions already checked by
3054    emitted rtx.  (See node_has_high_bound, node_has_low_bound
3055    and node_is_bounded, above.)
3056
3057    Where the test conditions can be shown to be redundant we emit
3058    an unconditional jump to the target code.  As a further
3059    optimization, the subordinates of a tree node are examined to
3060    check for bounded nodes.  In this case conditional and/or
3061    unconditional jumps as a result of the boundary check for the
3062    current node are arranged to target the subordinates associated
3063    code for out of bound conditions on the current node.
3064
3065    We can assume that when control reaches the code generated here,
3066    the index value has already been compared with the parents
3067    of this node, and determined to be on the same side of each parent
3068    as this node is.  Thus, if this node tests for the value 51,
3069    and a parent tested for 52, we don't need to consider
3070    the possibility of a value greater than 51.  If another parent
3071    tests for the value 50, then this node need not test anything.  */
3072
3073 static void
3074 emit_case_nodes (rtx index, case_node_ptr node, rtx default_label,
3075                  tree index_type)
3076 {
3077   /* If INDEX has an unsigned type, we must make unsigned branches.  */
3078   int unsignedp = TYPE_UNSIGNED (index_type);
3079   enum machine_mode mode = GET_MODE (index);
3080   enum machine_mode imode = TYPE_MODE (index_type);
3081
3082   /* See if our parents have already tested everything for us.
3083      If they have, emit an unconditional jump for this node.  */
3084   if (node_is_bounded (node, index_type))
3085     emit_jump (label_rtx (node->code_label));
3086
3087   else if (tree_int_cst_equal (node->low, node->high))
3088     {
3089       /* Node is single valued.  First see if the index expression matches
3090          this node and then check our children, if any.  */
3091
3092       do_jump_if_equal (index,
3093                         convert_modes (mode, imode,
3094                                        expand_expr (node->low, NULL_RTX,
3095                                                     VOIDmode, 0),
3096                                        unsignedp),
3097                         label_rtx (node->code_label), unsignedp);
3098
3099       if (node->right != 0 && node->left != 0)
3100         {
3101           /* This node has children on both sides.
3102              Dispatch to one side or the other
3103              by comparing the index value with this node's value.
3104              If one subtree is bounded, check that one first,
3105              so we can avoid real branches in the tree.  */
3106
3107           if (node_is_bounded (node->right, index_type))
3108             {
3109               emit_cmp_and_jump_insns (index,
3110                                        convert_modes
3111                                        (mode, imode,
3112                                         expand_expr (node->high, NULL_RTX,
3113                                                      VOIDmode, 0),
3114                                         unsignedp),
3115                                        GT, NULL_RTX, mode, unsignedp,
3116                                        label_rtx (node->right->code_label));
3117               emit_case_nodes (index, node->left, default_label, index_type);
3118             }
3119
3120           else if (node_is_bounded (node->left, index_type))
3121             {
3122               emit_cmp_and_jump_insns (index,
3123                                        convert_modes
3124                                        (mode, imode,
3125                                         expand_expr (node->high, NULL_RTX,
3126                                                      VOIDmode, 0),
3127                                         unsignedp),
3128                                        LT, NULL_RTX, mode, unsignedp,
3129                                        label_rtx (node->left->code_label));
3130               emit_case_nodes (index, node->right, default_label, index_type);
3131             }
3132
3133           /* If both children are single-valued cases with no
3134              children, finish up all the work.  This way, we can save
3135              one ordered comparison.  */
3136           else if (tree_int_cst_equal (node->right->low, node->right->high)
3137                    && node->right->left == 0
3138                    && node->right->right == 0
3139                    && tree_int_cst_equal (node->left->low, node->left->high)
3140                    && node->left->left == 0
3141                    && node->left->right == 0)
3142             {
3143               /* Neither node is bounded.  First distinguish the two sides;
3144                  then emit the code for one side at a time.  */
3145
3146               /* See if the value matches what the right hand side
3147                  wants.  */
3148               do_jump_if_equal (index,
3149                                 convert_modes (mode, imode,
3150                                                expand_expr (node->right->low,
3151                                                             NULL_RTX,
3152                                                             VOIDmode, 0),
3153                                                unsignedp),
3154                                 label_rtx (node->right->code_label),
3155                                 unsignedp);
3156
3157               /* See if the value matches what the left hand side
3158                  wants.  */
3159               do_jump_if_equal (index,
3160                                 convert_modes (mode, imode,
3161                                                expand_expr (node->left->low,
3162                                                             NULL_RTX,
3163                                                             VOIDmode, 0),
3164                                                unsignedp),
3165                                 label_rtx (node->left->code_label),
3166                                 unsignedp);
3167             }
3168
3169           else
3170             {
3171               /* Neither node is bounded.  First distinguish the two sides;
3172                  then emit the code for one side at a time.  */
3173
3174               tree test_label = build_decl (LABEL_DECL, NULL_TREE, NULL_TREE);
3175
3176               /* See if the value is on the right.  */
3177               emit_cmp_and_jump_insns (index,
3178                                        convert_modes
3179                                        (mode, imode,
3180                                         expand_expr (node->high, NULL_RTX,
3181                                                      VOIDmode, 0),
3182                                         unsignedp),
3183                                        GT, NULL_RTX, mode, unsignedp,
3184                                        label_rtx (test_label));
3185
3186               /* Value must be on the left.
3187                  Handle the left-hand subtree.  */
3188               emit_case_nodes (index, node->left, default_label, index_type);
3189               /* If left-hand subtree does nothing,
3190                  go to default.  */
3191               emit_jump (default_label);
3192
3193               /* Code branches here for the right-hand subtree.  */
3194               expand_label (test_label);
3195               emit_case_nodes (index, node->right, default_label, index_type);
3196             }
3197         }
3198
3199       else if (node->right != 0 && node->left == 0)
3200         {
3201           /* Here we have a right child but no left so we issue conditional
3202              branch to default and process the right child.
3203
3204              Omit the conditional branch to default if we it avoid only one
3205              right child; it costs too much space to save so little time.  */
3206
3207           if (node->right->right || node->right->left
3208               || !tree_int_cst_equal (node->right->low, node->right->high))
3209             {
3210               if (!node_has_low_bound (node, index_type))
3211                 {
3212                   emit_cmp_and_jump_insns (index,
3213                                            convert_modes
3214                                            (mode, imode,
3215                                             expand_expr (node->high, NULL_RTX,
3216                                                          VOIDmode, 0),
3217                                             unsignedp),
3218                                            LT, NULL_RTX, mode, unsignedp,
3219                                            default_label);
3220                 }
3221
3222               emit_case_nodes (index, node->right, default_label, index_type);
3223             }
3224           else
3225             /* We cannot process node->right normally
3226                since we haven't ruled out the numbers less than
3227                this node's value.  So handle node->right explicitly.  */
3228             do_jump_if_equal (index,
3229                               convert_modes
3230                               (mode, imode,
3231                                expand_expr (node->right->low, NULL_RTX,
3232                                             VOIDmode, 0),
3233                                unsignedp),
3234                               label_rtx (node->right->code_label), unsignedp);
3235         }
3236
3237       else if (node->right == 0 && node->left != 0)
3238         {
3239           /* Just one subtree, on the left.  */
3240           if (node->left->left || node->left->right
3241               || !tree_int_cst_equal (node->left->low, node->left->high))
3242             {
3243               if (!node_has_high_bound (node, index_type))
3244                 {
3245                   emit_cmp_and_jump_insns (index,
3246                                            convert_modes
3247                                            (mode, imode,
3248                                             expand_expr (node->high, NULL_RTX,
3249                                                          VOIDmode, 0),
3250                                             unsignedp),
3251                                            GT, NULL_RTX, mode, unsignedp,
3252                                            default_label);
3253                 }
3254
3255               emit_case_nodes (index, node->left, default_label, index_type);
3256             }
3257           else
3258             /* We cannot process node->left normally
3259                since we haven't ruled out the numbers less than
3260                this node's value.  So handle node->left explicitly.  */
3261             do_jump_if_equal (index,
3262                               convert_modes
3263                               (mode, imode,
3264                                expand_expr (node->left->low, NULL_RTX,
3265                                             VOIDmode, 0),
3266                                unsignedp),
3267                               label_rtx (node->left->code_label), unsignedp);
3268         }
3269     }
3270   else
3271     {
3272       /* Node is a range.  These cases are very similar to those for a single
3273          value, except that we do not start by testing whether this node
3274          is the one to branch to.  */
3275
3276       if (node->right != 0 && node->left != 0)
3277         {
3278           /* Node has subtrees on both sides.
3279              If the right-hand subtree is bounded,
3280              test for it first, since we can go straight there.
3281              Otherwise, we need to make a branch in the control structure,
3282              then handle the two subtrees.  */
3283           tree test_label = 0;
3284
3285           if (node_is_bounded (node->right, index_type))
3286             /* Right hand node is fully bounded so we can eliminate any
3287                testing and branch directly to the target code.  */
3288             emit_cmp_and_jump_insns (index,
3289                                      convert_modes
3290                                      (mode, imode,
3291                                       expand_expr (node->high, NULL_RTX,
3292                                                    VOIDmode, 0),
3293                                       unsignedp),
3294                                      GT, NULL_RTX, mode, unsignedp,
3295                                      label_rtx (node->right->code_label));
3296           else
3297             {
3298               /* Right hand node requires testing.
3299                  Branch to a label where we will handle it later.  */
3300
3301               test_label = build_decl (LABEL_DECL, NULL_TREE, NULL_TREE);
3302               emit_cmp_and_jump_insns (index,
3303                                        convert_modes
3304                                        (mode, imode,
3305                                         expand_expr (node->high, NULL_RTX,
3306                                                      VOIDmode, 0),
3307                                         unsignedp),
3308                                        GT, NULL_RTX, mode, unsignedp,
3309                                        label_rtx (test_label));
3310             }
3311
3312           /* Value belongs to this node or to the left-hand subtree.  */
3313
3314           emit_cmp_and_jump_insns (index,
3315                                    convert_modes
3316                                    (mode, imode,
3317                                     expand_expr (node->low, NULL_RTX,
3318                                                  VOIDmode, 0),
3319                                     unsignedp),
3320                                    GE, NULL_RTX, mode, unsignedp,
3321                                    label_rtx (node->code_label));
3322
3323           /* Handle the left-hand subtree.  */
3324           emit_case_nodes (index, node->left, default_label, index_type);
3325
3326           /* If right node had to be handled later, do that now.  */
3327
3328           if (test_label)
3329             {
3330               /* If the left-hand subtree fell through,
3331                  don't let it fall into the right-hand subtree.  */
3332               emit_jump (default_label);
3333
3334               expand_label (test_label);
3335               emit_case_nodes (index, node->right, default_label, index_type);
3336             }
3337         }
3338
3339       else if (node->right != 0 && node->left == 0)
3340         {
3341           /* Deal with values to the left of this node,
3342              if they are possible.  */
3343           if (!node_has_low_bound (node, index_type))
3344             {
3345               emit_cmp_and_jump_insns (index,
3346                                        convert_modes
3347                                        (mode, imode,
3348                                         expand_expr (node->low, NULL_RTX,
3349                                                      VOIDmode, 0),
3350                                         unsignedp),
3351                                        LT, NULL_RTX, mode, unsignedp,
3352                                        default_label);
3353             }
3354
3355           /* Value belongs to this node or to the right-hand subtree.  */
3356
3357           emit_cmp_and_jump_insns (index,
3358                                    convert_modes
3359                                    (mode, imode,
3360                                     expand_expr (node->high, NULL_RTX,
3361                                                  VOIDmode, 0),
3362                                     unsignedp),
3363                                    LE, NULL_RTX, mode, unsignedp,
3364                                    label_rtx (node->code_label));
3365
3366           emit_case_nodes (index, node->right, default_label, index_type);
3367         }
3368
3369       else if (node->right == 0 && node->left != 0)
3370         {
3371           /* Deal with values to the right of this node,
3372              if they are possible.  */
3373           if (!node_has_high_bound (node, index_type))
3374             {
3375               emit_cmp_and_jump_insns (index,
3376                                        convert_modes
3377                                        (mode, imode,
3378                                         expand_expr (node->high, NULL_RTX,
3379                                                      VOIDmode, 0),
3380                                         unsignedp),
3381                                        GT, NULL_RTX, mode, unsignedp,
3382                                        default_label);
3383             }
3384
3385           /* Value belongs to this node or to the left-hand subtree.  */
3386
3387           emit_cmp_and_jump_insns (index,
3388                                    convert_modes
3389                                    (mode, imode,
3390                                     expand_expr (node->low, NULL_RTX,
3391                                                  VOIDmode, 0),
3392                                     unsignedp),
3393                                    GE, NULL_RTX, mode, unsignedp,
3394                                    label_rtx (node->code_label));
3395
3396           emit_case_nodes (index, node->left, default_label, index_type);
3397         }
3398
3399       else
3400         {
3401           /* Node has no children so we check low and high bounds to remove
3402              redundant tests.  Only one of the bounds can exist,
3403              since otherwise this node is bounded--a case tested already.  */
3404           int high_bound = node_has_high_bound (node, index_type);
3405           int low_bound = node_has_low_bound (node, index_type);
3406
3407           if (!high_bound && low_bound)
3408             {
3409               emit_cmp_and_jump_insns (index,
3410                                        convert_modes
3411                                        (mode, imode,
3412                                         expand_expr (node->high, NULL_RTX,
3413                                                      VOIDmode, 0),
3414                                         unsignedp),
3415                                        GT, NULL_RTX, mode, unsignedp,
3416                                        default_label);
3417             }
3418
3419           else if (!low_bound && high_bound)
3420             {
3421               emit_cmp_and_jump_insns (index,
3422                                        convert_modes
3423                                        (mode, imode,
3424                                         expand_expr (node->low, NULL_RTX,
3425                                                      VOIDmode, 0),
3426                                         unsignedp),
3427                                        LT, NULL_RTX, mode, unsignedp,
3428                                        default_label);
3429             }
3430           else if (!low_bound && !high_bound)
3431             {
3432               /* Widen LOW and HIGH to the same width as INDEX.  */
3433               tree type = lang_hooks.types.type_for_mode (mode, unsignedp);
3434               tree low = build1 (CONVERT_EXPR, type, node->low);
3435               tree high = build1 (CONVERT_EXPR, type, node->high);
3436               rtx low_rtx, new_index, new_bound;
3437
3438               /* Instead of doing two branches, emit one unsigned branch for
3439                  (index-low) > (high-low).  */
3440               low_rtx = expand_expr (low, NULL_RTX, mode, 0);
3441               new_index = expand_simple_binop (mode, MINUS, index, low_rtx,
3442                                                NULL_RTX, unsignedp,
3443                                                OPTAB_WIDEN);
3444               new_bound = expand_expr (fold (build2 (MINUS_EXPR, type,
3445                                                      high, low)),
3446                                        NULL_RTX, mode, 0);
3447
3448               emit_cmp_and_jump_insns (new_index, new_bound, GT, NULL_RTX,
3449                                        mode, 1, default_label);
3450             }
3451
3452           emit_jump (label_rtx (node->code_label));
3453         }
3454     }
3455 }