OSDN Git Service

Update email address for self.
[pf3gnuchains/gcc-fork.git] / gcc / gcse.c
index 01d57ef..620b986 100644 (file)
@@ -158,14 +158,17 @@ Software Foundation, 59 Temple Place - Suite 330, Boston, MA
 #include "basic-block.h"
 #include "output.h"
 #include "function.h"
-#include "expr.h" 
+#include "expr.h"
 #include "except.h"
 #include "ggc.h"
 #include "params.h"
+#include "cselib.h"
 
 #include "obstack.h"
+
+/* We don't want to use xmalloc.  */
+#undef obstack_chunk_alloc
 #define obstack_chunk_alloc gmalloc
-#define obstack_chunk_free free
 
 /* Propagate flow information through back edges and thus enable PRE's
    moving loop invariant calculations out of loops.
@@ -454,13 +457,13 @@ static int reg_set_table_size;
 #define REG_SET_TABLE_SLOP 100
 
 /* This is a list of expressions which are MEMs and will be used by load
-   or store motion. 
+   or store motion.
    Load motion tracks MEMs which aren't killed by
    anything except itself. (ie, loads and stores to a single location).
-   We can then allow movement of these MEM refs with a little special 
+   We can then allow movement of these MEM refs with a little special
    allowance. (all stores copy the same value to the reaching reg used
    for the loads).  This means all values used to store into memory must have
-   no side effects so we can re-issue the setter value.  
+   no side effects so we can re-issue the setter value.
    Store Motion uses this structure as an expression table to track stores
    which look interesting, and might be moveable towards the exit block.  */
 
@@ -613,16 +616,17 @@ static int cprop_jump             PARAMS ((basic_block, rtx, rtx, rtx, rtx));
 static void mems_conflict_for_gcse_p PARAMS ((rtx, rtx, void *));
 static int load_killed_in_block_p    PARAMS ((basic_block, int, rtx, int));
 static void canon_list_insert        PARAMS ((rtx, rtx, void *));
-static int cprop_insn          PARAMS ((basic_block, rtx, int));
+static int cprop_insn          PARAMS ((rtx, int));
 static int cprop               PARAMS ((int));
 static int one_cprop_pass      PARAMS ((int, int));
+static bool constprop_register PARAMS ((rtx, rtx, rtx, int));
 static struct expr *find_bypass_set PARAMS ((int, int));
 static int bypass_block                    PARAMS ((basic_block, rtx, rtx));
 static int bypass_conditional_jumps PARAMS ((void));
 static void alloc_pre_mem      PARAMS ((int, int));
 static void free_pre_mem       PARAMS ((void));
 static void compute_pre_data   PARAMS ((void));
-static int pre_expr_reaches_here_p PARAMS ((basic_block, struct expr *, 
+static int pre_expr_reaches_here_p PARAMS ((basic_block, struct expr *,
                                            basic_block));
 static void insert_insn_end_bb PARAMS ((struct expr *, basic_block, int));
 static void pre_insert_copy_insn PARAMS ((struct expr *, rtx));
@@ -635,7 +639,7 @@ static void alloc_code_hoist_mem PARAMS ((int, int));
 static void free_code_hoist_mem        PARAMS ((void));
 static void compute_code_hoist_vbeinout        PARAMS ((void));
 static void compute_code_hoist_data PARAMS ((void));
-static int hoist_expr_reaches_here_p PARAMS ((basic_block, int, basic_block, 
+static int hoist_expr_reaches_here_p PARAMS ((basic_block, int, basic_block,
                                              char *));
 static void hoist_code         PARAMS ((void));
 static int one_code_hoisting_pass PARAMS ((void));
@@ -658,7 +662,7 @@ static int handle_avail_expr        PARAMS ((rtx, struct expr *));
 static int classic_gcse                PARAMS ((void));
 static int one_classic_gcse_pass PARAMS ((int));
 static void invalidate_nonnull_info PARAMS ((rtx, rtx, void *));
-static void delete_null_pointer_checks_1 PARAMS ((unsigned int *,
+static int delete_null_pointer_checks_1 PARAMS ((unsigned int *,
                                                  sbitmap *, sbitmap *,
                                                  struct null_pointer_info *));
 static rtx process_insert_insn PARAMS ((struct expr *));
@@ -677,7 +681,7 @@ static inline struct ls_expr * first_ls_expr PARAMS ((void));
 static inline struct ls_expr * next_ls_expr  PARAMS ((struct ls_expr *));
 static int simple_mem                  PARAMS ((rtx));
 static void invalidate_any_buried_refs PARAMS ((rtx));
-static void compute_ld_motion_mems     PARAMS ((void)); 
+static void compute_ld_motion_mems     PARAMS ((void));
 static void trim_ld_motion_mems                PARAMS ((void));
 static void update_ld_motion_stores    PARAMS ((struct expr *));
 static void reg_set_info               PARAMS ((rtx, rtx, void *));
@@ -693,7 +697,7 @@ static void build_store_vectors             PARAMS ((void));
 static void insert_insn_start_bb       PARAMS ((rtx, basic_block));
 static int insert_store                        PARAMS ((struct ls_expr *, edge));
 static void replace_store_insn         PARAMS ((rtx, rtx, basic_block));
-static void delete_store               PARAMS ((struct ls_expr *, 
+static void delete_store               PARAMS ((struct ls_expr *,
                                                 basic_block));
 static void free_store_memory          PARAMS ((void));
 static void store_motion               PARAMS ((void));
@@ -701,6 +705,8 @@ static void free_insn_expr_list_list        PARAMS ((rtx *));
 static void clear_modify_mem_tables    PARAMS ((void));
 static void free_modify_mem_tables     PARAMS ((void));
 static rtx gcse_emit_move_after                PARAMS ((rtx, rtx, rtx));
+static bool do_local_cprop             PARAMS ((rtx, rtx, int));
+static void local_cprop_pass           PARAMS ((int));
 \f
 /* Entry point for global common subexpression elimination.
    F is the first instruction in the function.  */
@@ -726,7 +732,7 @@ gcse_main (f, file)
      setjmp, so just punt to be safe.  */
   if (current_function_calls_setjmp)
     return 0;
-   
+
   /* Assume that we do not need to run jump optimizations after gcse.  */
   run_jump_opt_after_gcse = 0;
 
@@ -764,7 +770,7 @@ gcse_main (f, file)
 
   /* If allocating memory for the cprop bitmap would take up too much
      storage it's better just to disable the optimization.  */
-  if ((n_basic_blocks 
+  if ((n_basic_blocks
        * SBITMAP_SET_SIZE (max_gcse_regno)
        * sizeof (SBITMAP_ELT_TYPE)) > MAX_GCSE_MEMORY)
     {
@@ -826,7 +832,7 @@ gcse_main (f, file)
       if (optimize_size)
        changed |= one_classic_gcse_pass (pass + 1);
       else
-        {
+       {
          changed |= one_pre_gcse_pass (pass + 1);
          /* We may have just created new basic blocks.  Release and
             recompute various things which are sized on the number of
@@ -863,7 +869,7 @@ gcse_main (f, file)
         for space, we use a classic gcse algorithm instead of partial
         redundancy algorithms).  */
       if (optimize_size)
-        {
+       {
          max_gcse_regno = max_reg_num ();
          alloc_gcse_mem (f);
          changed |= one_code_hoisting_pass ();
@@ -871,7 +877,7 @@ gcse_main (f, file)
 
          if (max_pass_bytes < bytes_used)
            max_pass_bytes = bytes_used;
-        }
+       }
 
       if (file)
        {
@@ -1118,7 +1124,7 @@ get_bitmap_width (n, x, y)
    the expr hash table; if nonzero this routine looks at the set hash table.
    Additionally, TRANSP is computed as ~TRANSP, since this is really cprop's
    ABSALTERED.  */
+
 static void
 compute_local_properties (transp, comp, antloc, setp)
      sbitmap *transp;
@@ -1128,7 +1134,7 @@ compute_local_properties (transp, comp, antloc, setp)
 {
   unsigned int i, hash_table_size;
   struct expr **hash_table;
-  
+
   /* Initialize any bitmaps that were passed in.  */
   if (transp)
     {
@@ -1305,11 +1311,11 @@ static basic_block current_bb;
 /* See whether X, the source of a set, is something we want to consider for
    GCSE.  */
 
+static GTY(()) rtx test_insn;
 static int
 want_to_gcse_p (x)
      rtx x;
 {
-  static rtx test_insn = 0;
   int num_clobbers = 0;
   int icode;
 
@@ -1343,7 +1349,6 @@ want_to_gcse_p (x)
                                                   FIRST_PSEUDO_REGISTER * 2),
                                      const0_rtx));
       NEXT_INSN (test_insn) = PREV_INSN (test_insn) = 0;
-      ggc_add_rtx_root (&test_insn, 1);
     }
 
   /* Now make an insn like the one we would make when GCSE'ing and see if
@@ -1379,7 +1384,7 @@ oprs_unchanged_p (x, insn, avail_p)
 
        if (info->last_bb != current_bb)
          return 1;
-        if (avail_p)
+       if (avail_p)
          return info->last_set < INSN_CUID (insn);
        else
          return info->first_set >= INSN_CUID (insn);
@@ -1471,8 +1476,8 @@ mems_conflict_for_gcse_p (dest, setter, data)
     return;
 
   /* If we are setting a MEM in our list of specially recognized MEMs,
-     don't mark as killed this time.  */ 
-  
+     don't mark as killed this time.  */
+
   if (dest == gcse_mem_operand && pre_ldst_mems != NULL)
     {
       if (!find_rtx_in_ldst (dest))
@@ -1523,7 +1528,7 @@ load_killed_in_block_p (bb, uid_limit, x, avail_p)
        return 1;
 
       /* SETTER must be an INSN of some kind that sets memory.  Call
-        note_stores to examine each hunk of memory that is modified. 
+        note_stores to examine each hunk of memory that is modified.
 
         The note_stores interface is pretty limited, so we have to
         communicate via global variables.  Yuk.  */
@@ -1588,7 +1593,7 @@ hash_string_1 (ps)
 {
   unsigned hash = 0;
   const unsigned char *p = (const unsigned char *) ps;
-  
+
   if (p)
     while (*p)
       hash += *p++;
@@ -1996,7 +2001,7 @@ insert_expr_in_table (x, mode, insn, antic_p, avail_p)
        /* Add EXPR to end of this hash chain.  */
        last_expr->next_same_hash = cur_expr;
 
-      /* Set the fields of the expr element.  */ 
+      /* Set the fields of the expr element.  */
       cur_expr->expr = x;
       cur_expr->bitmap_index = n_exprs++;
       cur_expr->next_same_hash = NULL;
@@ -2319,7 +2324,7 @@ dump_hash_table (file, name, table, table_size, total_size)
   unsigned int *hash_val;
   struct expr *expr;
 
-  flat_table 
+  flat_table
     = (struct expr **) xcalloc (total_size, sizeof (struct expr *));
   hash_val = (unsigned int *) xmalloc (total_size * sizeof (unsigned int));
 
@@ -2385,7 +2390,7 @@ record_last_reg_set_info (insn, regno)
    Note we store a pair of elements in the list, so they have to be
    taken off pairwise.  */
 
-static void 
+static void
 canon_list_insert (dest, unused1, v_insn)
      rtx    dest ATTRIBUTE_UNUSED;
      rtx    unused1 ATTRIBUTE_UNUSED;
@@ -2409,12 +2414,12 @@ canon_list_insert (dest, unused1, v_insn)
 
   dest_addr = get_addr (XEXP (dest, 0));
   dest_addr = canon_rtx (dest_addr);
-  insn = (rtx) v_insn;  
+  insn = (rtx) v_insn;
   bb = BLOCK_NUM (insn);
 
-  canon_modify_mem_list[bb] = 
+  canon_modify_mem_list[bb] =
     alloc_EXPR_LIST (VOIDmode, dest_addr, canon_modify_mem_list[bb]);
-  canon_modify_mem_list[bb] = 
+  canon_modify_mem_list[bb] =
     alloc_EXPR_LIST (VOIDmode, dest, canon_modify_mem_list[bb]);
   bitmap_set_bit (canon_modify_mem_list_set, bb);
 }
@@ -2439,8 +2444,8 @@ record_last_mem_set_info (insn)
       /* Note that traversals of this loop (other than for free-ing)
         will break after encountering a CALL_INSN.  So, there's no
         need to insert a pair of items, as canon_list_insert does.  */
-      canon_modify_mem_list[bb] = 
-        alloc_INSN_LIST (insn, canon_modify_mem_list[bb]);
+      canon_modify_mem_list[bb] =
+       alloc_INSN_LIST (insn, canon_modify_mem_list[bb]);
       bitmap_set_bit (canon_modify_mem_list_set, bb);
     }
   else
@@ -2528,7 +2533,7 @@ compute_hash_table (set_p)
          if (GET_CODE (insn) == CALL_INSN)
            {
              bool clobbers_all = false;
-#ifdef NON_SAVING_SETJMP 
+#ifdef NON_SAVING_SETJMP
              if (NON_SAVING_SETJMP
                  && find_reg_note (insn, REG_SETJMP, NULL_RTX))
                clobbers_all = true;
@@ -2553,12 +2558,12 @@ compute_hash_table (set_p)
        if (INSN_P (insn))
          {
            if (find_reg_note (insn, REG_LIBCALL, NULL_RTX))
-              in_libcall_block = 1;
-            else if (set_p && find_reg_note (insn, REG_RETVAL, NULL_RTX))
-              in_libcall_block = 0;
-            hash_scan_insn (insn, set_p, in_libcall_block);
-            if (!set_p && find_reg_note (insn, REG_RETVAL, NULL_RTX))
-              in_libcall_block = 0;
+             in_libcall_block = 1;
+           else if (set_p && find_reg_note (insn, REG_RETVAL, NULL_RTX))
+             in_libcall_block = 0;
+           hash_scan_insn (insn, set_p, in_libcall_block);
+           if (!set_p && find_reg_note (insn, REG_RETVAL, NULL_RTX))
+             in_libcall_block = 0;
          }
     }
 
@@ -2815,7 +2820,7 @@ oprs_not_set_p (x, insn)
       return 1;
 
     case MEM:
-      if (load_killed_in_block_p (BLOCK_FOR_INSN (insn), 
+      if (load_killed_in_block_p (BLOCK_FOR_INSN (insn),
                                  INSN_CUID (insn), x, 0))
        return 0;
       else
@@ -3031,7 +3036,7 @@ compute_kill_rd ()
        }
 }
 
-/* Compute the reaching definitions as in 
+/* Compute the reaching definitions as in
    Compilers Principles, Techniques, and Tools. Aho, Sethi, Ullman,
    Chapter 10.  It is the same algorithm as used for computing available
    expressions but applied to the gens and kills of reaching definitions.  */
@@ -3264,7 +3269,7 @@ expr_reaches_here_p_work (occr, expr, bb, check_self_loop, visited)
       else
        {
          visited[pred_bb->index] = 1;
-         if (expr_reaches_here_p_work (occr, expr, pred_bb, check_self_loop, 
+         if (expr_reaches_here_p_work (occr, expr, pred_bb, check_self_loop,
              visited))
 
            return 1;
@@ -3289,7 +3294,7 @@ expr_reaches_here_p (occr, expr, bb, check_self_loop)
   char *visited = (char *) xcalloc (last_basic_block, 1);
 
   rval = expr_reaches_here_p_work (occr, expr, bb, check_self_loop, visited);
-  
+
   free (visited);
   return rval;
 }
@@ -3307,7 +3312,7 @@ computing_insn (expr, insn)
   basic_block bb = BLOCK_FOR_INSN (insn);
 
   if (expr->avail_occr->next == NULL)
-    {    
+    {
       if (BLOCK_FOR_INSN (expr->avail_occr->insn) == bb)
        /* The available expression is actually itself
           (i.e. a loop in the flow graph) so do nothing.  */
@@ -3320,7 +3325,7 @@ computing_insn (expr, insn)
   else
     {
       /* Pattern is computed more than once.
-        Search backwards from this insn to see how many of these 
+        Search backwards from this insn to see how many of these
         computations actually reach this insn.  */
       struct occr *occr;
       rtx insn_computes_expr = NULL;
@@ -3438,7 +3443,7 @@ can_disregard_other_sets (addr_this_reg, insn, for_combine)
              return 0;
          }
 
-       *addr_this_reg = this_reg; 
+       *addr_this_reg = this_reg;
       }
 
   return number_of_reaching_defs;
@@ -3594,7 +3599,7 @@ handle_avail_expr (insn, expr)
                       REGNO (SET_DEST (PATTERN (NEXT_INSN
                                                 (insn_computes_expr)))));
              fprintf (gcse_file, "set in insn %d\n",
-                      INSN_UID (insn_computes_expr)); 
+                      INSN_UID (insn_computes_expr));
            }
        }
     }
@@ -3827,7 +3832,7 @@ compute_transp (x, indx, bmap, set_p)
              dest = XEXP (list_entry, 0);
              list_entry = XEXP (list_entry, 1);
              dest_addr = XEXP (list_entry, 0);
-             
+
              if (canon_true_dependence (dest, GET_MODE (dest), dest_addr,
                                         x, rtx_addr_varies_p))
                {
@@ -3972,24 +3977,26 @@ try_replace_reg (from, to, insn)
   int success = 0;
   rtx set = single_set (insn);
 
-  success = validate_replace_src (from, to, insn);
+  validate_replace_src_group (from, to, insn);
+  if (num_changes_pending () && apply_change_group ())
+    success = 1;
 
-  /* If above failed and this is a single set, try to simplify the source of
-     the set given our substitution.  We could perhaps try this for multiple
-     SETs, but it probably won't buy us anything.  */
-  if (!success && set != 0)
+  if (!success && set && reg_mentioned_p (from, SET_SRC (set)))
     {
+      /* If above failed and this is a single set, try to simplify the source of
+        the set given our substitution.  We could perhaps try this for multiple
+        SETs, but it probably won't buy us anything.  */
       src = simplify_replace_rtx (SET_SRC (set), from, to);
 
       if (!rtx_equal_p (src, SET_SRC (set))
          && validate_change (insn, &SET_SRC (set), src, 0))
        success = 1;
-    }
 
-  /* If we've failed to do replacement, have a single SET, and don't already
-     have a note, add a REG_EQUAL note to not lose information.  */
-  if (!success && note == 0 && set != 0)
-    note = set_unique_reg_note (insn, REG_EQUAL, copy_rtx (src));
+      /* If we've failed to do replacement, have a single SET, and don't already
+        have a note, add a REG_EQUAL note to not lose information.  */
+      if (!success && note == 0 && set != 0)
+       note = set_unique_reg_note (insn, REG_EQUAL, copy_rtx (src));
+    }
 
   /* If there is already a NOTE, update the expression in it with our
      replacement.  */
@@ -4017,7 +4024,7 @@ find_avail_set (regno, insn)
   /* SET1 contains the last set found that can be returned to the caller for
      use in a substitution.  */
   struct expr *set1 = 0;
+
   /* Loops are not possible here.  To get a loop we would need two sets
      available at the start of the block containing INSN.  ie we would
      need two sets like this available at the start of the block:
@@ -4044,7 +4051,7 @@ find_avail_set (regno, insn)
       /* If no available set was found we've reached the end of the
         (possibly empty) copy chain.  */
       if (set == 0)
-       break;
+       break;
 
       if (GET_CODE (set->expr) != SET)
        abort ();
@@ -4053,7 +4060,7 @@ find_avail_set (regno, insn)
 
       /* We know the set is available.
         Now check that SRC is ANTLOC (i.e. none of the source operands
-        have changed since the start of the block).  
+        have changed since the start of the block).
 
          If the source operand changed, we may still use it for the next
          iteration of this loop, but we may not use it for substitutions.  */
@@ -4079,9 +4086,9 @@ find_avail_set (regno, insn)
 /* Subroutine of cprop_insn that tries to propagate constants into
    JUMP_INSNS.  JUMP must be a conditional jump.  If SETCC is non-NULL
    it is the instruction that immediately preceeds JUMP, and must be a
-   single SET of a CC_MODE register.  FROM is what we will try to replace,
+   single SET of a register.  FROM is what we will try to replace,
    SRC is the constant we will try to substitute for it.  Returns nonzero
-   if a change was made. */
+   if a change was made.  */
 
 static int
 cprop_jump (bb, setcc, jump, from, src)
@@ -4097,9 +4104,12 @@ cprop_jump (bb, setcc, jump, from, src)
   /* First substitute in the INSN condition as the SET_SRC of the JUMP,
      then substitute that given values in this expanded JUMP.  */
   if (setcc != NULL)
-    new_set = simplify_replace_rtx (SET_SRC (set),
-                                   SET_DEST (PATTERN (setcc)),
-                                   SET_SRC (PATTERN (setcc)));
+    {
+      rtx setcc_set = single_set (setcc);
+      new_set = simplify_replace_rtx (SET_SRC (set),
+                                     SET_DEST (setcc_set),
+                                     SET_SRC (setcc_set));
+    }
   else
     new_set = set;
 
@@ -4109,7 +4119,7 @@ cprop_jump (bb, setcc, jump, from, src)
      register.  */
   if (rtx_equal_p (new, new_set))
     return 0;
+
   /* If this is now a no-op delete it, otherwise this must be a valid insn.  */
   if (new == pc_rtx)
     delete_insn (jump);
@@ -4127,7 +4137,7 @@ cprop_jump (bb, setcc, jump, from, src)
 
 #ifdef HAVE_cc0
   /* Delete the cc0 setter.  */
-  if (setcc != NULL && SET_DEST (PATTERN (setcc)) == cc0_rtx)
+  if (setcc != NULL && CC0_P (SET_DEST (single_set (setcc))))
     delete_insn (setcc);
 #endif
 
@@ -4137,7 +4147,7 @@ cprop_jump (bb, setcc, jump, from, src)
   if (gcse_file != NULL)
     {
       fprintf (gcse_file,
-              "CONST-PROP: Replacing reg %d in insn %d with constant ",
+              "CONST-PROP: Replacing reg %d in jump_insn %d with constant ",
               REGNO (from), INSN_UID (jump));
       print_rtl (gcse_file, src);
       fprintf (gcse_file, "\n");
@@ -4147,12 +4157,48 @@ cprop_jump (bb, setcc, jump, from, src)
   return 1;
 }
 
+static bool
+constprop_register (insn, from, to, alter_jumps)
+     rtx insn;
+     rtx from;
+     rtx to;
+     int alter_jumps;
+{
+  rtx sset;
+
+  /* Check for reg or cc0 setting instructions followed by
+     conditional branch instructions first.  */
+  if (alter_jumps
+      && (sset = single_set (insn)) != NULL
+      && any_condjump_p (NEXT_INSN (insn)) && onlyjump_p (NEXT_INSN (insn)))
+    {
+      rtx dest = SET_DEST (sset);
+      if ((REG_P (dest) || CC0_P (dest))
+         && cprop_jump (BLOCK_FOR_INSN (insn), insn, NEXT_INSN (insn), from, to))
+       return 1;
+    }
+
+  /* Handle normal insns next.  */
+  if (GET_CODE (insn) == INSN
+      && try_replace_reg (from, to, insn))
+    return 1;
+
+  /* Try to propagate a CONST_INT into a conditional jump.
+     We're pretty specific about what we will handle in this
+     code, we can extend this as necessary over time.
+
+     Right now the insn in question must look like
+     (set (pc) (if_then_else ...))  */
+  else if (alter_jumps && any_condjump_p (insn) && onlyjump_p (insn))
+    return cprop_jump (BLOCK_FOR_INSN (insn), NULL, insn, from, to);
+  return 0;
+}
+
 /* Perform constant and copy propagation on INSN.
    The result is non-zero if a change was made.  */
 
 static int
-cprop_insn (bb, insn, alter_jumps)
-     basic_block bb;
+cprop_insn (insn, alter_jumps)
      rtx insn;
      int alter_jumps;
 {
@@ -4165,7 +4211,7 @@ cprop_insn (bb, insn, alter_jumps)
 
   reg_use_count = 0;
   note_uses (&PATTERN (insn), find_used_regs, NULL);
-  
+
   note = find_reg_equal_equiv_note (insn);
 
   /* We may win even when propagating constants into notes.  */
@@ -4194,7 +4240,7 @@ cprop_insn (bb, insn, alter_jumps)
       set = find_avail_set (regno, insn);
       if (! set)
        continue;
-  
+
       pat = set->expr;
       /* ??? We might be able to handle PARALLELs.  Later.  */
       if (GET_CODE (pat) != SET)
@@ -4205,57 +4251,18 @@ cprop_insn (bb, insn, alter_jumps)
       /* Constant propagation.  */
       if (CONSTANT_P (src))
        {
-         /* Check for MODE_CC setting instructions followed by
-            conditional branch instructions first.  */
-         if (alter_jumps
-             && single_set (insn)
-             && any_condjump_p (NEXT_INSN (insn))
-              && onlyjump_p (NEXT_INSN (insn)))
-           {
-             rtx dest = SET_DEST (PATTERN (insn));
-             if ((GET_MODE_CLASS (GET_MODE (dest)) == MODE_CC
-#ifdef HAVE_cc0
-                  || dest == cc0_rtx
-#endif
-                 ) && cprop_jump (bb, insn, NEXT_INSN (insn),
-                                  reg_used->reg_rtx, src))
-               {
-                 changed = 1;
-                 break;
-               }
-           }
-
-         /* Handle normal insns next.  */
-         if (GET_CODE (insn) == INSN
-             && try_replace_reg (reg_used->reg_rtx, src, insn))
+          if (constprop_register (insn, reg_used->reg_rtx, src, alter_jumps))
            {
              changed = 1;
              const_prop_count++;
              if (gcse_file != NULL)
                {
-                 fprintf (gcse_file, "CONST-PROP: Replacing reg %d in ",
-                          regno);
-                 fprintf (gcse_file, "insn %d with constant ",
-                          INSN_UID (insn));
+                 fprintf (gcse_file, "GLOBAL CONST-PROP: Replacing reg %d in ", regno);
+                 fprintf (gcse_file, "insn %d with constant ", INSN_UID (insn));
                  print_rtl (gcse_file, src);
                  fprintf (gcse_file, "\n");
                }
-
-             /* The original insn setting reg_used may or may not now be
-                deletable.  We leave the deletion to flow.  */
            }
-
-         /* Try to propagate a CONST_INT into a conditional jump.
-            We're pretty specific about what we will handle in this
-            code, we can extend this as necessary over time.
-
-            Right now the insn in question must look like
-            (set (pc) (if_then_else ...))  */
-         else if (alter_jumps
-                  && any_condjump_p (insn)
-                  && onlyjump_p (insn))
-           changed |= cprop_jump (bb, NULL, insn, reg_used->reg_rtx, src);
-
        }
       else if (GET_CODE (src) == REG
               && REGNO (src) >= FIRST_PSEUDO_REGISTER
@@ -4267,7 +4274,7 @@ cprop_insn (bb, insn, alter_jumps)
              copy_prop_count++;
              if (gcse_file != NULL)
                {
-                 fprintf (gcse_file, "COPY-PROP: Replacing reg %d in insn %d",
+                 fprintf (gcse_file, "GLOBAL COPY-PROP: Replacing reg %d in insn %d",
                           regno, INSN_UID (insn));
                  fprintf (gcse_file, " with reg %d\n", REGNO (src));
                }
@@ -4284,6 +4291,105 @@ cprop_insn (bb, insn, alter_jumps)
   return changed;
 }
 
+static bool
+do_local_cprop (x, insn, alter_jumps)
+     rtx x;
+     rtx insn;
+     int alter_jumps;
+{
+  rtx newreg = NULL, newcnst = NULL;
+
+  /* Rule out USE instructions and ASM statements as we don't want to change the hard
+     registers mentioned.  */
+  if (GET_CODE (x) == REG
+      && (REGNO (x) >= FIRST_PSEUDO_REGISTER
+          || (GET_CODE (PATTERN (insn)) != USE && asm_noperands (PATTERN (insn)) < 0)))
+    {
+      cselib_val *val = cselib_lookup (x, GET_MODE (x), 0);
+      struct elt_loc_list *l;
+
+      if (!val)
+       return false;
+      for (l = val->locs; l; l = l->next)
+       {
+         rtx this_rtx = l->loc;
+         rtx note;
+
+         if (CONSTANT_P (this_rtx))
+           newcnst = this_rtx;
+         if (REG_P (this_rtx) && REGNO (this_rtx) >= FIRST_PSEUDO_REGISTER
+             /* Don't copy propagate if it has attached REG_EQUIV note.
+                At this point this only function parameters should have
+                REG_EQUIV notes and if the argument slot is used somewhere
+                explicitly, it means address of parameter has been taken,
+                so we should not extend the lifetime of the pseudo.  */
+             && (!(note = find_reg_note (l->setting_insn, REG_EQUIV, NULL_RTX))
+                 || GET_CODE (XEXP (note, 0)) != MEM))
+           newreg = this_rtx;
+       }
+      if (newcnst && constprop_register (insn, x, newcnst, alter_jumps))
+       {
+         if (gcse_file != NULL)
+           {
+             fprintf (gcse_file, "LOCAL CONST-PROP: Replacing reg %d in ",
+                      REGNO (x));
+             fprintf (gcse_file, "insn %d with constant ",
+                      INSN_UID (insn));
+             print_rtl (gcse_file, newcnst);
+             fprintf (gcse_file, "\n");
+           }
+         const_prop_count++;
+         return true;
+       }
+      else if (newreg && newreg != x && try_replace_reg (x, newreg, insn))
+       {
+         if (gcse_file != NULL)
+           {
+             fprintf (gcse_file,
+                      "LOCAL COPY-PROP: Replacing reg %d in insn %d",
+                      REGNO (x), INSN_UID (insn));
+             fprintf (gcse_file, " with reg %d\n", REGNO (newreg));
+           }
+         copy_prop_count++;
+         return true;
+       }
+    }
+  return false;
+}
+
+static void
+local_cprop_pass (alter_jumps)
+     int alter_jumps;
+{
+  rtx insn;
+  struct reg_use *reg_used;
+
+  cselib_init ();
+  for (insn = get_insns (); insn; insn = NEXT_INSN (insn))
+    {
+      if (INSN_P (insn))
+       {
+         rtx note = find_reg_equal_equiv_note (insn);
+
+         do
+           {
+             reg_use_count = 0;
+             note_uses (&PATTERN (insn), find_used_regs, NULL);
+             if (note)
+               find_used_regs (&XEXP (note, 0), NULL);
+
+             for (reg_used = &reg_use_table[0]; reg_use_count > 0;
+                  reg_used++, reg_use_count--)
+               if (do_local_cprop (reg_used->reg_rtx, insn, alter_jumps))
+                 break;
+           }
+         while (reg_use_count);
+       }
+      cselib_process_insn (insn);
+    }
+  cselib_finish ();
+}
+
 /* Forward propagate copies.  This includes copies and constants.  Return
    non-zero if a change was made.  */
 
@@ -4315,7 +4421,7 @@ cprop (alter_jumps)
           insn = NEXT_INSN (insn))
        if (INSN_P (insn))
          {
-           changed |= cprop_insn (bb, insn, alter_jumps);
+           changed |= cprop_insn (insn, alter_jumps);
 
            /* Keep track of everything modified by this insn.  */
            /* ??? Need to be careful w.r.t. mods done to INSN.  Don't
@@ -4345,6 +4451,8 @@ one_cprop_pass (pass, alter_jumps)
   const_prop_count = 0;
   copy_prop_count = 0;
 
+  local_cprop_pass (alter_jumps);
+
   alloc_set_hash_table (max_cuid);
   compute_set_hash_table ();
   if (gcse_file)
@@ -4430,7 +4538,7 @@ bypass_block (bb, setcc, jump)
 {
   rtx insn, note;
   edge e, enext;
-  int i,change;
+  int i, change;
 
   insn = (setcc != NULL) ? setcc : jump;
 
@@ -4448,30 +4556,30 @@ bypass_block (bb, setcc, jump)
       for (i = 0; i < reg_use_count; i++)
        {
          struct reg_use *reg_used = &reg_use_table[i];
-          unsigned int regno = REGNO (reg_used->reg_rtx);
-         basic_block dest;
-          struct expr *set;
-          rtx src, new;
+         unsigned int regno = REGNO (reg_used->reg_rtx);
+         basic_block dest, old_dest;
+         struct expr *set;
+         rtx src, new;
 
-          if (regno >= max_gcse_regno)
-            continue;
+         if (regno >= max_gcse_regno)
+           continue;
 
-          set = find_bypass_set (regno, e->src->index);
+         set = find_bypass_set (regno, e->src->index);
 
          if (! set)
            continue;
 
-          src = SET_SRC (pc_set (jump));
+         src = SET_SRC (pc_set (jump));
 
          if (setcc != NULL)
              src = simplify_replace_rtx (src,
-                                          SET_DEST (PATTERN (setcc)),
-                                          SET_SRC (PATTERN (setcc)));
+                                         SET_DEST (PATTERN (setcc)),
+                                         SET_SRC (PATTERN (setcc)));
 
          new = simplify_replace_rtx (src, reg_used->reg_rtx,
-                                      SET_SRC (set->expr));
+                                     SET_SRC (set->expr));
 
-          if (new == pc_rtx)
+         if (new == pc_rtx)
            dest = FALLTHRU_EDGE (bb)->dest;
          else if (GET_CODE (new) == LABEL_REF)
            dest = BRANCH_EDGE (bb)->dest;
@@ -4480,27 +4588,26 @@ bypass_block (bb, setcc, jump)
 
          /* Once basic block indices are stable, we should be able
             to use redirect_edge_and_branch_force instead.  */
-         if ((dest != NULL) && (dest != e->dest)
+         old_dest = e->dest;
+         if (dest != NULL && dest != old_dest
              && redirect_edge_and_branch (e, dest))
            {
-             /* Copy the MODE_CC setter to the redirected edge.
+             /* Copy the register setter to the redirected edge.
                 Don't copy CC0 setters, as CC0 is dead after jump.  */
              if (setcc)
                {
                  rtx pat = PATTERN (setcc);
-                 if (GET_MODE_CLASS (GET_MODE (SET_DEST (pat))) == MODE_CC)
+                 if (!CC0_P (SET_DEST (pat)))
                    insert_insn_on_edge (copy_insn (pat), e);
                }
 
              if (gcse_file != NULL)
                {
-                 fprintf (gcse_file, "JUMP-BYPASS: Replacing reg %d in ",
-                          regno);
-                 fprintf (gcse_file, "insn %d with constant ",
-                          INSN_UID (jump));
+                 fprintf (gcse_file, "JUMP-BYPASS: Proved reg %d in jump_insn %d equals constant ",
+                          regno, INSN_UID (jump));
                  print_rtl (gcse_file, SET_SRC (set->expr));
                  fprintf (gcse_file, "\nBypass edge from %d->%d to %d\n",
-                          e->src->index, e->dest->index, dest->index);
+                          e->src->index, old_dest->index, dest->index);
                }
              change = 1;
              break;
@@ -4530,7 +4637,7 @@ bypass_conditional_jumps ()
 
   changed = 0;
   FOR_BB_BETWEEN (bb, ENTRY_BLOCK_PTR->next_bb->next_bb,
-                  EXIT_BLOCK_PTR, next_bb)
+                 EXIT_BLOCK_PTR, next_bb)
     {
       /* Check for more than one predecessor.  */
       if (bb->pred && bb->pred->pred_next)
@@ -4541,19 +4648,14 @@ bypass_conditional_jumps ()
               insn = NEXT_INSN (insn))
            if (GET_CODE (insn) == INSN)
              {
-               rtx set = single_set (insn);
                if (setcc)
                  break;
-               if (!set)
+               if (GET_CODE (PATTERN (insn)) != SET)
                  break;
 
-               dest = SET_DEST (set);
-               if (GET_MODE_CLASS (GET_MODE (dest)) == MODE_CC)
-                 setcc = insn;
-#ifdef HAVE_cc0
-               else if (dest == cc0_rtx)
+               dest = SET_DEST (PATTERN (insn));
+               if (REG_P (dest) || CC0_P (dest))
                  setcc = insn;
-#endif
                else
                  break;
              }
@@ -4568,7 +4670,7 @@ bypass_conditional_jumps ()
        }
     }
 
-  /* If we bypassed any MODE_CC setting insns, we inserted a
+  /* If we bypassed any register setting insns, we inserted a
      copy on the redirected edge.  These need to be commited.  */
   if (changed)
     commit_edge_insertions();
@@ -4715,7 +4817,7 @@ compute_pre_data ()
   sbitmap_vector_free (antloc);
   antloc = NULL;
   sbitmap_vector_free (ae_kill);
-  ae_kill = NULL; 
+  ae_kill = NULL;
   sbitmap_free (trapping_expr);
 }
 \f
@@ -4800,7 +4902,7 @@ pre_expr_reaches_here_p (occr_bb, expr, bb)
 \f
 
 /* Given an expr, generate RTL which we can insert at the end of a BB,
-   or on an edge.  Set the block number of any insns generated to 
+   or on an edge.  Set the block number of any insns generated to
    the value of BB.  */
 
 static rtx
@@ -4823,13 +4925,13 @@ process_insert_insn (expr)
      expression to make sure we don't have any sharing issues.  */
   else if (insn_invalid_p (emit_insn (gen_rtx_SET (VOIDmode, reg, exp))))
     abort ();
-  
-  pat = gen_sequence ();
+
+  pat = get_insns ();
   end_sequence ();
 
   return pat;
 }
-  
+
 /* Add EXPR to the end of basic block BB.
 
    This is used by both the PRE and code hoisting.
@@ -4848,10 +4950,15 @@ insert_insn_end_bb (expr, bb, pre)
   rtx new_insn;
   rtx reg = expr->reaching_reg;
   int regno = REGNO (reg);
-  rtx pat;
-  int i;
+  rtx pat, pat_end;
 
   pat = process_insert_insn (expr);
+  if (pat == NULL_RTX || ! INSN_P (pat))
+    abort ();
+
+  pat_end = pat;
+  while (NEXT_INSN (pat_end) != NULL_RTX)
+    pat_end = NEXT_INSN (pat_end);
 
   /* If the last insn is a jump, insert EXPR in front [taking care to
      handle cc0, etc. properly].  Similary we need to care trapping
@@ -4869,7 +4976,7 @@ insert_insn_end_bb (expr, bb, pre)
         Check this.  */
       if (GET_CODE (insn) == INSN && pre
          && !TEST_BIT (antloc[bb->index], expr->bitmap_index)
-          && !TEST_BIT (transp[bb->index], expr->bitmap_index))
+         && !TEST_BIT (transp[bb->index], expr->bitmap_index))
        abort ();
 
       /* If this is a jump table, then we can't insert stuff here.  Since
@@ -4906,7 +5013,7 @@ insert_insn_end_bb (expr, bb, pre)
       /* Keeping in mind SMALL_REGISTER_CLASSES and parameters in registers,
         we search backward and place the instructions before the first
         parameter is loaded.  Do this for everyone for consistency and a
-        presumtion that we'll get better code elsewhere as well.  
+        presumtion that we'll get better code elsewhere as well.
 
         It should always be the case that we can put these instructions
         anywhere in the basic block with performing PRE optimizations.
@@ -4914,7 +5021,7 @@ insert_insn_end_bb (expr, bb, pre)
 
       if (pre
          && !TEST_BIT (antloc[bb->index], expr->bitmap_index)
-          && !TEST_BIT (transp[bb->index], expr->bitmap_index))
+         && !TEST_BIT (transp[bb->index], expr->bitmap_index))
        abort ();
 
       /* Since different machines initialize their parameter registers
@@ -4939,26 +5046,16 @@ insert_insn_end_bb (expr, bb, pre)
   else
     new_insn = emit_insn_after (pat, insn);
 
-  /* Keep block number table up to date.
-     Note, PAT could be a multiple insn sequence, we have to make
-     sure that each insn in the sequence is handled.  */
-  if (GET_CODE (pat) == SEQUENCE)
+  while (1)
     {
-      for (i = 0; i < XVECLEN (pat, 0); i++)
+      if (INSN_P (pat))
        {
-         rtx insn = XVECEXP (pat, 0, i);
-         if (INSN_P (insn))
-           add_label_notes (PATTERN (insn), new_insn);
-
-         note_stores (PATTERN (insn), record_set_info, insn);
+         add_label_notes (PATTERN (pat), new_insn);
+         note_stores (PATTERN (pat), record_set_info, pat);
        }
-    }
-  else
-    {
-      add_label_notes (pat, new_insn);
-
-      /* Keep register set table up to date.  */
-      record_one_set (regno, new_insn);
+      if (pat == pat_end)
+       break;
+      pat = NEXT_INSN (pat);
     }
 
   gcse_create_count++;
@@ -5134,7 +5231,7 @@ pre_insert_copies ()
                  continue;
 
                /* Or if the expression doesn't reach the deleted one.  */
-               if (! pre_expr_reaches_here_p (BLOCK_FOR_INSN (avail->insn), 
+               if (! pre_expr_reaches_here_p (BLOCK_FOR_INSN (avail->insn),
                                               expr,
                                               BLOCK_FOR_INSN (occr->insn)))
                  continue;
@@ -5154,16 +5251,19 @@ gcse_emit_move_after (src, dest, insn)
      rtx src, dest, insn;
 {
   rtx new;
-  rtx set = single_set (insn);
+  rtx set = single_set (insn), set2;
   rtx note;
   rtx eqv;
 
   /* This should never fail since we're creating a reg->reg copy
      we've verified to be valid.  */
 
-  new = emit_insn_after (gen_rtx_SET (VOIDmode, dest, src), insn);
+  new = emit_insn_after (gen_move_insn (dest, src), insn);
 
   /* Note the equivalence for local CSE pass.  */
+  set2 = single_set (new);
+  if (!set2 || !rtx_equal_p (SET_DEST (set2), dest))
+    return new;
   if ((note = find_reg_equal_equiv_note (insn)))
     eqv = XEXP (note, 0);
   else
@@ -5382,7 +5482,7 @@ add_label_notes (x, insn)
       REG_NOTES (insn) = gen_rtx_INSN_LIST (REG_LABEL, XEXP (x, 0),
                                            REG_NOTES (insn));
       if (LABEL_P (XEXP (x, 0)))
-        LABEL_NUSES (XEXP (x, 0))++;
+       LABEL_NUSES (XEXP (x, 0))++;
       return;
     }
 
@@ -5433,7 +5533,7 @@ compute_transpout ()
              if (GET_CODE (XEXP (expr->expr, 0)) == SYMBOL_REF
                  && CONSTANT_POOL_ADDRESS_P (XEXP (expr->expr, 0)))
                continue;
-               
+
              /* ??? Optimally, we would use interprocedural alias
                 analysis to determine if this mem is actually killed
                 by this call.  */
@@ -5478,7 +5578,7 @@ invalidate_nonnull_info (x, setter, data)
    NPI.  NONNULL_AVIN and NONNULL_AVOUT are pre-allocated sbitmaps;
    they are not our responsibility to free.  */
 
-static void
+static int
 delete_null_pointer_checks_1 (block_reg, nonnull_avin,
                              nonnull_avout, npi)
      unsigned int *block_reg;
@@ -5489,7 +5589,8 @@ delete_null_pointer_checks_1 (block_reg, nonnull_avin,
   basic_block bb, current_block;
   sbitmap *nonnull_local = npi->nonnull_local;
   sbitmap *nonnull_killed = npi->nonnull_killed;
-  
+  int something_changed = 0;
+
   /* Compute local properties, nonnull and killed.  A register will have
      the nonnull property if at the end of the current block its value is
      known to be nonnull.  The killed property indicates that somewhere in
@@ -5610,16 +5711,19 @@ delete_null_pointer_checks_1 (block_reg, nonnull_avin,
          emit_barrier_after (new_jump);
        }
 
+      something_changed = 1;
       delete_insn (last_insn);
       if (compare_and_branch == 2)
-        delete_insn (earliest);
+       delete_insn (earliest);
       purge_dead_edges (bb);
 
       /* Don't check this block again.  (Note that BLOCK_END is
-        invalid here; we deleted the last instruction in the 
+        invalid here; we deleted the last instruction in the
         block.)  */
       block_reg[bb->index] = 0;
     }
+
+  return something_changed;
 }
 
 /* Find EQ/NE comparisons against zero which can be (indirectly) evaluated
@@ -5634,7 +5738,7 @@ delete_null_pointer_checks_1 (block_reg, nonnull_avin,
 
    So, if every path leading to a conditional branch has an available memory
    reference of that form, then we know the register can not have the value
-   zero at the conditional branch.  
+   zero at the conditional branch.
 
    So we merely need to compute the local properies and propagate that data
    around the cfg, then optimize where possible.
@@ -5646,7 +5750,7 @@ delete_null_pointer_checks_1 (block_reg, nonnull_avin,
 
    This could probably be integrated with global cprop with a little work.  */
 
-void
+int
 delete_null_pointer_checks (f)
      rtx f ATTRIBUTE_UNUSED;
 {
@@ -5657,10 +5761,11 @@ delete_null_pointer_checks (f)
   int regs_per_pass;
   int max_reg;
   struct null_pointer_info npi;
+  int something_changed = 0;
 
   /* If we have only a single block, then there's nothing to do.  */
   if (n_basic_blocks <= 1)
-    return;
+    return 0;
 
   /* Trying to perform global optimizations on flow graphs which have
      a high connectivity will take a long time and is unlikely to be
@@ -5671,7 +5776,7 @@ delete_null_pointer_checks (f)
      a couple switch statements.  So we require a relatively large number
      of basic blocks and the ratio of edges to blocks to be high.  */
   if (n_basic_blocks > 1000 && n_edges / n_basic_blocks >= 20)
-    return;
+    return 0;
 
   /* We need four bitmaps, each with a bit for each register in each
      basic block.  */
@@ -5707,7 +5812,7 @@ delete_null_pointer_checks (f)
       if (!condition
          || (GET_CODE (condition) != NE && GET_CODE (condition) != EQ)
          || GET_CODE (XEXP (condition, 1)) != CONST_INT
-         || (XEXP (condition, 1) 
+         || (XEXP (condition, 1)
              != CONST0_RTX (GET_MODE (XEXP (condition, 0)))))
        continue;
 
@@ -5724,8 +5829,10 @@ delete_null_pointer_checks (f)
     {
       npi.min_reg = reg;
       npi.max_reg = MIN (reg + regs_per_pass, max_reg);
-      delete_null_pointer_checks_1 (block_reg, nonnull_avin,
-                                   nonnull_avout, &npi);
+      something_changed |= delete_null_pointer_checks_1 (block_reg,
+                                                        nonnull_avin,
+                                                        nonnull_avout,
+                                                        &npi);
     }
 
   /* Free the table of registers compared at the end of every block.  */
@@ -5736,6 +5843,8 @@ delete_null_pointer_checks (f)
   sbitmap_vector_free (npi.nonnull_killed);
   sbitmap_vector_free (nonnull_avin);
   sbitmap_vector_free (nonnull_avout);
+
+  return something_changed;
 }
 
 /* Code Hoisting variables and subroutines.  */
@@ -5748,7 +5857,7 @@ static sbitmap *hoist_vbeout;
 static sbitmap *hoist_exprs;
 
 /* Dominator bitmaps.  */
-static sbitmap *dominators;
+dominance_info dominators;
 
 /* ??? We could compute post dominators and run this algorithm in
    reverse to to perform tail merging, doing so would probably be
@@ -5771,8 +5880,6 @@ alloc_code_hoist_mem (n_blocks, n_exprs)
   hoist_vbeout = sbitmap_vector_alloc (n_blocks, n_exprs);
   hoist_exprs = sbitmap_vector_alloc (n_blocks, n_exprs);
   transpout = sbitmap_vector_alloc (n_blocks, n_exprs);
-
-  dominators = sbitmap_vector_alloc (n_blocks, n_blocks);
 }
 
 /* Free vars used for code hoisting analysis.  */
@@ -5789,7 +5896,7 @@ free_code_hoist_mem ()
   sbitmap_vector_free (hoist_exprs);
   sbitmap_vector_free (transpout);
 
-  sbitmap_vector_free (dominators);
+  free_dominance_info (dominators);
 }
 
 /* Compute the very busy expressions at entry/exit from each block.
@@ -5838,7 +5945,7 @@ compute_code_hoist_data ()
   compute_local_properties (transp, comp, antloc, 0);
   compute_transpout ();
   compute_code_hoist_vbeinout ();
-  calculate_dominance_info (NULL, dominators, CDI_DOMINATORS);
+  dominators = calculate_dominance_info (CDI_DOMINATORS);
   if (gcse_file)
     fprintf (gcse_file, "\n");
 }
@@ -5865,7 +5972,7 @@ hoist_expr_reaches_here_p (expr_bb, expr_index, bb, visited)
 {
   edge pred;
   int visited_allocated_locally = 0;
-  
+
 
   if (visited == NULL)
     {
@@ -5879,6 +5986,8 @@ hoist_expr_reaches_here_p (expr_bb, expr_index, bb, visited)
 
       if (pred->src == ENTRY_BLOCK_PTR)
        break;
+      else if (pred_bb == expr_bb)
+       continue;
       else if (visited[pred_bb->index])
        continue;
 
@@ -5897,7 +6006,7 @@ hoist_expr_reaches_here_p (expr_bb, expr_index, bb, visited)
            break;
        }
     }
-  if (visited_allocated_locally) 
+  if (visited_allocated_locally)
     free (visited);
 
   return (pred == NULL);
@@ -5909,7 +6018,9 @@ static void
 hoist_code ()
 {
   basic_block bb, dominated;
-  unsigned int i;
+  basic_block *domby;
+  unsigned int domby_len;
+  unsigned int i,j;
   struct expr **index_map;
   struct expr *expr;
 
@@ -5930,24 +6041,25 @@ hoist_code ()
       int found = 0;
       int insn_inserted_p;
 
+      domby_len = get_dominated_by (dominators, bb, &domby);
       /* Examine each expression that is very busy at the exit of this
         block.  These are the potentially hoistable expressions.  */
       for (i = 0; i < hoist_vbeout[bb->index]->n_bits; i++)
        {
          int hoistable = 0;
 
-         if (TEST_BIT (hoist_vbeout[bb->index], i) && TEST_BIT (transpout[bb->index], i))
+         if (TEST_BIT (hoist_vbeout[bb->index], i)
+             && TEST_BIT (transpout[bb->index], i))
            {
              /* We've found a potentially hoistable expression, now
                 we look at every block BB dominates to see if it
                 computes the expression.  */
-             FOR_EACH_BB (dominated)
+             for (j = 0; j < domby_len; j++)
                {
+                 dominated = domby[j];
                  /* Ignore self dominance.  */
-                 if (bb == dominated
-                     || ! TEST_BIT (dominators[dominated->index], bb->index))
+                 if (bb == dominated)
                    continue;
-
                  /* We've found a dominated block, now see if it computes
                     the busy expression and whether or not moving that
                     expression to the "beginning" of that block is safe.  */
@@ -5955,7 +6067,7 @@ hoist_code ()
                    continue;
 
                  /* Note if the expression would reach the dominated block
-                    unimpared if it was placed at the end of BB. 
+                    unimpared if it was placed at the end of BB.
 
                     Keep track of how many times this expression is hoistable
                     from a dominated block into BB.  */
@@ -5980,10 +6092,12 @@ hoist_code ()
                }
            }
        }
-               
       /* If we found nothing to hoist, then quit now.  */
       if (! found)
+        {
+         free (domby);
        continue;
+       }
 
       /* Loop over all the hoistable expressions.  */
       for (i = 0; i < hoist_exprs[bb->index]->n_bits; i++)
@@ -5998,11 +6112,11 @@ hoist_code ()
              /* We've found a potentially hoistable expression, now
                 we look at every block BB dominates to see if it
                 computes the expression.  */
-             FOR_EACH_BB (dominated)
+             for (j = 0; j < domby_len; j++)
                {
+                 dominated = domby[j];
                  /* Ignore self dominance.  */
-                 if (bb == dominated
-                     || ! TEST_BIT (dominators[dominated->index], bb->index))
+                 if (bb == dominated)
                    continue;
 
                  /* We've found a dominated block, now see if it computes
@@ -6032,7 +6146,7 @@ hoist_code ()
                        abort ();
 
                      insn = occr->insn;
-                
+
                      set = single_set (insn);
                      if (! set)
                        abort ();
@@ -6056,6 +6170,7 @@ hoist_code ()
                }
            }
        }
+      free (domby);
     }
 
   free (index_map);
@@ -6103,10 +6218,10 @@ one_code_hoisting_pass ()
            }
 
     'i' is both loaded and stored to in the loop. Normally, gcse cannot move
-    the load out since its live around the loop, and stored at the bottom 
-    of the loop. 
+    the load out since its live around the loop, and stored at the bottom
+    of the loop.
 
-      The 'Load Motion' referred to and implemented in this file is 
+      The 'Load Motion' referred to and implemented in this file is
     an enhancement to gcse which when using edge based lcm, recognizes
     this situation and allows gcse to move the load out of the loop.
 
@@ -6142,13 +6257,13 @@ ldst_entry (x)
       ptr->hash_index   = 0;
       pre_ldst_mems     = ptr;
     }
-  
+
   return ptr;
 }
 
 /* Free up an individual ldst entry.  */
 
-static void 
+static void
 free_ldst_entry (ptr)
      struct ls_expr * ptr;
 {
@@ -6163,7 +6278,7 @@ free_ldst_entry (ptr)
 static void
 free_ldst_mems ()
 {
-  while (pre_ldst_mems) 
+  while (pre_ldst_mems)
     {
       struct ls_expr * tmp = pre_ldst_mems;
 
@@ -6218,7 +6333,7 @@ find_rtx_in_ldst (x)
      rtx x;
 {
   struct ls_expr * ptr;
-  
+
   for (ptr = pre_ldst_mems; ptr != NULL; ptr = ptr->next)
     if (expr_equiv_p (ptr->pattern, x) && ! ptr->invalid)
       return ptr;
@@ -6263,31 +6378,31 @@ next_ls_expr (ptr)
    side effects. These are the types of loads we consider for the
    ld_motion list, otherwise we let the usual aliasing take care of it.  */
 
-static int 
+static int
 simple_mem (x)
      rtx x;
 {
   if (GET_CODE (x) != MEM)
     return 0;
-  
+
   if (MEM_VOLATILE_P (x))
     return 0;
-  
+
   if (GET_MODE (x) == BLKmode)
     return 0;
 
   if (!rtx_varies_p (XEXP (x, 0), 0))
     return 1;
-  
+
   return 0;
 }
 
-/* Make sure there isn't a buried reference in this pattern anywhere.  
-   If there is, invalidate the entry for it since we're not capable 
-   of fixing it up just yet.. We have to be sure we know about ALL 
+/* Make sure there isn't a buried reference in this pattern anywhere.
+   If there is, invalidate the entry for it since we're not capable
+   of fixing it up just yet.. We have to be sure we know about ALL
    loads since the aliasing code will allow all entries in the
    ld_motion list to not-alias itself.  If we miss a load, we will get
-   the wrong value since gcse might common it and we won't know to 
+   the wrong value since gcse might common it and we won't know to
    fix it up.  */
 
 static void
@@ -6307,7 +6422,7 @@ invalidate_any_buried_refs (x)
 
   /* Recursively process the insn.  */
   fmt = GET_RTX_FORMAT (GET_CODE (x));
-  
+
   for (i = GET_RTX_LENGTH (GET_CODE (x)) - 1; i >= 0; i--)
     {
       if (fmt[i] == 'e')
@@ -6320,17 +6435,17 @@ invalidate_any_buried_refs (x)
 
 /* Find all the 'simple' MEMs which are used in LOADs and STORES. Simple
    being defined as MEM loads and stores to symbols, with no
-   side effects and no registers in the expression. If there are any 
+   side effects and no registers in the expression. If there are any
    uses/defs which don't match this criteria, it is invalidated and
    trimmed out later.  */
 
-static void 
+static void
 compute_ld_motion_mems ()
 {
   struct ls_expr * ptr;
   basic_block bb;
   rtx insn;
-  
+
   pre_ldst_mems = NULL;
 
   FOR_EACH_BB (bb)
@@ -6360,7 +6475,7 @@ compute_ld_motion_mems ()
                      /* Make sure there isn't a buried load somewhere.  */
                      invalidate_any_buried_refs (src);
                    }
-                 
+
                  /* Check for stores. Don't worry about aliased ones, they
                     will block any movement we might do later. We only care
                     about this exact pattern since those are the only
@@ -6368,7 +6483,7 @@ compute_ld_motion_mems ()
                  if (GET_CODE (dest) == MEM && simple_mem (dest))
                    {
                      ptr = ldst_entry (dest);
-                     
+
                      if (GET_CODE (src) != MEM
                          && GET_CODE (src) != ASM_OPERANDS)
                        ptr->stores = alloc_INSN_LIST (insn, ptr->stores);
@@ -6383,7 +6498,7 @@ compute_ld_motion_mems ()
     }
 }
 
-/* Remove any references that have been either invalidated or are not in the 
+/* Remove any references that have been either invalidated or are not in the
    expression list for pre gcse.  */
 
 static void
@@ -6396,18 +6511,18 @@ trim_ld_motion_mems ()
     {
       int del = ptr->invalid;
       struct expr * expr = NULL;
-      
+
       /* Delete if entry has been made invalid.  */
-      if (!del) 
+      if (!del)
        {
          unsigned int i;
-         
+
          del = 1;
          /* Delete if we cannot find this mem in the expression list.  */
          for (i = 0; i < expr_hash_table_size && del; i++)
            {
-             for (expr = expr_hash_table[i]; 
-                  expr != NULL; 
+             for (expr = expr_hash_table[i];
+                  expr != NULL;
                   expr = expr->next_same_hash)
                if (expr_equiv_p (expr->expr, ptr->pattern))
                  {
@@ -6416,7 +6531,7 @@ trim_ld_motion_mems ()
                  }
            }
        }
-      
+
       if (del)
        {
          if (last != NULL)
@@ -6461,16 +6576,16 @@ update_ld_motion_stores (expr)
 
   if ((mem_ptr = find_rtx_in_ldst (expr->expr)))
     {
-      /* We can try to find just the REACHED stores, but is shouldn't 
-        matter to set the reaching reg everywhere...  some might be 
+      /* We can try to find just the REACHED stores, but is shouldn't
+        matter to set the reaching reg everywhere...  some might be
         dead and should be eliminated later.  */
 
       /* We replace  SET mem = expr   with
           SET reg = expr
-          SET mem = reg , where reg is the 
+          SET mem = reg , where reg is the
           reaching reg used in the load.  */
       rtx list = mem_ptr->stores;
-      
+
       for ( ; list != NULL_RTX; list = XEXP (list, 1))
        {
          rtx insn = XEXP (list, 0);
@@ -6482,7 +6597,7 @@ update_ld_motion_stores (expr)
          /* If we've already copied it, continue.  */
          if (expr->reaching_reg == src)
            continue;
-         
+
          if (gcse_file)
            {
              fprintf (gcse_file, "PRE:  store updated with reaching reg ");
@@ -6491,7 +6606,7 @@ update_ld_motion_stores (expr)
              print_inline_rtx (gcse_file, insn, 8);
              fprintf (gcse_file, "\n");
            }
-         
+
          copy = gen_move_insn ( reg, SET_SRC (pat));
          new = emit_insn_before (copy, insn);
          record_one_set (REGNO (reg), new);
@@ -6506,7 +6621,7 @@ update_ld_motion_stores (expr)
 \f
 /* Store motion code.  */
 
-/* This is used to communicate the target bitvector we want to use in the 
+/* This is used to communicate the target bitvector we want to use in the
    reg_set_info routine when called via the note_stores mechanism.  */
 static sbitmap * regvec;
 
@@ -6530,7 +6645,7 @@ reg_set_info (dest, setter, data)
     SET_BIT (*regvec, REGNO (dest));
 }
 
-/* Return non-zero if the register operands of expression X are killed 
+/* Return non-zero if the register operands of expression X are killed
    anywhere in basic block BB.  */
 
 static int
@@ -6584,7 +6699,7 @@ store_ops_ok (x, bb)
 
   i = GET_RTX_LENGTH (code) - 1;
   fmt = GET_RTX_FORMAT (code);
-  
+
   for (; i >= 0; i--)
     {
       if (fmt[i] == 'e')
@@ -6599,14 +6714,14 @@ store_ops_ok (x, bb)
              x = tem;
              goto repeat;
            }
-         
+
          if (! store_ops_ok (tem, bb))
            return 0;
        }
       else if (fmt[i] == 'E')
        {
          int j;
-         
+
          for (j = 0; j < XVECLEN (x, i); j++)
            {
              if (! store_ops_ok (XVECEXP (x, i, j), bb))
@@ -6632,7 +6747,7 @@ find_moveable_store (insn)
     return;
 
   dest = SET_DEST (dest);
-  
+
   if (GET_CODE (dest) != MEM || MEM_VOLATILE_P (dest)
       || GET_MODE (dest) == BLKmode)
     return;
@@ -6680,7 +6795,7 @@ compute_store_table ()
          if (GET_CODE (insn) == CALL_INSN)
            {
              bool clobbers_all = false;
-#ifdef NON_SAVING_SETJMP 
+#ifdef NON_SAVING_SETJMP
              if (NON_SAVING_SETJMP
                  && find_reg_note (insn, REG_SETJMP, NULL_RTX))
                clobbers_all = true;
@@ -6691,10 +6806,10 @@ compute_store_table ()
                    || TEST_HARD_REG_BIT (regs_invalidated_by_call, regno))
                  SET_BIT (reg_set_in_block[bb->index], regno);
            }
-         
+
          pat = PATTERN (insn);
          note_stores (pat, reg_set_info, NULL);
-         
+
          /* Now that we've marked regs, look for stores.  */
          if (GET_CODE (pat) == SET)
            find_moveable_store (insn);
@@ -6702,13 +6817,13 @@ compute_store_table ()
     }
 
   ret = enumerate_ldsts ();
-  
+
   if (gcse_file)
     {
       fprintf (gcse_file, "Store Motion Expressions.\n");
       print_ldst_list (gcse_file);
     }
-  
+
   return ret;
 }
 
@@ -6723,7 +6838,7 @@ load_kills_store (x, store_pattern)
   return 0;
 }
 
-/* Go through the entire insn X, looking for any loads which might alias 
+/* Go through the entire insn X, looking for any loads which might alias
    STORE_PATTERN.  Return 1 if found.  */
 
 static int
@@ -6737,7 +6852,7 @@ find_loads (x, store_pattern)
   if (!x)
     return 0;
 
-  if (GET_CODE (x) == SET) 
+  if (GET_CODE (x) == SET)
     x = SET_SRC (x);
 
   if (GET_CODE (x) == MEM)
@@ -6748,7 +6863,7 @@ find_loads (x, store_pattern)
 
   /* Recursively process the insn.  */
   fmt = GET_RTX_FORMAT (GET_CODE (x));
-  
+
   for (i = GET_RTX_LENGTH (GET_CODE (x)) - 1; i >= 0 && !ret; i--)
     {
       if (fmt[i] == 'e')
@@ -6760,23 +6875,23 @@ find_loads (x, store_pattern)
   return ret;
 }
 
-/* Check if INSN kills the store pattern X (is aliased with it).  
+/* Check if INSN kills the store pattern X (is aliased with it).
    Return 1 if it it does.  */
 
-static int 
+static int
 store_killed_in_insn (x, insn)
      rtx x, insn;
 {
   if (GET_RTX_CLASS (GET_CODE (insn)) != 'i')
     return 0;
-  
+
   if (GET_CODE (insn) == CALL_INSN)
     {
       /* A normal or pure call might read from pattern,
         but a const call will not.  */
       return ! CONST_OR_PURE_CALL_P (insn) || pure_call_p (insn);
     }
-  
+
   if (GET_CODE (PATTERN (insn)) == SET)
     {
       rtx pat = PATTERN (insn);
@@ -6794,19 +6909,19 @@ store_killed_in_insn (x, insn)
 /* Returns 1 if the expression X is loaded or clobbered on or after INSN
    within basic block BB.  */
 
-static int 
+static int
 store_killed_after (x, insn, bb)
      rtx x, insn;
      basic_block bb;
 {
   rtx last = bb->end;
-   
+
   if (insn == last)
     return 0;
 
   /* Check if the register operands of the store are OK in this block.
-     Note that if registers are changed ANYWHERE in the block, we'll 
-     decide we can't move it, regardless of whether it changed above 
+     Note that if registers are changed ANYWHERE in the block, we'll
+     decide we can't move it, regardless of whether it changed above
      or below the store. This could be improved by checking the register
      operands while lookinng for aliasing in each insn.  */
   if (!store_ops_ok (XEXP (x, 0), bb))
@@ -6815,13 +6930,13 @@ store_killed_after (x, insn, bb)
   for ( ; insn && insn != NEXT_INSN (last); insn = NEXT_INSN (insn))
     if (store_killed_in_insn (x, insn))
       return 1;
-   
+
   return 0;
 }
 
 /* Returns 1 if the expression X is loaded or clobbered on or before INSN
    within basic block BB.  */
-static int 
+static int
 store_killed_before (x, insn, bb)
      rtx x, insn;
      basic_block bb;
@@ -6830,10 +6945,10 @@ store_killed_before (x, insn, bb)
 
   if (insn == first)
     return store_killed_in_insn (x, insn);
-   
+
   /* Check if the register operands of the store are OK in this block.
-     Note that if registers are changed ANYWHERE in the block, we'll 
-     decide we can't move it, regardless of whether it changed above 
+     Note that if registers are changed ANYWHERE in the block, we'll
+     decide we can't move it, regardless of whether it changed above
      or below the store. This could be improved by checking the register
      operands while lookinng for aliasing in each insn.  */
   if (!store_ops_ok (XEXP (x, 0), bb))
@@ -6842,7 +6957,7 @@ store_killed_before (x, insn, bb)
   for ( ; insn && insn != PREV_INSN (first); insn = PREV_INSN (insn))
     if (store_killed_in_insn (x, insn))
       return 1;
-   
+
   return 0;
 }
 
@@ -6853,7 +6968,7 @@ store_killed_before (x, insn, bb)
    determine which ones are not killed by aliasing, and generate
    the appropriate vectors for gen and killed.  */
 static void
-build_store_vectors () 
+build_store_vectors ()
 {
   basic_block bb, b;
   rtx insn, st;
@@ -6868,7 +6983,7 @@ build_store_vectors ()
   sbitmap_vector_zero (st_antloc, last_basic_block);
 
   for (ptr = first_ls_expr (); ptr != NULL; ptr = next_ls_expr (ptr))
-    { 
+    {
       /* Put all the stores into either the antic list, or the avail list,
         or both.  */
       rtx store_list = ptr->stores;
@@ -6878,7 +6993,7 @@ build_store_vectors ()
        {
          insn = XEXP (st, 0);
          bb = BLOCK_FOR_INSN (insn);
-         
+
          if (!store_killed_after (ptr->pattern, insn, bb))
            {
              /* If we've already seen an availale expression in this block,
@@ -6907,7 +7022,7 @@ build_store_vectors ()
              AVAIL_STORE_LIST (ptr) = alloc_INSN_LIST (insn,
                                                        AVAIL_STORE_LIST (ptr));
            }
-         
+
          if (!store_killed_before (ptr->pattern, insn, bb))
            {
              SET_BIT (st_antloc[BLOCK_NUM (insn)], ptr->index);
@@ -6915,11 +7030,11 @@ build_store_vectors ()
                                                        ANTIC_STORE_LIST (ptr));
            }
        }
-      
+
       /* Free the original list of store insns.  */
       free_INSN_LIST_list (&store_list);
     }
-         
+
   ae_kill = (sbitmap *) sbitmap_vector_alloc (last_basic_block, num_stores);
   sbitmap_vector_zero (ae_kill, last_basic_block);
 
@@ -6933,7 +7048,7 @@ build_store_vectors ()
          {
            /* The anticipatable expression is not killed if it's gen'd.  */
            /*
-             We leave this check out for now. If we have a code sequence 
+             We leave this check out for now. If we have a code sequence
              in a block which looks like:
                        ST MEMa = x
                        L     y = MEMa
@@ -6941,7 +7056,7 @@ build_store_vectors ()
              We should flag this as having an ANTIC expression, NOT
              transparent, NOT killed, and AVAIL.
              Unfortunately, since we haven't re-written all loads to
-             use the reaching reg, we'll end up doing an incorrect 
+             use the reaching reg, we'll end up doing an incorrect
              Load in the middle here if we push the store down. It happens in
                    gcc.c-torture/execute/960311-1.c with -O3
              If we always kill it in this case, we'll sometimes do
@@ -6957,7 +7072,7 @@ build_store_vectors ()
      we better mark the store killed here, or we might not store to
      it at all.  If we knew it was abort, we wouldn't have to store,
      but we don't know that for sure.  */
-  if (gcse_file) 
+  if (gcse_file)
     {
       fprintf (gcse_file, "ST_avail and ST_antic (shown under loads..)\n");
       print_ldst_list (gcse_file);
@@ -6968,10 +7083,10 @@ build_store_vectors ()
     }
 }
 
-/* Insert an instruction at the begining of a basic block, and update 
+/* Insert an instruction at the begining of a basic block, and update
    the BLOCK_HEAD if needed.  */
 
-static void 
+static void
 insert_insn_start_bb (insn, bb)
      rtx insn;
      basic_block bb;
@@ -7022,7 +7137,7 @@ insert_store (expr, e)
 
   reg = expr->reaching_reg;
   insn = gen_move_insn (expr->pattern, reg);
-  
+
   /* If we are inserting this expression on ALL predecessor edges of a BB,
      insert it at the start of the BB, and reset the insert bits on the other
      edges so we don't try to insert it on the other edges.  */
@@ -7048,7 +7163,7 @@ insert_store (expr, e)
       insert_insn_start_bb (insn, bb);
       return 0;
     }
-  
+
   /* We can't insert on this edge, so we'll insert at the head of the
      successors block.  See Morgan, sec 10.5.  */
   if ((e->flags & EDGE_ABNORMAL) == EDGE_ABNORMAL)
@@ -7058,7 +7173,7 @@ insert_store (expr, e)
     }
 
   insert_insn_on_edge (insn, e);
-  
+
   if (gcse_file)
     {
       fprintf (gcse_file, "STORE_MOTION  insert insn on edge (%d, %d):\n",
@@ -7066,7 +7181,7 @@ insert_store (expr, e)
       print_inline_rtx (gcse_file, insn, 6);
       fprintf (gcse_file, "\n");
     }
-  
+
   return 1;
 }
 
@@ -7078,20 +7193,20 @@ replace_store_insn (reg, del, bb)
      basic_block bb;
 {
   rtx insn;
-  
+
   insn = gen_move_insn (reg, SET_SRC (PATTERN (del)));
   insn = emit_insn_after (insn, del);
-  
+
   if (gcse_file)
     {
-      fprintf (gcse_file, 
+      fprintf (gcse_file,
               "STORE_MOTION  delete insn in BB %d:\n      ", bb->index);
       print_inline_rtx (gcse_file, del, 6);
       fprintf (gcse_file, "\nSTORE MOTION  replaced with insn:\n      ");
       print_inline_rtx (gcse_file, insn, 6);
       fprintf (gcse_file, "\n");
     }
-  
+
   delete_insn (del);
 }
 
@@ -7108,18 +7223,18 @@ delete_store (expr, bb)
 
   if (expr->reaching_reg == NULL_RTX)
     expr->reaching_reg = gen_reg_rtx (GET_MODE (expr->pattern));
-  
 
-  /* If there is more than 1 store, the earlier ones will be dead, 
-     but it doesn't hurt to replace them here.  */  
+
+  /* If there is more than 1 store, the earlier ones will be dead,
+     but it doesn't hurt to replace them here.  */
   reg = expr->reaching_reg;
-  
+
   for (i = AVAIL_STORE_LIST (expr); i; i = XEXP (i, 1))
     {
       del = XEXP (i, 0);
       if (BLOCK_FOR_INSN (del) == bb)
        {
-         /* We know there is only one since we deleted redundant 
+         /* We know there is only one since we deleted redundant
             ones during the available computation.  */
          replace_store_insn (reg, del, bb);
          break;
@@ -7129,11 +7244,11 @@ delete_store (expr, bb)
 
 /* Free memory used by store motion.  */
 
-static void 
+static void
 free_store_memory ()
 {
   free_ldst_mems ();
-  
+
   if (ae_gen)
     sbitmap_vector_free (ae_gen);
   if (ae_kill)
@@ -7148,7 +7263,7 @@ free_store_memory ()
     sbitmap_vector_free (pre_delete_map);
   if (reg_set_in_block)
     sbitmap_vector_free (reg_set_in_block);
-  
+
   ae_gen = ae_kill = transp = st_antloc = NULL;
   pre_insert_map = pre_delete_map = reg_set_in_block = NULL;
 }
@@ -7186,8 +7301,8 @@ store_motion ()
   add_noreturn_fake_exit_edges ();
   build_store_vectors ();
 
-  edge_list = pre_edge_rev_lcm (gcse_file, num_stores, transp, ae_gen, 
-                               st_antloc, ae_kill, &pre_insert_map, 
+  edge_list = pre_edge_rev_lcm (gcse_file, num_stores, transp, ae_gen,
+                               st_antloc, ae_kill, &pre_insert_map,
                                &pre_delete_map);
 
   /* Now we want to insert the new stores which are going to be needed.  */
@@ -7210,3 +7325,5 @@ store_motion ()
   remove_fake_edges ();
   end_alias_analysis ();
 }
+
+#include "gt-gcse.h"