OSDN Git Service

PR fortran/30820
[pf3gnuchains/gcc-fork.git] / gcc / tree-ssa-forwprop.c
1 /* Forward propagation of expressions for single use variables.
2    Copyright (C) 2004, 2005 Free Software Foundation, Inc.
3
4 This file is part of GCC.
5
6 GCC is free software; you can redistribute it and/or modify
7 it under the terms of the GNU General Public License as published by
8 the Free Software Foundation; either version 2, or (at your option)
9 any later version.
10
11 GCC is distributed in the hope that it will be useful,
12 but WITHOUT ANY WARRANTY; without even the implied warranty of
13 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
14 GNU General Public License for more details.
15
16 You should have received a copy of the GNU General Public License
17 along with GCC; see the file COPYING.  If not, write to
18 the Free Software Foundation, 51 Franklin Street, Fifth Floor,
19 Boston, MA 02110-1301, USA.  */
20
21 #include "config.h"
22 #include "system.h"
23 #include "coretypes.h"
24 #include "tm.h"
25 #include "ggc.h"
26 #include "tree.h"
27 #include "rtl.h"
28 #include "tm_p.h"
29 #include "basic-block.h"
30 #include "timevar.h"
31 #include "diagnostic.h"
32 #include "tree-flow.h"
33 #include "tree-pass.h"
34 #include "tree-dump.h"
35 #include "langhooks.h"
36 #include "flags.h"
37
38 /* This pass propagates the RHS of assignment statements into use
39    sites of the LHS of the assignment.  It's basically a specialized
40    form of tree combination.   It is hoped all of this can disappear
41    when we have a generalized tree combiner.
42
43    Note carefully that after propagation the resulting statement
44    must still be a proper gimple statement.  Right now we simply
45    only perform propagations we know will result in valid gimple
46    code.  One day we'll want to generalize this code.
47
48    One class of common cases we handle is forward propagating a single use
49    variable into a COND_EXPR.  
50
51      bb0:
52        x = a COND b;
53        if (x) goto ... else goto ...
54
55    Will be transformed into:
56
57      bb0:
58        if (a COND b) goto ... else goto ...
59  
60    Similarly for the tests (x == 0), (x != 0), (x == 1) and (x != 1).
61
62    Or (assuming c1 and c2 are constants):
63
64      bb0:
65        x = a + c1;  
66        if (x EQ/NEQ c2) goto ... else goto ...
67
68    Will be transformed into:
69
70      bb0:
71         if (a EQ/NEQ (c2 - c1)) goto ... else goto ...
72
73    Similarly for x = a - c1.
74     
75    Or
76
77      bb0:
78        x = !a
79        if (x) goto ... else goto ...
80
81    Will be transformed into:
82
83      bb0:
84         if (a == 0) goto ... else goto ...
85
86    Similarly for the tests (x == 0), (x != 0), (x == 1) and (x != 1).
87    For these cases, we propagate A into all, possibly more than one,
88    COND_EXPRs that use X.
89
90    Or
91
92      bb0:
93        x = (typecast) a
94        if (x) goto ... else goto ...
95
96    Will be transformed into:
97
98      bb0:
99         if (a != 0) goto ... else goto ...
100
101    (Assuming a is an integral type and x is a boolean or x is an
102     integral and a is a boolean.)
103
104    Similarly for the tests (x == 0), (x != 0), (x == 1) and (x != 1).
105    For these cases, we propagate A into all, possibly more than one,
106    COND_EXPRs that use X.
107
108    In addition to eliminating the variable and the statement which assigns
109    a value to the variable, we may be able to later thread the jump without
110    adding insane complexity in the dominator optimizer.
111
112    Also note these transformations can cascade.  We handle this by having
113    a worklist of COND_EXPR statements to examine.  As we make a change to
114    a statement, we put it back on the worklist to examine on the next
115    iteration of the main loop.
116
117    A second class of propagation opportunities arises for ADDR_EXPR
118    nodes.
119
120      ptr = &x->y->z;
121      res = *ptr;
122
123    Will get turned into
124
125      res = x->y->z;
126
127    Or
128
129      ptr = &x[0];
130      ptr2 = ptr + <constant>;
131
132    Will get turned into
133
134      ptr2 = &x[constant/elementsize];
135
136   Or
137
138      ptr = &x[0];
139      offset = index * element_size;
140      offset_p = (pointer) offset;
141      ptr2 = ptr + offset_p
142
143   Will get turned into:
144
145      ptr2 = &x[index];
146
147   We also propagate casts into SWITCH_EXPR and COND_EXPR conditions to
148   allow us to remove the cast and {NOT_EXPR,NEG_EXPR} into a subsequent
149   {NOT_EXPR,NEG_EXPR}.
150
151    This will (of course) be extended as other needs arise.  */
152
153 static bool forward_propagate_addr_expr (tree name, tree rhs);
154
155 /* Set to true if we delete EH edges during the optimization.  */
156 static bool cfg_changed;
157
158
159 /* Get the next statement we can propagate NAME's value into skipping
160    trivial copies.  Returns the statement that is suitable as a
161    propagation destination or NULL_TREE if there is no such one.
162    This only returns destinations in a single-use chain.  FINAL_NAME_P
163    if non-NULL is written to the ssa name that represents the use.  */
164
165 static tree
166 get_prop_dest_stmt (tree name, tree *final_name_p)
167 {
168   use_operand_p use;
169   tree use_stmt;
170
171   do {
172     /* If name has multiple uses, bail out.  */
173     if (!single_imm_use (name, &use, &use_stmt))
174       return NULL_TREE;
175
176     /* If this is not a trivial copy, we found it.  */
177     if (TREE_CODE (use_stmt) != GIMPLE_MODIFY_STMT
178         || TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 0)) != SSA_NAME
179         || GIMPLE_STMT_OPERAND (use_stmt, 1) != name)
180       break;
181
182     /* Continue searching uses of the copy destination.  */
183     name = GIMPLE_STMT_OPERAND (use_stmt, 0);
184   } while (1);
185
186   if (final_name_p)
187     *final_name_p = name;
188
189   return use_stmt;
190 }
191
192 /* Get the statement we can propagate from into NAME skipping
193    trivial copies.  Returns the statement which defines the
194    propagation source or NULL_TREE if there is no such one.
195    If SINGLE_USE_ONLY is set considers only sources which have
196    a single use chain up to NAME.  If SINGLE_USE_P is non-null,
197    it is set to whether the chain to NAME is a single use chain
198    or not.  SINGLE_USE_P is not written to if SINGLE_USE_ONLY is set.  */
199
200 static tree
201 get_prop_source_stmt (tree name, bool single_use_only, bool *single_use_p)
202 {
203   bool single_use = true;
204
205   do {
206     tree def_stmt = SSA_NAME_DEF_STMT (name);
207
208     if (!has_single_use (name))
209       {
210         single_use = false;
211         if (single_use_only)
212           return NULL_TREE;
213       }
214
215     /* If name is defined by a PHI node or is the default def, bail out.  */
216     if (TREE_CODE (def_stmt) != GIMPLE_MODIFY_STMT)
217       return NULL_TREE;
218
219     /* If name is not a simple copy destination, we found it.  */
220     if (TREE_CODE (GIMPLE_STMT_OPERAND (def_stmt, 1)) != SSA_NAME)
221       {
222         if (!single_use_only && single_use_p)
223           *single_use_p = single_use;
224
225         return def_stmt;
226       }
227
228     /* Continue searching the def of the copy source name.  */
229     name = GIMPLE_STMT_OPERAND (def_stmt, 1);
230   } while (1);
231 }
232
233 /* Checks if the destination ssa name in DEF_STMT can be used as
234    propagation source.  Returns true if so, otherwise false.  */
235
236 static bool
237 can_propagate_from (tree def_stmt)
238 {
239   tree rhs = GIMPLE_STMT_OPERAND (def_stmt, 1);
240
241   /* We cannot propagate ssa names that occur in abnormal phi nodes.  */
242   switch (TREE_CODE_LENGTH (TREE_CODE (rhs)))
243     {
244     case 3:
245       if (TREE_OPERAND (rhs, 2) != NULL_TREE
246           && TREE_CODE (TREE_OPERAND (rhs, 2)) == SSA_NAME
247           && SSA_NAME_OCCURS_IN_ABNORMAL_PHI (TREE_OPERAND (rhs, 2)))
248         return false;
249     case 2:
250       if (TREE_OPERAND (rhs, 1) != NULL_TREE
251           && TREE_CODE (TREE_OPERAND (rhs, 1)) == SSA_NAME
252           && SSA_NAME_OCCURS_IN_ABNORMAL_PHI (TREE_OPERAND (rhs, 1)))
253         return false;
254     case 1:
255       if (TREE_OPERAND (rhs, 0) != NULL_TREE
256           && TREE_CODE (TREE_OPERAND (rhs, 0)) == SSA_NAME
257           && SSA_NAME_OCCURS_IN_ABNORMAL_PHI (TREE_OPERAND (rhs, 0)))
258         return false;
259       break;
260
261     default:
262       return false;
263     }
264
265   /* If the definition is a conversion of a pointer to a function type,
266      then we can not apply optimizations as some targets require function
267      pointers to be canonicalized and in this case this optimization could
268      eliminate a necessary canonicalization.  */
269   if ((TREE_CODE (rhs) == NOP_EXPR
270        || TREE_CODE (rhs) == CONVERT_EXPR)
271       && POINTER_TYPE_P (TREE_TYPE (TREE_OPERAND (rhs, 0)))
272       && TREE_CODE (TREE_TYPE (TREE_TYPE
273                                 (TREE_OPERAND (rhs, 0)))) == FUNCTION_TYPE)
274     return false;
275
276   return true;
277 }
278
279 /* Remove a copy chain ending in NAME along the defs but not
280    further or including UP_TO_STMT.  If NAME was replaced in
281    its only use then this function can be used to clean up
282    dead stmts.  Returns true if UP_TO_STMT can be removed
283    as well, otherwise false.  */
284
285 static bool
286 remove_prop_source_from_use (tree name, tree up_to_stmt)
287 {
288   block_stmt_iterator bsi;
289   tree stmt;
290
291   do {
292     if (!has_zero_uses (name))
293       return false;
294
295     stmt = SSA_NAME_DEF_STMT (name);
296     if (stmt == up_to_stmt)
297       return true;
298
299     bsi = bsi_for_stmt (stmt);
300     release_defs (stmt);
301     bsi_remove (&bsi, true);
302
303     name = GIMPLE_STMT_OPERAND (stmt, 1);
304   } while (TREE_CODE (name) == SSA_NAME);
305
306   return false;
307 }
308
309 /* Combine OP0 CODE OP1 in the context of a COND_EXPR.  Returns
310    the folded result in a form suitable for COND_EXPR_COND or
311    NULL_TREE, if there is no suitable simplified form.  If
312    INVARIANT_ONLY is true only gimple_min_invariant results are
313    considered simplified.  */
314
315 static tree
316 combine_cond_expr_cond (enum tree_code code, tree type,
317                         tree op0, tree op1, bool invariant_only)
318 {
319   tree t;
320
321   gcc_assert (TREE_CODE_CLASS (code) == tcc_comparison);
322
323   t = fold_binary (code, type, op0, op1);
324   if (!t)
325     return NULL_TREE;
326
327   /* Require that we got a boolean type out if we put one in.  */
328   gcc_assert (TREE_CODE (TREE_TYPE (t)) == TREE_CODE (type));
329
330   /* For (bool)x use x != 0.  */
331   if (TREE_CODE (t) == NOP_EXPR
332       && TREE_TYPE (t) == boolean_type_node)
333     {
334       tree top0 = TREE_OPERAND (t, 0);
335       t = build2 (NE_EXPR, type,
336                   top0, build_int_cst (TREE_TYPE (top0), 0));
337     }
338   /* For !x use x == 0.  */
339   else if (TREE_CODE (t) == TRUTH_NOT_EXPR)
340     {
341       tree top0 = TREE_OPERAND (t, 0);
342       t = build2 (EQ_EXPR, type,
343                   top0, build_int_cst (TREE_TYPE (top0), 0));
344     }
345   /* For cmp ? 1 : 0 use cmp.  */
346   else if (TREE_CODE (t) == COND_EXPR
347            && COMPARISON_CLASS_P (TREE_OPERAND (t, 0))
348            && integer_onep (TREE_OPERAND (t, 1))
349            && integer_zerop (TREE_OPERAND (t, 2)))
350     {
351       tree top0 = TREE_OPERAND (t, 0);
352       t = build2 (TREE_CODE (top0), type,
353                   TREE_OPERAND (top0, 0), TREE_OPERAND (top0, 1));
354     }
355
356   /* Bail out if we required an invariant but didn't get one.  */
357   if (invariant_only
358       && !is_gimple_min_invariant (t))
359     return NULL_TREE;
360
361   /* A valid conditional for a COND_EXPR is either a gimple value
362      or a comparison with two gimple value operands.  */
363   if (is_gimple_val (t)
364       || (COMPARISON_CLASS_P (t)
365           && is_gimple_val (TREE_OPERAND (t, 0))
366           && is_gimple_val (TREE_OPERAND (t, 1))))
367     return t;
368
369   return NULL_TREE;
370 }
371
372 /* Propagate from the ssa name definition statements of COND_EXPR
373    in statement STMT into the conditional if that simplifies it.  */
374
375 static bool
376 forward_propagate_into_cond (tree cond_expr, tree stmt)
377 {
378   bool did_something = false;
379
380   do {
381     tree tmp = NULL_TREE;
382     tree cond = COND_EXPR_COND (cond_expr);
383     tree name, def_stmt, rhs;
384     bool single_use_p;
385
386     /* We can do tree combining on SSA_NAME and comparison expressions.  */
387     if (COMPARISON_CLASS_P (cond)
388         && TREE_CODE (TREE_OPERAND (cond, 0)) == SSA_NAME)
389       {
390         /* For comparisons use the first operand, that is likely to
391            simplify comparisons against constants.  */
392         name = TREE_OPERAND (cond, 0);
393         def_stmt = get_prop_source_stmt (name, false, &single_use_p);
394         if (def_stmt != NULL_TREE
395             && can_propagate_from (def_stmt))
396           {
397             tree op1 = TREE_OPERAND (cond, 1);
398             rhs = GIMPLE_STMT_OPERAND (def_stmt, 1);
399             tmp = combine_cond_expr_cond (TREE_CODE (cond), boolean_type_node,
400                                           fold_convert (TREE_TYPE (op1), rhs),
401                                           op1, !single_use_p);
402           }
403         /* If that wasn't successful, try the second operand.  */
404         if (tmp == NULL_TREE
405             && TREE_CODE (TREE_OPERAND (cond, 1)) == SSA_NAME)
406           {
407             tree op0 = TREE_OPERAND (cond, 0);
408             name = TREE_OPERAND (cond, 1);
409             def_stmt = get_prop_source_stmt (name, false, &single_use_p);
410             if (def_stmt == NULL_TREE
411                 || !can_propagate_from (def_stmt))
412               return did_something;
413
414             rhs = GIMPLE_STMT_OPERAND (def_stmt, 1);
415             tmp = combine_cond_expr_cond (TREE_CODE (cond), boolean_type_node,
416                                           op0,
417                                           fold_convert (TREE_TYPE (op0), rhs),
418                                           !single_use_p);
419           }
420       }
421     else if (TREE_CODE (cond) == SSA_NAME)
422       {
423         name = cond;
424         def_stmt = get_prop_source_stmt (name, true, NULL);
425         if (def_stmt == NULL_TREE
426             || !can_propagate_from (def_stmt))
427           return did_something;
428
429         rhs = GIMPLE_STMT_OPERAND (def_stmt, 1);
430         tmp = combine_cond_expr_cond (NE_EXPR, boolean_type_node, rhs,
431                                       build_int_cst (TREE_TYPE (rhs), 0),
432                                       false);
433       }
434
435     if (tmp)
436       {
437         if (dump_file && tmp)
438           {
439             fprintf (dump_file, "  Replaced '");
440             print_generic_expr (dump_file, cond, 0);
441             fprintf (dump_file, "' with '");
442             print_generic_expr (dump_file, tmp, 0);
443             fprintf (dump_file, "'\n");
444           }
445
446         COND_EXPR_COND (cond_expr) = unshare_expr (tmp);
447         update_stmt (stmt);
448
449         /* Remove defining statements.  */
450         remove_prop_source_from_use (name, NULL);
451
452         did_something = true;
453
454         /* Continue combining.  */
455         continue;
456       }
457
458     break;
459   } while (1);
460
461   return did_something;
462 }
463
464 /* We've just substituted an ADDR_EXPR into stmt.  Update all the 
465    relevant data structures to match.  */
466
467 static void
468 tidy_after_forward_propagate_addr (tree stmt)
469 {
470   /* We may have turned a trapping insn into a non-trapping insn.  */
471   if (maybe_clean_or_replace_eh_stmt (stmt, stmt)
472       && tree_purge_dead_eh_edges (bb_for_stmt (stmt)))
473     cfg_changed = true;
474
475   if (TREE_CODE (GIMPLE_STMT_OPERAND (stmt, 1)) == ADDR_EXPR)
476      recompute_tree_invariant_for_addr_expr (GIMPLE_STMT_OPERAND (stmt, 1));
477
478   mark_symbols_for_renaming (stmt);
479 }
480
481 /* DEF_RHS defines LHS which is contains the address of the 0th element
482    in an array.  USE_STMT uses LHS to compute the address of an
483    arbitrary element within the array.  The (variable) byte offset
484    of the element is contained in OFFSET.
485
486    We walk back through the use-def chains of OFFSET to verify that
487    it is indeed computing the offset of an element within the array
488    and extract the index corresponding to the given byte offset.
489
490    We then try to fold the entire address expression into a form
491    &array[index].
492
493    If we are successful, we replace the right hand side of USE_STMT
494    with the new address computation.  */
495
496 static bool
497 forward_propagate_addr_into_variable_array_index (tree offset, tree lhs,
498                                                   tree def_rhs, tree use_stmt)
499 {
500   tree index;
501
502   /* The offset must be defined by a simple GIMPLE_MODIFY_STMT statement.  */
503   if (TREE_CODE (offset) != GIMPLE_MODIFY_STMT)
504     return false;
505
506   /* The RHS of the statement which defines OFFSET must be a gimple
507      cast of another SSA_NAME.  */
508   offset = GIMPLE_STMT_OPERAND (offset, 1);
509   if (!is_gimple_cast (offset))
510     return false;
511
512   offset = TREE_OPERAND (offset, 0);
513   if (TREE_CODE (offset) != SSA_NAME)
514     return false;
515
516   /* Get the defining statement of the offset before type
517      conversion.  */
518   offset = SSA_NAME_DEF_STMT (offset);
519
520   /* The statement which defines OFFSET before type conversion
521      must be a simple GIMPLE_MODIFY_STMT.  */
522   if (TREE_CODE (offset) != GIMPLE_MODIFY_STMT)
523     return false;
524
525   /* The RHS of the statement which defines OFFSET must be a
526      multiplication of an object by the size of the array elements. 
527      This implicitly verifies that the size of the array elements
528      is constant.  */
529   offset = GIMPLE_STMT_OPERAND (offset, 1);
530   if (TREE_CODE (offset) != MULT_EXPR
531       || TREE_CODE (TREE_OPERAND (offset, 1)) != INTEGER_CST
532       || !simple_cst_equal (TREE_OPERAND (offset, 1),
533                             TYPE_SIZE_UNIT (TREE_TYPE (TREE_TYPE (lhs)))))
534     return false;
535
536   /* The first operand to the MULT_EXPR is the desired index.  */
537   index = TREE_OPERAND (offset, 0);
538
539   /* Replace the pointer addition with array indexing.  */
540   GIMPLE_STMT_OPERAND (use_stmt, 1) = unshare_expr (def_rhs);
541   TREE_OPERAND (TREE_OPERAND (GIMPLE_STMT_OPERAND (use_stmt, 1), 0), 1)
542     = index;
543
544   /* That should have created gimple, so there is no need to
545      record information to undo the propagation.  */
546   fold_stmt_inplace (use_stmt);
547   tidy_after_forward_propagate_addr (use_stmt);
548   return true;
549 }
550
551 /* NAME is a SSA_NAME representing DEF_RHS which is of the form
552    ADDR_EXPR <whatever>.
553
554    Try to forward propagate the ADDR_EXPR into the use USE_STMT.
555    Often this will allow for removal of an ADDR_EXPR and INDIRECT_REF
556    node or for recovery of array indexing from pointer arithmetic.
557    
558    Return true if the propagation was successful (the propagation can
559    be not totally successful, yet things may have been changed).  */
560
561 static bool
562 forward_propagate_addr_expr_1 (tree name, tree def_rhs, tree use_stmt,
563                                bool single_use_p)
564 {
565   tree lhs, rhs, array_ref;
566
567   /* Strip away any outer COMPONENT_REF/ARRAY_REF nodes from the LHS. 
568      ADDR_EXPR will not appear on the LHS.  */
569   lhs = GIMPLE_STMT_OPERAND (use_stmt, 0);
570   while (handled_component_p (lhs))
571     lhs = TREE_OPERAND (lhs, 0);
572
573   rhs = GIMPLE_STMT_OPERAND (use_stmt, 1);
574
575   /* Now see if the LHS node is an INDIRECT_REF using NAME.  If so, 
576      propagate the ADDR_EXPR into the use of NAME and fold the result.  */
577   if (TREE_CODE (lhs) == INDIRECT_REF && TREE_OPERAND (lhs, 0) == name)
578     {
579       /* This should always succeed in creating gimple, so there is
580          no need to save enough state to undo this propagation.  */
581       TREE_OPERAND (lhs, 0) = unshare_expr (def_rhs);
582       fold_stmt_inplace (use_stmt);
583       tidy_after_forward_propagate_addr (use_stmt);
584
585       /* Continue propagating into the RHS.  */
586     }
587
588   /* Trivial cases.  The use statement could be a trivial copy or a
589      useless conversion.  Recurse to the uses of the lhs as copyprop does
590      not copy through differen variant pointers and FRE does not catch
591      all useless conversions.  Treat the case of a single-use name and
592      a conversion to def_rhs type separate, though.  */
593   else if (TREE_CODE (lhs) == SSA_NAME
594            && (TREE_CODE (rhs) == NOP_EXPR
595                || TREE_CODE (rhs) == CONVERT_EXPR)
596            && TREE_TYPE (rhs) == TREE_TYPE (def_rhs)
597            && single_use_p)
598     {
599       GIMPLE_STMT_OPERAND (use_stmt, 1) = unshare_expr (def_rhs);
600       return true;
601     }
602   else if ((TREE_CODE (lhs) == SSA_NAME
603             && rhs == name)
604            || ((TREE_CODE (rhs) == NOP_EXPR
605                 || TREE_CODE (rhs) == CONVERT_EXPR)
606                && tree_ssa_useless_type_conversion_1 (TREE_TYPE (rhs),
607                                                       TREE_TYPE (def_rhs))))
608     return forward_propagate_addr_expr (lhs, def_rhs);
609
610   /* Strip away any outer COMPONENT_REF, ARRAY_REF or ADDR_EXPR
611      nodes from the RHS.  */
612   while (handled_component_p (rhs)
613          || TREE_CODE (rhs) == ADDR_EXPR)
614     rhs = TREE_OPERAND (rhs, 0);
615
616   /* Now see if the RHS node is an INDIRECT_REF using NAME.  If so, 
617      propagate the ADDR_EXPR into the use of NAME and fold the result.  */
618   if (TREE_CODE (rhs) == INDIRECT_REF && TREE_OPERAND (rhs, 0) == name)
619     {
620       /* This should always succeed in creating gimple, so there is
621          no need to save enough state to undo this propagation.  */
622       TREE_OPERAND (rhs, 0) = unshare_expr (def_rhs);
623       fold_stmt_inplace (use_stmt);
624       tidy_after_forward_propagate_addr (use_stmt);
625       return true;
626     }
627
628   /* The remaining cases are all for turning pointer arithmetic into
629      array indexing.  They only apply when we have the address of
630      element zero in an array.  If that is not the case then there
631      is nothing to do.  */
632   array_ref = TREE_OPERAND (def_rhs, 0);
633   if (TREE_CODE (array_ref) != ARRAY_REF
634       || TREE_CODE (TREE_TYPE (TREE_OPERAND (array_ref, 0))) != ARRAY_TYPE
635       || !integer_zerop (TREE_OPERAND (array_ref, 1)))
636     return false;
637
638   /* If the use of the ADDR_EXPR must be a PLUS_EXPR, or else there
639      is nothing to do. */
640   if (TREE_CODE (rhs) != PLUS_EXPR)
641     return false;
642
643   /* Try to optimize &x[0] + C where C is a multiple of the size
644      of the elements in X into &x[C/element size].  */
645   if (TREE_OPERAND (rhs, 0) == name
646       && TREE_CODE (TREE_OPERAND (rhs, 1)) == INTEGER_CST)
647     {
648       tree orig = unshare_expr (rhs);
649       TREE_OPERAND (rhs, 0) = unshare_expr (def_rhs);
650
651       /* If folding succeeds, then we have just exposed new variables
652          in USE_STMT which will need to be renamed.  If folding fails,
653          then we need to put everything back the way it was.  */
654       if (fold_stmt_inplace (use_stmt))
655         {
656           tidy_after_forward_propagate_addr (use_stmt);
657           return true;
658         }
659       else
660         {
661           GIMPLE_STMT_OPERAND (use_stmt, 1) = orig;
662           update_stmt (use_stmt);
663           return false;
664         }
665     }
666
667   /* Try to optimize &x[0] + OFFSET where OFFSET is defined by
668      converting a multiplication of an index by the size of the
669      array elements, then the result is converted into the proper
670      type for the arithmetic.  */
671   if (TREE_OPERAND (rhs, 0) == name
672       && TREE_CODE (TREE_OPERAND (rhs, 1)) == SSA_NAME
673       /* Avoid problems with IVopts creating PLUS_EXPRs with a
674          different type than their operands.  */
675       && lang_hooks.types_compatible_p (TREE_TYPE (name), TREE_TYPE (rhs)))
676     {
677       bool res;
678       tree offset_stmt = SSA_NAME_DEF_STMT (TREE_OPERAND (rhs, 1));
679       
680       res = forward_propagate_addr_into_variable_array_index (offset_stmt, lhs,
681                                                               def_rhs, use_stmt);
682       return res;
683     }
684               
685   /* Same as the previous case, except the operands of the PLUS_EXPR
686      were reversed.  */
687   if (TREE_OPERAND (rhs, 1) == name
688       && TREE_CODE (TREE_OPERAND (rhs, 0)) == SSA_NAME
689       /* Avoid problems with IVopts creating PLUS_EXPRs with a
690          different type than their operands.  */
691       && lang_hooks.types_compatible_p (TREE_TYPE (name), TREE_TYPE (rhs)))
692     {
693       bool res;
694       tree offset_stmt = SSA_NAME_DEF_STMT (TREE_OPERAND (rhs, 0));
695       res = forward_propagate_addr_into_variable_array_index (offset_stmt, lhs,
696                                                               def_rhs, use_stmt);
697       return res;
698     }
699   return false;
700 }
701
702 /* STMT is a statement of the form SSA_NAME = ADDR_EXPR <whatever>.
703
704    Try to forward propagate the ADDR_EXPR into all uses of the SSA_NAME.
705    Often this will allow for removal of an ADDR_EXPR and INDIRECT_REF
706    node or for recovery of array indexing from pointer arithmetic.
707    Returns true, if all uses have been propagated into.  */
708
709 static bool
710 forward_propagate_addr_expr (tree name, tree rhs)
711 {
712   int stmt_loop_depth = bb_for_stmt (SSA_NAME_DEF_STMT (name))->loop_depth;
713   imm_use_iterator iter;
714   tree use_stmt;
715   bool all = true;
716   bool single_use_p = has_single_use (name);
717
718   FOR_EACH_IMM_USE_STMT (use_stmt, iter, name)
719     {
720       bool result;
721
722       /* If the use is not in a simple assignment statement, then
723          there is nothing we can do.  */
724       if (TREE_CODE (use_stmt) != GIMPLE_MODIFY_STMT)
725         {
726           all = false;
727           continue;
728         }
729
730       /* If the use is in a deeper loop nest, then we do not want
731         to propagate the ADDR_EXPR into the loop as that is likely
732         adding expression evaluations into the loop.  */
733       if (bb_for_stmt (use_stmt)->loop_depth > stmt_loop_depth)
734         {
735           all = false;
736           continue;
737         }
738
739       /* If the use_stmt has side-effects, don't propagate into it.  */
740       if (stmt_ann (use_stmt)->has_volatile_ops)
741         {
742           all = false;
743           continue;
744         }
745
746       push_stmt_changes (&use_stmt);
747
748       result = forward_propagate_addr_expr_1 (name, rhs, use_stmt,
749                                               single_use_p);
750       all &= result;
751
752       pop_stmt_changes (&use_stmt);
753
754       /* Remove intermediate now unused copy and conversion chains.  */
755       if (result
756           && TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 0)) == SSA_NAME
757           && (TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 1)) == SSA_NAME
758               || TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 1)) == NOP_EXPR
759               || TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 1)) == CONVERT_EXPR))
760         {
761           block_stmt_iterator bsi = bsi_for_stmt (use_stmt);
762           release_defs (use_stmt);
763           bsi_remove (&bsi, true);
764         }
765     }
766
767   return all;
768 }
769
770 /* Forward propagate the comparison COND defined in STMT like
771    cond_1 = x CMP y to uses of the form
772      a_1 = (T')cond_1
773      a_1 = !cond_1
774      a_1 = cond_1 != 0
775    Returns true if stmt is now unused.  */
776
777 static bool
778 forward_propagate_comparison (tree cond, tree stmt)
779 {
780   tree name = GIMPLE_STMT_OPERAND (stmt, 0);
781   tree use_stmt, tmp = NULL_TREE;
782
783   /* Don't propagate ssa names that occur in abnormal phis.  */
784   if ((TREE_CODE (TREE_OPERAND (cond, 0)) == SSA_NAME
785        && SSA_NAME_OCCURS_IN_ABNORMAL_PHI (TREE_OPERAND (cond, 0)))
786       || (TREE_CODE (TREE_OPERAND (cond, 1)) == SSA_NAME
787           && SSA_NAME_OCCURS_IN_ABNORMAL_PHI (TREE_OPERAND (cond, 1))))
788     return false;
789
790   /* Do not un-cse comparisons.  But propagate through copies.  */
791   use_stmt = get_prop_dest_stmt (name, &name);
792   if (use_stmt == NULL_TREE)
793     return false;
794
795   /* Conversion of the condition result to another integral type.  */
796   if (TREE_CODE (use_stmt) == GIMPLE_MODIFY_STMT
797       && (TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 1)) == CONVERT_EXPR
798           || TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 1)) == NOP_EXPR
799           || COMPARISON_CLASS_P (GIMPLE_STMT_OPERAND (use_stmt, 1))
800           || TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 1)) == TRUTH_NOT_EXPR)
801       && INTEGRAL_TYPE_P (TREE_TYPE (GIMPLE_STMT_OPERAND (use_stmt, 0))))
802     {
803       tree lhs = GIMPLE_STMT_OPERAND (use_stmt, 0);
804       tree rhs = GIMPLE_STMT_OPERAND (use_stmt, 1);
805
806       /* We can propagate the condition into a conversion.  */
807       if (TREE_CODE (rhs) == CONVERT_EXPR
808           || TREE_CODE (rhs) == NOP_EXPR)
809         {
810           /* Avoid using fold here as that may create a COND_EXPR with
811              non-boolean condition as canonical form.  */
812           tmp = build2 (TREE_CODE (cond), TREE_TYPE (lhs),
813                         TREE_OPERAND (cond, 0), TREE_OPERAND (cond, 1));
814         }
815       /* We can propagate the condition into X op CST where op
816          is EQ_EXRP or NE_EXPR and CST is either one or zero.  */
817       else if (COMPARISON_CLASS_P (rhs)
818                && TREE_CODE (TREE_OPERAND (rhs, 0)) == SSA_NAME
819                && TREE_CODE (TREE_OPERAND (rhs, 1)) == INTEGER_CST)
820         {
821           enum tree_code code = TREE_CODE (rhs);
822           tree cst = TREE_OPERAND (rhs, 1);
823
824           tmp = combine_cond_expr_cond (code, TREE_TYPE (lhs),
825                                         fold_convert (TREE_TYPE (cst), cond),
826                                         cst, false);
827           if (tmp == NULL_TREE)
828             return false;
829         }
830       /* We can propagate the condition into a statement that
831          computes the logical negation of the comparison result.  */
832       else if (TREE_CODE (rhs) == TRUTH_NOT_EXPR)
833         {
834           tree type = TREE_TYPE (TREE_OPERAND (cond, 0));
835           bool nans = HONOR_NANS (TYPE_MODE (type));
836           enum tree_code code;
837           code = invert_tree_comparison (TREE_CODE (cond), nans);
838           if (code == ERROR_MARK)
839             return false;
840
841           tmp = build2 (code, TREE_TYPE (lhs), TREE_OPERAND (cond, 0),
842                         TREE_OPERAND (cond, 1));
843         }
844       else
845         return false;
846
847       GIMPLE_STMT_OPERAND (use_stmt, 1) = unshare_expr (tmp);
848       update_stmt (use_stmt);
849
850       /* Remove defining statements.  */
851       remove_prop_source_from_use (name, stmt);
852
853       if (dump_file && (dump_flags & TDF_DETAILS))
854         {
855           fprintf (dump_file, "  Replaced '");
856           print_generic_expr (dump_file, rhs, dump_flags);
857           fprintf (dump_file, "' with '");
858           print_generic_expr (dump_file, tmp, dump_flags);
859           fprintf (dump_file, "'\n");
860         }
861
862       return true;
863     }
864
865   return false;
866 }
867
868 /* If we have lhs = ~x (STMT), look and see if earlier we had x = ~y.
869    If so, we can change STMT into lhs = y which can later be copy
870    propagated.  Similarly for negation. 
871
872    This could trivially be formulated as a forward propagation 
873    to immediate uses.  However, we already had an implementation
874    from DOM which used backward propagation via the use-def links.
875
876    It turns out that backward propagation is actually faster as
877    there's less work to do for each NOT/NEG expression we find.
878    Backwards propagation needs to look at the statement in a single
879    backlink.  Forward propagation needs to look at potentially more
880    than one forward link.  */
881
882 static void
883 simplify_not_neg_expr (tree stmt)
884 {
885   tree rhs = GIMPLE_STMT_OPERAND (stmt, 1);
886   tree rhs_def_stmt = SSA_NAME_DEF_STMT (TREE_OPERAND (rhs, 0));
887
888   /* See if the RHS_DEF_STMT has the same form as our statement.  */
889   if (TREE_CODE (rhs_def_stmt) == GIMPLE_MODIFY_STMT
890       && TREE_CODE (GIMPLE_STMT_OPERAND (rhs_def_stmt, 1)) == TREE_CODE (rhs))
891     {
892       tree rhs_def_operand =
893         TREE_OPERAND (GIMPLE_STMT_OPERAND (rhs_def_stmt, 1), 0);
894
895       /* Verify that RHS_DEF_OPERAND is a suitable SSA_NAME.  */
896       if (TREE_CODE (rhs_def_operand) == SSA_NAME
897           && ! SSA_NAME_OCCURS_IN_ABNORMAL_PHI (rhs_def_operand))
898         {
899           GIMPLE_STMT_OPERAND (stmt, 1) = rhs_def_operand;
900           update_stmt (stmt);
901         }
902     }
903 }
904
905 /* STMT is a SWITCH_EXPR for which we attempt to find equivalent forms of
906    the condition which we may be able to optimize better.  */
907
908 static void
909 simplify_switch_expr (tree stmt)
910 {
911   tree cond = SWITCH_COND (stmt);
912   tree def, to, ti;
913
914   /* The optimization that we really care about is removing unnecessary
915      casts.  That will let us do much better in propagating the inferred
916      constant at the switch target.  */
917   if (TREE_CODE (cond) == SSA_NAME)
918     {
919       def = SSA_NAME_DEF_STMT (cond);
920       if (TREE_CODE (def) == GIMPLE_MODIFY_STMT)
921         {
922           def = GIMPLE_STMT_OPERAND (def, 1);
923           if (TREE_CODE (def) == NOP_EXPR)
924             {
925               int need_precision;
926               bool fail;
927
928               def = TREE_OPERAND (def, 0);
929
930 #ifdef ENABLE_CHECKING
931               /* ??? Why was Jeff testing this?  We are gimple...  */
932               gcc_assert (is_gimple_val (def));
933 #endif
934
935               to = TREE_TYPE (cond);
936               ti = TREE_TYPE (def);
937
938               /* If we have an extension that preserves value, then we
939                  can copy the source value into the switch.  */
940
941               need_precision = TYPE_PRECISION (ti);
942               fail = false;
943               if (! INTEGRAL_TYPE_P (ti))
944                 fail = true;
945               else if (TYPE_UNSIGNED (to) && !TYPE_UNSIGNED (ti))
946                 fail = true;
947               else if (!TYPE_UNSIGNED (to) && TYPE_UNSIGNED (ti))
948                 need_precision += 1;
949               if (TYPE_PRECISION (to) < need_precision)
950                 fail = true;
951
952               if (!fail)
953                 {
954                   SWITCH_COND (stmt) = def;
955                   update_stmt (stmt);
956                 }
957             }
958         }
959     }
960 }
961
962 /* Main entry point for the forward propagation optimizer.  */
963
964 static unsigned int
965 tree_ssa_forward_propagate_single_use_vars (void)
966 {
967   basic_block bb;
968   unsigned int todoflags = 0;
969
970   cfg_changed = false;
971
972   FOR_EACH_BB (bb)
973     {
974       block_stmt_iterator bsi;
975
976       /* Note we update BSI within the loop as necessary.  */
977       for (bsi = bsi_start (bb); !bsi_end_p (bsi); )
978         {
979           tree stmt = bsi_stmt (bsi);
980
981           /* If this statement sets an SSA_NAME to an address,
982              try to propagate the address into the uses of the SSA_NAME.  */
983           if (TREE_CODE (stmt) == GIMPLE_MODIFY_STMT)
984             {
985               tree lhs = GIMPLE_STMT_OPERAND (stmt, 0);
986               tree rhs = GIMPLE_STMT_OPERAND (stmt, 1);
987
988
989               if (TREE_CODE (lhs) != SSA_NAME)
990                 {
991                   bsi_next (&bsi);
992                   continue;
993                 }
994
995               if (TREE_CODE (rhs) == ADDR_EXPR)
996                 {
997                   if (forward_propagate_addr_expr (lhs, rhs))
998                     {
999                       release_defs (stmt);
1000                       todoflags |= TODO_remove_unused_locals;
1001                       bsi_remove (&bsi, true);
1002                     }
1003                   else
1004                     bsi_next (&bsi);
1005                 }
1006               else if ((TREE_CODE (rhs) == BIT_NOT_EXPR
1007                         || TREE_CODE (rhs) == NEGATE_EXPR)
1008                        && TREE_CODE (TREE_OPERAND (rhs, 0)) == SSA_NAME)
1009                 {
1010                   simplify_not_neg_expr (stmt);
1011                   bsi_next (&bsi);
1012                 }
1013               else if (TREE_CODE (rhs) == COND_EXPR)
1014                 {
1015                   bool did_something;
1016                   fold_defer_overflow_warnings ();
1017                   did_something = forward_propagate_into_cond (rhs, stmt);
1018                   fold_undefer_overflow_warnings (!TREE_NO_WARNING (rhs)
1019                     && did_something, stmt, WARN_STRICT_OVERFLOW_CONDITIONAL);
1020                   bsi_next (&bsi);
1021                 }
1022               else if (COMPARISON_CLASS_P (rhs))
1023                 {
1024                   if (forward_propagate_comparison (rhs, stmt))
1025                     {
1026                       release_defs (stmt);
1027                       todoflags |= TODO_remove_unused_locals;
1028                       bsi_remove (&bsi, true);
1029                     }
1030                   else
1031                     bsi_next (&bsi);
1032                 }
1033               else
1034                 bsi_next (&bsi);
1035             }
1036           else if (TREE_CODE (stmt) == SWITCH_EXPR)
1037             {
1038               simplify_switch_expr (stmt);
1039               bsi_next (&bsi);
1040             }
1041           else if (TREE_CODE (stmt) == COND_EXPR)
1042             {
1043               bool did_something;
1044               fold_defer_overflow_warnings ();
1045               did_something = forward_propagate_into_cond (stmt, stmt);
1046               fold_undefer_overflow_warnings (!TREE_NO_WARNING (stmt)
1047                                               && did_something, stmt,
1048                                               WARN_STRICT_OVERFLOW_CONDITIONAL);
1049               bsi_next (&bsi);
1050             }
1051           else
1052             bsi_next (&bsi);
1053         }
1054     }
1055
1056   if (cfg_changed)
1057     todoflags |= TODO_cleanup_cfg;
1058   return todoflags;
1059 }
1060
1061
1062 static bool
1063 gate_forwprop (void)
1064 {
1065   return 1;
1066 }
1067
1068 struct tree_opt_pass pass_forwprop = {
1069   "forwprop",                   /* name */
1070   gate_forwprop,                /* gate */
1071   tree_ssa_forward_propagate_single_use_vars,   /* execute */
1072   NULL,                         /* sub */
1073   NULL,                         /* next */
1074   0,                            /* static_pass_number */
1075   TV_TREE_FORWPROP,             /* tv_id */
1076   PROP_cfg | PROP_ssa,          /* properties_required */
1077   0,                            /* properties_provided */
1078   0,                            /* properties_destroyed */
1079   0,                            /* todo_flags_start */
1080   TODO_dump_func
1081   | TODO_ggc_collect
1082   | TODO_update_ssa
1083   | TODO_verify_ssa,            /* todo_flags_finish */
1084   0                             /* letter */
1085 };
1086
1087
1088 /* Structure to keep track of the value of a dereferenced PHI result
1089    and the set of virtual operands used for that dereference.  */
1090
1091 struct phiprop_d
1092 {
1093   tree value;
1094   tree vop_stmt;
1095 };
1096
1097 /* Verify if the value recorded for NAME in PHIVN is still valid at
1098    the start of basic block BB.  */
1099
1100 static bool
1101 phivn_valid_p (struct phiprop_d *phivn, tree name, basic_block bb)
1102 {
1103   tree vop_stmt = phivn[SSA_NAME_VERSION (name)].vop_stmt;
1104   ssa_op_iter ui;
1105   tree vuse;
1106
1107   /* The def stmts of all virtual uses need to be post-dominated
1108      by bb.  */
1109   FOR_EACH_SSA_TREE_OPERAND (vuse, vop_stmt, ui, SSA_OP_VUSE)
1110     {
1111       tree use_stmt;
1112       imm_use_iterator ui2;
1113       bool ok = true;
1114
1115       FOR_EACH_IMM_USE_STMT (use_stmt, ui2, vuse)
1116         {
1117           /* If BB does not dominate a VDEF, the value is invalid.  */
1118           if (((TREE_CODE (use_stmt) == GIMPLE_MODIFY_STMT
1119                 && !ZERO_SSA_OPERANDS (use_stmt, SSA_OP_VDEF))
1120                || TREE_CODE (use_stmt) == PHI_NODE)
1121               && !dominated_by_p (CDI_DOMINATORS, bb_for_stmt (use_stmt), bb))
1122             {
1123               ok = false;
1124               BREAK_FROM_IMM_USE_STMT (ui2);
1125             }
1126         }
1127       if (!ok)
1128         return false;
1129     }
1130
1131   return true;
1132 }
1133
1134 /* Insert a new phi node for the dereference of PHI at basic_block
1135    BB with the virtual operands from USE_STMT.  */
1136
1137 static tree
1138 phiprop_insert_phi (basic_block bb, tree phi, tree use_stmt,
1139                     struct phiprop_d *phivn, size_t n)
1140 {
1141   tree res, new_phi;
1142   edge_iterator ei;
1143   edge e;
1144
1145   /* Build a new PHI node to replace the definition of
1146      the indirect reference lhs.  */
1147   res = GIMPLE_STMT_OPERAND (use_stmt, 0);
1148   SSA_NAME_DEF_STMT (res) = new_phi = create_phi_node (res, bb);
1149
1150   /* Add PHI arguments for each edge inserting loads of the
1151      addressable operands.  */
1152   FOR_EACH_EDGE (e, ei, bb->preds)
1153     {
1154       tree old_arg, new_var, tmp;
1155
1156       old_arg = PHI_ARG_DEF_FROM_EDGE (phi, e);
1157       while (TREE_CODE (old_arg) == SSA_NAME
1158              && (SSA_NAME_VERSION (old_arg) >= n
1159                  || phivn[SSA_NAME_VERSION (old_arg)].value == NULL_TREE))
1160         {
1161           tree def_stmt = SSA_NAME_DEF_STMT (old_arg);
1162           old_arg = GIMPLE_STMT_OPERAND (def_stmt, 1);
1163         }
1164
1165       if (TREE_CODE (old_arg) == SSA_NAME)
1166         /* Reuse a formely created dereference.  */
1167         new_var = phivn[SSA_NAME_VERSION (old_arg)].value;
1168       else
1169         {
1170           old_arg = TREE_OPERAND (old_arg, 0);
1171           new_var = create_tmp_var (TREE_TYPE (old_arg), NULL);
1172           tmp = build2 (GIMPLE_MODIFY_STMT, void_type_node,
1173                         NULL_TREE, unshare_expr (old_arg));
1174           if (TREE_CODE (TREE_TYPE (old_arg)) == COMPLEX_TYPE
1175               || TREE_CODE (TREE_TYPE (old_arg)) == VECTOR_TYPE)
1176             DECL_GIMPLE_REG_P (new_var) = 1;
1177           add_referenced_var (new_var);
1178           new_var = make_ssa_name (new_var, tmp);
1179           GIMPLE_STMT_OPERAND (tmp, 0) = new_var;
1180
1181           bsi_insert_on_edge (e, tmp);
1182
1183           update_stmt (tmp);
1184           mark_symbols_for_renaming (tmp);
1185         }
1186
1187       add_phi_arg (new_phi, new_var, e);
1188     }
1189
1190   update_stmt (new_phi);
1191
1192   return res;
1193 }
1194
1195 /* Propagate between the phi node arguments of PHI in BB and phi result
1196    users.  For now this matches
1197         # p_2 = PHI <&x, &y>
1198       <Lx>:;
1199         p_3 = p_2;
1200         z_2 = *p_3;
1201    and converts it to
1202         # z_2 = PHI <x, y>
1203       <Lx>:;
1204    Returns true if a transformation was done and edge insertions
1205    need to be committed.  Global data PHIVN and N is used to track
1206    past transformation results.  We need to be especially careful here
1207    with aliasing issues as we are moving memory reads.  */
1208
1209 static bool
1210 propagate_with_phi (basic_block bb, tree phi, struct phiprop_d *phivn, size_t n)
1211 {
1212   tree ptr = PHI_RESULT (phi);
1213   tree use_stmt, res = NULL_TREE;
1214   block_stmt_iterator bsi;
1215   imm_use_iterator ui;
1216   use_operand_p arg_p, use;
1217   ssa_op_iter i;
1218   bool phi_inserted;
1219
1220   if (MTAG_P (SSA_NAME_VAR (ptr))
1221       || !POINTER_TYPE_P (TREE_TYPE (ptr))
1222       || !is_gimple_reg_type (TREE_TYPE (TREE_TYPE (ptr))))
1223     return false;
1224
1225   /* Check if we can "cheaply" dereference all phi arguments.  */
1226   FOR_EACH_PHI_ARG (arg_p, phi, i, SSA_OP_USE)
1227     {
1228       tree arg = USE_FROM_PTR (arg_p);
1229       /* Walk the ssa chain until we reach a ssa name we already
1230          created a value for or we reach a definition of the form
1231          ssa_name_n = &var;  */
1232       while (TREE_CODE (arg) == SSA_NAME
1233              && !SSA_NAME_IS_DEFAULT_DEF (arg)
1234              && (SSA_NAME_VERSION (arg) >= n
1235                  || phivn[SSA_NAME_VERSION (arg)].value == NULL_TREE))
1236         {
1237           tree def_stmt = SSA_NAME_DEF_STMT (arg);
1238           if (TREE_CODE (def_stmt) != GIMPLE_MODIFY_STMT)
1239             return false;
1240           arg = GIMPLE_STMT_OPERAND (def_stmt, 1);
1241         }
1242       if ((TREE_CODE (arg) != ADDR_EXPR
1243            /* Avoid to have to decay *&a to a[0] later.  */
1244            || !is_gimple_reg_type (TREE_TYPE (TREE_OPERAND (arg, 0))))
1245           && !(TREE_CODE (arg) == SSA_NAME
1246                && phivn[SSA_NAME_VERSION (arg)].value != NULL_TREE
1247                && phivn_valid_p (phivn, arg, bb)))
1248         return false;
1249     }
1250
1251   /* Find a dereferencing use.  First follow (single use) ssa
1252      copy chains for ptr.  */
1253   while (single_imm_use (ptr, &use, &use_stmt)
1254          && TREE_CODE (use_stmt) == GIMPLE_MODIFY_STMT
1255          && GIMPLE_STMT_OPERAND (use_stmt, 1) == ptr
1256          && TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 0)) == SSA_NAME)
1257     ptr = GIMPLE_STMT_OPERAND (use_stmt, 0);
1258
1259   /* Replace the first dereference of *ptr if there is one and if we
1260      can move the loads to the place of the ptr phi node.  */
1261   phi_inserted = false;
1262   FOR_EACH_IMM_USE_STMT (use_stmt, ui, ptr)
1263     {
1264       ssa_op_iter ui2;
1265       tree vuse;
1266
1267       /* Check whether this is a load of *ptr.  */
1268       if (!(TREE_CODE (use_stmt) == GIMPLE_MODIFY_STMT
1269             && TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 0)) == SSA_NAME 
1270             && TREE_CODE (GIMPLE_STMT_OPERAND (use_stmt, 1)) == INDIRECT_REF
1271             && TREE_OPERAND (GIMPLE_STMT_OPERAND (use_stmt, 1), 0) == ptr
1272             /* We cannot replace a load that may throw or is volatile.  */
1273             && !tree_can_throw_internal (use_stmt)))
1274         continue;
1275
1276       /* Check if we can move the loads.  The def stmts of all virtual uses
1277          need to be post-dominated by bb.  */
1278       FOR_EACH_SSA_TREE_OPERAND (vuse, use_stmt, ui2, SSA_OP_VUSE)
1279         {
1280           tree def_stmt = SSA_NAME_DEF_STMT (vuse);
1281           if (!SSA_NAME_IS_DEFAULT_DEF (vuse)
1282               && (bb_for_stmt (def_stmt) == bb
1283                   || !dominated_by_p (CDI_DOMINATORS,
1284                                       bb, bb_for_stmt (def_stmt))))
1285             goto next;
1286         }
1287
1288       /* Found a proper dereference.  Insert a phi node if this
1289          is the first load transformation.  */
1290       if (!phi_inserted)
1291         {
1292           res = phiprop_insert_phi (bb, phi, use_stmt, phivn, n);
1293
1294           /* Remember the value we created for *ptr.  */
1295           phivn[SSA_NAME_VERSION (ptr)].value = res;
1296           phivn[SSA_NAME_VERSION (ptr)].vop_stmt = use_stmt;
1297
1298           /* Remove old stmt.  The phi is taken care of by DCE, if we
1299              want to delete it here we also have to delete all intermediate
1300              copies.  */
1301           bsi = bsi_for_stmt (use_stmt);
1302           bsi_remove (&bsi, 0);
1303
1304           phi_inserted = true;
1305         }
1306       else
1307         {
1308           /* Further replacements are easy, just make a copy out of the
1309              load.  */
1310           GIMPLE_STMT_OPERAND (use_stmt, 1) = res;
1311           update_stmt (use_stmt);
1312         }
1313
1314 next:;
1315       /* Continue searching for a proper dereference.  */
1316     }
1317
1318   return phi_inserted;
1319 }
1320
1321 /* Helper walking the dominator tree starting from BB and processing
1322    phi nodes with global data PHIVN and N.  */
1323
1324 static bool
1325 tree_ssa_phiprop_1 (basic_block bb, struct phiprop_d *phivn, size_t n)
1326 {
1327   bool did_something = false; 
1328   basic_block son;
1329   tree phi;
1330
1331   for (phi = phi_nodes (bb); phi; phi = PHI_CHAIN (phi))
1332     did_something |= propagate_with_phi (bb, phi, phivn, n);
1333
1334   for (son = first_dom_son (CDI_DOMINATORS, bb);
1335        son;
1336        son = next_dom_son (CDI_DOMINATORS, son))
1337     did_something |= tree_ssa_phiprop_1 (son, phivn, n);
1338
1339   return did_something;
1340 }
1341
1342 /* Main entry for phiprop pass.  */
1343
1344 static unsigned int
1345 tree_ssa_phiprop (void)
1346 {
1347   struct phiprop_d *phivn;
1348
1349   calculate_dominance_info (CDI_DOMINATORS);
1350
1351   phivn = XCNEWVEC (struct phiprop_d, num_ssa_names);
1352
1353   if (tree_ssa_phiprop_1 (ENTRY_BLOCK_PTR, phivn, num_ssa_names))
1354     bsi_commit_edge_inserts ();
1355
1356   free (phivn);
1357
1358   return 0;
1359 }
1360
1361 static bool
1362 gate_phiprop (void)
1363 {
1364   return 1;
1365 }
1366
1367 struct tree_opt_pass pass_phiprop = {
1368   "phiprop",                    /* name */
1369   gate_phiprop,                 /* gate */
1370   tree_ssa_phiprop,             /* execute */
1371   NULL,                         /* sub */
1372   NULL,                         /* next */
1373   0,                            /* static_pass_number */
1374   TV_TREE_FORWPROP,             /* tv_id */
1375   PROP_cfg | PROP_ssa,          /* properties_required */
1376   0,                            /* properties_provided */
1377   0,                            /* properties_destroyed */
1378   0,                            /* todo_flags_start */
1379   TODO_dump_func
1380   | TODO_ggc_collect
1381   | TODO_update_ssa
1382   | TODO_verify_ssa,            /* todo_flags_finish */
1383   0                             /* letter */
1384 };