OSDN Git Service

054ddfa28ad6c2dac9e8100605cf90ad279eac7b
[pf3gnuchains/gcc-fork.git] / gcc / tree-flow-inline.h
1 /* Inline functions for tree-flow.h
2    Copyright (C) 2001, 2003, 2005, 2006 Free Software Foundation, Inc.
3    Contributed by Diego Novillo <dnovillo@redhat.com>
4
5 This file is part of GCC.
6
7 GCC is free software; you can redistribute it and/or modify
8 it under the terms of the GNU General Public License as published by
9 the Free Software Foundation; either version 2, or (at your option)
10 any later version.
11
12 GCC is distributed in the hope that it will be useful,
13 but WITHOUT ANY WARRANTY; without even the implied warranty of
14 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15 GNU General Public License for more details.
16
17 You should have received a copy of the GNU General Public License
18 along with GCC; see the file COPYING.  If not, write to
19 the Free Software Foundation, 51 Franklin Street, Fifth Floor,
20 Boston, MA 02110-1301, USA.  */
21
22 #ifndef _TREE_FLOW_INLINE_H
23 #define _TREE_FLOW_INLINE_H 1
24
25 /* Inline functions for manipulating various data structures defined in
26    tree-flow.h.  See tree-flow.h for documentation.  */
27
28 /* Return true when gimple SSA form was built.
29    gimple_in_ssa_p is queried by gimplifier in various early stages before SSA
30    infrastructure is initialized.  Check for presence of the datastructures
31    at first place.  */
32 static inline bool
33 gimple_in_ssa_p (struct function *fun)
34 {
35   return fun && fun->gimple_df && fun->gimple_df->in_ssa_p;
36 }
37
38 /* 'true' after aliases have been computed (see compute_may_aliases).  */
39 static inline bool
40 gimple_aliases_computed_p (struct function *fun)
41 {
42   gcc_assert (fun && fun->gimple_df);
43   return fun->gimple_df->aliases_computed_p;
44 }
45
46 /* Addressable variables in the function.  If bit I is set, then
47    REFERENCED_VARS (I) has had its address taken.  Note that
48    CALL_CLOBBERED_VARS and ADDRESSABLE_VARS are not related.  An
49    addressable variable is not necessarily call-clobbered (e.g., a
50    local addressable whose address does not escape) and not all
51    call-clobbered variables are addressable (e.g., a local static
52    variable).  */
53 static inline bitmap
54 gimple_addressable_vars (struct function *fun)
55 {
56   gcc_assert (fun && fun->gimple_df);
57   return fun->gimple_df->addressable_vars;
58 }
59
60 /* Call clobbered variables in the function.  If bit I is set, then
61    REFERENCED_VARS (I) is call-clobbered.  */
62 static inline bitmap
63 gimple_call_clobbered_vars (struct function *fun)
64 {
65   gcc_assert (fun && fun->gimple_df);
66   return fun->gimple_df->call_clobbered_vars;
67 }
68
69 /* Array of all variables referenced in the function.  */
70 static inline htab_t
71 gimple_referenced_vars (struct function *fun)
72 {
73   if (!fun->gimple_df)
74     return NULL;
75   return fun->gimple_df->referenced_vars;
76 }
77
78 /* Artificial variable used to model the effects of function calls.  */
79 static inline tree
80 gimple_global_var (struct function *fun)
81 {
82   gcc_assert (fun && fun->gimple_df);
83   return fun->gimple_df->global_var;
84 }
85
86 /* Artificial variable used to model the effects of nonlocal
87    variables.  */
88 static inline tree
89 gimple_nonlocal_all (struct function *fun)
90 {
91   gcc_assert (fun && fun->gimple_df);
92   return fun->gimple_df->nonlocal_all;
93 }
94
95 /* Hashtable of variables annotations.  Used for static variables only;
96    local variables have direct pointer in the tree node.  */
97 static inline htab_t
98 gimple_var_anns (struct function *fun)
99 {
100   return fun->gimple_df->var_anns;
101 }
102
103 /* Initialize the hashtable iterator HTI to point to hashtable TABLE */
104
105 static inline void *
106 first_htab_element (htab_iterator *hti, htab_t table)
107 {
108   hti->htab = table;
109   hti->slot = table->entries;
110   hti->limit = hti->slot + htab_size (table);
111   do
112     {
113       PTR x = *(hti->slot);
114       if (x != HTAB_EMPTY_ENTRY && x != HTAB_DELETED_ENTRY)
115         break;
116     } while (++(hti->slot) < hti->limit);
117   
118   if (hti->slot < hti->limit)
119     return *(hti->slot);
120   return NULL;
121 }
122
123 /* Return current non-empty/deleted slot of the hashtable pointed to by HTI,
124    or NULL if we have  reached the end.  */
125
126 static inline bool
127 end_htab_p (htab_iterator *hti)
128 {
129   if (hti->slot >= hti->limit)
130     return true;
131   return false;
132 }
133
134 /* Advance the hashtable iterator pointed to by HTI to the next element of the
135    hashtable.  */
136
137 static inline void *
138 next_htab_element (htab_iterator *hti)
139 {
140   while (++(hti->slot) < hti->limit)
141     {
142       PTR x = *(hti->slot);
143       if (x != HTAB_EMPTY_ENTRY && x != HTAB_DELETED_ENTRY)
144         return x;
145     };
146   return NULL;
147 }
148
149 /* Initialize ITER to point to the first referenced variable in the
150    referenced_vars hashtable, and return that variable.  */
151
152 static inline tree
153 first_referenced_var (referenced_var_iterator *iter)
154 {
155   struct int_tree_map *itm;
156   itm = (struct int_tree_map *) first_htab_element (&iter->hti,
157                                                     gimple_referenced_vars
158                                                     (cfun));
159   if (!itm) 
160     return NULL;
161   return itm->to;
162 }
163
164 /* Return true if we have hit the end of the referenced variables ITER is
165    iterating through.  */
166
167 static inline bool
168 end_referenced_vars_p (referenced_var_iterator *iter)
169 {
170   return end_htab_p (&iter->hti);
171 }
172
173 /* Make ITER point to the next referenced_var in the referenced_var hashtable,
174    and return that variable.  */
175
176 static inline tree
177 next_referenced_var (referenced_var_iterator *iter)
178 {
179   struct int_tree_map *itm;
180   itm = (struct int_tree_map *) next_htab_element (&iter->hti);
181   if (!itm) 
182     return NULL;
183   return itm->to;
184
185
186 /* Fill up VEC with the variables in the referenced vars hashtable.  */
187
188 static inline void
189 fill_referenced_var_vec (VEC (tree, heap) **vec)
190 {
191   referenced_var_iterator rvi;
192   tree var;
193   *vec = NULL;
194   FOR_EACH_REFERENCED_VAR (var, rvi)
195     VEC_safe_push (tree, heap, *vec, var);
196 }
197
198 /* Return the variable annotation for T, which must be a _DECL node.
199    Return NULL if the variable annotation doesn't already exist.  */
200 static inline var_ann_t
201 var_ann (tree t)
202 {
203   gcc_assert (t);
204   gcc_assert (DECL_P (t));
205   gcc_assert (TREE_CODE (t) != FUNCTION_DECL);
206   if (!MTAG_P (t) && (TREE_STATIC (t) || DECL_EXTERNAL (t)))
207     {
208       struct static_var_ann_d *sann
209         = ((struct static_var_ann_d *)
210            htab_find_with_hash (gimple_var_anns (cfun), t, DECL_UID (t)));
211       if (!sann)
212         return NULL;
213       gcc_assert (sann->ann.common.type = VAR_ANN);
214       return &sann->ann;
215     }
216   gcc_assert (!t->base.ann
217               || t->base.ann->common.type == VAR_ANN);
218
219   return (var_ann_t) t->base.ann;
220 }
221
222 /* Return the variable annotation for T, which must be a _DECL node.
223    Create the variable annotation if it doesn't exist.  */
224 static inline var_ann_t
225 get_var_ann (tree var)
226 {
227   var_ann_t ann = var_ann (var);
228   return (ann) ? ann : create_var_ann (var);
229 }
230
231 /* Return the function annotation for T, which must be a FUNCTION_DECL node.
232    Return NULL if the function annotation doesn't already exist.  */
233 static inline function_ann_t
234 function_ann (tree t)
235 {
236   gcc_assert (t);
237   gcc_assert (TREE_CODE (t) == FUNCTION_DECL);
238   gcc_assert (!t->base.ann
239               || t->base.ann->common.type == FUNCTION_ANN);
240
241   return (function_ann_t) t->base.ann;
242 }
243
244 /* Return the function annotation for T, which must be a FUNCTION_DECL node.
245    Create the function annotation if it doesn't exist.  */
246 static inline function_ann_t
247 get_function_ann (tree var)
248 {
249   function_ann_t ann = function_ann (var);
250   gcc_assert (!var->base.ann || var->base.ann->common.type == FUNCTION_ANN);
251   return (ann) ? ann : create_function_ann (var);
252 }
253
254 /* Return true if T has a statement annotation attached to it.  */
255
256 static inline bool
257 has_stmt_ann (tree t)
258 {
259 #ifdef ENABLE_CHECKING
260   gcc_assert (is_gimple_stmt (t));
261 #endif
262   return t->base.ann && t->base.ann->common.type == STMT_ANN;
263 }
264
265 /* Return the statement annotation for T, which must be a statement
266    node.  Return NULL if the statement annotation doesn't exist.  */
267 static inline stmt_ann_t
268 stmt_ann (tree t)
269 {
270 #ifdef ENABLE_CHECKING
271   gcc_assert (is_gimple_stmt (t));
272 #endif
273   gcc_assert (!t->base.ann || t->base.ann->common.type == STMT_ANN);
274   return (stmt_ann_t) t->base.ann;
275 }
276
277 /* Return the statement annotation for T, which must be a statement
278    node.  Create the statement annotation if it doesn't exist.  */
279 static inline stmt_ann_t
280 get_stmt_ann (tree stmt)
281 {
282   stmt_ann_t ann = stmt_ann (stmt);
283   return (ann) ? ann : create_stmt_ann (stmt);
284 }
285
286 /* Return the annotation type for annotation ANN.  */
287 static inline enum tree_ann_type
288 ann_type (tree_ann_t ann)
289 {
290   return ann->common.type;
291 }
292
293 /* Return the basic block for statement T.  */
294 static inline basic_block
295 bb_for_stmt (tree t)
296 {
297   stmt_ann_t ann;
298
299   if (TREE_CODE (t) == PHI_NODE)
300     return PHI_BB (t);
301
302   ann = stmt_ann (t);
303   return ann ? ann->bb : NULL;
304 }
305
306 /* Return the may_aliases bitmap for variable VAR, or NULL if it has
307    no may aliases.  */
308 static inline bitmap
309 may_aliases (tree var)
310 {
311   return MTAG_ALIASES (var);
312 }
313
314 /* Return the line number for EXPR, or return -1 if we have no line
315    number information for it.  */
316 static inline int
317 get_lineno (tree expr)
318 {
319   if (expr == NULL_TREE)
320     return -1;
321
322   if (TREE_CODE (expr) == COMPOUND_EXPR)
323     expr = TREE_OPERAND (expr, 0);
324
325   if (! EXPR_HAS_LOCATION (expr))
326     return -1;
327
328   return EXPR_LINENO (expr);
329 }
330
331 /* Return the file name for EXPR, or return "???" if we have no
332    filename information.  */
333 static inline const char *
334 get_filename (tree expr)
335 {
336   const char *filename;
337   if (expr == NULL_TREE)
338     return "???";
339
340   if (TREE_CODE (expr) == COMPOUND_EXPR)
341     expr = TREE_OPERAND (expr, 0);
342
343   if (EXPR_HAS_LOCATION (expr) && (filename = EXPR_FILENAME (expr)))
344     return filename;
345   else
346     return "???";
347 }
348
349 /* Return true if T is a noreturn call.  */
350 static inline bool
351 noreturn_call_p (tree t)
352 {
353   tree call = get_call_expr_in (t);
354   return call != 0 && (call_expr_flags (call) & ECF_NORETURN) != 0;
355 }
356
357 /* Mark statement T as modified.  */
358 static inline void
359 mark_stmt_modified (tree t)
360 {
361   stmt_ann_t ann;
362   if (TREE_CODE (t) == PHI_NODE)
363     return;
364
365   ann = stmt_ann (t);
366   if (ann == NULL)
367     ann = create_stmt_ann (t);
368   else if (noreturn_call_p (t) && cfun->gimple_df)
369     VEC_safe_push (tree, gc, MODIFIED_NORETURN_CALLS (cfun), t);
370   ann->modified = 1;
371 }
372
373 /* Mark statement T as modified, and update it.  */
374 static inline void
375 update_stmt (tree t)
376 {
377   if (TREE_CODE (t) == PHI_NODE)
378     return;
379   mark_stmt_modified (t);
380   update_stmt_operands (t);
381 }
382
383 static inline void
384 update_stmt_if_modified (tree t)
385 {
386   if (stmt_modified_p (t))
387     update_stmt_operands (t);
388 }
389
390 /* Return true if T is marked as modified, false otherwise.  */
391 static inline bool
392 stmt_modified_p (tree t)
393 {
394   stmt_ann_t ann = stmt_ann (t);
395
396   /* Note that if the statement doesn't yet have an annotation, we consider it
397      modified.  This will force the next call to update_stmt_operands to scan 
398      the statement.  */
399   return ann ? ann->modified : true;
400 }
401
402 /* Delink an immediate_uses node from its chain.  */
403 static inline void
404 delink_imm_use (ssa_use_operand_t *linknode)
405 {
406   /* Return if this node is not in a list.  */
407   if (linknode->prev == NULL)
408     return;
409
410   linknode->prev->next = linknode->next;
411   linknode->next->prev = linknode->prev;
412   linknode->prev = NULL;
413   linknode->next = NULL;
414 }
415
416 /* Link ssa_imm_use node LINKNODE into the chain for LIST.  */
417 static inline void
418 link_imm_use_to_list (ssa_use_operand_t *linknode, ssa_use_operand_t *list)
419 {
420   /* Link the new node at the head of the list.  If we are in the process of 
421      traversing the list, we won't visit any new nodes added to it.  */
422   linknode->prev = list;
423   linknode->next = list->next;
424   list->next->prev = linknode;
425   list->next = linknode;
426 }
427
428 /* Link ssa_imm_use node LINKNODE into the chain for DEF.  */
429 static inline void
430 link_imm_use (ssa_use_operand_t *linknode, tree def)
431 {
432   ssa_use_operand_t *root;
433
434   if (!def || TREE_CODE (def) != SSA_NAME)
435     linknode->prev = NULL;
436   else
437     {
438       root = &(SSA_NAME_IMM_USE_NODE (def));
439 #ifdef ENABLE_CHECKING
440       if (linknode->use)
441         gcc_assert (*(linknode->use) == def);
442 #endif
443       link_imm_use_to_list (linknode, root);
444     }
445 }
446
447 /* Set the value of a use pointed to by USE to VAL.  */
448 static inline void
449 set_ssa_use_from_ptr (use_operand_p use, tree val)
450 {
451   delink_imm_use (use);
452   *(use->use) = val;
453   link_imm_use (use, val);
454 }
455
456 /* Link ssa_imm_use node LINKNODE into the chain for DEF, with use occurring 
457    in STMT.  */
458 static inline void
459 link_imm_use_stmt (ssa_use_operand_t *linknode, tree def, tree stmt)
460 {
461   if (stmt)
462     link_imm_use (linknode, def);
463   else
464     link_imm_use (linknode, NULL);
465   linknode->stmt = stmt;
466 }
467
468 /* Relink a new node in place of an old node in the list.  */
469 static inline void
470 relink_imm_use (ssa_use_operand_t *node, ssa_use_operand_t *old)
471 {
472   /* The node one had better be in the same list.  */
473   gcc_assert (*(old->use) == *(node->use));
474   node->prev = old->prev;
475   node->next = old->next;
476   if (old->prev)
477     {
478       old->prev->next = node;
479       old->next->prev = node;
480       /* Remove the old node from the list.  */
481       old->prev = NULL;
482     }
483 }
484
485 /* Relink ssa_imm_use node LINKNODE into the chain for OLD, with use occurring 
486    in STMT.  */
487 static inline void
488 relink_imm_use_stmt (ssa_use_operand_t *linknode, ssa_use_operand_t *old, tree stmt)
489 {
490   if (stmt)
491     relink_imm_use (linknode, old);
492   else
493     link_imm_use (linknode, NULL);
494   linknode->stmt = stmt;
495 }
496
497
498 /* Return true is IMM has reached the end of the immediate use list.  */
499 static inline bool
500 end_readonly_imm_use_p (imm_use_iterator *imm)
501 {
502   return (imm->imm_use == imm->end_p);
503 }
504
505 /* Initialize iterator IMM to process the list for VAR.  */
506 static inline use_operand_p
507 first_readonly_imm_use (imm_use_iterator *imm, tree var)
508 {
509   gcc_assert (TREE_CODE (var) == SSA_NAME);
510
511   imm->end_p = &(SSA_NAME_IMM_USE_NODE (var));
512   imm->imm_use = imm->end_p->next;
513 #ifdef ENABLE_CHECKING
514   imm->iter_node.next = imm->imm_use->next;
515 #endif
516   if (end_readonly_imm_use_p (imm))
517     return NULL_USE_OPERAND_P;
518   return imm->imm_use;
519 }
520
521 /* Bump IMM to the next use in the list.  */
522 static inline use_operand_p
523 next_readonly_imm_use (imm_use_iterator *imm)
524 {
525   use_operand_p old = imm->imm_use;
526
527 #ifdef ENABLE_CHECKING
528   /* If this assertion fails, it indicates the 'next' pointer has changed 
529      since we the last bump.  This indicates that the list is being modified
530      via stmt changes, or SET_USE, or somesuch thing, and you need to be
531      using the SAFE version of the iterator.  */
532   gcc_assert (imm->iter_node.next == old->next);
533   imm->iter_node.next = old->next->next;
534 #endif
535
536   imm->imm_use = old->next;
537   if (end_readonly_imm_use_p (imm))
538     return old;
539   return imm->imm_use;
540 }
541
542 /* Return true if VAR has no uses.  */
543 static inline bool
544 has_zero_uses (tree var)
545 {
546   ssa_use_operand_t *ptr;
547   ptr = &(SSA_NAME_IMM_USE_NODE (var));
548   /* A single use means there is no items in the list.  */
549   return (ptr == ptr->next);
550 }
551
552 /* Return true if VAR has a single use.  */
553 static inline bool
554 has_single_use (tree var)
555 {
556   ssa_use_operand_t *ptr;
557   ptr = &(SSA_NAME_IMM_USE_NODE (var));
558   /* A single use means there is one item in the list.  */
559   return (ptr != ptr->next && ptr == ptr->next->next);
560 }
561
562
563 /* If VAR has only a single immediate use, return true, and set USE_P and STMT
564    to the use pointer and stmt of occurrence.  */
565 static inline bool
566 single_imm_use (tree var, use_operand_p *use_p, tree *stmt)
567 {
568   ssa_use_operand_t *ptr;
569
570   ptr = &(SSA_NAME_IMM_USE_NODE (var));
571   if (ptr != ptr->next && ptr == ptr->next->next)
572     {
573       *use_p = ptr->next;
574       *stmt = ptr->next->stmt;
575       return true;
576     }
577   *use_p = NULL_USE_OPERAND_P;
578   *stmt = NULL_TREE;
579   return false;
580 }
581
582 /* Return the number of immediate uses of VAR.  */
583 static inline unsigned int
584 num_imm_uses (tree var)
585 {
586   ssa_use_operand_t *ptr, *start;
587   unsigned int num;
588
589   start = &(SSA_NAME_IMM_USE_NODE (var));
590   num = 0;
591   for (ptr = start->next; ptr != start; ptr = ptr->next)
592      num++;
593
594   return num;
595 }
596
597 /* Return the tree pointer to by USE.  */ 
598 static inline tree
599 get_use_from_ptr (use_operand_p use)
600
601   return *(use->use);
602
603
604 /* Return the tree pointer to by DEF.  */
605 static inline tree
606 get_def_from_ptr (def_operand_p def)
607 {
608   return *def;
609 }
610
611 /* Return a def_operand_p pointer for the result of PHI.  */
612 static inline def_operand_p
613 get_phi_result_ptr (tree phi)
614 {
615   return &(PHI_RESULT_TREE (phi));
616 }
617
618 /* Return a use_operand_p pointer for argument I of phinode PHI.  */
619 static inline use_operand_p
620 get_phi_arg_def_ptr (tree phi, int i)
621 {
622   return &(PHI_ARG_IMM_USE_NODE (phi,i));
623 }
624
625
626 /* Return the bitmap of addresses taken by STMT, or NULL if it takes
627    no addresses.  */
628 static inline bitmap
629 addresses_taken (tree stmt)
630 {
631   stmt_ann_t ann = stmt_ann (stmt);
632   return ann ? ann->addresses_taken : NULL;
633 }
634
635 /* Return the PHI nodes for basic block BB, or NULL if there are no
636    PHI nodes.  */
637 static inline tree
638 phi_nodes (basic_block bb)
639 {
640   return bb->phi_nodes;
641 }
642
643 /* Set list of phi nodes of a basic block BB to L.  */
644
645 static inline void
646 set_phi_nodes (basic_block bb, tree l)
647 {
648   tree phi;
649
650   bb->phi_nodes = l;
651   for (phi = l; phi; phi = PHI_CHAIN (phi))
652     set_bb_for_stmt (phi, bb);
653 }
654
655 /* Return the phi argument which contains the specified use.  */
656
657 static inline int
658 phi_arg_index_from_use (use_operand_p use)
659 {
660   struct phi_arg_d *element, *root;
661   int index;
662   tree phi;
663
664   /* Since the use is the first thing in a PHI argument element, we can
665      calculate its index based on casting it to an argument, and performing
666      pointer arithmetic.  */
667
668   phi = USE_STMT (use);
669   gcc_assert (TREE_CODE (phi) == PHI_NODE);
670
671   element = (struct phi_arg_d *)use;
672   root = &(PHI_ARG_ELT (phi, 0));
673   index = element - root;
674
675 #ifdef ENABLE_CHECKING
676   /* Make sure the calculation doesn't have any leftover bytes.  If it does, 
677      then imm_use is likely not the first element in phi_arg_d.  */
678   gcc_assert (
679           (((char *)element - (char *)root) % sizeof (struct phi_arg_d)) == 0);
680   gcc_assert (index >= 0 && index < PHI_ARG_CAPACITY (phi));
681 #endif
682  
683  return index;
684 }
685
686 /* Mark VAR as used, so that it'll be preserved during rtl expansion.  */
687
688 static inline void
689 set_is_used (tree var)
690 {
691   var_ann_t ann = get_var_ann (var);
692   ann->used = 1;
693 }
694
695 /* Return true if T is an executable statement.  */
696 static inline bool
697 is_exec_stmt (tree t)
698 {
699   return (t && !IS_EMPTY_STMT (t) && t != error_mark_node);
700 }
701
702
703 /* Return true if this stmt can be the target of a control transfer stmt such
704    as a goto.  */
705 static inline bool
706 is_label_stmt (tree t)
707 {
708   if (t)
709     switch (TREE_CODE (t))
710       {
711         case LABEL_DECL:
712         case LABEL_EXPR:
713         case CASE_LABEL_EXPR:
714           return true;
715         default:
716           return false;
717       }
718   return false;
719 }
720
721 /* Return true if T (assumed to be a DECL) is a global variable.  */
722
723 static inline bool
724 is_global_var (tree t)
725 {
726   if (MTAG_P (t))
727     return (TREE_STATIC (t) || MTAG_GLOBAL (t));
728   else
729     return (TREE_STATIC (t) || DECL_EXTERNAL (t));
730 }
731
732 /* PHI nodes should contain only ssa_names and invariants.  A test
733    for ssa_name is definitely simpler; don't let invalid contents
734    slip in in the meantime.  */
735
736 static inline bool
737 phi_ssa_name_p (tree t)
738 {
739   if (TREE_CODE (t) == SSA_NAME)
740     return true;
741 #ifdef ENABLE_CHECKING
742   gcc_assert (is_gimple_min_invariant (t));
743 #endif
744   return false;
745 }
746
747 /*  -----------------------------------------------------------------------  */
748
749 /* Return a block_stmt_iterator that points to beginning of basic
750    block BB.  */
751 static inline block_stmt_iterator
752 bsi_start (basic_block bb)
753 {
754   block_stmt_iterator bsi;
755   if (bb->stmt_list)
756     bsi.tsi = tsi_start (bb->stmt_list);
757   else
758     {
759       gcc_assert (bb->index < NUM_FIXED_BLOCKS);
760       bsi.tsi.ptr = NULL;
761       bsi.tsi.container = NULL;
762     }
763   bsi.bb = bb;
764   return bsi;
765 }
766
767 /* Return a block statement iterator that points to the first non-label
768    statement in block BB.  */
769
770 static inline block_stmt_iterator
771 bsi_after_labels (basic_block bb)
772 {
773   block_stmt_iterator bsi = bsi_start (bb);
774
775   while (!bsi_end_p (bsi) && TREE_CODE (bsi_stmt (bsi)) == LABEL_EXPR)
776     bsi_next (&bsi);
777
778   return bsi;
779 }
780
781 /* Return a block statement iterator that points to the end of basic
782    block BB.  */
783 static inline block_stmt_iterator
784 bsi_last (basic_block bb)
785 {
786   block_stmt_iterator bsi;
787   if (bb->stmt_list)
788     bsi.tsi = tsi_last (bb->stmt_list);
789   else
790     {
791       gcc_assert (bb->index < NUM_FIXED_BLOCKS);
792       bsi.tsi.ptr = NULL;
793       bsi.tsi.container = NULL;
794     }
795   bsi.bb = bb;
796   return bsi;
797 }
798
799 /* Return true if block statement iterator I has reached the end of
800    the basic block.  */
801 static inline bool
802 bsi_end_p (block_stmt_iterator i)
803 {
804   return tsi_end_p (i.tsi);
805 }
806
807 /* Modify block statement iterator I so that it is at the next
808    statement in the basic block.  */
809 static inline void
810 bsi_next (block_stmt_iterator *i)
811 {
812   tsi_next (&i->tsi);
813 }
814
815 /* Modify block statement iterator I so that it is at the previous
816    statement in the basic block.  */
817 static inline void
818 bsi_prev (block_stmt_iterator *i)
819 {
820   tsi_prev (&i->tsi);
821 }
822
823 /* Return the statement that block statement iterator I is currently
824    at.  */
825 static inline tree
826 bsi_stmt (block_stmt_iterator i)
827 {
828   return tsi_stmt (i.tsi);
829 }
830
831 /* Return a pointer to the statement that block statement iterator I
832    is currently at.  */
833 static inline tree *
834 bsi_stmt_ptr (block_stmt_iterator i)
835 {
836   return tsi_stmt_ptr (i.tsi);
837 }
838
839 /* Returns the loop of the statement STMT.  */
840
841 static inline struct loop *
842 loop_containing_stmt (tree stmt)
843 {
844   basic_block bb = bb_for_stmt (stmt);
845   if (!bb)
846     return NULL;
847
848   return bb->loop_father;
849 }
850
851
852 /* Return the memory partition tag associated with symbol SYM.  */
853
854 static inline tree
855 memory_partition (tree sym)
856 {
857   tree tag;
858
859   /* MPTs belong to their own partition.  */
860   if (TREE_CODE (sym) == MEMORY_PARTITION_TAG)
861     return sym;
862
863   gcc_assert (!is_gimple_reg (sym));
864   tag = get_var_ann (sym)->mpt;
865
866 #if defined ENABLE_CHECKING
867   if (tag)
868     gcc_assert (TREE_CODE (tag) == MEMORY_PARTITION_TAG);
869 #endif
870
871   return tag;
872 }
873
874 /* Return true if NAME is a memory factoring SSA name (i.e., an SSA
875    name for a memory partition.  */
876
877 static inline bool
878 factoring_name_p (tree name)
879 {
880   return TREE_CODE (SSA_NAME_VAR (name)) == MEMORY_PARTITION_TAG;
881 }
882
883 /* Return true if VAR is a clobbered by function calls.  */
884 static inline bool
885 is_call_clobbered (tree var)
886 {
887   if (!MTAG_P (var))
888     return var_ann (var)->call_clobbered;
889   else
890     return bitmap_bit_p (gimple_call_clobbered_vars (cfun), DECL_UID (var)); 
891 }
892
893 /* Mark variable VAR as being clobbered by function calls.  */
894 static inline void
895 mark_call_clobbered (tree var, unsigned int escape_type)
896 {
897   var_ann (var)->escape_mask |= escape_type;
898   if (!MTAG_P (var))
899     var_ann (var)->call_clobbered = true;
900   bitmap_set_bit (gimple_call_clobbered_vars (cfun), DECL_UID (var));
901 }
902
903 /* Clear the call-clobbered attribute from variable VAR.  */
904 static inline void
905 clear_call_clobbered (tree var)
906 {
907   var_ann_t ann = var_ann (var);
908   ann->escape_mask = 0;
909   if (MTAG_P (var) && TREE_CODE (var) != STRUCT_FIELD_TAG)
910     MTAG_GLOBAL (var) = 0;
911   if (!MTAG_P (var))
912     var_ann (var)->call_clobbered = false;
913   bitmap_clear_bit (gimple_call_clobbered_vars (cfun), DECL_UID (var));
914 }
915
916 /* Return the common annotation for T.  Return NULL if the annotation
917    doesn't already exist.  */
918 static inline tree_ann_common_t
919 tree_common_ann (tree t)
920 {
921   /* Watch out static variables with unshared annotations.  */
922   if (DECL_P (t) && TREE_CODE (t) == VAR_DECL)
923     return &var_ann (t)->common;
924   return &t->base.ann->common;
925 }
926
927 /* Return a common annotation for T.  Create the constant annotation if it
928    doesn't exist.  */
929 static inline tree_ann_common_t
930 get_tree_common_ann (tree t)
931 {
932   tree_ann_common_t ann = tree_common_ann (t);
933   return (ann) ? ann : create_tree_common_ann (t);
934 }
935
936 /*  -----------------------------------------------------------------------  */
937
938 /* The following set of routines are used to iterator over various type of
939    SSA operands.  */
940
941 /* Return true if PTR is finished iterating.  */
942 static inline bool
943 op_iter_done (ssa_op_iter *ptr)
944 {
945   return ptr->done;
946 }
947
948 /* Get the next iterator use value for PTR.  */
949 static inline use_operand_p
950 op_iter_next_use (ssa_op_iter *ptr)
951 {
952   use_operand_p use_p;
953 #ifdef ENABLE_CHECKING
954   gcc_assert (ptr->iter_type == ssa_op_iter_use);
955 #endif
956   if (ptr->uses)
957     {
958       use_p = USE_OP_PTR (ptr->uses);
959       ptr->uses = ptr->uses->next;
960       return use_p;
961     }
962   if (ptr->vuses)
963     {
964       use_p = VUSE_OP_PTR (ptr->vuses, ptr->vuse_index);
965       if (++(ptr->vuse_index) >= VUSE_NUM (ptr->vuses))
966         {
967           ptr->vuse_index = 0;
968           ptr->vuses = ptr->vuses->next;
969         }
970       return use_p;
971     }
972   if (ptr->mayuses)
973     {
974       use_p = VDEF_OP_PTR (ptr->mayuses, ptr->mayuse_index);
975       if (++(ptr->mayuse_index) >= VDEF_NUM (ptr->mayuses))
976         {
977           ptr->mayuse_index = 0;
978           ptr->mayuses = ptr->mayuses->next;
979         }
980       return use_p;
981     }
982   if (ptr->phi_i < ptr->num_phi)
983     {
984       return PHI_ARG_DEF_PTR (ptr->phi_stmt, (ptr->phi_i)++);
985     }
986   ptr->done = true;
987   return NULL_USE_OPERAND_P;
988 }
989
990 /* Get the next iterator def value for PTR.  */
991 static inline def_operand_p
992 op_iter_next_def (ssa_op_iter *ptr)
993 {
994   def_operand_p def_p;
995 #ifdef ENABLE_CHECKING
996   gcc_assert (ptr->iter_type == ssa_op_iter_def);
997 #endif
998   if (ptr->defs)
999     {
1000       def_p = DEF_OP_PTR (ptr->defs);
1001       ptr->defs = ptr->defs->next;
1002       return def_p;
1003     }
1004   if (ptr->vdefs)
1005     {
1006       def_p = VDEF_RESULT_PTR (ptr->vdefs);
1007       ptr->vdefs = ptr->vdefs->next;
1008       return def_p;
1009     }
1010   ptr->done = true;
1011   return NULL_DEF_OPERAND_P;
1012 }
1013
1014 /* Get the next iterator tree value for PTR.  */
1015 static inline tree
1016 op_iter_next_tree (ssa_op_iter *ptr)
1017 {
1018   tree val;
1019 #ifdef ENABLE_CHECKING
1020   gcc_assert (ptr->iter_type == ssa_op_iter_tree);
1021 #endif
1022   if (ptr->uses)
1023     {
1024       val = USE_OP (ptr->uses);
1025       ptr->uses = ptr->uses->next;
1026       return val;
1027     }
1028   if (ptr->vuses)
1029     {
1030       val = VUSE_OP (ptr->vuses, ptr->vuse_index);
1031       if (++(ptr->vuse_index) >= VUSE_NUM (ptr->vuses))
1032         {
1033           ptr->vuse_index = 0;
1034           ptr->vuses = ptr->vuses->next;
1035         }
1036       return val;
1037     }
1038   if (ptr->mayuses)
1039     {
1040       val = VDEF_OP (ptr->mayuses, ptr->mayuse_index);
1041       if (++(ptr->mayuse_index) >= VDEF_NUM (ptr->mayuses))
1042         {
1043           ptr->mayuse_index = 0;
1044           ptr->mayuses = ptr->mayuses->next;
1045         }
1046       return val;
1047     }
1048   if (ptr->defs)
1049     {
1050       val = DEF_OP (ptr->defs);
1051       ptr->defs = ptr->defs->next;
1052       return val;
1053     }
1054   if (ptr->vdefs)
1055     {
1056       val = VDEF_RESULT (ptr->vdefs);
1057       ptr->vdefs = ptr->vdefs->next;
1058       return val;
1059     }
1060
1061   ptr->done = true;
1062   return NULL_TREE;
1063
1064 }
1065
1066
1067 /* This functions clears the iterator PTR, and marks it done.  This is normally
1068    used to prevent warnings in the compile about might be uninitialized
1069    components.  */
1070
1071 static inline void
1072 clear_and_done_ssa_iter (ssa_op_iter *ptr)
1073 {
1074   ptr->defs = NULL;
1075   ptr->uses = NULL;
1076   ptr->vuses = NULL;
1077   ptr->vdefs = NULL;
1078   ptr->mayuses = NULL;
1079   ptr->iter_type = ssa_op_iter_none;
1080   ptr->phi_i = 0;
1081   ptr->num_phi = 0;
1082   ptr->phi_stmt = NULL_TREE;
1083   ptr->done = true;
1084   ptr->vuse_index = 0;
1085   ptr->mayuse_index = 0;
1086 }
1087
1088 /* Initialize the iterator PTR to the virtual defs in STMT.  */
1089 static inline void
1090 op_iter_init (ssa_op_iter *ptr, tree stmt, int flags)
1091 {
1092 #ifdef ENABLE_CHECKING
1093   gcc_assert (stmt_ann (stmt));
1094 #endif
1095
1096   ptr->defs = (flags & SSA_OP_DEF) ? DEF_OPS (stmt) : NULL;
1097   ptr->uses = (flags & SSA_OP_USE) ? USE_OPS (stmt) : NULL;
1098   ptr->vuses = (flags & SSA_OP_VUSE) ? VUSE_OPS (stmt) : NULL;
1099   ptr->vdefs = (flags & SSA_OP_VDEF) ? VDEF_OPS (stmt) : NULL;
1100   ptr->mayuses = (flags & SSA_OP_VMAYUSE) ? VDEF_OPS (stmt) : NULL;
1101   ptr->done = false;
1102
1103   ptr->phi_i = 0;
1104   ptr->num_phi = 0;
1105   ptr->phi_stmt = NULL_TREE;
1106   ptr->vuse_index = 0;
1107   ptr->mayuse_index = 0;
1108 }
1109
1110 /* Initialize iterator PTR to the use operands in STMT based on FLAGS. Return
1111    the first use.  */
1112 static inline use_operand_p
1113 op_iter_init_use (ssa_op_iter *ptr, tree stmt, int flags)
1114 {
1115   gcc_assert ((flags & SSA_OP_ALL_DEFS) == 0);
1116   op_iter_init (ptr, stmt, flags);
1117   ptr->iter_type = ssa_op_iter_use;
1118   return op_iter_next_use (ptr);
1119 }
1120
1121 /* Initialize iterator PTR to the def operands in STMT based on FLAGS. Return
1122    the first def.  */
1123 static inline def_operand_p
1124 op_iter_init_def (ssa_op_iter *ptr, tree stmt, int flags)
1125 {
1126   gcc_assert ((flags & SSA_OP_ALL_USES) == 0);
1127   op_iter_init (ptr, stmt, flags);
1128   ptr->iter_type = ssa_op_iter_def;
1129   return op_iter_next_def (ptr);
1130 }
1131
1132 /* Initialize iterator PTR to the operands in STMT based on FLAGS. Return
1133    the first operand as a tree.  */
1134 static inline tree
1135 op_iter_init_tree (ssa_op_iter *ptr, tree stmt, int flags)
1136 {
1137   op_iter_init (ptr, stmt, flags);
1138   ptr->iter_type = ssa_op_iter_tree;
1139   return op_iter_next_tree (ptr);
1140 }
1141
1142 /* Get the next iterator mustdef value for PTR, returning the mustdef values in
1143    KILL and DEF.  */
1144 static inline void
1145 op_iter_next_vdef (vuse_vec_p *use, def_operand_p *def, 
1146                          ssa_op_iter *ptr)
1147 {
1148 #ifdef ENABLE_CHECKING
1149   gcc_assert (ptr->iter_type == ssa_op_iter_vdef);
1150 #endif
1151   if (ptr->mayuses)
1152     {
1153       *def = VDEF_RESULT_PTR (ptr->mayuses);
1154       *use = VDEF_VECT (ptr->mayuses);
1155       ptr->mayuses = ptr->mayuses->next;
1156       return;
1157     }
1158
1159   *def = NULL_DEF_OPERAND_P;
1160   *use = NULL;
1161   ptr->done = true;
1162   return;
1163 }
1164
1165
1166 static inline void
1167 op_iter_next_mustdef (use_operand_p *use, def_operand_p *def, 
1168                          ssa_op_iter *ptr)
1169 {
1170   vuse_vec_p vp;
1171   op_iter_next_vdef (&vp, def, ptr);
1172   if (vp != NULL)
1173     {
1174       gcc_assert (VUSE_VECT_NUM_ELEM (*vp) == 1);
1175       *use = VUSE_ELEMENT_PTR (*vp, 0);
1176     }
1177   else
1178     *use = NULL_USE_OPERAND_P;
1179 }
1180
1181 /* Initialize iterator PTR to the operands in STMT.  Return the first operands
1182    in USE and DEF.  */
1183 static inline void
1184 op_iter_init_vdef (ssa_op_iter *ptr, tree stmt, vuse_vec_p *use, 
1185                      def_operand_p *def)
1186 {
1187   gcc_assert (TREE_CODE (stmt) != PHI_NODE);
1188
1189   op_iter_init (ptr, stmt, SSA_OP_VMAYUSE);
1190   ptr->iter_type = ssa_op_iter_vdef;
1191   op_iter_next_vdef (use, def, ptr);
1192 }
1193
1194
1195 /* If there is a single operand in STMT matching FLAGS, return it.  Otherwise
1196    return NULL.  */
1197 static inline tree
1198 single_ssa_tree_operand (tree stmt, int flags)
1199 {
1200   tree var;
1201   ssa_op_iter iter;
1202
1203   var = op_iter_init_tree (&iter, stmt, flags);
1204   if (op_iter_done (&iter))
1205     return NULL_TREE;
1206   op_iter_next_tree (&iter);
1207   if (op_iter_done (&iter))
1208     return var;
1209   return NULL_TREE;
1210 }
1211
1212
1213 /* If there is a single operand in STMT matching FLAGS, return it.  Otherwise
1214    return NULL.  */
1215 static inline use_operand_p
1216 single_ssa_use_operand (tree stmt, int flags)
1217 {
1218   use_operand_p var;
1219   ssa_op_iter iter;
1220
1221   var = op_iter_init_use (&iter, stmt, flags);
1222   if (op_iter_done (&iter))
1223     return NULL_USE_OPERAND_P;
1224   op_iter_next_use (&iter);
1225   if (op_iter_done (&iter))
1226     return var;
1227   return NULL_USE_OPERAND_P;
1228 }
1229
1230
1231
1232 /* If there is a single operand in STMT matching FLAGS, return it.  Otherwise
1233    return NULL.  */
1234 static inline def_operand_p
1235 single_ssa_def_operand (tree stmt, int flags)
1236 {
1237   def_operand_p var;
1238   ssa_op_iter iter;
1239
1240   var = op_iter_init_def (&iter, stmt, flags);
1241   if (op_iter_done (&iter))
1242     return NULL_DEF_OPERAND_P;
1243   op_iter_next_def (&iter);
1244   if (op_iter_done (&iter))
1245     return var;
1246   return NULL_DEF_OPERAND_P;
1247 }
1248
1249
1250 /* Return true if there are zero operands in STMT matching the type 
1251    given in FLAGS.  */
1252 static inline bool
1253 zero_ssa_operands (tree stmt, int flags)
1254 {
1255   ssa_op_iter iter;
1256
1257   op_iter_init_tree (&iter, stmt, flags);
1258   return op_iter_done (&iter);
1259 }
1260
1261
1262 /* Return the number of operands matching FLAGS in STMT.  */
1263 static inline int
1264 num_ssa_operands (tree stmt, int flags)
1265 {
1266   ssa_op_iter iter;
1267   tree t;
1268   int num = 0;
1269
1270   FOR_EACH_SSA_TREE_OPERAND (t, stmt, iter, flags)
1271     num++;
1272   return num;
1273 }
1274
1275
1276 /* Delink all immediate_use information for STMT.  */
1277 static inline void
1278 delink_stmt_imm_use (tree stmt)
1279 {
1280    ssa_op_iter iter;
1281    use_operand_p use_p;
1282
1283    if (ssa_operands_active ())
1284      FOR_EACH_SSA_USE_OPERAND (use_p, stmt, iter, SSA_OP_ALL_USES)
1285        delink_imm_use (use_p);
1286 }
1287
1288
1289 /* This routine will compare all the operands matching FLAGS in STMT1 to those
1290    in STMT2.  TRUE is returned if they are the same.  STMTs can be NULL.  */
1291 static inline bool
1292 compare_ssa_operands_equal (tree stmt1, tree stmt2, int flags)
1293 {
1294   ssa_op_iter iter1, iter2;
1295   tree op1 = NULL_TREE;
1296   tree op2 = NULL_TREE;
1297   bool look1, look2;
1298
1299   if (stmt1 == stmt2)
1300     return true;
1301
1302   look1 = stmt1 && stmt_ann (stmt1);
1303   look2 = stmt2 && stmt_ann (stmt2);
1304
1305   if (look1)
1306     {
1307       op1 = op_iter_init_tree (&iter1, stmt1, flags);
1308       if (!look2)
1309         return op_iter_done (&iter1);
1310     }
1311   else
1312     clear_and_done_ssa_iter (&iter1);
1313
1314   if (look2)
1315     {
1316       op2 = op_iter_init_tree (&iter2, stmt2, flags);
1317       if (!look1)
1318         return op_iter_done (&iter2);
1319     }
1320   else
1321     clear_and_done_ssa_iter (&iter2);
1322
1323   while (!op_iter_done (&iter1) && !op_iter_done (&iter2))
1324     {
1325       if (op1 != op2)
1326         return false;
1327       op1 = op_iter_next_tree (&iter1);
1328       op2 = op_iter_next_tree (&iter2);
1329     }
1330
1331   return (op_iter_done (&iter1) && op_iter_done (&iter2));
1332 }
1333
1334
1335 /* If there is a single DEF in the PHI node which matches FLAG, return it.
1336    Otherwise return NULL_DEF_OPERAND_P.  */
1337 static inline tree
1338 single_phi_def (tree stmt, int flags)
1339 {
1340   tree def = PHI_RESULT (stmt);
1341   if ((flags & SSA_OP_DEF) && is_gimple_reg (def)) 
1342     return def;
1343   if ((flags & SSA_OP_VIRTUAL_DEFS) && !is_gimple_reg (def))
1344     return def;
1345   return NULL_TREE;
1346 }
1347
1348 /* Initialize the iterator PTR for uses matching FLAGS in PHI.  FLAGS should
1349    be either SSA_OP_USES or SSA_OP_VIRTUAL_USES.  */
1350 static inline use_operand_p
1351 op_iter_init_phiuse (ssa_op_iter *ptr, tree phi, int flags)
1352 {
1353   tree phi_def = PHI_RESULT (phi);
1354   int comp;
1355
1356   clear_and_done_ssa_iter (ptr);
1357   ptr->done = false;
1358
1359   gcc_assert ((flags & (SSA_OP_USE | SSA_OP_VIRTUAL_USES)) != 0);
1360
1361   comp = (is_gimple_reg (phi_def) ? SSA_OP_USE : SSA_OP_VIRTUAL_USES);
1362     
1363   /* If the PHI node doesn't the operand type we care about, we're done.  */
1364   if ((flags & comp) == 0)
1365     {
1366       ptr->done = true;
1367       return NULL_USE_OPERAND_P;
1368     }
1369
1370   ptr->phi_stmt = phi;
1371   ptr->num_phi = PHI_NUM_ARGS (phi);
1372   ptr->iter_type = ssa_op_iter_use;
1373   return op_iter_next_use (ptr);
1374 }
1375
1376
1377 /* Start an iterator for a PHI definition.  */
1378
1379 static inline def_operand_p
1380 op_iter_init_phidef (ssa_op_iter *ptr, tree phi, int flags)
1381 {
1382   tree phi_def = PHI_RESULT (phi);
1383   int comp;
1384
1385   clear_and_done_ssa_iter (ptr);
1386   ptr->done = false;
1387
1388   gcc_assert ((flags & (SSA_OP_DEF | SSA_OP_VIRTUAL_DEFS)) != 0);
1389
1390   comp = (is_gimple_reg (phi_def) ? SSA_OP_DEF : SSA_OP_VIRTUAL_DEFS);
1391     
1392   /* If the PHI node doesn't the operand type we care about, we're done.  */
1393   if ((flags & comp) == 0)
1394     {
1395       ptr->done = true;
1396       return NULL_USE_OPERAND_P;
1397     }
1398
1399   ptr->iter_type = ssa_op_iter_def;
1400   /* The first call to op_iter_next_def will terminate the iterator since
1401      all the fields are NULL.  Simply return the result here as the first and
1402      therefore only result.  */
1403   return PHI_RESULT_PTR (phi);
1404 }
1405
1406 /* Return true is IMM has reached the end of the immediate use stmt list.  */
1407
1408 static inline bool
1409 end_imm_use_stmt_p (imm_use_iterator *imm)
1410 {
1411   return (imm->imm_use == imm->end_p);
1412 }
1413
1414 /* Finished the traverse of an immediate use stmt list IMM by removing the
1415    placeholder node from the list.  */
1416
1417 static inline void
1418 end_imm_use_stmt_traverse (imm_use_iterator *imm)
1419 {
1420   delink_imm_use (&(imm->iter_node));
1421 }
1422
1423 /* Immediate use traversal of uses within a stmt require that all the
1424    uses on a stmt be sequentially listed.  This routine is used to build up
1425    this sequential list by adding USE_P to the end of the current list 
1426    currently delimited by HEAD and LAST_P.  The new LAST_P value is 
1427    returned.  */
1428
1429 static inline use_operand_p
1430 move_use_after_head (use_operand_p use_p, use_operand_p head, 
1431                       use_operand_p last_p)
1432 {
1433   gcc_assert (USE_FROM_PTR (use_p) == USE_FROM_PTR (head));
1434   /* Skip head when we find it.  */
1435   if (use_p != head)
1436     {
1437       /* If use_p is already linked in after last_p, continue.  */
1438       if (last_p->next == use_p)
1439         last_p = use_p;
1440       else
1441         {
1442           /* Delink from current location, and link in at last_p.  */
1443           delink_imm_use (use_p);
1444           link_imm_use_to_list (use_p, last_p);
1445           last_p = use_p;
1446         }
1447     }
1448   return last_p;
1449 }
1450
1451
1452 /* This routine will relink all uses with the same stmt as HEAD into the list
1453    immediately following HEAD for iterator IMM.  */
1454
1455 static inline void
1456 link_use_stmts_after (use_operand_p head, imm_use_iterator *imm)
1457 {
1458   use_operand_p use_p;
1459   use_operand_p last_p = head;
1460   tree head_stmt = USE_STMT (head);
1461   tree use = USE_FROM_PTR (head);
1462   ssa_op_iter op_iter;
1463   int flag;
1464
1465   /* Only look at virtual or real uses, depending on the type of HEAD.  */
1466   flag = (is_gimple_reg (use) ? SSA_OP_USE : SSA_OP_VIRTUAL_USES);
1467
1468   if (TREE_CODE (head_stmt) == PHI_NODE)
1469     {
1470       FOR_EACH_PHI_ARG (use_p, head_stmt, op_iter, flag)
1471         if (USE_FROM_PTR (use_p) == use)
1472           last_p = move_use_after_head (use_p, head, last_p);
1473     }
1474   else
1475     {
1476       FOR_EACH_SSA_USE_OPERAND (use_p, head_stmt, op_iter, flag)
1477         if (USE_FROM_PTR (use_p) == use)
1478           last_p = move_use_after_head (use_p, head, last_p);
1479     }
1480   /* LInk iter node in after last_p.  */
1481   if (imm->iter_node.prev != NULL)
1482     delink_imm_use (&imm->iter_node);
1483   link_imm_use_to_list (&(imm->iter_node), last_p);
1484 }
1485
1486 /* Initialize IMM to traverse over uses of VAR.  Return the first statement.  */
1487 static inline tree
1488 first_imm_use_stmt (imm_use_iterator *imm, tree var)
1489 {
1490   gcc_assert (TREE_CODE (var) == SSA_NAME);
1491   
1492   imm->end_p = &(SSA_NAME_IMM_USE_NODE (var));
1493   imm->imm_use = imm->end_p->next;
1494   imm->next_imm_name = NULL_USE_OPERAND_P;
1495
1496   /* iter_node is used as a marker within the immediate use list to indicate
1497      where the end of the current stmt's uses are.  Initialize it to NULL
1498      stmt and use, which indicates a marker node.  */
1499   imm->iter_node.prev = NULL_USE_OPERAND_P;
1500   imm->iter_node.next = NULL_USE_OPERAND_P;
1501   imm->iter_node.stmt = NULL_TREE;
1502   imm->iter_node.use = NULL_USE_OPERAND_P;
1503
1504   if (end_imm_use_stmt_p (imm))
1505     return NULL_TREE;
1506
1507   link_use_stmts_after (imm->imm_use, imm);
1508
1509   return USE_STMT (imm->imm_use);
1510 }
1511
1512 /* Bump IMM to the next stmt which has a use of var.  */
1513
1514 static inline tree
1515 next_imm_use_stmt (imm_use_iterator *imm)
1516 {
1517   imm->imm_use = imm->iter_node.next;
1518   if (end_imm_use_stmt_p (imm))
1519     {
1520       if (imm->iter_node.prev != NULL)
1521         delink_imm_use (&imm->iter_node);
1522       return NULL_TREE;
1523     }
1524
1525   link_use_stmts_after (imm->imm_use, imm);
1526   return USE_STMT (imm->imm_use);
1527
1528 }
1529
1530 /* This routine will return the first use on the stmt IMM currently refers
1531    to.  */
1532
1533 static inline use_operand_p
1534 first_imm_use_on_stmt (imm_use_iterator *imm)
1535 {
1536   imm->next_imm_name = imm->imm_use->next;
1537   return imm->imm_use;
1538 }
1539
1540 /*  Return TRUE if the last use on the stmt IMM refers to has been visited.  */
1541
1542 static inline bool
1543 end_imm_use_on_stmt_p (imm_use_iterator *imm)
1544 {
1545   return (imm->imm_use == &(imm->iter_node));
1546 }
1547
1548 /* Bump to the next use on the stmt IMM refers to, return NULL if done.  */
1549
1550 static inline use_operand_p
1551 next_imm_use_on_stmt (imm_use_iterator *imm)
1552 {
1553   imm->imm_use = imm->next_imm_name;
1554   if (end_imm_use_on_stmt_p (imm))
1555     return NULL_USE_OPERAND_P;
1556   else
1557     {
1558       imm->next_imm_name = imm->imm_use->next;
1559       return imm->imm_use;
1560     }
1561 }
1562
1563 /* Return true if VAR cannot be modified by the program.  */
1564
1565 static inline bool
1566 unmodifiable_var_p (tree var)
1567 {
1568   if (TREE_CODE (var) == SSA_NAME)
1569     var = SSA_NAME_VAR (var);
1570
1571   if (MTAG_P (var))
1572     return TREE_READONLY (var) && (TREE_STATIC (var) || MTAG_GLOBAL (var));
1573
1574   return TREE_READONLY (var) && (TREE_STATIC (var) || DECL_EXTERNAL (var));
1575 }
1576
1577 /* Return true if REF, an ARRAY_REF, has an INDIRECT_REF somewhere in it.  */
1578
1579 static inline bool
1580 array_ref_contains_indirect_ref (tree ref)
1581 {
1582   gcc_assert (TREE_CODE (ref) == ARRAY_REF);
1583
1584   do {
1585     ref = TREE_OPERAND (ref, 0);
1586   } while (handled_component_p (ref));
1587
1588   return TREE_CODE (ref) == INDIRECT_REF;
1589 }
1590
1591 /* Return true if REF, a handled component reference, has an ARRAY_REF
1592    somewhere in it.  */
1593
1594 static inline bool
1595 ref_contains_array_ref (tree ref)
1596 {
1597   gcc_assert (handled_component_p (ref));
1598
1599   do {
1600     if (TREE_CODE (ref) == ARRAY_REF)
1601       return true;
1602     ref = TREE_OPERAND (ref, 0);
1603   } while (handled_component_p (ref));
1604
1605   return false;
1606 }
1607
1608 /* Given a variable VAR, lookup and return a pointer to the list of
1609    subvariables for it.  */
1610
1611 static inline subvar_t *
1612 lookup_subvars_for_var (tree var)
1613 {
1614   var_ann_t ann = var_ann (var);
1615   gcc_assert (ann);
1616   return &ann->subvars;
1617 }
1618
1619 /* Given a variable VAR, return a linked list of subvariables for VAR, or
1620    NULL, if there are no subvariables.  */
1621
1622 static inline subvar_t
1623 get_subvars_for_var (tree var)
1624 {
1625   subvar_t subvars;
1626
1627   gcc_assert (SSA_VAR_P (var));  
1628   
1629   if (TREE_CODE (var) == SSA_NAME)
1630     subvars = *(lookup_subvars_for_var (SSA_NAME_VAR (var)));
1631   else
1632     subvars = *(lookup_subvars_for_var (var));
1633   return subvars;
1634 }
1635
1636 /* Return the subvariable of VAR at offset OFFSET.  */
1637
1638 static inline tree
1639 get_subvar_at (tree var, unsigned HOST_WIDE_INT offset)
1640 {
1641   subvar_t sv;
1642
1643   for (sv = get_subvars_for_var (var); sv; sv = sv->next)
1644     if (SFT_OFFSET (sv->var) == offset)
1645       return sv->var;
1646
1647   return NULL_TREE;
1648 }
1649
1650 /* Return true if V is a tree that we can have subvars for.
1651    Normally, this is any aggregate type.  Also complex
1652    types which are not gimple registers can have subvars.  */
1653
1654 static inline bool
1655 var_can_have_subvars (tree v)
1656 {
1657   /* Volatile variables should never have subvars.  */
1658   if (TREE_THIS_VOLATILE (v))
1659     return false;
1660
1661   /* Non decls or memory tags can never have subvars.  */
1662   if (!DECL_P (v) || MTAG_P (v))
1663     return false;
1664
1665   /* Aggregates can have subvars.  */
1666   if (AGGREGATE_TYPE_P (TREE_TYPE (v)))
1667     return true;
1668
1669   /* Complex types variables which are not also a gimple register can
1670     have subvars. */
1671   if (TREE_CODE (TREE_TYPE (v)) == COMPLEX_TYPE
1672       && !DECL_GIMPLE_REG_P (v))
1673     return true;
1674
1675   return false;
1676 }
1677
1678   
1679 /* Return true if OFFSET and SIZE define a range that overlaps with some
1680    portion of the range of SV, a subvar.  If there was an exact overlap,
1681    *EXACT will be set to true upon return. */
1682
1683 static inline bool
1684 overlap_subvar (unsigned HOST_WIDE_INT offset, unsigned HOST_WIDE_INT size,
1685                 tree sv,  bool *exact)
1686 {
1687   /* There are three possible cases of overlap.
1688      1. We can have an exact overlap, like so:   
1689      |offset, offset + size             |
1690      |sv->offset, sv->offset + sv->size |
1691      
1692      2. We can have offset starting after sv->offset, like so:
1693      
1694            |offset, offset + size              |
1695      |sv->offset, sv->offset + sv->size  |
1696
1697      3. We can have offset starting before sv->offset, like so:
1698      
1699      |offset, offset + size    |
1700        |sv->offset, sv->offset + sv->size|
1701   */
1702
1703   if (exact)
1704     *exact = false;
1705   if (offset == SFT_OFFSET (sv) && size == SFT_SIZE (sv))
1706     {
1707       if (exact)
1708         *exact = true;
1709       return true;
1710     }
1711   else if (offset >= SFT_OFFSET (sv) 
1712            && offset < (SFT_OFFSET (sv) + SFT_SIZE (sv)))
1713     {
1714       return true;
1715     }
1716   else if (offset < SFT_OFFSET (sv) 
1717            && (size > SFT_OFFSET (sv) - offset))
1718     {
1719       return true;
1720     }
1721   return false;
1722
1723 }
1724
1725 /* Return the memory tag associated with symbol SYM.  */
1726
1727 static inline tree
1728 symbol_mem_tag (tree sym)
1729 {
1730   tree tag = get_var_ann (sym)->symbol_mem_tag;
1731
1732 #if defined ENABLE_CHECKING
1733   if (tag)
1734     gcc_assert (TREE_CODE (tag) == SYMBOL_MEMORY_TAG);
1735 #endif
1736
1737   return tag;
1738 }
1739
1740
1741 /* Set the memory tag associated with symbol SYM.  */
1742
1743 static inline void
1744 set_symbol_mem_tag (tree sym, tree tag)
1745 {
1746 #if defined ENABLE_CHECKING
1747   if (tag)
1748     gcc_assert (TREE_CODE (tag) == SYMBOL_MEMORY_TAG);
1749 #endif
1750
1751   get_var_ann (sym)->symbol_mem_tag = tag;
1752 }
1753
1754 /* Get the value handle of EXPR.  This is the only correct way to get
1755    the value handle for a "thing".  If EXPR does not have a value
1756    handle associated, it returns NULL_TREE.  
1757    NB: If EXPR is min_invariant, this function is *required* to return
1758    EXPR.  */
1759
1760 static inline tree
1761 get_value_handle (tree expr)
1762 {
1763   if (TREE_CODE (expr) == SSA_NAME)
1764     return SSA_NAME_VALUE (expr);
1765   else if (DECL_P (expr) || TREE_CODE (expr) == TREE_LIST
1766            || TREE_CODE (expr) == CONSTRUCTOR)
1767     {
1768       tree_ann_common_t ann = tree_common_ann (expr);
1769       return ((ann) ? ann->value_handle : NULL_TREE);
1770     }
1771   else if (is_gimple_min_invariant (expr))
1772     return expr;
1773   else if (EXPR_P (expr))
1774     {
1775       tree_ann_common_t ann = tree_common_ann (expr);
1776       return ((ann) ? ann->value_handle : NULL_TREE);
1777     }
1778   else
1779     gcc_unreachable ();
1780 }
1781
1782 /* Accessor to tree-ssa-operands.c caches.  */
1783 static inline struct ssa_operands *
1784 gimple_ssa_operands (struct function *fun)
1785 {
1786   return &fun->gimple_df->ssa_operands;
1787 }
1788
1789 /* Map describing reference statistics for function FN.  */
1790 static inline struct mem_ref_stats_d *
1791 gimple_mem_ref_stats (struct function *fn)
1792 {
1793   return &fn->gimple_df->mem_ref_stats;
1794 }
1795 #endif /* _TREE_FLOW_INLINE_H  */